(57)【要約】      （修正有）【課題】車内において顔付近の手入れを行う場合の利便性を向上させることが可能な表示装置を提供する。【解決手段】表示装置１は、車両搭乗員の頭部を撮像する車内カメラ１０にて撮像された画像を表示部２２により表示させるものであって、操作部２１やマイク３０への操作が受け付けられて表示部２２の表示状態が制御された場合、制御時点の前及び後の少なくとも一方の所定時間において検出された顔の特定部位と手との位置関係と制御の際に受け付けられた操作内容とセットで記憶する記憶部５６を備える。カメラ制御部５１は、操作部２１やマイク３０への操作がなく、且つ、記憶部５６により記憶される頭部の特定部位と手との位置関係が検出された場合、位置関係とセットで記憶される操作内容に応じて車内カメラ１０を制御して表示部２２により表示される車両搭乗員の頭部の画像の表示状態を制御する。【選択図】図２
2018098529.tif 000002
【特許請求の範囲】
【請求項１】
車両搭乗員の頭部を撮像する車内カメラにて撮像された画像を表示手段により表示させる表示装置であって、
車両搭乗員からの操作を受け付ける操作手段と、
前記操作手段に対する操作内容に応じて、前記車内カメラにより撮像されて前記表示手段により表示される車両搭乗員の頭部の画像の表示状態を制御する制御手段と、
前記車内カメラからの撮像画像に基づいて、頭部の特定部位と手との位置関係を検出する検出手段と、
前記操作手段への操作が受け付けられて前記制御手段により前記表示状態が制御された場合、当該制御時点の前及び後の少なくとも一方の所定時間において前記検出手段により検出された位置関係と当該制御の際に受け付けられた操作内容とセットで記憶する記憶手段と、を備え、
前記制御手段は、前記操作手段への操作がなく、且つ、前記記憶手段により記憶される頭部の特定部位と手との位置関係が前記検出手段により検出された場合、当該位置関係とセットで記憶される操作内容に応じて前記表示手段により表示される車両搭乗員の頭部の画像の表示状態を制御する
ことを特徴とする表示装置。
【請求項２】
前記検出手段は、前記車内カメラからの撮像画像に基づいて、顔の特定部位の形状変化を検出し、
前記記憶手段は、前記操作手段への操作が受け付けられて前記制御手段により前記表示状態が制御された場合、当該制御時点の前及び後の少なくとも一方の所定時間において前記検出手段により検出された顔の特定部位の形状変化と当該制御の際に受け付けられた操作内容とセットで記憶し、
前記制御手段は、前記操作手段への操作がなく、且つ、前記記憶手段により記憶される顔の特定部位の形状変化が前記検出手段により検出された場合、当該形状変化とセットで記憶される操作内容に応じて前記表示手段により表示される車両搭乗員の顔の画像の表示状態を制御する
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
車両内を照明する照明手段をさらに備え、
前記記憶手段は、前記操作手段への操作が受け付けられて前記制御手段により前記表示状態が制御された場合、当該制御時点の前及び後の少なくとも一方の所定時間において前記検出手段により検出された位置関係と当該制御の際に受け付けられた操作内容とに加えて、当該制御時点における前記照明手段の照明状態を記憶し、
前記制御手段は、前記操作手段への操作がなく、且つ、前記記憶手段により記憶される頭部の特定部位と手との位置関係が前記検出手段により検出された場合、当該位置関係とセットで記憶される操作内容に応じて前記表示手段により表示される車両搭乗員の頭部の画像の表示状態を制御すると共に、当該位置関係とセットで記憶される照明状態となるように前記照明手段を制御する
ことを特徴とする請求項１又は請求項２のいずれかに記載の表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置に関する。
【背景技術】
【０００２】
近年、運転者が運転操作することなく車両が目的地等まで走行される自動運転技術が開発されつつある（例えば特許文献１〜４参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１６−１８２９０６号公報
【特許文献２】特開２０１６−１８２８９１号公報
【特許文献３】特開２０１６−１３７８１９号公報
【特許文献４】特開２０１６−９５６２７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
自動運転において運転者は運転を行う必要がなくなることから、例えば化粧を行ったり髭や髪を整えたりなど、顔付近の手入れを行うことが考えらえる。本件発明者らは、基本的に車内に大きめの鏡がないことから、搭乗員の顔を撮影して表示することを検討している。ここで、顔付近の手入れを行う場合には顔を含む頭部の特定箇所を拡大表示することなどがより好ましいが、拡大表示などの表示制御する操作を行いながら顔付近の手入れを行うことは決して容易ではない。
【０００５】
本発明は、このような課題を解決するためになされたものであり、その目的とするところは、車内において顔付近の手入れを行う場合の利便性を向上させることが可能な表示装置を提供することにある。
【課題を解決するための手段】
【０００６】
本発明に係る表示装置は、車両搭乗員の頭部を撮像する車内カメラにて撮像された画像を表示手段により表示させる表示装置であって、車両搭乗員からの操作を受け付ける操作手段と、前記操作手段に対する操作内容に応じて、前記車内カメラにより撮像されて前記表示手段により表示される車両搭乗員の頭部の画像の表示状態を制御する制御手段と、前記車内カメラからの撮像画像に基づいて、頭部の特定部位と手との位置関係を検出する検出手段と、前記操作手段への操作が受け付けられて前記制御手段により前記表示状態が制御された場合、当該制御時点の前及び後の少なくとも一方の所定時間において前記検出手段により検出された位置関係と当該制御の際に受け付けられた操作内容とセットで記憶する記憶手段と、を備え、前記制御手段は、前記操作手段への操作がなく、且つ、前記記憶手段により記憶される頭部の特定部位と手との位置関係が前記検出手段により検出された場合、当該位置関係とセットで記憶される操作内容に応じて前記表示手段により表示される車両搭乗員の頭部の画像の表示状態を制御することを特徴とする。
【０００７】
本発明に係る表示装置によれば、操作が受け付けられて車両搭乗員の頭部の画像の表示状態が制御された場合、頭部の特定部位と手との位置関係と当該制御の際に受け付けられた操作内容とセットで記憶し、操作手段への操作がなく、且つ、記憶される頭部の特定部位と手との位置関係が検出された場合、当該位置関係とセットで記憶される操作内容に応じて車両搭乗員の頭部の画像の表示状態を制御する。このため、初回に、操作を行って頭部の画像の表示状態を制御したときの頭部の特定部位と手との位置関係が記憶されると、その後は頭部の特定部位と手との位置関係が再現されると、表示状態が制御されることとなる。このため、操作を要することなく顔付近の手入れを行う際の動作に応じて表示状態が制御されることとなり、車内において顔付近の手入れを行う場合の利便性を向上させることができる。
【０００８】
また、本発明に係る表示装置において、前記検出手段は、前記車内カメラからの撮像画像に基づいて、顔の特定部位の形状変化を検出し、前記記憶手段は、前記操作手段への操作が受け付けられて前記制御手段により前記表示状態が制御された場合、当該制御時点の前及び後の少なくとも一方の所定時間において前記検出手段により検出された顔の特定部位の形状変化と当該制御の際に受け付けられた操作内容とセットで記憶し、前記制御手段は、前記操作手段への操作がなく、且つ、前記記憶手段により記憶される顔の特定部位の形状変化が前記検出手段により検出された場合、当該形状変化とセットで記憶される操作内容に応じて前記表示手段により表示される車両搭乗員の顔の画像の表示状態を制御することが好ましい。
【０００９】
この表示装置によれば、操作が受け付けられて車両搭乗員の頭部の画像の表示状態が制御された場合、顔の特定部位の形状変化と当該制御の際に受け付けられた操作内容とセットで記憶し、操作手段への操作がなく、且つ、記憶される顔の特定部位の形状変化が検出された場合、当該位置関係とセットで記憶される操作内容に応じて車両搭乗員の頭部の画像の表示状態を制御する。このため、初回に、操作を行って顔の画像の表示状態を制御したときの顔の特定部位の形状変化が記憶されると、その後は顔の特定部位の形状変化が再現されると、表示状態が制御されることとなる。このため、操作を要することなく顔付近の手入れを行う際の顔の変化に応じて表示状態が制御されることとなり、車内において顔付近の手入れを行う場合の利便性を向上させることができる。
【００１０】
また、本発明に係る表示装置において、車両内を照明する照明手段をさらに備え、前記記憶手段は、前記操作手段への操作が受け付けられて前記制御手段により前記表示状態が制御された場合、当該制御時点の前及び後の少なくとも一方の所定時間において前記検出手段により検出された位置関係と当該制御の際に受け付けられた操作内容とに加えて、当該制御時点における前記照明手段の照明状態を記憶し、前記制御手段は、前記操作手段への操作がなく、且つ、前記記憶手段により記憶される頭部の特定部位と手との位置関係が前記検出手段により検出された場合、当該位置関係とセットで記憶される操作内容に応じて前記表示手段により表示される車両搭乗員の頭部の画像の表示状態を制御すると共に、当該位置関係とセットで記憶される照明状態となるように前記照明手段を制御することが好ましい。
【００１１】
この表示装置によれば、位置関係と操作内容とに加えて照明状態を記憶するため、初回に、記憶が行われた後に頭部の特定部位と手との位置関係が再現されると、表示状態のみならず照明状態についても制御されることとなる。このため、操作を要することなく顔付近の手入れを行う際の動作に応じて表示状態及び照明状態が制御されることとなり、車内において顔付近の手入れを行う場合の利便性を向上させることができる。
【発明の効果】
【００１２】
本発明によれば、車内において顔付近の手入れを行う場合の利便性を向上させることが可能な表示装置を提供することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態に係る表示装置を示す概略構成図である。
【図２】図１に示した表示装置のブロック図である。
【図３】本実施形態に係る表示装置による表示・照明制御方法を示す第１のフローチャートである。
【図４】本実施形態に係る表示装置による表示・照明制御方法を示す第２のフローチャートである。
【図５】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第１正面図である。
【図６】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第２正面図である。
【図７】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第３正面図である。
【図８】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第４正面図である。
【図９】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第５正面図である。
【図１０】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第６正面図である。
【図１１】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第７正面図である。
【図１２】本実施形態に係る表示装置の表示制御の様子を示す操作表示部の第８正面図である。
【発明を実施するための形態】
【００１４】
以下、本発明を好適な実施形態に沿って説明する。なお、本発明は以下に示す実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲において適宜変更可能である。また、以下に示す実施形態においては、一部構成の図示や説明を省略している箇所があるが、省略された技術の詳細については、以下に説明する内容と矛盾点が発生しない範囲内において、適宜公知又は周知の技術が適用されていることはいうまでもない。
【００１５】
図１は、本発明の実施形態に係る表示装置１を示す概略構成図である。図１に示すように、本実施形態に係る表示装置１は、車両搭乗員の頭部を撮像し、撮像された搭乗員の頭部の画像を表示させるものであって、車内カメラ１０と、操作表示部２０と、マイク（操作手段）３０と、照明装置（照明手段）４０と、制御部５０とを備えている。
【００１６】
車内カメラ１０は、車両搭乗員の頭部を撮像するカメラであって、例えば運転席の正面に設けられている。操作表示部２０は、例えば車両のセンタークラスター付近に設けられるタッチパネル形式の液晶ディスプレイによって構成されている。マイク３０は、車両搭乗員からの音声を入力するものであって、車内カメラ１０と同様に例えば運転席の正面に設けられている。
【００１７】
照明装置４０は、第１照明部４１と第２照明部４２とからなり、第１照明部４１は例えば運転席の上方に設けられ、第２照明部４２は例えば運転席の前方やや下方よりに設けられている。このため、照明装置４０は、運転席に着座する者を上下から照明可能となっている。なお、照明装置４０は、これらに限らず、例えば車両ドアの下側を点灯するフットランプ等であってもよい。また、照明装置４０は１つ以上の個数であれば、その数を問うものではない。加えて、照明装置４０は、操作表示部２０の発光を利用したものであってもよい。
【００１８】
制御部５０は、表示装置１の全体を制御するものであって、車内カメラ１０や操作表示部２０に表示される画像を制御するものである。ここで、自動運転において車両搭乗員は運転を行う必要がなくなることから、例えば化粧を行ったり髭や髪を整えたりなど、顔付近の手入れを行うことが考えらえる。このため、顔付近の手入れを支援すべく、制御部５０は、車内カメラ１０にて撮像された車両搭乗員の頭部の画像を操作表示部２０に表示させる制御を実行する。
【００１９】
図２は、図１に示した表示装置１のブロック図である。図２に示すように操作表示部２０は、車両搭乗員からの操作を受け付ける操作部（操作手段）２１と、車内カメラ１０により撮像された画像を表示する表示部（表示手段）２２とを備えている。また、制御部５０は、カメラ制御部（制御手段）５１と、照明制御部（制御手段）５２と、音声解析部５３とを備えている。
【００２０】
カメラ制御部５１は、車内カメラ１０の光軸や焦点距離を制御するものである。このため、操作表示部２０にはカメラ制御部５１の制御によって調整された位置やズーム度合い等の画像が表示されることとなる。また、照明制御部５２は、照明装置４０の点灯状態を制御するものである。
【００２１】
操作表示部２０の操作部２１は、車内カメラ１０を制御する操作を受け付け可能となっている。このため、車両搭乗員は、操作表示部２０に対して操作を行いながら、車内カメラ１０をカメラ制御部５１によって制御させ、所望の画像を操作表示部２０に表示させることができる。さらに、操作表示部２０の操作部２１は、照明装置４０の点灯状態を制御する操作を受け付け可能となっており、車両搭乗員は、操作部２１への操作によって照明装置４０を点灯させたり消灯させたりすることもできる。さらに、照明装置４０が輝度調整可能なものである場合や複数個のランプのいずれかを点灯可能である場合には、操作部２１への操作によって輝度や点灯させるランプ個数なども制御することができる。
【００２２】
音声解析部５３は、マイク３０を通じて入力された音声を解析するものであり、解析された音声に応じた信号をカメラ制御部５１や照明制御部５２に送信するものである。具体的に音声解析部５３は、Ｓｉｒｉ（登録商標）等の発話解析・認識インターフェースにより構成されている。例えば車両搭乗員が「少し上を映して」と発話すると、音声解析部５３は、これを認識して車内カメラ１０の光軸を所定量上に向ける信号を生成してカメラ制御部５１に送信する。同様に、音声解析部５３は、例えば車両搭乗員が「ズームして」と発話するとこれを認識して車内カメラ１０の焦点距離を長くする信号を生成してカメラ制御部５１に送信する。照明装置４０の制御についても同様である。
【００２３】
ここで、車両搭乗員が操作表示部２０に表示される画像を見ながら顔付近の手入れを行う場合には、特定箇所を拡大表示することなどが好ましい。しかし、拡大表示などの制御操作を行いながら顔付近の手入れを行うことは決して容易ではない。また、この際に照明が暗過ぎて明るくしたい場合には、より一層顔付近の手入れを行うことが容易でなくなる。
【００２４】
そこで、制御部５０は、車内において顔付近の手入れを行う場合の利便性を向上させるために、位置関係検出部（検出手段）５４と、形状変化検出部（検出手段）５５と、記憶部（記憶手段）５６とを備えている。
【００２５】
位置関係検出部５４は、車内カメラ１０からの撮像画像に基づいて、頭部（特に顔）の特定部位と手との位置関係を検出するものである。
【００２６】
ここで、頭部の特定部位は制御部５０によって特定される。例えば制御部５０は、車両搭乗員の頭部を撮影して得られた画像の濃度値を取得し、二値化画像の全体を画像縦方向に走査した場合の濃度値の所定値以上の変化点を取得する。これにより、顔の濃い部分と薄い部分との境界が変化点として抽出される。すなわち、顔の皮膚と眉毛と境界、瞼と眼球（白目部分）との境界などが抽出される。同様に、髪の毛や、唇の影や、鼻の孔なども抽出される。これにより、顔の全体を把握できることから、これらの位置関係から、頬の位置や、おでこの位置等も特定部位として把握することができる。
【００２７】
また、手の位置についても制御部５０によって特定される。例えば制御部５０は、ある箇所を支点（支点は画像内であっても画像外であってもよい）として運動する棒状の物体を特定する。そして、この棒状の物体の先端を手として特定する。また、これに限らず、制御部５０は、手のあらゆる形状の、あらゆる角度からのデータを記憶しており、記憶したデータとのマッチングから手を特定してもよい。
【００２８】
位置関係検出部５４は、上記のように特定された頭部の特定部位と手との位置関係を検出することとなる。なお、頭部の特定部位の検出や手の位置検出については、上記に限らず、公知又は周知の他の手法により行われてもよい。
【００２９】
形状変化検出部５５は、車内カメラ１０からの撮像画像に基づいて顔の特定部位の形状変化を検出するものである。顔の特定部位の検出は上記の通りである。例えば特定部位として口を検出した場合において、制御部５０は、濃度値の所定値以上の変化点を集合させることで、唇の形状を把握することができる。なお、形状変化については、上記手法に限らず、公知又は周知の他の手法により行われてもよい。
【００３０】
記憶部５６は、位置関係検出部５４により検出された位置関係や、形状変化検出部５５により検出された形状変化を記憶するものである。より詳しく説明すると記憶部５６は、操作部２１やマイク３０を通じた車内カメラ１０の操作が受け付けられてカメラ制御部５１により操作表示部２０における車両搭乗員の頭部の画像の表示状態が変化（制御）された場合に、位置関係や形状変化を記憶する。この際、記憶部５６は、表示状態の変化（制御）時点の前後の所定時間を対象に検出された位置関係や形状変化を記憶する。記憶部５６は、位置関係や形状変化を記憶する場合、操作内容とセットでこれらを記憶する。
【００３１】
例えば車両搭乗員が口紅を塗ろうとして、操作部２１に対してズーム操作を行ったとする。この場合、車両搭乗員は、ズーム操作の前後において唇に対して手を所定距離まで近づけることから、このような唇と手との位置関係を、ズーム操作とセットで記憶する。
【００３２】
同様に、車両搭乗員が口紅を塗ろうとして、操作部２１に対してズーム操作を行ったとする。この場合、車両搭乗員は、ズーム操作の前後において口紅を塗るために口をすぼめる動作を行うことがある。このため、このような唇をすぼめた際の唇の形状変化を、ズーム操作とセットで記憶する。
【００３３】
さらに、記憶部５６は、これらに加えて、照明装置４０による照明状態についてもセットで記憶する。すなわち、記憶部５６は、位置関係や形状変化を、操作内容とセットで記憶するにあたり、更に照明装置４０の照明状態を把握し、これをセットで記憶する。具体的に記憶部５６は、第１及び第２照明部４１，４２のそれぞれが点灯状態であるか消灯状態であるかを記憶する。また、これら照明部４１，４２が輝度調整可能なＬＥＤであったり複数個のランプから構成されていたりした場合には、それぞれの照明部４１，４２の明るさの情報についても照明状態として記憶する。
【００３４】
さらに、本実施形態においてカメラ制御部５１は、操作部２１やマイク３０を通じた操作がなく、且つ、記憶部５６により記憶される頭部の特定部位と手との位置関係が位置関係検出部５４により検出された場合、位置関係とセットで記憶される操作内容に応じて車内カメラ１０を制御して表示される車両搭乗員の頭部の画像の表示状態を制御する。すなわち、一度記憶部５６に操作内容と位置関係とがセットで記憶されると、その後はこの位置関係が検出されると操作なしに車内カメラ１０を制御して操作表示部２０の表示状態を変化させることができる。
【００３５】
同様にカメラ制御部５１は、操作部２１やマイク３０を通じた操作がなく、且つ、記憶部５６により記憶される顔の特定部位の形状変化が形状変化検出部５５により検出された場合、当該形状変化とセットで記憶される操作内容に応じて車内カメラ１０を制御して表示される車両搭乗員の頭部の画像の表示状態を制御する。これについても上記と同様に、一度記憶部５６に操作内容と形状変化とがセットで記憶されると、その後はこの形状変化が検出されると操作なしに車内カメラ１０を制御して操作表示部２０の表示状態を変化させることができる。
【００３６】
この際、照明制御部５２も同様に動作する。すなわち、照明制御部５２は、操作部２１やマイク３０を通じた操作がなく、且つ、記憶部５６により記憶される頭部の特定部位と手との位置関係が位置関係検出部５４により検出された場合や、記憶部５６により記憶される顔の特定部位の形状変化が形状変化検出部５５により検出された場合、セットで記憶される照明状態となるように照明装置４０を制御する。これにより、操作なしに照明状態を適切化することができる。
【００３７】
次に、本実施形態に係る表示装置１による表示・照明制御方法を説明する。図３は、本実施形態に係る表示装置１による表示・照明制御方法を示す第１のフローチャートである。なお、図３に示す処理は車両イグニッションスイッチがオフされるなど、装置１への電力供給が断たれるまで繰り返し実行されるものとする。
【００３８】
図３に示すように、まず、制御部５０は、操作表示部２０の操作部２１又はマイク３０を通じて車内カメラ１０の制御操作があったか否かを判断する（Ｓ１）。制御操作が無かったと判断した場合（Ｓ１：ＮＯ）、図３に示す処理は終了する。
【００３９】
一方、制御操作があったと判断した場合（Ｓ１：ＹＥＳ）、制御部５０は、制御操作時の前後所定時間の画像を記憶部５６から抽出する（Ｓ２）。すなわち、記憶部５６は、常時車内カメラ１０の画像を記憶しており、一定時間分の画像データを蓄える構成となっている。このため、制御部５０は、制御操作を検出すると、この操作時点前の所定時間分の画像を抽出すると共に、操作時点の後の所定時間分の画像についても記憶しながら抽出する。
【００４０】
次に、制御部５０は、ステップＳ２で抽出した画像を対象に、頭部の特定部位（眉、眼、鼻、口、頬、前髪位置等）を検出する（Ｓ３）。次いで、制御部５０は、ステップＳ２で抽出した画像を対象に手の位置を検出し、位置関係検出部５４は、頭部の特定部位と手との相対位置（位置関係）を検出する（Ｓ４）。
【００４１】
なお、頭部の特定部位と手との相対位置については、手と最も近い特定部位との相対位置のみを検出してもよいし、手から最も近い特定部位と２番目以降に近い特定部位との相対位置など、手と複数の特定部位との相対位置を検出してもよい。
【００４２】
その後、形状変化検出部５５は、ステップＳ２で抽出した画像を対象に、顔の特定部位の形状変化を検出する（Ｓ５）。次に、制御部５０は、制御操作時点での照明状態を検出する（Ｓ６）。
【００４３】
次いで、記憶部５６は、車内カメラ１０の制御操作、ステップＳ４にて検出された相対位置、ステップＳ５にて検出された形状変化、及びステップＳ６にて検出された照明状態をセットで記憶する（Ｓ７）。その後、図３に示す処理は終了する。
【００４４】
図４は、本実施形態に係る表示装置１による表示・照明制御方法を示す第２のフローチャートである。なお、図３に示す処理についても車両イグニッションスイッチがオフされるなど、装置１への電力供給が断たれるまで繰り返し実行されるものとする。
【００４５】
図４に示すように、まず、位置関係検出部５４は、車内カメラ１０からの撮像画像から相対位置を検出し、検出した相対位置が記憶されたものであるかを判断する（Ｓ１１）。相対位置が記憶されたものであると判断した場合（Ｓ１１：ＹＥＳ）、処理はステップＳ１３に移行する。
【００４６】
一方、相対位置が記憶されたものでないと判断した場合（Ｓ１１：ＮＯ）、形状変化検出部５５は、車内カメラ１０からの撮像画像から形状変化を検出し、検出した形状変化が記憶されたものであるかを判断する（Ｓ１２）。形状変化が記憶されたものでないと判断した場合（Ｓ１２：ＮＯ）、図４に示す処理は終了する。
【００４７】
一方、形状変化が記憶されたものであると判断した場合（Ｓ１２：ＹＥＳ）、カメラ制御部５１及び照明制御部５２は、セットで記憶した車内カメラ１０の制御状態及び照明装置４０の照明状態となるように、それぞれを制御する（Ｓ１３）。その後、図４に示す処理は終了する。
【００４８】
図５〜図１２は、本実施形態に係る表示装置１の表示制御の様子を示す操作表示部２０の正面図である。なお、図５〜図１２に示す例においては、既に相対位置（位置関係）や形状変化が操作内容とセットで記憶されているものとする。
【００４９】
まず、図５に示すように、操作表示部２０には、車内カメラ１０により撮像された車両搭乗員Ｃの上半身が表示されている。この状態において車両搭乗員Ｃが口紅を塗ろうと手Ｈを口元（顎近く）Ｍに移動させたとする。ここで、過去に、この位置関係となったときに口元Ｍを中心に光軸を移動させ且つズームするカメラ制御が行われていたとする。
【００５０】
この場合、図６に示すように、カメラ制御部５１は、車内カメラ１０を制御して口元Ｍをズームする。このように、車両搭乗員Ｃは、口紅を塗ろうと手Ｈを口元（顎近く）Ｍに移動させただけで、口元Ｍがズームされた画像が操作表示部２０に表示されて、車内カメラ１０の制御操作なしに口紅が塗りやすくなる。
【００５１】
また、図７に示すように、操作表示部２０には、車内カメラ１０により撮像された車両搭乗員Ｃの上半身が表示されている。この状態において車両搭乗員Ｃがファンデーションを塗ろうと手Ｈを頬ＣＨに移動させたとする。ここで、過去に、この位置関係となったときに頬ＣＨを中心に光軸を移動させ且つズームするカメラ制御が行われていたとする。
【００５２】
この場合、図８に示すように、カメラ制御部５１は、車内カメラ１０を制御して頬ＣＨをズームする。このように、車両搭乗員Ｃは、ファンデーションを塗ろうと手Ｈを頬ＣＨに移動させただけで、頬ＣＨがズームされた画像が操作表示部２０に表示されて、車内カメラ１０の制御操作なしにファンデーションが塗りやすくなる。
【００５３】
また、図９に示すように、操作表示部２０には、車内カメラ１０により撮像された車両搭乗員Ｃの上半身が表示されている。この状態において車両搭乗員Ｃが口紅を塗ろうと唇Ｌをすぼめたとする。ここで、過去に、唇Ｌをすぼめたときに口元Ｍを中心に光軸を移動させ且つズームするカメラ制御が行われていたとする。
【００５４】
この場合、図１０に示すように、カメラ制御部５１は、車内カメラ１０を制御して口元Ｍをズームする。このように、車両搭乗員Ｃは、口紅を塗ろうと唇Ｌをすぼめただけで、口元Ｍがズームされた画像が操作表示部２０に表示されて、車内カメラ１０の制御操作なしに口紅が塗りやすくなる。
【００５５】
また、図１１に示すように、操作表示部２０には、車内カメラ１０により撮像された車両搭乗員Ｃの上半身が表示されている。この状態において車両搭乗員Ｃがアイシャドウを塗ろうと片目ＯＥを薄めにしたとする。ここで、過去に、片目ＯＥを薄めにしたときに目元Ｅを中心に光軸を移動させ且つズームするカメラ制御が行われていたとする。
【００５６】
この場合、図１２に示すように、カメラ制御部５１は、車内カメラ１０を制御して目元Ｅをズームする。このように、車両搭乗員Ｃは、アイシャドウを塗ろうと片目ＯＥを薄めにしただけで、目元Ｅがズームされた画像が操作表示部２０に表示されて、車内カメラ１０の制御操作なしにアイシャドウが塗りやすくなる。
【００５７】
なお、図５〜図１２では化粧を行う場合を例に説明したが、これに限らず、髭を整えたり、髪型を整えたりなど、他の顔付近の手入れを行う場合も同様である。
【００５８】
このようにして、本実施形態に係る表示装置１によれば、操作が受け付けられて車両搭乗員の頭部の画像の表示状態が制御された場合、頭部の特定部位と手との位置関係と当該制御の際に受け付けられた操作内容とセットで記憶し、その後、操作がなく、且つ、記憶される頭部の特定部位と手との位置関係が検出された場合、当該位置関係とセットで記憶される操作内容に応じて車両搭乗員の頭部の画像の表示状態を制御する。このため、初回に、操作を行って頭部の画像の表示状態を制御したときの頭部の特定部位と手との位置関係が記憶されると、その後は頭部の特定部位と手との位置関係が再現されると、表示状態が制御されることとなる。このため、操作を要することなく顔付近の手入れを行う際の動作に応じて表示状態が制御されることとなり、車内において顔付近の手入れを行う場合の利便性を向上させることができる。
【００５９】
また、操作が受け付けられて車両搭乗員の頭部の画像の表示状態が制御された場合、顔の特定部位の形状変化と当該制御の際に受け付けられた操作内容とセットで記憶し、その後、操作がなく、且つ、記憶される顔の特定部位の形状変化が検出された場合、当該位置関係とセットで記憶される操作内容に応じて車両搭乗員の頭部の画像の表示状態を制御する。このため、初回に、操作を行って顔の画像の表示状態を制御したときの顔の特定部位の形状変化が記憶されると、その後は顔の特定部位の形状変化が再現されると、表示状態が制御されることとなる。このため、操作を要することなく顔付近の手入れを行う際の顔の変化に応じて表示状態が制御されることとなり、車内において顔付近の手入れを行う場合の利便性を向上させることができる。
【００６０】
また、位置関係と操作内容とに加えて照明状態を記憶するため、初回に、記憶が行われた後に頭部の特定部位と手との位置関係が再現されると、表示状態のみならず照明状態についても制御されることとなる。このため、操作を要することなく顔付近の手入れを行う際の動作に応じて表示状態及び照明状態が制御されることとなり、車内において顔付近の手入れを行う場合の利便性を向上させることができる。
【００６１】
以上、実施形態に基づき本発明を説明したが、本発明は上記実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲で、変更を加えてもよいし、可能な範囲で適宜他の技術を組み合わせてもよい。
【００６２】
例えば、本実施形態においては車内カメラ１０の画像をディスプレイに表示しているが、これに限らず、ウィンドシールド等に映像を投射する投射器であってもよい。また、操作表示部２０は、タッチパネル式のディスプレイに限らず、操作部と表示部とが別体のものであってもよい。
【００６３】
さらに、本実施形態においては、カメラ制御部５１によりカメラ制御を行って操作表示部２０に表示される画像の表示状態を制御しているが、これに限らず、車内カメラ１０を制御することなく、画像の一部を拡大するなどのいわゆるデジタルズームなどの処理を行ってもよい。さらには、照明装置４０を制御することなく、単に表示画像を明るく表示するなどの制御を行ってもよい。
【００６４】
さらには、顔の特定部位と手との位置関係や顔の形状変化については、上記したものに限らず、他のものに応じて表示状態や照明状態が制御されてもよい。例えば両方の眉毛が上に移動した場合には、前髪付近をズームするなどの制御が行われてもよい。
【符号の説明】
【００６５】
１      ：表示装置
１０    ：車内カメラ
２０    ：操作表示部
２１    ：操作部（操作手段）
２２    ：表示部（表示手段）
３０    ：マイク（操作手段）
４０    ：照明装置（照明手段）
４１    ：第１照明部
４２    ：第２照明部
５０    ：制御部
５１    ：カメラ制御部（制御手段）
５２    ：照明制御部（制御手段）
５３    ：音声解析部
５４    ：位置関係検出部（検出手段）
５５    ：形状変化検出部（検出手段）
５６    ：記憶部（記憶手段）
【図１】
2018098529.tif 000003
【図２】
2018098529.tif 000004
【図３】
2018098529.tif 000005
【図４】
2018098529.tif 000006
【図５】
2018098529.tif 000007
【図６】
2018098529.tif 000008
【図７】
2018098529.tif 000009
【図８】
2018098529.tif 000010
【図９】
2018098529.tif 000011
【図１０】
2018098529.tif 000012
【図１１】
2018098529.tif 000013
【図１２】
2018098529.tif 000014