(57)【要約】      （修正有）【課題】透過性を有するハーフミラーの反射面の背面側に、画像表示部が設けられ、視認性の高い表示装置を提供する。【解決手段】表示装置１０は、鏡部２２と、画像表示部２６と、撮像部１４と、特定手段と、変換手段とを備える。特定手段は、撮像部１４により撮像された撮影画像の被写体領域を特定する。変換手段は、被写体領域と鏡部２２との相対的な位置関係に基づいて、特定手段により特定された撮影画像の被写体領域を鏡部２２に反射される被写体の像の範囲に変換する。【選択図】図２
2020005037.tif 000002
【特許請求の範囲】
【請求項１】
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定手段と、
前記被写体領域と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換手段と、
を備えることを特徴とする表示装置。
【請求項２】
前記反射手段により反射された被写体の像と前記撮像手段により撮像された被写体の撮影画像との被写体領域が略同一となるように前記撮像手段を制御する、
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記反射手段により反射された被写体の像と前記撮像手段により撮像された被写体の撮影画像との被写体領域が略同一となるように前記撮像手段により撮像された画像を制御する、
ことを特徴とする請求項１又は２に記載の表示装置。
【請求項４】
前記表示手段の表示領域を制御する表示領域制御手段と
反射手段に反射される被写体の像の範囲を推定する推定手段と、を更に備え、
前記表示領域制御手段は、前記推定手段により推定された被写体の像の範囲に基づいて前記所定の情報の表示領域を制御する、
ことを特徴とする請求項１乃至３の何れか一項に記載の表示装置。
【請求項５】
補助情報を報知する報知手段と、
前記反射手段に反射される被写体の像の範囲と当該補助情報の報知タイミングとを関連付ける関連付け手段と、を備え、
前記表示領域制御手段は、前記関連付け手段により関連付けられた報知タイミングに応じて前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４に記載の表示装置。
【請求項６】
前記補助情報は複数の異なる補助情報を含み、
前記表示領域制御手段は、前記報知手段により報知される補助情報毎に所定の情報の表示領域を制御する、
ことを特徴とする請求項５に記載の表示装置。
【請求項７】
前記表示領域制御手段は、前記補助情報の種類に応じて、前記所定の情報を表示する位置を、前記反射手段により反射された被写体の像に重なるように表示する位置を制御する、
ことを特徴とする請求項５又は６に記載の表示装置。
【請求項８】
被写体の顔の方向を認識する顔方向認識手段を更に備え、
前記表示領域制御手段は、前記顔方向認識手段により認識された前記被写体の顔の方向に基づいて前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至７の何れか一項に記載の表示装置。
【請求項９】
前記表示領域制御手段は、前記顔方向認識手段により認識された前記被写体の顔の方向と同一方向に前記所定の情報の表示領域を制御する、
ことを特徴とする請求項８に記載の表示装置。
【請求項１０】
前記表示領域制御手段は、一連の補助情報を報知する場合に、前記一連の補助情報に応じて所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至９の何れか一項に記載の表示装置。
【請求項１１】
前記表示領域制御手段は、一連の補助情報に応じて被写体が動作した場合に前記反射手段により反射された被写体の像が存在すると予測された領域に基づいて、前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至１０の何れか一項に記載の表示装置。
【請求項１２】
前記表示領域制御手段は、一連の補助情報に応じて被写体が動作した場合に前記反射手段により反射された被写体の像が存在すると予測された全ての領域に基づいて、前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至１１の何れか一項に記載の表示装置。
【請求項１３】
前記補助情報と顔の部位とを対応付けた部位対応情報を更に有し、
前記表示領域制御手段は、前記部位対応情報に基づいて、前記所定の情報の表領域示を制御する、
ことを特徴とする請求項４乃至１２の何れか一項に記載の表示装置。
【請求項１４】
前記反射手段と前記表示手段との座標の対応関係に基づいて、各座標系における座標を変換する、
ことを特徴とする請求項１乃至１３の何れか一項に記載の表示装置。
【請求項１５】
前記反射手段における像と前記表示手段における像との大きさに応じた、ズーム率設定テーブルを有し、
前記ズーム率設定テーブルに基づいて、前記撮像手段のズーム率を制御する、
ことを特徴とする請求項１乃至１４の何れか一項に記載の表示装置。
【請求項１６】
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
を備えたコンピュータが行う表示方法であって、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定ステップと、
前記被写体と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換ステップと、
を備えることを特徴とする表示方法。
【請求項１７】
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
を備えたコンピュータに、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定機能と、
前記被写体と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換機能と、
を実現させることを特徴とする表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置に関し、表示方法及びプログラムに関する。
【背景技術】
【０００２】
近年、鏡としての機能と、画像等の情報を表示する機能との両方を備える、ハーフミラー型ディスプレイが提案されている。この装置では、透過性を有するハーフミラーの反射面の背面側に、画像表示部が設けられている。ユーザは、ハーフミラーに映る自身の鏡像と、ハーフミラーを透過する画像表示部の画像と、を同時に視認することが出来る。
【０００３】
このようなハーフミラー型ディスプレイにおいて、鏡像に対する画像の表示位置を調整する構成が知られている（例えば、特許文献１参照）。特許文献１の装置は、ハーフミラーの周辺に設けられた複数のカメラによって、ハーフミラーに正対するユーザの位置を特定する。装置は、特定されたユーザの位置に基づいて鏡像の範囲を検出し、検出された鏡像の範囲に応じた位置に画像等の情報を表示する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−０１６７９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の情報表示装置では、撮像された画像の被写体領域と鏡像の範囲との相対的な位置関係が正確に検出できず、撮像された画像の被写体領域と鏡像の範囲とにずれが生じてしまう場合があった。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、表示の視認性の高い表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、本発明の一態様の表示装置は、
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定手段と、
前記被写体領域と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換手段と、
を備えることを特徴とする。
【発明の効果】
【０００８】
本発明によれば、表示の視認性の高い表示装置を提供することが出来る。
【図面の簡単な説明】
【０００９】
【図１】本発明の一実施形態に係る表示装置の外観構成を示す図である。
【図２】図１の表示装置の断面の構成を示す図である。
【図３】図１の表示装置の撮影画像と鏡像の模式図である。
【図４Ａ】図１の表示装置の撮像画像と鏡像とのマッピングを示す概念図である。
【図４Ｂ】鏡像と撮像画像との間のユーザの像の大小関係と、それに応じたズーム率を示す図である。
【図４Ｃ】マッピング処理を説明するフローチャートである。
【図５】図１の表示装置のハードウェアの構成を示すブロック図である。
【図６】図１の表示装置の機能的構成のうち、表示制御処理を実行するための機能的構成を示す機能ブロック図である。
【図７】図６の機能的構成を有する図１の表示装置が実行する表示制御処理を説明するフローチャートである。
【図８】図７の表示制御処理のうちアンビエント情報の表示の一例を示す図である。
【図９】図７の表示制御処理のサブルーチンであるミラーモード処理を説明するフローチャートである。
【図１０】図９のミラーモード処理のうち空きエリアの検索方法を示す概念図である。
【図１１】図９のミラーモード処理のサブルーチンである輝度制御処理を説明するフローチャートである。
【発明を実施するための形態】
【００１０】
以下、本発明の実施形態について、図面を用いて説明する。
【００１１】
［外観構成］
図１を参照すると、表示装置１０は、表示部１１と脚部１２とを備える。表示装置１０は、表示部１１が脚部１２によって背面から支持されることで自立する。表示部１１は、鏡部２２、画像表示部２６、及び撮像部１４を有する。鏡部２２は、例えば、所定の透過率と反射率とを有するハーフミラーである。撮像部１４は、例えば、表示部１１の上部に設けられ、表示部１１に正対するものを撮影することができる。
【００１２】
図２は、表示装置１０の断面の構成を示す図である。表示部１１は、例えば、液晶ディスプレイにより構成された画像表示部２６を備える。画像表示部２６は、各種の情報を表示することにより、各種の情報をユーザＵに対して報知する部分である。画像表示部２６は、例えば、文字等のメッセージや、画像等を表示する。表示装置１０では、鏡部２２を構成する反射部の反射面と、画像表示部２６の表示面とが、鏡部２２に正対するユーザＵの視認方向に重畳して配置される。換言すれば、画像表示部２６は、ユーザＵの視認方向における鏡部２２の奥側に、鏡部２２の反射面に対して平行に近接して配置される。
【００１３】
鏡部２２は、画像表示部２６の光の一部を透過するとともに、ユーザＵからの光の一部を反射する。従って、ユーザＵは、画像表示部の画像とユーザＵ自身の姿とを、ひとつの画面で視認することができる。即ち、ユーザＵは、鏡部２２の鏡像と画像表示部２６の画像とを同時に視認することが出来る。
【００１４】
鏡部２２及び画像表示部２６の上部には撮像部１４が配置される。撮像部１４は、表示装置１０の利用時に、鏡部２２に正対するユーザＵを被写体として撮像することができる。撮像部１４は、例えば、鏡部２２に正対するユーザＵの顔を撮影可能な位置に配置される。
【００１５】
上述の表示装置１０の外観構成は、一例に過ぎず、表示装置１０の外観構成は、この例に限定されない。
【００１６】
［動作概要］
後述する機能ブロックの説明に先立って、本実施形態の動作の概要を説明する。図３は、図１の表示装置１０の撮像画像と鏡像とを示す模式図である。上述のような表示装置１０において、撮像部１４が、鏡部２２に正対するユーザＵを撮像すると、図３（Ａ）に示されるように、ユーザＵの全体像が含まれた撮像画像が得られる。一方で、鏡部２２の鏡像には、図３（Ｂ）に示されるように、ユーザＵの全体像が含まれない。
【００１７】
このように、ユーザＵが鏡部２２に正対するとき、撮像画像と鏡像とが異なる現象が生じる。撮像画像と鏡像とが異なると、画像表示部２６に表示される表示内容の表示位置と、鏡像の位置との関係が適切に保たれないおそれがある。
【００１８】
例えば、天気情報などの表示内容の表示位置が、撮像画像におけるユーザＵの位置に基づいて、ユーザＵの画像に重ならないように決定されたとする。しかし、撮像画像と鏡像とは異なる像であるため、表示内容が、鏡像に対して意図せず重なって表示される可能性がある。このとき、鏡像は表示内容に遮られるため、ユーザＵは、鏡部２２に映る自身の像を、快適に視認することが出来ない。このような問題を解消するために、本発明の一実施形態に係る表示装置１０では、予め、撮像画像と鏡像との間でマッピングが行われる。
【００１９】
図４Ａは、図１の表示装置の撮影画像と鏡像のマッピングを示す概念図である。本実施形態では、鏡部２２の面積全体に相当するミラー領域ＭＡと、撮像部１４の画角領域ＣＡとの間における、ユーザＵの像の大小関係に応じて、マッピングの処理が異なる。
【００２０】
図４Ｂは、鏡像と撮像画像との間のユーザの像の大小関係と、それに応じたズーム率を示す図である。表示装置１０は、例えば、図４Ｂに示すような情報をテーブルとして記憶している。
【００２１】
図４Ｂの左側には、「鏡部のユーザＵの像の大きさと、撮像画像におけるユーザＵの像の大きさと、の大小関係」が示されており、図４Ｂの右側には、その大小関係に応じた「ズーム率」が示されている。図４Ｂに示されるように、ミラー領域ＭＡの像が画角領域ＣＡの像よりも大きいとき、ズーム率を上げる。ミラー領域ＭＡの像と画角領域ＣＡの像とが略等しいとき、ズーム率は維持される。ミラー領域ＭＡの像が画角領域ＣＡの像よりも小さいとき、ズーム率を下げる。
【００２２】
図４Ｃは、マッピングの処理（マッピング処理）を表すフローチャートである。図４Ｂを用いてマッピング処理について説明する。
【００２３】
ステップＳ０１において、特定手段は、撮像部１４の画角領域ＣＡに対して、仮想的な鏡部２２のミラー領域ＭＡが設定される。例えば、画角領域ＣＡの中心点と、ミラー領域ＭＡの中心点と、が略一致するように設定する。
ステップＳ０２において、特定手段は、ミラー領域ＭＡと画角領域ＣＡとの各々におけるユーザＵの像の大きさを算出する。次に、ステップＳ０３において、特定手段は、これらのふたつの像の大きさの大小を判定する。ステップＳ０３〜Ｓ０５では、撮像部１４のズーム率が決定される。ズーム率は、例えば、鏡像におけるユーザＵの大きさと、撮像画像におけるユーザＵの大きさとが一致するようなズーム率である。
【００２４】
ステップＳ０３において、大きさが等しくない場合、処理はステップＳ０４に進む。ステップＳ０４において、撮像画像のユーザＵの像の方が大きいとき、処理はステップＳ０６に進む。ステップＳ０６において、撮像部のズーム率が下げられると（図４Ｂの上から四段目参照）、処理はステップＳ０７に進む。ステップＳ０４において、撮像画像のユーザＵの像の方が小さいとき、処理はステップＳ０５に進む。ステップＳ０５において、撮像部のズーム率が上げられると（図４Ｂの上から二段目参照）、処理はステップＳ０７に進む。
一方、ステップＳ０３において、大きさが略等しい場合（図４Ｂの上から三段目参照）、処理はステップＳ０７に進む。
【００２５】
ステップＳ０７において、変換手段は、ミラー領域ＭＡと画角領域ＣＡとの座標の対応付けを行う。ステップＳ０７では、撮像部１４の設置位置や設置角度が決定される。設置位置や設置角度は、例えば、鏡部２２におけるユーザＵの鏡像と、画像表示部２６に表示されるユーザＵの画像とが、視認方向において完全に重なるように決定される。例えば、ミラー領域ＭＡの４つの頂点と、画角領域ＣＡの所定の４つの点との対応付けが行われる。
【００２６】
これにより、以下に説明する各機能ブロックでは、表示制御を行う前提として座標情報が設定されている。座標情報は、例えば、撮像部１４において撮像された画像についての座標系である撮像座標系、及び画像表示部２６の表示面についての座標系である表示部座標系といった各座標系を定義するための情報、並びに、各座標系における座標を他の座標系における座標に変換するための対応関係を示す情報が含まれる。以下で説明する各機能ブロックは、これらの各座標系における座標の対応関係に基づいて、各座標系における座標を変換することにより表示制御を行うことができる。これら各座標系の対応関係は、例えば、表示制御装置１の製造時に設定される。
【００２７】
上述のマッピング処理の手順は一例であり、マッピングはこの順番で行われる場合に限られない。又、ズーム率の調整は、撮像部１４のレンズ位置の調整によって行われる所謂光学ズーム、及び、画像処理における所謂デジタルズーム、の双方又は何れかを用いて行われてもよい。
【００２８】
このように、予めマッピングが行われることによって、表示装置１０は、起動時において、撮像部１４が撮像するユーザＵの画像と、ユーザＵの鏡像とが、ユーザＵの視認方向において略完全に重なって見える状態となっている。換言すれば、マッピングが完了した状態とは、撮像部１４の画角と鏡部２２の画角が一致している状態である。これにより、撮像された画像の被写体領域と鏡像の範囲とのずれの発生を防止することが出来る。
【００２９】
このように、変換手段は、被写体領域と鏡部２２との相対的な位置関係に基づいて、特定手段により特定された撮影画像の被写体領域を鏡部２２に反射される被写体の像の範囲に変換する、マッピングを行う。マッピングが行われた、本発明の一態様に係る表示装置１０は、被写体の像を反射する鏡部２２と、鏡部２２の背面に構成され、所定の情報を表示する画像表示部２６と、撮像部１４と、を備えている。後述する推定部は、撮像部１４により撮像された被写体の撮像画像と、鏡部２２の位置と、に基づいて鏡部２２に反射される被写体の像の範囲を推定する。
このような構成により、後述する表示制御部は、画像表示部２６における画像を、鏡部２２の鏡像に対して適切な位置に表示する。従って、本発明の一態様に係る表示装置１０は、ユーザにとって視認性の高い表示を提供することができる。
【００３０】
［ハードウェア構成］
図５は、本発明の一実施形態に係る表示装置１０のハードウェアの構成を示すブロック図である。表示装置１０は、例えば、タブレット型の電子機器として構成される。
表示装置１０は、ＣＰＵ２１、ＲＯＭ２２、ＲＡＭ２３、バス２４、入出力インターフェース２５、撮像部１４、入力部１５、画像表示部２６、鏡部２２、記憶部３０、通信部２７、及びドライブ２８を備えている。
【００３１】
ＣＰＵ２１は、ＲＯＭ２２に記録されているプログラム、又は、記憶部３０からＲＡＭ２３にロードされたプログラムに従って各種の処理を実行する。
【００３２】
ＲＡＭ２３には、ＣＰＵ２１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００３３】
ＣＰＵ２１、ＲＯＭ２２及びＲＡＭ２３は、バス２４を介して相互に接続されている。このバス２４にはまた、入出力インターフェース２５も接続されている。入出力インターフェース２５には、撮像部１４、入力部１５、鏡部２２、画像表示部２６、通信部２７、記憶部３０、及びドライブ２８が接続されている。
【００３４】
撮像部１４は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
【００３５】
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
撮像部１４にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
【００３６】
イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ  Ｆｒｏｎｔ  Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１４の出力信号として出力される。
このような撮像部１４の出力信号は、ＣＰＵ２１等に適宜供給される。
【００３７】
画像表示部２６は、液晶ディスプレイ等で構成され、ＣＰＵ２１が出力する画像データに対応する画像を表示する。
【００３８】
記憶部３０は、ＤＲＡＭ等の半導体メモリで構成され、各種データを記憶する。
【００３９】
通信部２７は、ＣＰＵ２１が、ネットワーク等を介して他の装置（例えば、表示装置１０）との間で通信を行うための通信制御を行う。
【００４０】
ドライブ２８は、リムーバブルメディア１００が装着可能なインターフェースにより構成される。ドライブ２８には、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリ等よりなる、リムーバブルメディア１００が適宜装着される。リムーバブルメディア１００には、後述の表示制御処理を実行するためのプログラムや、画像データ等の各種データが格納される。ドライブ２８によってリムーバブルメディア１００から読み出されたプログラムや、画像データ等の各種のデータは、必要に応じて記憶部３０にインストールされる。
【００４１】
なお、表示装置１０は、上述したハードウェアに加えて、他のハードウェアを更に備えていてもよい。例えば、表示装置１０は、ランプやスピーカあるいは振動用モータ等で構成され、光や音声あるいはバイブレーション信号を出力する出力部を別途備えていてもよい。
【００４２】
［機能的構成］
図６は、図５の表示装置１０の機能的構成のうち、表示制御処理を実行するための機能的構成を示す機能ブロック図である。
表示制御処理とは、表示装置１０が、画像表示部２６に表示する表示情報を、鏡部２２における鏡像に対して適切な位置に表示するための、表示制御を行う一連の処理をいう。表示制御処理には、ミラーモード処理と、輝度調整処理と、が含まれている。
【００４３】
表示制御処理を実行する場合には、図５に示すように、ＣＰＵ２１において、画像取得部２１１と、画像解析部２１２と、領域推定部２１３と、画像処理部２１４と、表示制御部２１５と、が機能する。
また、記憶部３０の一領域には、撮像データ記憶部３０１と、表示情報記憶部３０２と、が設定される。
撮像データ記憶部３０１には、撮像部１４によって撮像されたユーザＵの撮像画像が記憶される。又、表示情報記憶部３０２には、画像表示部２６に表示するための情報が記憶される。
【００４４】
画像取得部２１１は、撮像部１４によって撮像されたユーザＵの撮像画像を取得する。
【００４５】
画像解析部２１２は、画像取得部２１１によって取得された撮像画像を解析する。解析とは、例えば、撮像画像の大きさを検出することや、撮像画像からユーザＵの視点を検出することである。
【００４６】
領域推定部２１３は、画像解析部２１２によって解析された撮像画像の大きさに基づいて、鏡部２２に映るユーザＵの鏡像に対応する画像表示部２６の領域、及び、鏡像の領域以外の領域（以下では、「空きエリア」と称する。）に対応する画像表示部２６の領域を推定する。
【００４７】
画像処理部２１４は、領域推定部２１３によって推定された空きエリアに応じて、表示情報を画像処理する。例えば、画像処理部２１４は、表示情報を拡大又は縮小したり、表示情報がアイコンなどの場合にはそれを文字に変換したり、横書きの表示情報を縦書きに変換したり、或いは、表示情報を報知部３１において報知するための音声に変換するための信号を送信したりする。
【００４８】
表示制御部２１５は、画像処理部２１４によって画像処理が施された表示情報を、領域推定部２１３によって推定された空きエリアに表示する表示制御を行う。或いは、表示制御部２１５は、画像処理の必要がない場合、表示情報をそのまま空きエリアに表示する。又、表示制御部２１５は、画像解析部２１２によって解析されたユーザの視点に応じて、表示情報の輝度を調整するとともに空きエリアに表示する。
【００４９】
［表示制御処理］
図７は、図６の機能的構成を有する図１の表示装置１０が実行する表示制御処理の流れを説明するフローチャートである。
表示制御処理は、ユーザによる入力部１５への表示処理開始の操作により開始される。
【００５０】
ステップＳ１１において、撮像部１４は、鏡部２２に正対するものを撮像する。画像取得部２１１は、撮像画像を取得して、撮像データ記憶部３０１に記憶させる。
【００５１】
ステップＳ１２において、画像取得部２１１は、撮像画像が取得されたか否かを判定する。撮像画像が取得されない場合、処理はステップＳ１１に戻る。画像取得部２１１が撮像画像を取得したと判定すると、処理はステップＳ１３に進む。
【００５２】
ステップＳ１３において、画像解析部２１２は、撮像データ記憶部３０１に記憶された撮像画像を解析する。画像解析部２１２は、例えば、撮像画像にユーザＵの像が含まれているか否かを判定するために、撮像画像に顔が含まれるか否かを解析する。解析が終了すると、処理はステップＳ１４に進む。
【００５３】
ステップＳ１４において、画像解析部２１２は、顔が検出されたか否かを判定する。顔が検出されない場合、処理はステップＳ１５に進む。
【００５４】
ステップＳ１５において、顔が検出されない時間が所定時間経過したか否かが判定される。ステップＳ１５において、所定時間が経過していないと判定されると、処理はステップＳ１１に戻る。ステップＳ１５において、所定時間が経過したと判定されると、処理はステップＳ１６に進む。
【００５５】
ステップＳ１６の処理は、例えば、ユーザＵが所定の時間、表示装置１０を使用していない場合の処理である。この場合、表示装置１０は、鏡部２２の機能を発揮する必要がないため、画像表示部２６の全面に画像を表示させる。
図８は、アンビエント情報の表示の一例を示す図である。例えば、表示制御部２１５は、図８に示されるように、画像表示部２６の全面に時計表示を行う。表示される画像は時計に限られない。例えば、ニュースや天気情報などの他の画像が表示されてもよい。
【００５６】
ステップＳ１６において、アンビエント情報の表示が行われると、処理はステップＳ１１に戻る。なお、処理がステップＳ１１に戻ったのち、ステップＳ１４において顔画像が検出されたとき、数秒程度の所謂ガードタイムが設けられてもよい。これにより、例えば、ユーザＵが鏡部２２の前を通過した際に、意図せずミラーモード処理が実行されることが防止される。
【００５７】
一方、ステップＳ１４において、画像解析部２１２が、撮像画像に顔画像を検出する場合、処理はステップＳ１７に進む。ステップＳ１７の処理が終わると、処理はステップＳ１１に戻る。
【００５８】
図９は、ステップＳ１７における、ミラーモード処理を説明するフローチャートである。
ステップＳ２１において、画像解析部２１２は、検出された顔画像の面積を算出する。顔画像の面積が算出されると、処理はステップＳ２２に進む。ステップＳ２２において、画像解析部２１２は、顔画像の面積が所定値以下か否か判定する。所定値は、例えば、画像表示部２６の表示画面に略等しい程度の値である。
【００５９】
ステップＳ２２において、顔画像の面積が所定値より大きいと判定されると、処理はステップＳ２３に進む。即ち、ステップＳ２３では、画像表示部２６に、顔画像と同時に表示情報を表示可能な程度の空きエリアが無い状態である。
ステップＳ２３において、画像表示部２６に表示する表示情報があるか否か判定される。ステップＳ２３において、表示情報が無いと判定されると、ミラーモード処理は終了する。一方、ステップＳ２３において、表示情報が有ると判定されると、処理はステップＳ２８に進む。ステップＳ２８では、表示情報を表示するための空きエリアが無いため、表示情報は消去される。表示情報が消去されると、ミラーモード処理は終了する。
【００６０】
一方、ステップＳ２２において、顔画像の面積が所定値以下であると判定されると、処理は、ステップＳ２５に進む。ステップＳ２５において、領域推定部２１３は、空きエリアの面積が所定値以上か否かを判定する。空きエリアの面積が所定値以上か否かは、領域推定部２１３が空きエリアを検索することによって判定される。
【００６１】
ここで、空きエリアの検索について、図１０を参照して説明する。図１０は、ステップＳ２５における、空きエリアの検索方法を示す概念図である。図１０を参照すると、画像表示部２６の画角に対して、表示情報が表示される領域としての矩形領域ＮＡと、ユーザＵの顔画像が表示される領域としての顔画像領域ＦＡと、が設定される。
【００６２】
領域推定部２１３は、画像表示部２６において、顔画像領域ＦＡに対して矩形領域ＮＡが重ならない位置を検索する。例えば、領域推定部２１３は、破線で示されるように、矩形領域ＮＡを矩形領域ＮＡ´の位置に向けて、画像表示部２６の一端から他端の方向へ移動させる。これにより、矩形領域ＮＡと顔画像領域ＦＡとが重なる領域の有無を検出する。矩形領域ＮＡの移動は、画像表示部２６の全体に対して行われる。
なお、空きエリアの検索において、顔画像領域ＦＡと矩形領域ＮＡとの間に隙間が生じる場合、領域推定部２１３は、顔画像領域ＦＡとマージンを取って、矩形領域ＮＡを確保してもよい。
【００６３】
重なる領域が無い場合、領域推定部２１３は、空きエリアの面積が所定値以上であると判定する。
重なる領域が有る場合、領域推定部２１３は、空きエリアの面積が所定値より小さいと判定する。領域推定部２１３は、空きエリアの面積が所定値よりも小さいと判定する場合、その空きエリアの面積を算出する。
【００６４】
ステップＳ２５において、領域推定部２１３が、空きエリアが所定値以上であると判定すると、処理はステップＳ２９に進む。ステップＳ２９において、表示制御部２１５は、表示情報記憶部３０２から表示情報を読み出して、空きエリアに表示情報を表示する。
【００６５】
一方、ステップＳ２５において、領域推定部２１３が、空きエリアは所定値未満であると判定すると、処理はステップＳ２６に進む。ステップＳ２６において、表示情報の有無が判定される。
【００６６】
ステップＳ２６において、表示情報が無いと判定されると、ミラーモード処理は終了する。一方、ステップＳ２６において、表示情報があると判定されると、ステップＳ２７に進む。
【００６７】
ステップＳ２７では、表示情報の変換が行われる。例えば、画像処理部２１４は、表示情報を、領域推定部２１３によって推定された空きエリアの面積に収まる大きさに縮小する。或いは、画像処理部２１４は、表示情報を簡易な文字列に変換するなどして、表示情報の表示領域を縮小する。
【００６８】
ステップＳ２７において、表示情報が縮小等の処理によって変換されると、処理はステップＳ２９に進む。ステップＳ２９において、表示制御部２１５は、変換された表示情報を空きエリアに表示する。ステップＳ２９において、空きエリアに表示情報が表示されると、処理はステップＳ３０に進む。
【００６９】
ステップＳ３０において、以下で詳述する輝度制御処理が行われる。ステップＳ３０の輝度制御処理が終わると、ミラーモード処理は終了する。
【００７０】
上述のような、ミラーモード処理における一連の処理によって、表示装置１０は、ユーザＵの鏡像と表示情報とが重ならないように、画像表示部２６に表示情報を表示する。これにより、ユーザは快適に鏡像と表示内容とを視認することが出来る。
【００７１】
図１１は、ミラーモード処理のステップＳ３０における、輝度制御処理を説明するフローチャートである。輝度制御処理は、ユーザＵの視点位置に応じて、表示制御部２１５が表示内容の輝度を調整する処理である。
【００７２】
ステップＳ４１において、画像解析部２１２は、撮像画像におけるユーザＵの視線を分析する。視線の向きは、例えば、撮像画像におけるユーザＵの視点位置等から検出される。
【００７３】
ステップＳ４２において、画像解析部２１２は、視線が表示情報に対して向けられているか否かを判定する。ステップＳ４２において、画像解析部２１２が、視線は表示情報に対して向けられていないと判定すると、処理はステップＳ４３に進む。ステップＳ４３において、表示制御部２１５は、表示情報が表示されている領域の輝度を下げる。このとき、ユーザＵは表示情報を見ている可能性が低いため、ユーザＵは、表示情報の輝度が下がることによって、鏡像、即ち、自身の姿を快適に視認することが出来る。
【００７４】
一方、ステップＳ４２において、画像解析部２１２が、視線は表示情報に対して向けられていると判定すると、処理はステップＳ４４に進む。
【００７５】
ステップＳ４４において、表示制御部２１５は、表示情報が表示されている領域の輝度を上げる。このとき、ユーザＵは表示情報を見ている可能性が高いため、表示情報の輝度が上がることによって、ユーザＵは、快適に鏡像と表示情報と視認することが出来る。
【００７６】
ステップＳ４３又はステップＳ４４の処理が終わると、輝度制御処理は終了する。
【００７７】
以上のように構成される表示装置１０は、鏡部２２と、画像表示部２６と、撮像部１４と、特定手段と、変換手段とを備える。
特定手段は、撮像部１４により撮像された撮影画像の被写体領域を特定する。変換手段は、被写体領域と鏡部２２との相対的な位置関係に基づいて、特定手段により特定された撮影画像の被写体領域を鏡部２２に反射される被写体の像の範囲に変換する。
本発明に係る表示装置１０は、特定手段が、鏡部２２に反射される被写体の像の範囲を特定し、変換手段が、鏡部２２と画像表示部２６との座標を対応付けるため、所定の情報が適切な位置に配置される。このように、表示装置１０は、視認性の高い表示を提供することが出来る。
【００７８】
表示装置１０は、鏡部２２によって反射された被写体の像と、撮像部１４により撮像された被写体の撮影画像との被写体領域が略同一となるように撮像部１４を制御する。
鏡像と撮像画像との間でマッピングが行われることにより、鏡部２２によって反射された被写体の像と、撮像画像における被写体の像との位置関係が適切に保たれる。このように、表示装置１０は、視認性の高い表示を提供することが出来る。
【００７９】
表示装置１０は、鏡部２２により反射された被写体の像と撮像部１４により撮像された被写体の撮影画像との被写体領域が略同一となるように、撮像部１４により撮像された画像を制御する。
鏡像と撮像画像と画角が調整されることにより、鏡部２２によって反射された被写体の像と、撮像画像における被写体の像との位置関係が適切に保たれる。このように、表示装置１０は、視認性の高い表示を提供することが出来る。
【００８０】
表示装置１０は、画像表示部２６の表示領域を制御する表示制御部２１５と、鏡部２２に反射される被写体の像の範囲を推定する領域推定部２１３と、を更に備える。表示制御部２１５は、領域推定部２１３により推定された被写体の像の範囲に基づいて所定の情報の表示領域を制御する。
本発明に係る表示装置１０は、領域推定部２１３によって推定された被写体像の範囲に基づいて、表示制御部２１５が所定の情報を表示するため、所定の情報が適切な位置に配置される。このように、表示装置１０は、視認性の高い表示を提供することが出来る。
【００８１】
補助情報を報知する報知部３１と、鏡部２２に反射される被写体の像の範囲と当該補助情報の報知タイミングとを関連付ける関連付け部と、を更に備える。
表示制御部２１５は、関連付け部により関連付けられた報知タイミングに応じて、所定の情報の表示領域を制御する。
これにより、所定の情報が、報知タイミングに応じて、鏡像に対して適切な位置に表示されるため、ユーザＵは快適に鏡像を視認することが出来る。
【００８２】
補助情報は複数の異なる補助情報を含む。表示制御部２１５は、報知部３１により報知される補助情報毎に所定の情報の表示領域を制御する。
これにより、報知される補助情報が都度適切な位置に配置されるため、ユーザＵは、快適に鏡像を視認することが出来る。
【００８３】
表示制御部２１５は、補助情報の種類に応じて、所定の情報を表示する位置を、ユーザに重なるか、又は、重ならないように表示する位置を制御する。
これにより、補助情報の種類によって、所定の情報がユーザに重なるか、又は、重ならないように表示されるため、ユーザＵは、快適に鏡像を視認することが出来る。
【００８４】
表示装置１０は、被写体の顔の方向を認識する顔方向認識部を更に備える。表示制御部２１５は、顔方向認識部により認識された被写体の顔の方向に基づいて所定の情報の表示領域を制御する。
これにより、ユーザＵの顔の方向に合わせた適切な位置に所定の情報が表示されるため、ユーザＵは、快適に鏡像を視認することが出来る。
【００８５】
表示制御部２１５は、顔方向認識部によって認識された被写体の顔の方向と同一方向に所定の情報の表示領域を制御する。
これにより、ユーザＵの顔の方向に合わせた適切な位置に所定の情報が表示されるため、ユーザＵは、快適に鏡像を視認することが出来る。
【００８６】
表示制御部２１５は、一連の補助情報を報知する場合に、一連の補助情報に応じて所定の情報の表示領域を制御する。
これにより、ユーザＵは、マッサージ等のガイダンス情報に相当する一連の補助情報に応じて、適切な位置に所定の情報を視認することが出来る。このように、表示装置１０は、ユーザＵにとって視認性の高い表示を提供することが出来る。
【００８７】
表示制御部２１５は、一連の補助情報に応じて被写体が動作した場合に、被写体が存在する領域を予測して、所定の情報の表示領域を制御する。
これにより、一連の補助情報が、適切なタイミングで、適切な位置に表示されるため、ユーザＵは視認性の高い表示を視認することが出来る。
【００８８】
表示制御部２１５は、一連の補助情報のうちの全てが被写体の存在する領域に重複しないように、所定の情報の表示領域を制御する。
【００８９】
表示装置１０は、補助情報と顔の部位とを対応付けた部位対応情報を更に有し、表示制御部２１５は、部位対応情報に基づいて、所定の情報の表領域示を制御する。
これにより、ユーザは顔の部位の適切な位置に表示される補助情報を視認することが可能である。これにより、ユーザＵは視認性の高い表示を視認することが出来る。
【００９０】
鏡部２２と画像表示部２６との座標の対応関係に基づいて、各座標系における座標を変換する。
これにより、鏡像と撮像画像とにおけるユーザＵの像の位置が一致するため、表示装置１０は、視認性の高い表示を提供することが出来る。
【００９１】
表示装置１０は、鏡部２２における像と画像表示部２６とにおける像との大きさに応じた、ズーム率設定テーブルを有し、ズーム率設定テーブルに基づいて、撮像部１４のズーム率を制御する。
これにより、鏡像と撮像画像とにおけるユーザＵの像の位置が一致するため、表示装置１０は、視認性の高い表示を提供することが出来る。
【００９２】
［変形例］
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。以下では、本発明の実施形態に係る、他の変形例について説明する。
【００９３】
＜変形例１＞
上述の実施形態では、表示情報の一例として、天気やニュース等が挙げられているが、これに限られない。表示情報は、ユーザＵが行う処置の補助情報であってもよく、例えば、顔のマッサージガイドであってもよい。本変形例では、表示情報として補助情報が表示領域に表示される。
この場合、表示装置１０は、上述の実施形態の構成に加えて、鏡部２２に反射される被写体の像の範囲と当該補助情報の報知タイミングとを関連付ける関連付け部（図示せず）と、を更に備えてもよい。表示制御部２１５は、関連付け部により関連付けられた報知タイミングに応じて、補助情報の表示領域を制御する。
【００９４】
マッサージガイドのような補助情報は、複数の異なる補助情報を含む。補助情報は、例えば、顔のマッサージの指の動きを示す矢印の画像や、顔のつぼを示す画像等の種々のガイド情報である。これらの情報は、音声として報知部３１において報知されてもよい。或いは、表示制御部２１５は、報知部３１により報知される補助情報毎に補助情報の表示領域を制御してもよい。
【００９５】
例えば、補助情報が顔のマッサージの方向を示す矢印の場合、表示制御部２１５は、補助情報をユーザＵの鏡像に重ねて表示する。或いは、補助情報がユーザＵの顔とは関係のない情報である場合、表示制御部２１５は、補助情報をユーザの鏡像における顔の位置と重ならない位置に表示する。これを実現するために、補助情報と顔の部位とを対応付けた部位対応情報を記憶部に保持しておいても良い。表示制御部は、予め記憶されている部位対応情報に基づいて、補助情報の表領域示を制御することが出来る。
即ち、表示制御部２１５は、補助情報の種類に応じて、補助情報を表示する位置を、ユーザに重なるか、又は、重ならないように表示する位置を制御する。これにより、補助情報が、報知タイミングに応じて、鏡像に対して適切な位置に表示される。このため、表示装置１０は、ユーザＵにとって視認性の高い表示を提供することが出来る。
【００９６】
＜変形例２＞
上述の変形例１の構成に加えて、表示装置１０は、被写体であるユーザＵの顔の方向を認識する、顔方向認識部（図示せず）を更に備えてもよい。表示制御部２１５は、顔方向認識部により認識された被写体の顔の方向に基づいて補助情報の表示領域を制御する。例えば、顔方向認識部は、画像表示部２６における顔画像から、ユーザＵの顔の向きを認識する。そして、表示制御部２１５は、ユーザＵの顔の向きに応じて表示情報を表示する。例えば、表示制御部２１５は、顔方向認識部によって認識された被写体の顔の方向と同一方向に補助情報の表示領域を制御する。即ち、表示制御部２１５は、一連の補助情報を報知する場合に、一連の補助情報に応じて補助情報の表示領域を制御する。これにより、ユーザＵの顔の方向に合わせた適切な位置に、補助情報が表示される。このため、表示装置１０は、ユーザＵにとって視認性の高い表示を提供することが出来る。
【００９７】
＜変形例３＞
上述の変形例２の構成に加えて、表示装置１０の表示制御部２１５は、一連の補助情報に応じて被写体が動作した場合、ユーザＵの鏡像が存在する領域を予測して、補助情報の表示領域を制御してもよい。
【００９８】
例えば、一連の補助情報が、表示情報記憶部３０２に記憶されているので、表示制御部２１５は、ユーザＵがどのような動きをするかを予測することが出来る。従って、表示制御部２１５は、予測したユーザＵの動きに応じて、その空きエリアに表示情報を表示することが出来る。例えば、次に報知される補助情報が、顔の所定のつぼを押す動作を促す補助情報である場合、表示制御部２１５は、ユーザＵの腕が鏡像に映りこむことを予測する。この場合、表示制御部２１５は、ユーザＵの腕が鏡像に映りこむ位置とは異なる位置に補助情報を表示する。
【００９９】
又、表示制御部２１５は、マッサージガイド等の一連の補助情報のうち、一連の補助情報に応じて被写体が動作した場合に、ユーザＵの鏡像が存在すると予測された領域に補助情報が重複しないように、補助情報の表示領域を制御することが出来る。換言すれば、一連の補助情報に応じてユーザＵが動作した場合に、表示制御部２１５は、ユーザＵの鏡像が存在すると予測された全ての領域に基づいて補助情報の表示領域を制御する。このように、一連の補助情報が、適切なタイミングで、適切な位置に表示されるため、ユーザＵは鏡像を快適に視認することが出来る。
【０１００】
なお、表示装置１０は、上述の実施形態、及び、変形例１〜３の構成のうちの全て又はこれらのうちの何れかを用いた、如何なる組み合わせによって実現されてもよい。
又、図７、図９、及び図１１に示されるフローチャートにおける一部の処理は、適宜省略されてもよい。例えば、図９に示されるミラーモード処理における、ステップＳ３０の輝度制御処理は省略されてもよい。
【０１０１】
又、図４Ｂにおいて示されるテーブルは一例であって、必ずしもテーブルとして記憶される必要は無い。即ち、図４Ｂに示されるズーム率は、例えば、予め用意された計算式によって算出されてもよい。
【０１０２】
上述のように、種々の実施形態を説明したが、本発明が適用される表示装置１０は、タブレット型の表示装置に限定されない。
例えば、本発明は、表示制御処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。
【０１０３】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図６の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が表示装置１０に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図６の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
本実施形態における機能的構成は、演算処理を実行するプロセッサによって実現され、本実施形態に用いることが可能なプロセッサには、シングルプロセッサ、マルチプロセッサ及びマルチコアプロセッサ等の各種処理装置単体によって構成されるものの他、これら各種処理装置と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ‐Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）等の処理回路とが組み合わせられたものを含む。
【０１０４】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
【０１０５】
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図５のリムーバブルメディア１００により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア１００は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ−Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ），Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図５のＲＯＭ２２や、図５の記憶部３０に含まれるハードディスク等で構成される。
【０１０６】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段などより構成される全体的な装置を意味するものとする。
【０１０７】
以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、更に、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【０１０８】
以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定手段と、
前記被写体領域と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換手段と、
を備えることを特徴とする表示装置。
［付記２］
前記反射手段により反射された被写体の像と前記撮像手段により撮像された被写体の撮影画像との被写体領域が略同一となるように前記撮像手段を制御する、
ことを特徴とする請求項１に記載の表示装置。
［付記３］
前記反射手段により反射された被写体の像と前記撮像手段により撮像された被写体の撮影画像との被写体領域が略同一となるように前記撮像手段により撮像された画像を制御する、
ことを特徴とする請求項１又は２に記載の表示装置。
［付記４］
前記表示手段の表示領域を制御する表示領域制御手段と、
反射手段に反射される被写体の像の範囲を推定する推定手段と、を更に備え、
前記表示領域制御手段は、前記推定手段により推定された被写体の像の範囲に基づいて前記所定の情報の表示領域を制御する、
ことを特徴とする請求項１乃至３の何れか一に記載の表示装置。
［付記５］
補助情報を報知する報知手段と、
前記反射手段に反射される被写体の像の範囲と当該補助情報の報知タイミングとを関連付ける関連付け手段と、を備え、
前記表示領域制御手段は、前記関連付け手段により関連付けられた報知タイミングに応じて前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４に記載の表示装置。
［付記６］
前記補助情報は複数の異なる補助情報を含み、
前記表示領域制御手段は、前記報知手段により報知される補助情報毎に所定の情報の表示領域を制御する、
ことを特徴とする請求項５に記載の表示装置。
［付記７］
前記表示領域制御手段は、前記補助情報の種類に応じて、前記所定の情報を表示する位置を、前記反射手段により反射された被写体の像に重なるように表示する位置を制御する、
ことを特徴とする請求項５又は６に記載の表示装置。
［付記８］
被写体の顔の方向を認識する顔方向認識手段を更に備え、
前記表示領域制御手段は、前記顔方向認識手段により認識された前記被写体の顔の方向に基づいて前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至７の何れか一に記載の表示装置。
［付記９］
前記表示領域制御手段は、前記顔方向認識手段により認識された前記被写体の顔の方向と同一方向に前記所定の情報の表示領域を制御する、
ことを特徴とする請求項８に記載の表示装置。
［付記１０］
前記表示領域制御手段は、一連の補助情報を報知する場合に、前記一連の補助情報に応じて所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至９の何れか一に記載の表示装置。
［付記１１］
前記表示領域制御手段は、一連の補助情報に応じて被写体が動作した場合に前記反射手段により反射された被写体の像が存在すると予測された領域に基づいて、前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至１０の何れか一に記載の表示装置。
［付記１２］
前記表示領域制御手段は、一連の補助情報に応じて被写体が動作した場合に前記反射手段により反射された被写体の像が存在すると予測された全ての領域に基づいて、前記所定の情報の表示領域を制御する、
ことを特徴とする請求項４乃至１１の何れか一に記載の表示装置。
［付記１３］
前記補助情報と顔の部位とを対応付けた部位対応情報を更に有し、
前記表示領域制御手段は、前記部位対応情報に基づいて、前記所定の情報の表領域示を制御する、
ことを特徴とする付記４乃至１２の何れか一に記載の表示装置。
［付記１４］
前記反射手段と前記表示手段との座標の対応関係に基づいて、各座標系における座標を変換する、
ことを特徴とする付記１乃至１３の何れか一に記載の表示装置。
［付記１５］
前記反射手段における像と前記表示手段における像との大きさに応じた、ズーム率設定テーブルを有し、
前記ズーム率設定テーブルに基づいて、前記撮像手段のズーム率を制御する、
ことを特徴とする付記１乃至１４の何れか一に記載の表示装置。
［付記１６］
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
を備えたコンピュータが行う表示方法であって、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定ステップと、
前記被写体と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換ステップと、
を備えることを特徴とする表示方法。
［付記１７］
被写体の像を反射する反射手段と、
前記反射手段の背面に構成され、所定の情報を表示する表示手段と、
撮像手段と、
を備えたコンピュータに、
前記撮像手段により撮像された撮影画像の被写体領域を特定する特定機能と、
前記被写体と前記反射手段との相対的な位置関係に基づいて、前記特定手段により特定された撮影画像の被写体領域を前記反射手段に反射される被写体の像の範囲に変換する変換機能と、
を実現させることを特徴とする表示プログラム。
【符号の説明】
【０１０９】
１０・・・表示装置，１１・・・表示部，１２・・・脚部，１４・・・撮像部，１５・・・入力部，２１・・・ＣＰＵ，２２・・・鏡部，２２・・・ＲＯＭ，２３・・・ＲＡＭ，２４・・・バス，２５・・・入出力インターフェース，２６・・・画像表示部，２７・・・通信部，２８・・・ドライブ，３０・・・記憶部，１００・・・リムーバブルメディア，２１１・・・画像取得部，２１２・・・画像解析部，２１３・・・領域推定部，２１４・・・画像処理部，２１５・・・表示制御部，３０１・・・撮像データ記憶部，３０２・・・表示情報記憶部，ＣＡ・・・カメラ領域，ＦＡ・・・顔画像領域，ＭＡ・・・ミラー領域，ＮＡ・・・矩形領域，Ｕ・・・ユーザ，
【図１】
2020005037.tif 000003
【図２】
2020005037.tif 000004
【図３】
2020005037.tif 000005
【図４Ａ】
2020005037.tif 000006
【図４Ｂ】
2020005037.tif 000007
【図４Ｃ】
2020005037.tif 000008
【図５】
2020005037.tif 000009
【図６】
2020005037.tif 000010
【図７】
2020005037.tif 000011
【図８】
2020005037.tif 000012
【図９】
2020005037.tif 000013
【図１０】
2020005037.tif 000014
【図１１】
2020005037.tif 000015