(57)【特許請求の範囲】
【請求項１】
被写体像を撮像し第１の画像情報を生成する第１の撮像手段と、
表示面に前記第１の画像情報および閲覧者へ事象や内容を視覚的に伝える指標情報を表示する表示手段と、
前記表示手段に表示する前記第１の画像情報および前記指標情報を記憶する記憶手段と、
前記表示手段を閲覧する前記閲覧者を撮像し、前記第１の画像情報とは異なる第２の画像信号を生成する第２の撮像手段と、
前記第２の撮像手段によって生成された前記第２の画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、
前記記憶手段から出力された前記第１の画像情報および／または前記指標情報の表示形態を変更する表示形態変更手段と、
前記顔画像検出手段によって検出された前記閲覧者の前記顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、
前記表示形態変更手段によって変更された前記第１の画像情報および／または前記指標情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、
前記表示形態変更手段は、前記顔画像検出手段によって検出された前記顔画像の位置に基づいて、前記第１の画像情報および／または前記指標情報を歪ませる歪み変形手段を含むことを特徴とする情報表示装置。
【請求項２】
請求項１に記載の情報表示装置において、
前記指標情報は文字、記号、図形およびアイコンのうち少なくとも１つを含むことを特徴とする情報表示装置。
【請求項３】
請求項１または２に記載の情報表示装置において、
前記表示形態変更手段は、前記顔画像の傾きに基づいて前記第１の画像情報および／または前記指標情報を所定の角度で回転させる傾き変更手段を含むこと特徴とする情報表示装置。
【請求項４】
請求項１〜３のいずれか１項に記載の情報表示装置において、
前記情報表示装置の姿勢を検出し、姿勢方向情報を生成する姿勢検出手段を更に備え、
前記制御手段は、前記姿勢検出手段によって検出された前記情報表示装置の前記姿勢方向情報を前記第1の画像情報に付与し、前記姿勢方向情報に基づいて方向情報を生成し、前記表示形態変更手段を制御することを特徴とする情報表示装置。
【請求項５】
請求項４に記載の情報表示装置において、
前記傾き変更手段は、前記顔画像の傾きに基づいて前記第１の画像情報および／または前記指標情報が閲覧者に対してほぼ正対するように前記第１の画像情報および／または前記指標情報に回転処理を施すことを特徴とする情報表示装置。
【請求項６】
請求項４または５に記載の情報表示装置において、
前記第１の画像情報に前記姿勢方向情報が付与されている場合には、
前記傾き変更手段は、前記顔画像の傾きおよび前記方向情報に基づいて回転角度を決定することを特徴とする情報表示装置。
【請求項７】
請求項６に記載の情報表示装置において、
前記表示形態変更手段は、前記顔画像の傾きおよび前記方向情報に基づいて、前記第１の画像情報および／または前記指標情報の基準の表示サイズを決定することを特徴とする情報表示装置。
【請求項８】
請求項４〜７のいずれか１項に記載の情報表示装置において、
前記顔画像検出手段は前記第１の画像情報に前記顔画像があるか否かを判定する判定手段をさらに含み、前記第１の画像情報に前記姿勢方向情報が付与されていない場合、かつ前記判定手段によって前記第１の画像情報に前記顔画像が含まれていると判定された場合には、前記顔画像に基づいて前記方向情報が決定されることを特徴とする情報表示装置。
【請求項９】
請求項４〜７のいずれか１項に記載の情報表示装置において、
前記顔画像検出手段は前記第１の画像情報に前記顔画像があるか否かを判定する判定手段をさらに含み、前記第１の画像情報に前記姿勢情報が付与されていない場合、かつ前記判定手段によって前記第１の画像情報に前記顔画像が含まれていないと判定された場合には、前記制御手段は前記傾き変更手段による前記第１の画像情報および／または前記指標情報の処理を禁止することを特徴とする情報表示装置。
【請求項１０】
請求項１〜９のいずれか１項に記載の情報表示装置において、
当該情報表示装置は再生モードと他のモードとを有しており、前記他のモードが実行されている時に、前記顔画像検出手段によって検出された前記顔画像を複数認識した場合には、前記再生モードに切り替えるモード切替え手段をさらに有することを特徴とする情報表示装置。
【請求項１１】
請求項１〜１０のいずれか１項に記載の情報表示装置において、
前記表示形態変更手段は、前記顔画像検出手段により検出された前記顔画像の大きさに基づいて前記第１の画像情報および／または前記指標情報の表示サイズを変更する大きさ変更手段を含むことを特徴とする情報表示装置。
【請求項１２】
請求項１１に記載の情報表示装置において、
前記大きさ変更手段は、前記制御手段によって前記顔画像の大きさが小さいほど前記第１の画像情報および／または前記指標情報を大きく表示できるように拡大あるいは縮小処理するように制御することを特徴とする情報表示装置。
【請求項１３】
請求項１１または１２に記載の情報表示装置において、
前記大きさ変更手段は、前記顔画像の大きさに基づいて複数の表示サイズを持つ前記第１の画像情報の中から所定表示サイズを選択する表示サイズ選択手段と、前記顔画像の大きさに応じた所定の倍率で前記第１の画像情報および／または前記指標情報を拡大あるいは縮小する拡大・縮小手段のうち少なくとも一方を有することを特徴とする情報表示装置。
【請求項１４】
請求項１３に記載の情報表示装置において、
前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第１の閾値以上である場合には、前記拡大・縮小手段は前記制御手段によって第１の閾値に基づいた所定の倍率で前記第１の画像情報および／または前記指標情報を拡大あるいは縮小するように制御され、前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第２の閾値以下である場合には、前記拡大・縮小手段は前記制御手段によって第２の閾値に基づいた所定の倍率で前記第１の画像情報および／または前記指標情報を拡大あるいは縮小するように制御されることを特徴とする情報表示装置。 
【請求項１５】
請求項１に記載の情報表示装置において、
前記歪み変形手段は、前記顔画像の位置が所定の領域の外側である場合に、前記第１の画像情報および／または前記指標情報を伸張する変形手段であることを特徴とする情報表示装置。
【請求項１６】
請求項１５に記載の情報表示装置において、
前記歪み変形手段は、前記閲覧者から遠い領域に表示する前記第１の画像情報および／または前記指標情報は近い領域に表示する前記第１の画像情報および／または前記指標情報よりも高い伸張率で伸張する変更処理を施すことを特徴とする情報表示装置。
【請求項１７】
請求項１〜１６のいずれか１項に記載の情報表示装置において、
前記顔画像検出手段により前記顔画像を複数認識した場合には、前記制御手段は、前記第２の撮像手段によって撮像された撮像領域の所定の点に最も近い顔画像に基づいて前記表示形態変更手段を制御することを特徴とする情報表示装置。
【請求項１８】
請求項１〜１７のいずれか１項に記載の情報表示装置において、
前記表示手段は異なる複数方向に前記第１の画像情報および／または前記指標情報を表示可能な表示手段であり、前記顔画像検出手段により前記顔画像を複数かつ所定の複数の領域に検出した場合には、前記制御手段は前記領域毎の前記顔画像に基づいて前記表示形態変更手段を制御することを特徴とする情報表示装置。
【請求項１９】
被写体像を撮像し、第１の情報を生成する第１の撮像手段と、
表示面に前記第１の情報、および前記第１の情報とは異なる第２の情報を表示する表示手段と、
前記第１の情報を記憶する第１の記憶手段と、
前記第２の情報を記憶する第２の記憶手段と、
前記表示手段を閲覧する閲覧者を撮像し、画像信号を生成する第２の撮像手段と、
前記第２の撮像手段によって生成された前記画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、
前記第１の記憶手段から出力された前記第１の情報および／または前記第２の記憶手段から出力された前記第２の情報の表示形態を変更する表示形態変更手段と、
前記顔画像検出手段によって検出された前記閲覧者の顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、
前記表示形態変更手段によって変更された前記第１の情報および／または前記第２の情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、
当該情報表示装置は再生モードと他のモードとを有しており、前記他のモードが実行されている時に、前記顔画像検出手段により検出した前記顔画像を複数認識した場合には、前記再生モードに切り替えるモード切替え手段をさらに有することを特徴とする情報表示装置。
【請求項２０】
被写体像を撮像し、第１の情報を生成する第１の撮像手段と、
表示面に前記第１の情報、および前記第１の情報とは異なる第２の情報を表示する表示手段と、
前記第１の情報を記憶する第１の記憶手段と、
前記第２の情報を記憶する第２の記憶手段と、
前記表示手段を閲覧する閲覧者を撮像し、画像信号を生成する第２の撮像手段と、
前記第２の撮像手段によって生成された前記画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、
前記第１の記憶手段から出力された前記第１の情報および／または前記第２の記憶手段から出力された前記第２の情報の表示形態を変更する表示形態変更手段と、
前記顔画像検出手段によって検出された前記閲覧者の顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、
前記表示形態変更手段によって変更された前記第１の情報および／または前記第２の情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、
前記顔画像検出手段により前記顔画像を複数検出した場合には、前記制御手段は、前記第２の撮像手段によって撮像された撮像領域の所定の点に最も近い前記顔画像に基づいて前記表示形態変更手段を制御することを特徴とする情報表示装置。
【請求項２１】
被写体像を撮像し、第１の情報を生成する第１の撮像手段と、
表示面に前記第１の情報、および前記第１の情報とは異なる第２の情報を表示する表示手段と、
前記第１の情報を記憶する第１の記憶手段と、
前記第２の情報を記憶する第２の記憶手段と、
前記表示手段を閲覧する閲覧者を撮像し、画像信号を生成する第２の撮像手段と、
前記第２の撮像手段によって生成された前記画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、
前記第１の記憶手段から出力された前記第１の情報および／または前記第２の記憶手段から出力された前記第２の情報の表示形態を変更する表示形態変更手段と、
前記顔画像検出手段によって検出された前記閲覧者の顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、
前記表示形態変更手段によって変更された前記第１の情報および／または前記第２の情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、
前記表示手段は複数方向に前記第１の情報および／または前記第２の情報を表示可能な表示手段であり、前記顔画像検出手段により前記顔画像を複数かつ所定の複数の領域に検出した場合には、前記制御手段は領域毎の前記顔画像に基づいて前記表示形態変更手段を制御することを特徴とする情報表示装置。
【請求項２２】
請求項１９〜２１のいずれか１項に記載の情報表示装置において、
前記表示形態変更手段は、前記顔画像検出手段により検出された前記顔画像の大きさに基づいて前記第１の情報および／または前記第２の情報の表示サイズを変更する大きさ変更手段を含むことを特徴とする情報表示装置。
【請求項２３】
請求項２２に記載の情報表示装置において、
前記大きさ変更手段は、前記顔画像の大きさが小さいほど前記第１の情報および／または前記第２の情報を大きく表示できるように拡大あるいは縮小処理するように制御することを特徴とする情報表示装置。
【請求項２４】
請求項２２または２３に記載の情報表示装置において、
前記大きさ変更手段は前記顔画像の大きさに基づいて複数の表示サイズを持つ第１の情報の中から所定表示サイズを選択する表示サイズ選択手段と、前記顔画像の大きさに応じた所定の倍率で前記第１の情報および／または前記第２の情報を拡大あるいは縮小する拡大・縮小手段のうち少なくとも一方を有することを特徴とする情報表示装置。
【請求項２５】
請求項２４に記載の情報表示装置において、
前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第１の閾値以上である場合には、前記拡大・縮小手段は前記制御手段によって第１の閾値に基づいた所定の倍率で前記第１の情報および／または前記第２の情報を拡大あるいは縮小するように制御され、前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第２の閾値以下である場合には、前記拡大・縮小手段は前記制御手段によって第２の閾値に基づいた所定の倍率で前記第１の情報および／または前記第２の情報を拡大あるいは縮小するように制御されることを特徴とする情報表示装置。
【請求項２６】
請求項１〜２５のいずれか１項に記載の情報表示装置において、
前記顔画像検出手段によって所定時間以上の間、前記顔画像が検出されない場合は、当該情報表示装置の前記顔画像検出手段以外への電源供給をオフにする電源オフ手段をさらに有することを特徴とする情報表示装置。
【請求項２７】
請求項２６に記載の情報表示装置において、
前記電源オフ手段によって当該情報表示装置の前記顔画像検出手段以外への電源供給がオフとなった時刻から所定時間以内に前記顔画像が検出された場合に電源供給をオンにする電源オン手段をさらに有することを特徴とする情報表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像した閲覧者の顔の状態に基づいて、表示させる情報を制御する情報表示装置に関する。
【背景技術】
【０００２】
特許文献１に開示されている技術を用いて、静止画情報を拡大して表示することで閲覧者にとって視認性の良い表示を行うことができる。また、目の色の違いおよび周囲の色温度に応じた見易い画像表示を行う技術などが知られている（特許文献２）。
特許文献３に開示されている技術では、撮像された顔画像によって人物を特定し、人物毎に機器の使用できる機能を制御することが可能である。
【特許文献１】特開２００５−２６９３３号広報
【特許文献２】特開２００７−２６４１２４号広報
【特許文献３】特開２００７−６７７８２号広報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、特許文献１に開示される表示装置では、見易い表示を行うために、例えば拡大させる場合には、閲覧者が拡大率を指定するための操作を行う必要がある。したがって、表示画面と使用者との距離が変わり、拡大が必要なくなった場合や、より拡大の度合いを大きくしたい場合には、拡大の度合いを使用者自身がわざわざ指定するという手間が掛かる。
【０００４】
また、特許文献２に開示される技術では、表示装置の輝度のみが適切に調整されており、表示装置と閲覧者の位置関係によっては必ずしも見易い表示であるとは限らない。
特許文献３に開示された技術を利用することで表示画面をユーザー毎の好みに合わせて設定することが可能となるが、表示装置と閲覧者の位置関係が変化した場合には必ずしも見易い表示であるとは限らない。
【０００５】
本発明はこのような問題を鑑みて、表示画面を覗く閲覧者の顔画像に基づいて、表示情報の形態を制御することにより、閲覧者にとって見易い表示を自動で得られるようにするものである。
【課題を解決するための手段】
【０００６】
請求項１に記載の情報表示装置は、被写体像を撮像し第１の画像情報を生成する第１の撮像手段と、表示面に前記第１の画像情報および閲覧者へ事象や内容を視覚的に伝える指標情報を表示する表示手段と、前記表示手段に表示する前記第１の画像情報および前記指標情報を記憶する記憶手段と、前記表示手段を閲覧する前記閲覧者を撮像し、前記第１の画像情報とは異なる第２の画像信号を生成する第２の撮像手段と、前記第２の撮像手段によって生成された前記第２の画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、前記記憶手段から出力された前記第１の画像情報および／または前記指標情報の表示形態を変更する表示形態変更手段と、前記顔画像検出手段によって検出された前記閲覧者の前記顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、前記表示形態変更手段によって変更された前記第１の画像情報および／または前記指標情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、前記表示形態変更手段は、前記顔画像検出手段によって検出された前記顔画像の位置に基づいて、前記第１の画像情報および／または前記指標情報を歪ませる歪み変形手段を含むことを特徴とする。
【０００７】
請求項２に記載の情報表示装置は、請求項１に記載の情報表示装置において、前記指標情報は文字、記号、図形およびアイコンのうち少なくとも１つを含むことを特徴とする。
【０００８】
請求項３に記載の情報表示装置は、請求項１または２に記載の情報表示装置において、前記表示形態変更手段は、前記顔画像の傾きに基づいて前記第１の画像情報および／または前記指標情報を所定の角度で回転させる傾き変更手段を含むこと特徴とする。
【０００９】
請求項４に記載の情報表示装置は、請求項１〜３のいずれか１項に記載の情報表示装置において、前記情報表示装置の姿勢を検出し、姿勢方向情報を生成する姿勢検出手段を更に備え、前記制御手段は、前記姿勢検出手段によって検出された前記情報表示装置の前記姿勢方向情報を前記第1の画像情報に付与し、前記姿勢方向情報に基づいて方向情報を生成し、前記表示形態変更手段を制御することを特徴とする。
【００１０】
請求項５に記載の情報表示装置は、請求項４に記載の情報表示装置において、前記傾き変更手段は、前記顔画像の傾きに基づいて前記第１の画像情報および／または前記指標情報が閲覧者に対してほぼ正対するように前記第１の画像情報および／または前記指標情報に回転処理を施すことを特徴とする。
【００１１】
請求項６に記載の情報表示装置は、請求項４または５に記載の情報表示装置において、前記第１の画像情報に前記姿勢方向情報が付与されている場合には、前記傾き変更手段は、前記顔画像の傾きおよび前記方向情報に基づいて回転角度を決定することを特徴とする。
【００１２】
請求項７に記載の情報表示装置は、請求項６に記載の情報表示装置において、前記表示形態変更手段は、前記顔画像の傾きおよび前記方向情報に基づいて、前記第１の画像情報および／または前記指標情報の基準の表示サイズを決定することを特徴とす。
【００１３】
請求項８に記載の情報表示装置は、請求項４〜７のいずれか１項に記載の情報表示装置において、前記顔画像検出手段は前記第１の画像情報に前記顔画像があるか否かを判定する判定手段をさらに含み、前記第１の画像情報に前記姿勢方向情報が付与されていない場合、かつ前記判定手段によって前記第１の画像情報に前記顔画像が含まれていると判定された場合には、前記顔画像に基づいて前記方向情報が決定されることを特徴とする。
【００１４】
請求項９に記載の情報表示装置は、請求項４〜７のいずれか１項に記載の情報表示装置において、前記顔画像検出手段は前記第１の画像情報に前記顔画像があるか否かを判定する判定手段をさらに含み、前記第１の画像情報に前記姿勢情報が付与されていない場合、かつ前記判定手段によって前記第１の画像情報に前記顔画像が含まれていないと判定された場合には、前記制御手段は前記傾き変更手段による前記第１の画像情報および／または前記指標情報の処理を禁止することを特徴とする。
【００１５】
請求項１０に記載の情報表示装置は、請求項１〜９のいずれか１項に記載の情報表示装置において、当該情報表示装置は再生モードと他のモードとを有しており、前記他のモードが実行されている時に、前記顔画像検出手段によって検出された前記顔画像を複数認識した場合には、前記再生モードに切り替えるモード切替え手段をさらに有することを特徴とする。
【００１６】
請求項１１に記載の情報表示装置は、請求項１〜１０のいずれか１項に記載の情報表示装置において、前記表示形態変更手段は、前記顔画像検出手段により検出された前記顔画像の大きさに基づいて前記第１の画像情報および／または前記指標情報の表示サイズを変更する大きさ変更手段を含むことを特徴とする。
【００１７】
請求項１２に記載の情報表示装置は、請求項１１に記載の情報表示装置において、前記大きさ変更手段は、前記制御手段によって前記顔画像の大きさが小さいほど前記第１の画像情報および／または前記指標情報を大きく表示できるように拡大あるいは縮小処理するように制御することを特徴とする。
【００１８】
請求項１３に記載の情報表示装置は、請求項１１または１２に記載の情報表示装置において、前記大きさ変更手段は、前記顔画像の大きさに基づいて複数の表示サイズを持つ前記第１の画像情報の中から所定表示サイズを選択する表示サイズ選択手段と、前記顔画像の大きさに応じた所定の倍率で前記第１の画像情報および／または前記指標情報を拡大あるいは縮小する拡大・縮小手段のうち少なくとも一方を有することを特徴とする。
【００１９】
請求項１４に記載の情報表示装置は、請求項１３に記載の情報表示装置において、前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第１の閾値以上である場合には、前記拡大・縮小手段は前記制御手段によって第１の閾値に基づいた所定の倍率で前記第１の画像情報および／または前記指標情報を拡大あるいは縮小するように制御され、前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第２の閾値以下である場合には、前記拡大・縮小手段は前記制御手段によって第２の閾値に基づいた所定の倍率で前記第１の画像情報および／または前記指標情報を拡大あるいは縮小するように制御されることを特徴とする。
【００２０】
請求項１５に記載の情報表示装置は、請求項１に記載の情報表示装置において、前記歪み変形手段は、前記顔画像の位置が所定の領域の外側である場合に、前記第１の画像情報および／または前記指標情報を伸張する変形手段であることを特徴とする。
【００２１】
請求項１６に記載の情報表示装置は、請求項１５に記載の情報表示装置において、前記歪み変形手段は、前記閲覧者から遠い領域に表示する前記第１の画像情報および／または前記指標情報は近い領域に表示する前記第１の画像情報および／または前記指標情報よりも高い伸張率で伸張する変更処理を施すことを特徴とする。
【００２２】
請求項１７に記載の情報表示装置は、請求項１〜１６のいずれか１項に記載の情報表示装置において、前記顔画像検出手段により前記顔画像を複数認識した場合には、前記制御手段は、前記第２の撮像手段によって撮像された撮像領域の所定の点に最も近い顔画像に基づいて前記表示形態変更手段を制御することを特徴とする。
【００２３】
請求項１８に記載の情報表示装置は、請求項１〜１７のいずれか１項に記載の情報表示装置において、前記表示手段は異なる複数方向に前記第１の画像情報および／または前記指標情報を表示可能な表示手段であり、前記顔画像検出手段により前記顔画像を複数かつ所定の複数の領域に検出した場合には、前記制御手段は前記領域毎の前記顔画像に基づいて前記表示形態変更手段を制御することを特徴とする。
【００２４】
請求項１９に記載の情報表示装置は、被写体像を撮像し、第１の情報を生成する第１の撮像手段と、表示面に前記第１の情報、および前記第１の情報とは異なる第２の情報を表示する表示手段と、前記第１の情報を記憶する第１の記憶手段と、前記第２の情報を記憶する第２の記憶手段と、前記表示手段を閲覧する閲覧者を撮像し、画像信号を生成する第２の撮像手段と、前記第２の撮像手段によって生成された前記画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、前記第１の記憶手段から出力された前記第１の情報および／または前記第２の記憶手段から出力された前記第２の情報の表示形態を変更する表示形態変更手段と、前記顔画像検出手段によって検出された前記閲覧者の顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、前記表示形態変更手段によって変更された前記第１の情報および／または前記第２の情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、当該情報表示装置は再生モードと他のモードとを有しており、前記他のモードが実行されている時に、前記顔画像検出手段により検出した前記顔画像を複数認識した場合には、前記再生モードに切り替えるモード切替え手段をさらに有することを特徴とする。
【００２５】
請求項２０に記載の情報表示装置は、被写体像を撮像し、第１の情報を生成する第１の撮像手段と、表示面に前記第１の情報、および前記第１の情報とは異なる第２の情報を表示する表示手段と、前記第１の情報を記憶する第１の記憶手段と、前記第２の情報を記憶する第２の記憶手段と、前記表示手段を閲覧する閲覧者を撮像し、画像信号を生成する第２の撮像手段と、前記第２の撮像手段によって生成された前記画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、前記第１の記憶手段から出力された前記第１の情報および／または前記第２の記憶手段から出力された前記第２の情報の表示形態を変更する表示形態変更手段と、前記顔画像検出手段によって検出された前記閲覧者の顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、前記表示形態変更手段によって変更された前記第１の情報および／または前記第２の情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、前記顔画像検出手段により前記顔画像を複数検出した場合には、前記制御手段は、前記第２の撮像手段によって撮像された撮像領域の所定の点に最も近い前記顔画像に基づいて前記表示形態変更手段を制御することを特徴とする。
【００２６】
請求項２１に記載の情報表示装置は、被写体像を撮像し、第１の情報を生成する第１の撮像手段と、表示面に前記第１の情報、および前記第１の情報とは異なる第２の情報を表示する表示手段と、前記第１の情報を記憶する第１の記憶手段と、前記第２の情報を記憶する第２の記憶手段と、前記表示手段を閲覧する閲覧者を撮像し、画像信号を生成する第２の撮像手段と、前記第２の撮像手段によって生成された前記画像信号から前記閲覧者の顔画像を検出する顔画像検出手段と、前記第１の記憶手段から出力された前記第１の情報および／または前記第２の記憶手段から出力された前記第２の情報の表示形態を変更する表示形態変更手段と、前記顔画像検出手段によって検出された前記閲覧者の顔画像の状態に基づいて、前記表示形態変更手段を制御する制御手段と、前記表示形態変更手段によって変更された前記第１の情報および／または前記第２の情報を前記表示手段に出力する出力手段と、を有する情報表示装置であって、前記表示手段は複数方向に前記第１の情報および／または前記第２の情報を表示可能な表示手段であり、前記顔画像検出手段により前記顔画像を複数かつ所定の複数の領域に検出した場合には、前記制御手段は領域毎の前記顔画像に基づいて前記表示形態変更手段を制御することを特徴とする。
【００２７】
請求項２２に記載の情報表示装置は、請求項１９〜２１のいずれか１項に記載の情報表示装置において、前記表示形態変更手段は、前記顔画像検出手段により検出された前記顔画像の大きさに基づいて前記第１の情報および／または前記第２の情報の表示サイズを変更する大きさ変更手段を含むことを特徴とする。
【００２８】
請求項２３に記載の情報表示装置は、請求項２２に記載の情報表示装置において、前記大きさ変更手段は、前記顔画像の大きさが小さいほど前記第１の情報および／または前記第２の情報を大きく表示できるように拡大あるいは縮小処理するように制御することを特徴とする。
【００２９】
請求項２４に記載の情報表示装置は、請求項２２または２３に記載の情報表示装置において、前記大きさ変更手段は前記顔画像の大きさに基づいて複数の表示サイズを持つ第１の情報の中から所定表示サイズを選択する表示サイズ選択手段と、前記顔画像の大きさに応じた所定の倍率で前記第１の情報および／または前記第２の情報を拡大あるいは縮小する拡大・縮小手段のうち少なくとも一方を有することを特徴とする。
【００３０】
請求項２５に記載の情報表示装置は、請求項２４に記載の情報表示装置において、前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第１の閾値以上である場合には、前記拡大・縮小手段は前記制御手段によって第１の閾値に基づいた所定の倍率で前記第１の情報および／または前記第２の情報を拡大あるいは縮小するように制御され、前記顔画像検出手段によって検出された前記顔画像の大きさが所定の第２の閾値以下である場合には、前記拡大・縮小手段は前記制御手段によって第２の閾値に基づいた所定の倍率で前記第１の情報および／または前記第２の情報を拡大あるいは縮小するように制御されることを特徴とする。
【００３１】
請求項２６に記載の情報表示装置は、請求項１〜２５のいずれか１項に記載の情報表示装置において、前記顔画像検出手段によって所定時間以上の間、前記顔画像が検出されない場合は、当該情報表示装置の前記顔画像検出手段以外への電源供給をオフにする電源オフ手段をさらに有することを特徴とする。
【００３２】
請求項２７に記載の情報表示装置は、請求項２６に記載の情報表示装置において、前記電源オフ手段によって当該情報表示装置の前記顔画像検出手段以外への電源供給がオフとなった時刻から所定時間以内に前記顔画像が検出された場合に電源供給をオンにする電源オン手段をさらに有することを特徴とする。
【発明の効果】
【００４５】
本発明によれば、閲覧者を撮像した顔画像に基づいて表示形態を変化させることにより閲覧者は見易い表示を自動で得られる。
【発明を実施するための最良の形態】
【００４６】
本発明に係る情報表示装置を備えた電子カメラを例示し、実施形態を以下に記す。なお、下記の実施形態は電子カメラに適用した場合であるが、表示装置を備えた電子機器であれば他の形態においても実施し得る。本発明を適用した電子カメラの実施形態を図１〜図４５を参照して説明する。
【００４７】
（第１の実施形態）
・構成
図１および図２は本発明を適用した電子カメラの斜視図である。図１に示す該電子カメラの上部に取り付けられている電源ボタン１００は、当該電子カメラの電源のＯＮまたはＯＦＦを指令するボタンである。面１０１には、被写体を撮像するために被写体の光情報を取り込む撮像レンズ１０２が設けられている。レリーズボタン１０３は該電子カメラの上部に取り付けられており、撮像レンズ１０２を用いた撮像の開始を指示するためのボタンである。図２に示す面１０４は通常は当該電子カメラの使用者側（閲覧者側）になる。面１０４には、ＬＣＤ１０５、撮像レンズ１０６、各種設定を行うための操作部１０７、再生ボタン１０８、撮影モードボタン１０９、メニューボタン１１０が設けられている。ＬＣＤ１０５は、画像情報、アイコン、文字、数字、記号等を表示する液晶パネルである。      
【００４８】
辺１１１はＬＣＤ１０５の上端部、辺１１２はＬＣＤ１０５の左端部、辺１１３はＬＣＤ１０５の下端部、辺１１４はＬＣＤ１０５の右端部である。撮像レンズ１０６は当該電子カメラの使用者（閲覧者）を撮像するためのレンズである。操作部１０７は、ＬＣＤ１０５に表示したカーソルの移動や選択した機能の決定を行うための操作部材である。本実施形態の電子カメラは、記録媒体内に記憶された画像を再生する再生モードと、被写体を撮像する撮影モードと、当該カメラの各種設定を行うメニューモードの３つのモードを有しており、各種モードは各々再生ボタン１０８、撮影モードボタン１０９、メニューボタン１１０を押下することで切り替えることができる。
【００４９】
次に本実施形態の電子カメラの内部構成を図３のブロック図を参照して説明する。当該電子カメラ内部は撮像素子２０１ 、撮像素子２０２、Ａ／Ｄ変換回路２０３（アナログ／デジタル変換回路）、Ａ／Ｄ変換回路２１３、バス２０４、バッファメモリ２０５、Ｉ／Ｏ部２０６、記録媒体２０７、画像処理部２０８、フラッシュＲＡＭ２０９、ＣＰＵ２１０、表示コントロール部２１１、姿勢検出部２１２から構成される。Ａ／Ｄ変換回路２０３、バッファメモリ２０５、Ｉ／Ｏ部２０６、画像処理部２０８、フラッシュＲＡＭ２０９、ＣＰＵ２１０、表示コントロール部２１１はバス２０４を介して接続される。
【００５０】
撮像素子２０１および撮像素子２０２は光電変換素子であり、光画像をアナログの電気信号に変換するための素子である。また撮像素子２０１は撮影モードの時に被写体を撮像するために設けられた撮像素子であり、撮像レンズ１０２の後段に設けられている。また、撮像素子２０２は当該電子カメラの使用者（閲覧者）を撮像するための撮像素子であり、撮像レンズ１０６の後段に設けられている。なお、第１の実施形態では撮像レンズ１０６は、図４に示すように３５ｍｍ判フィルムカメラの焦点距離に換算しておよそ２０ｍｍ（画角θ≒９４°）の広角領域を撮像可能なレンズを用いて実施する。
【００５１】
Ａ／Ｄ変換回路２０３は撮像素子２０１によって光電変換されたアナログの電気信号をデジタル化しデジタル画像情報を生成する。同様にＡ／Ｄ変換回路２１３は撮像素子２０２によって光電変換されたアナログの電気信号をデジタル化しデジタルの画像情報を生成する。Ａ／Ｄ変換回路２０３によってデジタル化された画像情報はバス２０４を介して、バッファメモリ２０５に一旦記憶される。なお、図５に示すように、バッファメモリ２０５はＬＣＤ１０５に表示する画像情報を一時蓄積するＶＲＡＭ領域２０５ａ、ＬＣＤ１０５に表示する指標情報を一時蓄積するためのＯＳＤ領域２０５ｂ、その他の領域２０５ｃから構成される。Ａ／Ｄ変換回路２１３によってデジタル化された画像情報はバス２０４を介して、その他の領域２０５ｃに一旦記憶される。
【００５２】
記録媒体２０７は、画像情報を保存する着脱可能な記録媒体であり、Ｉ／Ｏ部２０６を介してバス２０４に接続される。ＣＰＵ２１０の指示により、記録媒体２０７内への画像情報の保存、記録媒体２０７からの画像情報の読み出しが施される。画像処理部２０８は閲覧者の顔画像の検出、閲覧者の顔画像の数の判定、閲覧者の顔画像の大きさの判定、閲覧者の顔画像の傾きの判定、閲覧者の顔画像の位置の判定、表示する画像情報内に顔画像があるか否かの判定、表示する画像情報内の顔画像の傾きの判定、画像情報の加工を行う手段である。なお、ＣＰＵ２１０の指示により画像処理部２０８は駆動する。またＣＰＵ２１０は当該電子カメラの電源供給の制御を行う。
【００５３】
また、姿勢検出部２１２は当該電子カメラの姿勢（上下左右）を検出する。姿勢検出の方法として特開２００５−２３６８８３に開示されているような振り子または特開２００４−２８６６１４に開示されているような金属球の導電性を用いた方法が知られている。これらの方法を応用して、重力加速度の方向、重力加速度に対して垂直かつ当該電子カメラの面１０１に平行な方向の２軸に基づいて姿勢を判定しても良いし、ジャイロ等を用いた公知技術（特開２００５−２６０６６６）を応用しても良い。ＣＰＵ２１０は、姿勢検出部によって検出された姿勢に基づいて撮像レンズ１０２を用いて撮像された画像情報に方向情報（上下左右）を付与する。
【００５４】
つづいてＯｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ（以下ＯＳＤ）について説明する。ＬＣＤ１０５への表示はＯＳＤ機能を用いて実施する。本機能は、再生モード時に表示される再生画像や撮影モード時に表示されるスルー画像の上に、アイコン、文字、数字、記号等（指標情報）を重ねて表示する機能である。本実施形態においては、表示する指標情報はフラッシュＲＡＭ２０９に記憶されており、ＬＣＤ１０５に表示を行う前段階までに使用者の使用状況に応じて、ＣＰＵ ２１０は所定の指標情報をＯＳＤ領域２０５ｂに記憶する。画像処理部２０８は使用者の顔画像の状態に基づいて表示形態を変更するための加工処理を行い再度ＯＳＤ領域２０５ｂに指標情報を記憶する。また、ＬＣＤ１０５に表示を行う前段階までに、表示する画像情報はバッファメモリ２０５へ記憶されており、表示コントロール部２１１はＯＳＤ領域に記憶された指標情報を画像情報の上に重ねてＬＣＤ１０５上に表示するように、画像情報および指標情報を制御する。加工処理の詳細については後ろに詳述する。
【００５５】
つづいて表示アシスト機能について説明する。表示アシスト機能はＬＣＤ１０５へ表示する画像情報や指標情報に関する機能である。本機能は通常の表示形態とは異なり、当該電子カメラと閲覧者との相対的な位置関係に基づき拡大・縮小加工および回転加工した情報を表示する機能である。本機能を用いることで閲覧者の視認性を高めることができる。以下に、表示アシストを再生モード時の表示アシストと撮影モード・メニューモード時の表示アシストに分けて説明する。なお、表示アシストを用いない場合について図６を用いて説明する。図６に示すように、辺１１５が画像の上端部、辺１１６が画像の左端部、辺１１７が画像の下端部、辺１１８が画像の右端部となるように方向情報が付与されている画像情報をＬＣＤ１０５に表示する場合、辺１１５が辺１１１側、辺１１６が辺１１２側、辺１１７が辺１１３側、辺１１８が辺１１４側となり、またこの場合、さらに、辺１１５の長さが辺１１１と等しく、辺１１６の長さが辺１１２と等しく、辺１１７の長さが辺１１３と等しく、辺１１８の長さが辺１１４と等しくなるように表示される。
【００５６】
・再生モード時の表示アシスト
再生モード時の表示アシストの処理について図７のフローチャート図を用いて説明する。ステップＳ１において、画像処理部２０８は閲覧者の顔画像の認識処理を行う。ステップＳ２において、ＣＰＵ２１０の指示により画像処理部２０８は指標情報の加工処理を行いステップＳ３に進む。ステップＳ３において、ＣＰＵ２１０の指示により画像情報の加工処理を行い、ステップＳ４に進む。ステップＳ４では表示コントロール部２１１はＶＲＡＭ２０５ａに一時蓄積された画像情報にＯＳＤ領域２０５ｂに一時蓄積された指標情報を重ねて表示するように画像情報と指標情報の制御を行う。
【００５７】
ステップＳ５において、画像処理部２０８は閲覧者の顔画像が認識されるか否かを判定する。顔画像が認識されない場合はステップＳ１へ移行し、顔画像が認識される場合はステップＳ６へ進む。ステップＳ６において、画像処理部２０８によって閲覧者の顔画像の大きさまたは顔画像の撮像平面内での傾きが所定以上変化したと判定される場合はステップＳ１へ移行し、所定未満の変化の場合にはステップＳ７へ移行する。ステップＳ７において、ＣＰＵ２１０は、使用者によって再生モードの終了（他モードへの移行または電源ＯＦＦ）が指示されたか否かを判定する。再生モードの終了が指示されていない場合はステップＳ８へ進む。ステップＳ８において、ＣＰＵ２１０は指標情報が変化（例えばバッテリーの残量の減少によってアイコンが変化）するか否かを判定する。指標情報が変化すると判定された場合は、ステップＳ１へ移行する。指標情報が変化しないと判定された場合はＳ９へ進む。ステップＳ９において、ＣＰＵ２１０は再生画像が変化するか否かを判定する。再生画像が変化すると判定された場合は、ステップＳ１へ移行する。再生画像が変化しないと判定された場合は、ステップＳ５へ移行する。なおステップＳ７において、使用者によって再生モードの終了が指示されたと判定された場合は本処理を終了する。上述した顔画像の認識処理Ｓ１、指標情報の加工処理Ｓ２、画像情報の加工処理については別途後で詳述する。
【００５８】
・撮影モード・メニューモード時の表示アシスト
撮影モードおよびメニューモード時の表示アシストの処理を図８のフローチャート図を用いて説明する。本実施形態の撮影モードおよびメニューモードにおける表示アシストは指標情報の形態のみを加工する。撮影モードにおいては、加工した指標情報を背景のスルー画像の上に重ねて表示する。また、メニューモードではスルー画像、再生画像もしくは壁紙などを背景画像として指標情報を重ねて表示する。なお、撮影モードやメニューモードは通常一人の使用者によって使用されるため、撮影モードやメニューモードの時に顔画像が複数認識された場合には、再生モードに切り替えることを促すメッセージを表示する。
ステップＳ１１において、複数顔認識の処理を行う。ステップＳ１２では、顔認識の処理を行う。ステップＳ１３では、指標情報の処理を行い、ステップＳ１４に進む。ステップＳ１４では表示コントロール部２１１はＶＲＡＭ領域２０５ａに一時蓄積された背景の画像情報にＯＳＤ領域２０５ｂに一時蓄積された指標情報を重ねて表示するように画像情報と指標情報の制御を行う。
【００５９】
ステップＳ１５において、画像処理部２０８は閲覧者の顔画像が認識されたか否かを判定する。顔画像が認識されない場合はステップＳ１２へ移行し、顔画像が認識される場合はステップＳ１６へ進む。ステップＳ１６において、画像処理部２０８は閲覧者の顔画像が１つであるか否かを判定する。閲覧者の顔画像が１つだけ認識された場合にはステップＳ１７へ進み、閲覧者の顔画像が複数認識された場合にはステップＳ１１へ移行する。ステップＳ１７において、画像処理部２０８によって閲覧者の顔画像の大きさまたは顔画像の撮像平面内での傾きが所定以上変化したと判定される場合はステップＳ１２へ移行し、所定未満の変化の場合にはステップＳ１８へ移行する。ステップＳ１８において、ＣＰＵ２１０は、使用者によってモードの終了が指示されたか否かを判定する。モードの終了が指示されていない場合はステップＳ１９へ進む。ステップＳ１９において、ＣＰＵ２１０は指標情報が変化するか否かを判定する。指標情報が変化すると判定された場合は、ステップＳ１２へ移行し指標情報加工処理を行う。なおステップＳ１８において、使用者によってモードの終了が指示されたと判定された場合は本処理を終了する。上述した複数顔認識処理Ｓ１１、顔認識処理Ｓ１２、指標情報の加工処理については別途後で詳述する。
【００６０】
・顔画像の認識処理
顔画像の認識処理について、図９のフローチャート図を用いて説明する。ステップＳ１０１において、画像処理部２０８が閲覧者の顔画像を認識した場合はステップＳ１０４へ移行し、認識しなかった場合はステップＳ１０２へ移る。ステップＳ１０２において、ＣＰＵ２１０は経過時間Ｔをカウントし始め、ステップＳ１０３に移る。ステップＳ１０３では、ＣＰＵ２１０は経過時間Ｔが所定の経過時間Ｔ１を越えたか否かを判定する。本実施形態ではＴ１を１分とする。経過時間Ｔが１分未満であればＳ１０５へ進み、経過時間Ｔが１分以上であればステップＳ１０６へ進む。
【００６１】
ステップＳ１０５において、画像処理部２０８が、閲覧者の顔画像を認識した場合、もしくはＣＰＵ２１０が使用者による操作を検知した場合にはステップＳ１０４へ進む。一方で、ステップＳ１０５において、画像処理部２０８が閲覧者の顔画像を認識せず、かつＣＰＵ２１０が使用者による操作を検知しない場合にはＳ１０３へ移行する。ステップＳ１０６において、表示コントロール部２１１は省エネモードにしても良いかを問うメッセージをＬＣＤ１０５へ表示する。
【００６２】
本実施形態では、“省エネモードにしますか？ＹＥＳ  ｏｒ  ＮＯ”と表示し、使用者へＹＥＳもしくはＮＯをカーソルキーで選択し決定するように促す。そして、ステップＳ１０７において、ＣＰＵ２１０は使用者の選択がなされたか否かを判定する。ＣＰＵ２１０によって使用者の選択がなされたと判定された場合はステップＳ１０８へ進み、選択がなされていない場合はＳ１１３へ進む。Ｓ１０８において、ＣＰＵ２１０はＹＥＳが選択されたかＮＯが選択されたかを判定する。ＹＥＳが選択された場合はステップＳ１０９へ進み、ＮＯが選択された場合はステップＳ１１０に進む。ステップＳ１０９において、ＣＰＵ２１０の指示によって当該電子カメラの顔認識に必要な機構以外への電源供給（例えばＬＣＤ１０５への電源供給等）がＯＦＦされ省エネモードになる。
【００６３】
ステップＳ１１０では、ＣＰＵ２１０は、表示する所定の指標情報をＯＳＤ領域２０５ｂに一時蓄積しステップＳ１１１に進む。ステップＳ１１１において、ＣＰＵ２１０は現在のモードが再生モードであるか否かを判定する。再生モードである場合は、ステップＳ１１２へ進み、ステップＳ１１２において再生する画像情報をＶＲＡＭ２０５ａに一時蓄積し、フローチャート図７に示すステップＳ４に移行する。一方で、ステップＳ１１１において再生モードでないと判定された場合には、フローチャート図８に示すステップＳ１４に移行する。
【００６４】
また、ステップＳ１１３において、ＣＰＵ２１０は経過時間ＴがＴ２以上になったか否かを判定する。本実施形態ではＴ２は２分とする。したがって経過時間Ｔが２分以上である場合には、ステップＳ１０９へ進み省エネモードになる。一方で経過時間Ｔが２分未満の場合にはステップＳ１０７移行する。
【００６５】
Ｓ１０９において、省エネモードが実行されるとステップＳ１１４へ移行し、画像処理部２０８が顔画像を認識した場合もしくはＣＰＵ２１０が使用者による当該電子カメラの操作が有ると判定した場合には、ステップＳ１１５へ進む。一方で、ステップＳ１１４において画像処理部２０８が顔画像を認識せず、かつＣＰＵ２１０が使用者による当該電子カメラの操作が無いと判定した場合には、ステップＳ１１６へ進む。
【００６６】
ステップＳ１１５では、ＣＰＵ２１０はステップＳ１０９で一部ＯＦＦにした電源供給をＯＮにし、省エネモードを解除してステップＳ１０４へ進む。ステップＳ１１６において、ＣＰＵ２１０は経過時間ＴがＴ３以上になったか否かを判定する。本実施形態ではＴ３は５分とする。したがって経過時間Ｔが５分以上である場合には、ステップＳ１１７へ進む。一方で、経過時間Ｔが５分未満である場合には、ステップＳ１１４へ移行する。ステップＳ１１７では、ＣＰＵ２１０によって当該電子カメラの電源供給がＯＦＦされる。
また、ステップＳ１０４ではＣＰＵ２１０は使用者による操作の有無を判定する。使用者による操作が無い場合はメインフローへリターンし本処理を終了する。一方で使用者による操作が有ると判定された場合にはステップＳ１１８へ進み入力操作を受け、入力操作に応じた処理を行いメインフローへリターンする。
【００６７】
・指標情報の加工処理
つづいて、指標情報の加工処理のフローチャート図１０および図１１〜図２４を用いて指標情報の加工処理について説明する。ステップＳ３０１において、ＣＰＵ２１０はフラッシュＲＡＭ２０９に保存されている指標情報を読み出し、ＯＳＤ領域２０５ｂに一旦保存しステップＳ３０２に進む。ステップＳ３０２では、画像処理部２０８によって、当該電子カメラに対して閲覧者の顔が撮像画像の平面内でどの程度の角度傾いているかが判定され、ステップＳ３０３に進む。
【００６８】
撮像レンズ１０６を用いて撮像した画像と顔画像の傾き角の関係を図１１〜図１４に示した。辺３１２、辺３１３、辺３１４および辺３１５によって囲まれる領域は撮像領域である。撮像領域の右側の辺３１５はＬＣＤの左側の辺１１２側となる。そして撮像領域の左側の辺３１３はＬＣＤの右側の辺１１４側となる。また、撮像領域の上側の辺３１２はＬＣＤの上側の辺１１１側となり、撮像領域の下側の辺３１４はＬＣＤの下側の辺１１３側となる。
【００６９】
したがって、以下ＬＣＤの上下左右に基づいて説明をすると、図１１の顔画像３０８ａはＬＣＤを下側から覗き込んだ場合の顔画像を示している。図１２の顔画像３０９ａはＬＣＤを右側から覗き込んだ場合の顔画像を示している。図１３の顔画像３１０ａはＬＣＤを上側から覗き込んだ場合の顔画像を示している。図１４の顔画像３１１ａはＬＣＤを左側から覗き込んだ場合の顔画像を示している。また、顔画像の傾きの判定基準となる基準ベクトル３０７は辺３１３および辺３１５と平行で、下側から上側へ向かうベクトルである。また、顔の方向ベクトル３０８ｂ〜３１１ｂはそれぞれ、顔画像３０８ａ〜３１１ａの上の方向（口が下、目が上）を示している。顔画像の上の方向の判定は周知の画像検出技術を用いて検出する。
【００７０】
ステップＳ３０３〜Ｓ３０５によって、基準ベクトル３０７と、顔方向ベクトルのなす角度φの値に基づいてステップＳ３０６〜Ｓ３０９へ振り分けられ、ステップＳ３０６〜Ｓ３０９において回転角度αが決定される。３１５°≦φ＜３６０°および０°≦φ＜４５°となるφの領域をＡ象限、４５°≦φ＜１３５°となるφの領域をＢ象限、１３５°≦φ＜２２５°となるφの領域をＣ象限、２２５°≦φ＜３１５°となるφの領域をＤ象限とする。顔の方向ベクトルがＡ象限にある場合にはα＝  ０°、顔の方向ベクトルがＢ象限にある場合にはα＝２７０°、顔の方向ベクトルがＣ象限にある場合にはα＝１８０°、顔の方向ベクトルがＤ象限にある場合にはα＝９０°となる。
【００７１】
したがって、閲覧者の顔画像の傾きが図１１に示した顔画像３０８ａの傾きの場合には、図１５のように回転加工はなされない。また閲覧者の顔画像の傾きが図１２に示した顔画像３０９ａの傾きの場合には、図１６のように図１５を０°（基準）として時計回りに２７０°回転加工が施される。また、閲覧者の顔画像の傾きが図１３に示した顔画像３１０ａの傾きの場合には、図１７のように図１５を０°（基準）として時計回りに１８０°回転加工が施される。また、閲覧者の顔画像の傾きが図１４に示した顔画像３１１ａの傾きの場合には、図１８のように図１５を０°（基準）として時計回りに９０°回転加工が施される。上述のように、ステップＳ３１０では、画像処理部２０８によって、決定された回転角度αだけ図１５を０°（基準）として時計方向に回転加工を行い、ステップＳ３１１へ進む。回転角度αだけ指標情報を時計回りに回転させることで、閲覧者にとってほぼ正対視する角度に近づくことになる。
【００７２】
ステップＳ３１１以降は指標情報の表示サイズに関連するステップである。ステップＳ３１１において、画像処理部２０８は閲覧者の顔画像の大きさＬを判定する。なお、顔画像の大きさの判定は周知の技術を用いて行う。当該電子カメラと閲覧者との距離が遠いほど（撮像平面内の顔画像が小さいほど）視認性は悪くなるため、判定された顔画像の大きさが小さいほど表示する指標情報の大きさを大きく制御する。ステップＳ３１２において、ＣＰＵ２１０によって顔画像の大きさＬが所定の閾値Ｌ１よりも小さいと判定された場合には、ステップＳ３１４へ進み、拡大倍率ｍにｍ３を設定し、ステップＳ３１７に移行する。ステップＳ３１３において、ＣＰＵ２１０によって顔画像の大きさＬがＬ１≦Ｌ≦Ｌ２であると判定される場合には、ステップＳ３１５へ進み拡大倍率ｍにｍ２を設定し、ステップＳ３１７に移行する。ステップＳ３１３において、ＣＰＵ２１０によって顔画像の大きさＬがＬ１≦Ｌ≦Ｌ２でないと判定される場合には、ステップＳ３１６へ進み拡大倍率ｍにｍ１を設定し、ステップＳ３１７に移行する。なお、本実施形態では、ｍ３>ｍ２>ｍ１である。以下の説明では顔画像の大きさＬがＬ２よりも大きい場合の表示サイズを基準サイズとする。ステップＳ３１７において、画像処理部２０８は指標情報をｍ倍に拡大加工して、ステップＳ３１８へ進む。
【００７３】
なお、本実施形態では顔画像の大きさＬは顔画像の撮像画像領域に占める割合に基づいて求める。また、所定の閾値Ｌ１は顔画像領域４％とし、当該電子カメラと閲覧者の距離は５０ｃｍ程度に相当する。Ｌ２は顔画像領域１０％とし、当該電子カメラと閲覧者の距離は３０ｃｍ程度に相当する。閲覧者の顔画像の大きさと指標情報の大きさの様子を図１９〜図２１および図２２〜図２４を用いて説明する。顔画像３０１ａ〜ｃは撮像レンズ１０６によって撮像した閲覧者の顔画像である。顔画像３０１ａの顔画像領域は２０％程度を占める場合を示しており、顔画像の大きさＬが所定の大きさＬ２よりも大きい場合を示している。また、顔画像３０１ｃの顔画像領域は２％程度を占めている場合を示しており、閾値Ｌ１よりも小さい。顔画像３０１ｂの顔画像領域は８％程度を占めている場合を示しており、Ｌ１≦Ｌ≦Ｌ２である。また、図２２、図２３および図２４に示す３０２ａ、３０２ｂ、３０２ｃ、３０３ａ、３０３ｂ、３０３ｃ、３０４ａ、３０４ｂ、３０４ｃ、３０５ａ、３０５ｂ、３０５ｃは再生モード時に表示される指標情報である。３０２ａ、３０２ｂおよび３０２ｃは撮影年月日時分、３０３ａ、３０３ｂおよび３０３ｃは撮像時の設定画素数、３０４ａ、３０４ｂおよび３０４ｃ現在表示されている画像の順番／記録されている全画像枚数、３０５ａ、３０５ｂおよび３０５ｃはバッテリーの残量を示している。
【００７４】
再生モード時に表示される指標情報を例にとると、閲覧者が図１９に示す顔画像３０１ａの場合には、ＬＣＤ１０５を視認する距離が十分近くであるため、図２２に示す３０２ａ〜３０５ａのように、標準の大きさで指標情報を視認できると判定され、拡大加工を行わない。つまりこの場合は、本実施形態ではｍ１は１倍である。図２０に示す顔画像３０１ｂのように閲覧者が少し離れた位置にいる場合には、図２３に示す３０２ｂ〜３０５ｂの様に、３０２ａ〜３０５ａと比べて大きく表示できるように加工を施す。この場合は、本実施形態ではｍ２＝１.５とし、縦横１.５倍に拡大して表示する。図２１に示す顔画像３０１ｃのように閲覧者がさらに離れた位置にいる場合には、図２４に示す３０２ｃ〜３０５ｃの様に、３０２ｂ〜３０５ｂと比べてさらに大きく表示できるように加工を施す。この場合は、本実施形態ではｍ３＝２とし、縦横２倍に加工して表示する。
ステップＳ３１８において、加工された指標情報はＣＰＵ２１０によって一旦ＯＳＤ領域２０５ｂに蓄積される。なお顔画像が複数検出される場合は、撮像領域の中心点に最も近い人の顔画像に基づいて上述の処理を行う。
【００７５】
・画像情報の加工処理
つづいて、画像情報の加工処理についてフローチャート図２５および図２６〜３３を用いて説明する。画像情報の回転処理は、画像の方向情報を考慮した上で閲覧者の顔画像に対して正対させる方向に近づける。広く使用されている画像のファイル形式であるＥｘｃｈａｎｇeａｂｌe  Iｍａｇe  ｆｉｌe  ｆｏｒｍａｔ（以下Ｅｘｉｆ）のＴａｇ情報内には画像の方向情報を付与することができ、本処理ではＥｘｉｆ  Ｔａｇ内の方向情報を読み出すことで表示方向を決定する。ステップＳ４０１においてＣＰＵ２１０はＶＲＡＭ領域２０５ａ内のＥｘｉｆ  Ｔａｇ情報を読みだしステップＳ４０２へ進む。ステップＳ４０２では、ＣＰＵ２１０によって画像情報内のＥｘｉｆ Ｔａｇに方向情報があるか否かが判定される。
【００７６】
方向情報がある場合はステップＳ４０３へ進み、方向情報が無い場合はステップＳ４０４へ進む。ステップＳ４０３では閲覧者の顔画像の方向に加えて方向情報を考慮して回転加工を行うため、顔方向ベクトルのある象限と画像方向との組み合わせによって回転角度が決定される。ステップＳ４０３において図２６のテーブルから回転角度βを読み込みステップＳ４０５へ進む。Ｓ４０５においてＣＰＵ２１０はＶＲＡＭ領域２０５ａに保存された画像情報を読み込み、ステップＳ４０６へ進む。ステップＳ４０６では読み込んだ画像情報に対して、回転角度βだけ時計回りに回転加工を行いステップＳ４０７へ進む。ステップＳ４０７では、ＣＰＵ２１０によって画像情報は一旦ＶＲＡＭ領域２０５ａへ保存されステップＳ４１１へすすむ。
【００７７】
一方、方向情報が無い画像情報内に顔画像がある場合には図２７に示すように、該画像情報内の顔画像の方向ベクトルを判定し、該ベクトルの方向の辺を上側の辺と決定する。ステップＳ４０４において、画像処理部２０８は画像情報に顔画像があるか否かを判定し、画像情報内に顔画像がある場合には、ステップＳ４０８へ進む。ステップＳ４０８において、画像処理部２０８は画像情報内の人物の顔画像から顔方向ベクトルを判定し該画像情報の方向情報を判定する。なお、顔画像が複数ある場合は、中心点に最も近い顔画像に基づいて方向を判定する。次のステップＳ４０９において、ＣＰＵ２１０ はＥｘｉｆ Ｔａｇに上記の方向情報を付与する。なお図２７に示す画像情報の場合、辺１１６が上側となる。ステップＳ４０９において、Ｅｘｉｆ Ｔａｇに方向情報が付与された画像情報はステップＳ４０３に移行する。なお、ステップＳ４０４において、画像処理部２０８によって画像情報内に顔画像が無いと判定された場合には、ステップＳ４１０に進みＣＰＵ２１０は回転角度βに０°を設定し、ステップＳ４１１へ進む。
【００７８】
ステップＳ４１１以降は画像情報の拡大処理のステップとなる。ステップＳ４１１では、ＣＰＵ２１０は画像情報をＶＲＡＭ領域２０５ａから読み出し、ステップＳ４１２へ進む。ステップＳ４１２において、ＣＰＵ２１０は回転角度βが２７０°または９０°であるか否かを判定する。βが２７０°もしくは９０°である場合には、ステップＳ４１３に進み画像情報を基準サイズに加工する。この基準サイズの場合は、ＬＣＤ１０５の短辺と画像情報の長辺が同じ長さとなり、図２８に示す画像の様に加工が施される。ステップＳ４１３において、アスペクト比を固定して画像情報の長辺がＬＣＤ１０５の短辺と同じ長さとなるサイズになるように加工を施し、ステップＳ４１５に進む。
【００７９】
一方で、回転角度βが２７０°もしくは９０°でない場合（β=０°もしくは１８０°の場合）は、ステップＳ４１４に進み画像情報を基準サイズに加工する。この基準サイズの場合はＬＣＤ１０５の長辺と画像情報の長辺が同じ長さとなり、ステップＳ４１４ではアスペクト比を固定して画像情報の長辺がＬＣＤの長辺と同じ長さとなるサイズに加工処理を施す。次にステップＳ４１５では、画像処理部２０８は画像情報がｍ倍となるように拡大加工を行う。なお、拡大倍率ｍは指標情報加工処理で設定したｍの値と同じ値を用いる。図２８の画像を１．５倍に加工した画像は図２９のように表示され、２倍した画像は図３０のように表示される。一方で、図３１の画像を１．５倍した画像は図３２のように表示され、2倍した画像は図３３のように表示される。つづいて、ステップＳ４１６において、加工された画像情報はＣＰＵ２１０によってＶＲＡＭ領域２０５ａへ再度一時蓄積されメインループへリターンする。
なお、再生モード時には、使用者（閲覧者）によって再生を指示された画像情報はＣＰＵ２１０によって予め記録媒体から読み出され、ＶＲＡＭ領域２０５ａへ一時記憶されている。
【００８０】
・複数顔認識処理
図３４のフローチャートを用いて複数顔認識処理について説明する。ステップＳ５０１において、画像処理部２０８は撮像素子２０２によって撮像された閲覧者の顔画像が複数であるか否かを判定する。複数である場合はステップＳ５０２へ進み、複数でない場合はメインループへリターンする。ステップＳ５０２では、表示コントロール部２１１は再生モードへ移行するか否かを問うメッセージをＬＣＤ１０５に表示し、ステップＳ５０３へ進む。ステップＳ５０３では、使用者からの入力を受付け、ＹＥＳであれば再生モードへ移行するため図７に示すステップＳ１へ進み、ＮＯであればメインループへリターンする。
【００８１】
（第２の実施形態）
本実施形態と第１の実施形態との異なる点は指標情報の加工処理のステップの後段に指標情報の伸張加工処理のステップが追加される点である。また、本実施形態は撮像レンズ１０６として、図３に示したθが１８０°近く撮像できるレンズを使用して実施する。
【００８２】
撮像レンズ１０６を用いて撮像された領域を図３５、図３６および図３７に示す。図３５、図３６および図３７の各図の撮像領域は横方向に３分割され、分割された各領域は領域ｉ１、領域ｉ２、領域ｉ３とする。領域ｉ１またはｉ３に存在する閲覧者が表示画面を覗く場合は、指標情報を横方向に引き伸ばして表示することで視認性を向上させることができる。また、図３８、図３９および図４０に示すようにＬＣＤ１０５の表示領域も３分割し各領域を領域ｊ１、領域ｊ２、領域ｊ３とする。閲覧者から遠い位置の指標情報がより引き伸ばされるように、領域ｉ１に存在する場合とｉ３に存在する場合で伸張率を変化させて加工する。図３５に示すように閲覧者がｉ３に観測される場合は、ｊ１に表示される指標情報は図３８のように表示される。この場合は、本実施形態では横方向に１．５倍の伸張加工を行っている。図３６に示すように閲覧者がｉ１に観測される場合は、ｊ１に表示する指標情報は図３９のように加工され表示される。この場合は、本実施形態では横方向に２倍に伸張加工を行っている。また、図３７に示すように閲覧者がｉ２に観測される場合は伸張加工処理を行わず図４０のように表示する。
【００８３】
再生モード時の表示アシストの処理について図４１のフローチャートを用いて説明する。ステップＳ２１において、画像処理部２０８は閲覧者の顔画像の認識処理を行う。ステップＳ２２において、ＣＰＵ２１０の指示によって、画像処理部２０８は指標情報の加工処理を行いステップＳ２３に進む。ステップＳ２３においてＣＰＵ２１０の指示により画像処理部２０８は指標情報の伸張加工処理を行い、ステップＳ２４に進む。ステップＳ２４ではＣＰＵ２１０の指示により画像処理部２０８は画像情報の加工処理を行いステップＳ２５へ進む。ステップＳ２５では表示コントロール部２１１はＶＲＡＭ領域２０５ａに一時蓄積された画像情報にＯＳＤ領域２０５ｂに一時蓄積された指標情報を重ねて表示するように画像情報と指標情報の制御を行う。
【００８４】
ステップＳ２６において、画像処理部２０８は閲覧者の顔画像が認識されるか否かを判定する。顔画像が認識されない場合はステップＳ２１へ移行し、顔画像が認識される場合はステップＳ２７へ進む。ステップＳ２７において、画像処理部２０８によって閲覧者の顔画像の大きさまたは顔画像の撮像平面内での傾きまたは閲覧者の顔画像の位置が所定以上変化したと判定される場合はステップＳ２１へ移行し、所定未満の変化の場合にはステップＳ２８へ移行する。ステップＳ２８において、ＣＰＵ２１０は、使用者によって再生モードの終了が指示されたか否かを判定する。再生モードの終了が指示されていない場合はステップＳ２９へ進む。ステップＳ２９において、ＣＰＵ２１０は指標情報が変化するか否かを判定する。指標情報が変化すると判定された場合は、ステップＳ２１へ移行し指標情報加工処理を行う。指標情報が変化しないと判定された場合はＳ３０へ進む。
【００８５】
ステップＳ３０において、ＣＰＵ２１０は再生画像が変化するか否かを判定する。再生画像が変化すると判定された場合は、ステップＳ２１へ移行する。再生画像が変化しないと判定された場合は、ステップＳ２６へ移行する。なおステップＳ２８において、使用者によって再生モードの終了が指示されたと判定された場合は本処理を終了する。指標情報の伸張加工処理以外のステップは第１の実施形態と同様であるので、伸張加工処理について以下に説明する。
【００８６】
・指標情報の伸張加工処理
指標情報の伸張加工処理ステップの詳細は図４２のフローチャートを用いて説明する。ステップＳ６０１において、画像処理部２０８は閲覧者の顔画像が位置する列ｉを判定しステップＳ６０２へ進む。ステップＳ６０２において、ＣＰＵ２１０によってｉ = ｉ２であると判定された場合、伸張加工処理を行わずにメインループへリターンする。一方、ｉ = ｉ２でないと判定された場合には、ステップＳ６０３へ進み、ＣＰＵ２１０は予め指標情報に付与されている表示位置情報に基づいて指標情報の表示位置の列ｊを判定しステップＳ６０４へ進む。ステップＳ６０４およびステップＳ６０５によって、閲覧者の顔画像の列と表示位置の列の組み合わせ（ｉ,ｊ）に基づいて次に進むステップが振り分けられる。（ｉ,ｊ）＝（ｉ１,ｊ１）or（ｉ３,ｊ３）の場合は、ステップＳ６０６へ進み伸張率ＸにＸ１を設定する。（ｉ,ｊ）＝（ｉ１,ｊ２）or（ｉ３,ｊ２）の場合はステップＳ６０７へ進み、伸張率ＸにＸ２を設定する。（ｉ,ｊ）＝（ｉ１,ｊ３）or（ｉ３,ｊ１）の場合は、ステップＳ６０８へ進み伸張率ＸにＸ３を設定する。なお本実施形態においては、Ｘ１は２倍、Ｘ２は１．８倍、Ｘ３は１．５倍とする。ステップＳ６０９では、ＣＰＵ２１０によってＯＳＤ領域２０５ｂから指標情報が読み出され、ステップＳ６１０へ進む。ステップＳ６１０では、画像処理部２０８によってＸ倍に指標情報の伸張加工が施されステップＳ６１１へ進む。ステップＳ６１１において、加工された指標情報はＣＰＵ２１０によって一旦ＯＳＤ領域２０５ｂに蓄積され、メインループへリターンする。
【００８７】
以上第２の実施形態における再生モード時の表示アシストについて説明したが、上記の指標情報の伸張加工の処理ステップを第１の実施形態で示したステップＳ１３の後段に挿入することで撮像モードおよびメニューモードにおいても視認性向上の効果が得られる。また、本実施形態では指標情報のみを伸張加工処理したが、画像情報においても同様の処理を施しても良い。さらに、撮像領域を横方向に３分割したが縦方向に３分割してもよい。また、複数人顔画像を認識した場合には最も中心点に近い人の位置を基準に伸張加工処理を行う。顔画像が複数の領域にまたがる場合には、該顔画像の領域は占有する割合が最も多い領域に存在するものとする。同様に指標情報が複数の領域にまたがる場合には、該指標情報の領域は占有する割合が最も多い領域に存在するものとする。
【００８８】
（第３の実施形態）
第１の実施形態および第２の実施形態においては、複数の顔画像が認識された場合は中心点に最も近い人の顔画像に基づいて加工処理がなされるが、第３の実施形態では、ＬＣＤ１０５として図４３に示すように、３方向に異なる情報を表示可能なＬＣＤを用いる。また、本実施形態は撮像レンズ１０６として、図３に示したθが１８０°近く撮像できるレンズを使用して実施する。撮像レンズ１０６を用いて撮像素子２０２に撮像される領域を図４４に示す。
【００８９】
撮像される領域は領域k１、領域k２、領域k３の３つの領域に分割し、領域ごとの中心点に最も近い人物の顔画像に基づいて第１の実施形態に示した処理を行う。また１つの顔画像が複数の領域にまたがる場合には、該顔画像の領域は占有する割合が最も多い領域に存在するものとする。図４４に示すように、領域k１に存在する人物の顔画像４０１に基づいて指標情報、画像情報の加工を行い表示方向５０３へ表示する。領域k２に存在する人物の顔画像４０２に基づいて指標情報、画像情報の加工を行い表示方向５０２へ表示する。領域k３に存在する人物の顔画像４０３に基づいて指標情報、画像情報の加工を行い表示方向５０１へ表示する。各方向へ表示する表示情報の様子は図４５に示すようになる。また、顔画像が検出されない領域がある場合は、その領域に対応する方向への表示をＯＦＦしても良い。
【００９０】
・補足
第１の実施形態において、画像情報に方向情報を付与する際に顔画像に基づいて方向を決定すると説明したが、画像の方向を推定できる特定のパターンであればその他のパターンに基づいて方向を決定しても良い。例えば、被写体の文字パターンや色のパターンなどに基づいて方向を判定しても良いし、それらの組み合わせから方向を推定して判定しても良い。
【００９１】
なお、第１〜第３の実施形態において、顔画像の大きさの判定を撮影画素領域に占める顔画像領域の割合から求めたが、他の方法を用いて顔画像の大きさを求めても良い。さらに、顔画像の大きさと拡大率の関係は本実施形態で示した数値に限定されない。同様に、顔画像の位置と伸張率の関係も本実施形態で示した数値に限定されない。そして、顔認識処理で示した経過時間の比較値Ｔ１、Ｔ２、Ｔ３も本実施形態で示した値に限定されない。
【００９２】
また、指標情報または画像情報の拡大率は３段階であるが、より連続的に拡大率を設定して滑らかに変化させても良い。また、指標情報と画像情報の、回転角度は４段階であるがより連続的に回転角度を設定して滑らかに変化させても良い。そして、指標情報の回転についてはアイコンを個別に回転させる例を示したが、指標情報を表示するレイアウト自体を回転させて表示位置を変更させても良い。また、指標情報の拡大倍率ｍと画像情報の拡大倍率ｍは同じ値を用いているが、異なる値を用いても良い。
【００９３】
なお、本実施形態では画像情報の中心を基準点として画像情報の拡大処理を施しているが、これに限定されず例えば画像内の顔画像の中心を基準点としても良い。さらに、上述の実施形態では、指標情報を大きく表示する方法として拡大加工を用いる方法を用いたが、あらかじめ、記憶装置へ大きさの異なるアイコンや文字を格納しておき、顔画像の大きさに基づいて所定の大きさの指標情報を選択する方法を用いても良い。第１の実施形態と第２の実施形態では、顔画像が複数検出された場合は撮像領域の中心点に最も近い人物の顔画像を判定基準の顔画像としたが、中心点以外の特定の点に最も近い閲覧者の顔画像を判定基準の顔画像としても良いし、顔画像の大きさまたは傾きに基づいて判定基準の顔画像を決定しても良い。
【００９４】
また、画像情報内の顔画像の検出についても同様であり、画像情報の中心点に最も近い顔画像でなくても良い。また、第３の実施形態においても同様であり、領域ごとの中心点に最も近い人物の顔画像でなくても良い。また、１つの顔画像の大きさ、傾き、位置に基づいて加工処理を行っているが、複数の顔画像の平均的な大きさ、平均的な傾き、平均的な位置に基づいて加工処理を行っても良い。
【００９５】
第３の実施形態における撮像領域は、撮像領域の長辺方向に対して３分割したが、２方向に異なる情報を表示できるＬＣＤを用いて撮像領域を２分割しても良いし、４方向以上に異なる情報を表示できるＬＣＤを用いて４分割以上の分割をしても良い。また、表示面に垂直かつ表示面の長辺に水平な平面内において表示方向が分割されているが、表示面の短辺に水平な方向に分割しても良い。
【００９６】
以上では本発明を画像情報と指標情報を重ねて表示する電子カメラに適用したが、画像情報のみまたは指標情報のみを表示する情報表示装置へも実施しうる。さらに、画像情報と指標情報を用いて説明したが、表示媒体へ表示しうる種類の情報であれば、テキスト情報や文章情報などでも良く、この限りでない。すなわち、本発明の特徴、機能を実現できる限り、本発明は実施の形態の電子カメラに限定されない。なお、以上の説明はあくまで一例であり、発明を解釈する際、上述の実施形態の記載事項と特許請求の範囲の記載事項の対応関係になんら限定も拘束もされない。
【産業上の利用可能性】
【００９７】
以上詳述したように本発明は、情報表示装置の分野において大いに利用可能である。
【図面の簡単な説明】
【００９８】
【図１】本発明を適用した電子カメラの正面から見た場合の構成を示す斜視図である。
【図２】図１に示す電子カメラの背面から見た場合の構成を示す斜視図である。
【図３】図１および図２および図３に示す電子カメラの内部構成を示す図である。
【図４】図１および図２に示す電子カメラの上部から見た場合の構成と撮像領域を示す図である。
【図５】バッファメモリの内部構成を示す図である。
【図６】画像情報の各辺を示す図である。
【図７】再生モード時の表示アシストの処理を示すフローチャート図である。
【図８】撮影モード時およびメニューモード時の表示アシストの処理を示すフローチャート図である。
【図９】顔認識の処理を示すフローチャート図である。
【図１０】指標情報の加工の処理を示すフローチャートである。
【図１１】閲覧者の顔画像の傾きの例を示す図である。
【図１２】閲覧者の顔画像の傾きの例を示す図である。
【図１３】閲覧者の顔画像の傾きの例を示す図である。
【図１４】閲覧者の顔画像の傾きの例を示す図である。
【図１５】指標情報の表示の傾きの例を示す図である。
【図１６】指標情報の表示の傾きの例を示す図である。
【図１７】指標情報の表示の傾きの例を示す図である。
【図１８】指標情報の表示の傾きの例を示す図である。
【図１９】閲覧者の顔画像の大きさの例を示す図である。
【図２０】閲覧者の顔画像の大きさの例を示す図である。
【図２１】閲覧者の顔画像の大きさの例を示す図である。
【図２２】指標情報の表示の大きさの例を示す図である。
【図２３】指標情報の表示の大きさの例を示す図である。
【図２４】指標情報の表示の大きさの例を示す図である。
【図２５】画像情報の加工の処理を示すフローチャートである。
【図２６】顔画像の傾きφと画像方向の組み合わせから決定される回転角度βの表を示す図である。
【図２７】画像情報と画像情報内の顔画像から画像の方向情報を決定する処理を示す図である。
【図２８】図２７に示す画像情報を回転させて表示した場合の表示の例を示す図である。
【図２９】図２７に示す画像情報を回転させて表示した場合の表示の例を示す図である。
【図３０】図２７に示す画像情報を回転させて表示した場合の表示の例を示す図である。
【図３１】画像情報の表示の大きさの例を示す図である。
【図３２】画像情報の表示の大きさの例を示す図である。
【図３３】画像情報の表示の大きさの例を示す図である。
【図３４】複数の顔認識をした場合の処理を示すフローチャート図である。
【図３５】顔画像の撮像位置を示す図である。
【図３６】顔画像の撮像位置を示す図である。
【図３７】顔画像の撮像位置を示す図である。
【図３８】指標情報の表示の形態を示す図である。
【図３９】指標情報の表示の形態を示す図である。
【図４０】指標情報の表示の形態を示す図である。
【図４１】再生モード時の処理を示すフローチャート図である。
【図４２】指標情報の伸張加工の処理を示すフローチャート図である。
【図４３】３方向に表示可能なＬＣＤの表示方向を示す図である。
【図４４】顔画像の撮像位置を示す図である。
【図４５】３方向に表示可能なＬＣＤへ異なる画像表示する一例を示す図である。
【符号の説明】
【００９９】
１００  電源ボタン
１０１  面
１０２  撮像レンズ
１０３  レリーズボタン
１０４  面
１０５  ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）
１０６  撮像レンズ
１０７  操作部
１０８  再生ボタン
１０９  撮影モードボタン
１１０  メニューボタン
１１１  ＬＣＤの上端部の辺
１１２  ＬＣＤの左端部の辺
１１３  ＬＣＤの下端部の辺
１１４  ＬＣＤの右端部の辺
１１５  画像の上端部の辺
１１６  画像の左端部の辺
１１７  画像の下端部の辺
１１８  画像の右端部の辺
２０１  撮像素子
２０２  撮像素子
２０３  Ａ／Ｄ変換回路（アナログ／デジタル変換回路）
２０４  バス
２０５  バッファメモリ
２０５ａ  ＶＲＡＭ領域
２０５ｂ  ＯＳＤ領域
２０５ｃ  その他の領域
２０６  Ｉ／Ｏ部
２０７  記録媒体
２０８  画像処理部
２０９  フラッシュＲＡＭ
２１０  ＣＰＵ
２１１  表示コントロール部
２１２  姿勢検出部
２１３  Ａ／Ｄ変換回路
３０１ａ  顔画像（大）
３０１ｂ  顔画像（中）
３０１ｃ  顔画像（小）
３０２ａ〜ｃ  撮影年月日時分
３０３ａ〜ｃ  撮像時の設定画素数を示すアイコン
３０４ａ〜ｃ  現在表示されている画像の順番／記録されている全画像枚数
３０５ａ〜ｃ  バッテリーの残量を示すアイコン
３０７  基準ベクトル
３０８ａ〜３１１ａ  顔画像
３０８ｂ〜３１１ｂ  方向ベクトル
３１２  撮像領域の上辺
３１３  撮像領域の左辺
３１４  撮像領域の下辺
３１５  撮像領域の右辺
４０１〜４０３  顔画像
５０１〜５０３  表示方向
【図１】
0005453717.tif 000002
【図２】
0005453717.tif 000003
【図３】
0005453717.tif 000004
【図４】
0005453717.tif 000005
【図５】
0005453717.tif 000006
【図６】
0005453717.tif 000007
【図７】
0005453717.tif 000008
【図８】
0005453717.tif 000009
【図９】
0005453717.tif 000010
【図１０】
0005453717.tif 000011
【図１１】
0005453717.tif 000012
【図１２】
0005453717.tif 000013
【図１３】
0005453717.tif 000014
【図１４】
0005453717.tif 000015
【図１５】
0005453717.tif 000016
【図１６】
0005453717.tif 000017
【図１７】
0005453717.tif 000018
【図１８】
0005453717.tif 000019
【図１９】
0005453717.tif 000020
【図２０】
0005453717.tif 000021
【図２１】
0005453717.tif 000022
【図２２】
0005453717.tif 000023
【図２３】
0005453717.tif 000024
【図２４】
0005453717.tif 000025
【図２５】
0005453717.tif 000026
【図２６】
0005453717.tif 000027
【図２７】
0005453717.tif 000028
【図２８】
0005453717.tif 000029
【図２９】
0005453717.tif 000030
【図３０】
0005453717.tif 000031
【図３１】
0005453717.tif 000032
【図３２】
0005453717.tif 000033
【図３３】
0005453717.tif 000034
【図３４】
0005453717.tif 000035
【図３５】
0005453717.tif 000036
【図３６】
0005453717.tif 000037
【図３７】
0005453717.tif 000038
【図３８】
0005453717.tif 000039
【図３９】
0005453717.tif 000040
【図４０】
0005453717.tif 000041
【図４１】
0005453717.tif 000042
【図４２】
0005453717.tif 000043
【図４３】
0005453717.tif 000044
【図４４】
0005453717.tif 000045
【図４５】
0005453717.tif 000046