(57)【要約】【課題】表示画面の視認性を向上するとともに、誤操作の発生を確実に抑えること。【解決手段】情報を表示する表示部１１と、表示部の近傍を撮影するカメラ１３と、カメラ１３により撮影された画像情報を解析する顔解析部１１４、追跡処理部１１５と、解析結果に基づいて、表示部１１に表示されている情報を拡大表示する拡大・縮小処理部１１７と、を備える。【選択図】図２
2010160274.tif 000002
【特許請求の範囲】
【請求項１】
情報を表示する表示部と、
前記表示部の近傍を撮影する撮影部と、
前記撮影部により撮影された画像情報を解析する画像解析部と、
前記画像解析部の解析結果に基づいて、前記表示部に表示されている情報を拡大表示する拡大処理部と、
を備える、画像表示装置。
【請求項２】
前記画像解析部は、前記画像情報から利用者の顔の画像を検出する顔検出部と、前記顔の画像の変化に基づいて利用者の顔が前記表示部に近づいたか否かを判定する追跡処理部と、を含み、
前記拡大処理部は、前記画像解析部により利用者の顔が前記表示部に近づけられたことが解析された時に前記拡大表示を行う、請求項１に記載の画像表示装置。
【請求項３】
前記画像解析部は、前記画像情報から利用者の視線の位置を検出する視線位置検出部を含み、
前記拡大処理部は、前記表示部において、前記視線の位置に対応する情報を拡大表示する、請求項１に記載の画像表示装置。
【請求項４】
前記表示部は、情報を表示する表示画面と前記表示画面上において利用者による操作が入力される操作部とを含み、
前記画像解析部は、前記画像情報から利用者の指の画像を検出する指検出部と、前記指の画像の変化に基づいて利用者の指が前記表示部に近づいたか否かを判定する追跡処理部と、を含み、
前記拡大処理部は、前記画像解析部により利用者の指が前記表示部に近づけられたことが解析された時に、前記表示部における指の位置に対応する情報を拡大表示する、請求項１に記載の画像表示装置。
【請求項５】
利用者による操作が入力される操作部を備え、
前記拡大処理部によって拡大表示された情報は、前記操作部に次の操作が入力されるまでの間、又は所定時間が経過するまでの間は拡大された状態が維持される、請求項１に記載の画像表示装置。
【請求項６】
前記拡大処理部は、
前記表示部における画面全体の拡大表示を行うモードと、部分的な拡大表示を行うモードとを切り換える切換部を含み、
前記切換部により選択されたモードにより画面全体の拡大表示または部分的な拡大表示を行う、請求項１に記載の画像表示装置。
【請求項７】
情報を表示画面に表示するステップと、
前記表示画面の近傍を撮影するステップと、
撮影された画像情報を解析するステップと、
前記画像解析部の解析結果に基づいて、前記表示画面に表示されている情報を拡大表示するステップと、
を備える、画像表示方法。
【請求項８】
前記画像情報を解析するステップにおいて、前記画像情報から利用者の顔が前記表示画面に近づいたか否かを判定し、
利用者の顔が前記表示画面に近づけられたことが解析された場合、前記拡大表示するステップにおいて前記拡大表示を行う、請求項７に記載の画像表示方法。
【請求項９】
前記画像情報を解析するステップにおいて、前記画像情報から利用者の視線の位置を解析し、
前記拡大表示するステップにおいて、前記表示画面における前記視線の位置に対応する情報を拡大表示する、請求項７に記載の画像表示方法。
【請求項１０】
前記画像情報を解析するステップにおいて、前記画像情報から利用者の指が前記表示画面に近づいたか否かを判定し、
前記拡大表示するステップにおいて、前記表示画面における指の位置に対応する情報を拡大表示する、請求項７に記載の画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置及び画像表示方法に関する。
【背景技術】
【０００２】
従来、例えば下記の特許文献１に記載されているように、携帯情報機器において、一覧表示された情報の中から、拡大表示させる部分の変更を容易に行うことを想定した技術が知られている。
【０００３】
また、特許文献２、特許文献３に記載されているように、自動取引装置（Ａｕｔｏｍａｔｉｃ  Ｔｅｌｌｅｒ  Ｍａｃｈｉｎｅ：ＡＴＭ）の端末装置において、表示画面を拡大することで利用者の利便性を高める技術が知られている。
【０００４】
また、近年、スマートフォンのような機器では、表示部上にタッチパネルが併設されており、表示部に表示される操作ボタンを、タッチパネルを操作することによって行う機器が出現している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−２６７０４９号公報
【特許文献２】特開平６−１６１６９１号公報
【特許文献３】特開平６−１８６９３８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記従来の技術では、拡大表示を行う場合は、利用者がメニューから表示モードを選択するために操作を行い、表示モードを切り換える必要があった。また、任意の位置を拡大表示するためには、拡大表示を行う位置にカーソルを移動するなどの煩雑な操作が必要とされていた。
【０００７】
また、携帯情報機器等において、タッチパネル式の表示部に表示された操作ボタンを操作する場合、ボタンサイズが小さいため、所望のボタンを押すことができず、誤操作をしてしまう場合が生じていた。また、ＡＴＭ等の機器においては、画面に表示されている文字を読むために画面に顔を近づけると、タッチパネルのセンサが利用者の鼻を検知してしまい、画面に何かものを置いたものと判断されたり、タッチパネルのボタンが誤操作してしまう場合があった。特に、高齢者や体に不自由がある人にとっては、小さなボタンを押下することが困難であり、押し間違いなどが発生していた。
【０００８】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、表示画面の視認性を向上するとともに、誤操作の発生を確実に抑えることが可能な、新規かつ改良された画像表示装置及び画像表示方法を提供することにある。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、本発明のある観点によれば、情報を表示する表示部と、前記表示部の近傍を撮影する撮影部と、前記撮影部により撮影された画像情報を解析する画像解析部と、前記画像解析部の解析結果に基づいて、前記表示部に表示されている情報を拡大表示する拡大処理部と、を備える、画像表示装置が提供される。
【００１０】
また、前記画像解析部は、前記画像情報から利用者の顔の画像を検出する顔検出部と、前記顔の画像の変化に基づいて利用者の顔が前記表示部に近づいたか否かを判定する追跡処理部と、を含み、前記拡大処理部は、前記画像解析部により利用者の顔が前記表示部に近づけられたことが解析された時に前記拡大表示を行うものであってもよい。
【００１１】
また、前記画像解析部は、前記画像情報から利用者の視線の位置を検出する視線位置検出部を含み、前記拡大処理部は、前記表示部において、前記視線の位置に対応する情報を拡大表示するものであってもよい。
【００１２】
また、前記表示部は、情報を表示する表示画面と前記表示画面上において利用者による操作が入力される操作部とを含み、前記画像解析部は、前記画像情報から利用者の指の画像を検出する指検出部と、前記指の画像の変化に基づいて利用者の指が前記表示部に近づいたか否かを判定する追跡処理部と、を含み、前記拡大処理部は、前記画像解析部により利用者の指が前記表示部に近づけられたことが解析された時に、前記表示部における指の位置に対応する情報を拡大表示するものであってもよい。
【００１３】
また、利用者による操作が入力される操作部を備え、前記拡大処理部によって拡大表示された情報は、前記操作部に次の操作が入力されるまでの間、又は所定時間が経過するまでの間は拡大された状態が維持されるものであってもよい。
【００１４】
また、前記拡大処理部は、前記表示部における画面全体の拡大表示を行うモードと、部分的な拡大表示を行うモードとを切り換える切換部を含み、前記切換部により選択されたモードにより画面全体の拡大表示または部分的な拡大表示を行うものであってもよい。
【００１５】
また、上記課題を解決するために、本発明の別の観点によれば、情報を表示画面に表示するステップと、前記表示画面の近傍を撮影するステップと、撮影された画像情報を解析するステップと、前記画像解析部の解析結果に基づいて、前記表示画面に表示されている情報を拡大表示するステップと、を備える、画像表示方法が提供される。
【００１６】
また、前記画像情報を解析するステップにおいて、前記画像情報から利用者の顔が前記表示画面に近づいたか否かを判定し、利用者の顔が前記表示画面に近づけられたことが解析された場合、前記拡大表示するステップにおいて前記拡大表示を行うものであってもよい。
【００１７】
また、前記画像情報を解析するステップにおいて、前記画像情報から利用者の視線の位置を解析し、前記拡大表示するステップにおいて、前記表示画面における前記視線の位置に対応する情報を拡大表示するものであってもよい。
【００１８】
また、前記画像情報を解析するステップにおいて、前記画像情報から利用者の指が前記表示画面に近づいたか否かを判定し、前記拡大表示するステップにおいて、前記表示画面における指の位置に対応する情報を拡大表示するものであってもよい。
【発明の効果】
【００１９】
本発明によれば、表示画面の視認性を向上するとともに、誤操作の発生を確実に抑えることが可能となる。
【図面の簡単な説明】
【００２０】
【図１】本発明の第１の実施形態に係る画像表示装置を示すシステムの外観図である。
【図２】本発明の第１の実施形態のシステム構成図である。
【図３】本発明の第１の実施形態に係る画像表示装置の動作を示すフローチャートである。
【図４】表示部に顔を近づけたことによって表示画面が拡大された状態を示す模式図である。
【図５】本発明の第２の実施形態のシステム構成図である。
【図６】本発明の第２の実施形態に係る画像表示装置の動作を示すフローチャートである。
【図７】視線位置に相当する文字が拡大された状態を示す模式図である。
【図８】本発明の第１の実施形態に係る画像表示装置を示すシステムの外観図である。
【図９】本発明の第３の実施形態のシステム構成図である。
【図１０】本発明の第３の実施形態に係る画像表示装置の動作を示すフローチャートである。
【図１１】表示部に顔、指を近づけたことによって、表示画面が拡大された状態を示す模式図である。
【発明を実施するための形態】
【００２１】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２２】
図１は、本発明の第１の実施形態に係る画像表示装置１を示すシステムの外観図である。
ここでは、画像表示装置１として携帯電話端末を例示する。画像表示装置１は、例えば液晶ディスプレイ等からなる表示部１１、複数のキーを含む操作部１２、カメラ１３、スピーカ１４、及びマイク１５を備えている。操作部１２には、数字等の入力のためテンキーを含むダイヤルキー１２ａ、上キー１２ｂ、下キー１２ｃ、左キー１２ｄ、右キー１２ｅ、及び機能キー１２ｆが含まれる。
【００２３】
図２は、本発明の第１の実施形態のシステム構成図である。画像表示装置１は、制御部１０１、表示部１１、操作部１２、カメラ１３、スピーカ１４、マイク１５、通話制御部１０２、通信制御部１０３、及びアンテナ１０４を備えている。
【００２４】
制御部１０１は、記憶部１１１、表示処理部１１２、カメラ処理部１１３、顔検出部１１４、追跡処理部１１５、拡大・縮小処理部１１６を持っている。記憶部１１１は、半導体メモリ等で構成され、操作部１２で入力された情報やカメラ１５で撮影した情報あるいは通信により取得（ダウンロード等）した情報等の各種情報を記憶するものである。
【００２５】
ここで、図２に示す各機能ブロックは、ハードウェア（回路）、または演算処理装置（ＣＰＵ）とこれを機能させるためのソフトウェア（プログラム）によって構成することができる。各機能ブロックを演算処理装置とソフトウェアから構成した場合、そのプログラムは、画像表示装置１が備えるメモリ、または外部から挿入されるメモリ等の記録媒体に格納されることができる。後述する第２及び第３の実施形態についても同様である。
【００２６】
表示処理部１１２は、表示部１１の表示を制御するものである。具体的には、操作部１２からの指示に基づいて、記憶部１１１から適宜表示しようとする文書を選択し、表示部１１に表示を行う。
【００２７】
カメラ処理部１１３は、顔検出部１１４、追跡処理部１１５の処理に基づいて、カメラ１３から取り込んだ情報を解析し、表示部１１に近づくものが顔か否かを判定する機能を有している。表示部１１に近づくものが顔と判断した場合は、データを拡大・縮小処理部１１６に送る。カメラ処理部１１３、顔検出部１１４、追跡処理部１１５は、画像解析部として機能する。
【００２８】
顔露出部１１４は、カメラ１３により撮影された画像において顔の検出を行い、顔検出位置情報を生成するものである。この顔検出部２１５における顔検出は、公知の方法で行えばよく、特に限定されるものではない。この顔検出は、例えば、エッジ検出または形状パターン検出による顔検出方法、候補領域を抽出して、この候補領域を少量域に分割して、各領域毎の特徴量を予め設定した顔領域パターンと照合して、その確度から顔領域を抽出する方法、顔候補領域を抽出して、各候補領域の重複度から確度を評価して顔領域を抽出する方法、および顔候補領域を抽出して、各候補領域の濃度が所定の閾値に対応する値である場合に、胴体候補領域を抽出し、顔および胴体候補領域の濃度または彩度コントラストを用いて確度を評価して、顔領域を抽出する方法等がある。
【００２９】
追跡処理部１１５は、顔検出部１１４により検出された顔領域について、カメラ１３より連続して撮り込まれた画像において顔領域を追跡処理するものである。例えば、前のフレームで撮り込まれた顔の位置情報などを記憶部１１１に記憶しておき、カメラ１３から撮り込んだ画像と比較して、顔追跡をする。
【００３０】
拡大・縮小処理部１１６は、カメラ処理部１１３からの指示に基づいて、表示部１１に表示された画像を拡大または縮小させるための処理を行う。
【００３１】
受け取った顔の位置データを基に、顔が近づいたと判断した時は、見ている部分を拡大表示する。また、顔が離れたと判断した時は、見ている部分を小さく表示するようにする。
【００３２】
通話処理部１０２、通信処理部１０３、及びアンテナ１０４は画像表示装置１の音声通話のために動作する部位である。画像表示装置１において、通話相手との間で接続が確立され、音声による通話がなされる際、通話処理部はマイク１５を介して入力された音声信号を変換し、当該音声信号を通信処理部１０３及びアンテナ１０４を介して入力された音声信号を変換し、当該音声信号を通信処理部１０３及びアンテナ１０４を介して通話相手に送る。また、通話相手から送られてきた音声信号は、アンテナ１０４及び通信処理部１０３を介して通話処理部１０２に送られ、当該通話処理部１０２において音声に変換され、スピーカ１４から出力される。
【００３３】
表示部１２は、例えば液晶ディスプレイ等で構成される。表示部１２は、顧客の操作を誘導するメッセージを配した画面や各種の入力ボタンを表示し、また操作部で入力された情報等の表示も行うようになっている。カメラ１３は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）等で構成され、利用者の顔等を画像として撮影するものである。
【００３４】
以上のような構成において、図３に基づいて、その動作の詳細について説明する。画像表示装置１では、電源が投入されると、カメラ１３より得られた画像データについて顔検出部１１４により顔検出処理を行う（ステップＳ１）。
【００３５】
次に、ステップＳ２において、顔検出部１１４により顔が検出されたか否かが判断される(ステップＳ２)。ステップＳ２において、顔が検出されない場合、ステップＳ１の前に戻り、カメラ１３より撮り込んだ画像で顔検出処理を繰り返す。一方、ステップＳ２において、顔が検出された場合には、検出された顔画像を記憶部１１１に記憶する。
【００３６】
次にステップＳ３において、カメラ１３より得られた画像データについて顔検出部１１４により顔検出処理を行う。
【００３７】
次に、ステップＳ４において、顔検出部１１４により顔が検出されたか否かが判断される。ステップＳ４において、顔が検出されない場合、一定時間が経過したか否かを判定する（ステップＳ１０）。これにより、表示部１２から顔が一定時間離れているか否かが判定される。
【００３８】
一方、ステップＳ４において、顔が検出された場合、追跡処理部１１５により、カメラ１３から撮り込まれた画像と記憶部１１１に記憶されている画像を比較する（ステップＳ５）。この比較の結果により、顔が表示部１１に近づいているか否かを判断できる。
【００３９】
ステップＳ６において、顔が近づいていると判断された場合、表示部１１に表示されている内容を顔の近づいた距離に合わせ、一定のサイズだけ大きく画面表示する（ステップＳ７）。ここで、図４は、表示部１１に顔を近づけたことによって、表示画面が拡大された状態を示している。
【００４０】
一方、ステップＳ６において、顔が近づいていないと判断された場合、ステップＳ８へ進む。ステップＳ８では、顔が表示部１１から離れているか否かを判断する。ステップＳ８において、顔が離れている（遠ざかっている）と判断された場合、表示部１１に表示されている内容を、顔が遠ざかっている距離に合わせて、一定のサイズだけ小さく画面表示する。（ステップＳ９）。
【００４１】
ステップＳ１０において、一定時間、例えば１５秒間、顔が検出されなかった場合、利用者は表示部１１の内容を見ていないと判断し、表示部１１に表示されている情報を最初の表示サイズに戻して表示する（ステップＳ１１）。ここでは拡大表示される時間を１５秒としているが、この時間に限定されるものではなく、時間は適宜設定することが可能である。
【００４２】
ステップＳ１０において、一定時間が経過していない場合は、ステップＳ１２へ進む。ステップＳ１２では、操作部１２からの入力の有無を判定する。ステップＳ１２において、操作部１２からの入力を検出した場合は、利用者は次の画面を表示するものと判断し、表示部１１に表示されている情報を最初の表示サイズに戻して表示する（ステップＳ１１）。
【００４３】
ステップＳ１０において操作部１２からの入力を検出しなかった場合は、ステップＳ３に戻り、カメラ１３より得られた画像データから、顔検出部１１４により顔検出処理を繰り返す。
【００４４】
以上説明したように第１の実施形態によれば、利用者が操作する際に表示部１１と顔の距離を判定し、距離に合わせて表示部１１上の文字サイズを変更するようにしたため、利用者はメニューなどから表示モードを指定することなく、利用者の見やすい文字サイズで表示部１１上に表示された情報を見ることができる。
【００４５】
特に視力の低い人にとっては、顔を近づけることで文字などの情報が拡大表示されるため、拡大のために煩雑な操作を行う必要がない。従って、利用者が操作の際に感じる不快感を低減することができる。また、表示部１１から顔を遠ざけた場合であっても、一定時間が経過するまでの間、または次の操作が行われるまでの間は、拡大された文字サイズが保持されるため、サイズが頻繁に変化することがなく、利用者に対して見易い表示画面を提供できる。
【００４６】
（第２の実施形態）
次に、本発明の第２の実施形態について説明する。第２の実施形態に係る画像表示装置１の外観の構成は図１と同様であり、画像表示装置１は、例えば液晶ディスプレイ等からなる表示部１１、複数のキーを含む操作部１２、カメラ１３、スピーカ１４、及びマイク１５を備えている。操作部１２には、数字等の入力のためテンキーを含むダイヤルキー１２ａ、上キー１２ｂ、下キー１２ｃ、左キー１２ｄ、右キー１２ｅ、及び機能キー１２ｆを含む。
【００４７】
図５は、本発明の第２の実施形態のシステム構成図である。画像表示装置１は、制御部１０１、表示部１１、操作部１２、カメラ１３、スピーカ１４、マイク１５、通話制御部１０２、通信制御部１０３、及びアンテナ１０４を備えている。
【００４８】
制御部１０１は、記憶部１１１、表示処理部１１２、カメラ処理部１１３、顔検出部１１４、追跡処理部１１５、拡大・縮小処理部１１６、視線位置検出部１１７を有している。記憶部１１１は、半導体メモリ等で構成され、操作部１２で入力された情報やカメラ１５で撮影した情報あるいは通信により取得（ダウンロード等）した情報等の各種情報を記憶するものである。
【００４９】
表示処理部１１２は、表示部１１の表示を制御するものである。具体的には、操作部１２からの指示に基づいて、記憶部１１１から適宜表示しようとする文書等の情報を選択し、表示部１１に表示を行う。
【００５０】
カメラ処理部１１３は、顔検出部１１４、追跡処理部１１５、視線位置検出部１１７の処理に基づいて、カメラ１３から取り込んだ情報を解析し、表示部１１に近づくものが顔か否かを判定する機能を有している。表示部１１に近づくものが顔と判断した場合は、データを拡大・縮小処理部１１６に送る。カメラ処理部１１３、顔検出部１１４、追跡処理部１１５、視線位置検出部１１７は、画像解析部として機能する。
【００５１】
顔検出部１１４は、カメラ１３により撮影された画像において顔の検出を行い、顔検出位置情報を生成するものである。この顔検出部２１５における顔検出は、第１の実施形態と同様に、公知の方法で行うことができる。
【００５２】
追跡処理部１１５は、顔検出部１１４により検出された顔領域について、カメラ１３より連続して撮り込まれた画像において顔領域を追跡処理するものである。例えば、前のフレームで撮り込まれた顔の位置情報などを記憶部１１１に記憶しておき、カメラ１３から撮り込んだ画像と比較して、顔追跡処理を行う。
【００５３】
拡大・縮小処理部１１６は、カメラ処理部１１３からの指示に基づいて、表示部１１に表示された画像を拡大または縮小させるための処理を行う。拡大・縮小処理部１１６は、受け取った顔の位置データを基に、表示部１１に顔が近づいたと判断した時は、表示部１１の表示を拡大表示する。また、表示部１１から顔が離れたと判断した時は、表示部１１の表示を小さく表示するようにする。拡大・縮小処理部１１６は、表示部１１における画面全体の拡大表示を行うモードと、部分的な拡大表示を行うモードとを切り換える切換部を含み、切換部により選択されたモードにより画面全体の拡大表示または部分的な拡大表示を行うことができる。
【００５４】
視線位置検出部１１７は、顔検出部１１１より検出された画像より視線位置を検出するもので、顔の画像中から目を検出し、目の高さ方向の位置情報と目の眼球部分の画像情報とを利用し、視線位置を決定するものである。
【００５５】
通話処理部１０２、通信処理部１０３、及びアンテナ１０４は画像表示装置１の音声通話のために動作する部位である。画像表示装置１において、通話相手との間で接続が確立され、音声による通話がなされる際、通話処理部１０２はマイク１５を介して入力された音声信号を変換し、当該音声信号を通信処理部１０３及びアンテナ１０４を介して通話相手に送る。また、通話相手から送られてきた音声信号は、アンテナ１０４及び通信処理部１０３を介して通話処理部１０２に送られ、当該通話処理部１０２において音声に変換され、スピーカ１４から出力される。
【００５６】
表示部１２は、例えば液晶ディスプレイ等で構成される。表示部１２は、顧客の操作を誘導するメッセージを配した画面や各種の入力ボタンを表示し、また操作部１２で入力された情報等の表示も行うように構成されている。
【００５７】
カメラ１３は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）等で構成され、利用者の顔等を画像として撮影するものである。
【００５８】
以上のような構成において、図６に基づいて、その動作の詳細について説明する。画像表示装置１では、電源が投入されると、カメラ１３より得られた画像データについて顔検出部１１４により顔検出処理を行う（ステップＳ２１）。
【００５９】
次に、顔検出部１１４により顔が検出されたか否かが判断される(ステップＳ２２)。ステップＳ２２において、顔が検出されない場合、ステップＳ２１の前に戻り、カメラ１３より撮り込んだ画像で顔検出処理を繰り返す。一方、ステップＳ２２において、顔が検出された場合には、検出された顔画像を記憶部１１１に記憶する。
【００６０】
次にステップＳ２３において、カメラ１３より得られた画像データについて顔検出部１１４により顔検出処理を行う。
【００６１】
次に、ステップＳ２４において、顔検出部１１４により顔が検出されたか否かが判断される。ステップＳ２４において、顔が検出されない場合、一定時間が経過したか否かを判定する（ステップＳ２８）。これにより、表示部１２から顔が一定時間離れているか否かが判定される。
【００６２】
一方、ステップＳ２４において、顔が検出された場合、追跡処理部１１５によりカメラ１３から撮り込まれた画像と記憶部１１１に記憶された画像を比較する（ステップＳ２５）。
【００６３】
次に、ステップＳ２６において、例えばカメラ１３で撮影した顔の画像中から目の高さ方向の位置情報と目の眼球部分の画像情報を記憶部１１１に記憶する。そして、記憶部１１１に記憶された目の眼球部分の画像情報と、記憶部１１１に予め記憶されている黒目パターンとのマッチングを行い、視線方向を算出する。
【００６４】
次に、ステップＳ２７において、算出された視線情報に基づき、視線位置に相当する部分の表示部１１の表示内容を拡大表示する。ここで、図７は、視線位置に相当する文字が拡大された状態を示している。
【００６５】
ステップＳ２８において、一定時間、例えば１５秒間、顔が検出されなかった場合、利用者は表示部１１の内容を見ていないと判断し、表示部１１に表示されている情報を最初の表示サイズに戻して表示する（ステップＳ２９）。
【００６６】
ステップＳ２８において、一定時間が経過していない場合は、ステップＳ３０へ進む。ステップＳ３０では、操作部１２からの入力の有無を判定する。ステップＳ３０において、操作部１２からの入力を検出した場合は、利用者は次の画面を表示するものと判断し、表示部１１に表示されている情報を最初の表示サイズに戻して表示する（ステップＳ２９）。
【００６７】
ステップＳ３０において、操作部１２からの入力を検出しなかった時は、ステップＳ２３に戻り、カメラ１３より得られた画像データから、顔検出部１１４により顔検出処理を繰り返す。
【００６８】
以上のように、第２の実施形態によれば、カメラから撮り込んだ画像情報を解析し、視線の位置により表示部１１の拡大表示をするようにしたため、操作部１２で操作することなく、視線を動かすだけで利用者に適切な情報提示を行うことが可能となる。
【００６９】
（第３の実施形態）
図８は、本発明の第３の実施形態を示すシステムの外観図である。画像表示装置２は、操作表示部２１、カメラ２２、スピーカ２３、及びマイク２４を備えている。
【００７０】
図９は、本発明の第３の実施形態のシステム構成図である。画像表示装置２は、制御部２０１、表示部２１、操作表示部２１、カメラ２２、スピーカ２３、マイク２４、通話制御部２０２、通信制御部２０３、及びアンテナ２０４を備えている。
【００７１】
制御部２０１は、記憶部２１１、表示処理部２１２、カメラ処理部２１３、顔・指検出部２１４、追跡処理部２１５、拡大・縮小処理部２１６を有している。
【００７２】
記憶部２１１は、半導体メモリ等で構成され、操作表示部２１で入力された情報やカメラ２２で撮影した情報あるいは通信により取得（ダウンロード等）した情報等の各種情報を記憶するものである。
【００７３】
表示処理部２１２は、表示部２２２の表示を制御するものである。具体的には、操作部２２１からの指示に基づいて、記憶部２１１から適宜表示しようとする文書等の情報を選択し、表示部２２２に表示を行う。
【００７４】
カメラ処理部２１３は、カメラ２２から取り込んだ情報を解析し、操作表示部２１に対する利用者の体の部位を測定し、その情報に基づき、利用者への情報提示を行う。操作表示部２１に近づくものが顔と判断した場合は、データを拡大・縮小処理部２１６に送る。
【００７５】
顔・指検出部２１４は、カメラ２２により撮影された画像において顔または指の検出を行い、顔・指検出位置情報を生成するものである。この顔・指検出部２１４における顔・指の検出は、第１の実施形態と同様に、公知の方法で行うことができる。
【００７６】
追跡処理部２１５は、顔・指検出部２１４により検出された顔領域について、カメラ２２より連続して撮り込まれた画像において顔領域を追跡処理するものである。例えば、前のフレームで撮り込まれた顔の位置情報などを記憶部２１１に記憶しておき、カメラ２２から撮り込んだ画像と比較して顔追跡をするようにしても良い。
【００７７】
拡大・縮小処理部２１６は、カメラ処理部２１３からの指示に基づいて、表示部２２２に表示された画像を拡大または縮小させるための処理を行う。拡大・縮小処理部２１６は、カメラ２２で読取った画像情報が顔画像か指画像かを判定し、それぞれの画像情報に合った拡大・縮小処理を行う。
【００７８】
拡大・縮小処理部２１６は、読取った画像情報が顔画像の場合、操作表示部２１へ顔が近づいたと判断した時は、表示画面を拡大表示する。また、操作表示部２１から顔が離れたと判断した時は、表示画面を小さく表示するようにする。
【００７９】
また、拡大・縮小処理部２１６は、読取った画像情報が指画像の場合であり、指が近づいたと判断した場合は、指を近づけようとしている画面位置の情報を大きく表示する。また、指を近づけようとしているものが入力ボタンである場合は、押下しようとしている入力ボタンを拡大表示する。複数のボタンがある場合、指の移動に伴い、順次にボタンが拡大表示されることになる。
【００８０】
操作表示部２１は、例えば液晶ディスプレイ等により構成される表示部２２２上にタッチパネル等の操作部２２１を配置して構成される。操作表示部２１は、表示部２２２に表示される入力ボタンに定義された情報を入力できるもので、表示部２２２は利用者の操作を誘導するメッセージを配した画像や各種の入力ボタンを表示し、また操作部２２１で入力された情報等の表示を行うように構成されている。ここで、表示画面が拡大表示されて表示部２２２上の入力ボタンが拡大された場合には、押下げられて反応する操作部２２１のエリア（タッチパネルのセンスエリア）も入力ボタンの大きさに合わせて拡大される。
【００８１】
通話処理部２０２、通信処理部２０３、及びアンテナ２０４は画像表示装置２の音声通話のために動作する部位である。画像表示装置２において、通話相手との間で接続が確立され音声による通話がなされる際、通話処理部２０２はマイク２４を介して入力された音声信号を変換し、当該音声信号を通信処理部２０３及びアンテナ２０４を介して通話相手に送る。また、通話相手から送られてきた音声信号は、アンテナ２０４及び通信処理部２０３を介して通話処理部２０２に送られ、当該通話処理部２０２において音声に変換され、スピーカ２３から出力される。カメラ２２は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）等で構成され、利用者の顔等を画像として撮影するものである。
【００８２】
以上のような構成において、図１０に基づいて、その動作の詳細について説明する。画像表示装置２では、電源が投入されると、カメラ２２より得られた画像データについて顔・指検出部２１４により顔・指の検出処理を行う（ステップＳ３１）。
【００８３】
次に、ステップＳ３２において、顔・指検出部２１４により顔または指が検出されたか否かが判断される。ステップＳ３２において、顔が検出されない場合、ステップＳ３１の前に戻り、カメラ２２より撮り込んだ画像で顔・指検出処理を繰り返す。一方、ステップＳ３２において、顔が検出された場合には、検出された顔画像を記憶部２１１に記憶する。
【００８４】
次にステップＳ３３において、カメラ２２より得られた画像データについて顔・指検出部２１４により顔・指検出処理を行う。
【００８５】
次に、ステップＳ３４において、顔・指検出部２１４により顔が検出されたか否かが判断される。ステップＳ３４において、顔が検出されない場合、ステップＳ４０へ進み、指が検出されたか否かを判定する（ステップＳ４０）。一方、ステップＳ３４において、顔が検出された場合、追跡処理部２１５によりカメラ２２から撮り込まれた画像と記憶部２１１に記憶された画像を比較する（ステップＳ３５）。ステップＳ３６では、この比較の結果により、顔が表示部１１に近づいているか否かを判断する。
【００８６】
ステップＳ３６において、顔が近づいていると判断された場合、表示部２２２に表示されている表示内容を、顔の近づいた距離に合わせて、一定のサイズだけ大きく画面表示する（ステップＳ３７）。ここで、図１１（Ａ）は、表示部２２２に顔を近づけたことによって、表示画面が拡大された状態を示している。
【００８７】
一方、ステップＳ３６において、顔が近づいていないと判断された場合、ステップＳ３８へ進む。ステップＳ３８では、顔が操作表示部２１から離れているか否かを判断する。ステップＳ３８において、顔が離れている（遠ざかっている）と判断された場合、表示部２２２に表示されている内容を、顔が遠ざかっている距離に合わせて、一定のサイズだけ小さく画面表示する（ステップＳ３９）。
【００８８】
上述のように、ステップＳ３４において、顔が検出されない場合、ステップＳ４０へ進み、指が検出されたか否かを判定する。この場合、顔が検出されなかったため、利用者が表示部２２２に顔を近づけた状態で表示画面を見ていないと判断し、操作部２２１を指で操作しようとしているか否かを検出する。
【００８９】
ステップＳ４０において、指が検出された場合、追跡処理部２１５によりカメラ２２から撮り込まれた画像と記憶部２１１に記憶された画像を比較する（ステップＳ４１）。次のステップＳ４２では、比較の結果に基づいて、指が近づいているか否かを判定する。
【００９０】
ステップＳ４２において、指が近づいている場合、または操作部２２１からの入力を検出した場合は、指が近づいている位置、または入力が検出されたに位置に表示されている操作ボタンを拡大表示する（ステップＳ４３）。ここで、図１１（Ｂ）は、表示部２２２に指を近づけたことによって、近づけた位置の表示画面が拡大された状態を示している。
【００９１】
ステップＳ４２において、指が近づいていない場合は、ステップＳ４４へ進む。ステップＳ４４において操作部２２１からの入力を検出しなかった場合、または、追跡処理部２１５において指が操作部２２１から離れていると判断された場合は、操作ボタンのボタンサイズを初期状態の大きさに戻す（ステップＳ４５）。
【００９２】
また、ステップＳ４０において、指が検出できなかった場合はステップＳ４６へ進む。ステップＳ４６では、一定時間、例えば１５秒間、顔または指が検出されたか否かを判定する。
【００９３】
ステップＳ４６において、一定時間が経過した場合、利用者は表示部２２２の内容を見ていないと判断し、表示部２２２に表示されている情報を最初の表示サイズに戻して表示する（ステップＳ４７）。
【００９４】
ステップＳ４６において、一定時間が経過していない場合はステップＳ４８へ進む。ステップＳ４８では、操作部２１１からの入力があったか否かを判定し、操作部２１１からの入力があった場合は、利用者は次の画面を表示するものと判断し、表示部２２２に表示されている情報を最初の表示サイズに戻して表示する（ステップＳ４７）。
【００９５】
ステップＳ４８において操作部２２１からの入力を検出しなかった時は、ステップＳ３１に戻り、カメラ２２より得られた画像データで顔・指検出部２１４により顔検出処理を繰り返す。
【００９６】
以上説明したように第３の実施形態によれば、カメラ２２から撮り込んだ画像情報を解析し、操作表示部２１に対する利用者の体の部位を判定し、その情報に基づき、利用者への情報提示を行うようにした。従って、表示する情報量の関係で操作表示部２１上に操作ボタンを小さく表示しなければならない場合であっても、指を近づけることで押下しようとする部分が拡大表示されるため、小さなボタンが表示された場合であっても、利用者による押し間違いなどの誤操作を低減させることができる。また、操作表示部２１に近づける部位（顔、指）の違いにより、拡大表示される内容が異なるため、利用者は効率良く操作を行うことが可能となる。
【００９７】
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００９８】
例えば、上述の実施形態では画像表示装置として携帯通信端末を例示したが、画像表示装置はこれに限定されるものではない。本発明は、例えば、パーソナルコンピュータ、自動取引装置（ＡＴＭ）等の各種装置に対しても広く適用できる。また、上述した実施形態では、顔、指、視線の検出方法について説明したが、これに限定されるものではなく、他の部位を検出するものであっても良い。
【符号の説明】
【００９９】
１，２    画像表示装置
１１    表示部
２１    操作表示部
１３    カメラ
１１３    カメラ処理部
１１４    顔検出部
１１５    追跡処理部
１１６    拡大・縮小処理部
１１７    視線位置検出部
【図１】
2010160274.tif 000003
【図２】
2010160274.tif 000004
【図３】
2010160274.tif 000005
【図４】
2010160274.tif 000006
【図５】
2010160274.tif 000007
【図６】
2010160274.tif 000008
【図７】
2010160274.tif 000009
【図８】
2010160274.tif 000010
【図９】
2010160274.tif 000011
【図１０】
2010160274.tif 000012
【図１１】
2010160274.tif 000013