(57)【要約】【課題】携帯情報端末等の処理装置とＨＭＤ等の表示装置との連携動作のユーザービリティを向上すること。【解決手段】携帯情報端末である処理装置は、画像を表示する表示部と、外部の表示装置が接続されたことを検出する接続検出部と、上記表示装置が接続されたことに応じて、上記表示部に表示されている画像を上記表示装置に出力する画像出力部と、上記表示装置が接続されたことに応じて、上記表示部に表示されている画像を、所定の輝度値で、上記表示装置に出力される上記画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替えるユーザーインターフェイス出力部と、を備える。【選択図】図２
2019114050.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
外部の表示装置が接続されたことを検出する接続検出部と、
前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を前記表示装置に出力する画像出力部と、
前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を、所定の輝度値で、前記表示装置に出力される前記画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替えるユーザーインターフェイス出力部と、を備える処理装置。
【請求項２】
前記ユーザーインターフェイス出力部は、前記表示部に表示した前記ユーザーインターフェイスが所定時間以上操作されないときは、前記表示部の輝度を、前記所定の輝度値より小さな値に設定するか又はゼロに設定する、請求項１に記載の処理装置。
【請求項３】
加速度センサーを更に備え、
前記ユーザーインターフェイス出力部は、前記加速度センサーから取得される前記処理装置の加速度が、所定の範囲の周期で、所定値以上の振幅で、及び又は所定回数以上の回数で、変化していることを検出することにより、前記処理装置が揺すられたことが検知されたときは、前記表示部の輝度を前記所定の輝度値に設定する、請求項１又は２に記載の処理装置。
【請求項４】
姿勢センサーを更に備え、
前記ユーザーインターフェイス出力部は、前記処理装置の前記表示部が重力方向に対し逆の方向を向いていることが前記姿勢センサーにより検知されたときは、前記表示部の輝度を所定の輝度値に設定する、請求項１ないし３のいずれか一項に記載の処理装置。
【請求項５】
前記ユーザーインターフェイス出力部は、前記表示装置が接続されたことに応じて、予め定められた複数のユーザーインターフェイスのいずれかをユーザーが選択するための選択操作要素を前記表示部に表示し、前記選択操作要素についての操作に応じて、前記表示部に表示されている画像を、対応する一の前記ユーザーインターフェイスの表示に切り替える、請求項１ないし４のいずれか一項に記載の処理装置。
【請求項６】
前記表示装置に出力する前記画像の表示解像度に関する指示を前記画像出力部に与える表示サイズ指示部を更に備える、請求項１ないし５のいずれか一項に記載の処理装置。
【請求項７】
演算部を備え、
前記ユーザーインターフェイス出力部は、前記演算部において第１アプリケーションプログラムが実行されることにより実現される、請求項１ないし６のいずれか一項に記載の処理装置。
【請求項８】
前記表示装置に出力される前記画像は、前記演算部において第２アプリケーションプログラムが実行されることにより生成され、
前記ユーザーインターフェイス出力部は、前記第２アプリケーションプログラムの種類に関する情報を前記第２アプリケーションプログラムから取得し、前記表示部に表示されている画像を、前記第２アプリケーションプログラムの種類に応じた前記ユーザーインターフェイスの表示に切り替える、請求項７に記載の処理装置。
【請求項９】
前記演算部は、前記第１アプリケーションプログラム及び前記第２アプリケーションプログラムをオペレーティングシステム上で実行し、
前記ユーザーインターフェイス出力部は、前記ユーザーインターフェイスを介してユーザーから入力される入力情報を、前記オペレーティングシステムを介して前記第２アプリケーションプログラムに入力する、請求項８に記載の処理装置。
【請求項１０】
前記表示装置は、外景を視認可能に構成された表示領域を備えて、使用者の頭部に装着されたときに前記表示領域により前記画像を前記使用者の視線の前方に、外景に重ねて表示するものであり、且つ外景を撮影するカメラを備え、
前記ユーザーインターフェイス出力部は、前記表示装置が備える前記カメラから取得される外景の撮影画像に基づいて前記使用者の視野範囲内に前記表示部が入っていないと判断されるときに、前記表示部の表示輝度を、前記所定の輝度値より小さな値に設定するか又はゼロに設定する、請求項１ないし９のいずれか一項に記載の処理装置。
【請求項１１】
前記ユーザーインターフェイス出力部は、前記表示装置が備える前記カメラから取得される外景の撮影画像に基づいて前記使用者の視野範囲内に前記表示部が入っていると判断されるときに、前記表示部に出力する画像の輝度を前記所定の輝度値に設定する、請求項１０に記載の処理装置。
【請求項１２】
前記画像出力部は、前記表示装置が備える前記カメラから取得される外景の撮影画像に基づいて前記使用者の視野範囲内に前記表示部が入っていると判断されるときに、前記表示装置に出力する前記画像の輝度を、前記使用者の視野範囲内に前記表示部が入っていないと判断されるときに比べて低下させるか又はゼロに設定する、請求項１１に記載の処理装置。
【請求項１３】
請求項１ないし１２のいずれか一項に記載の処理装置と、
外景を視認可能に構成された表示領域を備えて使用者の頭部に装着されたときに前記表示領域により前記画像を前記使用者の視線の前方に外景に重ねて表示する表示装置と、を備える表示システム。
【請求項１４】
画像を表示する表示部と、外部の表示装置が接続されたことを検出する接続検出部と、前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を前記表示装置に出力する画像出力部と、演算部と、を備える処理装置の前記演算部により実行され、前記演算部を、
前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を、所定の輝度値で、前記画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替えるユーザーインターフェイス出力部として機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置との連携動作が可能な処理装置、処理装置及び表示装置を含む表示システム、及び処理装置において実行されるプログラムに関する。
【背景技術】
【０００２】
ユーザーの頭部に装着して使用される表示装置である頭部装着型表示装置（ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ））が知られている。このようなＨＭＤをスマートフォン等の多機能携帯情報端末と連携動作させることにより、より多様なサービスを提供することが考えられる。
【０００３】
例えば、携帯情報端末には、一般に、その携帯情報端末に表示される画像や映像を外部の表示装置にも表示させるミラーリング機能が備えられている。このミラーリング機能を用いて、携帯情報端末の表示画像を例えば透過型のＨＭＤに表示させれば、ユーザーは、環境に存在する現実の物体を視野内に捉えつつ、その視野内において携帯情報端末の表示画像をも見ることができ、便宜である。
【０００４】
しかしながら、従来のミラーリング機能により携帯情報端末の表示画像を単にＨＭＤに表示した場合、例えば携帯情報端末上で再生され表示される映像が、ＨＭＤ上に表示された後も携帯情報端末上で不要に表示され続ける。このとき、携帯情報端末上では、その映像に係る操作（早送りや一時停止など）に必要なユーザーインターフェイス（以下、ＵＩともいう）は、例えばその映像を邪魔しない範囲で小さく表示される状態が継続する。また、いわゆる透過型のＨＭＤの場合、ユーザーは、ＨＭＤ上に表示された映像越しに携帯情報端末上のＵＩを見ることとなり、その視認性が低下する。その結果、映像自身はＨＭＤに表示されて見やすくなる一方、携帯情報端末上のＵＩの操作性は低下し、ＨＭＤに画像をミラーリングすることの利便性や有用性が低下してしまうこととなり得る。
【０００５】
したがって、ミラーリング機能を用いて携帯情報端末上の画像をＨＭＤに表示する従来のＨＭＤ−携帯情報端末の連携動作では、ユーザービリティの点で改善の余地がある。
【０００６】
関連する従来技術として、特許文献１には、外部装置に表示されたアイコンを、透過型のＨＭＤに再配列して表示し、ＨＭＤからアイコンを操作可能とすることが記載されている。
【０００７】
また、他の従来技術として、特許文献２には、携帯情報端末に表示される個人情報入力のためのユーザーインターフェイスをＨＭＤに表示すると共に、入力される個人情報が携帯情報端末上に表示されないようにすることが記載されている。
【０００８】
しかしながら、これらの従来技術は、携帯情報端末のミラーリング機能を用いた、ＨＭＤと携帯情報端末との連携動作におけるユーザービリティの向上という課題についての解決策を与えるものではない。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１５−４９８８３号公報
【特許文献２】特表２０１６−５０６５３０号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
本発明の目的は、携帯情報端末等の処理装置とＨＭＤ等の表示装置との間の、ミラーリング機能を用いた連携動作のユーザービリティを向上することである。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明の処理装置は、画像を表示する表示部と、外部の表示装置が接続されたことを検出する接続検出部と、前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を前記表示装置に出力する画像出力部と、前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を、所定の輝度値で、前記表示装置に出力される前記画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替えるユーザーインターフェイス出力部と、を備える。
この構成によれば、表示装置に画像が表示されているときに、処理装置上にユーザーインターフェイスを例えば大きく表示して、ユーザーの入力操作を容易にすることができる。その結果、操作性の観点から、処理装置と表示装置との連携動作のユーザービリティが向上する。
【００１２】
また、本発明は、前記ユーザーインターフェイス出力部は、前記表示部に表示した前記ユーザーインターフェイスが所定時間以上操作されないときは、前記表示部の輝度を、前記所定の輝度値より小さな値に設定するか又はゼロに設定する。
この構成によれば、表示部に表示されたユーザーインターフェイスを操作する必要がなくユーザーが表示部を視認する必要のないときには、表示部で消費される電力を低減して、処理装置の電力消費を低減することができる。その結果、運用コストの観点からも、処理装置と表示装置との連携動作のユーザービリティが向上する。
【００１３】
また、本発明は、加速度センサーを更に備え、前記ユーザーインターフェイス出力部は、前記加速度センサーから取得される前記処理装置の加速度が、所定の範囲の周期で、所定値以上の振幅で、及び又は所定回数以上の回数で、変化していることを検出することにより、前記処理装置が揺すられたことが検知されたときは、前記表示部の輝度を前記所定の輝度値に設定する。
この構成によれば、ユーザーは、表示部の表示輝度が低く設定されていてユーザーインターフェイスを視認しにくいときは、処理装置を振るだけで、表示部上のユーザーインターフェイスを明るく表示させることができる。その結果、操作性の観点での、処理装置と表示装置との連携動作のユーザービリティが更に向上する。
【００１４】
また、本発明は、姿勢センサーを更に備え、前記ユーザーインターフェイス出力部は、前記処理装置の前記表示部が重力方向に対し逆の方向を向いていることが前記姿勢センサーにより検知されたときは、前記表示部の輝度を所定の輝度値に設定する。
この構成によれば、ユーザーは、表示部の表示輝度が低く設定されていてユーザーインターフェイスを視認しにくいときは、表示部を重力方向に対し逆の“上”方向に向けるだけで、表示部上のユーザーインターフェイスを明るく表示させることができる。その結果、操作性の観点での、処理装置と表示装置との連携動作のユーザービリティが更に向上する。
【００１５】
また、本発明は、前記ユーザーインターフェイス出力部は、前記表示装置が接続されたことに応じて、予め定められた複数のユーザーインターフェイスのいずれかをユーザーが選択するための選択操作要素を前記表示部に表示し、前記選択操作要素についての操作に応じて、前記表示部に表示されている画像を、対応する一の前記ユーザーインターフェイスの表示に切り替える。
この構成によれば、ユーザーは、表示装置に表示される画像に応じた適切なユーザーインターフェイスを処理装置の表示部に表示させることができる。その結果、処理装置と表示装置との連携動作の、操作性の観点でのユーザービリティがより向上する。
【００１６】
また、本発明は、前記表示装置に出力する前記画像の表示解像度に関する指示を前記画像出力部に与える表示サイズ指示部を更に備える。
この構成によれば、表示装置に適したアスペクト比の画像を表示装置上に表示できるので、表示装置における表示領域の利用効率を向上させることができる。その結果、ユーザーに提供し得る情報量の観点からも、処理装置と表示装置との連携動作のユーザービリティを向上し得る。
【００１７】
また、本発明は、演算部を備え、前記ユーザーインターフェイス出力部は、前記演算部において第１アプリケーションプログラムが実行されることにより実現される。
この構成によれば、オペレーティングシステムを作り替えることなく、単にアプリケーションプログラムを実行することで、処理装置と表示装置との連携動作のユーザービリティを容易に向上させることができる。
【００１８】
また、本発明は、前記表示装置に出力される前記画像は、前記演算部において第２アプリケーションプログラムが実行されることにより生成され、前記ユーザーインターフェイス出力部は、前記第２アプリケーションプログラムの種類に関する情報を前記第２アプリケーションプログラムから取得し、前記表示部に表示されている画像を、前記第２アプリケーションプログラムの種類に応じた前記ユーザーインターフェイスの表示に切り替える。
この構成によれば、処理装置は、表示装置に表示される画像に応じた適切なユーザーインターフェイスを表示部に自動で表示するので、処理装置と表示装置との連携動作の、操作性の観点でのユーザービリティが更に向上する。
【００１９】
また、本発明は、前記演算部は、前記第１アプリケーションプログラム及び前記第２アプリケーションプログラムをオペレーティングシステム上で実行し、前記ユーザーインターフェイス出力部は、前記ユーザーインターフェイスを介してユーザーから入力される入力情報を、前記オペレーティングシステムを介して前記第２アプリケーションプログラムに入力する。
この構成によれば、ユーザーインターフェイス出力部は、表示部に表示させたユーザーインターフェイスに対するユーザーの操作の情報を、その情報の受け渡し先を特定することなく、表示装置に出力した画像の提供元であるプログラムに適切に渡すことができる。これにより、ユーザーインターフェイス出力部を設けたことによる演算部の処理負荷の増加を抑えて、処理装置と表示装置との連携動作の、円滑さの観点でのユーザービリティが向上する。
【００２０】
また、本発明は、前記表示装置は、外景を視認可能に構成された表示領域を備えて、使用者の頭部に装着されたときに前記表示領域により前記画像を前記使用者の視線の前方に、外景に重ねて表示するものであり、且つ外景を撮影するカメラを備え、前記ユーザーインターフェイス出力部は、前記表示装置が備える前記カメラから取得される外景の撮影画像に基づいて前記使用者の視野範囲内に前記表示部が入っていないと判断されるときに、前記表示部の表示輝度を、前記所定の輝度値より小さな値に設定するか又はゼロに設定する。
本構成によれば、使用者の視野範囲内に表示部が入っておらず、従って表示部上のユーザーインターフェイスが操作される可能性が低いときは、表示部の輝度を下げて処理装置の不要な電力消費を回避することができる。その結果、運用コストの観点から、ＨＭＤと処理装置との連携動作のユーザービリティを向上することができる。
【００２１】
また、本発明は、前記ユーザーインターフェイス出力部は、前記表示装置が備える前記カメラから取得される外景の撮影画像に基づいて前記使用者の視野範囲内に前記表示部が入っていると判断されるときに、前記表示部に出力する画像の輝度を前記所定の輝度値に設定する。
本構成によれば、使用者の視野範囲内に表示部が入り、従って表示部上のユーザーインターフェイスが操作される可能性が高くなったときに、表示部上のユーザーインターフェイスの輝度値を上げて視認を容易にすることができる。その結果、操作性の観点から、ＨＭＤと処理装置との連携動作のユーザービリティを向上することができる。
【００２２】
また、本発明は、前記画像出力部は、前記表示装置が備える前記カメラから取得される外景の撮影画像に基づいて前記使用者の視野範囲内に前記表示部が入っていると判断されるときに、前記表示装置に出力する前記画像の輝度を、前記使用者の視野範囲内に前記表示部が入っていないと判断されるときに比べて低下させるか、又はゼロに設定する。
本構成によれば、使用者の視野範囲内に表示部が入り、従って表示部上のユーザーインターフェイスが操作される可能性が高いときに、表示装置において、外景としての表示部の画面に重ねて表示される画像の輝度が低減される。その結果、表示部上のユーザーインターフェイスの視認性をより高めて、ＨＭＤと処理装置との連携動作のユーザービリティを、操作性の観点から向上することができる。
【００２３】
また、上記課題を解決するために、本発明は、上記いずれかの処理装置と、外景を視認可能に構成された表示領域を備えて使用者の頭部に装着されたときに前記表示領域により前記画像を前記使用者の視線の前方に外景に重ねて表示する表示装置と、を備える表示システムである。
この構成によれば、特にＨＭＤと処理装置との連携動作のユーザービリティを向上し得る表示システムを実現することができる。
【００２４】
また、上記課題を解決するために、本発明は、画像を表示する表示部と、外部の表示装置が接続されたことを検出する接続検出部と、前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を前記表示装置に出力する画像出力部と、演算部と、を備える処理装置の前記演算部により実行され、前記演算部を、前記表示装置が接続されたことに応じて、前記表示部に表示されている画像を、所定の輝度値で、前記画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替えるユーザーインターフェイス出力部として機能させるプログラムである。
この構成によれば、表示装置に画像が表示されているときに、処理装置上にユーザーインターフェイスを例えば大きく表示して、ユーザーの入力操作を容易にすることができる。その結果、操作性の観点から、処理装置と表示装置との連携動作のユーザービリティが向上する。
【図面の簡単な説明】
【００２５】
【図１】本発明の一実施形態に係る表示システムを構成するＨＭＤ及び携帯情報端末の外観図。
【図２】ＨＭＤ及び携帯情報端末の構成を示す図。
【図３】携帯情報端末に表示される画像の一例を示す図。
【図４】従来の、ミラーリング機能によりＨＭＤに表示される画像の一例を示す図。
【図５】携帯情報端末によりＨＭＤに表示される画像の一例を示す図。
【図６】携帯情報端末が表示するユーザーインターフェイスの表示画面の一例を示す図。
【図７】携帯情報端末が表示するユーザーインターフェイスの表示画面の他の一例を示す図。
【図８】携帯情報端末が表示するユーザーインターフェイスの表示画面の更に他の一例を示す図。
【発明を実施するための形態】
【００２６】
図１は、本発明を適用した実施形態に係る表示システム１の構成を示す図である。
表示システム１は、処理装置である携帯情報端末３００と、携帯情報端末３００に対する外部の表示装置であるＨＭＤ（Ｈｅａｄ  Ｍｏｕｎｔｅｄ  Ｄｉｓｐｌａｙ：頭部装着型表示装置）１００と、を備える。
【００２７】
ＨＭＤ１００は、外景を視認可能に構成された表示領域を備えて、使用者（以下、ユーザーともいう）の頭部に装着されたときに上記表示領域により使用者の視線の前方に画像を生成する表示装置である。
【００２８】
画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有する。画像表示部２０は、右保持部２１と、左保持部２３と、前部フレーム２７とを有する本体に、右表示ユニット２２、左表示ユニット２４、右導光板２６、及び左導光板２８を備える。
【００２９】
右保持部２１及び左保持部２３は、それぞれ、前部フレーム２７の両端部から後方に延び、眼鏡のテンプル（つる）のように、使用者の頭部に画像表示部２０を保持する。
【００３０】
右表示ユニット２２及び左表示ユニット２４は、例えば有機エレクトロルミネッセンスにより発光するＯＬＥＤ（Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）を用いて構成され、使用者の右眼用及び左眼用の画像光をそれぞれ出力する。
【００３１】
右導光板２６及び左導光板２８は、例えばプリズムである。右導光板２６は、外光を透過して使用者の右眼に導くと共に、右保持部２１に設けられた右表示ユニット２２からの右画像光を使用者の右眼に導いて、右眼に画像を視認させる。また、左導光板２８は、外光を透過して使用者の左眼に導くと共に、左保持部２３に設けられた左表示ユニット２４からの左画像光を使用者の左眼に導いて、左眼に画像を視認させる。
【００３２】
これにより、画像表示部２０は、使用者に対し外景を視認可能にしつつ、右表示ユニット２２及び左表示ユニット２４の画像光により、虚像を使用者に視認させて画像を表示する。
【００３３】
画像表示部２０は、更に、右表示ユニット２２に配されたカメラ６１を備える。カメラ６１は、例えば画像表示部２０の前部フレーム２７に設けられた穴を通して、画像表示部２０の向きに応じたユーザーの視認範囲の環境の画像を取得する。カメラ６１は、例えば、ＣＣＤやＣＭＯＳ等の撮像素子及び撮像レンズ等を備えるデジタルカメラである。
【００３４】
画像表示部２０は、接続ケーブル４０により接続装置１０に接続されている。接続装置１０は、箱形のケース（筐体、あるいは本体ともいえる）にコネクター１１を備え、コネクター１１を介して携帯情報端末３００と接続される。接続装置１０は、コネクター１１を介して、携帯情報端末３００から出力される画像を受信し、画像表示部２０の右表示ユニット２２及び左表示ユニット２４を制御して、受信した画像をユーザーに対して表示する。また、接続装置１０は、及びカメラ６１からの画像データを、コネクター１１を介して携帯情報端末３００へ送信する。
【００３５】
接続装置１０のコネクター１１は、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）コネクターである。
【００３６】
携帯情報端末３００は、携帯情報端末３００の向きや動きを検知する９軸センサー３０１と、画像を表示する表示部３０３と、コネクター３０４と、を備える。
【００３７】
携帯情報端末３００のコネクター３０４は、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）コネクターであり、コネクター３０４とコネクター１１とは、例えばＵＳＢケーブルである通信ケーブル４２により接続されている。
【００３８】
処理装置である携帯情報端末３００は、本実施形態では、例えばスマートフォンである。ただし、携帯情報端末３００を、タブレット型コンピューターやノート型コンピューター等の可搬型のコンピューターであるものとすることもできる。
【００３９】
図２は、表示システム１を構成するＨＭＤ１００及び携帯情報端末３００の構成を示す図である。上述のように、ＨＭＤ１００は、接続ケーブル４０により互いに接続された接続装置１０と画像表示部２０とで構成される。
【００４０】
画像表示部２０の右表示ユニット２２は、カメラ６１のほか、受信部（Ｒｘ）１０２と、ＯＬＥＤユニット１０４と、カメラＩ／Ｆ（インターフェイス）１０６と、を備える。Ｒｘ１０２は、右眼用の画像信号である右画像信号を接続装置１０から受信してＯＬＥＤユニット１０４に出力する。ＯＬＥＤユニット１０４は、例えば、ＯＬＥＤ（図示略）と、ＯＬＥＤを駆動する駆動回路（図示略）とで構成される。ＯＬＥＤユニット１０４は、受信した右画像信号に基づき、右導光板２６に向けて右画像光を出力する。また、カメラＩ／Ｆ１０６は、接続装置１０から送信されるカメラ６１への制御信号を受信すると共に、カメラ６１からの画像信号を接続装置１０へ送信する。
【００４１】
画像表示部２０の左表示ユニット２４は、受信部（Ｒｘ）１１２と、ＯＬＥＤユニット１１４とを備える。受信部（Ｒｘ）１１２は、左眼用の画像信号である左画像信号を接続装置１０から受信してＯＬＥＤユニット１１４に出力する。ＯＬＥＤユニット１１４は、ＯＬＥＤユニット１０４と同様に、例えば、ＯＬＥＤ（図示略）と、ＯＬＥＤを駆動する駆動回路（図示略）とで構成される。ＯＬＥＤユニット１１４は、受信した左画像信号に基づき、左導光板２８に向けて左画像光を出力する。
【００４２】
画像表示部２０の各部は、接続ケーブル４０を介して接続装置１０の電源部２０６から供給される電力により動作する。画像表示部２０は、電源部２０６からの電源入力の分配や電圧変換等を行う電源回路（図示略）を備えてもよい。
【００４３】
接続装置１０は、送信部（Ｔｘ）２０２、カメラＩ／Ｆ２０４、電源部２０６、操作部２０８、制御部２１０、不揮発性記憶部２１２、及び通信Ｉ／Ｆ（インターフェイス）部２１４を備える。Ｔｘ２０２は、制御部２１０が出力する右画像信号及び左画像信号を、画像表示部２０のＲｘ１０２及び１１２へそれぞれ送信する。
【００４４】
不揮発性記憶部２１２は、制御部２１０が処理するデータ等を不揮発的に記憶する記憶装置である。不揮発性記憶部２１２は、例えば、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）等の磁気的記録装置、或いは、フラッシュメモリー等の半導体記憶素子を用いた記憶装置である。
【００４５】
通信Ｉ／Ｆ部２１４は、本実施形態では例えばＵＳＢ通信規格に準拠して携帯情報端末３００との間で有線通信を行う。
【００４６】
電源部２０６は、本実施形態では、コネクター１１に接続された、例えばＵＳＢケーブルである通信ケーブル４２及び通信Ｉ／Ｆ部２１４を介して携帯情報端末３００から供給される電力に基づき、接続装置１０の各部および画像表示部２０への電源供給を行う。電源部２０６は、電圧変換回路（図示略）を内蔵し、異なる電圧を接続装置１０及び画像表示部２０の各部に供給可能な構成であってもよい。また、電源部２０６は、ロジック回路あるいはＦＰＧＡ等のデバイスで構成されるものとすることができる。なお、電源部２０６は、上記の構成に限らず、携帯情報端末３００から供給される電力に代えて、接続装置１０が備える充電可能なバッテリー（図示略）からの電力に基づいて、接続装置１０の各部および画像表示部２０に対する電源供給を行ってもよい。
【００４７】
操作部２０８は、ユーザーが操作することのできるボタンやスイッチで構成され、制御部２１０に指示やデータを入力するのに用いられる。
【００４８】
制御部２１０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等のプロセッサーを備えるコンピューターである。制御部２１０は、プログラムが書き込まれたＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、データの一時記憶のためのＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等を有する構成であってもよい。そして、制御部２１０は、機能要素（又は機能ユニット）として、表示制御部２２０と、カメラ制御部２２２と、を有する。
【００４９】
制御部２１０が備えるこれらの機能要素は、例えば、コンピューターである制御部２１０がプログラムを実行することにより実現される。なお、上記コンピューター・プログラムは、コンピューター読み取り可能な任意の記憶媒体に記憶させておくことができる。
【００５０】
上記に代えて、制御部２１０が備える上記機能要素の全部又は一部を、それぞれ一つ以上の電子回路部品を含むハードウェアにより構成することもできる。そのようなハードウェアは、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）やＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）等、プログラムされたハードウェアを含むものとすることができる。
【００５１】
表示制御部２２０は、携帯情報端末３００からの画像データを通信Ｉ／Ｆ部２１４を介して受信し、画像表示部２０への表示を行うための右画像信号及び左画像信号を生成する。また、表示制御部２２０は、生成した右画像信号及び左画像信号を、Ｔｘ２０２を介して画像表示部２０のＲｘ１０２及び１１２へそれぞれ送信する。これにより、携帯情報端末３００から出力される画像が画像表示部２０においてユーザーに対して表示される。
【００５２】
カメラ制御部２２２は、カメラＩ／Ｆ２０４を介してカメラ６１が撮影した画像を取得する。また、カメラ制御部２２２は、カメラ６１から取得した画像の画像データを、通信Ｉ／Ｆ部２１４を介して携帯情報端末３００へ送信する。
【００５３】
携帯情報端末３００は、９軸センサー３０１と、表示部３０３と、制御部３１０と、無線通信部３１４と、不揮発性記憶部３１６と、通信Ｉ／Ｆ（インターフェイス）部３１８と、を備える。
【００５４】
表示部３０３は、表示パネル３２０とタッチセンサー３２２とで構成される。表示パネル３２０は、例えば液晶表示パネルであり、タッチセンサー３２２は、例えばタッチパネルである。表示部３０３は、表示パネル３２０上に画像を表示するほか、表示パネル３２０上にボタン等のユーザーインターフェース（ＵＩ）を表示し、タッチセンサー３２２と協働してユーザーからの入力を取得する。
【００５５】
９軸センサー３０１は、加速度センサー及び姿勢センサーに対応する。９軸センサー３０１は、携帯情報端末３００の筐体の加速度（３軸）、角速度（３軸）、地磁気（３軸）を検出して、携帯情報端末３００の向き（姿勢）及び動きを検知する。９軸センサー３０１は、例えば、モーションセンサー（慣性センサー）である３軸加速度センサー及び３軸ジャイロ（角速度）センサーと、３軸の地磁気センサーである磁気センサーとで構成される。
【００５６】
無線通信部３１４は、無線送受信器である。制御部３１０は、無線通信部３１４を介してインターネット網にアクセスし、ワールドワイドウェブを構成する各種サーバー等から、画像情報を含む各種の情報を取得する。
【００５７】
通信Ｉ／Ｆ部３１８は、本実施形態では例えばＵＳＢ通信規格に準拠して、接続装置１０の通信Ｉ／Ｆ部２１４との間で有線通信を行う。ただし、通信Ｉ／Ｆ部３１８と通信Ｉ／Ｆ部２１４との間の通信は、ＵＳＢ通信規格に従う有線通信に限らず、有線及び無線を含む他の種々の通信規格に従って行われるものとすることができる。
【００５８】
不揮発性記憶部３１６は、制御部３１０により実行されるプログラムや、制御部３１０が処理するデータを不揮発的に記憶する。不揮発性記憶部３１６は、例えば、ＨＤＤ等の磁気的記録装置、或いは、フラッシュメモリー等の半導体記憶素子を用いた記憶装置である。
【００５９】
不揮発性記憶部３１６は、制御部３１０が実行する基本制御プログラムとしてのオペレーティングシステム（ＯＳ）、ＯＳをプラットフォームとして動作するアプリケーションプログラム等を記憶する。また、不揮発性記憶部３１６は、アプリケーションプログラムの実行時に処理されるデータや処理結果のデータを記憶する。
【００６０】
制御部３１０は、演算部であり、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）やマイコン等のプロセッサー（図示略）を備え、このプロセッサーによりプログラムを実行することにより、携帯情報端末３００の各部を制御する。制御部３１０は、プロセッサーが実行する制御プログラムを不揮発的に記憶するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、及び、プロセッサーのワークエリアを構成するＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）を備えてもよい。
【００６１】
そして、制御部３１０は、機能要素（又は機能ユニット）として、アプリケーション部３３０と、接続検出部３３２と、画像出力部３３４と、表示サイズ指示部３３６と、ユーザーインターフェイス（ＵＩ）出力部３３８と、を有する。また、制御部３１０は、カメラ画像認識部３４２と、オペレーティングシステム（ＯＳ）３４４と、を有する。ＵＩ出力部３３８は、さらに、機能要素として表示輝度設定部３４０を含む。
【００６２】
制御部３１０が備えるこれらの機能要素は、コンピューターである制御部３１０がプログラムを実行することにより実現される。なお、上記コンピューター・プログラムは、不揮発性記憶部３１６に記憶させておいたり、コンピューター読み取り可能な任意の記憶媒体に記憶させておくことができる。
【００６３】
接続検出部３３２、画像出力部３３４、表示サイズ指示部３３６、ＵＩ出力部３３８、表示輝度設定部３４０、及びカメラ画像認識部３４２は、制御部３１０が、第１アプリケーションプログラムを実行することにより実現される。第１アプリケーションプログラムは、例えば不揮発性記憶部３１６に保存されている。
【００６４】
ただし、これに限らず、ＵＩ出力部３３８を、第１アプリケーションプログラムではなく、ＯＳ３４４の一部として実現されものとしてもよい。
【００６５】
アプリケーション部３３０は、制御部３１０が、第２アプリケーションプログラムを実行することにより実現され、例えば表示部３０３に動画像（即ち、映像）や静止画像を表示する等、予め定義された任意の処理を行う。第２アプリケーションプログラムは、例えば、制御部３１０により無線通信部３１４を介してワールドワイドウェブ上のサーバー等からダウンロードされて不揮発性記憶部３１６に記憶される。
【００６６】
なお、以下においては、アプリケーションプログラム及びアプリケーションプログラムの実行により実現される機能要素を、「アプリケーション」又は「アプリ」とも称するものとする。
【００６７】
ＯＳ３４４は、制御部３１０が、例えば不揮発性記憶部３１６に予め記憶されたＯＳプログラムを実行することにより実現される。ＯＳ３４４は、携帯情報端末３００が備える９軸センサー３０１、表示部３０３、及び通信Ｉ／Ｆ部３１８を含む各種デバイスを動作させるためのデバイスドライバーを備える。また、ＯＳ３４４は、アプリケーション部３３０等のアプリケーションに、各種のアプリケーション・プログラミング・インターフェース（ＡＰＩ、Ａｐｐｌｉｃａｔｉｏｎ  Ｐｒｏｇｒａｍｍｉｎｇ  Ｉｎｔｅｒｆａｃｅ）を提供する。ＡＰＩは、一般に、コマンドコードと引数とを与えることにより所定の処理を実行し、そのコマンド及び引数に応じたデータやステイタスを応答として返すソフトウェア関数である。なお、以下において、“ＯＳ３４４に指示する”ことや、又は“ＯＳ３４４を介して設定する”ことは、例えば、その指示又は設定を実行するための対応する上記ＡＰＩをコールすること、又はＯＳ３４４内の対応するパラメーターを設定することで実現され得る。
【００６８】
上述したＵＩ出力部３３８等を実現する第１アプリケーションプログラム、及びアプリケーション部３３０を実現する第２アプリケーションプログラムは、それぞれＯＳ３４４上で実行される。
【００６９】
接続検出部３３２は、例えばＯＳ３４４を介して通信Ｉ／Ｆ部３１８のステイタス情報を取得して、携帯情報端末３００に外部の表示装置が接続されたことを検出し、表示装置が接続された旨の通知を、画像出力部３３４及びＵＩ出力部３３８へ送る。本実施形態では、外部の表示装置は、ＨＭＤ１００である。
【００７０】
また、接続検出部３３２は、通信Ｉ／Ｆ部３１８から取得したステイタスから携帯情報端末３００に接続された表示装置の型式情報を取得して、その型式情報を表示サイズ指示部３３６へ送る。
【００７１】
さらに、接続検出部３３２は、通信Ｉ／Ｆ部３１８のステイタス情報を取得して、携帯情報端末３００と外部の表示装置との接続が解除されたことを検出し、表示装置との接続が解除された旨の通知を、画像出力部３３４及びＵＩ出力部３３８へ送る。
【００７２】
画像出力部３３４は、外部の表示装置である例えばＨＭＤ１００が接続されたことに応じて、ＯＳ３４４が備えるミラーリング機能により、表示部３０３に表示されている画像をＨＭＤ１００に出力する。ここで、表示部３０３に表示されている画像とは、ＯＳ３４４により生成される画像、又はアプリケーション部３３０により（即ち、制御部３１０において第２アプリケーションプログラムが実行されることにより）生成される画像である。
【００７３】
具体的には、画像出力部３３４は、ＯＳ３４４に対し、現在において表示部３０３に表示されているフォアグランド画像を指定して、ミラーリング機能によりそのフォアグラウンド画像を外部の表示装置であるＨＭＤ１００へ出力するよう指示する。
【００７４】
また、画像出力部３３４は、ＨＭＤ１００に出力する画像のサイズに関する指示（画像サイズ指示）を受け取り、受け取った画像サイズ指示に沿った画像をＨＭＤ１００に出力するようＯＳ３４４に指示する。
【００７５】
表示サイズ指示部３３６は、携帯情報端末３００に接続された表示装置に、その表示装置の表示領域に適したサイズの画像が表示されるように、その表示装置に出力する画像のサイズに関する指示（画像サイズ指示）を画像出力部３３４に送る。不揮発性記憶部３１６には、携帯情報端末３００に接続される種々の型式の表示装置に対して設定すべきその表示装置に適した画像サイズの指定が、サイズ情報として予め保存されている。
【００７６】
表示サイズ指示部３３６は、接続検出部３３２から送られた表示装置の型式情報に基づいて上記サイズ情報を参照し、接続された表示装置に適した画像サイズを特定する。そして、表示サイズ指示部３３６は、特定した画像サイズに基づいて画像サイズ指示を生成し、画像出力部３３４へ送る。
【００７７】
本実施形態では、特に、上記サイズ情報及び表示サイズ指示には、それぞれ、その型式の表示装置に表示するのに適した画像のアスペクト比に関する情報（アスペクト比情報）及びアスペクト比に関する指示（アスペクト比指示）が含まれる。このアスペクト比情報及びアスペクト比指示は、表示する画像を縦長のポートレートとすべきか、横長のランドスケープとすべきかを示す値であるものとすることができる。
【００７８】
例えば、このサイズ情報には、ＨＭＤ１００の型式に対応付けて、ＨＭＤ１００の横長の表示領域４０２（図５）に適した画像サイズとして、横長のランドスケープ画像を指定するアスペクト比情報を含む画像サイズの指定が記憶されている。なお、サイズ情報及び画像サイズ指示には、アスペクト比のほか、表示装置の表示領域内における画像の大きさや画像の表示位置の指示等を含めてもよい。また、上記アスペクト比は、画像の縦横サイズの比を直接的に表すもののほか、その画像の縦横方向における表示解像度の比を表すものとすることができる。また、上記の画像の大きさは、その画像のサイズを直接的に表すもののほか、縦横方向の表示解像度を表すものとすることができる。この意味で、上記アスペクト比、及び又は画像の大きさを含む画像サイズ指示は、表示解像度に関する指示に対応する。
【００７９】
表示サイズ指示部３３６は、携帯情報端末３００にＨＭＤ１００が接続されると、接続検出部３３２から送られるＨＭＤ１００の型式情報に基づいて上記サイズ情報を参照する。そして、表示サイズ指示部３３６は、上記サイズ情報より、ＨＭＤ１００に適した、横長のランドスケープ画像を指示するアスペクト比情報を含む画像サイズを特定する。表示サイズ指示部３３６は、特定した画像サイズに基づいて、ランドスケープ画像を指示するアスペクト比指示を含む画像サイズ指示を生成し、画像出力部３３４へ送る。
【００８０】
上述したように、画像出力部３３４は、受け取った画像サイズ指示に沿った画像をＨＭＤ１００に出力するようＯＳ３４４に指示する。これにより、ミラーリング機能によりＨＭＤ１００に表示される画像は、ＨＭＤ１００の横長の表示領域に適したランドスケープ画像となる。
【００８１】
上記に代えて、画像サイズ情報は、携帯情報端末３００に接続された表示装置の名称、愛称、略称等の識別可能な情報に基づいて、画像出力部３３４が、インターネット等から取得するものとすることができる。具体的には、携帯情報端末３００に接続された表示装置の名称等の識別可能な情報が、通信Ｉ／Ｆ部３１８又は表示部３０３から入力されるものとする。そして、画像出力部３３４は、その名称等に基づいて、無線通信部３１４を介してインターネットからその名称に対応する表示装置についての上記表示解像度に関する情報等を取得して、画像サイズ指示を生成するものとすることができる。
【００８２】
図３は、携帯情報端末３００において、例えばＯＳ３４４が表示部３０３に表示するメニューの画像４００を示している。図示の例では、表示された画像４００の向きは縦長のポートレートである。この場合において、携帯情報端末３００にＨＭＤ１００が接続されると、画像出力部３３４は、ＯＳ３４４のミラーリング機能を用いて表示部３０３上の画像４００に基づく画像をＨＭＤ１００に表示する。ここで、画像出力部３３４が、従来の携帯情報端末のように、図３に示す画像４００をそのままＨＭＤ１００に表示したとすると、ＨＭＤ１００のユーザーは、ＨＭＤ１００の表示領域内において、図４に示すような画像を見ることとなる。
【００８３】
すなわち、ミラーリング機能による従来の画像表示では、ＨＭＤ１００上の横長の表示領域４０２には、例えばその中央付近に、携帯情報端末３００の表示部３０３上の縦長の画像４００と同じ画像４０４が表示されることとなる。この場合、図示の如く、画像表示に実際に用いられているのはＨＭＤ１００の表示領域４０２の中央の一部のみであり、表示領域４０２の利用効率という観点からは、非効率な表示となっている。
【００８４】
これに対し、本発明の携帯情報端末３００では、表示サイズ指示部３３６が画像サイズ指示を送ることにより、画像出力部３３４はＨＭＤ１００の表示領域４０２に適したアスペクト比の画像を出力するので、表示領域４０２の利用効率を向上することができる。
【００８５】
図５は、本発明に従う携帯情報端末３００を用いた場合に、ミラーリング機能によりＨＭＤ１００に表示される画像の例を示す図である。図示の例では、ＯＳ３４４が生成したメニュー画像が、ミラーリング機能により、ＨＭＤ１００の横長の表示領域４０２に、横長のランドスケープの画像４０６として表示されている。
【００８６】
図示の例では、表示されているメニュー画像の生成元はＯＳ３４４である。画像出力部３３４が、画像サイズ指示に基づいてＯＳ３４４に対してランドスケープ画像を指定すると、ＯＳ３４４は、ランドスケープ画像に適したメニュー画像を生成して、表示部３０３に出力し得る。その結果、ＨＭＤ１００に表示される画像も、ＯＳ３４４が生成した上記ランドスケープ画像に適したメニュー画像となる。図５に示す画像４０６は、ＯＳ３４４が生成した、ランドスケープ画像に適したメニュー画像の例である。画像４０６は、一例として、図３に示す画像４００の左右に、画像４００を左右方向にページ捲りすることで表示される画像部分が付加された構成となっている。
【００８７】
なお、表示部３０３に表示される画像が、ＯＳ３４４自身が生成したものではなく、ＯＳ３４４上で実行されるアプリケーション、例えばアプリケーション部３３０により表示されるものである場合もあり得る。ＯＳ３４４上で実行されるそのようなアプリケーションは、通常、ＯＳ３４４から、ポートレート画像かランドスケープ画像かの指定を読み込んで表示部３０３への出力を行う。したがって、アプリケーション部３３０により生成される画像の場合でも、画像出力部３３４がＯＳ３４４に対してランドスケープ画像を指定すれば、表示部３０３にはアプリケーション部３３０が生成したランドスケープ画像が出力され得る。その結果、ＨＭＤ１００上に表示される画像も、ＨＭＤ１００に適したランドスケープ画像となる。
【００８８】
図２に戻り、ＵＩ出力部３３８は、通信ケーブル４２及びコネクター３０４を介してＨＭＤ１００が接続されたことに応じて、表示部３０３に表示されている画像を、その画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替える。このとき、ユーザーインターフェイスの表示は、表示部３０３の輝度値を、デフォルトの輝度値Ｉｄに設定して行われる。以下、ユーザーインターフェイスを単にＵＩともいう。
【００８９】
ここで、所定の輝度値であるデフォルトの輝度値Ｉｄは、例えば、予め定めた１００％、７５％等の最大輝度に対する輝度比を示す固定値とすることができる。あるいは、デフォルトの輝度値Ｉｄは、ユーザーが予め定めて不揮発性記憶部３１６に保存した、輝度比についての設定値であるものとすることができる。
【００９０】
上記ＵＩの表示への切り替えは、それまで表示部３０３に表示されていた画像をバックグラウンド画像に設定し、ＵＩを含む画像をフォアグランドに設定して表示部３０３に表示することで行われる。この場合、それまで表示されていた画像はバックグラウンド画像として表示部３０３に仮想的に出力され続けるので、ミラーリング機能によるその画像のＨＭＤ１００への出力は継続される。一般に、ＯＳのミラーリング機能による画像出力の対象は、ミラーリング対象画像を指定するＯＳ内のパラメーターの設定値を変えないかぎり変わらないためである。
【００９１】
具体的には、携帯情報端末３００にＨＭＤ１００が接続されると、ＵＩ出力部３３８は、ＯＳ３４４に指示して、それまで表示部３０３に表示されていた画像をバックグラウンド画像に設定する。また、ＵＩ出力部３３８は、予め定義された複数の相異なるＵＩのうちの一のＵＩ（デフォルトＵＩ）を表示するＵＩ表示画面を生成する。そして、ＵＩ出力部３３８は、ＯＳ３４４に指示して、生成したＵＩの表示画面をフォアグラウンド画像に設定して表示部３０３に表示する。このとき、ＵＩ出力部３３８は、ＯＳ３４４に指示して、そのＵＩ表示画面の表示輝度を、デフォルトの輝度値Ｉｄに設定する。これにより、デフォルトＵＩの表示画面が、表示部３０３上にデフォルト輝度値Ｉｄで表示される。
【００９２】
なお、上記予め定義された複数の相異なるＵＩには、例えば、ソフトウェアキーボードを表示してテキストを入力するためのキーボードＵＩ、及び又は映像再生についての指示を入力するための映像再生ＵＩが含まれる。また、上記ＵＩには、例えば、パッドを表示してタッチセンサー３２２上における指等のタッチ位置座標を取得するトラックパッドＵＩ、及び又は十字キーを表示して表示パネル３２０上のカーソル座標の座標値の増減入力を取得する十字キーＵＩが含まれ得る。
【００９３】
これらのＵＩは、ＨＭＤ１００に表示された画像の生成元であるＯＳ３４４又はアプリケーション部３３０が提供するＵＩに代わって、その画像に関連する処理の実行を指示する。具体的には、ＵＩ出力部３３８は、表示部３０３に表示したＵＩを介してユーザーから入力される入力情報を、ＯＳ３４４を介して、ＯＳ３４４自身に、及び又は第２アプリケーションプログラムにより実現されるアプリケーション部３３０に入力する。より具体的には、ＵＩ出力部３３８が表示部３０３に表示するＵＩの、ＯＳ３４４又はアプリケーション部３３０が提供するＵＩに対する代替動作は、例えば次のように行われる。
【００９４】
一般に、スマートフォン等の携帯情報端末が備えるＯＳは、テキスト入力、映像再生の開始、停止、早送り等の制御、タッチセンサー３２２上のタッチ位置座標の取得、及びカーソル座標の増減といった標準的な動作のための標準ＡＰＩを備える。ＯＳ３４４やアプリケーション部３３０は、それぞれが実行するメニュー表示や映像再生（動画再生）等の動作の制御に必要な、テキスト入力や映像再生制御等のためのＵＩを、表示部３０３に表示する。そして、ＯＳ３４４やアプリケーション部３３０は、それらのＵＩが操作されたときに、テキスト入力や映像再生制御等のための、ＯＳ３４４が提供する対応する標準ＡＰＩをコールする。コールされた標準ＡＰＩは、例えばＯＳ３４４が提供する対応するバッファー（例えば、不揮発性記憶部３１６内の特定のアドレスの記憶領域）に、それぞれ、入力されたテキストや動画再生開始等の指示を表すデータを保存する。これらのバッファーには、例えば、テキストバッファー、映像再生制御のコマンドバッファー、タッチ座標バッファー、及び又はカーソル座標バッファーが含まれ得る。ＯＳ３４４やアプリケーション部３３０は、上記バッファーのデータを読み出すことで、ユーザーが上記ＵＩを操作して入力したテキストや指示を取得する。
【００９５】
これに対し、ＵＩ出力部３３８が表示部３０３に表示するキーボードＵＩ、映像再生ＵＩ等のＵＩは、ユーザーによってそのＵＩが操作されたときに、ＯＳ３４４及び又はアプリケーション部３３０に代わって、対応する標準ＡＰＩをコールする。コールされた標準ＡＰＩは、上記と同様に、ＯＳ３４４内の上記テキストバッファー、映像再生制御のコマンドバッファー等に上記操作に対応するデータを保存する。これにより、ＯＳ３４４又はアプリケーション部３３０は、ＵＩ出力部３３８が表示部３０３に表示するＵＩを介したユーザーからの入力を取得することができる。すなわち、ＯＳ３４４又はアプリケーション部３３０が提供するＵＩは、ＵＩ出力部３３８が表示部３０３に表示するＵＩによって代替される。
【００９６】
ＵＩ出力部３３８は、また、携帯情報端末３００にＨＭＤ１００が接続されたことに応じて、上記ＵＩの表示を行うＵＩ表示画面の一部として、上記予め定義された複数のＵＩのいずれかをユーザーが選択するための選択操作要素を表示部３０３に表示する。そして、ＵＩ出力部３３８は、これら選択操作要素に対するユーザーの操作に応じて、表示部３０３に表示されている画像を、デフォルトの輝度値Ｉｄを用いて、対応する一のＵＩの表示に切り替える。
【００９７】
選択操作要素は、表示部３０３に表示されるボタン、タブ等であるものとすることができる。これにより、ユーザーは、表示部３０３に表示された例えばデフォルトＵＩの表示を、他の適切なＵＩの表示に切り替えることができる。
【００９８】
ＵＩ出力部３３８は、さらに、表示部３０３にＵＩを表示するときは、ＨＭＤ１００のユーザーの視野範囲内に表示部３０３が入ったか否かをカメラ画像認識部３４２が判断するための、予め定められた識別表示５０８を表示部３０３に常に表示する。カメラ画像認識部３４２の動作については後述する。
【００９９】
図６は、接続検出部３３２から表示装置が接続された旨の通知を受けとったときにＵＩ出力部３３８が表示部３０３に表示するＵＩ表示画面の一例を示す図である。図示の例では、例えばデフォルトのユーザーインターフェイスであるキーボードＵＩ５００と共に、選択操作要素であるボタン５０２、５０４、５０６が表示されている。「Ｋｅｙｂｏａｒｄ」と書かれたボタン５０２は、表示部３０３に現在表示されているキーボードＵＩ５００に対応する選択操作要素である。「Ｍｏｖｉｅ」と書かれたボタン５０４、及び「Ｇａｍｅ」と書かれたボタン５０６は、それぞれ、表示部３０３に表示されていない他のユーザーインターフェイスである映像再生ＵＩ及びゲームＵＩに対応する選択操作要素である。また、図６〜図８において、表示部３０３に表示される識別表示５０８は、例えば特定のバーコードである。
【０１００】
図６の例では、ボタン５０４及び５０６は、表示部３０３に表示されていないユーザーインターフェイスに対応する選択操作要素であるため、表示部３０３に表示されているユーザーインターフェイスに対応するボタン５０２より低い輝度で表示されている。これにより、ボタン５０４及び５０６が、表示部３０３に表示されていないユーザーインターフェイスに対応する選択操作要素であることが示される。
【０１０１】
図６に示す画面に対し、ユーザーが選択操作要素であるボタン５０４を例えばタッチする等により操作すると、ＵＩ出力部３３８は、図７に示すように、その操作に応じて、ボタン５０４に対応する映像再生ＵＩ５１０を表示部３０３に表示する。
【０１０２】
図７に示す例では、ボタン５０４に対応する映像再生ＵＩ５１０は、再生ボタン５１２と、早送りボタン５１４と、巻き戻しボタン５１６と、一時停止ボタン５１８と、停止ボタン５２０と、で構成されている。また、表示部３０３には、現在表示されている映像再生ＵＩ５１０に対応するボタン５０４が、現在表示されていないユーザーインターフェイスに対応するボタン５０２、５０６より高い輝度で表示されている。
【０１０３】
一方、図６に示す画面又は図７に示す画面において、ユーザーがボタン５０６をタッチする等により操作すると、ＵＩ出力部３３８は、図８に示すように、その操作に応じてボタン５０６に対応するゲームＵＩ５３０を表示部３０３に表示する。
【０１０４】
図８に示す例では、ゲームＵＩ５３０は、トラックパッドＵＩ５３２と、十字キーＵＩ５３４と、で構成されている。また、表示部３０３には、現在表示されているゲームＵＩ５３０に対応するボタン５０６が、現在表示されていないユーザーインターフェイスに対応するボタン５０２、５０４より高い輝度で表示されている。
【０１０５】
なお、図６〜図８の例においては、表示部３０３に表示されているユーザーインターフェイスに対応するボタン（すなわち、選択操作要素）と、表示されていないユーザーインターフェイスに対応するボタンとを区別すべく、ボタンの表示輝度を変えるものとした。ただし、上記区別の手段は、これには限られない。ボタンの表示輝度に代えて、ボタンの表示色を異なるものとすることで、表示部３０３に表示されているユーザーインターフェイスに対応するボタンと、表示部３０３に表示されていないユーザーインターフェイスに対応するボタンとを区別して表示してもよい。
【０１０６】
また、本実施形態では、ＵＩ出力部３３８は、ユーザーがボタン５０４等を操作することにより、そのボタンに応じたＵＩの表示画面を表示部３０３に表示するものとしたが、これには限られない。例えば、ＵＩ出力部３３８は、アプリケーション部３３０が表示部３０３に表示した画像をＨＭＤ１００に出力する際に、アプリケーション部３３０を実現する第２アプリケーションプログラムの種類に応じたＵＩを表示部３０３に表示してもよい。具体的には、ＵＩ出力部３３８は、まず、第２アプリケーションプログラムの種類に関する情報を第２アプリケーションプログラム（従って、アプリケーション部３３０）から取得する。そして、ＵＩ出力部３３８は、表示部３０３に表示されている画像を、第２アプリケーションプログラムの種類に応じたＵＩの表示に切り替える。
【０１０７】
図２に戻り、ＵＩ出力部３３８の表示輝度設定部３４０は、ＵＩ出力部３３８が表示部３０３にいずれかのＵＩを表示した後、表示されたそのＵＩが操作されないまま経過した時間を計測する。そして、表示輝度設定部３４０は、表示部３０３に表示されたＵＩが所定の時間以上操作されないときは、表示部３０３の輝度を、デフォルトの輝度値Ｉｄより小さな値に設定するか又はゼロに設定する。具体的には、表示輝度設定部３４０は、ＯＳ３４４に指示して、現在において表示部３０３のフォアグランド画像に設定されているＵＩ表示画面の表示輝度値を、デフォルトの輝度値Ｉｄより小さな所定値Ｉｄｓに設定するか、又はゼロに設定する。これにより、ＵＩが使用されていないときの携帯情報端末３００の消費電力を低減することができる。なお、ＵＩが操作されたか否かの判断は、例えば、表示パネル３２０上のいずれかの場所がユーザーの指等によりタッチされたことをタッチセンサー３２２により検知したか否かを判断することで行うことができる。
【０１０８】
また、表示輝度設定部３４０は、加速度センサーとして機能する９軸センサー３０１から取得されるセンサーデータに基づき、携帯情報端末３００がユーザーにより揺すられたか否かを判断する。そして、揺すられたときは、表示輝度設定部３４０は、表示部３０３の輝度を所定のデフォルトの輝度値Ｉｄに設定してＵＩを表示する。これにより、ユーザーは、例えば表示部３０３の表示輝度がデフォルト値Ｉｄ以下となってＵＩを視認しにくいときは、携帯情報端末３００を振って表示部３０３上のＵＩをデフォルトの輝度値Ｉｄで明るく表示させることができる。なお、携帯情報端末３００がユーザーにより揺すられたことは、９軸センサー３０１から取得されるセンサーデータが示す携帯情報端末３００に加わった加速度の変化から検知することができる。例えば、表示輝度設定部３４０は、その加速度が、所定の範囲の周期で、所定値以上の振幅で、及び又は所定回数以上の回数で、変化していることを検出したときに、携帯情報端末３００がユーザーにより揺すられたものと判断することができる。
【０１０９】
これに代えて、又はこれに加えて、表示輝度設定部３４０は、姿勢センサーとしても機能する９軸センサー３０１から取得されるセンサーデータに基づき携帯情報端末３００の表示部３０３が重力方向に対し逆の方向を向いていることを検知したか否かを判断する。そして、表示部３０３が重力方向に対し逆の方向を向いているときは、表示輝度設定部３４０は、表示部３０３の輝度をデフォルトの輝度値Ｉｄに設定してＵＩを表示する。これにより、ユーザーは、例えば表示部３０３の表示輝度がデフォルト値Ｉｄ以下であるときは、携帯情報端末３００の表示部３０３を、重力方向に対し逆の“上”方向に向けるだけで、表示部３０３上のＵＩをデフォルトの輝度値Ｉｄで表示させることができる。
【０１１０】
また、表示輝度設定部３４０は、ＨＭＤ１００のユーザー視野範囲内に表示部３０３が入っていないときは、表示部３０３上のＵＩの表示輝度をデフォルトの輝度値Ｉｄより小さくする。具体的には、ＨＭＤ１００のユーザー視野範囲内に表示部３０３が入っていないときは、後述するように、カメラ画像認識部３４２から表示輝度設定部３４０に視野外通知が送られる。表示輝度設定部３４０は、視野外通知を受けたときは、ＯＳ３４４に指示して、表示部３０３上のＵＩの表示輝度を、所定のデフォルトの輝度値Ｉｄより小さな値に設定するか又はゼロに設定する。これにより、ユーザーが表示部３０３を視野範囲内に入れておらず、従って表示部３０３上のＵＩを使用しない可能性が高いときは、表示部３０３の輝度を低下させて無駄な電力の消費を防止することができる。
【０１１１】
また、表示輝度設定部３４０は、ＨＭＤ１００のユーザー視野範囲内に表示部３０３が入っているときは、表示部３０３上のＵＩの表示輝度をデフォルトの輝度値Ｉｄに設定する。具体的には、ＨＭＤ１００のユーザー視野範囲内に表示部３０３が入っているときは、後述するように、カメラ画像認識部３４２から表示輝度設定部３４０に視野内通知が送られる。表示輝度設定部３４０は、カメラ画像認識部３４２から視野内通知を受けたときは、表示部３０３の表示輝度を所定のデフォルトの輝度値Ｉｄに設定する。これにより、ユーザーは、表示部３０３上のＵＩを操作しようとするときは、表示部３０３を視野範囲内に入れるだけで、表示部３０３上のＵＩをデフォルトの輝度値Ｉｄで明るく表示させることができる。
【０１１２】
これに加えて、ＨＭＤ１００のユーザー視野範囲内に表示部３０３が入っているときは、ＨＭＤ１００に表示する画像の輝度を小さくするか又はゼロに設定するものとしてもよい。具体的には、カメラ画像認識部３４２は、画像出力部３３４にも視野内通知を送るものとする。そして、画像出力部３３４は、視野内通知を受けたときは、ＯＳ３４４に指示して、ＨＭＤ１００に出力している画像の輝度、すなわち、表示部３０３のバックグラウンド画像に設定されている画像の輝度値を所定値だけ減算して設定するか、又はゼロに設定する。これにより、ユーザーは、表示部３０３を視野範囲内に捉えたときに、ＨＭＤ１００上の画像表示を透過して視認される表示部３０３上のＵＩを、より明瞭に視認することができる。なお、画像出力部３３４は、その後、カメラ画像認識部３４２から視野外通知を受けたときは、表示部３０３のバックグラウンド画像に設定されている画像の輝度値を、上記減算等の前の値に設定するものとする。これにより、ユーザーは、視野範囲から表示部３０３を外した時には、ＨＭＤ１００上の画像をもとの輝度で明瞭に見ることができる。
【０１１３】
カメラ画像認識部３４２は、通信Ｉ／Ｆ部３１８を介して、ＨＭＤ１００が備えるカメラ６１が撮影している画像を取得し、ＨＭＤ１００を装着したユーザーの視野範囲内に表示部３０３が入ったか否かを判断する。この判断は、カメラ６１が撮影した画像の中に、ＵＩ出力部３３８が表示部３０３に表示した識別表示５０８を発見したか否かにより行うことができる。
【０１１４】
カメラ画像認識部３４２は、カメラ６１の撮影画像の中に識別表示５０８を発見したときは、ユーザーの視野範囲内に表示部３０３が入ったと判断する。そして、カメラ画像認識部３４２は、ユーザー視野範囲内に表示部３０３が入ったと判断した旨の通知（視野内通知）を表示輝度設定部３４０に送る。
【０１１５】
また、カメラ画像認識部３４２は、カメラ６１の撮影画像の中に識別表示５０８を発見しないときは、ＨＭＤ１００のユーザー視野範囲内に表示部３０３が入っていないと判断した旨の通知（視野外通知）を表示輝度設定部３４０に送る。なお、上述したように、カメラ画像認識部３４２は、視野内通知及び視野外通知を、表示輝度設定部３４０に送ると共に、画像出力部３３４にも送るものとしてもよい。
【０１１６】
また、本実施形態では、識別表示５０８はバーコードであるものとしたが、これには限られない。識別表示５０８は、カメラ６１の画像内において識別表示５０８であることを認識し得る任意の形状、輝度、色彩、又はこれらの変化を含む表示であるものとすることができる。例えば、識別表示５０８を、所定の時間間隔で点滅するか又は色彩が変化する三角形等の単純な形状の表示であるものとすることもできる。
【０１１７】
以上説明したように、処理装置である本実施形態の携帯情報端末３００は、画像を表示する表示部３０３と、外部の表示装置であるＨＭＤ１００が接続されたことを検出する接続検出部３３２と、を備える。また、携帯情報端末３００は、表示部３０３に表示されている画像を、ＨＭＤ１００が接続されたことに応じてＨＭＤ１００に出力する画像出力部３３４を備える。さらに、携帯情報端末３００は、ＨＭＤ１００が接続されたことに応じて、表示部３０３上の画像を、ＨＭＤ１００への出力画像に関連する処理の実行を指示するためのユーザーインターフェイスの表示に切り替えるユーザーインターフェイス出力部を備える。そして、このユーザーインターフェイスの表示は、所定のデフォルトの輝度値Ｉｄで、行われる。
【０１１８】
本発明の携帯情報端末３００、表示システム１、及び第１アプリケーションプログラムによれば、ＨＭＤ１００に画像が表示されているときに、表示部３０３上にＵＩを例えば大きく表示して、ユーザーの入力操作を容易にすることができる。その結果、操作性の観点から、携帯情報端末３００とＨＭＤ１００との連携動作のユーザービリティが向上する。
【０１１９】
また、本発明の携帯情報端末３００では、ユーザーインターフェイス出力部３３８は、表示部３０３に表示したユーザーインターフェイスが所定時間以上操作されないときは表示部３０３の輝度を所定のデフォルトの輝度値Ｉｄより小さな値か又はゼロに設定する。これにより、表示部３０３に表示されたユーザーインターフェイスを操作する必要がなくユーザーが表示部を視認する必要のないときには、表示部３０３で消費される電力を低減して、携帯情報端末３００の電力消費を低減することができる。その結果、運用コストの観点からも、携帯情報端末３００とＨＭＤ１００との連携動作のユーザービリティが向上する。
【０１２０】
また、本発明の携帯情報端末３００は、加速度センサーとして機能する９軸センサー３０１を備える。ユーザーインターフェイス出力部３３８は、携帯情報端末３００が揺すられたことが９軸センサー３０１により検知されたときは、表示部３０３の輝度を所定のデフォルトの輝度値Ｉｄに設定する。これにより、ユーザーは、表示部３０３の表示輝度が低く設定されていてＵＩを視認しにくいときは、携帯情報端末３００を振るだけで、表示部３０３上のＵＩを明るく表示させることができる。その結果、操作性の観点での、携帯情報端末３００とＨＭＤ１００との連携動作のユーザービリティが更に向上する。
【０１２１】
また、本発明の携帯情報端末３００は、姿勢センサーとしても機能する９軸センサー３０１を備える。ユーザーインターフェイス出力部３３８は、携帯情報端末３００の表示部３０３が重力方向に対し逆の方向を向いていることが９軸センサー３０１により検知されたときは、表示部３０３の輝度を所定のデフォルトの輝度値Ｉｄに設定する。これにより、ユーザーは、表示部３０３の表示輝度が低く設定されていてＵＩを視認しにくいときは、表示部３０３を重力方向に対し逆の“上”方向に向けるだけで、表示部３０３上のユーザーインターフェイスを明るく表示させることができる。その結果、操作性の観点での、携帯情報端末３００とＨＭＤ１００との連携動作のユーザービリティが更に向上する。
【０１２２】
また、本発明の携帯情報端末３００は、ユーザーインターフェイス出力部３３８が、ＨＭＤ１００が接続されたことに応じて、予め定められたユーザーインターフェイスのいずれかをユーザーが選択するための選択操作要素を表示部３０３に表示する。これらの選択操作要素は、携帯情報端末３００ではボタン５０２等である。そして、ユーザーインターフェイス出力部３３８は、ボタン５０２等に対するユーザーの操作に応じて、表示部３０３に表示されている画像を、対応する一のユーザーインターフェイスの表示に切り替える。これにより、ユーザーは、ＨＭＤ１００に表示される画像に応じた適切なユーザーインターフェイスを携帯情報端末３００の表示部３０３に表示させることができる。その結果、携帯情報端末３００とＨＭＤ１００との連携動作の、操作性の観点でのユーザービリティがより向上する。
【０１２３】
また、本発明の携帯情報端末３００は、ＨＭＤ１００に出力する画像のアスペクト比に関する指示であるアスペクト比指示を画像出力部３３４に与える表示サイズ指示部３３６を備える。これにより、ＨＭＤ１００に適したアスペクト比の画像をＨＭＤ１００上に表示できるので、ＨＭＤ１００における表示領域の利用効率を向上することができる。その結果、ユーザーに提供し得る情報量の観点からも、携帯情報端末３００とＨＭＤ１００との連携動作のユーザービリティを向上し得る。
【０１２４】
また、本発明の携帯情報端末３００は、演算部である制御部３１０を備え、ユーザーインターフェイス出力部３３８は、制御部３１０において第１アプリケーションプログラムが実行されることにより実現される。これにより、オペレーティングシステムを作り替えることなく、単にアプリケーションプログラムの実行することで、携帯情報端末３００とＨＭＤ１００との連携動作のユーザービリティを容易に向上させることができる。
【０１２５】
また、本発明の携帯情報端末３００では、表示部３０３に表示されてＨＭＤ１００に出力される画像は、例えば制御部３１０において第２アプリケーションプログラムが実行されることにより生成される。ユーザーインターフェイス出力部３３８は、第２アプリケーションプログラムの種類に関する情報を第２アプリケーションプログラムから取得する。そして、ユーザーインターフェイス出力部３３８は、表示部３０３に表示されている画像を、第２アプリケーションプログラムの種類に応じたユーザーインターフェイスの表示に切り替える。これにより、携帯情報端末３００は、ＨＭＤ１００に表示される画像に応じた適切なユーザーインターフェイスを表示部３０３に自動で表示することとなり、携帯情報端末３００とＨＭＤ１００との連携動作の、操作性の観点でのユーザービリティが更に向上する。
【０１２６】
また、本発明の携帯情報端末３００では、制御部３１０は、第１アプリケーションプログラム及び第２アプリケーションプログラムをオペレーティングシステム３４４上で実行する。そして、ユーザーインターフェイス出力部３３８は、表示部３０３に表示したユーザーインターフェイスを介してユーザーから入力される入力情報を、オペレーティングシステム３４４を介して第２アプリケーションプログラムに入力する。これにより、ユーザーインターフェイス出力部３３８は、表示部３０３上のユーザーインターフェイスに対するユーザー操作の情報を、その情報の受け渡し先を特定することなく、ＨＭＤ１００に出力した画像の提供元であるプログラムに適切に渡すことができる。従って、ユーザーインターフェイス出力部３３８を設けたことによる制御部３１０の処理負荷の増加を抑えて、携帯情報端末３００とＨＭＤ１００との連携動作の、円滑さの観点でのユーザービリティが向上する。
【０１２７】
また、本発明の携帯情報端末３００では、ＨＭＤ１００は、外景を視認可能に構成された表示領域４０２を備えて、使用者の頭部に装着されたときに表示領域４０２により画像を使用者の視線の前方に、外景に重ねて表示するものである。また、ＨＭＤ１００は、外景を撮影するカメラ６１を備える。また、ユーザーインターフェイス出力部３３８は、ＨＭＤ１００が備えるカメラ６１から取得される外景の撮影画像に基づいて使用者の視野範囲内に表示部３０３が入っているか否かを判断する。そして、ユーザーインターフェイス出力部３３８は、使用者の視野範囲内に表示部３０３が入っていないと判断されるときは、表示部３０３の表示輝度を、所定のデフォルトの輝度値Ｉｄより小さな値に設定するか又はゼロに設定する。これにより、使用者の視野範囲内に表示部３０３が入っておらず、従って表示部３０３上のユーザーインターフェイスが操作される可能性が低いときは、表示部３０３の輝度を下げて携帯情報端末３００の不要な電力消費を回避することができる。その結果、運用コストの観点から、ＨＭＤ１００と携帯情報端末３００との連携動作のユーザービリティを向上することができる。
【０１２８】
また、本発明の携帯情報端末３００では、ユーザーインターフェイス出力部３３８は、ＨＭＤ１００の使用者の視野範囲内に表示部３０３が入っていると判断されるときに、表示部３０３に出力する画像の輝度を所定のデフォルトの輝度値Ｉｄに設定する。この判断は、上記と同様に、ＨＭＤ１００が備えるカメラ６１から取得される外景の撮影画像に基づいて行われる。これにより、ＨＭＤ１００の使用者の視野範囲内に表示部３０３が入り、従って表示部３０３上のユーザーインターフェイスが操作される可能性が高くなったときは、表示部３０３の輝度値を上げて、ユーザーインターフェイスの視認性を向上することができる。その結果、操作性の観点から、ＨＭＤ１００と携帯情報端末３００との連携動作のユーザービリティを向上することができる。
【０１２９】
また、本発明の携帯情報端末３００では、画像出力部３３４は、ＨＭＤ１００の使用者の視野範囲内に表示部３０３が入っていると判断されるときに、ＨＭＤ１００に出力する画像の輝度を下げる。詳細には、画像出力部３３４は、ＨＭＤ１００に出力する画像の輝度を、上記視野範囲内に表示部３０３が入っていないときに比べて低下させるか、又はゼロに設定する。この判断は、ＨＭＤ１００が備えるカメラ６１から取得される外景の撮影画像に基づいて行われる。これにより、使用者の視野範囲内に表示部３０３が入り、従って表示部３０３上のユーザーインターフェイスが操作される可能性が高いときは、ＨＭＤ１００において、外景としての表示部３０３の画面に重ねて表示される画像の輝度が低減される。その結果、表示部３０３上のユーザーインターフェイスの視認性をより高めて、ＨＭＤ１００と携帯情報端末３００との連携動作のユーザービリティを、操作性の観点から更に向上することができる。
【０１３０】
なお、本発明は上記実施形態の構成に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能である。
【０１３１】
例えば、上記実施形態では、ＨＭＤ１００はＯＳを有さず、ＯＳ３４４及びＵＩ出力部３３８が携帯情報端末３００内に実現されるものとしたが、これには限られない。例えば、ＨＭＤ１００が、ＯＳを備えると共に、そのＯＳ上で実現されるＵＩ出力部３３８を備え、ＨＭＤ１００に画像が表示されるときに、ＵＩ出力部３３８により、その画像の操作に必要なＵＩが携帯情報端末３００上に表示されるものとしてもよい。この場合、アプリケーション部３３０も、上記ＯＳ上で実現されてＨＭＤ１００内に設けられるものとすることができる。
【０１３２】
また、上記実施形態では、画像表示部２０と接続装置１０とが分離され、接続ケーブル４０を介して接続された構成を例に挙げて説明したが、接続装置１０と画像表示部２０とが無線通信回線によって接続される構成であってもよい。
【０１３３】
また、図２に示した各要素のうち少なくとも一部は、ハードウェアで実現してもよいし、ハードウェアとソフトウェアの協働により実現される構成としてもよく、図に示した通りに独立したハードウェア資源を配置する構成に限定されない。
【符号の説明】
【０１３４】
１…表示システム、１０…接続装置、１１、３０４…コネクター、２０…画像表示部、２１…右保持部、２２…右表示ユニット、２３…左保持部、２４…左表示ユニット、２５、３０１…９軸センサー、２６…右導光板、２７…前部フレーム、２８…左導光板、４０…接続ケーブル、４２…通信ケーブル、６１…カメラ、１０２、１１２…受信部（Ｒｘ）、１０４、１１４…ＯＬＥＤユニット、１０６、２０４…カメラＩ／Ｆ、２０２…送信部（Ｔｘ）、２０６…電源部、２０８…操作部、２１０、３１０…制御部、２１２、３１６…不揮発性記憶部、２１４、３１８…通信Ｉ／Ｆ部、２２０…表示制御部、２２２…カメラ制御部、３０３…表示部、３１４…無線通信部、３２０…表示パネル、３２２…タッチセンサー、３３０…アプリケーション部、３３２…接続検出部、３３４…画像出力部、３３６…表示サイズ指示部、３３８…ユーザーインターフェイス（ＵＩ）出力部、３４０…表示輝度設定部、３４２…カメラ画像認識部、３４４…オペレーティングシステム（ＯＳ）、４００、４０４、４０６…画像、４０２…表示領域、５００…キーボードＵＩ、５０２、５０４、５０６…ボタン、５０８…識別表示、５１０…映像再生ＵＩ、５１２…再生ボタン、５１４…早送りボタン、５１６…巻き戻しボタン、５１８…一時停止ボタン、５２０…停止ボタン、５３０…ゲームＵＩ、５３２…トラックパッドＵＩ、５３４…十字キーＵＩ。
【図１】
2019114050.tif 000003
【図２】
2019114050.tif 000004
【図３】
2019114050.tif 000005
【図４】
2019114050.tif 000006
【図５】
2019114050.tif 000007
【図６】
2019114050.tif 000008
【図７】
2019114050.tif 000009
【図８】
2019114050.tif 000010