(57)【要約】【課題】情報入力表示システムにおいて表示部を有効利用する。【解決手段】ＰＤＡ１０と、ＨＭＤ２０とが接続されると、ＰＤＡ１０の表示部１２には、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースだけが表示され、ＨＭＤ２０の画像表示部２２ａ，２２ｂには、アプリケーションソフトウェアによるデータだけが表示されるように構成した。すなわち、ＰＤＡ１０を主として文字等の入力装置として扱い、ＨＭＤ２０を主として画像や音声の出力装置として扱うように構成した。これにより、ＰＤＡ１０の表示部１２およびＨＭＤ２０の画像表示部２２ａ，２２ｂの双方を有効に利用できる。【選択図】図４
2009042967.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの操作入力を受け付ける入力部と、第１の表示部と、前記第１の表示部における表示を制御する第１の表示制御手段とを有する情報端末と、
第２の表示部と、前記第２の表示部における表示を制御する第２の表示制御手段とを有する表示装置とを備え、
前記情報端末と前記表示装置とが接続されたとき、前記第１の表示制御手段は、ユーザの操作入力の受け付けに関する画面を表示するよう前記第１の表示部を制御し、前記第２の表示制御手段は、前記情報端末の入力部で受け付けたユーザの操作入力に応じて画面表示するよう前記第２の表示部を制御することを特徴とする情報入力表示システム。
【請求項２】
請求項１に記載の情報入力表示システムにおいて、
前記第１の表示部は、ユーザの操作入力を受け付けるタッチパネルスイッチを有することを特徴とする情報入力表示システム。
【請求項３】
請求項１または請求項２に記載の情報入力表示システムにおいて、
前記情報端末は、アプリケーションソフトウェアの処理を行う第１の処理部をさらに有し、
前記第１の処理部は、前記ユーザの操作入力に応じて前記アプリケーションソフトウェアの処理を行い、
前記第２の表示制御手段は、前記第１の処理部の処理結果に基づいて画面表示するよう前記第２の表示部を制御することを特徴とする情報入力表示システム。
【請求項４】
請求項１または請求項２に記載の情報入力表示システムにおいて、
前記表示装置は、アプリケーションソフトウェアの処理を行う第２の処理部をさらに有し、
前記第２の処理部は、前記ユーザの操作入力に応じて前記アプリケーションソフトウェアの処理を行い、
前記第２の表示制御手段は、前記第２の処理部の処理結果に基づいて画面表示するよう前記第２の表示部を制御することを特徴とする情報入力表示システム。
【請求項５】
請求項１〜４のいずれか一項に記載の情報入力表示システムにおいて、
前記表示装置は、携帯表示装置であることを特徴とする情報入力表示システム。
【請求項６】
請求項５に記載の情報入力表示システムにおいて、
前記表示装置は、ヘッドマウントディスプレイ装置であることを特徴とする情報入力表示システム。
【請求項７】
請求項６に記載の情報入力表示システムにおいて、
前記ヘッドマウントディスプレイ装置は、前記第２の表示部がユーザの右目用および左目用にそれぞれ設けられている両眼タイプの前記ヘッドマウントディスプレイ装置であり、ユーザが前記ヘッドマウントディスプレイ装置を装着した際に、ユーザが視線を下方に移動させることによって外界を視認できるように、下方が開放されていることを特徴とする情報入力表示システム。
【請求項８】
請求項１〜７のいずれか一項に記載の情報入力表示システムに用いる情報端末。
【請求項９】
請求項１〜７のいずれか一項に記載の情報入力表示システムに用いる表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報入力表示システム、情報端末および表示装置に関する。
【背景技術】
【０００２】
携帯型のコンテンツデータ再生装置として、たとえば、接続された装置からの画像を表示するヘッドマウントディスプレイが知られている（特許文献１参照）。また、スケジュール管理や辞書、電卓、メール送受信などのアプリケーションソフトウェアの処理を行う情報端末装置が知られている（特許文献２参照）。
【０００３】
【特許文献１】特開２００５−２１５３９３号公報
【特許文献２】特開２００１−３２５０４４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
情報端末装置では、アプリケーションソフトウェアによるデータと、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースとが表示部の１画面に表示される。そのため、アプリケーションソフトウェアによるデータを表示する領域が狭くなってしまう。
【課題を解決するための手段】
【０００５】
（１）  請求項１の発明による情報入力表示システムは、ユーザの操作入力を受け付ける入力部と、第１の表示部と、第１の表示部における表示を制御する第１の表示制御手段とを有する情報端末と、第２の表示部と、第２の表示部における表示を制御する第２の表示制御手段とを有する表示装置とを備え、情報端末と表示装置とが接続されたとき、第１の表示制御手段は、ユーザの操作入力の受け付けに関する画面を表示するよう第１の表示部を制御し、第２の表示制御手段は、情報端末の入力部で受け付けたユーザの操作入力に応じて画面表示するよう第２の表示部を制御することを特徴とする。
（２）  請求項２の発明は、請求項１に記載の情報入力表示システムにおいて、第１の表示部は、ユーザの操作入力を受け付けるタッチパネルスイッチを有することを特徴とする。
（３）  請求項３の発明は、請求項１または請求項２に記載の情報入力表示システムにおいて、情報端末は、アプリケーションソフトウェアの処理を行う第１の処理部をさらに有し、第１の処理部は、ユーザの操作入力に応じてアプリケーションソフトウェアの処理を行い、第２の表示制御手段は、第１の処理部の処理結果に基づいて画面表示するよう第２の表示部を制御することを特徴とする。
（４）  請求項４の発明は、請求項１または請求項２に記載の情報入力表示システムにおいて、表示装置は、アプリケーションソフトウェアの処理を行う第２の処理部をさらに有し、第２の処理部は、ユーザの操作入力に応じてアプリケーションソフトウェアの処理を行い、第２の表示制御手段は、第２の処理部の処理結果に基づいて画面表示するよう第２の表示部を制御することを特徴とする。
（５）  請求項５の発明は、求項１〜４のいずれか一項に記載の情報入力表示システムにおいて、表示装置は、携帯表示装置であることを特徴とする。
（６）  請求項６の発明は、請求項５に記載の情報入力表示システムにおいて、表示装置は、ヘッドマウントディスプレイ装置であることを特徴とする。
（７）  請求項７の発明は、請求項６に記載の情報入力表示システムにおいて、ヘッドマウントディスプレイ装置は、第２の表示部がユーザの右目用および左目用にそれぞれ設けられている両眼タイプのヘッドマウントディスプレイ装置であり、ユーザがヘッドマウントディスプレイ装置を装着した際に、ユーザが視線を下方に移動させることによって外界を視認できるように、下方が開放されていることを特徴とする。
（８）  請求項８の発明による情報端末は、請求項１〜７のいずれか一項に記載の情報入力表示システムに用いる情報端末であることを特徴とする。
（９）  請求項９の発明による表示装置は、請求項１〜７のいずれか一項に記載の情報入力表示システムに用いる表示装置であることを特徴とする。
【発明の効果】
【０００６】
本発明によれば、表示部を有効利用できる。
【発明を実施するための最良の形態】
【０００７】
−−−第１の実施の形態−−−
図１〜６を参照して、本発明による情報入力表示システム、情報端末および表示装置の第１の実施の形態を説明する。図１は、本発明による情報入力表示システムで用いられる情報端末および表示装置の外観を示す図である。本発明による情報入力表示システムでは、携帯型の情報端末である携帯情報端末（以下、ＰＤＡと呼ぶ）１０と、ヘッドマウントディスプレイ装置（以下、ＨＭＤと呼ぶ）２０とを備えている。
【０００８】
ＰＤＡ１０は、たとえば、スケジュール管理機能や、辞書機能、文書作成機能、電卓機能、コンテンツデータ再生機能、撮影機能、メール送受信機能、インターネット接続・閲覧機能などを有する携帯型の情報端末装置である。ＰＤＡ１０は、本体１１の正面に設けられた表示部１２と、各操作ボタン１３と、マウスモード切替ボタン１４と、外部モニタ接続部１５とを備えている。表示部１２は、タッチパネルスイッチを有する、タッチパネル式の表示装置であり、文字や画像などの表示の他、たとえば操作用のペン（ＰＤＡ操作用ペン）１９などによって表示部１２の表面を軽く押圧したりなぞったりすることによって、操作入力が可能である。
【０００９】
図２は、一例として、スケジュール管理用のアプリケーションソフトを起動させているときの表示部１２の表示画面を示す図である。たとえば、スケジュール管理用のアプリケーションソフトを起動させると、表示部１２には、スケジュールデータ表示領域１２１にスケジュールのデータであるスケジュールデータ表示１２１ａが表示され、手書き文字入力領域１２２に、ユーザが表示部１２の表面をなぞることで文字を入力するためのグラフィカルユーザインターフェースである手書き文字入力表示１２２ａが表示される。このように、ＰＤＡ１０では、通常、アプリケーションソフトウェアによるデータと、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースとが表示部１２の１画面に同時に表示される。
【００１０】
各操作ボタン１３は、たとえば、表示部１２に表示された画面のスクロール操作や特定のアプリケーションソフトウェアの起動など、使用頻度の高い機能などに割り当てられた操作ボタンである。マウスモード切替ボタン１４は、ＰＤＡ１０をＨＭＤ２０と接続した際に、表示部１２を利用した操作入力の際の入力モードを切り替えるための操作ボタンである。マウスモード切替ボタン１４による入力モードの切り替えについては後述する。外部モニタ接続部１５は、接続ケーブル３１を介して接続された外部の表示装置に描画用のデータである画像の信号（画像情報）や音声の信号などを出力するインターフェースである。
【００１１】
ＨＭＤ２０は、ユーザの頭部に装着可能な携帯型の表示装置であり、装着部２１と、画像表示部２２ａ，２２ｂと、画像表示部収納部２３と、不図示のスピーカとを備えている。装着部２１は、ユーザがＨＭＤ２０を装着した際にユーザの頭部左右から挟み込んでＨＭＤ２０をユーザの頭部に固定するように構成されている。画像表示部２２ａ，２２ｂは、入力された画像情報に基づいて画像を表示する装置であり、ユーザがＨＭＤ２０を装着した際にユーザの左右それぞれの眼前に位置するようにそれぞれ配設されている。画像表示部収納部２３は、画像表示部２２が配設されて収納された部位である。
【００１２】
画像表示部収納部２３は、ユーザがＨＭＤ２０を装着した際にユーザの眼前に位置するが、ユーザがＨＭＤ２０を装着したままであってもユーザが視線を下方に移動させるだけで、手元で保持しているＰＤＡ１０を視認できるように、ユーザの下方の視界を妨げないように構成されている。たとえば、画像表示部収納部２３のうち、ＨＭＤ２０を装着したユーザの眼から斜め下方に位置する部位が開口しており、ユーザは当該開口部分を介して、手元で保持しているＰＤＡ１０を視認できる。なお、当該開口部分にユーザの視界を妨げないように透明な板状の部材が設けられていてもよい。
【００１３】
図３は、ＰＤＡ１０およびＨＭＤ２０のブロック図である。ＰＤＡ１０は、中央演算部１０１と、ワークメモリ部１０２と、ストレージ部１０３と、入力部１０４と、表示制御部１０５と、表示部１２と、外部モニタ接続部１５と、接続検出部１０６とを備えている。中央演算部１０１は、ワークメモリ部１０２を作業エリアとして、ストレージ部１０３から読み込んだプログラムを起動して各種の処理を行って、ＰＤＡ１０の各部を制御する。ストレージ部１０３は、アプリケーションソフトウェアのプログラムや、オーディオ／ビジュアルコンテンツのデータ、文書ファイルのデータなどを記憶する。
【００１４】
入力部１０４は、各操作ボタン１３やマウスモード切り替えボタン１４の操作によって信号を出力するスイッチや、表示部１２のタッチパネルスイッチなど、ユーザの操作入力に応じた信号を出力するスイッチ群から構成される。表示制御部１０５は、中央演算部１０１からの制御信号や画像情報に基づいて、表示部１２における画像（映像）の表示を制御し、外部モニタ接続部１５へ出力する画像情報を制御する。接続検出部１０６は、接続ケーブル３１を介して外部モニタ接続部１５へ外部の表示装置が接続されたか否かを検出する。
【００１５】
ＨＭＤ２０は、画像表示部２２ａ，２２ｂと、表示制御部２０１と、画像入力部２０２とを備えている。表示制御部２０１は、画像入力部２０２で受信した画像情報に基づいて画像表示部２２ａ，２２ｂにおける画像（映像）の表示を制御する。画像入力部２０２は、たとえば、接続ケーブル３１を介して接続された外部の機器からの画像情報を受信して表示制御部２０１へ出力する。
【００１６】
このように構成される情報入力表示システムでは、ＰＤＡ１０は、ＨＭＤ２０と接続されていない場合には、従来の携帯情報端末と同様に、起動されたアプリケーションソフトウェアによる処理を行い、表示部１２に処理の結果を表示する。たとえば、図２に示すように、スケジュール管理用のアプリケーションソフトウェアが起動されると、表示部１２には、スケジュールデータ表示領域１２１にスケジュールデータ表示１２１ａが表示され、手書き文字入力領域１２２に手書き文字入力表示１２２ａが表示される。
【００１７】
ユーザは、スケジュールデータ表示１２１ａの任意の日にちの欄をＰＤＡ操作用ペン１９で触れることでスケジュールの新規入力位置や修正すべき項目を選択できる。また、ユーザは、手書き文字入力表示１２２ａが表示された表示部１２の表面の所定の領域をなぞることで、たとえば選択された新規入力位置に対して文字や数字、記号などを入力できる。
【００１８】
また、ＨＭＤ２０は、画像入力部２０２に外部の機器が接続されている場合、当該外部の機器から出力された画像情報や音声信号に基づいて、画像表示部２２ａ，２２ｂに画像を表示し、不図示のスピーカから音声を出力する。
【００１９】
従来の情報入力表示システムでは、情報端末と表示装置とを接続しても、情報端末の表示部に表示される表示内容と、表示装置で表示される表示内容は同じ内容である。すなわち、情報端末では、アプリケーションソフトウェアによるデータと、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースとが表示部の１画面に表示されるが、情報端末に接続された表示装置にも同じ画像が表示される。たとえば、スケジュール管理用のアプリケーションソフトを起動させた場合には、図２に示したスケジュールデータ表示１２１ａと手書き文字入力表示１２２ａとが、情報端末および表示装置のそれぞれの表示部に表示されることになる。そのため、情報端末と表示装置の双方で、アプリケーションソフトウェアによるデータを表示する領域が狭くなってしまう。また、アプリケーションソフトウェアによるデータは、表示装置に表示させれば、情報端末であえて表示する必要がない。また、表示装置では、表示させる必要のない入力のためのグラフィカルユーザインターフェースが表示されてしまう。
【００２０】
そこで本実施の形態の情報入力表示システムでは、接続ケーブル３１を介してＰＤＡ１０の外部モニタ接続部１５と、ＨＭＤ２０の画像入力部２０２とが接続されると、ＰＤＡ１０の表示部１２には、図４に示すように、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースだけが表示されるように構成した。そして、ＨＭＤ２０の画像表示部２２ａ，２２ｂには、アプリケーションソフトウェアによるデータだけが表示されるように構成した。以下、スケジュール管理用のアプリケーションソフトウェアが起動されている場合を例に説明する。
【００２１】
具体的には、ＰＤＡ１０の中央演算部１０１は、外部の表示装置が外部モニタ接続部１５へ接続されたことを示す信号（外部モニタ検出信号）を接続検出部１０６から受信すると、手書き文字入力表示１２２ａを表示部１２の表示領域の全てを利用して表示するための画像情報（入力専用画像情報）を生成する。また、中央演算部１０１は、スケジュールデータ表示１２１ａをＨＭＤ２０の画像表示部２２ａ，２２ｂの全ての表示領域を利用して表示するための画像情報（表示専用画像情報）を生成する。
【００２２】
そして、中央演算部１０１は、入力専用画像情報に基づいて表示部１２で表示を行うように表示制御部１０５を制御する。また、中央演算部１０１は、表示専用画像情報が外部モニタ接続部１５へ出力されるよう表示制御部１０５を制御する。
【００２３】
表示制御部１０５は、中央演算部１０１からの制御信号および入力専用画像情報に基づいて、手書き文字入力表示１２２ａだけが表示されるように表示部１２における表示を制御する。その結果、表示部１２では、図４に示すように、手書き文字入力表示１２２ａだけが、すなわち、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースだけが表示される。
【００２４】
また、図５に示すように、手書き文字入力領域１２２の他に、キーボード入力領域１２３を設け、キーボード入力表示１２３ａを表示するようにしてもよい。キーボード入力表示１２３ａの任意の文字が表示された部分をＰＤＡ操作用ペン１９などによって押圧すると、当該文字が選択されて入力される。
【００２５】
また、表示制御部１０５は、中央演算部１０１からの制御信号に基づいて、表示専用画像情報を外部モニタ接続部１５へ出力する。ＨＭＤ２０の表示制御部２０１は、接続ケーブル３１および画像入力部２０２を介して受信した表示専用画像情報に基づいて、画像表示部２２ａ，２２ｂにおける画像の表示を制御する。その結果、画像表示部２２ａ，２２ｂには、図４，５に示すように、スケジュールデータ表示１２１ａだけが、すなわち、アプリケーションソフトウェアによるデータだけが表示される。
【００２６】
−−−マウスモードについて−−−
従来の情報入力表示システムでは、情報端末と表示装置とが接続されても、アプリケーションソフトウェアによるデータが情報端末の表示部に表示された。そのため、アプリケーションソフトウェアによるデータが表示された領域のうちの任意の位置をＰＤＡ操作用ペン１９などによって押圧することで、アプリケーションソフトウェアによるデータにおける文字等の入力位置を指示できた。すなわち、情報端末と表示装置とが接続されても、図２に示すように、表示部１２にスケジュールデータ表示１２１ａが表示されるため、スケジュールデータ表示１２１ａが表示された表示部１２の任意の位置をＰＤＡ操作用ペン１９などによって押圧することで、文字等の入力開始位置を指示できた。
【００２７】
しかし、本実施の形態の情報入力表示システムでは、ＰＤＡ１０とＨＭＤ２０とが接続されると、アプリケーションソフトウェアによるデータがＰＤＡ１０の表示部１２に表示されないため、そのままではアプリケーションソフトウェアによるデータにおける文字等の入力位置を指示できない。
【００２８】
そこで、本実施の形態の情報入力表示システムでは、マウスモード切替ボタン１４が一度押圧操作されると、ＰＤＡ１０における操作入力の入力モードがマウスモードに切り替えられる。なお、図４，５では、ＰＤＡ１０における操作入力の入力モードが、文字等を入力するためのモード（文字入力モード）に設定されている状態を示している。
【００２９】
入力モードがマウスモードに切り替えられると、図６に示すように、たとえばＰＤＡ操作用ペン１９で表示部１２をなぞった軌跡と同様の軌跡を描くように、ＨＭＤ２０の画像表示部２２ａ，２２ｂに表示されるポインタ２２１の位置が、画像表示部２２ａ，２２ｂに表示されたアプリケーションソフトウェアによるデータの表示画面上で移動する。マウスモード切替ボタン１４がもう一度押圧操作されると、入力モードがマウスモードから再び文字入力モードに切り替えられる。
【００３０】
具体的には、ＰＤＡ１０の中央演算部１０１は、マウスモード切替ボタン１４が押圧されたことを示す信号を入力部１０４から受信すると、図６に示すように、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースをハーフトーンで表示するように、表示制御部１０５を制御する。また、中央演算部１０１は、表示部１２がなぞられたことで入力部１０４（タッチパネルスイッチ）から出力される信号に基づいて、表示部１２がなぞられた軌跡を算出する。そして、中央演算部１０１は、算出した軌跡に基づいて、アプリケーションソフトウェアによるデータの表示画面上に表示させるポインタを移動させるように、画像情報（表示専用画像情報）を生成して表示制御部１０５に出力する。
【００３１】
また、中央演算部１０１は、表示画面上のポインタの表示位置に対応する位置（もしくは、文字の入力位置のようにあらかじめ定められた所定の位置にしか入力できない場合には、表示画面上のポインタの表示位置に対応する位置近傍であってアプリケーションソフトウェアによって定められる入力可能な位置）を文字等の入力の始点として設定する。この設定された文字等の入力始点のことを以下、文字入力開始始点と呼ぶ。
【００３２】
表示制御部１０５は、中央演算部１０１からの制御信号および画像情報に基づいて、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースをハーフトーン表示するよう表示部１２を制御する。表示制御部１０５は、中央演算部１０１で生成された画像情報（表示専用画像情報）を外部モニタ接続部１５に出力する。
【００３３】
その結果、表示部１２では、図６に示すように、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースがハーフトーンで表示される。
【００３４】
ＨＭＤ２０の表示制御部２０１は、接続ケーブル３１および画像入力部２０２を介して受信した表示専用画像情報に基づいて、画像表示部２２ａ，２２ｂにおける画像の表示を制御する。その結果、画像表示部２２ａ，２２ｂには、図６に示すように、アプリケーションソフトウェアによるデータの表示画面と、当該画面上で移動するポインタ２２１とが表示される。
【００３５】
マウスモードに設定されているときに、たとえばＰＤＡ操作用ペン１９で表示部１２をなぞることで、画像表示部２２ａ，２２ｂに表示されるポインタ２２１の位置を任意の位置に移動させた後、再びマウスモード切替ボタン１４が押圧操作されて文字入力モードに設定されると、ＰＤＡ１０から文字等の入力が可能となる。この場合、ＰＤＡ１０から文字等が入力されると、入力された文字は、画像表示部２２ａ，２２ｂに表示されるアプリケーションソフトウェアによるデータの表示画面上で、上述した文字入力開始始点を始点として表示される。
【００３６】
なお、上述の説明では、スケジュール管理用のアプリケーションソフトウェアが起動されている場合を例に説明したが、本発明はこれに限定されず、メモ機能や、画像のアルバム機能、動画再生機能、インターネット接続・閲覧機能などの各機能を実現するそれぞれのアプリケーションソフトウェアの実行に際して適用することができる。
【００３７】
上述した第１の実施の形態の情報入力表示システムでは、次の作用効果を奏する。
（１）  接続ケーブル３１を介してＰＤＡ１０の外部モニタ接続部１５と、ＨＭＤ２０の画像入力部２０２とが接続されると、ＰＤＡ１０の表示部１２には、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースだけが表示されるように構成した。また、ＨＭＤ２０の画像表示部２２ａ，２２ｂには、アプリケーションソフトウェアによるデータだけが表示されるように構成した。すなわち、ＰＤＡ１０を主として文字等の入力装置として扱い、ＨＭＤ２０を主として画像や音声の出力装置として扱うように構成した。これにより、ＰＤＡ１０では、表示部１２の全面にわたって文字等の入力操作のために有効に利用できるので、入力操作が容易となる。また、ＨＭＤ２０では、画像表示部２２ａ，２２ｂの全面にわたってアプリケーションソフトウェアによるデータを表示できようになるので、表示できる情報量を増やすことができて利便性が向上する。また、画像表示部２２ａ，２２ｂに表示される文字や画像を大きくできるので視認性が向上する。すなわち、ＰＤＡ１０の表示部１２およびＨＭＤ２０の画像表示部２２ａ，２２ｂの双方を有効に利用できる。
【００３８】
（２）  アプリケーションソフトによる処理や、ＰＤＡ１０の表示部１２およびＨＭＤ２０の画像表示部２２ａ，２２ｂで表示される画像についての画像情報の生成処理をＰＤＡ１０側で行うように構成した。これにより、アプリケーションソフトによる処理のために従来から高い処理能力を持つ中央演算部１０１を有効利用できるので、ＰＤＡ１０およびＨＭＤ２０の双方のコストアップを抑制できる。
【００３９】
（３）  ＰＤＡ１０とＨＭＤ２０とによって情報入力表示システムを構成した。ＰＤＡ１０およびＨＭＤ２０のいずれもが携行容易であり、様々な場所やシチュエーションで情報入力表示システムを利用でき、利便性が向上する。
【００４０】
（４）  ユーザがＨＭＤ２０を装着したままであってもユーザが視線を下方に移動させるだけで、手元に保持しているＰＤＡ１０を視認できるように画像表示部収納部２３を構成した。これにより、ＰＤＡ１０で文字等を入力する際にユーザが装着したＨＭＤ２０を外したりずらしたりする必要がないので、利便性が高い。
【００４１】
−−−第２の実施の形態−−−
図７，８を参照して、本発明による情報入力表示システム、情報端末および表示装置の第２の実施の形態を説明する。以下の説明では、第１の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。本実施の形態では、主に、アプリケーションソフトによる処理や、画像情報の生成処理をＨＭＤ２０側で行うように構成した点で、第１の実施の形態と異なる。
【００４２】
図７は、ＰＤＡ１０およびＨＭＤ２０のブロック図である。ＰＤＡ１０は、中央演算部１０１と、ワークメモリ部１０２と、ストレージ部１０３と、入力部１０４と、表示制御部１０５と、表示部１２と、接続検出部１０６と、通信Ｉ／Ｆ部１０７とを備えている。通信Ｉ／Ｆ部１０７は、たとえば接続ケーブル３１を介して接続された外部の機器との通信を行うためのインターフェースである。なお、接続検出部１０６は、たとえば接続ケーブル３１を介して通信Ｉ／Ｆ部１０７へ外部の機器（ＨＭＤ２０）が接続されたか否かを検出する。
【００４３】
ＨＭＤ２０は、画像表示部２２ａ，２２ｂと、表示制御部２０１と、中央演算部２０３と、入力部２０４と、ワークメモリ部２０５と、ストレージ部２０６と、通信Ｉ／Ｆ部２０７と、接続検出部２０８とを備えている。中央演算部２０３は、ワークメモリ部２０５を作業エリアとしてストレージ部２０６から読み込んだプログラムを起動して各種の処理を行って、ＨＭＤ２０の各部を制御する。入力部２０４は、たとえば、再生するオーディオ／ビジュアルコンテンツの選択操作や、再生したオーディオ／ビジュアルコンテンツの停止、巻き戻し、早送り等の指示操作、再生音量の調整操作など、各種の操作を行う不図示の操作部材の操作に応じて信号を出力するスイッチ類である。ストレージ部２０６は、たとえば動画再生用のアプリケーションソフトウェアのプログラムや、オーディオ／ビジュアルコンテンツのデータなどを記憶する。
【００４４】
通信Ｉ／Ｆ部２０７は、たとえば接続ケーブル３１を介して接続された外部の機器との通信を行うためのインターフェースである。接続検出部２０８は、たとえば接続ケーブル３１を介して通信Ｉ／Ｆ部２０７へ外部の機器（ＰＤＡ１０）が接続されたか否かを検出する。
【００４５】
本実施の形態の情報入力表示システムでは、接続ケーブル３１を介してＰＤＡ１０の通信Ｉ／Ｆ部１０７と、ＨＭＤ２０の通信Ｉ／Ｆ部２０７とが接続されると、ＰＤＡ１０の表示部１２には、ユーザによる操作入力のためのグラフィカルユーザインターフェースだけが表示されるように構成した。そして、ＨＭＤ２０の画像表示部２２ａ，２２ｂには、アプリケーションソフトウェアによるデータ（たとえば再生されたオーディオ／ビジュアルコンテンツの動画）だけが表示されるように構成した。すなわち、ＨＭＤ２０の操作入力をＰＤＡ１０で入力できるように構成した。以下、ストレージ部２０６に格納されたオーディオ／ビジュアルコンテンツのデータを再生する場合を例に説明する。
【００４６】
具体的には、ＨＭＤ２０の中央演算部２０３は、通信Ｉ／Ｆ部２０７へＰＤＡ１０が接続されたことを示す信号（外部機器検出信号）を接続検出部２０８から受信すると、図８に示すような、ＰＤＡ１０の表示部１２に表示させる、ＨＭＤ２０の操作入力のためのグラフィカルユーザインターフェース１２５の画像情報を生成する。また、中央演算部２０３は、後述する検出位置情報を生成する。そして、中央演算部２０３は、生成した画像情報および検出位置情報を表示部表示情報として通信Ｉ／Ｆ部２０７を介してＰＤＡ１０へ出力する。なお、ＰＤＡ１０へ表示部表示情報を出力する際に、再生に係るコンテンツのタイトル名（たとえば「日米野球対決」）の情報を同時に出力するようにしてもよい。
【００４７】
ここで、検出位置情報について説明する。検出位置情報とは、グラフィカルユーザインターフェース１２５が表示された表示部１２における操作位置（タッチパネルスイッチの押圧位置）と、コンテンツデータの再生における操作の内容（たとえば、再生、一時停止、巻き戻し、早送り等）とを関連づける情報である。たとえば図８に示すように、表示部１２で、コンテンツの再生開始を指示するための再生指示アイコン１２５ａの表示領域が押圧されると、ＰＤＡ１０の中央演算部１０１が、コンテンツの再生開始が指示されたものと判断するように、検出位置情報は構成されている。
【００４８】
同様に、たとえば、表示部１２で、コンテンツの再生の一時停止を指示するための一時停止指示アイコン１２５ｂの表示領域が押圧されると、ＰＤＡ１０の中央演算部１０１が、コンテンツの再生の一時停止が指示されたものと判断するように、検出位置情報は構成されている。たとえば、表示部１２で、コンテンツの巻き戻しを指示するための巻き戻し指示アイコン１２５ｃの表示領域が押圧されると、ＰＤＡ１０の中央演算部１０１が、コンテンツの巻き戻しが指示されたものと判断するように、検出位置情報は構成されている。たとえば、表示部１２で、コンテンツの早送りを指示するための早送り指示アイコン１２５ｄの表示領域が押圧されると、ＰＤＡ１０の中央演算部１０１が、コンテンツの早送りが指示されたものと判断するように、検出位置情報は構成されている。
【００４９】
通信Ｉ／Ｆ部１０７を介して表示部表示情報を受信したＰＤＡ１０では、中央演算部１０１は、受信した画像情報に基づいて、グラフィカルユーザインターフェース１２５が表示部１２に表示されるよう表示制御部１０５を制御する。表示制御部１０５は、グラフィカルユーザインターフェース１２５を表示するように表示部１２を制御する。その結果、図８に示すように、表示部１２にはグラフィカルユーザインターフェース１２５が表示される。なお、通信Ｉ／Ｆ部１０７を介して受信した、再生に係るコンテンツのタイトル名の情報に基づいて、図８に示すように、コンテンツのタイトル名（たとえば「日米野球対決」）を表示部１２に表示するようにしてもよい。
【００５０】
また、中央演算部１０１は、タッチパネルスイッチである表示部１２（すなわち入力部１０４）からの操作信号を受信すると、表示部１２上の操作位置（押圧位置）の情報と、上述した検出位置情報とに基づいて、どのような指示がなされたのかを判断する。中央演算部１０１は、たとえば、コンテンツの再生開始が指示されたものと判断すると再生開始信号を、再生の一時停止が指示されたものと判断すると一時停止信号を、巻き戻しが指示されたものと判断すると巻き戻し信号を、早送りが指示されたものと判断すると早送り信号をそれぞれユーザ操作情報として通信Ｉ／Ｆ部１０７を介してＨＭＤ２０へ出力する。
【００５１】
ＨＭＤ２０の中央演算部２０３は、通信Ｉ／Ｆ部２０７を介して受信したユーザ操作情報に基づいて、コンテンツのデータの再生や一時停止、巻き戻し、早送り等の処理を行い、画像情報を生成して表示制御部２０１に出力する。表示制御部２０１は、中央演算部２０３で生成された画像情報に基づいて画像表示部２２ａ，２２ｂにおける画像（映像）の表示を制御する。その結果、画像表示部２２ａ，２２ｂにおける画像（映像）の表示において、ユーザが表示部１２上で操作した操作内容が反映される。
【００５２】
すなわち、ユーザが表示部１２に表示された再生指示アイコン１２５ａの表示領域を押圧操作すると、画像表示部２２ａ，２２ｂにおける画像（映像）の再生が開始される。同様に、ユーザが一時停止指示アイコン１２５ｂの表示領域を押圧操作すると、画像表示部２２ａ，２２ｂにおける画像（映像）の再生が一時停止される。ユーザが巻き戻し指示アイコン１２５ｃの表示領域を押圧操作すると、画像表示部２２ａ，２２ｂにおける画像（映像）が巻き戻される。ユーザが早送り指示アイコン１２５ｄの表示領域を押圧操作すると、画像表示部２２ａ，２２ｂにおける画像（映像）が早送りされる。
【００５３】
なお、上述の説明では、ストレージ部２０６に格納されたオーディオ／ビジュアルコンテンツのデータを再生する場合を例に説明したが、本発明はこれに限定されず、メモ機能や、画像のアルバム機能、インターネット接続・閲覧機能などの各機能を実現するそれぞれのアプリケーションソフトウェアの実行に際して適用することができる。
【００５４】
上述した第２の実施の形態の情報入力表示システムでは、第１の実施の形態の作用効果に加えて次の作用効果を奏する。
（１）  アプリケーションソフトによる処理や、ＰＤＡ１０の表示部１２およびＨＭＤ２０の画像表示部２２ａ，２２ｂで表示される画像情報の生成処理をＨＭＤ２０側で行うように構成した。これにより、たとえば、アプリケーションソフトによる動画の再生処理のために従来から高い画像処理能力を持つ中央演算部２０３を有効利用でき、ＨＭＤ２０で再生中のデータに相応しい情報表示を、ＰＤＡ１０に表示することが可能となる。
【００５５】
（２）  ＨＭＤ２０の操作入力をＰＤＡ１０に入力できるように構成したので、ＨＭＤ２０の操作性が向上する。
【００５６】
−−−変形例−−−
（１）  上述の説明では、ＰＤＡ１０とＨＭＤ２０とを接続ケーブル３１で接続するように構成しているが、本発明はこれに限定されない。たとえば、赤外線を利用した無線通信や、電波を利用した無線通信によってＰＤＡ１０とＨＭＤ２０とを接続するように構成してもよい。
【００５７】
（２）  上述の説明では、マウスモードに切り替えられると、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースをハーフトーンで表示するように構成したが、本発明はこれに限定されない。たとえば、マウスモードに切り替えられると、ユーザによる文字などの入力のためのグラフィカルユーザインターフェースの表示を中止するように構成してもよい。
【００５８】
（３）  上述した第２の実施の形態では、ＰＤＡ１０をＨＭＤ２０の操作部材の一部として扱っているが、たとえば、ＰＤＡ１０に加速度センサなどを設けて、ＰＤＡ１０自体の動きを検出することで、アプリケーションソフトウェアにおける操作を行うようにしてもよい。たとえば、ゲームのアプリケーションソフトウェアを起動させた際に、ＰＤＡ１０自体を動かすことでそのゲームにおける操作を行うことができるようにしてもよい。
【００５９】
（４）  上述の説明では、情報入力表示システムにおける表示装置としてＨＭＤ２０を例に挙げて説明しているが、ＨＭＤ２０に限らず、画像（映像）を表示可能な表示部を有する携行可能な様々な装置（携帯表示装置）であってもよい。たとえば、ＰＤＡ１０に、携帯型のモニタ装置やテレビ受像機を接続してもよく、液晶パネルなどの表示装置を有する携帯電話機を接続してもよい。また、上述したＰＤＡ１０に他のＰＤＡを接続してもよい。
【００６０】
（５）  上述した第２の実施の形態のＨＭＤ２０では、動画再生用のアプリケーションソフトウェアのプログラムや、オーディオ／ビジュアルコンテンツのデータなどを内蔵したストレージ部２０６に格納するように構成しているが、本発明はこれに限定されない。たとえば、外部のストレージ装置をＨＭＤ２０に接続し、当該外部のストレージ装置に格納された動画再生用のアプリケーションソフトウェアのプログラムや、オーディオ／ビジュアルコンテンツのデータなどを利用するように構成してもよい。
【００６１】
（６）  上述した第２の実施の形態では、ＨＭＤ２０が画像情報および検出位置情報を表示部表示情報としてＰＤＡ１０に出力し、ＰＤＡ１０からユーザ操作情報を受信することでコンテンツのデータの再生や一時停止、巻き戻し、早送り等の処理を行うように構成しているが、本発明はこれに限定されない。たとえば、ＨＭＤ２０がＰＤＡ１０に表示部表示情報だけを送信し、ＰＤＡ１０から、表示部１２が押圧された位置（座標）の情報を受信するように構成してもよい。そして、ＨＭＤ２０の中央演算部２０３が、ＰＤＡ１０から受信した、表示部１２が押圧された位置（座標）の情報に基づいて、どのような指示（たとえば、再生、一時停止、巻き戻し、早送り等）がなされたのかを判断するように構成してもよい。
【００６２】
（７）  上述の説明では、ＨＭＤ２０にはユーザの両眼にそれぞれ対応するように、２つの画像表示部２２ａ，２２ｂが設けられているが、すなわち、ＨＭＤ２０は両眼タイプのヘッドマウントディスプレイ装置であるが、画像表示部が１つである片眼タイプのヘッドマウントディスプレイ装置であってもよい。
【００６３】
（８）  上述の説明では、ＰＤＡ１０とＨＭＤ２０とが接続されると、ＰＤＡ１０の表示部１２のタッチパネルスイッチを利用して、ＨＭＤ２０に表示されるアプリケーションソフトウェアによるデータ上での入力操作を可能とするように構成したが、本発明はこれに限定されない。表示部１２のタッチパネルスイッチの利用は必須ではなく、各操作ボタン１３やマウスモード切り替えボタン１４の操作によって、ＨＭＤ２０に表示されるアプリケーションソフトウェアによるデータ上での入力操作を可能とするように構成してもよい。
（９）  上述した各実施の形態および変形例は、それぞれ組み合わせてもよい。
【００６４】
なお、本発明は、上述した実施の形態のものに何ら限定されず、ユーザの操作入力を受け付ける入力部と、第１の表示部と、第１の表示部における表示を制御する第１の表示制御手段とを有する情報端末と、第２の表示部と、第２の表示部における表示を制御する第２の表示制御手段とを有する表示装置とを備え、情報端末と表示装置とが接続されたとき、第１の表示制御手段は、ユーザの操作入力の受け付けに関する画面を表示するよう第１の表示部を制御し、第２の表示制御手段は、情報端末の入力部で受け付けたユーザの操作入力に応じて画面表示するよう第２の表示部を制御することを特徴とする各種構造の情報入力表示システムや、当該情報入力表示システムに用いられる情報端末や表示装置を含むものである。
【図面の簡単な説明】
【００６５】
【図１】本発明による情報入力表示システムで用いられる情報端末および表示装置の外観を示す図である。
【図２】一例として、スケジュール管理用のアプリケーションソフトを起動させているときの表示部１２の表示画面を示す図である。
【図３】ＰＤＡ１０およびＨＭＤ２０のブロック図である。
【図４】ＰＤＡ１０とＨＭＤ２０とを接続したときの表示部１２および画像表示部２２ａ，２２ｂに表示される画像の一例を示す図である。
【図５】ＰＤＡ１０とＨＭＤ２０とを接続したときの表示部１２および画像表示部２２ａ，２２ｂに表示される画像の一例を示す図である。
【図６】マウスモードについて説明する図である。
【図７】第２の実施の形態におけるＰＤＡ１０およびＨＭＤ２０のブロック図である。
【図８】第２の実施の形態において、ＰＤＡ１０とＨＭＤ２０とを接続したときの表示部１２および画像表示部２２ａ，２２ｂに表示される画像の一例を示す図である。
【符号の説明】
【００６６】
１０  携帯情報端末（ＰＤＡ）                    １２  表示部
１４  マウスモード切り替えボタン
２０  ヘッドマウントディスプレイ装置（ＨＭＤ）
２２ａ，２２ｂ  画像表示部                      ２３  画像表示部収納部
１０１  中央演算部                              １０４  入力部
１０５  表示制御部                              １２１ａ  スケジュールデータ表示
１２２ａ  手書き文字入力表示                    ２０１  表示制御部
２０３  中央演算部                              ２０４  入力部
【図１】
2009042967.tif 000003
【図２】
2009042967.tif 000004
【図３】
2009042967.tif 000005
【図４】
2009042967.tif 000006
【図５】
2009042967.tif 000007
【図６】
2009042967.tif 000008
【図７】
2009042967.tif 000009
【図８】
2009042967.tif 000010