(57)【要約】【課題】携帯電話などの携帯端末装置とヘッドマウントディスプレイとの連帯を効果的に行うことができる電子メール閲覧システムや電子メール閲覧方法等を提供すること。【解決手段】携帯端末装置において添付ファイルがある電子メールを表示する際に、テキストであるメール本文は携帯端末装置の表示部で表示し、携帯端末装置の表示部で視認しにくい添付ファイルをヘッドマウントディスプレイへ送信して、この添付ファイルをヘッドマウントディスプレイで表示する。【選択図】図１
2008059511.tif 000002
【特許請求の範囲】
【請求項１】
電子メールを受信する機能を有する携帯端末装置と、利用者の頭部に装着するヘッドマウントディスプレイとを備えた電子メール閲覧システムにおいて、
前記携帯端末装置は、
表示部と、
前記ヘッドマウントディスプレイにデータを送信するデータ送信部と、
電子メールを受信する電子メール受信部と、
前記電子メール受信部で受信した電子メールの本文データを前記表示部に表示すると共に、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記表示部に表示せずに前記データ送信部によって前記ヘッドマウントディスプレイに送信する制御部と、を備え、
前記ヘッドマウントディスプレイは、
前記携帯端末装置から送信される添付ファイルデータを受信するデータ受信部と、
前記データ受信部によって受信した添付ファイルデータを前記利用者が視認可能に表示する表示部と、を備えた
ことを特徴とする電子メール閲覧システム。
【請求項２】
前記携帯端末装置の制御部は、
前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換した後、前記データ送信部によって前記変換した添付ファイルデータを前記ヘッドマウントディスプレイに送信する
ことを特徴とする請求項１に記載の電子メール閲覧システム。
【請求項３】
前記携帯端末装置は、
前記添付ファイルデータが前記ヘッドマウントディスプレイで表示可能なデータに変換することができないと前記制御部によって判定されると、前記利用者にその旨を報知する報知部を備えた
ことを特徴とする請求項２に記載の電子メール閲覧システム。
【請求項４】
前記携帯端末装置の制御部は、
前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換することができないと判定すると、前記添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換するコンピュータプログラムを、通信ネットワークに接続された外部装置から取得する
ことを特徴とする請求項２に記載の電子メール閲覧システム。
【請求項５】
前記携帯端末装置の制御部は、
前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換することができないと判定すると、当該添付ファイルデータを前記ヘッドマウントディスプレイに送信し、
前記ヘッドマウントディスプレイの制御部は、
前記データ受信部で受信した添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換して前記ヘッドマウントディスプレイの表示部に前記利用者が視認可能に表示する
ことを特徴とする請求項２に記載の電子メール閲覧システム。
【請求項６】
携帯端末装置から通信ネットワークを介して添付ファイルデータを含むデータ変換要求を受信すると、当該添付データを前記ヘッドマウントディスプレイにより表示可能なデータに変換し、この変換したデータを前記端末装置へ送信する外部装置を備え、
前記携帯端末装置の制御部は、
前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイにより表示可能なデータに変換することができないと判定すると、当該添付ファイルデータを含むデータ変換要求を通信ネットワークに接続された前記外部装置へ送信し、前記データ変換要求に応じて前記外部装置から送信されるデータを前記データ送信部によって前記ヘッドマウントディスプレイに送信する
ことを特徴とする請求項２に記載の電子メール閲覧システム。
【請求項７】
前記携帯端末装置の制御部は、
前記添付ファイルデータのファイル形式毎に添付ファイルデータを前記ヘッドマウントディスプレイにより表示可能なデータに変換する添付ファイル展開処理手段としての機能と共に、前記複数の添付ファイル展開処理手段のうち、前記電子メール受信部で受信した前記添付ファイルデータのファイル形式に応じた前記添付ファイル展開処理手段を選択し、当該選択した添付ファイル展開処理手段によって前記添付ファイルデータを変換させる添付ファイル展開処理選択手段としての機能を備えた
ことを特徴とする請求項１〜６のいずれか１項に記載の電子メール閲覧システム。
【請求項８】
電子メールを受信する機能を有する携帯端末装置と、利用者の頭部に装着するヘッドマウントディスプレイとを備えた電子メール閲覧システムにおける前記携帯端末装置において、
表示部と、
前記ヘッドマウントディスプレイにデータを送信するデータ送信部と、
電子メールを受信する電子メール受信部と、
前記電子メール受信部で受信した電子メールの本文データを前記表示部に表示すると共に、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記表示部に表示せずに前記データ送信部によって前記ヘッドマウントディスプレイに送信する制御部と、を備えた
ことを特徴とする携帯端末装置。
【請求項９】
電子メール受信部を有し、電子メールを受信する機能を有する携帯端末装置に用いるプログラムにおいて、
コンピュータを、
前記電子メール受信部で受信した電子メールに含まれる本文データを抽出する本文抽出手段と、
前記電子メール受信部で受信した電子メールに含まれる添付ファイルデータを抽出する添付ファイル抽出手段と、
前記本文抽出手段によって抽出した本文データを表示部に表示すると共に、前記添付ファイル抽出手段によって抽出した添付ファイルデータを表示部に表示せずに前記データ送信部によってヘッドマウントディスプレイに送信する表示制御手段と、
して機能するためのプログラム。
【請求項１０】
電子メールを受信する機能を有する携帯端末装置と、利用者の頭部に装着するヘッドマウントディスプレイとを備えた電子メール閲覧システムにおける前記ヘッドマウントディスプレイにおいて、
前記携帯端末装置から送信される添付ファイルデータを受信するデータ受信部と、
前記データ受信部で受信した前記添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換する添付ファイル展開処理手段と、
前記添付ファイル展開処理手段によって受信した変換したデータを前記利用者が視認可能に表示する表示部と、を備えた
ことを特徴とするヘッドマウントディスプレイ。
【請求項１１】
携帯端末装置が受信した電子メールを当該携帯端末装置とヘッドマウントディスプレイとにより閲覧するための電子メール閲覧方法において、
前記携帯端末装置が、電子メールを受信するステップと、
前記携帯端末装置が、前記受信した電子メールに含まれる本文データを抽出するステップと、
前記携帯端末装置が、前記抽出した本文データを表示するステップと、
前記携帯端末装置が、前記受信した電子メールの添付ファイルデータを抽出するステップと、
前記携帯端末装置が、前記抽出した添付ファイルデータを前記ヘッドマウントディスプレイに送信するステップと、
前記ヘッドマウントディスプレイが、前記携帯端末装置から送信される添付ファイルデータを受信するステップと、
前記ヘッドマウントディスプレイが、前記携帯端末装置から受信した添付ファイルデータを前記利用者が視認可能に表示するステップと、を有する
ことを特徴とする電子メール閲覧方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末装置及びヘッドマウントディスプレイを用いた電子メール閲覧システム及び電子メール閲覧方法に関するものである。
【背景技術】
【０００２】
近年、携帯電話やＰＤＡ（Personal Digital Assistants）などの携帯端末装置が幅広く普及してきている。このような携帯端末装置においては、一般に、インターネットなどのネットワークに配置されたＷｅｂサーバや電子メールサーバなどと通信する機能を有しており、Ｗｅｂページの閲覧や電子メールの送受信などが可能となっている。
【０００３】
ところが、携帯端末装置の表示部は小さいため、Ｗｅｂページなどを表示してもその閲覧に不便をきたすことが多い。
【０００４】
そこで、表示画像と外界とを同時に視認することができるシースルー型のヘッドマウントディスプレイ（ＨＭＤ）によって、携帯電話で受信したＷｅｂページなどを大画面表示させる技術が提案されている（特許文献１参照）。
【０００５】
このように携帯電話とヘッドマウントディスプレイとを連帯させることにより、ネットワーク上の情報を大画面表示で閲覧することが可能になる。しかも、情報の閲覧に関する操作は、携帯電話で行うことができるように構成されているため、操作性を損なうことなく、Ｗｅｂページなどを快適に閲覧することができる。
【特許文献１】特開２００３−８７３６３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の技術では、ネットワーク上の情報は全て携帯電話を介してヘッドマウントディスプレイに表示されるため、視覚的には、携帯電話に表示していたネットワーク上の情報をヘッドマウントディスプレイにより大画面で見ることができるという効果に留まるものである。
【０００７】
ネットワーク上の情報には、Ｗｅｂページ以外にも電子メールがあり、ヘッドマウントディスプレイで電子メールを大画面で見ることができることに加え、更に表示性を向上することが望ましい。
【０００８】
そこで、本発明は、携帯電話などの携帯端末装置とヘッドマウントディスプレイとの連帯を更に効果的に行うことができる電子メール閲覧システムや電子メール閲覧方法等を提供することを目的とする。
【課題を解決するための手段】
【０００９】
請求項１に記載の発明は、電子メールを受信する機能を有する携帯端末装置と、利用者の頭部に装着するヘッドマウントディスプレイとを備えた電子メール閲覧システムにおいて、前記携帯端末装置は、表示部と、前記ヘッドマウントディスプレイにデータを送信するデータ送信部と、電子メールを受信する電子メール受信部と、前記電子メール受信部で受信した電子メールの本文データを前記表示部に表示すると共に、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記表示部に表示せずに前記データ送信部によって前記ヘッドマウントディスプレイに送信する制御部とを備え、前記ヘッドマウントディスプレイは、前記携帯端末装置から送信される添付ファイルデータを受信するデータ受信部と、前記データ受信部によって受信した添付ファイルデータを前記利用者が視認可能に表示する表示部とを備えたことを特徴とする。
【００１０】
また、請求項２に記載の発明は、請求項１に記載の発明において、前記携帯端末装置の制御部は、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換した後、前記データ送信部によって前記変換した添付ファイルデータを前記ヘッドマウントディスプレイに送信することを特徴とする。
【００１１】
また、請求項３に記載の発明は、請求項２に記載の発明において、前記携帯端末装置は、前記添付ファイルデータが前記ヘッドマウントディスプレイで表示可能なデータに変換することができないと前記制御部によって判定されると、前記利用者にその旨を報知する報知部を備えたことを特徴とする。
【００１２】
また、請求項４に記載の発明は、請求項２に記載の発明において、前記携帯端末装置の制御部は、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換することができないと判定すると、前記添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換するコンピュータプログラムを、通信ネットワークに接続された外部装置から取得することを特徴とする。
【００１３】
また、請求項５に記載の発明は、請求項２に記載の発明において、前記携帯端末装置の制御部は、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換することができないと判定すると、当該添付ファイルデータを前記ヘッドマウントディスプレイに送信し、前記ヘッドマウントディスプレイの制御部は、前記データ受信部で受信した添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換して前記ヘッドマウントディスプレイの表示部に前記利用者が視認可能に表示することを特徴とする。
【００１４】
また、請求項６に記載の発明は、請求項２に記載の発明において、携帯端末装置から通信ネットワークを介して添付ファイルデータを含むデータ変換要求を受信すると、この添付データを前記ヘッドマウントディスプレイにより表示可能なデータに変換し、当該変換したデータを前記端末装置へ送信する外部装置を備え、前記携帯端末装置の制御部は、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記ヘッドマウントディスプレイにより表示可能なデータに変換することができないと判定すると、当該添付ファイルデータを含むデータ変換要求を通信ネットワークに接続された前記外部装置へ送信し、前記データ変換要求に応じて前記外部装置から送信されるデータを前記データ送信部によって前記ヘッドマウントディスプレイに送信することを特徴とする。
【００１５】
また、請求項７に記載の発明は、請求項１から６のいずれか１項に記載の発明において、前記携帯端末装置は、  前記添付ファイルデータのファイル形式毎に添付ファイルデータを前記ヘッドマウントディスプレイにより表示可能なデータに変換する添付ファイル展開処理手段としての機能と共に、前記複数の添付ファイル展開処理手段のうち、前記電子メール受信部で受信した前記添付ファイルデータのファイル形式に応じた前記添付ファイル展開処理手段を選択し、当該選択した添付ファイル展開処理手段によって前記添付ファイルデータを変換させる添付ファイル展開処理選択手段としての機能を備えたことを特徴とする。
【００１６】
また、請求項８に記載の発明は、電子メールを受信する機能を有する携帯端末装置と、利用者の頭部に装着するヘッドマウントディスプレイとを備えた電子メール閲覧システムにおける前記携帯端末装置において、表示部と、前記ヘッドマウントディスプレイにデータを送信するデータ送信部と、電子メールを受信する電子メール受信部と、前記電子メール受信部で受信した電子メールの本文データを前記表示部に表示すると共に、前記電子メール受信部で受信した電子メールの添付ファイルデータを前記表示部に表示せずに前記データ送信部によって前記ヘッドマウントディスプレイに送信する制御部とを備えたことを特徴とする。
【００１７】
また、請求項９に記載の発明は、電子メール受信部を有し、電子メールを受信する機能を有する携帯端末装置に用いるプログラムにおいて、コンピュータを、前記電子メール受信部で受信した電子メールに含まれる本文データを抽出する本文抽出手段、前記電子メール受信部で受信した電子メールに含まれる添付ファイルデータを抽出する添付ファイル抽出手段、前記本文抽出手段によって抽出した本文データを表示部に表示すると共に、前記添付ファイル抽出手段によって抽出した添付ファイルデータを表示部に表示せずに前記データ送信部によってヘッドマウントディスプレイに送信する表示制御手段として機能することを特徴とする。
【００１８】
また、請求項１０に記載の発明は、電子メールを受信する機能を有する携帯端末装置と、利用者の頭部に装着するヘッドマウントディスプレイとを備えた電子メール閲覧システムにおける前記ヘッドマウントディスプレイにおいて、前記携帯端末装置から送信される添付ファイルデータを受信するデータ受信部と、前記データ受信部で受信した前記添付ファイルデータを前記ヘッドマウントディスプレイで表示可能なデータに変換する添付ファイル展開処理手段と、前記添付ファイル展開処理手段によって受信した変換したデータを前記利用者が視認可能に表示する表示部とを備えたことを特徴とする。
【００１９】
また、請求項１１に記載の発明は、携帯端末装置が受信した電子メールを当該携帯端末装置とヘッドマウントディスプレイとにより閲覧するための電子メール閲覧方法において、前記携帯端末装置が、電子メールを受信するステップと、前記携帯端末装置が、前記受信した電子メールに含まれる本文データを抽出するステップと、前記携帯端末装置が、前記抽出した本文データを表示するステップと、前記携帯端末装置が、前記受信した電子メールの添付ファイルデータを抽出するステップと、前記携帯端末装置が、前記抽出した添付ファイルデータを前記ヘッドマウントディスプレイに送信するステップと、前記ヘッドマウントディスプレイが、前記携帯端末装置から送信される添付ファイルデータを受信するステップと、前記ヘッドマウントディスプレイが、前記携帯端末装置から受信した添付ファイルデータを前記利用者が視認可能に表示するステップと、を有することを特徴とする。
【発明の効果】
【００２０】
請求項１，８，９，１１に記載の発明によれば、携帯端末装置において電子メールを表示する際に、テキストであるメール本文は携帯端末装置の表示部で表示し、携帯端末装置の表示部で視認しにくい添付ファイルをヘッドマウントディスプレイに表示するようにしたため、添付ファイルの閲覧が容易となり、電子メールの閲覧の表示性を向上させることができ、携帯端末装置とヘッドマウントディスプレイとの連帯を効果的に行うことができる。
【００２１】
また、請求項２に記載の発明によれば、携帯端末装置において、ヘッドマウントディスプレイにおいて表示する添付ファイルのデータをヘッドマウントディスプレイで表示可能なデータに変換するため、ヘッドマウントディスプレイにおいて携帯端末装置から出力される添付ファイルのデータをそのまま表示することができ、ヘッドマウントディスプレイでのデータ変換処理が不要となる。
【００２２】
また、請求項３に記載の発明によれば、携帯端末装置において、ヘッドマウントディスプレイにおいて表示する添付ファイルのデータをヘッドマウントディスプレイで表示可能なデータに変換することができないときには、その旨の報知を行うようにしているため、利用者は添付ファイルがヘッドマウントディスプレイで表示することができないことを容易には把握することができる。
【００２３】
また、請求項４に記載の発明によれば、携帯端末装置において、ヘッドマウントディスプレイにおいて表示する添付ファイルのデータをヘッドマウントディスプレイで表示可能なデータに変換処理できないときであっても、その処理を行うためのプログラムを外部装置から取得することができるため、ヘッドマウントディスプレイでの添付ファイルの表示を行うことができる。
【００２４】
また、請求項５に記載の発明によれば、携帯端末装置において、ヘッドマウントディスプレイにおいて表示する添付ファイルのデータをヘッドマウントディスプレイで表示可能なデータに変換処理できないときには、ヘッドマウントディスプレイでその変換処理を行うようにしており、このような場合であっても、ヘッドマウントディスプレイでの添付ファイルの閲覧が可能となる。
【００２５】
また、請求項６に記載の発明によれば、携帯端末装置において、ヘッドマウントディスプレイにおいて表示する添付ファイルのデータをヘッドマウントディスプレイで表示可能なデータに変換処理できないときであっても、その処理を外部装置に委託することができるため、ヘッドマウントディスプレイでの添付ファイルの表示を行うことができる。
【００２６】
また、請求項７に記載の発明によれば、ヘッドマウントディスプレイで表示可能なデータへの変換処理を複数の添付ファイルの形式で可能としていることから、更に表示性を向上させることができる。
【００２７】
また、請求項１０に記載の発明によれば、ヘッドマウントディスプレイにおいて、添付ファイルのデータをヘッドマウントディスプレイで表示可能なデータに変換するため、携帯端末装置により添付ファイルの変換されない場合であっても、ヘッドマウントディスプレイへの表示が可能となる。
【発明を実施するための最良の形態】
【００２８】
（第１実施形態）
本実施形態１における電子メール閲覧システムＳは、図１に示すように、携帯端末装置の一例である携帯電話１と、利用者３の頭部に装着するヘッドマウントディスプレイ２とを備えている。
【００２９】
携帯電話１は、無線基地局５を介して無線電話網４に接続された他の携帯電話やプロバイダ９と通信可能に構成されている。また、無線電話網４は電子メールサーバ７などが接続されたインターネットなどのネットワーク６に接続されている。
【００３０】
携帯電話１には、クライアント用の電子メールプログラムが格納されており、携帯電話１はこのプログラムを実行することによって、無線基地局５及び無線電話網４を介してインターネットなどのネットワーク６に接続された電子メールサーバ７との間で電子メール（以下、単に「メール」とも呼ぶ。）の送受信を行う。
【００３１】
ヘッドマウントディスプレイ２は、画像に応じて変調されたレーザ光を２次元に走査した後、プリズムやハーフミラーなどを介して利用者３の網膜に投射することによって利用者３に画像を視認させると共に、外界を視認させるものである。
【００３２】
ここで、携帯電話１からヘッドマウントディスプレイ２へデータを送信することができるように、携帯電話１にはデータ送信部が設けられ、ヘッドマウントディスプレイ２にはデータ受信部が設けられる。
【００３３】
携帯電話１は、上述の電子メールプログラムを実行することによって、電子メールサーバ７から電子メールを受信し、電子メールに含まれる本文データを表示すると共に、電子メールに添付データが含まれる場合には、所定の条件の下、ヘッドマウントディスプレイ２に対して添付データを送信する。
【００３４】
ヘッドマウントディスプレイ２は、携帯電話１のデータ送信部から送信された添付データをデータ受信部で受信して表示する。添付データとしては、例えば、Microsoft Word(登録商標)やMicrosoft Excel(登録商標)やアドビ社のAcrobat（登録商標）などによって作成されたファイルなど様々なファイル形式のデータがある。
【００３５】
このように、携帯電話１において電子メールを表示する際に、テキストであるメール本文は携帯電話１の表示部で表示し、携帯電話１の表示部で視認しにくい添付ファイルをヘッドマウントディスプレイ２で表示するようにしたため、添付ファイルの閲覧が容易となり、電子メールの閲覧の表示性を向上させることができ、携帯電話１とヘッドマウントディスプレイ２との連帯を効果的に行うことができる。
【００３６】
また、携帯電話１において、受信した電子メールに含まれる添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換する機能を有しており、これにより、ヘッドマウントディスプレイ２でのデータ変換処理が不要となり、ヘッドマウントディスプレイ２の構成が複雑にならずに済む。
【００３７】
携帯電話１において、受信した電子メールに含まれる添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換することができないとき、例えば、添付ファイルデータのファイル形式が所定以外のものであるとき、携帯電話１はその旨をスピーカや表示部（報知部の一例に相当）により利用者３に報知するようにしている。例えば、携帯電話１のスピーカから報知音を出力したり、携帯電話１の表示部に警告表示したりする。また、携帯電話１による報知に代えて、或は携帯電話１による報知と共にヘッドマウントディスプレイ２において警報表示を行うようにしてもよい。
【００３８】
また、受信した電子メールに含まれる添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換することができないとき、携帯電話１は、添付ファイルのデータをそのままヘッドマウントディスプレイ２に送信することもできる。
【００３９】
この場合、ヘッドマウントディスプレイ２においては、データの変換が行われずに携帯電話１から送付された添付ファイルを自装置において表示可能なデータに変換して利用者３に視認可能に表示する。
【００４０】
このように携帯電話１において、添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換処理できないときには、ヘッドマウントディスプレイ２でその変換処理を行うようにすれば、ヘッドマウントディスプレイ２での添付ファイルの閲覧が可能となる。
【００４１】
以下、携帯電話１の構成、ヘッドマウントディスプレイ２の構成、携帯電話１の動作及びヘッドマウントディスプレイ２の動作について順に具体的に説明する。
【００４２】
（携帯電話の構成）
まず、携帯電話１の構成について、図面を参照して具体的に説明する。図２は本実施形態１における携帯電話１のブロック図である。
【００４３】
図２に示すように、携帯電話１は、無線基地局５と無線通信を行う携帯電話網通信部１０と、各種操作やデータの入力を行うための入力部１１と、各種の画像を表示するための表示部１２と、音声の入出力を行うため音声処理部１３と、ヘッドマウントディスプレイ２へデータを送信するための近距離無線通信部１４と、表示部１２に表示する画像（グラフィック）やテキストのデータを格納するビデオＲＡＭ（ＶＲＡＭ）１９と、携帯電話１全体を制御する制御部１６と、電源部１７とを備えている。
【００４４】
携帯電話網通信部１０は、アンテナや無線回路を備え、電波を用いた通信を無線基地局５との間で行う携帯電話モジュール２０と、携帯電話モジュール２０を制御して、無線基地局５とのデータの送受信を行う携帯電話網通信制御回路２１とを備えている。
【００４５】
ここで、携帯電話網通信部１０は、無線基地局５との音声信号を送受信を行う電話通信部としての機能の他、無線基地局５を介して電子メールサーバ７から電子メールのデータを受信する電子メール受信部及び電子メールサーバ７へ電子メールを送信する電子メール送信部としての機能などを有している。
【００４６】
入力部１１は、テンキー、矢印（選択）キー、決定キー、通話キー、終話キー、各種機能キー（ソフトキーを含む）などからなる操作ボタン群２２と、操作ボタン群２２のキーが操作されたことを検出し、制御部１６に通知する入力制御回路２３を備えている。
【００４７】
表示部１２は、ＬＣＤ（Liquid Crystal Display）２４と、ＬＣＤ２４を照射するためのバックライト２５と、制御部１６からの制御によりＬＣＤ２４に画像を表示し、バックライト２５を駆動させる表示制御回路２６とを備えている。
【００４８】
音声処理部１３は、利用者３の発する音声を収集するマイク２７と、マイク２７を動作させるためにマイク２７に所定電圧を印加して、マイク２７によって収集した音声を電気信号に変換後、増幅してアナログ信号として出力するマイク制御回路２８と、マイク制御回路２８から出力されるアナログ信号をデジタル信号に変換して出力したり、入力されるデジタル信号をアナログ信号に変換して出力したりするＣＯＤＥＣ２９と、ＣＯＤＥＣ２９により変換されたアナログ信号を増幅するスピーカ制御回路３０と、スピーカ制御回路３０から出力されるアナログ信号を音に変換して出力するスピーカ３１とから構成される。
【００４９】
近距離無線通信部１４は、２．４ＧＨｚ帯の電波を利用してデータの送受信を行うBluetooth（登録商標）規格に準拠した無線通信を行う近距離無線通信モジュール３２と、この近距離無線通信モジュール３２を制御してヘッドマウントディスプレイ２とデータの送受信を行う近距離無線通信制御回路３３とを備えている。なお、近距離無線通信部１４が、データ送信部の一例に相当する。
【００５０】
なお、携帯電話１とヘッドマウントディスプレイ２との間のデータのやり取りは、無線通信に限らず、有線ケーブルによって有線通信により行うようにしてもよい。例えば、近距離無線通信部１４に代えて、コンポジット映像信号（例えばＮＴＳＣ映像信号）やコンポーネント映像信号（例えばＲＧＢ信号）などの映像信号の送信を有線ケーブルを用いて行うための映像信号出力モジュールと、この映像信号出力モジュールを制御してヘッドマウントディスプレイ２へビデオデータの送信を行う映像信号出力制御回路とを備える映像信号出力部を設けるようにしてもよい。
【００５１】
電源部１７は、携帯電話１を駆動させるための電源となる電池３７と、電池３７の電力を携帯電話１の各部に供給すると共に、充電用アダプタ（図示せず）から供給される電力を電池３７へ供給して電池３７の充電を行う充電制御回路３８とを備えている。
【００５２】
制御部１６は、携帯電話１全体を制御する機能を有しており、例えば、利用者３による入力部１１への操作に応じて携帯電話網通信部１０を制御し、無線基地局５を介して他の携帯電話１との音声通話路を接続したり、無線基地局５を介して電子メールサーバ７と電子メールの送受信を行う。
【００５３】
ここで、制御部１６は、ＣＰＵ（Central Processing Unit）３４、各種プログラムを格納したＲＯＭ（Read Only Memory）３５、ワーキングメモリや各種データを格納する記憶部として機能するＲＡＭ（Random Access Memory）１８などから構成されている。
【００５４】
そして、制御部１６においては、ＣＰＵ３４がＲＯＭ３５に格納した電子メールプログラムやデータ展開プログラム（以下、「展開ソフト」とも呼ぶ。）などの各種プログラムを読み出して実行することによって、他の携帯電話との通話を制御する通話制御手段としての機能に加え、受信した電子メールに含まれる本文データを抽出する本文抽出手段、受信した電子メールに含まれる添付ファイルデータを抽出する添付ファイル抽出手段、本文データや添付ファイルデータの表示制御を行う表示制御手段、抽出した添付ファイルデータをヘッドマウントディスプレイ２で表示可能なデータに変換する添付ファイル展開処理手段、添付ファイルデータをヘッドマウントディスプレイで表示可能なデータに変換することができるか否かを判定するファイル展開可否判定手段などとして機能する。
【００５５】
ここで、表示制御手段としての機能には、受信した電子メールの情報のうち、本文データを表示部１２に表示し、添付ファイルデータを表示部１２に表示せずに近距離無線通信部１４によってヘッドマウントディスプレイ２に送信する機能、受信した電子メールの添付ファイルデータがヘッドマウントディスプレイ２で表示可能なデータでないとき、添付ファイル展開処理手段によってヘッドマウントディスプレイ２で表示可能なデータに変換した後、この変換したデータを表示部１２に表示せずに近距離無線通信部１４によってヘッドマウントディスプレイ２に送信する機能などがある。
【００５６】
また、表示制御手段として、受信した電子メールの添付ファイルデータを添付ファイル展開処理手段によってヘッドマウントディスプレイ２で表示可能なデータに変換できないときに、表示部１２にその旨を表示したり、音声処理部１３から警告音を出力したりする。このとき、表示部１２や音声処理部１３は報知部として機能することになる。
【００５７】
また、受信した電子メールの添付ファイルデータを添付ファイル展開処理手段によってヘッドマウントディスプレイ２で表示可能なデータに変換できないときに、表示部１２や音声処理部１３での報知に加え、又はこれらでの報知を行わずに、近距離無線通信部１４を介してヘッドマウントディスプレイ２においてその旨の報知をさせる要求を出すようにもできる。
【００５８】
ＲＡＭ１８は、携帯電話網通信部１０によって電子メールサーバ７から受信した電子メールを格納するための記憶部としての機能、各種フラグやデータを格納するための機能を有するものである。
【００５９】
（ヘッドマウントディスプレイの構成）
次に、ヘッドマウントディスプレイ２の概略構成について図面を参照して説明する。図３は本実施形態１におけるヘッドマウントディスプレイ２の外観図である。
【００６０】
ヘッドマウントディスプレイ２は、画像に関する画像信号に応じて変調されたビーム光（以降、画像光Ｚ２（図３参照）と呼ぶこともある）を走査させて出射させることで、利用者３（観察者）の少なくとも一方の眼の網膜に画像を投影し、画像を表示する装置である。
【００６１】
このヘッドマウントディスプレイ２は、図３に示すように、画像に関する画像信号に応じて画像光Ｚ２を出射する出射装置１００と、その出射装置１００から出射された画像光Ｚ２を導くと共に、その画像光Ｚ２を利用者３の眼に向かって反射させるプリズム１５０と、出射装置１００及びプリズム１５０を支持する支持部材２００とを含む構成である。
【００６２】
また、出射装置１００は、画像に関する画像信号に応じて変調された画像光Ｚ２を走査させてプリズム１５０に対して出射させる。プリズム１５０は、出射装置１００に対して固定的な位置にあり、その出射装置１００から出射された画像光Ｚ２を導き、その画像光Ｚ２を利用者３の眼に向かって反射させる。このプリズム１５０は、図示しないビームスプリッタ部を備えており、外界からの外光Ｚ１を透過させ、利用者３の眼に導く。
【００６３】
このようにプリズム１５０は、利用者３の側方から入射された画像光Ｚ２を利用者３の眼に入射させると共に、外界からの外光Ｚ１を利用者３の眼に入射させる光学系であり、実際の視界はもちろんのこと、出射装置１００から出射された画像光Ｚ２に基づく画像が視認可能となる。
【００６４】
また、出射装置１００は、利用者３の側方からプリズム１５０に向かって画像光Ｚ２を出射する。従って、画像光Ｚ２や外光Ｚ１の干渉を防止することができる。もちろん、利用者３の動作を制限させる機会が少なく、出射装置１００を配設することができる。
【００６５】
なお、本実施形態においては、プリズム１５０によって外光Ｚ１と画像光Ｚ２とを同時に視認することができるように構成したが、プリズム１５０に代えてハーフミラーを用いることもできる。すなわち、出射装置１００からの画像光Ｚ２はハーフミラーに反射させて利用者３の眼に入射させると共に、外光Ｚ１はハーフミラーを透過させて利用者３の眼に入射させるのである。
【００６６】
また、本実施形態においては、ヘッドマウントディスプレイとして、網膜走査を用いたシースルーのヘッドマウントディスプレイを例に挙げて説明したが、特開２００３−８７３６３号公報に記載されているが如く、反射型ＬＣＤを利用したヘッドマウントディスプレイとしてもよい。
【００６７】
次に、ヘッドマウントディスプレイ２の具体的構成について、図面を参照して具体的に説明する。図４は本実施形態１におけるヘッドマウントディスプレイ２のブロック図、図５は本実施形態１におけるヘッドマウントディスプレイ２の表示部のブロック図である。
【００６８】
図４に示すように、利用者３に画像を視認させる表示部４０と、各種操作やデータの入力を行うための入力部４１と、音声の入出力を行うため音声処理部４２と、携帯電話１から送信されるデータを受信するための近距離無線通信部４３と、表示部４０に表示する画像（グラフィック）やテキストなどのイメージデータを格納するビデオＲＡＭ４４と、表示部４０に表示するテキストのフォントデータを格納するフォントＲＯＭ４５と、ヘッドマウントディスプレイ２全体を制御する制御部４６と、電源部４７とを備えている。
【００６９】
入力部４１は、各種機能キーなどからなる操作ボタン群５０と、操作ボタン群５０のキーが操作されたことを検出し、制御部４６に通知する入力制御回路５１を備えている。
【００７０】
表示部４０は、利用者３の網膜に画像に応じて変調され、走査されたレーザ光を投射して、利用者３に画像を視認させる網膜走査型ディスプレイであり、出射装置１００に内蔵される。この表示部４０については後述で詳説する。
【００７１】
音声処理部４２は、利用者３の発する音声を収集するマイク５２と、マイク５２を動作させるためにマイク５２に所定電圧を印加して、マイク５２によって収集した音声を電気信号に変換後、増幅してアナログ信号として出力するマイク制御回路５３と、マイク制御回路５３から出力されるアナログ信号をデジタル信号に変換して出力したり、入力されるデジタル信号をアナログ信号に変換して出力したりするＣＯＤＥＣ５４と、ＣＯＤＥＣ５４により変換されたアナログ信号を増幅するスピーカ制御回路５５と、スピーカ制御回路５５から出力されるアナログ信号を音に変換して出力するスピーカ５６とから構成される。
【００７２】
近距離無線通信部４３は、２．４ＧＨｚ帯の電波を利用してデータの送受信を行うBluetooth（登録商標）規格に準拠した無線通信を行う近距離無線通信モジュール５７と、この近距離無線通信モジュール５７を制御して携帯電話１とデータの送受信を行う近距離無線通信制御回路５８とを備えている。なお、近距離無線通信部４３が、データ受信部の一例に相当する。
【００７３】
なお、本実施形態においては、携帯電話１とヘッドマウントディスプレイ２との間のデータのやり取りをBluetooth（登録商標）を利用して行うことにしているが、近距離の無線通信を行うことができるのであれば、これに限られることはなく、ＵＷＢ（Ultra WideBand）規格、無線ＬＡＮ（ＩＥＥＥ８０２．１１ｂなど）規格、ＷｉｒｅｌｅｓｓＵＳＢ規格などに準拠した無線通信を用いてもよい。また、赤外線を利用したＩｒＤＡ（Infrared Data Association）規格に準拠した無線通信などを用いてもよい。
【００７４】
映像信号入力部４９は、ＤＶＤプレーヤなどのビデオ再生装置（図示せず）から有線ケーブルを介して映像信号を受信する機能を有しており、ビデオ再生装置から出力される映像信号を有線ケーブルを介して受信する映像信号入力モジュール６４と、この映像信号入力モジュール６４を制御してビデオ再生装置から映像信号を受信する映像信号入力制御回路６３とを備えている。なお、映像信号としては、前述したコンポジット映像信号やコンポーネント映像信号などがある。
【００７５】
電源部４７は、ヘッドマウントディスプレイ２を駆動させるための電源となる電池５９と、電池５９の電力をヘッドマウントディスプレイ２に供給すると共に、充電用アダプタ（図示せず）から供給される電力を電池５９へ供給して電池５９の充電を行う充電制御回路６０とを備えている。
【００７６】
なお、携帯電話１とヘッドマウントディスプレイ２との間の通信を有線ケーブルを用いた通信で行う場合、充電アダプタから電力の供給を受けるのではなく、有線ケーブルを用いて携帯電話１からヘッドマウントディスプレイ２へ電力を供給するようにしてもよい。
【００７７】
制御部４６は、ヘッドマウントディスプレイ２全体を制御する機能を有しており、例えば、近距離無線通信部４３を介して携帯電話１から受信した添付ファイルデータを表示部４０に表示させたり、利用者３による入力部４１の操作に応じて所定の動作を行う。
【００７８】
ここで、制御部４６は、ＣＰＵ６１、各種プログラムを格納したＲＯＭ（Read Only Memory）６２、ワーキングメモリや各種データを格納する記憶部として機能するＲＡＭ（Random Access Memory）４８などから構成されている。
【００７９】
そして、制御部４６は、ＣＰＵ６１がＲＯＭ６２に格納した電子メール閲覧プログラムやデータ展開プログラムなどの各種プログラムを読み出して実行することによって、携帯電話１から近距離無線通信部４３を介して受信した添付ファイルデータの表示制御を行う表示制御手段、携帯電話１から受信した添付ファイルデータをヘッドマウントディスプレイ２で表示可能なデータに変換する添付ファイル展開処理手段、添付ファイルデータをヘッドマウントディスプレイ２で表示可能なデータに変換することができるか否かを判定するファイル展開可否判定手段などとして機能する。
【００８０】
ＲＡＭ４８は、近距離無線通信部４３によって携帯電話１から受信した電子メールの添付ファイルを格納するための記憶部としての機能、各種フラグやデータを格納するための機能などを有するものである。
【００８１】
次に、表示部４０の具体的構成について、図４及び図５を参照して詳説する。
【００８２】
ヘッドマウントディスプレイ２には、上述のように携帯電話１から添付ファイルデータや各種制御信号を受信する近距離無線通信部４３と、図示しないビデオ再生装置から映像信号や各種制御信号を受信する映像信号入力部４９とを備えており、制御部４６は、携帯電話１（第１入力）からの添付ファイルデータに基づいた映像を利用者が視認可能に表示するのか、ビデオ再生装置（第２入力）からの映像信号に基づいた映像を利用者が視認可能に表示するのか、を選択するための入力切替部９１として機能する。
【００８３】
入力切替部９１は、ビデオ再生装置からの映像信号の入力及び携帯電話１からの添付ファイルデータの入力を検出する信号有無検出部９２として機能し、ビデオ再生装置からの映像信号を受信しているときには、ビデオ再生装置から受信した映像信号に基づいた映像を利用者が視認可能に表示する。一方、携帯電話１からの表示要求の制御信号及び添付ファイルデータを受信してからキャンセルボタン操作信号（以下、「添付ファイルデータ表示期間」とする。）を受信するまでの間、携帯電話１から受信した添付ファイルデータに基づいた映像を利用者が視認可能に表示する。また、添付ファイルデータ表示期間には、ビデオ再生装置からの映像信号が入力されても、添付ファイルデータに基づいた映像を優先して利用者が視認可能に表示する。
【００８４】
また、入力部４１に切替ＳＷ９３を設けており、この切替ＳＷ９３の押下などによりビデオ再生装置からの映像信号と携帯電話１からの添付ファイルデータのいずれかを表示するのかを選択することができる。例えば、ビデオ再生装置からの映像信号を選択する第１モードと、携帯電話１からの添付ファイルデータを選択する第２モードと、添付ファイルデータ表示期間には、ビデオ再生装置からの映像信号が入力されても、添付ファイルデータに基づいた映像を優先する第３モードとを切替ＳＷ９３を押下する毎に切替えるようにする。
【００８５】
図５に示すように、表示部４０には、ビデオ再生装置から受信した映像信号及び携帯電話１から供給される添付ファイルデータを処理するための光源ユニット部６５が設けられている。
【００８６】
光源ユニット部６５には、第１入力である携帯電話１からの映像信号としてビデオＲＡＭ４４に展開された添付ファイルデータ、或いは第２入力であるビデオ再生装置からの映像信号としてビデオＲＡＭ４４に展開された映像信号が入力され、それに応じた映像を合成するための要素となる各信号を発生する映像信号処理部７０が設けられ、この映像信号処理部７０から各画素毎の輝度信号６６、水平同期信号６８、及び、垂直同期信号６７が出力される。
【００８７】
また、光源ユニット部６５には、映像信号処理部７０から輝度信号として伝達される赤（Ｒ），緑（Ｇ），青（Ｂ）の各輝度信号をもとにそれぞれ強度変調されたレーザ光を出射するように、Ｒレーザ７２ａ，Ｇレーザ７２ｂ，Ｂレーザ７２ｃを、それぞれ駆動するためのＲレーザドライバ７１ａ，Ｇレーザドライバ７１ｂ，Ｂレーザドライバ７１ｃが設けられている。
【００８８】
更に、各レーザ７２ａ〜７２ｃより出射されたレーザ光を平行光にコリメートするように設けられたコリメート光学系７３ａ〜７３ｃと、それぞれコリメートされたレーザ光を合波するダイクロイックミラー７４ａ〜７４ｃと、合波されたレーザ光を光ファイバ７６に導く結合光学系７５とが設けられている。尚、Ｒレーザ７２ａ，Ｇレーザ７２ｂ，Ｂレーザ７２ｃとして、レーザダイオード等の半導体レーザや固体レーザを利用してもよい。
【００８９】
また、ヘッドマウントディスプレイ２の出射装置１００には、光源ユニット部６５から光ファイバ７６を介して伝搬されたレーザ光を波面曲率変調部７８に導くコリメート光学系７７と、コリメートされたレーザ光の波面曲率を変調するための波面曲率変調部７８と、変調されたレーザ光をガルバノミラー７９ｂを利用して水平方向に走査する水平走査系７９と、水平走査系７９によって走査されたレーザ光を垂直走査系８１に導く第１リレー光学系８０と、水平走査系７９に走査され、第１リレー光学系８０を介して入射されたレーザ光を、ガルバノミラー８１ｂを利用して垂直方向に走査する垂直走査系８１と、垂直走査系８１に走査されたレーザ光をユーザの瞳孔９０に入射するように第２リレー光学系８２とが設けられている。
【００９０】
第１リレー光学系８０は、水平走査系７９のガルバノミラー７９ｂと、垂直走査系８１のガルバノミラー８１ｂとが共役となるように、また、第２リレー光学系８２は、ガルバノミラー８１ｂと、ユーザの瞳孔９０とが共役となるように、各々設けられている。
【００９１】
また、プリズム１５０は、第２リレー光学系８２と利用者３の瞳孔９０との間に配置され、出射装置１００から出射された画像光Ｚ２を、全反射させるなどして、ユーザの瞳孔９０に導くこととなる。
【００９２】
なお、具体的な一例としては、水平走査系７９は、表示すべき画像の１走査線毎に、レーザビームを水平方向に水平走査（１次走査の一例）させる光学系である。また、水平走査系７９は、レーザビームを水平方向に走査するガルバノミラー７９ｂと、そのガルバノミラー７９ｂの駆動制御を行う水平走査制御回路７９ａとを備えている。
【００９３】
これに対し、垂直走査系８１は、表示すべき画像の１フレーム毎に、レーザビームを最初の走査線から最後の走査線に向かって垂直に垂直走査（２次走査の一例）する光学系である。また、垂直走査系８１は、垂直走査するガルバノミラー８１ｂと、そのガルバノミラー８１ｂの駆動制御を行う垂直走査制御回路８１ａとを備えている。
【００９４】
水平走査系７９は、垂直走査系８１より高速にすなわち高周波数でレーザビームを走査するように設計されている。また、水平走査系７９，垂直走査系８１は、図４及び図５に示すように、各々映像信号処理部７０に接続され、映像信号処理部７０より出力される水平同期信号６８，垂直同期信号６７にそれぞれ同期してレーザ光を走査するように構成されている。
【００９５】
また、波面曲率変調部７８は、入射したレーザ光を透過光と、透過光の垂直方向に反射された反射光とに分離するビームスプリッタ７８ｂと、ビームスプリッタ７８ｂに反射されたレーザ光を収束する凸レンズ７８ｃと、凸レンズ７８ｃに収束されたレーザ光を入射方向に反射する、可動可能な可動ミラー７８ｄとにより構成されている。
【００９６】
また、可動ミラー７８ｄは、例えばガラス等の透過性の板材の表面に金属膜の鏡面コートを施した反射面を有するミラー７８ｅと、例えば圧電型のピエゾ素子を積層した圧電アクチュエータ（図示せず）とで構成される。圧電アクチュエータは、波面曲率変調器７８ａからの駆動電圧が印加されることで駆動され、圧電アクチュエータに固定したミラー７８ｅと凸レンズ７８ｃとの位置関係が変動されるようになっており、これによりレーザービームの波面曲率（拡がり具合）が変わるため、利用者３が視認する画像の奥行きを調整することができる。なお、波面曲率変調器７８ａは駆動信号６９によって駆動される。この駆動信号６９は、映像信号処理部７０によって生成され出力される奥行き信号８４によって駆動する波面曲率駆動回路８３から出力される。
【００９７】
また、ビームスプリッタ７８ｂは、斜面に誘電体多層膜の施された直角プリズム２つが張り合わされたキューブ状の形状を成しており、その斜面において、入射光の光量の約５０％を直角方向に反射し、約５０％を透過するようになっている。
【００９８】
次に、本発明の一実施形態のヘッドマウントディスプレイ２が、外部からの映像信号を受けてから、ユーザの網膜上に映像を投影するまでの過程について図５を用いて説明する。
【００９９】
図５に示すように、本実施形態のヘッドマウントディスプレイ２では、光源ユニット部６５に設けられた映像信号処理部７０が携帯電話１から電子メールの添付ファイルデータに応じた映像信号の供給を受けると、映像信号処理部７０は、赤，緑，青の各色のレーザ光を出力させるためのＲ輝度信号，Ｇ輝度信号，Ｂ輝度信号からなる輝度信号６６と、水平同期信号６８と、垂直同期信号６７とを出力する。
【０１００】
Ｒレーザドライバ７１ａ，Ｇレーザドライバ７１ｂ，Ｂレーザドライバ７１ｃは各々入力されたＲ輝度信号，Ｇ輝度信号，Ｂ輝度信号に基づいてＲレーザ７２ａ，Ｇレーザ７２ｂ，Ｂレーザ７２ｃに対してそれぞれの駆動信号を出力する。
【０１０１】
この駆動信号に基づいて、Ｒレーザ７２ａ，Ｇレーザ７２ｂ，Ｂレーザ７２ｃはそれぞれ強度変調されたレーザ光を発生し、各々をコリメート光学系７３ａ〜７３ｃに出力する。また、映像信号処理部７０は、後述するガルバノミラー７９ｂの駆動状態を示すＢＤ信号（図示せず）に応じて、レーザ光を発生し、各々をコリメート光学系７３ａ〜７３ｃに出力するタイミングを制御する。
【０１０２】
つまり、映像信号処理部７０は、ガルバノミラー７９ｂなどにビーム光を出射させるタイミングを制御することとなる。
【０１０３】
点光源から発生されるレーザ光は、このコリメート光学系７３によってそれぞれが平行光にコリメートされ、更に、ダイクロイックミラー７４ａ〜７４ｃに入射されて１つのビーム光となるよう合成された後、結合光学系７５によって光ファイバ７６に入射されるよう導かれる。
【０１０４】
光ファイバ７６によって伝搬されたレーザ光は、光ファイバ７６からコリメート光学系７７によって導かれて波面曲率変調部７８に出射される。
【０１０５】
このように出射されたレーザ光は、ビームスプリッタ７８ｂ及び凸レンズ７８ｃを介してミラー７８ｅに入射される。その波面曲率が変更された後、凸レンズ７８ｃ及びビームスプリッタ７８ｂを介して水平走査系７９に出射される。
【０１０６】
この出射されたレーザ光は、水平走査系７９のガルバノミラー７９ｂの偏向面７９ｃに入射される。ガルバノミラー７９ｂの偏向面７９ｃに入射したレーザ光は水平同期信号６８に同期して水平方向に走査されて第１リレー光学系８０を介し、垂直走査系８１のガルバノミラー８１ｂの偏向面８１ｃに入射する。
【０１０７】
第１リレー光学系８０ではガルバノミラー７９ｂの偏向面７９ｃとガルバノミラー８１ｂの偏向面８１ｃとが共役の関係となるように調整され、また、ガルバノミラー７９ｂの面倒れが補正されている。
【０１０８】
ガルバノミラー８１ｂは、ガルバノミラー７９ｂが水平同期信号６８に同期することと同様に垂直同期信号６７に同期して、その偏向面８１ｃが入射光を垂直方向に反射するように往復振動をしており、このガルバノミラー８１ｂによってレーザ光は垂直方向に走査される。
【０１０９】
水平走査系７９及び垂直走査系８１によって垂直方向及び水平方向に２次元に走査されたレーザ光は、ガルバノミラー８１ｂの偏向面８１ｃと、ユーザの瞳孔９０とが共役の関係となるように設けられた第２リレー光学系８２、プリズム１５０によりユーザの瞳孔９０へ入射され、網膜上に投影される。
【０１１０】
ユーザはこのように２次元走査されて網膜上に投影されたレーザ光による画像を認識することができる。なお、水平走査系７９のガルバノミラー７９ｂと、垂直走査系８１のガルバノミラー８１ｂとは、名称を同じように説明したが、光を走査するように其の反射面が揺動（回転）させられるものであれば、共振タイプ、非共振タイプ等、圧電駆動、電磁駆動、静電駆動等いずれの駆動方式によるものであってもよいことは言うまでもない。
【０１１１】
以上のように構成された携帯電話１及びヘッドマウントディスプレイ２とを有する電子メール閲覧システムＳにおいて、携帯電話１で受信した電子メールのデータの表示動作について図面を参照し、携帯電話１の動作、ヘッドマウントディスプレイ２の動作の順に具体的に説明する。
【０１１２】
（携帯電話の具体的動作）
まず、携帯電話１の具体的動作について図６〜図１３を参照して具体的に説明する。図６は第１実施形態における携帯電話のメイン処理フローチャート、図７は第１実施形態における携帯電話の表示部への表示例を示す図、図８は第１実施形態における携帯電話１のメール機能処理フローチャート、図９は第１実施形態における携帯電話１のメール閲覧処理フローチャート、図１０は第１実施形態における携帯電話１のメール表示処理フローチャート、図１１は第１実施形態におけるメールデータの構成例を示す図、図１２は第１実施形態における携帯電話１の添付ファイルのある表示処理フローチャート、図１３は第１実施形態における携帯電話１の添付ファイル閲覧処理フローチャートである。
【０１１３】
図６に示すように、携帯電話１の電源がＯＮになると、携帯電話１のＣＰＵ３４は、内部のＲＡＭ１８のアクセス許可、作業領域確保を初期化等の初期設定動作を実行し、ＲＯＭ３５に格納された各プログラムをＣＰＵ３４による実行状態とし、制御部１６としての機能を動作させた後（ステップＳ１）、ステップＳ２に処理を移す。
【０１１４】
ステップＳ２において、制御部１６は、ＲＯＭ３５からメニュー画面表示用のデータを取り出し、携帯電話１のＬＣＤ２４にメニュー画面を表示し、ステップＳ３の処理に移行する。このように表示されるメニュー画面の一例を図７（ａ）に示す。メニュー画面は、図７（ａ）に示すように、「Ｍａｉｌ」，「Ｃｏｎｆｉｇ」などの各種機能選択ボタンがＧＵＩ表示されており、利用者３による入力部１１の操作によって各種機能画面に移行できるようになっている。
【０１１５】
ステップＳ３の処理において、制御部１６は、入力部１１の電源ボタン（図示せず）が押下されたか否かを判定する。
【０１１６】
この処理において、電源ボタンが押下されたと判定すると（ステップＳ３：Ｙｅｓ）、制御部１６は、携帯電話１の動作を停止して、メイン処理を終了する。
【０１１７】
一方、この処理において、電源ボタンが押下されていないと判定すると（ステップＳ３：Ｎｏ）、制御部１６は、ステップＳ４の処理に移行し、メール機能が選択されたか否かを判定する。
【０１１８】
この処理において、制御部１６は、入力部１１の矢印キー及び決定キーの操作により、メニュー画面（図７（ａ）参照）における「Ｍａｉｌ」ボタンが選択されたか否かを判定することにより、メール機能が選択されたか否かを判定する。
【０１１９】
メール機能が選択されたと判定すると（ステップＳ４：Ｙｅｓ）、制御部１６は、メール機能処理を実行する（ステップＳ５）。このメール機能処理は、図８におけるＳ１０〜Ｓ１５の処理であり、後述で詳説する。
【０１２０】
ステップＳ４において、メール機能が選択されていないと判定すると（ステップＳ４：Ｎｏ）、制御部１６は、ステップＳ６に移行し、設定機能の選択が行われたか否かを判定する。
【０１２１】
この処理において、制御部１６は、入力部１１の矢印キー及び決定キーの操作により、メニュー画面（図７（ａ）参照）における「Ｃｏｎｆｉｇ」ボタンが選択されたか否かを判定することにより、設定機能が選択されたか否かを判定する。
【０１２２】
設定機能が選択されたと判定すると（ステップＳ６：Ｙｅｓ）、制御部１６は、ステップＳ７に移行し、ＬＣＤ２４に設定画面を表示し、利用者３に各種設定を促し、設定処理を行う。
【０１２３】
一方、設定機能が選択されていないと判定すると（ステップＳ６：Ｎｏ）、制御部１６は、ステップＳ８に移行し、その他の機能が選択されたか否かを判定する。
【０１２４】
この処理において、制御部１６は、入力部１１の矢印キー及び決定キーの操作により、メニュー画面（図７（ａ）参照）における「Ｍａｉｌ」ボタンや「Ｃｏｎｆｉｇ」ボタン以外のボタンが選択されたか否かを判定することにより、他の機能が選択されたか否かを判定する。
【０１２５】
他の機能処理が選択されたと判定すると（ステップＳ８：Ｙｅｓ）、制御部１６は、ステップＳ９に移行し、ＬＣＤ２４に選択された機能に関する画面を表示し、利用者３に選択した機能に応じた操作を促し、対応する処理を行う。
【０１２６】
ステップＳ５，Ｓ７，Ｓ９の処理が終了したときには、制御部１６は、処理をステップＳ２へ移行し、ステップＳ２からの処理を繰り返し行う。一方、ステップＳ８において、他の機能が選択されていないと判定すると（ステップＳ８：Ｎｏ）、制御部１６は、ステップＳ３に処理を移行し、ステップＳ３からの処理を繰り返す。
【０１２７】
ここで、ステップＳ５におけるメール機能処理について、図８に示すフローチャートを参照して具体的に説明する。
【０１２８】
図８に示すように、メール機能処理を開始すると、ステップＳ１０において、制御部１６は、ＲＯＭ３５からメール機能のメニュー画面表示用のデータを取り出し、携帯電話１のＬＣＤ２４にメール機能のメニュー画面を表示し、ステップＳ１１の処理に移行する。このように表示されるメール機能のメニュー画面の一例を図７（ｂ）に示す。メニュー画面は、図７（ｂ）に示すように、「メール作成」，「メール閲覧」，「メール削除」などの各種メール処理選択ボタンがＧＵＩ表示されており、利用者３による入力部１１の操作によって各種メール処理画面に移行できるようになっている。
【０１２９】
次に、制御部１６は、入力部１１に設けられたキャンセルボタン（図示せず）が押下されたか否かを判定する（ステップＳ１１）。
【０１３０】
この処理において、入力部１１に設けられたキャンセルボタンが押下されたと判定すると（ステップＳ１１：Ｙｅｓ）、制御部１６は、メール機能処理の動作を終了する。
【０１３１】
一方、この処理において、キャンセルボタンが押下されていないと判定すると（ステップＳ１１：Ｎｏ）、制御部１６は、ステップＳ１２の処理に移行し、メール閲覧が選択されたか否かを判定する。
【０１３２】
この処理において、制御部１６は、入力部１１の矢印キー及び決定キーの操作により、メール機能のメニュー画面（図７（ｂ）参照）における「メール閲覧」ボタンが選択されたか否かを判定することにより、メール閲覧が選択されたか否かを判定する。
【０１３３】
メール閲覧が選択されたと判定すると（ステップＳ１２：Ｙｅｓ）、制御部１６は、メール閲覧処理を実行する（ステップＳ１３）。このメール閲覧処理は、図９におけるＳ２０〜Ｓ２３の処理であり、後述で詳説する。
【０１３４】
ステップＳ１２において、メール閲覧が選択されていないと判定すると（ステップＳ１２：Ｎｏ）、制御部１６は、ステップＳ１４に移行し、その他の機能が選択されたか否かを判定する。
【０１３５】
この処理において、制御部１６は、入力部１１の矢印キー及び決定キーの操作により、メニュー画面（図７（ｂ）参照）における「メール閲覧」ボタン以外のボタンが選択されたか否かを判定することにより、その他の機能が選択されたか否かを判定する。
【０１３６】
その他の機能処理が選択されたと判定すると（ステップＳ１４：Ｙｅｓ）、制御部１６は、ステップＳ１５に移行し、ＬＣＤ２４に選択された機能に関する画面を表示し、利用者３に選択した機能に応じた操作を促し、対応する処理を行う。
【０１３７】
ステップＳ１３，Ｓ１５の処理が終了したときには、制御部１６は、処理をステップＳ１０へ移行し、ステップＳ１０からの処理を繰り返し行う。一方、ステップＳ１４において、他の機能が選択されていないと判定すると（ステップＳ１４：Ｎｏ）、制御部１６は、ステップＳ１１に処理を移行し、ステップＳ１１からの処理を繰り返す。
【０１３８】
次に、ステップＳ１３におけるメール閲覧処理について、図９に示すフローチャートを参照して具体的に説明する。
【０１３９】
図９に示すように、メール閲覧処理を開始すると、ステップＳ２０において、制御部１６は、内部のＲＡＭ１８から受信メールのデータを取り出し、携帯電話１のＬＣＤ２４に受信メールの一覧（リスト）を表示し、ステップＳ２１の処理に移行する。
【０１４０】
このように表示される受信メールの一覧の一例を図７（ｃ）に示す。メニュー画面は、図７（ｃ）に示すように、受信された複数の電子メールの日時及び差出人などがそれぞれ表示されたメール選択ボタンがＧＵＩ表示されており、利用者３による入力部１１の操作によって各電子メールの詳細内容の閲覧に移行できるようになっている。
【０１４１】
ここで、ＲＡＭ１８に格納される電子メールのデータは、電子メールサーバ７から携帯電話網通信部１０を介して受信したデータであり、各電子メール毎に、ヘッダ部分、メール本文及び添付ファイルなどが互いに関連付けられてＲＡＭ１８に格納される。なお、メール選択ボタンに表示される電子メールの日時及び差出人などは、各電子メールのヘッダ部分の情報から制御部１６によって抽出した情報である。
【０１４２】
ステップＳ２１において、制御部１６は、入力部１１に設けられたキャンセルボタン（図示せず）が押下されたと判定すると（ステップＳ２１：Ｙｅｓ）、制御部１６は、メール閲覧処理の動作を終了する。
【０１４３】
一方、この処理において、キャンセルボタンが押下されていないと判定すると（ステップＳ２１：Ｎｏ）、制御部１６は、ステップＳ２２の処理に移行し、特定のメールが選択されたか否かを判定する。
【０１４４】
この処理において、制御部１６は、入力部１１の矢印キー及び決定キーの操作により、受信メールのリスト表示画面（図７（ｃ）参照）におけるいずれかのメール選択ボタンが選択されたか否かを判定することにより、特定のメールが選択されたか否かを判定する。
【０１４５】
特定のメールが選択されたと判定すると（ステップＳ２２：Ｙｅｓ）、制御部１６は、メール表示処理を実行する（ステップＳ２３）。このメール表示処理は、図１０におけるＳ３０〜Ｓ４１の処理であり、後述で詳説する。
【０１４６】
一方、ステップＳ２２において、特定のメールが選択されていないと判定すると（ステップＳ２２：Ｎｏ）、制御部１６は、ステップＳ２１に移行し、ステップＳ２１からの処理を繰り返し行う。また、ステップＳ２３の処理が終了すると、ステップＳ２０からの処理を繰り返し行う。
【０１４７】
次に、ステップＳ２３におけるメール表示処理について、図１０に示すフローチャートを参照して具体的に説明する。
【０１４８】
図１０に示すように、メール表示処理を開始すると、ステップＳ３０において、制御部１６は、ステップＳ２２において選択された特定の電子メールのデータ（ヘッダ部分及びメール本文）を内部のＲＡＭ１８から読み出し、ステップＳ３１の処理に移行する。
【０１４９】
ここで、携帯電話１で受信する電子メールは、例えば、ＭＩＭＥのｂａｓｅ６４形式で添付ファイルのあるメールデータは、ヘッダ（header）部分と、メール本文（body）部分と、添付ファイル部分とが、図１１に示すように記述される。なお、電子メールのヘッダ部分（header）には、電子メールのヘッダフィールドの情報が記述されており、例えば、メールの差出人（Ｆｒｏｍ）、あて先（Ｔｏ）、件名（Ｓｕｂｊｅｃｔ）、送信日時（Ｄａｔｅ）などの情報が含まれる。また、添付ファイルとして、画像ファイル（brother.gif）が含まれている例を示している。なお、図１１では添付ファイル部分の後半部分を紙面の都合上省略している。
【０１５０】
ステップＳ３１において、制御部１６は、ステップＳ２２において選択された特定の電子メールに添付ファイルがあるか否かをチェックする。
【０１５１】
この処理において、特定の電子メールに添付ファイルがあるか否かは、例えば、ＭＩＭＥのｂａｓｅ６４形式の場合、「Content-Type」が「multipart/mixed」であるか否かを判定することによって行う（図１１中の（Ａ）部分）。
【０１５２】
ステップＳ３２において、特定の電子メールに添付ファイルがあると判定すると（ステップＳ３２：Ｙｅｓ）、制御部１６は、添付ファイルのファイルタイプ（ファイル形式）の判別を行う（ステップＳ３３）。添付ファイルのファイルタイプの判別は、例えば、ＭＩＭＥのｂａｓｅ６４形式の場合、第２パートの「Content-Type」を参照することによって行う（図１１中の（Ｂ）部分）。図１１中の（Ｂ）の例では、ファイル形式が画像でかつgif形式のファイルであることを示している。
【０１５３】
次に、制御部１６は、ファイルタイプを判別することができたか否かを判定する（ステップＳ３４）。ファイル形式の判別を行うことができたとき（ステップＳ３４：Ｙｅｓ）、制御部１６は、ステップＳ３５の処理に移行する。
【０１５４】
ステップＳ３５において、制御部１６は、添付ファイルを復号化し、内部のＲＡＭ１８に保存し、処理をステップＳ３６に移行する。添付ファイルの復号化は、例えば、ＭＩＭＥ形式の場合、ＲＦＣ（Request For Comment）２０４５〜２０４９に規定されており、この規定に従って復号化を行う。
【０１５５】
ステップＳ３６において、制御部１６は、ステップＳ２２において選択された特定の電子メールの添付ファイルを展開するソフト（プログラム）がＲＯＭ３５に格納されているか否かをチェック（判定）する。添付ファイルを展開することができるか否かは、添付ファイルのデータをヘッドマウントディスプレイで表示可能な描画イメージデータに変換することができるか否かによって判定する。
【０１５６】
ステップＳ３７において、添付ファイルを展開するソフトがＲＯＭ３５にあると判定すると（ステップＳ３７：Ｙｅｓ）、制御部１６は、添付ファイルを展開するソフトを選択する。すなわち、制御部１６は、ＲＯＭ３５から添付ファイルを展開するソフトを読み出して実行し、添付ファイルデータをヘッドマウントディスプレイで表示可能なデータに変換する添付ファイル展開処理手段として機能する（ステップＳ３８）。なお、制御部１６において、複数の展開ソフトを実行できるようにＲＯＭ３５に複数の展開ソフトが格納されている。言い換えれば、携帯電話１は、添付ファイルデータのファイル形式毎に添付ファイル展開処理手段を備えることになる。そして、制御部１６は、複数の添付ファイル展開処理手段のうち、電子メール受信部で受信した添付ファイルデータのファイル形式に応じた添付ファイル展開処理手段を選択し、選択した添付ファイル展開処理手段によって添付ファイルデータを変換させる添付ファイル展開処理選択手段として機能する。
【０１５７】
ステップＳ３８の処理が終了すると、制御部１６は、添付ファイルのある表示処理を行う（ステップＳ３９）。この添付ファイルのある表示処理は、図１２におけるＳ５０〜Ｓ５６の処理であり、後述で詳説する。
【０１５８】
一方、添付ファイルに対応する展開ソフトがないと判定すると（ステップＳ３７：Ｎｏ）、制御部１６は、ステップＳ４０に移行し、添付ファイルのある表示処理（ＨＭＤ展開）を行う。なお、この添付ファイルのある表示処理（ＨＭＤ展開）については後述する。
【０１５９】
なお、添付ファイルに対応する展開ソフトがないと判定すると（ステップＳ３７：Ｎｏ）、制御部１６は、ステップＳ４０の処理を行う代わりに、アラームによる警告を行うようにしてもよい。このアラームによる警告は、ＲＯＭ３５に格納したアラーム音データを音声処理部１３に送信することによって行う。すなわち、制御部１６は、内部のＲＯＭ３５からアラーム音データを読み出してＣＯＤＥＣ２９に出力し、ＣＯＤＥＣ２９はアラーム音データをアナログ信号に変換してスピーカ制御回路３０に出力する。スピーカ制御回路３０では、ＣＯＤＥＣ２９から出力されたアナログ信号を増幅してスピーカ３１に出力する。スピーカ３１はアナログ信号を音に変換することによってアラーム音を出力する。また、ステップＳ４０において、変換していない添付ファイルをヘッドマウントディスプレイ２へ送信したときに、ヘッドマウントディスプレイ２において表示ができないときに、ヘッドマウントディスプレイ２からアラーム要求を携帯電話１に送信し、このアラーム要求に従って、上記アラームによる警告を行ってもよい。
【０１６０】
ステップＳ３２において添付ファイルが存在しないと判定したとき（ステップＳ３２：Ｎｏ）、ステップＳ３４において添付ファイルのファイルタイプを判別できないとき（ステップＳ３４：Ｎｏ）、制御部１６は、ステップＳ４１に移行し、添付ファイルのない表示処理を行う。なお、この添付ファイルのない表示処理については後述する。
【０１６１】
次に、ステップＳ３９における添付ファイルのある表示処理について、図１２に示すフローチャートを参照して具体的に説明する。
【０１６２】
図１２に示すように、添付ファイルのある表示処理を開始すると、制御部１６は、携帯電話１の表示部１２にメール本文の描画イメージを展開する（ステップＳ５０）。
【０１６３】
ここで、メール本文の描画イメージの展開は、ステップＳ３０で読み出された電子メールの本文データの各文字に対応するフォントデータを制御部１６がＲＯＭ３５から取り出して、ビデオＲＡＭ１９に展開することによって行われる。このように携帯電話１の表示部１２に本文データが表示される様子を図７（ｄ）に示す。
【０１６４】
次に、制御部１６は、携帯画面（携帯電話１の表示部１２）にビデオＲＡＭ１９に展開したイメージを表示する（ステップＳ５１）。
【０１６５】
次に、制御部１６は、入力部１１に設けられたキャンセルボタン（図示せず）が押下されたか否かを判定する（ステップＳ５２）。
【０１６６】
この処理において、入力部１１に設けられたキャンセルボタンが押下されたと判定すると（ステップＳ５２：Ｙｅｓ）、制御部１６は、添付ファイルのある表示処理の動作を終了する。
【０１６７】
一方、この処理において、キャンセルボタンが押下されていないと判定すると（ステップＳ５２：Ｎｏ）、制御部１６は、ステップＳ５３の処理に移行し、スクロールボタンが押下されたか否かを判定する。
【０１６８】
ステップＳ５３において、スクロールボタンが押下されたと判定すると（ステップＳ５３：Ｙｅｓ）、制御部１６は、メール本文の一番下までスクロールが行われたか否かを判定する（ステップＳ５４）。
【０１６９】
ここで、メール本文の一番下までスクロールが行われたか否かは、メール本文の文末が表示部１２に表示されているか否かによって判定を行う。すなわち、メール本文の文末を表示部１２に表示した時点若しくは表示する処理を開始した時点で、メール本文の一番下までスクロールしたと判定するのである。
【０１７０】
この処理において、本文が一番下までスクロールされたと判定すると（ステップＳ５４：Ｙｅｓ）、制御部１６は、添付ファイル閲覧処理を行う。この処理は、図１３におけるステップＳ６０〜Ｓ６６までの処理であり、後述で詳説する。
【０１７１】
一方、本文が一番下までスクロールされていないと判定すると（ステップＳ５４：Ｎｏ）、制御部１６は、スクロールの方向に応じて表示部１２に表示する描画イメージを変更する（ステップＳ５６）。
【０１７２】
ステップＳ５５，Ｓ５６の処理が終了したとき、或いは、ステップＳ５３においてスクロールボタンが押下されていないと判定したとき（ステップＳ５３：Ｎｏ）、制御部１６は、処理をステップＳ５２に移行し、ステップＳ５２からの処理を繰り返す。
【０１７３】
次に、ステップＳ５５における添付ファイル閲覧処理について、図１３に示すフローチャートを参照して具体的に説明する。
【０１７４】
図１３に示すように、添付ファイル閲覧処理を開始すると、制御部１６は、ヘッドマウントディスプレイ（ＨＭＤ）２に、表示要求制御信号を送信する（ステップＳ６０）。この表示要求制御信号は、ヘッドマウントディスプレイ２での表示を開始するための要求信号であり、この表示要求制御信号に続いて携帯電話１から出力するイメージデータがヘッドマウントディスプレイ２に表示されることになる。
【０１７５】
表示要求制御信号を送信すると、次に制御部１６は、展開ソフトでヘッドマウントディスプレイ２用に添付ファイルの描画イメージをビデオＲＡＭ１９に展開する（ステップＳ６１）。
【０１７６】
制御部１６は、このように展開した添付ファイルの描画イメージを近距離無線通信部１４を介してヘッドマウントディスプレイ２に送信する（ステップＳ６２）。
【０１７７】
次に、制御部１６は、入力部１１に設けられたキャンセルボタン（図示せず）が押下されたか否かを判定する（ステップＳ６３）。
【０１７８】
この処理において、入力部１１に設けられたキャンセルボタンが押下されたと判定すると（ステップＳ６３：Ｙｅｓ）、制御部１６は、ヘッドマウントディスプレイ２に対して近距離無線通信部１４を介してキャンセルボタン操作信号を送信し（ステップＳ６６）、添付ファイル閲覧処理を終了する。
【０１７９】
一方、この処理において、キャンセルボタンが押下されていないと判定すると（ステップＳ６３：Ｎｏ）、制御部１６は、ステップＳ６４の処理に移行し、スクロールボタンが押下されたか否かを判定する。
【０１８０】
ステップＳ６４において、スクロールボタンが押下されたと判定すると（ステップＳ６４：Ｙｅｓ）、制御部１６は、ヘッドマウントディスプレイ２に近距離無線通信部１４を介してスクロール操作信号を送信する（ステップＳ６５）。
【０１８１】
ステップＳ６５の処理が終了したとき、或いはステップＳ６４においてスクロールボタンが押下されていないと判定されたとき（ステップＳ６５：Ｎｏ）、制御部１６は、処理をステップＳ６３に移行し、ステップＳ６３からの処理を繰り返す。
【０１８２】
このように携帯電話１において、電子メールの本文データの最終部分までが表示部１２に表示されたときに、添付ファイルをヘッドマウントディスプレイ２によって表示するようにしていることから、利用者３が本文データを読んだ後に添付ファイルが開くことになり、添付ファイルの閲覧性がよい。図１９（ａ）にスクロール終了前（本文データの最終部分までスクロールされる前）における携帯電話１とヘッドマウントディスプレイ２の表示例を、図１９（ｂ）にスクロール終了後（本文データの最終部分までスクロールされた後）における携帯電話１とヘッドマウントディスプレイ２の表示例を示す。
【０１８３】
なお、電子メールの本文データの最後部分までスクロール操作がされてないときであっても、制御部１６は、所定条件下で添付ファイルをヘッドマウントディスプレイ２に表示させることができる。
【０１８４】
例えば、携帯電話１に添付ファイル表示用のボタンを設け、制御部１６がこのボタンの押下を検出したときに表示するようにする。
【０１８５】
また、入力部１１の矢印キーなどを操作することによって、本文データの文頭部分に向かう方向にスクロールさせたときに、制御部１６は添付ファイルをヘッドマウントディスプレイ２に表示させるようにしてもよく、本文データが長いときにすばやく添付ファイルを表示することができる。更に、添付ファイルが複数あるときには、本文データの文頭部分に向かう方向にスクロールする操作を行う毎に、表示する添付ファイルを入れ替えるようにしてもよい。
【０１８６】
次に、ステップＳ４０における添付ファイルのある表示処理（ＨＭＤ展開）を説明する。
【０１８７】
この処理は、ビデオＲＡＭ１９に電子メール本文の描画イメージを展開し、携帯電話１の表示部１２に展開したイメージを表示した後、スクロールボタンが操作される毎に表示部１２に表示する本文の位置を変更し、本文が一番下までスクロールされたとき、展開ソフトで電子メールの添付ファイルの描画イメージを展開することなく、未展開の添付ファイルデータを近距離無線通信制御回路５８を介してそのままヘッドマウントディスプレイ２へ送信するものである。すなわち、上述した図１２及び図１３における処理とは、展開ソフトで電子メールの添付ファイルの描画イメージを展開するかしないかの違いである。
【０１８８】
次に、ステップＳ４１における添付ファイルのない表示処理について説明する。
【０１８９】
この処理は、ビデオＲＡＭ１９に電子メール本文の描画イメージを展開し、携帯電話１の表示部１２に展開したイメージを表示した後、スクロールボタンが操作される毎に表示部１２に表示する本文の位置を変更するものである。すなわち、上述した図１２における処理とは、本文が一番下までスクロールされたか否かの判断及び添付ファイル閲覧処理がないだけの違いである。
【０１９０】
（ヘッドマウントディスプレイ２の動作）
次に、ヘッドマウントディスプレイ２の具体的動作について図１４〜図１８のフローチャートを参照して具体的に説明する。図１４は第１実施形態におけるヘッドマウントディスプレイ２のメイン処理フローチャート、図１５は第１実施形態におけるヘッドマウントディスプレイ２の画面表示処理フローチャート、図１６は第１実施形態におけるヘッドマウントディスプレイ２のイメージ表示処理フローチャート、図１７は第１実施形態におけるヘッドマウントディスプレイ２のファイル表示処理フローチャート、図１８は第１実施形態におけるヘッドマウントディスプレイ２のスクロール表示処理フローチャートである。
【０１９１】
図１４に示すように、ヘッドマウントディスプレイ２の電源がＯＮになると、ヘッドマウントディスプレイ２のＣＰＵ６１は、ＲＡＭ４８のアクセス許可、作業領域確保を初期化等の初期設定動作を実行し、ＲＯＭ６２に格納された各プログラムをＣＰＵ６１による実行状態とし、制御部４６としての機能を動作させた後（ステップＳ１００）、ステップＳ１０１に処理を移す。
【０１９２】
ステップＳ１０１において、制御部４６は、入力部４１の電源ボタン（図示せず）が押下されたか否かを判定する。
【０１９３】
この処理において、電源ボタンが押下されたと判定すると（ステップＳ１０１：Ｙｅｓ）、制御部４６は、ヘッドマウントディスプレイ２の動作を停止して、メイン処理を終了する。
【０１９４】
一方、この処理において、電源ボタンが押下されていないと判定すると（ステップＳ１０１：Ｎｏ）、制御部４６は、ステップＳ１０２の処理に移行し、携帯電話１（第１入力）から表示要求制御信号を受信したか否かを判定する（ステップＳ１０２）。
【０１９５】
この処理において、制御部４６は、表示要求制御信号を受信したと判定すると（ステップＳ１０２：Ｙｅｓ）、ヘッドマウントディプレイ画面表示処理（以下、「ＨＭＤ画面表示処理」とする。)を行う。このＨＭＤ画面表示処理は、図１５におけるＳ１１０〜Ｓ１２０の処理であり、後述で詳解する。
【０１９６】
一方、表示要求制御信号を受信していないと判定すると（ステップＳ１０２：Ｎｏ）、制御部４６は、ステップＳ１０４の処理に移行し、第２入力としてビデオ再生装置から映像信号が入力されているか否かを判定する（ステップＳ１０４）。
【０１９７】
この処理において、制御部４６は、ビデオ再生装置から映像信号が入力されたと判定すると（ステップＳ１０４：Ｙｅｓ）、ビデオ再生装置から映像信号をビデオＲＡＭ４４に展開して表示部４０により映像信号に基づいた映像を利用者が視認可能に表示する（ステップＳ１０５）。一方、ビデオ再生装置から映像信号が入力されていないと判定すると（ステップＳ１０４：Ｎｏ）、制御部４６は、ステップＳ１０６の処理に移行し、その他の機能が選択されたか否かを判定する。
【０１９８】
この処理において、制御部４６は、入力部４１の矢印キー及び決定キーの操作により、他の機能が選択されたか否かを判定する。
【０１９９】
他の機能処理が選択されたと判定すると（ステップＳ１０６：Ｙｅｓ）、制御部４６は、ステップＳ１０７に移行し、ＬＣＤ２４に選択された機能に関する画面を表示し、利用者３に選択した機能に応じた操作を促し、対応する処理を行う。
【０２００】
ステップＳ１０３，Ｓ１０５，Ｓ１０７の処理が終了したとき、或いは、他の機能が選択されていないと判定すると（ステップＳ１０６：Ｎｏ）、制御部４６は、処理をステップＳ１０１へ移行し、ステップＳ１０１からの処理を繰り返し行う。
【０２０１】
次に、ＨＭＤ画面表示処理について、図１５を参照して具体的に説明する。
【０２０２】
ＨＭＤ画面表示処理を開始すると、制御部４６は、携帯電話１から何らかの信号を受信したか否かを判定する（ステップＳ１１０）。携帯電話１から何らの信号も受信しないとき（ステップＳ１１０：Ｎｏ）、制御部４６は、引き続きステップＳ１１０の判定を繰り返す。
【０２０３】
一方、携帯電話１から何らの信号を受信したと判定すると（ステップＳ１１０：Ｙｅｓ）、制御部４６は、受信した信号がキャンセルボタン操作信号であるか否かを判定する（ステップＳ１１１）。
【０２０４】
受信した信号がキャンセルボタン操作信号であると判定すると（ステップＳ１１１：Ｙｅｓ）、制御部４６は、ヘッドマウントディスプレイ２の表示動作を停止して（ステップＳ１２０）、ＨＭＤ画面表示処理を終了する。
【０２０５】
一方、受信した信号がキャンセルボタン操作信号ではないと判定すると（ステップＳ１１１：Ｎｏ）、制御部４６は、受信した信号が展開イメージデータであるか否かを判定する（ステップＳ１１２）。
【０２０６】
この処理において、受信した信号が展開イメージデータであると判定すると（ステップＳ１１２：Ｙｅｓ）、制御部４６は、受信した展開イメージデータを内部のＲＡＭ４８に格納し、ヘッドマウントディプレイイメージ表示処理（以下、「ＨＭＤイメージ表示処理」とする。）に移行する（ステップＳ１１３）。このＨＭＤイメージ表示処理は、図１６におけるＳ１３０〜Ｓ１３８までの処理であり、後述で詳説する。
【０２０７】
一方、受信した信号が展開イメージデータではないと判定すると（ステップＳ１１２：Ｎｏ）、制御部４６は、受信した信号が展開前のデータであるか否かを判定する（ステップＳ１１４）。
【０２０８】
この処理において、受信した信号が展開前のデータであると判定すると（ステップＳ１１４：Ｙｅｓ）、制御部４６は、受信した展開前のデータを内部のＲＡＭ４８に格納し、ヘッドマウントディプレイファイル表示処理（以下、「ＨＭＤファイル表示処理」とする。）に移行する（ステップＳ１１５）。このＨＭＤファイル表示処理は、図１７におけるＳ１４０〜Ｓ１４５までの処理であり、後述で詳説する。
【０２０９】
一方、受信した信号が展開前のデータではないと判定すると（ステップＳ１１４：Ｎｏ）、制御部４６は、受信した信号がスクロール操作信号であるか否かを判定する（ステップＳ１１６）。
【０２１０】
この処理において、受信した信号がスクロール操作信号であると判定すると（ステップＳ１１６：Ｙｅｓ）、制御部４６は、ヘッドマウントディプレイスクロール表示処理（以下、「ＨＭＤスクロール表示処理」とする。）に移行する（ステップＳ１１７）。このＨＭＤファイル表示処理は、図１８におけるＳ１５０〜Ｓ１５３までの処理であり、後述で詳説する。
【０２１１】
一方、受信した信号がスクロール操作信号ではないと判定すると（ステップＳ１１６：Ｎｏ）、制御部４６は、受信した信号がその他の機能選択であるか否かを判定する（ステップＳ１１８）。
【０２１２】
この処理において、受信した信号がその他の機能選択であると判定すると（ステップＳ１１８：Ｙｅｓ）、制御部４６は、その他の機能選択を実行する（ステップＳ１１９）。
【０２１３】
一方、受信した信号がその他の機能選択ではないと判定すると（ステップＳ１１８：Ｎｏ）、制御部４６は、ステップＳ１１０からの処理を繰り返す。
【０２１４】
次に、ステップＳ１１３におけるＨＭＤイメージ表示処理について、図１６を参照して具体的に説明する。
【０２１５】
ＨＭＤイメージ表示処理において、まず制御部４６は、内部のＲＡＭ４８から展開イメージデータを読み出す（ステップＳ１３０）。
【０２１６】
次に、制御部４６は、展開イメージが画面に収まるか否かを判定する（ステップＳ１３１）。すなわち、内部のＲＡＭ４８から読み出した展開イメージデータの全てをヘッドマウントディスプレイ２の表示部４０において一度に表示できるか否かを判定するのである。
【０２１７】
この処理において、展開イメージが画面に収まると判定すると（ステップＳ１３１：Ｙｅｓ）、制御部４６は、展開イメージデータをビデオＲＡＭ４４に書き込む（ステップＳ１３２）。このようにビデオＲＡＭ４４に書き込まれた展開イメージデータは、表示部４０によって読み出され、利用者３に視認できるように、展開イメージデータに応じた画像が利用者３の網膜上に投影される。
【０２１８】
次に、制御部４６は、内部のＲＡＭ４８の所定領域に割り当てられたスクロール可能フラグをＯＦＦに設定（ステップＳ１３４）して、ＨＭＤイメージ表示処理を終了する。
【０２１９】
一方、展開イメージが画面に収まらないと判定すると（ステップＳ１３１：Ｎｏ）、制御部４６は、今回表示する部分をイメージから切り出し（ステップＳ１３５）、ステップＳ１３６の処理に移行する。表示する部分をイメージから切り出す処理は、展開イメージのうち表示部４０に表示する領域を選択し、内部のＲＡＭ４８から選択した領域に対応する展開イメージデータの一部を取り出すことによって行う。
【０２２０】
ステップＳ１３６において、制御部４６は、切り出した領域に関する情報を内部のＲＡＭ４８に保存して、ステップＳ１３７の処理に移行する。ここで、切り出した領域に関する情報とは、切り出した部分が展開イメージ全領域中のどの範囲に対応するのかを示す情報である。
【０２２１】
ステップＳ１３７において、制御部４６は、ステップＳ１３５において切り出したイメージのデータをビデオＲＡＭ４４に書き込む。このようにビデオＲＡＭ４４に書き込まれた展開イメージデータは、表示部４０によって読み出され、利用者３に視認できるように、展開イメージデータに応じた画像が利用者３の網膜上に投影される。
【０２２２】
次に、制御部４６は、内部のＲＡＭ４８の所定領域に割り当てられたスクロール可能フラグをＯＮに設定（ステップＳ１３８）して、ＨＭＤイメージ表示処理を終了する。
【０２２３】
次に、ステップＳ１１５におけるＨＭＤファイル表示処理について、図１７を参照して具体的に説明する。
【０２２４】
ＨＭＤファイル表示処理において、まず制御部４６は、内部のＲＡＭ４８から展開前のデータを読み出す（ステップＳ１４０）。
【０２２５】
次に、制御部４６は、読み出した展開前のデータを展開する展開ソフトがあるか否かを判定する（ステップＳ１４１）。
【０２２６】
ここで、読み出した展開前のデータを展開する展開ソフト（展開用コンピュータプログラム）があるか否かは、ステップＳ１４０においてＲＡＭ４８から読み出したイメージデータの拡張子情報（ファイル形式）を判別することによって行う。
【０２２７】
この処理において、展開ソフトがあると判定すると（ステップＳ１４１：Ｙｅｓ）、制御部４６は、展開ソフトを実行して添付ファイルをイメージに展開して（ステップＳ１４２）、ステップＳ１４３の処理に移行する。
【０２２８】
ここで、展開ソフトの実行は、制御部４６がＲＯＭ６２から対応する展開プログラムを読み出して実行することによって行い、このように実行された展開プログラムによって添付ファイルをイメージデータに変換（展開）する。
【０２２９】
ステップＳ１４３において、制御部４６は、ステップＳ１４２で展開したイメージをビデオＲＡＭ４４に保存し、上述したＨＭＤイメージ表示処理に移行する（ステップＳ１４４）。
【０２３０】
一方、ステップＳ１４１において、ファイル展開ソフトがないと判定すると（ステップＳ１４１：Ｎｏ）、制御部４６は、ＨＭＤ表示画面に一定時間エラー表示を行って（ステップＳ１４５）、ＨＭＤファイル表示処理を終了する。
【０２３１】
ここで、ＨＭＤ表示画面への一定時間エラー表示は、制御部４６がフォントＲＯＭ４５からエラー表示用のフォントデータを取り出して、イメージデータを生成し、ビデオＲＡＭ４４に格納することによって行う。このようにビデオＲＡＭ４４に格納されたイメージデータは、表示部４０によって読み出され、利用者３に視認できるように、展開イメージデータに応じた画像が利用者３の網膜上に投影される。
【０２３２】
次に、ステップＳ１１７におけるＨＭＤスクロール表示処理について、図１８を参照して具体的に説明する。
【０２３３】
ＨＭＤスクロール表示処理において、まず制御部４６は、内部のＲＡＭ４８に設定されたスクロール可能フラグがＯＮであるか否かを判定する（ステップＳ１５０）。
【０２３４】
この処理において、スクロール可能フラグがＯＮであると判定すると（ステップＳ１５０：Ｙｅｓ）、制御部４６は、内部のＲＡＭ４８に格納されたイメージのうち、スクロール後の表示に対応する範囲（領域）のデータを取り出す（ステップＳ１５１）。
【０２３５】
その後、制御部４６は、ステップＳ１５１において読み出したイメージデータをビデオＲＡＭ４４に書き込む（ステップＳ１５２）。このようにビデオＲＡＭ４４に格納されたイメージデータは、表示部４０によって読み出され、利用者３に視認できるように、展開イメージデータに応じた画像が利用者３の網膜上に投影される。
【０２３６】
ステップＳ１５２の処理が終了すると、制御部４６は、ステップＳ１５１において読み出した範囲（領域）に関する情報を内部のＲＡＭ４８に保存して（ステップＳ１５３）、ＨＭＤスクロール表示処理を終了する。
【０２３７】
以上のように、本実施形態における電子メール閲覧システムＳにおいては、携帯電話１において電子メールを表示する際に、テキストであるメール本文は携帯電話１の表示部１２で表示し、携帯電話１の表示部１２で視認しにくい添付ファイルをヘッドマウントディスプレイ２に表示するようにしたため、添付ファイルの閲覧が容易となり、電子メールの閲覧の表示性を向上させることができ、携帯電話１とヘッドマウントディスプレイ２との連帯を効果的に行うことができる。
【０２３８】
（第２実施形態）
第１実施形態においては、携帯電話１において、受信した添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換することができないときには、ヘッドマウントディスプレイ２によって添付ファイルを展開することとしたが、本第２実施形態においては、添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換するためのプログラムをプロバイダ９（外部装置の一例に相当）から取得することができるように改良したものである。
【０２３９】
ここで、プロバイダ９は、電子メールの添付ファイルを展開することができるコンピュータプログラムであって、かつ携帯電話１で実行することができるコンピュータプログラム（以下、「拡張展開ソフト」という。）を記憶しており、携帯電話１からの要求によって拡張展開ソフトを携帯電話１に送信することができるように構成されている。
【０２４０】
なお、添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換するためのプログラムを携帯電話１がプロバイダ９から取得して実行する点を除き、携帯電話１及びヘッドマウントディスプレイ２の構成及び動作は第１実施形態と基本的に同等である。すなわち、第２実施形態においては、第１実施形態におけるステップＳ２３のメール表示処理が異なるため、このメール表示処理について、以下具体的に説明する。
【０２４１】
図２０は第２実施形態における携帯電話のメール表示処理のフローチャート、図２１は図２０におけるステップＳ２１０の展開ソフトダウンロード処理のフローチャートである。
【０２４２】
メール表示処理が開始されると、制御部１６は、ステップＳ２２において選択された特定の電子メールのデータ（ヘッダ部分及びメール本文）を内部のＲＡＭ１８から読み出し（ステップＳ２００）、ステップＳ２０１の処理に移行する。
【０２４３】
ステップＳ２０１において、制御部１６は、ステップＳ２２において選択された特定の電子メールに添付ファイルがあるか否かをチェックする。なお、添付ファイルの有無の判別は、ステップＳ３１と同じである。
【０２４４】
ステップＳ２０２において、特定の電子メールに添付ファイルがあると判定すると（ステップＳ２０２：Ｙｅｓ）、制御部１６は、添付ファイルのファイルタイプ（ファイル形式）の判別を行う（ステップＳ２０３）。なお、ファイルタイプの判別は、ステップＳ３３と同じである。
【０２４５】
次に、制御部１６は、ファイルタイプを判別することができたか否かを判定する（ステップＳ２０４）。ファイル形式の判別を行うことができたとき（ステップＳ２０４：Ｙｅｓ）、制御部１６は、ステップＳ２０５の処理に移行する。
【０２４６】
ステップＳ２０５において、制御部１６は、添付ファイルを復号化し、内部のＲＡＭ１８に保存し、処理をステップＳ２０６に移行する。
【０２４７】
ステップＳ２０６において、制御部１６は、ステップＳ２２において選択された特定の電子メールの添付ファイルを展開するソフト（プログラム）がＲＯＭ３５に格納されているか否かを判定する。
【０２４８】
この処理において、添付ファイルを展開するソフトがＲＯＭ３５にあると判定すると（ステップＳ２０７：Ｙｅｓ）、制御部１６は、添付ファイルを展開するソフトを選択する。すなわち、制御部１６は、ＲＯＭ３５から添付ファイルを展開するソフトを読み出して実行し、添付ファイルデータをヘッドマウントディスプレイで表示可能なデータに変換する添付ファイル展開処理手段として機能する（ステップＳ２０８）。なお、第１実施形態と同様に、制御部１６において、複数の展開ソフトを実行できるようにＲＯＭ３５に複数の展開ソフトが格納されている。
【０２４９】
ステップＳ２０８の処理が終了すると、制御部１６は、添付ファイルのある表示処理を行う（ステップＳ２０９）。この添付ファイルのある表示処理は、図１２におけるＳ５０〜Ｓ５６の処理と同じである。
【０２５０】
ステップＳ２０７において、添付ファイルに対応する展開ソフトがないと判定すると（ステップＳ２０７：Ｎｏ）、制御部１６は、ステップＳ２１０に移行し、展開ソフトダウンロード処理を実行する。この展開ソフトダウンロード処理は、図２１におけるＳ２２０〜Ｓ２２９の処理であり、後述で詳説する。
【０２５１】
展開ソフトダウンロード処理を終了すると、制御部１６は、対応した展開ソフト（拡張展開ソフト）をダウンロードできたか否かを判定する（ステップＳ２１１）。ここで、対応した展開ソフトとは、ステップＳ２２において選択された特定の電子メールの添付ファイルを展開することができるプログラムであって、携帯電話１で実行可能なプログラムを意味する。
【０２５２】
この処理において、対応する展開ソフトをダウンロードできた判定すると（ステップＳ２１１：Ｙｅｓ）、制御部は、処理をステップＳ２０８に移行する。一方、対応する展開ソフトをダウンロードできないと判定すると（ステップＳ２１１：Ｎｏ）、制御部１６は、処理をステップＳ２１２に移行する。
【０２５３】
ステップＳ２１２において、制御部１６は、添付ファイルのない表示処理を実行する。この添付ファイルのない表示処理は、上述したステップＳ４１の処理と同じであるため、ここでは説明を省略する。
【０２５４】
ここで、ステップＳ２１０における展開ソフトダウンロード処理について、図２１を参照して具体的に説明する。
【０２５５】
展開ソフトダウンロード処理を開始すると、制御部１６は、携帯電話網通信部１０を動作させて、無線電話網４に接続されたプロバイダ９にアクセス（ステップＳ２２０）し、プロバイダ９と通信することができるか否かを判定する（ステップＳ２２１）。
【０２５６】
この処理において、プロバイダ９と通信することができると判定すると（ステップＳ２２１：Ｙｅｓ）、制御部１６は、プロバイダ９に対し、ステップＳ２２において選択された特定の電子メールの添付ファイルを展開することができる拡張展開ソフトを有しているか否かをプロバイダ９に問い合わせる（ステップＳ２２２）。
【０２５７】
ステップＳ２２２におけるプロバイダ９への問い合わせの結果、プロバイダ９が拡張展開ソフトを有しているとの通知を受けたか否か、言い換えれば、拡張展開ソフトがあったか否かを判定する（ステップＳ２２３）。
【０２５８】
ステップＳ２２３において、拡張展開ソフトがあったと判定すると（ステップＳ２２３：Ｙｅｓ）、制御部１６は、プロバイダ９に対して拡張展開ソフトの送信を要求することによって、プロバイダ９から拡張展開ソフトをダウンロードして、内部のＲＡＭ１８に格納する（ステップＳ２２４）。
【０２５９】
拡張展開ソフトのダウンロードが終了すると、制御部１６は、プロバイダ９との通信を切断し（ステップＳ２２５）、内部のＲＡＭ１８の所定領域にダウンロード成功フラグを保存する（ステップＳ２２６）。
【０２６０】
一方、ステップＳ２２３において、拡張展開ソフトがないと判定すると（ステップＳ２２３：Ｎｏ）、制御部１６は、プロバイダ９との通信を切断し（ステップＳ２２８）、内部のＲＡＭ１８の所定領域にダウンロード失敗フラグを保存する（ステップＳ２２９）。
【０２６１】
また、ステップＳ２２１において、プロバイダとの通信ができないとき（ステップＳ２２１：Ｎｏ）、制御部１６は、処理をステップＳ２２９に移行する。
【０２６２】
ステップＳ２２６及びステップＳ２２９の処理が終了することにより、この展開ソフトダウンロード処理が終了する。
【０２６３】
以上のように第２実施形態における携帯電話１は、受信した電子メールの添付ファイルがヘッドマウントディスプレイ２で表示可能なデータに変換することができないとき、無線電話網４（通信ネットワークの一例に相当）に接続されたプロバイダ（外部装置の一例に相当）から拡張展開ソフトを取得し、取得した拡張展開ソフトを実行することによって、添付ファイルをヘッドマウントディスプレイ２で表示可能なデータに変換するようにしており、ヘッドマウントディスプレイ２での添付ファイルの表示を行うことができる。
【０２６４】
ここで、制御部１６は、添付ファイルデータを添付ファイル展開処理手段の機能によりヘッドマウントディスプレイ２で表示可能なデータに変換することができるか否かを判定するファイル展開可否判定部としての機能と、添付ファイルデータを添付ファイル展開処理手段の機能によりヘッドマウントディスプレイ２で表示可能なデータに変換することができるときに、拡張展開ソフトを無線電話網４に接続されたプロバイダ９から取得する拡張展開ソフト取得部としての機能とを実行することにより、上記動作を行うことになる。
【０２６５】
（第３実施形態）
第１実施形態においては、携帯電話１において、受信した添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換することができないときには、ヘッドマウントディスプレイ２によって添付ファイルを展開することとしたが、本第３実施形態においては、添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換するための処理をプロバイダ９（外部装置の一例に相当）に委託することができるように改良したものである。
【０２６６】
ここで、プロバイダ９は、携帯電話１からの要求によって、携帯電話１から送信される添付ファイルを展開し、このように展開した添付ファイルのデータを携帯電話１に送信することができるように構成されている。
【０２６７】
なお、添付ファイルのデータをヘッドマウントディスプレイ２で表示可能なデータに変換する処理をプロバイダ９に委託する点を除きは、携帯電話１及びヘッドマウントディスプレイ２の構成及び動作は第１実施形態と基本的に同等である。すなわち、第３実施形態においては、第１実施形態におけるステップＳ２３のメール表示処理が異なるため、このメール表示処理について、以下具体的に説明する。図２２は第３実施形態における携帯電話１のメール表示処理のフローチャート、図２３は図２２におけるステップＳ３１０のプロバイダ転送処理のフローチャート、図２４は図２２におけるステップＳ３１２の添付ファイルのある表示処理（展開済み）のフローチャート、図２５は図２２におけるステップＳ３３５の添付ファイル閲覧処理（展開済み）のフローチャートである。
【０２６８】
図２２に示すように、メール表示処理が開始されると、制御部１６は、ステップＳ２２において選択された特定の電子メールのデータ（ヘッダ部分及びメール本文）を内部のＲＡＭ１８から読み出し（ステップＳ３００）、ステップＳ３０１の処理に移行する。
【０２６９】
ステップＳ３０１において、制御部１６は、ステップＳ２２において選択された特定の電子メールに添付ファイルがあるか否かをチェックする。なお、添付ファイルの有無の判別は、ステップＳ３１と同じである。
【０２７０】
ステップＳ３０２において、特定の電子メールに添付ファイルがあると判定すると（ステップＳ３０２：Ｙｅｓ）、制御部１６は、添付ファイルのファイルタイプ（ファイル形式）の判別を行う（ステップＳ３０３）。なお、ファイルタイプの判別は、ステップＳ３３と同じである。
【０２７１】
次に、制御部１６は、ファイルタイプを判別することができたか否かを判定する（ステップＳ３０４）。ファイル形式の判別を行うことができたとき（ステップＳ３０４：Ｙｅｓ）、制御部１６は、ステップＳ３０５の処理に移行する。
【０２７２】
ステップＳ３０５において、制御部１６は、添付ファイルを復号化し、内部のＲＡＭ１８に保存し、処理をステップＳ３０６に移行する。
【０２７３】
ステップＳ３０６において、制御部１６は、ステップＳ２２において選択された特定の電子メールの添付ファイルを展開するソフト（プログラム）がＲＯＭ３５に格納されているか否かを判定する。
【０２７４】
この処理において、添付ファイルを展開するソフトがＲＯＭ３５にあると判定すると（ステップＳ３０７：Ｙｅｓ）、制御部１６は、添付ファイルを展開するソフトを選択する。すなわち、制御部１６は、ＲＯＭ３５から添付ファイルを展開するソフトを読み出して実行し、添付ファイルデータをヘッドマウントディスプレイで表示可能なデータに変換する添付ファイル展開処理手段として機能する（ステップＳ３０８）。なお、第１実施形態と同様に、制御部１６において、複数の展開ソフトを実行できるようにＲＯＭ３５に複数の展開ソフトが格納されている。
【０２７５】
ステップＳ３０８の処理が終了すると、制御部１６は、添付ファイルのある表示処理を行う（ステップＳ３０９）。この添付ファイルのある表示処理は、図１２におけるＳ５０〜Ｓ５６の処理と同じである。
【０２７６】
ステップＳ３０７において、添付ファイルに対応する展開ソフトがないと判定すると（ステップＳ３０７：Ｎｏ）、制御部１６は、ステップＳ３１０に移行し、プロバイダ転送処理を実行する。このプロバイダ転送処理は、図２３におけるＳ３２０〜Ｓ３２８の処理であり、後述で詳説する。
【０２７７】
プロバイダ転送処理を終了すると、制御部１６は、プロバイダ９によって展開された添付ファイルデータ（展開画像）をダウンロードできたか否かを判定する（ステップＳ３１１）。
【０２７８】
この処理において、展開画像をダウンロードできた判定すると（ステップＳ３１１：Ｙｅｓ）、制御部１６は、処理をステップＳ３１２に移行する。一方、展開画像をダウンロードできないと判定すると（ステップＳ３１１：Ｎｏ）、制御部１６は、処理をステップＳ３１３に移行する。
【０２７９】
ステップＳ３１２において、制御部１６は、添付ファイルのある表示処理（展開済み）を実行する。この添付ファイルのある表示処理（展開済み）は、図２４におけるステップＳ３３０〜Ｓ３３８の処理であり、後述で詳説する。
【０２８０】
また、ステップＳ３１３において、制御部１６は、添付ファイルのない表示処理を実行する。この添付ファイルのない表示処理は、上述したステップＳ４１の処理と同じであるため、ここでは説明を省略する。
【０２８１】
ここで、ステップＳ３１０におけるプロバイダ転送処理について、図２３を参照して具体的に説明する。
【０２８２】
プロバイダ転送処理を開始すると、制御部１６は、携帯電話網通信部１０を動作させて、無線電話網４に接続されたプロバイダ９にアクセスし（ステップＳ３２０）、プロバイダ９と通信することができるか否かを判定する（ステップＳ３２１）。
【０２８３】
この処理において、プロバイダ９と通信することができると判定すると（ステップＳ３２１：Ｙｅｓ）、制御部１６は、プロバイダ９に対し、ステップＳ２２において選択された特定の電子メールの添付ファイルを展開することができる拡張展開ソフトを有しているか否かをプロバイダ９に問い合わせる（ステップＳ３２２）。
【０２８４】
ステップＳ３２２におけるプロバイダ９への問い合わせの結果、プロバイダ９が拡張展開ソフトを有しているとの通知を受けたか否か、言い換えれば、拡張展開ソフトがあったか否かを判定する（ステップＳ３２３）。
【０２８５】
ステップＳ３２３において、拡張展開ソフトがあったと判定すると（ステップＳ３２３：Ｙｅｓ）、制御部１６は、プロバイダ９に対してステップＳ２２において選択された特定の電子メールの添付ファイルを送信する。プロバイダ９は、この携帯電話１の要求に応じて添付ファイルをヘッドマウントディスプレイで表示可能なデータに変換し、この変換したデータを携帯電話１に送信する。携帯電話１においては変換後の添付ファイル（展開されたイメージ）を受信する。このようにして携帯電話１は添付ファイルをヘッドマウントディスプレイで表示可能なデータに変換する。
【０２８６】
変換後の添付ファイルの受信が終了すると、制御部１６は、プロバイダ９との通信を切断し（ステップＳ３２５）、内部のＲＡＭ１８の所定領域に添付ファイル変換成功フラグを保存する（ステップＳ３２６）。
【０２８７】
一方、ステップＳ３２３において、拡張展開ソフトがないと判定すると（ステップＳ３２３：Ｎｏ）、制御部１６は、プロバイダ９との通信を切断し（ステップＳ３２７）、内部のＲＡＭ１８の所定領域に添付ファイル変換失敗フラグを保存する（ステップＳ３２８）。
【０２８８】
また、ステップＳ３２１において、プロバイダとの通信ができないとき（ステップＳ３２１：Ｎｏ）、制御部１６は、処理をステップＳ３２８に移行する。
【０２８９】
次に、ステップＳ３１２における添付ファイルのある表示処理（展開済み）について、図２４に示すフローチャートを参照して具体的に説明する。
【０２９０】
添付ファイルのある表示処理（展開済み）を開始すると、制御部１６は、携帯電話１の表示部１２にメール本文の描画イメージをビデオＲＡＭ１９に展開する（ステップＳ３３０）。
【０２９１】
次に、制御部１６は、携帯画面（携帯電話１の表示部１２）にビデオＲＡＭ１９に展開したイメージを表示する（ステップＳ３３１）。
【０２９２】
次に、制御部１６は、入力部１１に設けられたキャンセルボタン（図示せず）が押下されたか否かを判定する（ステップＳ３３２）。
【０２９３】
この処理において、入力部１１に設けられたキャンセルボタンが押下されたと判定すると（ステップＳ３３２：Ｙｅｓ）、制御部１６は、添付ファイルのある表示処理（展開済み）の動作を終了する。
【０２９４】
一方、この処理において、キャンセルボタンが押下されていないと判定すると（ステップＳ３２２：Ｎｏ）、制御部１６は、ステップＳ３３３の処理に移行し、スクロールボタンが押下されたか否かを判定する。
【０２９５】
ステップＳ３３３において、スクロールボタンが押下されたと判定すると（ステップＳ３３３：Ｙｅｓ）、制御部１６は、メール本文の一番下までスクロールが行われたか否かを判定する（ステップＳ３３４）。
【０２９６】
ここで、メール本文の一番下までスクロールが行われたか否かは、メール本文の文末が表示部１２に表示されているか否かによって判定を行う。すなわち、メール本文の文末を表示部１２に表示した時点若しくは表示する処理を開始した時点で、メール本文の一番下までスクロールしたと判定するのである。
【０２９７】
この処理において、本文が一番下までスクロールされたと判定すると（ステップＳ３３４：Ｙｅｓ）、制御部１６は、添付ファイル閲覧処理（展開済み）を行う。この処理は、図２５におけるステップＳ３４０〜Ｓ３４６までの処理であり、後述で詳説する。
【０２９８】
一方、本文が一番下までスクロールされていないと判定すると（ステップＳ３３４：Ｎｏ）、制御部１６は、スクロールの方向に応じて表示部１２に表示する描画イメージを変更する（ステップＳ３３６）。
【０２９９】
ステップＳ３３５，Ｓ３３６の処理が終了したとき、或いは、ステップＳ３３３においてスクロールボタンが押下されていないと判定したとき、制御部１６は、処理をステップＳ３３２に移行し、ステップＳ３３２からの処理を繰り返す。
【０３００】
次に、ステップＳ３３５における添付ファイル閲覧処理（展開済み）について、図２５に示すフローチャートを参照して具体的に説明する。
【０３０１】
添付ファイル閲覧処理を開始すると、制御部１６は、ヘッドマウントディスプレイ（ＨＭＤ）に、表示要求制御信号を送信する（ステップＳ３４０）。
【０３０２】
表示要求制御信号を送信すると、次に制御部１６は、プロバイダ９によってヘッドマウントディスプレイ２に表示可能に変換された添付ファイルの描画イメージをビデオＲＡＭ１９から読み出す（ステップＳ３４１）。
【０３０３】
制御部１６は、このように読み出した添付ファイルの描画イメージを近距離無線通信部１４を介してヘッドマウントディスプレイ２に送信する（ステップＳ３４２）。
【０３０４】
次に、制御部１６は、入力部１１に設けられたキャンセルボタン（図示せず）が押下されたか否かを判定する（ステップＳ３４３）。
【０３０５】
この処理において、入力部１１に設けられたキャンセルボタンが押下されたと判定すると（ステップＳ３４３：Ｙｅｓ）、制御部１６は、ヘッドマウントディスプレイ２に対して近距離無線通信部１４を介してキャンセルボタン操作信号を送信し（ステップＳ３４４）、添付ファイル閲覧処理を終了する。
【０３０６】
一方、この処理において、キャンセルボタンが押下されていないと判定すると（ステップＳ３４３：Ｎｏ）、制御部１６は、ステップＳ３４５の処理に移行し、スクロールボタンが押下されたか否かを判定する。
【０３０７】
ステップＳ３４５において、スクロールボタンが押下されたと判定すると（ステップＳ３４５：Ｙｅｓ）、制御部１６は、ヘッドマウントディスプレイ２に近距離無線通信部１４を介してスクロール操作信号を送信する（ステップＳ３４６）。
【０３０８】
ステップＳ３４６の処理が終了したとき、或いはステップＳ３４５においてスクロールボタンが押下されていないと判定されたとき（ステップＳ３４５：Ｎｏ）、制御部１６は、処理をステップＳ６３に移行し、ステップＳ３４３からの処理を繰り返す。
【０３０９】
以上のように第３実施形態における携帯電話１は、受信した電子メールの添付ファイルがヘッドマウントディスプレイ２で表示可能なデータに変換することができないとき、無線電話網４（通信ネットワークの一例に相当）に接続されたプロバイダ（外部装置の一例に相当）に添付ファイルの展開を依頼し、展開された添付ファイルデータを受信することによって、添付ファイルをヘッドマウントディスプレイ２で表示可能なデータに変換するようにしており、ヘッドマウントディスプレイ２での添付ファイルの表示を行うことができる。
【０３１０】
ここで、制御部１６は、添付ファイルデータを添付ファイル展開処理手段としての機能によりヘッドマウントディスプレイ２で表示可能なデータに変換することができるか否かを判定するファイル展開可否判定手段としての機能と、添付ファイル抽出手段によって抽出した添付ファイルデータをヘッドマウントディスプレイで表示可能なデータに変換するために、この添付ファイルデータを含むデータ変換要求を通信ネットワークに接続された外部装置へ送信する変換要求手段としての機能と、プロバイダによってヘッドマウントディスプレイで表示可能なデータに変換された添付ファイルデータを受信する変換データ受信手段としての機能とを実行することにより、上記動作を行うことになる。
【０３１１】
以上、本発明の実施の形態のうちのいくつかを図面に基づいて詳細に説明したが、これらは例示であり、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
【０３１２】
本実施形態においては、第１〜第３実施形態に分けて説明したが、これらを適宜組み合わせることも可能である。例えば、携帯電話１において、電子メールの添付ファイルがヘッドマウントディスプレイ２で表示できない形式であるとき、ａ）ヘッドマウントディスプレイ２へ送信する、ｂ）プロバイダ９から展開ソフトをダウンロードする、ｃ）プロバイダ９に添付ファイルのイメージデータ化を委託する、のいずれか一つを条件に応じて選択するようにする。
【０３１３】
ここで、上記ａ）〜ｃ）の選択の条件として、最初は上記ａ）を選択し、上記ａ）ができない場合に、上記ｂ）を選択し、上記ｂ）もできない場合に上記ｃ）を選択するといった条件がある。
【０３１４】
また、携帯電話１において、電子メールを閲覧するときに、上記ｂ）ｃ）を実行するようにしたが、携帯電話１において電子メールを受信したときに、制御部１６が添付ファイルの形式を判定し、ヘッドマウントディスプレイで表示可能なデータに変換することができないと判定すると、上記ｂ）又は上記ｃ）を行うようにしてもよい。このようにすることによって、添付ファイルの閲覧を迅速に行うことができる。
【０３１５】
また、携帯電話１の制御部１６は、メール閲覧が行われているとき、或いは添付ファイルの閲覧の契機（本文が最後までスクロールされたときなど）に、ヘッドマウントディスプレイ２との接続状態を確認し、接続されていないと判定すると、添付ファイルをヘッドマウントディスプレイで表示可能なデータに変換することなく、携帯電話１の表示部１２に表示させるようにしてもよい。このようにすることにより、携帯電話１における処理負荷が軽減される。
【０３１６】
また、携帯電話１がヘッドマウントディスプレイ２と通信ができないときに、携帯電話１の入力部１１によるメール閲覧操作が行なわれたとき、添付ファイルが携帯電話１の表示部１２で表示することができない旨を表示部１２又は音声処理部１３から報知するようにしてもよい。
【０３１７】
また、携帯電話１がヘッドマウントディスプレイ２と通信ができない状態で、携帯電話１の入力部１１によるメール閲覧操作が行なわれたとき、添付ファイルを携帯電話１の表示部１２において行なうようにしてもよい。このように、携帯電話１がヘッドマウントディスプレイ２と通信ができるか否かを制御部１６で判定し、ヘッドマウントディスプレイ２と通信ができるときには、添付ファイルのデータをヘッドマウントディスプレイ２へ送信するようにして、操作性を向上させることができる。
【０３１８】
また、携帯電話１において、制御部１６は、ヘッドマウントディスプレイ２で表示可能なデータに一度変換した後は、その変換後のデータを内部のＲＡＭ４８に蓄積しておき、その後電子メールが閲覧されるとＲＡＭ４８から変換後のデータを読み出して、ヘッドマウントディスプレイ２へ送信するようにしてもよい。
【図面の簡単な説明】
【０３１９】
【図１】第１実施形態におけるメール閲覧システムの構成図である。
【図２】第１実施形態における携帯電話のブロック図である。
【図３】第１実施形態におけるヘッドマウントディスプレイの外観図である。
【図４】第１実施形態におけるヘッドマウントディスプレイの全体ブロック図である。
【図５】第１実施形態におけるヘッドマウントディスプレイの表示部ブロック図である。
【図６】第１実施形態における携帯電話のメイン処理フローチャートである。
【図７】第１実施形態における携帯電話の表示部への表示例を示す図である。
【図８】第１実施形態における携帯電話のメール機能処理フローチャートである。
【図９】第１実施形態における携帯電話のメール閲覧処理フローチャートである。
【図１０】第１実施形態における携帯電話のメール表示処理フローチャートである。
【図１１】第１実施形態におけるメールデータの構成例を示す図である。
【図１２】第１実施形態における携帯電話の添付ファイルのある表示処理フローチャートである。
【図１３】第１実施形態における携帯電話の添付ファイル閲覧処理フローチャートである。
【図１４】第１実施形態におけるヘッドマウントディスプレイのメイン処理フローチャートである。
【図１５】第１実施形態におけるヘッドマウントディスプレイの画面表示処理フローチャートである。
【図１６】第１実施形態におけるヘッドマウントディスプレイのイメージ表示処理フローチャートである。
【図１７】第１実施形態におけるヘッドマウントディスプレイのファイル表示処理フローチャートである。
【図１８】第１実施形態におけるヘッドマウントディスプレイのスクロール表示処理フローチャートである。
【図１９】第１実施形態における携帯電話及びヘッドマウントディスプレイの表示例を示す図である。
【図２０】第２実施形態における携帯電話のメール表示処理フローチャートである。
【図２１】第２実施形態における携帯電話の展開ソフトダウンロード処理フローチャートである。
【図２２】第３実施形態における携帯電話のメール表示処理フローチャートである。
【図２３】第３実施形態における携帯電話のプロバイダ転送処理フローチャートである。
【図２４】第３実施形態における携帯電話の添付ファイルのある表示処理（展開済み）フローチャートである。
【図２５】第３実施形態における携帯電話の添付ファイル閲覧処理（展開済み）フローチャートである。
【符号の説明】
【０３２０】
Ｓ  電子メール閲覧システム
１  携帯電話
２  ヘッドマウントディスプレイ
７  電子メールサーバ
９  プロバイダ
１０  携帯電話網通信部
１２  携帯電話の表示部
１４  携帯電話の近距離無線通信部
１６  携帯電話の制御部
４０  ヘッドマウントディスプレイの表示部
４３  ヘッドマウントディスプレイの近距離無線通信部
４６  ヘッドマウントディスプレイの制御部
【図１】
2008059511.tif 000003
【図２】
2008059511.tif 000004
【図３】
2008059511.tif 000005
【図４】
2008059511.tif 000006
【図５】
2008059511.tif 000007
【図６】
2008059511.tif 000008
【図７】
2008059511.tif 000009
【図８】
2008059511.tif 000010
【図９】
2008059511.tif 000011
【図１０】
2008059511.tif 000012
【図１１】
2008059511.tif 000013
【図１２】
2008059511.tif 000014
【図１３】
2008059511.tif 000015
【図１４】
2008059511.tif 000016
【図１５】
2008059511.tif 000017
【図１６】
2008059511.tif 000018
【図１７】
2008059511.tif 000019
【図１８】
2008059511.tif 000020
【図１９】
2008059511.tif 000021
【図２０】
2008059511.tif 000022
【図２１】
2008059511.tif 000023
【図２２】
2008059511.tif 000024
【図２３】
2008059511.tif 000025
【図２４】
2008059511.tif 000026
【図２５】
2008059511.tif 000027