(57)【要約】【課題】焦点距離をより容易に把握することができるようにする。【解決手段】撮像部と、前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部と、前記撮像部の焦点距離を調整する焦点距離調整部と、前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、前記左眼用画像と前記右眼用画像とを生成して前記表示部に表示させる表示制御部とを備える。本開示は、例えば、撮像装置に適用することができる。【選択図】図３
2015149633.tif 000002
【特許請求の範囲】
【請求項１】
撮像部と、
前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部と、
前記撮像部の焦点距離を調整する焦点距離調整部と、
前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、前記左眼用画像と前記右眼用画像とを生成して前記表示部に表示させる表示制御部と
を備える撮像装置。
【請求項２】
前記表示制御部は、前記表示オブジェクトの大きさを、前記焦点距離に応じて設定する
請求項１に記載の撮像装置。
【請求項３】
前記表示部は、前記左眼用画像を表示する左眼用画像表示部と、前記右眼用画像を表示する右眼用画像表示部とを有する
請求項１に記載の撮像装置。
【請求項４】
前記撮像装置の筐体は、ユーザの頭部に、前記左眼用画像表示部が前記ユーザの左眼前方の近傍に位置し、前記右眼用画像表示部が前記ユーザの右眼前方の近傍に位置するように装着される
請求項３に記載の撮像装置。
【請求項５】
前記表示制御部は、前記撮像部による撮像の画角を示す画像を前記表示部にさらに表示させる
請求項１に記載の撮像装置。
【請求項６】
前記焦点距離調整部は、ユーザに操作されて前記焦点距離を調整する
請求項１に記載の撮像装置。
【請求項７】
被写体までの距離を測定する距離測定部をさらに備え、
前記焦点距離調整部は、前記距離測定部により測定された前記距離に合わせるように、前記焦点距離を調整する
請求項１に記載の撮像装置。
【請求項８】
前記距離測定部は、前記撮像領域の所定の位置の被写体までの距離を測定する
請求項７に記載の撮像装置。
【請求項９】
前記所定の位置は、前記撮像領域の、前記表示部の表示領域の中央に視える位置である
請求項８に記載の撮像装置。
【請求項１０】
前記被写体の顔を検出する顔検出部をさらに備え、
前記距離測定部は、前記顔検出部により検出された前記被写体の顔までの距離を測定する
請求項７に記載の撮像装置。
【請求項１１】
ユーザの視線の方向を検出する視線検出部をさらに備え、
前記距離測定部は、前記視線検出部により検出された前記ユーザが視線を合わせた被写体までの距離を測定する
請求項７に記載の撮像装置。
【請求項１２】
前記被写体までの距離の測定の実行指示を受け付ける指示受付部をさらに備え、
前記距離測定部は、前記指示受付部により受け付けられた前記実行指示に基づいて、前記被写体までの距離を測定する
請求項７に記載の撮像装置。
【請求項１３】
撮像部の焦点距離を調整し、
前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、立体視画像の左眼用画像と右眼用画像とを生成して、前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部に表示させ、
前記撮像部により前記被写体を撮像する
撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は撮像装置および方法に関し、特に、焦点距離をより容易に把握することができるようにした撮像装置および方法に関する。
【背景技術】
【０００２】
近年、透過型HMD（Head Mounted Display）の開発が行われるようになってきた。例えば、両眼視差や輻輳を調整することで奥行きを表現する透過型HMDが考えられた（例えば、特許文献１参照）。また、このような透過型HMDに撮像機能を設け、ユーザが透過型HMDを介して見る現実空間の被写体を撮像することが考えられた。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−４２６５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、このような透過型HMDでは、撮像画像において所望の被写体に合焦されているか否かを確認することは困難であり、所望の撮像結果を得るために煩雑な作業を必要とするおそれがあった。
【０００５】
本開示は、このような状況に鑑みてなされたものであり、焦点距離をより容易に把握することができるようにするものである。
【課題を解決するための手段】
【０００６】
本技術の撮像装置は、撮像部と、前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部と、前記撮像部の焦点距離を調整する焦点距離調整部と、前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、前記左眼用画像と前記右眼用画像とを生成して前記表示部に表示させる表示制御部とを備える撮像装置である。
【０００７】
前記表示制御部は、前記表示オブジェクトの大きさを、前記焦点距離に応じて設定することができる。
【０００８】
前記表示部は、前記左眼用画像を表示する左眼用画像表示部と、前記右眼用画像を表示する右眼用画像表示部とを有することができる。
【０００９】
前記撮像装置の筐体は、ユーザの頭部に、前記左眼用画像表示部が前記ユーザの左眼前方の近傍に位置し、前記右眼用画像表示部が前記ユーザの右眼前方の近傍に位置するように装着されるようにすることができる。
【００１０】
前記表示制御部は、前記撮像部による撮像の画角を示す画像を前記表示部にさらに表示させることができる。
【００１１】
前記焦点距離調整部は、ユーザに操作されて前記焦点距離を調整することができる。
【００１２】
被写体までの距離を測定する距離測定部をさらに備え、前記焦点距離調整部は、前記距離測定部により測定された前記距離に合わせるように、前記焦点距離を調整することができる。
【００１３】
前記距離測定部は、前記撮像領域の所定の位置の被写体までの距離を測定することができる。
【００１４】
前記所定の位置は、前記撮像領域の、前記表示部の表示領域の中央に視える位置であるようにすることができる。
【００１５】
前記被写体の顔を検出する顔検出部をさらに備え、前記距離測定部は、前記顔検出部により検出された前記被写体の顔までの距離を測定することができる。
【００１６】
ユーザの視線の方向を検出する視線検出部をさらに備え、前記距離測定部は、前記視線検出部により検出された前記ユーザが視線を合わせた被写体までの距離を測定することができる。
【００１７】
前記被写体までの距離の測定の実行指示を受け付ける指示受付部をさらに備え、前記距離測定部は、前記指示受付部により受け付けられた前記実行指示に基づいて、前記被写体までの距離を測定することができる。
【００１８】
本技術の撮像方法は、撮像部の焦点距離を調整し、前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、立体視画像の左眼用画像と右眼用画像とを生成して、前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部に表示させ、前記撮像部により前記被写体を撮像する撮像方法である。
【００１９】
本技術においては、撮像部の焦点距離が調整され、焦点距離を示す表示オブジェクトが焦点距離に対応する奥行き位置に視えるように、立体視画像の左眼用画像と右眼用画像とが生成されて、撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部に表示され、撮像部により被写体が撮像される。
【発明の効果】
【００２０】
本技術によれば、被写体を撮像することができる。また、本技術によれば、焦点距離をより容易に把握することができる。
【図面の簡単な説明】
【００２１】
【図１】透過型HMDの外観の例を示す図である。
【図２】透過型HMDの主な構成例を示すブロック図である。
【図３】撮影処理の流れの例を示すフローチャートである。
【図４】フォーカスアイコンの表示例を示す図である。
【図５】フォーカスアイコンの表示例を示す図である。
【図６】フォーカスアイコンの表示例を示す図である。
【図７】撮像の様子の例を説明する図である。
【図８】撮像の様子の他の例を説明する図である。
【発明を実施するための形態】
【００２２】
以下、本開示を実施するための形態（以下実施の形態とする）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（撮像装置）
２．第２の実施の形態（透過型HMD）
【００２３】
＜１．第１の実施の形態＞
＜透過型ディスプレイによる撮像結果の確認＞
近年、透過型HMD（Head Mounted Display）の開発が行われるようになってきた。透過型HMDでは、背面側からの光を透過し、その背面側の現実空間の景色を透過的に視ることができる表示部（透過型ディスプレイ）が用いられる。これにより、透過型HMDのユーザは、その透過型ディスプレイに表示される画像を、その透過型ディスプレイの背面側の現実空間の景色（以下、透過映像とも称する）に重畳した状態で見ることができる。
【００２４】
このような透過型HMDに撮像機能（カメラ）を設け、ユーザが透過型HMDを介して視る現実空間の被写体を撮像すること（換言するに、透過型ディスプレイを有する撮像装置）が考えられた。例えば、このような撮像機能（カメラ）を有する透過型HMDを装着したユーザが、ライフログとしてHMDに搭載されたカメラで被写体を撮像したり、得られた撮像画像をネットワーク上で共有し合ったりするユースケースが考えられた。
【００２５】
ところで、従来、このような被写体の撮像において、所望の被写体に合焦しているか否かを確認するためには、ユーザは、撮像結果（撮像画像）を確認する必要があった。撮像画像の確認は、例えば、透過型HMDで行う方法と、他のデバイスで行う方法とが考えられる。
【００２６】
例えば撮像画像をスマートフォン等の他のデバイスの表示部に表示させて確認する場合、ユーザは、他のデバイスを用意する必要があるだけでなく、その撮像画像のデータを透過型HMDから他のデバイスに転送しなければならず、撮像画像の確認の為だけに煩雑な作業が必要であった。
【００２７】
また、例えば、撮像画像を透過型HMDの透過型ディスプレイに表示させて確認する場合、ユーザは、その撮像画像を、現実空間の景色（透過映像）に重畳した状態で確認しなければならず、撮像画像の視認性が落ちてしまい、撮像画像のピントのずれなどの細かいミスを確認することができないおそれがあった。
【００２８】
このように、例えば透過型HMDのような透過ディスプレイを有する撮像装置の場合、撮像画像の焦点距離の確認（所望の被写体に合焦しているか否か等の確認）を容易に行うことができないため、ピントずれ（所望の被写体に合焦していない状態）等の撮像の失敗が発生し易く、所望の撮像結果を得るために、画像確認や撮り直し等の煩雑な作業が必要であった。
【００２９】
＜撮像装置＞
そこで、撮像部と、その撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部と、撮像部の焦点距離を調整する焦点距離調整部と、焦点距離を示す表示オブジェクトがその焦点距離に対応する奥行き位置に視えるように、左眼用画像と右眼用画像とを生成して表示部に表示させる表示制御部とを備えるようにする。
【００３０】
すなわち、撮像装置が、撮像部の焦点距離を調整し、その焦点距離を示す表示オブジェクトがその焦点距離に対応する奥行き位置に視えるように、立体視画像の左眼用画像と右眼用画像とを生成して、撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部に表示させ、撮像部により被写体を撮像するようにする。
【００３１】
つまり、焦点距離を示す表示オブジェクト（以下、フォーカスアイコンとも称する）を立体視画像として表示部（透過型ディスプレイ）に表示させるようにする。
【００３２】
立体視画像は、その画像を視るユーザに、奥行き方向の位置関係（奥行き感）を意識させて立体的に視えるようにした画像である。立体視画像は、例えば、複数の視点の画像からなり、それらの画像間の視差や輻輳角によって奥行き感が表現される。立体視画像は、例えば、主にユーザの左眼に見せる画像である左眼用画像と、主にユーザの右眼に見せる画像である右眼用画像とからなる。
【００３３】
このような立体視画像のフォーカスアイコンを透過型ディスプレイに表示させ、その表示されたフォーカスアイコンの奥行き方向の位置（以下、奥行き位置とも称する）によって焦点距離を表すようにする。
【００３４】
このようにすることにより、ユーザは、透過型ディスプレイに表示されるフォーカスアイコンの奥行き位置によって、焦点距離を容易に確認することができる。例えば、ユーザは、フォーカスアイコンの奥行き位置が、透過映像における現実空間の所望の被写体の奥行き位置と一致しているか否かによって、その被写体に合焦しているか否かを容易に確認することができる。したがって、この撮像装置は、ピントずれ（所望の被写体に合焦していない状態）等の撮像の失敗の発生を抑制し、ユーザがより容易に所望の撮像結果を得ることができるようにすることができる。
【００３５】
なお、このフォーカスアイコンの形状は任意であり、例えば、十字、四角形、円形等であってもよいし、それ以外であってもよい。また、このフォーカスアイコンの数は、１つであってもよいし、複数であってもよい。
【００３６】
撮像装置の表示制御部が、表示オブジェクトの大きさを、焦点距離に応じて設定するようにしてもよい。例えば、焦点距離が遠い程、フォーカスアイコンの大きさを小さくする（換言するに、焦点距離が近い程、フォーカスアイコンの大きさを大きくする）ようにしてもよい。つまり、焦点距離をフォーカスアイコンの奥行き位置と大きさによって表すようにしてもよい。このようにすることにより、ユーザは、より直感的かつより正確に、焦点距離を確認することができる（例えば、より容易かつより正確に、所望の被写体に合焦しているか否か等を確認することができる）。したがって、この撮像装置は、ピントずれ（所望の被写体に合焦していない状態）等の撮像の失敗の発生をより抑制することができる。したがって、ユーザは、より容易に所望の撮像結果を得ることができる。
【００３７】
また、撮像装置の表示部が、左眼用画像を表示する左眼用画像表示部と、右眼用画像を表示する右眼用画像表示部とを有するようにしてもよい。このようにすることにより、ユーザは、左眼用画像表示部を左眼で視て、右眼用画像表示部を右眼で視ることで、フォーカスアイコンを立体視画像として（奥行き感が付与された状態で）視ることができる。つまり、撮像装置は、偏光眼鏡等を必要とせずに、ユーザに立体視画像を提供することができる。
【００３８】
撮像装置の筐体が、ユーザの頭部に、左眼用画像表示部がユーザの左眼前方の近傍に位置し、右眼用画像表示部がユーザの右眼前方の近傍に位置するように装着されるようにしてもよい。すなわち、この撮像装置は、所謂HMD（透過型HMD）として実現することができる。
【００３９】
撮像装置の表示制御部が、撮像部による撮像の画角を示す画像を表示部にさらに表示させるようにしてもよい。このようにすることにより、ユーザは、撮像領域の範囲（撮像画像に含まれる範囲）を容易に把握することができる。なお、この画像の奥行き方向の距離は任意である。例えば、一番手前に見えるようにしてもよい。また、この画像に奥行き感を持たせないようにしてもよい（立体視画像でなくてもよい）。
【００４０】
撮像装置の焦点距離調整部が、ユーザに操作されて焦点距離を調整するようにしてもよい。すなわち、この焦点距離調整は、ユーザの操作により行われるもの（所謂、マニュアルフォーカス）であってもよい。つまり、この場合、例えば、ユーザが手動で焦点距離調整を行うと、その操作による焦点距離の変化に応じて、フォーカスアイコンの奥行き位置が変化する。ユーザは、そのフォーカスアイコンの奥行き位置を視ながら操作を行うことによって、焦点距離を確認しながら焦点距離調整を行うことができる。したがって、ユーザは、焦点距離を、より容易かつより正確に、所望の奥行き位置に合わせることができる。
【００４１】
撮像装置が、被写体までの距離を測定する距離測定部をさらに備え、焦点距離調整部が、その距離測定部により測定された距離に合わせるように、焦点距離を調整するようにしてもよい。すなわち、この焦点距離調整は、撮像装置により行われるもの（所謂、オートフォーカス）であってもよい。この場合、ユーザは、フォーカスアイコンの奥行き位置を視ることによって焦点距離を確認することができる。つまり、ユーザは、より容易かつ正確に、オートフォーカス結果（例えば、所望の距離に合焦したか否か等）を確認することができる。
【００４２】
撮像装置の距離測定部が、撮像領域の所定の位置の被写体までの距離を測定するようにしてもよい。例えば、その所定の位置が、撮像領域の、表示部の表示領域の中央に視える位置であるようにしてもよい。もちろん、この所定の位置は、予め定められていれば何処でもよく、撮像領域の、表示部の表示領域の中央に視える位置に限定されない。このように、距離を測定する被写体の表示領域内の位置を固定化することにより、ユーザは、その位置（例えば、表示領域の中央）に所望の被写体を位置させるように撮像装置の姿勢（位置や向き等）を調整するだけで、容易にその被写体を距離測定対象とすることができる。
【００４３】
撮像装置が、被写体の顔を検出する顔検出部をさらに備え、距離測定部が、その顔検出部により検出された被写体の顔までの距離を測定するようにしてもよい。このようにすることにより、容易に被写体の顔に合焦させることができる。
【００４４】
撮像装置が、ユーザの視線の方向を検出する視線検出部をさらに備え、距離測定部が、視線検出部により検出されたユーザが視線を合わせた被写体までの距離を測定するようにしてもよい。このようにすることにより、ユーザは視線を所望の被写体に合わせるだけで、容易にその被写体を距離測定対象とすることができる。
【００４５】
撮像装置が、被写体までの距離の測定の実行指示を受け付ける指示受付部をさらに備え、距離測定部が、指示受付部により受け付けられた実行指示に基づいて、被写体までの距離を測定するようにしてもよい。このようにすることにより、ユーザに指示された場合のみ、距離測定が（すなわち、焦点距離調整も）行われるようにすることができる。つまり、ユーザが指示しない限り焦点距離が固定されるようにすることができる。これにより、例えば、ユーザは、１度焦点距離を調整した後、その焦点距離を維持したまま、撮影方向等を変更することができる。
【００４６】
なお、上述した焦点距離を示す表示オブジェクトは、光を透過しない非透過型の表示部に表示されるようにしてもよい。例えば、非透過型の表示部に、表示オブジェクト（フォーカスアイコン）が、撮像部において得られる撮り込み画像（スルー画とも称する）に重畳され表示されるようにしてもよい。その場合も、表示オブジェクトを上述した透過型の表示部に表示させる場合と同様に、表示オブジェクトが焦点距離に対応する奥行き位置に視えるように、左眼用画像と右眼用画像とを生成して表示部に表示させるようにすればよい。
【００４７】
つまり、上述した「撮像部の撮像領域の少なくとも一部を透過的に視る」ことには、透過型のディスプレイのように、「そのディスプレイを介して、そのディスプレイの背面側の現実空間の景色を視ること」だけでなく、上述した非透過型のディスプレイのように、「そのディスプレイに表示された、撮像部において得られるスルー画を視ること」も含まれる。
【００４８】
＜２．第２の実施の形態＞
＜透過型HMDの外観＞
本技術は、撮像装置以外にも適用することができる。例えば、透過型HMDに本技術を適用するようにしてもよい。図１は、本技術を適用した撮像装置の一態様である、透過型HMDの外観の例を示す図である。例えば図１Ａに示されるように、透過型HMD１００の筐体１１１は、所謂眼鏡型の形状を有しており、眼鏡と同様に、筐体１１１の端部がユーザの耳にかけられるような姿勢でユーザの顔に装着されて使用される。
【００４９】
眼鏡のレンズに相当する部分が表示部１１２（右眼用表示部１１２Ａと左眼用表示部１１２Ｂ）となっている。ユーザが透過型HMD１００を装着すると、右眼用表示部１１２Ａがユーザの右眼前方の近傍に位置し、左眼用表示部１１２Ｂがユーザの左眼前方の近傍に位置する。
【００５０】
表示部１１２は、光を透過する透過型ディスプレイである。したがって、ユーザの右眼は、右眼用表示部１１２Ａを介して、その背面側、すなわち、右眼用表示部１１２Ａより前方の現実空間の景色（透過映像）を視ることができる。同様に、ユーザの左眼は、左眼用表示部１１２Ｂを介して、その背面側、すなわち、左眼用表示部１１２Ｂより前方の現実空間の景色（透過映像）を視ることができる。したがって、ユーザには、表示部１１２に表示される画像が、この表示部１１２より前方の現実空間の景色の手前側に重畳された状態で見える。
【００５１】
右眼用表示部１１２Ａは、ユーザの右眼に見せるための画像（右眼用画像）を表示し、左眼用表示部１１２Ｂは、ユーザの左眼に見せるための画像（左眼用画像）を表示する。つまり、表示部１１２は、右眼用表示部１１２Ａおよび左眼用表示部１１２Ｂのそれぞれに、互いに異なる画像を表示することができ、例えば、立体視画像を表示させることができる。
【００５２】
立体視画像は、互いに両眼視差と輻輳角を有する右眼用画像と左眼用画像からなり、その両眼視差と輻輳角を制御することにより、ユーザに、ユーザから遠くに位置するように見えるようにしたり、近くに位置するように見えるようにしたりすることができる画像である。つまり、立体視画像は、奥行き位置（画像の実際の表示位置ではなく、ユーザにとってあたかもそこに存在するように視える仮想的な位置（虚像位置とも称する））を制御することができる画像である。
【００５３】
つまり、表示部１１２は、ユーザにとって、この表示部１１２より前方の現実空間内に位置するように見えるように、画像（立体視画像）を表示することができる。
【００５４】
また、図１に示されるように、筐体１１１の表示部１１２近傍には、ホール（穴）１１３が設けられている。そのホール１１３付近の筐体１１１の内部には、被写体を撮像する撮像部が設けられている。その撮像部は、そのホール１１３を介して、透過型HMD１００の前方（透過型HMD１００を装着したユーザにとって、その透過型HMD１００よりも前方）の現実空間の被写体を撮像する。より具体的には、撮像部は、ユーザから見て表示部１１２（右眼用表示部１１２Ａおよび左眼用表示部１１２Ｂ）の表示領域内に位置する現実空間の被写体を撮像する。これにより撮像画像の画像データが生成される。生成された画像データは、例えば、所定の記憶媒体に記憶されたり、他のデバイスに伝送されたりする。
【００５５】
なお、このホール１１３（すなわち撮像部）の位置は、任意であり、図１Ａに示される例以外の位置に設けられるようにしてもよい。また、このホール１１３の数（すなわち撮像部）の数は任意であり、図１Ａのように１つであってもよいし、複数であってもよい。
【００５６】
また、ユーザの顔（頭部）に、右眼用表示部１１２Ａがユーザの右眼前方の近傍に位置し、左眼用表示部１１２Ｂがユーザの左眼前方の近傍に位置するように、装着することができる限り、筐体１１１の形状は任意である。例えば、透過型HMD１００が図１Ｂのような形状であってもよい。
【００５７】
図１Ｂの例の場合、透過型HMD１００の筐体１３１は、ユーザの頭部を後方から挟むように固定するような形状に形成されている。この場合の表示部１３２も、表示部１１２と同様の透過型のディスプレイである。すなわち、表示部１３２も、右眼用表示部１３２Ａと左眼用表示部１３２Ｂを有しており、ユーザが透過型HMD１００を装着すると、右眼用表示部１３２Ａがユーザの右眼前方の近傍に位置し、左眼用表示部１３２Ｂがユーザの左眼前方の近傍に位置する。
【００５８】
そして、右眼用表示部１３２Ａは、右眼用表示部１１２Ａと同様の表示部であり、左眼用表示部１３２Ｂは、左眼用表示部１１２Ｂと同様の表示部である。つまり、表示部１３２も表示部１１２と同様に立体視画像を表示することができる。
【００５９】
また、図１Ｂの場合も、図１Ａの場合と同様に、筐体１３１の表示部１３２近傍には、ホール（穴）１１３と同様のホール（穴）１３３が設けられ、そのホール１３３付近の筐体１３１の内部には、被写体を撮像する撮像部が設けられている。その撮像部は、図１Ａの場合と同様に、そのホール１３３を介して、透過型HMD１００の前方（透過型HMD１００を装着したユーザにとって、その透過型HMD１００よりも前方）の現実空間の被写体を撮像する。
【００６０】
当然、このホール１３３（すなわち撮像部）の位置は、図１Ａの場合と同様に任意であり、図１Ｂに示される例以外の位置に設けられるようにしてもよい。また、このホール１３３の数（すなわち撮像部）の数も、図１Ａの場合と同様に任意である。
【００６１】
また、図１Ｃに示される例のように、図１Ａの例の透過型HMDの構成の一部が、筐体１１１とは別体として構成されるようにしてもよい。図１Ｃの例の場合、筐体１１１は、ケーブル１５１を介して、コントロールボックス１５２と接続されている。
【００６２】
ケーブル１５１は、所定の有線通信の通信路であり、筐体１１１内部の回路と、コントロールボックス１５２内部の回路とを電気的に接続する。コントロールボックス１５２は、図１Ａの例の場合の、筐体１１１内部の構成（回路等）の一部を有する。例えば、コントロールボックス１５２が制御部や画像データを記憶する記憶部等を有し、筐体１１１内部の回路とコントロールボックス１５２内部の回路とで通信を行い、筐体１１１内部の撮像部がコントロールボックス１５２の制御部の制御に従って撮像を行い、その撮像により得られた撮像画像の画像データがコントロールボックス１５２に供給され、その記憶部に記憶されるようにしてもよい。
【００６３】
コントロールボックス１５２は、例えば、ユーザの服のポケット等に格納することができる。このような構成とすることにより、透過型HMD１００の筐体１１１を、図１Ａの場合よりも小型化することができる。
【００６４】
なお、筐体１１１内部の回路とコントロールボックス１５２内部の回路とが行う通信は、有線通信であってもよいし、無線通信であってもよい。無線通信の場合、ケーブル１５１は、省略することができる。
【００６５】
＜内部の構成例＞
図２は、透過型HMD１００の内部の構成例を示すブロック図である。図２に示されるように、透過型HMD１００は、システムコントローラ２１１を有する。
【００６６】
システムコントローラ２１１は、例えばCPU（Central Processing Unit）、ROM（Read Only Memory）、RAM（Random Access Memory）、不揮発性メモリ部、インタフェース部等を備えたマイクロコンピュータにより構成され、透過型HMD１００の各部を制御する制御部である。このシステムコントローラ２１１は内部の動作プログラムに基づいて各部の制御を行う。例えば、システムコントローラ２１１は、各部を制御し、表示部１１２に表示させる画像の表示制御を行う。
【００６７】
また、透過型HMD１００は、センサ部２２１、センサ制御部２２２、およびセンサ信号処理部２２３を有する。
【００６８】
センサ部２２１は、例えば、表示部１１２の近辺に搭載された加速度センサ、ジャイロセンサ、磁気センサ、気圧センサ等任意のセンサを有し、ユーザの動きに応じた信号として、例えばユーザの頭部の動き、首の動き、透過型HMD１００の動きなどを検出する。また、センサ部２２１は、静電容量センサやボタン、GPS（Global Positioning System）等を有し、ユーザが透過型HMD１００を操作するために使うセンサ系の信号もこの部位で処理されるようにしてもよい。
【００６９】
つまり、センサ部２２１は、任意の入力デバイスを有し、その入力デバイスを介して入力される情報を受け付ける。このような入力デバイスの位置は任意であり、表示部１１２近傍に限らない。
【００７０】
また、センサ部２２１は、ユーザの視線等を検出するセンサを有するようにしてもよい。例えば、センサ部２２１は、そのようなセンサとして、表示部１１２の近傍に配置され、ユーザの眼部を撮像する撮像部（視線撮像部）を有するようにしてもよい。この場合、例えば、システムコントローラ２１１が、その視線撮像部が撮像したユーザの眼部の画像について画像解析を行うことで、視線方向、焦点距離、瞳孔の開き具合、眼底パターン、まぶたの開閉などを検出するようにしてもよい。また、センサ部２２１が、そのような視線撮像部の代わりに、表示部１１２の近傍に配置されてユーザの眼部に光を照射する発光部と、眼部からの反射光を受光して光電変換し、電気信号（受光信号）として出力する受光部とを有するようにしてもよい。その場合、システムコントローラ２１１が、その受光部において得られた受光信号に基づいて、視線方向等を検出するようにしてもよい。また、例えば、システムコントローラ２１１が、受光部が受光した反射光を電気信号に変換した受光信号からユーザの水晶体の厚みを検知するようにしてもよい。つまり、センサ部２２１が、ユーザの視線の方向を検出する視線検出部を有するようにしてもよい。そして、その検出方法は任意である。
【００７１】
センサ制御部２２２は、システムコントローラ２１１からの指示に基づいて、どのタイミングでどのセンサを駆動するか、若しくは、どういった駆動方法で検出を行うかなどのセンサ制御を行う。また、センサ信号処理部２２３は、センサ部２２１において検出されたセンサ信号について、システムコントローラ２１１側に送る前処理として、平均や分散などの各種数値処理を行う。
【００７２】
透過型HMD１００では、電源オン／オフ、各種情報画像の表示開始、終了、画像内容の変更、輝度レベルや色合い等の表示調整、表示画面上の表示領域の変更等のために、ユーザの操作が必要になる場合がある。例えばセンサ部２２１として、それらの操作（処理動作のトリガ検出）のためには、例えばユーザが操作する操作キーや操作ダイヤルとしての操作子と、その操作子の操作を検知する操作検知機構を設け、システムコントローラ２１１がユーザの操作を検知することができるようにしてもよい。
【００７３】
そのような操作子を設ける代わりに、センサ部２２１の各センサで検出されるユーザの状況（例えば眼の動きや身体の挙動や状態等）に基づいて、システムコントローラ２１１がユーザの操作意志や適切な動作処理を判別し、それに応じた処理を実行するようにしてもよい。
【００７４】
さらには、センサ部２２１が、その他の外界情報（例えば透過型HMD１００の周囲の状況や、場所、日時、被写体の状況などの検知情報）を検知する構成を有するようにし、システムコントローラ２１１が、センサ部２２１により検出された外界情報に基づいて適切な動作処理を判別し、処理を実行するようにしてもよい。
【００７５】
また、透過型HMD１００は、画像生成部２３１、表示画像処理部２３２、表示駆動部２３３、および表示制御部２３４を有する。
【００７６】
画像生成部２３１は、システムコントローラ２１１の制御に基づいて、画像信号を生成する。システムコントローラ２１１は、各部から得られる内容や数値に応じて、画像生成部２３１にユーザに提示するための画像となる画像信号を生成させ、イメージ画像、グラフ画像、文字表示画像、或いはユーザに対する警告提示の為の画像としての画像信号を生成する。
【００７７】
表示画像処理部２３２は、いわゆるビデオプロセッサを有し、供給された画像信号に対して各種表示のための処理を実行する。例えば、表示画像処理部２３２は、撮像信号処理部２５２から供給される撮像信号の輝度レベル調整、色補正、コントラスト調整、シャープネス（輪郭強調）調整などを行う。また、表示画像処理部２３２が、画面上での表示位置の設定も行うようにしてもよい。さらに、表示画像処理部２３２が、撮像信号の一部を拡大した拡大画像の生成、或いは縮小画像の生成、ソフトフォーカス、モザイク、輝度反転、画像内の一部のハイライト表示（強調表示）、全体の色の雰囲気の変化などの画像エフェクト処理、撮像画像の分割表示のための画像の分離や合成、キャラクタ画像やイメージ画像の生成及び生成した画像を撮像画像に合成する処理などを行うようにしてもよい。表示画像処理部２３２は、信号処理を行った画像信号を表示駆動部２３３に供給する。
【００７８】
なお、表示画像処理部２３２が、このような処理を、表示制御部２３４から供給される指示や、センサ信号処理部２２３から供給されるセンサ信号に応じて行うようにしてもよい。また、表示画像処理部２３２が、表示制御部２３４から供給される画像に対しても同様の処理を行うようにしてもよい。例えば、表示画像処理部２３２には画像生成部２３１で生成された画像信号が供給されるが、この画像信号に対しても、表示のための所要の信号処理を行って表示駆動部２３３に供給するようにしてもよい。
【００７９】
表示駆動部２３３は、表示画像処理部２３２から供給される画像信号を、表示部１１２において表示させるための画素駆動回路で構成されている。即ち、表示駆動部２３３は、表示部１１２においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで映像信号に基づく駆動信号を印加し、表示を実行させる。また表示駆動部２３３は、表示部１１２の各画素の輝度を制御して、画面全体及び一部をスルー状態とすることもできる。
【００８０】
表示制御部２３４は、システムコントローラ２１１の指示に基づいて、表示画像処理部２３２の処理動作や表示駆動部の動作、左右それぞれの表示部に表示する画像を制御し、表示画像処理部２３２に対する信号処理の指示を行う。また表示駆動部２３３に対してはスルー状態、画像表示状態、片眼表示状態の切り換え等が行われるように制御する。
【００８１】
また、透過型HMD１００は、音声生成部２４１、音声出力部２４２、音声入力部２４３、および音声信号処理部２４４を有する。
【００８２】
音声生成部２４１は、システムコントローラ２１１の指示に基づいて、音声合成処理を行ってメッセージ音声等の音声信号を生成したり、電子音その他のユーザに提示する音声信号を生成したりする。
【００８３】
音声出力部２４２は、例えば透過型HMD１００に搭載されたスピーカまたはイヤホンスピーカと、そのスピーカに対するアンプ回路を有する。音声生成部２４１で生成された音声信号が音声出力部２４２に供給されることにより、ユーザはメッセージ音声や電子音等を聞くことができる。なお音声出力部２４２は、いわゆる骨伝導スピーカとして構成されてもよい。
【００８４】
音声入力部２４３は、マイクロホンで得られた音声信号を増幅処理するマイクアンプ部やA/D変換器を有し、音声データを出力する。
【００８５】
音声信号処理部２４４は、例えばデジタルシグナルプロセッサ、D/A変換器などからなる。この音声信号処理部２４４には、音声入力部２４３で得られた音声データや、音声生成部２４１で生成された音声データが供給される。音声信号処理部２４４は、供給された音声データに対して、システムコントローラ２１１の制御に応じて、音量調整、音質調整、音響エフェクト等の処理を行う。そして、音声信号処理部２４４は、処理した音声データをアナログ信号に変換して音声出力部２４２に供給する。なお、音声信号処理部２４４は、デジタル信号処理を行う構成に限られず、アナログアンプやアナログフィルタによって信号処理を行うようにしてもよい。
【００８６】
音声信号処理部２４４から出力された音声信号は、音声出力部２４２のイヤホンスピーカから音声として出力される。このような構成により、ユーザは、音声入力部２４３で集音された外部音声を聞いたり、音声生成部２４１で生成された音声を聞いたりすることができる。
【００８７】
また、透過型HMD１００は、撮像部２５１、撮像信号処理部２５２、および撮像制御部２５３を有する。
【００８８】
撮像部２５１は、撮像レンズや、絞り、ズームレンズ、フォーカスレンズなどを備えて構成されるレンズ系や、レンズ系に対してフォーカス動作やズーム動作を行わせるための駆動系、さらにレンズ系で得られる撮像光を検出し、光電変換を行うことで撮像信号を生成する固体撮像素子アレイなどが設けられる。固体撮像素子アレイは、例えばCCD（Charge Coupled Device）センサアレイや、CMOS（Complementary Metal Oxide Semiconductor）センサアレイ等よりなる。
【００８９】
撮像部２５１は、例えばホール１１３を介して、ユーザの前方の光景（ユーザの前方の現実空間の被写体）を撮像する。もちろん撮像部２５１によってユーザの後方等、他の方向の光景が撮像されるようにしてもよい。
【００９０】
撮像信号処理部２５２は、撮像部２５１の固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／AGC(Automatic Gain Control)回路や、ビデオA/Dコンバータ等を有し、デジタルデータとしての撮像信号を得る。また、撮像信号処理部２５２が、撮像信号に対してホワイトバランス処理、輝度処理、色信号処理、ぶれ補正処理なども行うようにしてもよい。
【００９１】
撮像制御部２５３は、システムコントローラ２１１からの指示に基づいて、撮像部２５１および撮像信号処理部２５２の動作を制御する。例えば撮像部２５１，撮像信号処理部２５２の動作のオン／オフを制御する。また撮像制御部２５３は撮像部２５１に対して、オートフォーカス、自動露出調整、絞り調整、ズーム、焦点変更などの動作を実行させるための制御（モータ制御）を行う。
【００９２】
なお、撮像レンズによる被写体方向を可変できる可動機構が設けられている場合は、撮像制御部２５３はシステムコントローラ２１１の指示に基づいて、可動機構の動作を制御して撮像部２５１における撮像レンズの方向を変化させる。
【００９３】
また撮像制御部２５３は、タイミングジェネレータを備え、撮像部２５１の固体撮像素子、並びに、撮像信号処理部２５２のサンプルホールド／AGC回路、およびビデオA/Dコンバータに対して、タイミングジェネレータにて生成されるタイミング信号により信号処理動作を制御する。また、このタイミング制御により撮像フレームレートの可変制御も可能とされる。
【００９４】
さらに、撮像制御部２５３が、撮像部２５１の固体撮像素子や撮像信号処理部２５２における撮像感度や信号処理の制御を行うようにしてもよい。例えば、撮像制御部２５３が、撮像感度制御として撮像部２５１の固体撮像素子から読み出される信号のゲイン制御、黒レベル設定制御、デジタルデータ段階の撮像信号処理の各種係数制御、ぶれ補正処理における補正量制御等を行うようにしてもよい。
【００９５】
また、撮像制御部２５３が、波長帯域を考慮しない全体的な感度調整や、例えば赤外線領域、紫外線領域など、特定の波長帯域の撮像感度を調整する感度調整（例えば特定波長帯域をカットするような撮像）等の制御を行うようにしてもよい。例えば、波長に応じた感度調整は、撮像レンズ系における波長フィルタの挿入や、撮像信号に対する波長フィルタ演算処理により行うことができる。これらの場合、撮像制御部２５３は、波長フィルタの挿入制御や、フィルタ演算係数の指定等を行うことにより、感度制御を行うことができる。
【００９６】
例えば、撮像部２５１および撮像信号処理部２５２によって得られる撮像画像信号が、画像生成部２３１で生成される情報画像信号とともに表示画像処理部２３２に供給される。表示画像処理部２３２は、各画像信号について上述した各種信号処理を実行し、また２つの画像信号について、同時に表示部１１２に表示させるための画面分割としての信号処理（画像合成処理）を行う。
【００９７】
表示画像処理部２３２で合成処理された画像信号が、表示駆動部２３３に供給されて表示部１１２で表示されることで、表示部１１２では、撮像画像とその他の画像が、同時表示されることになる。言い換えれば、ユーザは、撮像画像を見ている状態においても、種々の画像を見ることができる。
【００９８】
撮像動作の開始、終了、ズーム動作、フォーカス動作、撮像画像調整などのためにユーザの操作が必要になる場合がある。もちろん、電源オン／オフ、各種情報画像の表示開始、終了、画像内容の変更、輝度レベルや色合い等の表示調整、表示画面上の表示領域の変更等のために、ユーザの操作が必要になる場合もある。例えば、それらの操作（動作のトリガ）のために操作キー等の操作子を、センサ部２２１に設けるようにしても良いが、センサ部２２１の各種センサで検出されるユーザの状況（例えば眼の動きや身体の挙動や状態等）からシステムコントローラ２１１がユーザの操作意志や適切な動作処理を判別し、それに応じた処理を実行するようにしてもよい。
【００９９】
さらには、外界情報（透過型HMD１００）の周囲の状況や、場所、日時、被写体の状況などの検知情報）を検知することができる構成とし、システムコントローラ２１１がその外界情報に基づいて適切な動作処理を判別し、処理を実行するようにしてもよい。
【０１００】
また、透過型HMD１００は、記憶部２６１、通信部２６２、およびドライブ２６３を有する。
【０１０１】
記憶部２６１は、HDD（Hard Disk Drive）、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリ等、任意の記憶媒体を有し、その記憶媒体についてデータの記録再生を行う。
【０１０２】
例えば、撮像部２５１により撮像され、撮像信号処理部２５２により処理された撮像信号としての画像データや、通信部２６２により受信された画像データ、さらには画像生成部２３１により生成された各種情報画像信号が、この記憶部２６１に記憶されるようにしてもよい。また音声入力部２４３において得られた音声データや、通信部２６２により受信した音声データ、さらには音声生成部２４１により生成された音声データも、この記憶部２６１に記憶されるようにしてもよい。
【０１０３】
記憶部２６１は、システムコントローラ２１１の制御に従って、供給された画像データや音声データに対して、その記憶媒体への記録のためのエンコード処理を行い、エンコードされたデータ（符号化データ）を記憶媒体に記憶する。また記憶部２６１は、システムコントローラ２１１の制御に従って、記憶媒体より画像データや音声データを再生し、他の処理部へ出力する。
【０１０４】
記憶部２６１で再生されるデータとしては、例えば映画やビデオクリップなどの動画コンテンツ、デジタルスチルカメラ等で撮像されて記録媒体に記録された静止画コンテンツ、電子書籍等のデータ、ユーザがパーソナルコンピュータ等で作成した画像データ、テキストデータ、表計算データ等のコンピュータユースのデータ、ゲーム画像など、表示対象となるあらゆるデータが想定される。
【０１０５】
通信部２６２は、透過型HMD１００の外部の装置（外部機器とも称する）とデータの送受信を行う。外部機器としては、例えば通信機能を備えたビデオカメラ、デジタルスチルカメラ等の撮像装置、コンピュータ装置、スッマートフォン、スマートウォッチ、ビデオストレージ機器やテレビジョン受像器等のAV機器、ネットワークサーバ装置などが想定される。
【０１０６】
また、無線LAN（Local Area Network）やブルートゥース（Bluetooth（登録商標））などの所定の方式で、例えばネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としても良いし、対応する通信機能を備えた外部機器との間で直接無線通信を行うものでもよい。
【０１０７】
外部機器から透過型HMD１００に送信されるデータとしては、外部機器が撮像装置である場合は、その撮像装置で撮像された画像データであったり、外部機器がコンテンツソース機器となる機器であったりする場合は、映画やビデオクリップなどの動画コンテンツ、デジタルスチルカメラ等で撮像されて記録媒体に記録された静止画コンテンツ、電子書籍等のデータ、ユーザがパーソナルコンピュータ等で作成した画像データ、テキストデータ、表計算データ等のコンピュータユースのデータ、ゲーム画像など、表示対象となるあらゆるデータが想定される。
【０１０８】
また、音声入力部２４３で得られた音声データ、ストレージ部で再生された音声データ、通信部２６２で受信された音声データは、システムコントローラ２１１の指示によって音声信号処理部に供給される。
【０１０９】
従ってユーザは、デバイスを装着した状態で、撮像画像と撮像時の外部音声を視聴したり、ストレージ部で再生された画像や音声を視聴したり、通信部で受信した画像や音声を視聴することができる。
【０１１０】
そして特に、画像生成部２３１での画像が、これらの撮像画像、又は再生画像、又は受信画像とともに表示画像処理部に供給されることで、撮像画像、又は再生画像、又は受信画像とともにさまざまな情報画像が表示される。
【０１１１】
また音声生成部２４１で音声データが生成されたタイミングでは、その生成された音声データを音声信号処理部２４４に供給することで、例えば外部音声、再生音声、受信音声を聞いている際に、音声生成部２４１で生成されたメッセージ音声や警告音等を聞くことができる。
【０１１２】
表示系の動作や撮像機能にかかる動作に加え、記憶部２６１での再生、頭出し、早送り／早戻し、一時停止、記録などのための動作制御や、通信部２６２での送受信に関する動作制御のトリガを、システムコントローラが判断しなければならないが、この場合も、ユーザが操作する操作キー等の操作子を、例えばセンサ部２２１等に設け、操作に応じた処理を実行するようにしてもよい。また、センサ部２２１で検出されるユーザの状況（例えば眼の動きや身体の挙動や状態等）からシステムコントローラ２１１がユーザの操作意志や適切な動作処理を判別し、それに応じた処理を実行するようにしてもよい。
【０１１３】
さらには、センサ部２２１が、透過型HMD１００の外界情報（表示装置の周囲の状況や、場所、日時、被写体の状況などの検知情報）を検知することができる構成を有し、システムコントローラ２１１がその外界情報に基づいて適切な動作処理を判別し、処理を実行するようにしてもよい。
【０１１４】
ドライブ２６３には、光ディスクや半導体メモリなどよりなるリムーバブルメディア２６４が適宜装着される。ドライブ２６３によりリムーバブルメディア２６４から読み出されたコンピュータプログラムやデータは、システムコントローラ２１１に供給され、記憶部２６１に記憶されたり、インストールされたりする。
【０１１５】
以上のような構成の透過型HMD１００において、上述したように表示部１１２は、表示部１１２の背面側（ユーザからみて表示部１１２よりも前方）からの光を透過し、その背面側の現実空間の景色に重畳して、複数視点の画像からなる立体視画像を表示する。
【０１１６】
また、撮像部２５１は、ユーザから視て表示部１１２の表示領域内に位置する現実空間の被写体を撮像する。
【０１１７】
撮像部２５１は、焦点距離調整機能（フォーカス機能）を有する。例えば、撮像部２５１が、ユーザの操作により焦点距離を調整する手動焦点距離調整機能（マニュアルフォーカスとも称する）を有するようにしてもよい。
【０１１８】
画像生成部２３１は、撮像部２５１の焦点距離を示す立体視画像（焦点距離を示す表示オブジェクト、すなわちフォーカスアイコンの左眼用画像と右眼用画像）を生成する。表示制御部２３３は、そのフォーカスアイコンの虚像位置が、その焦点距離に対応する奥行き位置となるように、そのフォーカスアイコンの視差および輻輳角を設定し、表示画像処理部２３２にその設定をフォーカスアイコンに適用させ、その奥行き位置が焦点距離に対応する位置となるように視差と輻輳角が設定されたフォーカスアイコンを表示部１１２に表示させる。
【０１１９】
なお、その際、表示制御部２３４が、任意の方法でフォーカスアイコンの視差および輻輳角を設定するようにしてもよい。例えば特開平０８−３２２００４号公報には、視度に対する輻輳角が実時間で略一致するように、電気的に表示面上に表示する映像を水平方向にシフトする手段を備える立体視ディスプレイ装置が開示されている。また、特開平０８−２１１３３２号公報には、両眼視差を利用して立体映像を得るものであり、再生映像を見るときの輻輳角を設定するために輻輳角選択手段と、選択された輻輳角に関する情報に基づいて左右の映像の相対的再生位置を制御する制御手段とを具備する立体映像再生装置が開示されている。例えば、表示制御部２３４が、これらの内のいずれかの方法を利用してフォーカスアイコンの視差および輻輳角を設定するようにしてもよい。
【０１２０】
また、例えば、撮像部２５１が、ユーザの操作なしに焦点距離を調整する自動焦点距離調整機能（オートフォーカスとも称する）を有するようにしてもよい。例えば、センサ部２２１が、ユーザから視て表示部１１２よりも前方の現実空間の物体までの距離を測定する測距センサを有し、その測距センサが撮像部２５１が撮像する被写体までの距離を測定するようにしてもよい。そして、撮像制御部２５３が、撮像部２５１に対して、センサ部２２１の測距センサによって測定された距離（被写体までの距離）に合わせるように、焦点距離を調整させるようにしてもよい。
【０１２１】
この測距センサの距離測定方法は任意であるが、例えば、ステレオカメラを用いたパッシブ型の測距技術や、距離画像カメラやレーザーカメラを用いたアクティブ型の測距技術等を用いるようにしてもよい。例えば、特開２０１２−２２２３８６号公報では、ステレオカメラによってユーザの位置を特定する方法が開示されている。また、特開２０１１−２０５３８８号公報には、ステレオカメラのキャリブレーション方法が開示されている。センサ部２２１が、これらの方法を利用して被写体までの距離を測定するようにしてもよい。
【０１２２】
なお、この測距センサが、撮像部２５１が撮像する範囲（撮像領域）の所定の位置に位置する物体（被写体）までの距離を測定するようにしてもよい。例えば、測距センサが、撮像領域の、ユーザから視て表示部１１２の表示領域の中央に視える位置に位置する被写体までの距離を測定するようにしてもよい。また、センサ部２２１がユーザの視線を検出する視線検出センサをさらに有し、測距センサが、撮像領域の、その視線検出センサにより検出されたユーザの視線の方向にある物体（被写体）までの距離を測定するようにしてもよい。さらに、センサ部２２１が、撮像領域の、ユーザから視て表示部１１２の表示領域内に視える被写体の顔部分を検出する顔検出センサを有し、その顔検出センサにより検出された被写体の顔部分までの距離を測定するようにしてもよい。
【０１２３】
以上のように測距センサを用いて被写体までの距離を測定し、その被写体までの距離に合わせるように焦点距離が調整される場合（すなわちオートフォーカスの場合）も、表示制御部２３４は、上述したマニュアルフォーカスの場合と同様に、焦点距離を示すフォーカスアイコンの虚像位置が、その焦点距離に対応する奥行き位置となるように、そのフォーカスアイコンの視差および輻輳角を設定する。表示画像処理部２３２は、フォーカスアイコンにその設定を適用し、表示部１１２は、そのフォーカスアイコンを表示する。
【０１２４】
なお、顔検出センサが、撮像領域の、ユーザから視て表示部１１２の表示領域内に視える複数の被写体の顔部分を検出し、測距センサが、その顔検出センサにより検出された各被写体の顔部分までの距離を測定するようにしてもよい。その場合、表示部１１２には、各被写体についてフォーカスアイコンが表示される（すなわち、表示部１１２に複数のフォーカスアイコンが表示される）ようにしてもよい。つまり、表示部１１２に表示されるフォーカスアイコンの数は任意である。
【０１２５】
なお、フォーカスアイコンの形状は任意であり、例えば、十字、四角形、円形等であってもよいし、それ以外であってもよい。
【０１２６】
また、表示制御部２３４が、表示オブジェクトの大きさを、焦点距離に応じて設定するようにしてもよい。つまり、表示部１１２に表示されるフォーカスアイコンが、その奥行き位置（すなわち焦点距離）に応じた大きさで表示されるようにしてもよい。例えば、焦点距離が遠い程、フォーカスアイコンの大きさを小さくする（換言するに、焦点距離が近い程、フォーカスアイコンの大きさを大きくする）ようにしてもよい。つまり、焦点距離をフォーカスアイコンの奥行き位置と大きさによって表すようにしてもよい。
【０１２７】
以上の各部の処理は、システムコントローラ２１１の制御に基づいて行われる。つまり、システムコントローラ２１１は、第１の実施の形態において説明した撮像装置の場合と同様に、撮像部の焦点距離を調整させ、その表示オブジェクトがその焦点距離に対応する奥行き位置に視えるように、立体視画像の左眼用画像と右眼用画像とを生成させて、撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部に表示させ、撮像部により被写体を撮像させる。
【０１２８】
＜撮像処理の流れ＞
システムコントローラ２１１は、撮像処理を実行することにより各部を制御して、以上のような撮像に関する処理を実行させる。図３のフローチャートを参照して、この撮像処理の流れの例を説明する。必要に応じて図４乃至図６を参照して説明する。なお、ここでは、撮像部２５１が、オートフォーカス機能を有し、センサ部２２１が、測距センサによって被写体までの距離を測定し、撮像制御部２５３が、撮像部２５１に対して、その測定された距離に合わせるように、焦点距離を調整させる場合の撮像処理の流れの例について説明する。
【０１２９】
撮像処理が開始されると、ステップＳ１０１において、システムコントローラ２１１は、焦点距離を調整するか否かを判定する。例えば、センサ部２２１においてユーザからの、焦点距離を調整する指示が受け付けられる等した場合、システムコントローラ２１１は、処理をステップＳ１０２に進める。
【０１３０】
ステップＳ１０２において、システムコントローラ２１１は、センサ制御部２２２を介してセンサ部２２１を制御し、被写体までの距離を測定させる。
【０１３１】
ステップＳ１０３において、システムコントローラ２１１は、撮像制御部２５３を介して撮像部２５１を制御し、ステップＳ１０２において測定された距離に合焦させるように焦点距離を調整（設定）させる。なお、マニュアルフォーカスの場合は、ステップＳ１０２の処理が省略され、ステップＳ１０３において、撮像部２５１がユーザの操作に従って焦点距離を調整（設定）する。
【０１３２】
ステップＳ１０４において、システムコントローラ２１１は、表示制御部２３４を制御し、フォーカスアイコンの大きさを、ステップＳ１０２において測定された距離に応じた大きさに設定する。また、システムコントローラ２１１は、表示制御部２３４を制御し、ステップＳ１０２において測定された距離（焦点距離）に応じた奥行き位置となるようにフォーカスアイコンの両眼視差や輻輳角を設定する。
【０１３３】
ステップＳ１０５において、システムコントローラ２１１は、画像生成部２３１を制御し、フォーカスアイコンの立体視画像を生成させる。そして、システムコントローラ２１１は、表示制御部２３４を介して表示画像処理部２３２を制御し、ステップＳ１０４において設定された大きさ、両眼視差、輻輳角等の設定を、画像生成部２３１が生成したフォーカスアイコンに適用させることにより、ユーザ（透過型HMD１００）から虚像位置までの距離（虚像距離とも称する）が焦点距離となるフォーカスアイコンの立体視画像を生成させる。
【０１３４】
ステップＳ１０６において、システムコントローラ２１１は、表示制御部２３４を介して表示駆動部２３３および表示部１１２を制御し、ステップＳ１０５において生成されたフォーカスアイコンの立体視画像を表示部１１２に表示させる。つまり、システムコントローラ２１１は、フォーカスアイコンの右眼用画像を右眼用表示部１１２Ａに表示させ、フォーカスアイコンの左眼用画像を左眼用表示部１１２Ｂに表示させる。
【０１３５】
これにより、フォーカスアイコンが、現実空間内の透過型HMD１００（ユーザ）から焦点距離の位置に存在するようにユーザに見えるように、表示部１１２に表示される。
【０１３６】
例えば、図４Ａに示されるように、ユーザ３０１（透過型HMD１００）から被写体３０２までの距離がaと検出された場合、システムコントローラ２１１は、表示部１１２に表示するフォーカスアイコン３１１の虚像距離もaとするように、フォーカスアイコン３１１の両眼視差や輻輳角を設定する。これにより、ユーザには、図４Ｂに示されるように、表示部１１２に表示されたフォーカスアイコン３１１が被写体３０２と同位置に存在するように見える。つまり、ユーザは、そのフォーカスアイコンの虚像位置から被写体に合焦していることを容易に把握することができる。つまり、ユーザは、焦点距離をより容易に把握することができる。
【０１３７】
もし、被写体３０２が図５に示すようにaよりもbだけ手前に位置する場合、システムコントローラ２１１は、フォーカスアイコン３１１の両眼視差や輻輳角を制御して、フォーカスアイコン３１１の虚像位置もbだけ手前に表現させる。その際、システムコントローラ２１１が、フォーカスアイコン３１１の虚像位置（両眼視差や輻輳角の設定）のみを制御するようにしてもよい。ただし、その場合、図５Ｂの例のように、被写体３０２は、図４Ｂの場合よりも大きくなるのに対して、フォーカスアイコン３１１の大きさは図４Ｂの例と同様になる。したがって、被写体３０２とフォーカスアイコン３１１の大きさの関係が変化する（被写体３０２に対してフォーカスアイコン３１１が小さくなる）ので、フォーカスアイコン３１１の虚像位置が近くなるのにフォーカスアイコン３１１の大きさが小さくなることにより遠くなったように感じる、といったユーザに違和感を与える可能性がある。
【０１３８】
そこで、システムコントローラ２１１が、図５Ｃの例のように、表示部１１２に表示されるフォーカスアイコン３１１の大きさをそのフォーカスアイコン３１１の虚像位置に応じて変化させるようにしてもよい。例えば、フォーカスアイコン３１１の虚像位置が近づく（虚像距離が小さくなる）程、フォーカスアイコン３１１を大きく表示させるようにしてもよい。なお、このフォーカスアイコン３１１の大きさの変化量は虚像位置の変化量と比例するようにしてもよいし、より大きさの変化を強調するように、虚像位置によってその変化量が変わるようにしてもよい。例えば、虚像位置が近いほど、フォーカスアイコン３１１の大きさの変化量が大きくなるようにしてもよい。
【０１３９】
また、図６Ａに示されるように被写体３０２がaよりもcだけ奥に存在する場合、システムコントローラ２１１は、フォーカスアイコン３１１の両眼視差や輻輳角を制御して、フォーカスアイコン３１１の虚像位置もcだけ奥に表現させる。その際、システムコントローラ２１１が、フォーカスアイコン３１１の虚像位置（両眼視差や輻輳角の設定）のみを制御するようにしてもよい。ただし、その場合、図６Ｂの例のように、被写体３０２は、図４Ｂの場合よりも小さくなるのに対して、フォーカスアイコン３１１の大きさは図４Ｂの例と同様になる。したがって、被写体３０２とフォーカスアイコン３１１の大きさの関係が変化する（被写体３０２に対してフォーカスアイコン３１１が大きくなる）ので、フォーカスアイコン３１１の虚像位置が遠くなるのにフォーカスアイコン３１１の大きさが大きくなることにより近くなったように感じる、といったユーザに違和感を与える可能性がある。
【０１４０】
そこで、システムコントローラ２１１が、図６Ｃの例のように、表示部１１２に表示されるフォーカスアイコン３１１の大きさをそのフォーカスアイコン３１１の虚像位置に応じて変化させるようにしてもよい。例えば、フォーカスアイコン３１１の虚像位置が遠くなる（虚像距離が大きくなる）程、フォーカスアイコン３１１を小さく表示させるようにしてもよい。なお、このフォーカスアイコン３１１の大きさの変化量は虚像位置の変化量と比例する（虚像位置に関わらず一定である）ようにしてもよいし、より大きさの変化を強調するように、虚像位置によってその変化量が変わるようにしてもよい。例えば、虚像位置が遠いほど、フォーカスアイコン３１１の大きさの変化量が小さくなるようにしてもよい。
【０１４１】
なお、フォーカスアイコン３１１の虚像距離（虚像位置）を変更するには、システムコントローラ２１１は、右眼用画像と左眼用画像のそれぞれにおいて、フォーカスアイコン３１１の表示位置を変化させることで可能になる。例えば、図４Ａのように、虚像距離をaとしたときの輻輳角をαとし、図５Ａのように、虚像距離aからbだけ近づいた時の輻輳角をβとし、図６Ａのように、虚像距離aからcだけ遠ざかったときの輻輳角をγとし、左右の瞳間距離をDとする。仮にD＝61.5mm，a＝4000mmとすると、α＝53分となる。
【０１４２】
ここで表示部１１２（右眼用表示部１１２Ａおよび左眼用表示部１１２Ｂのそれぞれ）における１画素分を３分とすると、フォーカスアイコン３１１の表示位置を所定の位置から水平方向に１画素分、内側にずらすとβ＝56分となり、b＝225mmとなる。
【０１４３】
また、表示部１１２（右眼用表示部１１２Ａおよび左眼用表示部１１２Ｂのそれぞれ）におけるフォーカスアイコン３１１の表示位置を所定の位置から水平方向に１画素分、外側にずらしたとすると、γ＝50分となり、c＝228mmとなる。
【０１４４】
このように、フォーカスアイコンの表示位置を変化させることで輻輳角が変わることから、虚像距離を任意の位置に替えることができる。
【０１４５】
なお、例えば、システムコントローラ２１１が、フォーカスアイコン３１１の虚像距離を、測距によって計測されたユーザ３０１（透過型HMD１００）と被写体３０２との距離に完全に一致するように調整しなくでも、フォーカスアイコン３１１と被写体３０２との前後関係が一致していれば、ユーザはどこにピントを合わせているかを把握することへの補助になり、同様の効果が得られる。
【０１４６】
なお、例えば、焦点距離調整後、ユーザ３０１が透過型HMD１００の向き（すなわち撮像方向）を変える等することにより、表示部１１２の表示領域において、フォーカスアイコン３１１が存在するように見える位置の手前に現実空間の物体が位置するようになった場合、システムコントローラ２１１は、その前後関係を表現するように、フォーカスアイコン３１１の、その物体と重なる部分を表示しないようにしてもよい。例えば、フォーカスアイコン３１１と現実空間の物体の位置関係が、その物体によってフォーカスアイコン３１１の全体が隠れるような関係になった場合、システムコントローラ２１１は、フォーカスアイコン３１１を表示させないようにしてもよい。
【０１４７】
図３に戻り、ステップＳ１０６の処理が終了すると、処理はステップＳ１０７に進む。また、ステップＳ１０１において、例えばユーザからの指示が受け付けられておらず、焦点距離を調整しないと判定された場合、処理は、ステップＳ１０７に進む。
【０１４８】
ステップＳ１０７において、システムコントローラ２１１は、被写体を撮像するか否かを判定する。例えば、センサ部２２１においてユーザからの、被写体を撮像する指示が受け付けられる等した場合、システムコントローラ２１１は、処理をステップＳ１０８に進める。
【０１４９】
ステップＳ１０８において、システムコントローラ２１１は、撮像制御部２５３を介して撮像部２５１を制御し、被写体を撮像し、撮像画像の画像データを生成させる。
【０１５０】
撮像画像の画像データが得られると、処理はステップＳ１０９に進む。また、ステップＳ１０７において、例えば、センサ部２２１においてユーザからの、被写体を撮像する指示が受け付けられておらず、被写体を撮像しないと判定された場合、システムコントローラ２１１は、処理をステップＳ１０９に進める。
【０１５１】
ステップＳ１０９において、システムコントローラ２１１は、撮像処理を終了するか否かを判定する。例えばセンサ部２２１においてユーザ等から撮像終了の指示が受け付けられておらず、撮像を続けると判定された場合、システムコントローラ２１１は、処理をステップＳ１０１に戻し、それ以降の処理を実行させる。
【０１５２】
また、ステップＳ１０９において、例えば、センサ部２２１においてユーザ等から撮像終了の指示が受け付けられる等して、撮像処理を終了すると判定された場合、システムコントローラ２１１は、撮像処理を終了する。
【０１５３】
以上のように撮像処理を行うことにより、透過型HMD１００（システムコントローラ２１１）は、各部を制御し、焦点距離を示すフォーカスアイコンの立体視画像を、その虚像距離を焦点距離に合わせるように両眼視差や輻輳角を制御して、表示部１１２に表示させることができる。これにより、ユーザは、焦点距離をより容易に把握することができる。
【０１５４】
＜焦点距離調整の具体例＞
次に、焦点距離の調整の様子の例について説明する。フォーカスアイコン３１１の位置は、表示部１１２の表示領域の所定の位置（例えば中央）に固定するようにしてもよい。図７にその例を示す。
【０１５５】
例えば、図７Ａのように、表示部１１２の表示領域内に現実空間の物体である被写体３２１乃至被写体３２３が存在するとする。ユーザが指示を入力する等して、カメラ機能が起動されると、図７Ｂに示されるように、例えば表示部１１２の表示領域の中央にフォーカスアイコン３１１が表示される。
【０１５６】
図７Ｃに示されるように、ユーザは、顔の方向を変えることにより透過型HMD１００の向き（撮像の方向）を変え、所望の被写体３２２がフォーカスアイコン３１１と重畳させる。
【０１５７】
この状態において、焦点距離の測定が実行されると、被写体３２２までの距離が測定される。そして、フォーカスアイコン３１１の虚像距離がその測定された被写体３２２までの距離と一致するように、フォーカスアイコン３１１の両眼視差や輻輳角、並びにフォーカスアイコン３１１の大きさが調整される。これにより、図７Ｃに示されるように、表示部１１２に表示されるフォーカスアイコン３１１の虚像位置や大きさが、被写体３２２までの距離に合うように変化し、ピントが被写体３２２に合ったことをユーザに知らせる。この際、音によるフィードバックがあっても良い。
【０１５８】
その状態で、ユーザ等が撮像を指示すると撮像が行われ、撮像画像の画像データが得られる。以上のような焦点距離調整や撮像の実行指示は、ユーザが透過型HMD１００若しくはその撮影機能に関連するデバイスにタッチしたり、多段階押し込みボタンを操作したり、音声を発したりすることで入力される。なお、焦点距離を調整させたり、カメラ機能を起動させたりすることにより、被写体の撮像までの処理が行われるようにしてもよい。
【０１５９】
なお、焦点距離調整のトリガとしてユーザ等の指示入力が必要な場合、図７Ｃの状態から、図７Ｄのように、ユーザは、顔の方向を変えることにより透過型HMDの向き（撮像の方向）を変え、フォーカスアイコン３１１の位置を被写体３２２からずらしても、焦点距離は維持される。つまり、図７Ｄの状態においても、被写体３２２に合焦している。
【０１６０】
このようにすることにより、ユーザは、より容易に、焦点距離を維持したまま撮像画像の構図をより自由に設定することができる。
【０１６１】
なお、フォーカスアイコン３１１の形状は任意である。例えば、図７Ｅに示されるように四角形であってもよい。また、例えば、図７Ｆに示されるように、フォーカスアイコン３１１だけでなく、撮像画像の画角を示す画像である四角枠３３１が表示部１１２に表示されるようにしてもよい。なお、この画像は、立体視画像でなくてもよい。
【０１６２】
また、表示領域内におけるフォーカスアイコン３１１の表示位置は可変としてもよい。例えば、フォーカスアイコン３１１の表示位置（焦点距離を合わせる対象とする物体の位置）がユーザの視線と連動する（ユーザの視線の先に位置する被写体に合焦させる）ようにしてもよい。図８にその例を示す。
【０１６３】
例えば、図８Ａのように、図７Ａの場合と同様に、表示部１１２の表示領域内に現実空間の物体である被写体３２１乃至被写体３２３が存在するとする。ユーザが指示を入力する等して、カメラ機能が起動されると、図８Ｂに示されるように、例えば表示部１１２の表示領域の中央にフォーカスアイコン３１１が表示される。
【０１６４】
この状態において、図８Ｃに示されるように、ユーザが視線を移動させると、センサ部２２１によりその視線が検出され、フォーカスアイコン３１１が、その視線に応じた位置に移動する。図８Ｃの例の場合、ユーザは、被写体３２２に視線を合わせている。そのため、フォーカスアイコン３１１は、被写体３２２と重畳する位置に移動する。
【０１６５】
そして、この状態において、焦点距離の測定が実行されると、図７の例と同様に、被写体３２２までの距離が測定される。そして、フォーカスアイコン３１１の虚像距離がその測定された被写体３２２までの距離と一致するように、フォーカスアイコン３１１の両眼視差や輻輳角、並びにフォーカスアイコン３１１の大きさが調整される。これにより、図８Ｄに示されるように、表示部１１２に表示されるフォーカスアイコン３１１の虚像位置や大きさが、被写体３２２までの距離に合うように変化し、ピントが被写体３２２に合ったことをユーザに知らせる。この際、音によるフィードバックがあっても良い。
【０１６６】
このようにすることにより、ユーザは、より容易に、焦点距離を維持したまま撮像画像の構図をより自由に設定することができる。
【０１６７】
もちろん、図８の例の場合も、図７の場合と同様に、視線の向きを変えても、ユーザ等が焦点距離調整の指示を入力しない限り、焦点距離が固定されるようにしてもよい。また、この場合も、フォーカスアイコン３１１の形状は任意である。また、例えば、フォーカスアイコン３１１だけでなく、撮像画像の画角を示す画像である四角枠３３１が表示部１１２に表示されるようにしてもよい。なお、この画像は、立体視画像でなくてもよい。
【０１６８】
以上においては、表示部１１２が光を透過する透過型ディスプレイであるように説明したが、この表示部１１２は、光を透過しない非透過型のディスプレイであってもよい。例えば、表示部１１２（非透過型ディスプレイ）には、表示オブジェクト（フォーカスアイコン）が、撮像部２５１において得られる撮り込み画像（スルー画とも称する）に重畳され表示されるようにしてもよい。その場合も、上述した透過型ディスプレイの場合と同様に、表示オブジェクト（フォーカスアイコン）の虚像位置が焦点距離に対応する位置となるように、その両眼視差、輻輳角、大きさ等が調整されるようにすればよい。つまり、本技術は、例えば、透過型HMD１００だけでなく非透過型のHMDにも適用することができる。
【０１６９】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、ネットワークや記録媒体からインストールされる。
【０１７０】
この記録媒体は、例えば、図２に示されるように、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されているリムーバブルメディア２６４により構成される。このリムーバブルメディア２６４には、磁気ディスク（フレキシブルディスクを含む）や光ディスク（CD-ROMやDVDを含む）が含まれる。さらに、光磁気ディスク（MD（Mini Disc）を含む）や半導体メモリ等も含まれる。
【０１７１】
その場合、プログラムは、それらのリムーバブルメディアをドライブに装着することにより、記憶部２６１にインストールすることができる。
【０１７２】
また、このプログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することもできる。その場合、プログラムは、各装置の通信部２６２で受信し、記憶部２６１にインストールすることができる。
【０１７３】
その他、このプログラムは、システムコントローラ２１１のROMや記憶部２６１に、あらかじめインストールしておくこともできる。
【０１７４】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１７５】
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１７６】
また、上述した各ステップの処理は、上述した各装置、若しくは、上述した各装置以外の任意の装置において、実行することができる。その場合、その処理を実行する装置が、上述した、その処理を実行するのに必要な機能（機能ブロック等）を有するようにすればよい。また、処理に必要な情報を、適宜、その装置に伝送するようにすればよい。
【０１７７】
また、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、全ての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。
【０１７８】
また、以上において、１つの装置（または処理部）として説明した構成を分割し、複数の装置（または処理部）として構成するようにしてもよい。逆に、以上において複数の装置（または処理部）として説明した構成をまとめて１つの装置（または処理部）として構成されるようにしてもよい。また、各装置（または各処理部）の構成に上述した以外の構成を付加するようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置（または処理部）の構成の一部を他の装置（または他の処理部）の構成に含めるようにしてもよい。
【０１７９】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１８０】
例えば、本技術は、１つの機能を、ネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
【０１８１】
また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０１８２】
さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０１８３】
また、本技術は、これに限らず、このような装置またはシステムを構成する装置に搭載するあらゆる構成、例えば、システムLSI（Large Scale Integration）等としてのプロセッサ、複数のプロセッサ等を用いるモジュール、複数のモジュール等を用いるユニット、ユニットにさらにその他の機能を付加したセット等（すなわち、装置の一部の構成）として実施することもできる。
【０１８４】
なお、本技術は以下のような構成も取ることができる。
（１）  撮像部と、
前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部と、
前記撮像部の焦点距離を調整する焦点距離調整部と、
前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、前記左眼用画像と前記右眼用画像とを生成して前記表示部に表示させる表示制御部と
を備える撮像装置。
（２）  前記表示制御部は、前記表示オブジェクトの大きさを、前記焦点距離に応じて設定する
（１）、（３）乃至（１２）のいずれかに記載の撮像装置。
（３）  前記表示部は、前記左眼用画像を表示する左眼用画像表示部と、前記右眼用画像を表示する右眼用画像表示部とを有する
（１）、（２）、（４）乃至（１２）のいずれかに記載の撮像装置。
（４）  前記撮像装置の筐体は、ユーザの頭部に、前記左眼用画像表示部が前記ユーザの左眼前方の近傍に位置し、前記右眼用画像表示部が前記ユーザの右眼前方の近傍に位置するように装着される
（１）乃至（３）、（５）乃至（１２）のいずれかに記載の撮像装置。
（５）  前記表示制御部は、前記撮像部による撮像の画角を示す画像を前記表示部にさらに表示させる
（１）乃至（４）、（６）乃至（１２）のいずれかに記載の撮像装置。
（６）  前記焦点距離調整部は、ユーザに操作されて前記焦点距離を調整する
（１）乃至（５）、（７）乃至（１２）のいずれかに記載の撮像装置。
（７）  被写体までの距離を測定する距離測定部をさらに備え、
前記焦点距離調整部は、前記距離測定部により測定された前記距離に合わせるように、前記焦点距離を調整する
（１）乃至（６）、（８）乃至（１２）のいずれかに記載の撮像装置。
（８）  前記距離測定部は、前記撮像領域の所定の位置の被写体までの距離を測定する
（１）乃至（７）、（９）乃至（１２）のいずれかに記載の撮像装置。
（９）  前記所定の位置は、前記撮像領域の、前記表示部の表示領域の中央に視える位置である
（１）乃至（８）、（１０）乃至（１２）のいずれかに記載の撮像装置。
（１０）  前記被写体の顔を検出する顔検出部をさらに備え、
前記距離測定部は、前記顔検出部により検出された前記被写体の顔までの距離を測定する
（１）乃至（９）、（１１）、（１２）のいずれかに記載の撮像装置。
（１１）  ユーザの視線の方向を検出する視線検出部をさらに備え、
前記距離測定部は、前記視線検出部により検出された前記ユーザが視線を合わせた被写体までの距離を測定する
（１）乃至（１０）、（１２）のいずれかに記載の撮像装置。
（１２）  前記被写体までの距離の測定の実行指示を受け付ける指示受付部をさらに備え、
前記距離測定部は、前記指示受付部により受け付けられた前記実行指示に基づいて、前記被写体までの距離を測定する
（１）乃至（１１）のいずれかに記載の撮像装置。
（１３）  撮像部の焦点距離を調整し、
前記焦点距離を示す表示オブジェクトが前記焦点距離に対応する奥行き位置に視えるように、立体視画像の左眼用画像と右眼用画像とを生成して、前記撮像部の撮像領域の少なくとも一部を透過的に視ることができ、左眼用画像と右眼用画像とからなる立体視画像を表示する表示部に表示させ、
前記撮像部により前記被写体を撮像する
撮像方法。
【符号の説明】
【０１８５】
１００  透過型HMD，  １１１  筐体，  １１２  表示部，  １１３  ホール，  １３１  筐体，  １３２  表示部，  １３３  ホール，  １５１  ケーブル，  １５２  コントロールボックス，  ２１１  システムコントローラ，  ２２１  センサ部，  ２２２  センサ制御部，  ２２３  センサ信号処理部，  ２３１  画像生成部，  ２３２  表示画像処理部，  ２３３  表示駆動部，  ２３４  表示制御部，  ２４１  音声生成部，  ２４２  音声出力部，  ２４３  音声入力部，  ２４４  音声信号処理部，  ２５１  撮像部，  ２５２  撮像信号処理部，  ２５３  撮像制御部，  ２６１  記憶部，  ２６２  通信部，  ２６３  ドライブ，  ２６４  リムーバブルメディア，  ３０１  ユーザ，  ３０２  被写体，  ３１１  フォーカスアイコン，  ３２１乃至３２３  被写体，  ３３１  四角枠
【図１】
2015149633.tif 000003
【図２】
2015149633.tif 000004
【図３】
2015149633.tif 000005
【図４】
2015149633.tif 000006
【図５】
2015149633.tif 000007
【図６】
2015149633.tif 000008
【図７】
2015149633.tif 000009
【図８】
2015149633.tif 000010