(57)【要約】  本技術の一形態に係る情報処理装置は、取得部と、表示制御部とを具備する。前記取得部は、ユーザの姿勢に関する姿勢情報を取得する。前記表示制御部は、前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する。
2019124158.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの姿勢に関する姿勢情報を取得する取得部と、
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する表示制御部と
を具備する情報処理装置。
【請求項２】
請求項１に記載の情報処理装置であって、
前記第１の情報は、前記ユーザが選択した映像コンテンツ、及び外部の映像の少なくとも一方を含む
情報処理装置。
【請求項３】
請求項１に記載の情報処理装置であって、
前記第２の情報は、前記ユーザへの通知情報、メニュー情報、及び外部の環境情報の少なくとも１つを含む
情報処理装置。
【請求項４】
請求項１に記載の情報処理装置であって、
前記表示制御部は、前記ユーザの視野の中心を基準として、前記第１の情報の表示位置を設定する
情報処理装置。
【請求項５】
請求項４に記載の情報処理装置であって、
前記表示制御部は、前記ユーザの視野の中心を基準として、前記第１の情報が表示される主表示領域を設定する
情報処理装置。
【請求項６】
請求項５に記載の情報処理装置であって、
前記表示制御部は、前記主表示領域を基準として、前記第２の情報の表示位置を設定する
情報処理装置。
【請求項７】
請求項５に記載の情報処理装置であって、
前記表示制御部は、前記主表示領域の周縁に前記第２の情報を表示可能である
情報処理装置。
【請求項８】
請求項５に記載の情報処理装置であって、
前記表示制御部は、前記主表示領域に重畳して前記第２の情報を表示可能である
情報処理装置。
【請求項９】
請求項１に記載の情報処理装置であって、
前記姿勢情報は、前記ユーザが使用するシートのリクライニング角度、及び前記ユーザを撮影したユーザ画像の少なくとも一方を含む
情報処理装置。
【請求項１０】
請求項９に記載の情報処理装置であって、
前記姿勢情報は、前記ユーザ画像に基づいて検出された前記ユーザの視野に関する視野情報を含む
情報処理装置。
【請求項１１】
請求項１に記載の情報処理装置であって、
前記表示制御部は、前記第１及び前記第２の情報の各々と異なる種類の第３の情報の表示を制御することが可能である
情報処理装置。
【請求項１２】
請求項１１に記載の情報処理装置であって、
前記表示制御部は、前記被表示面の、前記第１の情報が表示される主表示領域以外の領域へ、前記第３の情報を表示する
情報処理装置。
【請求項１３】
請求項１２に記載の情報処理装置であって、
前記第３の情報は、前記主表示領域に表示される前記第１の情報により表現される空間を拡張する拡張画像、及び前記第１の情報に関する付加情報の少なくとも一方を含む
情報処理装置。
【請求項１４】
請求項１に記載の情報処理装置であって、
前記表示制御部は、前記ユーザが操作入力を行うための操作用画像の表示位置を制御することが可能である
情報処理装置。
【請求項１５】
請求項１４に記載の情報処理装置であって、
前記表示制御部は、前記姿勢情報に基づいて、前記ユーザの周囲に前記操作用画像が表示される操作領域を設定する
情報処理装置。
【請求項１６】
請求項１に記載の情報処理装置であって、さらに、
前記姿勢情報に基づいて、音声の出力方向を制御する音声制御部を具備する
情報処理装置。
【請求項１７】
ユーザの姿勢に関する姿勢情報を取得し、
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する
ことをコンピュータシステムが実行する情報処理方法。
【請求項１８】
ユーザの姿勢に関する姿勢情報を取得するステップと、
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御するステップと
をコンピュータシステムに実行させるプログラム。
【請求項１９】
表示装置と、
ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面と、
前記ユーザの姿勢に関する姿勢情報を取得する取得部と、
前記取得された姿勢情報に基づいて、前記表示装置により前記被表示面に表示される第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する表示制御部と
を具備する表示システム。
【請求項２０】
ユーザを移動させることが可能な移動体であって、
表示装置と、
ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面と、
前記ユーザの姿勢に関する姿勢情報を取得する取得部と、
前記取得された姿勢情報に基づいて、前記表示装置により前記被表示面に表示される第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する表示制御部と
を具備する移動体。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像の表示を制御する情報処理装置、情報処理方法、プログラム、表示システム、及び移動体に関する。
【背景技術】
【０００２】
特許文献１には、利用者の姿勢に合わせて映像コンテンツの表示位置を選択する表示システムが記載されている。この表示システムでは、リクライニング機構を備えた家具等に、利用者の姿勢を検出する姿勢検出手段が設けられる。そして姿勢検出手段により検出された利用者の姿勢に基づいて、複数の表示位置から映像コンテンツを表示する表示位置が選択される。これにより、利用者は楽な姿勢で映像コンテンツを視認することが可能となる（特許文献１の明細書段落［０００７］［００２７］［００３０］［００３２］図２等）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−９２９５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
このように、ユーザの姿勢等に応じて情報の表示を制御する技術が開発されており、ユーザの使用感を向上しつつ、高いエンタテイメント性を発揮することが可能な技術が求められている。【０００５】
以上のような事情に鑑み、本技術の目的は、ユーザの使用感を向上しつつ、高いエンタテイメント性を発揮することが可能な情報処理装置、情報処理方法、プログラム、表示システム、及び移動体を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本技術の一形態に係る情報処理装置は、取得部と、表示制御部とを具備する。
前記取得部は、ユーザの姿勢に関する姿勢情報を取得する。
前記表示制御部は、前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する。【０００７】
この情報処理装置では、ユーザの周囲の前方から上方にかけて覆うように配置された被表示面に第１の情報と第１の情報とは異なる種類の第２の情報とが表示される。これら互いに種類の異なる第１及び第２の情報は、ユーザの姿勢情報に基づいてその表示位置がそれぞれ制御される。これにより、ユーザの使用感を向上しつつ、高いエンタテイメント性を発揮することが可能となる。【０００８】
前記第１の情報は、前記ユーザが選択した映像コンテンツ、及び外部の映像の少なくとも一方を含んでもよい。
これにより、映像コンテンツや外部の映像等を被表示面に表示することが可能となり、様々な視聴体験を提供することが可能となる。【０００９】
前記第２の情報は、前記ユーザへの通知情報、メニュー情報、及び外部の環境情報の少なくとも１つを含んでもよい。
これにより、例えば通知情報等の様々な情報を無理なく提示することが可能となる。【００１０】
前記表示制御部は、前記ユーザの視野の中心を基準として、前記第１の情報の表示位置を設定してもよい。
例えばユーザの視野の中心等に第１の情報を表示することで、快適な視聴体験を提供することが可能となる。この結果、ユーザの使用感を向上することが可能となる。【００１１】
前記表示制御部は、前記ユーザの視野の中心を基準として、前記第１の情報が表示される主表示領域を設定してもよい。
これにより、ユーザの視野に合わせて第１の情報を適正に表示することが可能となり、ユーザの使用感を十分に向上することが可能となる。【００１２】
前記表示制御部は、前記主表示領域を基準として、前記第２の情報の表示位置を設定してもよい。
これにより、第１の情報が表示される主表示領域に合わせて第２の情報を表示することが可能となる。この結果、第２の情報の表示を容易に制御することが可能となる。【００１３】
前記表示制御部は、前記主表示領域の周縁に前記第２の情報を表示可能であってもよい。
これにより、第１の情報を阻害することなく第２の情報を適正に表示することが可能となり、ユーザの視聴体験を阻害することなく様々な情報を提示することが可能となる。【００１４】
前記表示制御部は、前記主表示領域に重畳して前記第２の情報を表示可能であってもよい。
これにより、ユーザの視聴体験を阻害することなく様々な情報を容易に提示することが可能となる。【００１５】
前記姿勢情報は、前記ユーザが使用するシートのリクライニング角度、及び前記ユーザを撮影したユーザ画像の少なくとも一方を含んでもよい。
これにより、ユーザの姿勢等を高精度に検出することが可能となり、第１及び第２の情報の表示位置等を精度よく制御することが可能となる。【００１６】
前記姿勢情報は、前記ユーザ画像に基づいて検出された前記ユーザの視野に関する視野情報を含んでもよい。
これにより、例えば第１及び第２の情報の表示位置を詳細に制御することが可能となり、ユーザの使用感を十分に向上させることが可能となる。【００１７】
前記表示制御部は、前記第１及び前記第２の情報の各々と異なる種類の第３の情報の表示を制御することが可能であってもよい。
例えば第３の情報を表示することで、高いエンタテイメント性を発揮することが可能となる。【００１８】
前記表示制御部は、前記被表示面の、前記第１の情報が表示される主表示領域以外の領域へ、前記第３の情報を表示してもよい。
これにより、被表示面を活用した表示が可能となり、エンタテイメント性の高い視聴体験を提供することが可能となる。【００１９】
前記第３の情報は、前記主表示領域に表示される前記第１の情報により表現される空間を拡張する拡張画像、及び前記第１の情報に関する付加情報の少なくとも一方を含んでもよい。
これにより、優れたエンタテイメント性を発揮することが可能となる。【００２０】
前記表示制御部は、前記ユーザが操作入力を行うための操作用画像の表示位置を制御することが可能であってもよい。
操作用画像を表示することで、操作入力を容易に行うことが可能となり、ユーザの使用感を向上することが可能となる。【００２１】
前記表示制御部は、前記姿勢情報に基づいて、前記ユーザの周囲に前記操作用画像が表示される操作領域を設定してもよい。
これにより、操作用画像を適正な位置に表示することが可能となり、ユーザの使用感を十分に向上することが可能となる。【００２２】
前記情報処理装置は、さらに、前記姿勢情報に基づいて、音声の出力方向を制御する音声制御部を具備してもよい。
これにより、エンタテイメント性の高い視聴体験を提供することが可能となる。【００２３】
本技術の一形態に係る情報処理方法は、コンピュータシステムにより実行される情報処理方法であって、ユーザの姿勢に関する姿勢情報を取得することを含む。
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置が制御される。【００２４】
本技術の一形態に係るプログラムは、コンピュータシステムに以下のステップを実行させる。
ユーザの姿勢に関する姿勢情報を取得するステップ。
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御するステップ。【００２５】
本技術の一形態に係る表示システムは、表示装置と、被表示面と、取得部と、表示制御部とを具備する。
前記被表示面は、ユーザの周囲を少なくとも前方から上方に向かって覆うように配置される。
前記取得部は、前記ユーザの姿勢に関する姿勢情報を取得する。
前記表示制御部は、前記取得された姿勢情報に基づいて、前記表示装置により前記被表示面に表示される第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する。【００２６】
本技術の一形態に係る移動体は、ユーザを移動させることが可能な移動体であって、前記表示装置と、前記被表示面と、前記取得部と、前記表示制御部とを具備する。
【発明の効果】
【００２７】
以上のように、本技術によれば、ユーザの使用感を向上しつつ、高いエンタテイメント性を発揮することが可能となる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
【図面の簡単な説明】
【００２８】
【図１】本技術の一実施形態に係る車両の内部空間の一例を示す模式図である。
【図２】車両の制御を行う車両制御システムの構成例を示すブロック図である。
【図３】図２に示す出力制御部の構成例を示すブロック図である。
【図４】表示対象面に表示を行うための表示装置の構成例を示す模式図である。
【図５】表示対象面への表示制御の基本的な処理例を示すフローチャートである。
【図６】表示対象面への表示位置の制御の一例を説明するための模式図である。
【図７】主情報、副情報、及び関連情報の表示位置の一例を示す模式図である。
【図８】主情報、副情報、及び関連情報の一例を示す模式図である。
【図９】副情報の表示パターンの一例を示す模式図である。
【図１０】地図情報の表示パターンの一例である。
【図１１】サービスからの通知情報の表示パターンの一例である。
【図１２】車両からの通知情報の表示パターンの一例である。
【図１３】メニュー情報の表示パターンの一例である。
【図１４】設定リストの表示パターンの一例である。
【図１５】詳細情報の表示パターンの一例である。
【図１６】コンテンツコントローラの表示パターンの一例である。
【図１７】副情報の表示方法の一例を示す模式図である。
【図１８】ユーザによる操作入力の一例を示す模式図である。
【図１９】操作領域の表示位置の一例を示す模式図である。
【図２０】操作領域の表示位置の一例を示す模式図である。
【図２１】操作用画像の表示パターンの一例を示す模式図である。
【発明を実施するための形態】
【００２９】
以下、本技術に係る実施形態を、図面を参照しながら説明する。
【００３０】
［車両の構成］
図１は、本技術の一実施形態に係る車両の内部空間の一例を示す模式図である。車両１０は、図示しないエンジンやモータ等の駆動部を含む駆動系システム１０８（図２参照）を備え、ユーザ１を搭乗させて移動することが可能である。また車両１０は、目的地までの自動走行が可能な自動運転機能を備えている。なお車両１０は、本実施形態に係る移動体の一例である。
【００３１】
図１では、車両１０の進行方向が矢印２を用いて模式的に図示されている。矢印２が示す方向（図中の右方向）が車両１０の前方となり、矢印２が示す方向とは反対の方向（図中の左方向）が車両１０の後方となる。また車両１０の内部には、車両１０の前後方向に長い内部空間１１が設けられる。内部空間１１は、車両１０の前方側及び後方側に湾曲した形状を有する。なお図１では、内部空間１１の側面の図示が省略されている。
【００３２】
車両１０の内部空間１１には、搭乗シート１２、及び表示対象面１３が設けられる。搭乗シート１２は、車両１０の前方に向けて、内部空間１１の底面に設置される。従って車両１０に搭乗したユーザ１は、車両１０の前方を向いて搭乗シート１２に着席することになる。また搭乗シート１２は図示しないリクライニング機構を有する。本実施形態では、搭乗シート１２は、ユーザ１が使用するシートに相当する。
【００３３】
リクライニング機構は、搭乗シート１２の背もたれの角度等を含むリクライニング角度を調整することが可能である。調整されたリクライニング角度は、例えば角度検出センサ等により検出される。なおリクライニング機構により調整可能なリクライニング角度の数や種類等は限定されない。例えば搭乗シート１２のヘッドレスト、座面、フットレスト（図示省略）等の角度が適宜調整可能であってもよい。リクライニング機構を用いることで、例えばユーザ１は楽な姿勢で車両１０に搭乗することが可能である。
【００３４】
表示対象面１３は、ユーザ１の周囲を少なくとも前方から上方に向かって覆うように配置される。図１に示す例では、車両１０の内部空間１１の壁面に沿って、搭乗シート１２（ユーザ１）の前方から上方にかけて表示対象面１３が配置される。以下では表示対象面１３の下端側（内部空間１１の底面側）から、表示対象面１３の形状に沿って上端側に向かう方向を表示対象面１３の縦方向と記載する。また縦方向と垂直な表示対象面１３上の方向を表示対象面１３の横方向と記載する。本実施形態では、表示対象面１３は、被表示面に相当する。
【００３５】
本開示において、「ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面」とは、例えば着座姿勢のユーザ１の少なくとも前方から頭上に向かって配置された面（表示対象面１３）や、少なくとも車両１０のフロントウィンドウからセンターピラー（Ｂピラー）にかけて配置された面（表示対象面１３）のことである。従って、表示対象面１３は、少なくともユーザ１の前方となる領域（フロントウィンドウ等）からユーザ１の上方となる領域（内部空間１１の上面側等）を覆うことになる。例えば、搭乗シート１２の背もたれのリクライニング角度を調整してユーザ１の姿勢（腰の角度等）が変化した場合であっても、ユーザ１は表示対象面１３を容易に視認することが可能である。すなわち、表示対象面１３は、ユーザ１の姿勢の変化に係らず、ユーザ１の視野に適正に収まるように配置されるとも言える。表示対象面１３の形状やサイズ等は限定されない。
【００３６】
表示対象面１３には、映像コンテンツやユーザ１への通知等を含む様々な情報が表示される。従ってユーザ１は、車両１０に搭乗しながら表示対象面１３に表示される様々な情報を視認することが可能である。映像コンテンツ等を表示するための構成については、図３等を用いて後に詳しく説明する。
【００３７】
また車両１０の内部空間１１には、図示しない操作入力部、及び音響システムが設けられる。
【００３８】
操作入力部は、ユーザ１が操作入力を行うための操作用画像を表示する。また操作入力部は、操作用画像を用いたユーザ１の操作入力を検出する。操作入力部としては、例えばセンシング用カメラを備えたプロジェクタ等が用いられる。すなわちプロジェクタにより操作用画像が投影され、センシング用カメラにより操作用画像に対するユーザ１の操作が検出される。操作入力部は、例えば内部空間１１の側面や、搭乗シート１２の近傍に適宜設置される。操作入力部の構成や設置位置等は限定されない。
【００３９】
図１には、操作用画像が表示される操作領域１４が、点線で模式的に図示されている。図１に示す例では、搭乗シート１２のアームレスト（肘掛）の周辺に操作領域１４が設けられる。ユーザ１は、手元に表示された操作用画像等に従って所定の操作入力を行うことが可能である。なお操作用画像が表示される領域（操作領域１４）は、適宜変更することが可能である。この点については後述する。
【００４０】
音響システムは、複数のスピーカで構成される。複数のスピーカは、例えば内部空間１１で３次元的に音声等を再生可能なように適宜配置される。これにより、音の聞こえてくる方向や距離等を表現することが可能となる。また本実施形態では、表示対象面１３による音波の反射等を利用した音響システムが構成される。これにより、例えばユーザ１の正面に向けて音声等を出力するといった演出が可能となり、臨場感のある音環境を実現することが可能である。
【００４１】
この他、車両１０の内部空間１１には、ユーザ１を撮影するカメラやユーザ１の生体情報を検出する生体センサ等が適宜設けられる。車両１０の内部空間１１に設けられる機器等は限定されない。例えば車両１０の内部空間１１には、後述する入力部１０１が備える入力装置やデータ取得部１０２が備えるセンサ類等が適宜配置されてよい。
【００４２】
［車両制御システムの構成］
図２は、車両１０の制御を行う車両制御システム１００の構成例を示すブロック図である。車両制御システム１００は、車両１０に設けられ、車両１０の各種の制御を行うシステムである。なお、以下、車両１０を他の車両と区別する場合、自車又は自車両と称する。
【００４３】
車両制御システム１００は、入力部１０１、データ取得部１０２、通信部１０３、車内機器１０４、出力制御部１０５、出力部１０６、駆動系制御部１０７、駆動系システム１０８、ボディ系制御部１０９、ボディ系システム１１０、記憶部１１１、及び、自動運転制御部１１２を備える。入力部１０１、データ取得部１０２、通信部１０３、出力制御部１０５、駆動系制御部１０７、ボディ系制御部１０９、記憶部１１１、及び、自動運転制御部１１２は、通信ネットワーク１２１を介して、相互に接続されている。通信ネットワーク１２１は、例えば、ＣＡＮ（Controller Area Network）、ＬＩＮ（Local Interconnect Network）、ＬＡＮ（Local Area Network）、又は、ＦｌｅｘＲａｙ（登録商標）等の任意の規格に準拠した車載通信ネットワークやバス等からなる。なお、車両制御システム１００の各部は、通信ネットワーク１２１を介さずに、直接接続される場合もある。
【００４４】
なお、以下、車両制御システム１００の各部が、通信ネットワーク１２１を介して通信を行う場合、通信ネットワーク１２１の記載を省略するものとする。例えば、入力部１０１と自動運転制御部１１２が、通信ネットワーク１２１を介して通信を行う場合、単に入力部１０１と自動運転制御部１１２が通信を行うと記載する。
【００４５】
入力部１０１は、搭乗者が各種のデータや指示等の入力に用いる装置を備える。例えば、入力部１０１は、タッチパネル、ボタン、マイクロフォン、スイッチ、及び、レバー等の操作デバイス、並びに、音声やジェスチャ等により手動操作以外の方法で入力可能な操作デバイス等を備える。また、例えば、入力部１０１は、赤外線若しくはその他の電波を利用したリモートコントロール装置、又は、車両制御システム１００の操作に対応したモバイル機器若しくはウェアラブル機器等の外部接続機器であってもよい。入力部１０１は、搭乗者により入力されたデータや指示等に基づいて入力信号を生成し、車両制御システム１００の各部に供給する。
【００４６】
データ取得部１０２は、車両制御システム１００の処理に用いるデータを取得する各種のセンサ等を備え、取得したデータを、車両制御システム１００の各部に供給する。
【００４７】
例えば、データ取得部１０２は、車両１０の状態等を検出するための各種のセンサを備える。具体的には、例えば、データ取得部１０２は、ジャイロセンサ、加速度センサ、慣性計測装置（ＩＭＵ）、及び、アクセルペダルの操作量、ブレーキペダルの操作量、ステアリングホイールの操舵角、エンジン回転数、モータ回転数、若しくは、車輪の回転速度等を検出するためのセンサ等を備える。
【００４８】
また、例えば、データ取得部１０２は、車両１０の外部の情報を検出するための各種のセンサを備える。具体的には、例えば、データ取得部１０２は、ＴｏＦ（Time Of Flight）カメラ、ステレオカメラ、単眼カメラ、赤外線カメラ、及び、その他のカメラ等の撮像装置（車外カメラ）を備える。また、例えば、データ取得部１０２は、天候又は気象等を検出するための環境センサ、及び、車両１０の周囲の物体を検出するための周囲情報検出センサを備える。環境センサは、例えば、雨滴センサ、霧センサ、日照センサ、雪センサ等からなる。周囲情報検出センサは、例えば、超音波センサ、レーダ、ＬｉＤＡＲ（Light Detection and Ranging、Laser Imaging Detection and Ranging）、ソナー等からなる。
【００４９】
さらに、例えば、データ取得部１０２は、車両１０の現在位置を検出するための各種のセンサを備える。具体的には、例えば、データ取得部１０２は、航法衛星であるＧＮＳＳ（Global Navigation Satellite System）衛星からの衛星信号（以下、ＧＮＳＳ信号と称する）を受信するＧＮＳＳ受信機等を備える。
【００５０】
また、例えば、データ取得部１０２は、車内の情報を検出するための各種のセンサを備える。具体的には、例えば、データ取得部１０２は、運転者を撮像する撮像装置（車内カメラ）、運転者の生体情報を検出する生体センサ、及び、車室内の音声を集音するマイクロフォン等を備える。生体センサは、例えば、座面又はステアリングホイール等に設けられ、座席に座っている搭乗者又はステアリングホイールを握っている運転者の生体情報を検出する。
【００５１】
通信部１０３は、車内機器１０４、並びに、車外の様々な機器、サーバ、基地局等と通信を行い、車両制御システム１００の各部から供給されるデータを送信したり、受信したデータを車両制御システム１００の各部に供給したりする。なお、通信部１０３がサポートする通信プロトコルは、特に限定されるものではなく、また、通信部１０３が、複数の種類の通信プロトコルをサポートすることも可能である。
【００５２】
例えば、通信部１０３は、無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Near Field Communication）、又は、ＷＵＳＢ（Wireless USB）等により、車内機器１０４と無線通信を行う。また、例えば、通信部１０３は、図示しない接続端子（及び、必要であればケーブル）を介して、ＵＳＢ（Universal Serial Bus）、ＨＤＭＩ（High-Definition Multimedia Interface）、又は、ＭＨＬ（Mobile High-definition Link）等により、車内機器１０４と有線通信を行う。
【００５３】
さらに、例えば、通信部１０３は、基地局又はアクセスポイントを介して、外部ネットワーク（例えば、インターネット、クラウドネットワーク又は事業者固有のネットワーク）上に存在する機器（例えば、アプリケーションサーバ又は制御サーバ）との通信を行う。また、例えば、通信部１０３は、Ｐ２Ｐ（Peer To Peer）技術を用いて、車両１０の近傍に存在する端末（例えば、歩行者若しくは店舗の端末、又は、ＭＴＣ（Machine Type Communication）端末）との通信を行う。さらに、例えば、通信部１０３は、車車間（Vehicle to Vehicle）通信、路車間（Vehicle to Infrastructure）通信、車両１０と家との間（Vehicle to Home）の通信、及び、歩車間（Vehicle to Pedestrian）通信等のＶ２Ｘ通信を行う。
また、例えば、通信部１０３は、ビーコン受信部を備え、道路上に設置された無線局等から発信される電波あるいは電磁波を受信し、現在位置、渋滞、通行規制又は所要時間等の情報を取得する。
【００５４】
車内機器１０４は、例えば、搭乗者が有するモバイル機器若しくはウェアラブル機器、車両１０に搬入され若しくは取り付けられる情報機器、及び、任意の目的地までの経路探索を行うナビゲーション装置等を含む。
【００５５】
出力制御部１０５は、車両１０の搭乗者又は車外に対する各種の情報の出力を制御する。例えば、出力制御部１０５は、視覚情報（例えば、画像データ）及び聴覚情報（例えば、音声データ）のうちの少なくとも１つを含む出力信号を生成し、出力部１０６に供給することにより、出力部１０６からの視覚情報及び聴覚情報の出力を制御する。具体的には、例えば、出力制御部１０５は、データ取得部１０２の異なる撮像装置により撮像された画像データを合成して、俯瞰画像又はパノラマ画像等を生成し、生成した画像を含む出力信号を出力部１０６に供給する。また、例えば、出力制御部１０５は、衝突、接触、危険地帯への進入等の危険に対する警告音又は警告メッセージ等を含む音声データを生成し、生成した音声データを含む出力信号を出力部１０６に供給する。
【００５６】
出力制御部１０５は、本実施形態に係る情報処理装置に相当し、例えばＣＰＵ、ＲＡＭ、及びＲＯＭ等のコンピュータに必要なハードウェアを有する。ＣＰＵがＲＯＭに予め記録されている本技術に係るプログラムをＲＡＭにロードして実行することにより、本技術に係る情報処理方法が実行される。
【００５７】
出力制御部１０５の具体的な構成は限定されず、例えばＦＰＧＡ（Field Programmable Gate Array）等のＰＬＤ(Programmable Logic Device)、その他ＡＳＩＣ（Application Specific Integrated Circuit）等のデバイスが用いられてもよい。出力制御部１０５については、図３等を参照して後に詳しく説明する。
【００５８】
出力部１０６は、車両１０の搭乗者又は車外に対して、視覚情報又は聴覚情報を出力することが可能な装置を備える。例えば、出力部１０６は、表示装置、インストルメントパネル、オーディオスピーカ等の音響システム、ヘッドホン、搭乗者が装着する眼鏡型ディスプレイ等のウェアラブルデバイス、プロジェクタ、ランプ等を備える。なお、出力部１０６が備える表示装置は、図１に示す表示対象面１３に各種の情報を表示するための表示機構として機能する。
【００５９】
駆動系制御部１０７は、各種の制御信号を生成し、駆動系システム１０８に供給することにより、駆動系システム１０８の制御を行う。また、駆動系制御部１０７は、必要に応じて、駆動系システム１０８以外の各部に制御信号を供給し、駆動系システム１０８の制御状態の通知等を行う。
【００６０】
駆動系システム１０８は、車両１０の駆動系に関わる各種の装置を備える。例えば、駆動系システム１０８は、内燃機関又は駆動用モータ等の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、舵角を調節するステアリング機構、制動力を発生させる制動装置、ＡＢＳ（Antilock Brake System）、ＥＳＣ（Electronic Stability Control）、並びに、電動パワーステアリング装置等を備える。
【００６１】
ボディ系制御部１０９は、各種の制御信号を生成し、ボディ系システム１１０に供給することにより、ボディ系システム１１０の制御を行う。また、ボディ系制御部１０９は、必要に応じて、ボディ系システム１１０以外の各部に制御信号を供給し、ボディ系システム１１０の制御状態の通知等を行う。
【００６２】
ボディ系システム１１０は、車体に装備されたボディ系の各種の装置を備える。例えば、ボディ系システム１１０は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、パワーシート、ステアリングホイール、空調装置、及び、各種ランプ（例えば、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカ、フォグランプ等）等を備える。
【００６３】
記憶部１１１は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ＨＤＤ（Hard Disc Drive）等の磁気記憶デバイス、半導体記憶デバイス、光記憶デバイス、及び、光磁気記憶デバイス等を備える。記憶部１１１は、車両制御システム１００の各部が用いる各種プログラムやデータ等を記憶する。例えば、記憶部１１１は、ダイナミックマップ等の３次元の高精度地図、高精度地図より精度が低く、広いエリアをカバーするグローバルマップ、及び、車両１０の周囲の情報を含むローカルマップ等の地図データを記憶する。
【００６４】
自動運転制御部１１２は、自律走行又は運転支援等の自動運転に関する制御を行う。具体的には、例えば、自動運転制御部１１２は、車両１０の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両１０の衝突警告、又は、車両１０のレーン逸脱警告等を含むＡＤＡＳ（Advanced Driver Assistance System）の機能実現を目的とした協調制御を行う。また、例えば、自動運転制御部１１２は、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行う。自動運転制御部１１２は、検出部１３１、自己位置推定部１３２、状況分析部１３３、計画部１３４、及び、動作制御部１３５を備える。
【００６５】
検出部１３１は、自動運転の制御に必要な各種の情報の検出を行う。検出部１３１は、車外情報検出部１４１、車内情報検出部１４２、及び、車両状態検出部１４３を備える。
【００６６】
車外情報検出部１４１は、車両制御システム１００の各部からのデータ又は信号に基づいて、車両１０の外部の情報の検出処理を行う。例えば、車外情報検出部１４１は、車両１０の周囲の物体の検出処理、認識処理、及び、追跡処理、並びに、物体までの距離の検出処理を行う。検出対象となる物体には、例えば、車両、人、障害物、構造物、道路、信号機、交通標識、道路標示等が含まれる。また、例えば、車外情報検出部１４１は、車両１０の周囲の環境の検出処理を行う。検出対象となる周囲の環境には、例えば、天候、気温、湿度、明るさ、及び、路面の状態等が含まれる。車外情報検出部１４１は、検出処理の結果を示すデータを自己位置推定部１３２、状況分析部１３３のマップ解析部１５１、交通ルール認識部１５２、及び、状況認識部１５３、並びに、動作制御部１３５の緊急事態回避部１７１等に供給する。
【００６７】
車内情報検出部１４２は、車両制御システム１００の各部からのデータ又は信号に基づいて、車内の情報の検出処理を行う。例えば、車内情報検出部１４２は、運転者の認証処理及び認識処理、運転者の状態の検出処理、搭乗者の検出処理、及び、車内の環境の検出処理等を行う。検出対象となる運転者の状態には、例えば、体調、覚醒度、集中度、疲労度、視線方向等が含まれる。検出対象となる車内の環境には、例えば、気温、湿度、明るさ、臭い等が含まれる。車内情報検出部１４２は、検出処理の結果を示すデータを状況分析部１３３の状況認識部１５３、及び、動作制御部１３５の緊急事態回避部１７１等に供給する。
【００６８】
車両状態検出部１４３は、車両制御システム１００の各部からのデータ又は信号に基づいて、車両１０の状態の検出処理を行う。検出対象となる車両１０の状態には、例えば、速度、加速度、舵角、異常の有無及び内容、運転操作の状態、パワーシート（搭乗シート１２）の位置及び傾き、ドアロックの状態、並びに、その他の車載機器の状態等が含まれる。車両状態検出部１４３は、検出処理の結果を示すデータを状況分析部１３３の状況認識部１５３、及び、動作制御部１３５の緊急事態回避部１７１等に供給する。
【００６９】
自己位置推定部１３２は、車外情報検出部１４１、及び、状況分析部１３３の状況認識部１５３等の車両制御システム１００の各部からのデータ又は信号に基づいて、車両１０の位置及び姿勢等の推定処理を行う。また、自己位置推定部１３２は、必要に応じて、自己位置の推定に用いるローカルマップ（以下、自己位置推定用マップと称する）を生成する。自己位置推定用マップは、例えば、ＳＬＡＭ（Simultaneous Localization and Mapping）等の技術を用いた高精度なマップとされる。自己位置推定部１３２は、推定処理の結果を示すデータを状況分析部１３３のマップ解析部１５１、交通ルール認識部１５２、及び、状況認識部１５３等に供給する。また、自己位置推定部１３２は、自己位置推定用マップを記憶部１１１に記憶させる。
【００７０】
状況分析部１３３は、車両１０及び周囲の状況の分析処理を行う。状況分析部１３３は、マップ解析部１５１、交通ルール認識部１５２、状況認識部１５３、及び、状況予測部１５４を備える。
【００７１】
マップ解析部１５１は、自己位置推定部１３２及び車外情報検出部１４１等の車両制御システム１００の各部からのデータ又は信号を必要に応じて用いながら、記憶部１１１に記憶されている各種のマップの解析処理を行い、自動運転の処理に必要な情報を含むマップを構築する。マップ解析部１５１は、構築したマップを、交通ルール認識部１５２、状況認識部１５３、状況予測部１５４、並びに、計画部１３４のルート計画部１６１、行動計画部１６２、及び、動作計画部１６３等に供給する。
【００７２】
交通ルール認識部１５２は、自己位置推定部１３２、車外情報検出部１４１、及び、マップ解析部１５１等の車両制御システム１００の各部からのデータ又は信号に基づいて、車両１０の周囲の交通ルールの認識処理を行う。この認識処理により、例えば、車両１０の周囲の信号の位置及び状態、車両１０の周囲の交通規制の内容、並びに、走行可能な車線等が認識される。交通ルール認識部１５２は、認識処理の結果を示すデータを状況予測部１５４等に供給する。
【００７３】
状況認識部１５３は、自己位置推定部１３２、車外情報検出部１４１、車内情報検出部１４２、車両状態検出部１４３、及び、マップ解析部１５１等の車両制御システム１００の各部からのデータ又は信号に基づいて、車両１０に関する状況の認識処理を行う。例えば、状況認識部１５３は、車両１０の状況、車両１０の周囲の状況、及び、車両１０の運転者の状況等の認識処理を行う。また、状況認識部１５３は、必要に応じて、車両１０の周囲の状況の認識に用いるローカルマップ（以下、状況認識用マップと称する）を生成する。状況認識用マップは、例えば、占有格子地図（Occupancy Grid Map）とされる。
【００７４】
認識対象となる車両１０の状況には、例えば、車両１０の位置、姿勢、動き（例えば、速度、加速度、移動方向等）、並びに、異常の有無及び内容等が含まれる。認識対象となる車両１０の周囲の状況には、例えば、周囲の静止物体の種類及び位置、周囲の動物体の種類、位置及び動き（例えば、速度、加速度、移動方向等）、周囲の道路の構成及び路面の状態、並びに、周囲の天候、気温、湿度、及び、明るさ等が含まれる。認識対象となる運転者の状態には、例えば、体調、覚醒度、集中度、疲労度、視線の動き、並びに、運転操作等が含まれる。
【００７５】
状況認識部１５３は、認識処理の結果を示すデータ（必要に応じて、状況認識用マップを含む）を自己位置推定部１３２及び状況予測部１５４等に供給する。また、状況認識部１５３は、状況認識用マップを記憶部１１１に記憶させる。
【００７６】
状況予測部１５４は、マップ解析部１５１、交通ルール認識部１５２及び状況認識部１５３等の車両制御システム１００の各部からのデータ又は信号に基づいて、車両１０に関する状況の予測処理を行う。例えば、状況予測部１５４は、車両１０の状況、車両１０の周囲の状況、及び、運転者の状況等の予測処理を行う。
【００７７】
予測対象となる車両１０の状況には、例えば、車両１０の挙動、異常の発生、及び、走行可能距離等が含まれる。予測対象となる車両１０の周囲の状況には、例えば、車両１０の周囲の動物体の挙動、信号の状態の変化、及び、天候等の環境の変化等が含まれる。予測対象となる運転者の状況には、例えば、運転者の挙動及び体調等が含まれる。
【００７８】
状況予測部１５４は、予測処理の結果を示すデータを、交通ルール認識部１５２及び状況認識部１５３からのデータとともに、計画部１３４のルート計画部１６１、行動計画部１６２、及び、動作計画部１６３等に供給する。
【００７９】
ルート計画部１６１は、マップ解析部１５１及び状況予測部１５４等の車両制御システム１００の各部からのデータ又は信号に基づいて、目的地までのルートを計画する。例えば、ルート計画部１６１は、グローバルマップに基づいて、現在位置から指定された目的地までのルートを設定する。また、例えば、ルート計画部１６１は、渋滞、事故、通行規制、工事等の状況、及び、運転者の体調等に基づいて、適宜ルートを変更する。ルート計画部１６１は、計画したルートを示すデータを行動計画部１６２等に供給する。
【００８０】
行動計画部１６２は、マップ解析部１５１及び状況予測部１５４等の車両制御システム１００の各部からのデータ又は信号に基づいて、ルート計画部１６１により計画されたルートを計画された時間内で安全に走行するための車両１０の行動を計画する。例えば、行動計画部１６２は、発進、停止、進行方向（例えば、前進、後退、左折、右折、方向転換等）、走行車線、走行速度、及び、追い越し等の計画を行う。行動計画部１６２は、計画した車両１０の行動を示すデータを動作計画部１６３等に供給する
【００８１】
動作計画部１６３は、マップ解析部１５１及び状況予測部１５４等の車両制御システム１００の各部からのデータ又は信号に基づいて、行動計画部１６２により計画された行動を実現するための車両１０の動作を計画する。例えば、動作計画部１６３は、加速、減速、及び、走行軌道等の計画を行う。動作計画部１６３は、計画した車両１０の動作を示すデータを、動作制御部１３５の加減速制御部１７２及び方向制御部１７３等に供給する。
【００８２】
動作制御部１３５は、車両１０の動作の制御を行う。動作制御部１３５は、緊急事態回避部１７１、加減速制御部１７２、及び、方向制御部１７３を備える。
【００８３】
緊急事態回避部１７１は、車外情報検出部１４１、車内情報検出部１４２、及び、車両状態検出部１４３の検出結果に基づいて、衝突、接触、危険地帯への進入、運転者の異常、車両１０の異常等の緊急事態の検出処理を行う。緊急事態回避部１７１は、緊急事態の発生を検出した場合、急停車や急旋回等の緊急事態を回避するための車両１０の動作を計画する。緊急事態回避部１７１は、計画した車両１０の動作を示すデータを加減速制御部１７２及び方向制御部１７３等に供給する。
【００８４】
加減速制御部１７２は、動作計画部１６３又は緊急事態回避部１７１により計画された車両１０の動作を実現するための加減速制御を行う。例えば、加減速制御部１７２は、計画された加速、減速、又は、急停車を実現するための駆動力発生装置又は制動装置の制御目標値を演算し、演算した制御目標値を示す制御指令を駆動系制御部１０７に供給する。
【００８５】
方向制御部１７３は、動作計画部１６３又は緊急事態回避部１７１により計画された車両１０の動作を実現するための方向制御を行う。例えば、方向制御部１７３は、動作計画部１６３又は緊急事態回避部１７１により計画された走行軌道又は急旋回を実現するためのステアリング機構の制御目標値を演算し、演算した制御目標値を示す制御指令を駆動系制御部１０７に供給する。
【００８６】
［出力制御部の構成］
図３は、図２に示す出力制御部１０５の構成例を示すブロック図である。出力制御部１０５は、姿勢取得部２０と、表示情報制御部２１と、操作入力制御部２２と、音響制御部２３とを有する。例えば、出力制御部１０５のＣＰＵが所定のプログラムを実行することで、各機能ブロックが構成される。
【００８７】
姿勢取得部２０は、ユーザ１の姿勢に関する姿勢情報を取得する。上記したように、搭乗シート１２に着席したユーザ１は、リクライニング機構等を用いて、自身の姿勢を調整することが可能である（図１参照）。この時の座面に対するユーザ１の上半身の角度や、ユーザ１の頭部の向き等に関する情報が姿勢情報として取得される。本実施形態では、姿勢取得部２０は、取得部に相当する。
【００８８】
本実施形態では、ユーザ１の姿勢情報として、ユーザ１が使用する搭乗シート１２のリクライニング角度が読み込まれる。リクライニング角度は、例えば搭乗シート１２（リクライニング機構）に設けられた角度センサ３０により検出される。リクライニング角度を用いることで、例えばユーザ１の上半身の角度等を容易に算出することが可能である。
【００８９】
またユーザ１の姿勢情報として、ユーザ１を撮影したユーザ画像が読み込まれる。ユーザ画像は、例えば内部空間１１に配置された車内カメラ３１により撮影される。例えばユーザ画像に基づいて、人物の検出処理等を行うことで、ユーザ１の姿勢を詳細に検出することが可能である。
【００９０】
またユーザ画像に基づいて検出されたユーザ１の視野に関する視野情報が姿勢情報として用いられてもよい。例えば、ユーザ１の頭部３の位置や向き等から、ユーザ１が視認可能な範囲（ユーザ１の視野）が向けられている方向等を検出可能である。このようなユーザ１の視野の方向等を含む視野情報が、ユーザ１の姿勢情報として読み込まれてもよい。姿勢情報の種類等は限定されない。例えば、リクライニング機構により移動される、搭乗シート１２の前後方向の位置や、上下方向の高さ等が取得されてもよい。この他、ユーザ１の姿勢を表すことが可能な任意の情報が姿勢情報として用いられてよい。
【００９１】
表示情報制御部２１は、ユーザ１の姿勢情報に基づいて、表示対象面１３への各種の情報の表示を制御する。表示情報制御部２１は、表示内容決定部２４と、レイアウト制御部２５とを有する。
【００９２】
表示内容決定部２４は、表示対象面１３に表示される表示内容を決定する。本実施形態では、表示対象面１３に対して、主情報及び主情報とは異なる種類の副情報が表示される。主情報とは、例えばユーザ１の主な視聴対象となる情報（メインコンテンツ）である。副情報とは、例えばユーザ１により適宜参照される情報（サブコンテンツ）である。
【００９３】
主情報には、ユーザ１が選択した映像コンテンツが含まれる。例えば、ミュージックライブ、スポーツ、映画、ニュース等の様々な映像コンテンツが主情報として表示される（図８Ｂ及び図８Ｃ参照）。これらの映像コンテンツは、例えば記憶部１１１や通信部１０３から適宜読み込むことが可能である。
【００９４】
また主情報には外部の映像が含まれる。例えば、車外カメラ３２等により撮影された車両１０の前方の映像（図８Ａ参照）、ビデオ通話を用いた相手の映像、テレビ会議での会議室の映像等の外部の映像が主情報として表示される。
【００９５】
この他、主情報として用いられる情報は限定されない。例えば、車両１０（出力制御部１０５）の起動及び終了のタイミングや、ユーザ１により映像コンテンツが選択されていない場合等にデフォルトで表示される映像が主情報として表示されてもよい。また例えば、機械学習等を用いて、ユーザ１の嗜好等に合わせて自動的に選択された映像コンテンツ等が主情報として表示されてもよい。
【００９６】
副情報には、ユーザ１への通知情報が含まれる。例えばユーザ１に対してメール等の受信や電話の着信等を通知するためのアイコン等が副情報として表示される。また車両１０の異常や、経路の変更等を知らせる通知情報が適宜表示されてよい。
【００９７】
また副情報には、メニュー情報が含まれる。メニュー情報は、例えばユーザ１による操作入力が行われる場合に表示される情報であり、選択肢等を含む選択画像やパラメータ等を設定するための設定画像等を含む。また副情報には、外部の環境情報が含まれる。例えば内部空間１１の外の状況に関する情報（気温、天気等）や、車両１０の速度や現在位置の情報等が外部の環境情報として表示可能である。
【００９８】
副情報として用いられる情報は、これらの情報には限定されない。例えば、ユーザ１の生体情報（脈拍、血圧等）を示す情報が副情報として表示されてもよい。また、主情報として表示された映像コンテンツの詳細情報や、近隣の商店・飲食店等についての詳細情報等が副情報として表示されてもよい。また、機械学習等を用いて、ユーザ１の嗜好等に合わせて自動的に選択された任意の情報等が副情報として表示されてもよい。
【００９９】
このように、主情報及び副情報は、互いに種類の異なった情報である。本実施形態では、主情報は、第１の情報に相当し、副情報は、第２の情報に相当する。
【０１００】
例えば表示内容決定部２４は、主情報として表示対象面１３に表示する情報と、副情報として表示対象面１３に表示する情報とをそれぞれ決定する。すなわち、表示内容決定部２４は、表示対象面１３に表示される主情報及び副情報をそれぞれ選択するとも言える。
【０１０１】
主情報及び副情報の選択は、例えば表示対象面１３への表示に関する所定の指示情報に基づいて実行される。所定の指示情報には、操作入力を介したユーザ１による指示、通信部１０３等を介して受信された外部からの指示、所定のプログラム等に基づく車両１０からの指示等が含まれる。この他、指示情報を生成する方法等は限定されない。
【０１０２】
また表示対象面１３には、主情報及び副情報の各々と異なる種類の関連情報が表示される。関連情報としては、典型的には主情報の内容に関連した情報が用いられる。例えば表示内容決定部２４は、表示対象面１３に表示すると決定した主情報と関連する関連情報を選択することが可能である。本実施形態では、関連情報は、第３の情報に相当する。表示内容決定部２４による決定結果は、レイアウト制御部２５に出力される。
【０１０３】
レイアウト制御部２５は、ユーザ１の姿勢情報に基づいて、表示対象面１３への、主情報及び主情報とは異なる種類の副情報の各々の表示位置を制御する。すなわち、ユーザ１の姿勢に応じて、表示対象面１３における主情報の表示位置と副情報の表示位置とがそれぞれ設定されるとも言える。
【０１０４】
またレイアウト制御部２５は、表示対象面１３における主情報及び副情報の表示サイズを制御することが可能である。例えば、主情報及び副情報をそれぞれ拡大・縮小することで、各情報の表示サイズを調整するといった処理が実行される。以下では、表示対象面１３において、主情報が表示される領域を主表示領域と記載し、副情報が表示される領域を副表示領域と記載する。またレイアウト制御部２５は、関連情報の表示位置及び表示サイズを制御することが可能である。関連情報は、例えば主情報が表示される主表示領域に応じて表示される。
【０１０５】
このように、レイアウト制御部２５により、ユーザ１の姿勢情報に基づいて、表示対象面１３に表示される主情報、副情報、及び関連情報の各々のレイアウト（表示位置及び表示サイズ等）が設定される。このレイアウトに基づいて各情報を表示するための画像情報が生成される。生成された画像情報は、表示対象面１３に表示を行うための表示装置３３に出力される。
【０１０６】
図４は、表示対象面１３に表示を行うための表示装置３３の構成例を示す模式図である。図４Ａでは、表示装置３３としてプロジェクタ３６が用いられる。プロジェクタ３６が用いられる場合、表示対象面１３はスクリーン１５として構成される。すなわち、車両１０の内部空間１１には、ユーザ１の周囲を少なくとも前方から上方に向かって覆うように配置されたスクリーン１５が設けられる。
【０１０７】
プロジェクタ３６は、例えば車両１０の内部空間１１に、スクリーン１５（表示対象面１３）に対して画像を投影可能なように適宜配置される。図４Ａに示す例では、搭乗シート１２の後側の上方に配置されたプロジェクタ３６によりスクリーン１５に向けて画像が投影される。このように、プロジェクタ３６を用いることで、例えば所望の表示対象面１３を容易に構成することが可能である。
【０１０８】
なおプロジェクタ３６の配置や数等は限定されない。例えば、短焦点のプロジェクタ３６等を用いてユーザ１の足元から画像を投影するといった構成が採用されてもよい。また例えば複数のプロジェクタ３６を使って、スクリーン１５の領域ごとに画像を投影するといった構成が採用されてもよい。これにより、明るい画像表示等を容易に実現することが可能である。
【０１０９】
図４Ｂでは、表示装置３３として複数の平面ディスプレイ３７が用いられる。この場合、各平面ディスプレイ３７の表示面が、表示対象面１３として機能することになる。複数の平面ディスプレイ３７は、例えばユーザ１の周囲を少なくとも前方から上方に向かって覆うようにそれぞれ配置される。図４Ｂに示す例では、内部空間１１の内壁に沿って、互いに隣接して配置された３つの平面ディスプレイ３７が図示されている。
【０１１０】
このように、複数の平面ディスプレイ３７を配置することで、ユーザ１の前方から上方までを覆う表示対象面１３を容易に実現することが可能である。また例えば、他の用途に用いられる平面ディスプレイ３７等を転用することが可能となり、装置の製造コスト等を抑制することが可能となる。なお表示対象面１３を構成する平面ディスプレイ３７の数や配置等は、例えば車両１０の内部空間１１の形状やサイズ等に応じて適宜設定されてよい。
【０１１１】
図４Ｃでは、表示装置３３として曲面ディスプレイ３８が用いられる。の場合、曲面ディスプレイ３８の表示面が、表示対象面１３として機能することになる。従って、車両１０の内部空間１１には、ユーザ１の周囲を少なくとも前方から上方に向かって覆うように配置された曲面ディスプレイ３８が配置される。
【０１１２】
曲面ディスプレイ３８としては、例えば液晶や有機ＥＬ（Electro-Luminescence）等を用いた任意のディスプレイ装置が用いられてよい。曲面ディスプレイ３８を用いることで、解像度の高い高品質な画像を表示することが可能となり、没入感の高い視聴体験を提供することが可能となる。
【０１１３】
この他、表示対象面１３及び表示装置３３の具体的な構成等は限定されない。例えば内部空間１１の前方にフロントウィンドウ等が設けられるとする。この場合フロントウィンドウに液晶シャッター等の遮光機能を付加することで、投影用のスクリーン１５（表示対象面１３）とフロントウィンドウとの両方の機能を持たせることが可能である。例えばこのような構成が採用されてもよい。本実施形態では、表示装置３３及び出力制御部１０５により、表示システムが実現される。
【０１１４】
図３に戻り、操作入力制御部２２は、ユーザ１が操作入力を行うための操作用画像の表示位置を制御する。具体的には、ユーザ１の姿勢情報に基づいて、操作用画像の表示位置が算出される。従って、操作用画像が表示される位置は、ユーザ１の姿勢に合わせて変化することになる。操作用画像の表示位置の情報は、車両１０の内部空間１１の所定の位置に配置された操作入力部３４に出力される。そして操作入力部３４に備えられたプロジェクタにより、操作入力制御部２２により算出された表示位置に操作用画像が投影される。本実施形態では、表示情報制御部２１及び操作入力部３４により、表示制御部が実現される。
【０１１５】
音響制御部２３は、ユーザ１の姿勢情報に基づいて、音声の出力方向を制御する。すなわちユーザ１の姿勢に合わせて、音声が聞こえてくる方向が適宜変更される。例えば内部空間１１に配置された複数のスピーカ（音響システム３５）の角度等が調整される。また例えば、各スピーカに出力される音声信号について、音量制御、波形制御、及び帯域制御（イコライジング）等の音響制御が実行される。この他、音声の出力方向を制御する方法等は限定されない。本実施形態では、音響制御部２３は、音声制御部に相当する。
【０１１６】
図５は、表示対象面への表示制御の基本的な処理例を示すフローチャートである。図５に示す処理は、例えば、ユーザ１が車両１０に搭乗し、車両１０が起動されたタイミングで開始されるループ処理である。またこの処理は、例えば、運転を終了するための操作が行われたときに終了する。
【０１１７】
表示内容決定部２４により、表示対象面１３に表示される表示内容が決定される（ステップ１０１）。例えば表示対象面１３への表示に関する所定の指示情報に基づいて、表示対象面１３に表示される主情報、副情報、及び関連情報をそれぞれ決定する処理が実行される。
【０１１８】
図５に示すループ処理が実行されている間、ユーザ１による指示、外部からの指示、及び車両１０による指示等に基づいて様々な指示情報が生成される。例えば表示内容決定部２４により、ステップ１０１が実行されるタイミングで読み込まれている指示情報に基づいて、主情報、副情報、及び関連情報がそれぞれ選択される。
【０１１９】
また、指示情報の内容が直前のループ処理で用いられた内容と同じ場合、すなわち指示情報が変更されていない場合等には、直前のループ処理と同様の表示内容（主情報、副情報、及び関連情報）が選択される。
【０１２０】
なお、指示情報には、主情報を表示しない旨の指示、副情報を表示しない旨の指示、及び関連情報を表示しない旨の指示等が含まれる場合があり得る。従って、例えば主情報及び副情報のみを表示し関連情報を表示しない、あるいは主情報及び関連情報のみを表示し副情報を表示しないといった表示内容が決定されることもあり得る。
【０１２１】
このように、表示内容決定部２４は、ユーザ１等からの指示に合わせて表示対象面１３に表示される表示内容を適宜制御することが可能である。
【０１２２】
姿勢取得部２０により、ユーザ１の姿勢情報が取得される（ステップ１０２）。例えば搭乗シート１２の角度センサ３０により検出されたリクライニング角度が読み込まれる。また車内カメラ３１により撮影されたユーザ画像が読み込まれる。
【０１２３】
レイアウト制御部２５により、ユーザ１の姿勢情報に基づいて、表示対象面１３への表示位置が制御される（ステップ１０３）。
【０１２４】
図６は、表示対象面１３への表示位置の制御の一例を説明するための模式図である。図６には、搭乗シート１２と、搭乗シート１２を使用するユーザ１の頭部３と、表示対象面１３とが模式的に図示されている。図６の右側の図では、ユーザ１は背もたれを起こし車両１０の前方を向いて着席している。図６の中央の図では、ユーザ１は背もたれを傾けて着席している。図６の左側の図では、ユーザ１は背もたれをフラットに倒して仰向けの状態となっている。
【０１２５】
本実施形態では、ユーザ１の視野の中心を基準として、主情報の表示位置が設定される。本開示では、ユーザ１の視野の中心は、ユーザ１の視野の実質的な中心を含む。図６では、ユーザ１の視野４が点線で模式的に図示されている。またユーザ１の視野４の中心に向けられたユーザ１の視線方向（中心視線方向５）が矢印で模式的に図示されている。
【０１２６】
図６に示すように、ユーザ１が搭乗シート１２のリクライニング角度を変化させると、ユーザ１の視野４（中心視線方向５）が変化し、ユーザ１が視認可能な表示対象面１３の範囲が変化する。従って、ユーザ１の視野４の中心を基準とすることで、ユーザ１の姿勢が変化した場合であっても、主情報が視野４内に適正に収まるように、主情報の表示位置を適宜設定することが可能である。なお、ユーザ１の視野４が表示対象面１３のどの範囲に向けられているかといった情報は、ユーザ１の姿勢情報に基づいて算出可能である。
【０１２７】
本実施形態では、レイアウト制御部２５により、ユーザ１の視野４の中心を基準として、主情報が表示される主表示領域が設定される。例えばユーザ１の視野４の中心と、主情報が表示される主表示領域の中心とが略一致するように、主情報のレイアウト（表示位置・表示サイズ等）が適宜設定される。これにより、ユーザ１の正面にメインコンテンツ（主情報）を表示することが可能となり、ユーザ１は容易にメインコンテンツを視認することが可能となる。なお、図６では、表示対象面１３における主表示領域４０が点線により模式的に図示されている。
【０１２８】
主表示領域４０等を設定する方法は限定されない。例えば、リクライニング角度及びユーザ画像から、ユーザ１の頭部３の向き（中心視線方向５）等が算出される。そして中心視線方向５が、表示対象面１３と交差する位置が算出される。例えば表示対象面１３の交差位置が、主表示領域４０の中心に設定される。これにより、実際のユーザ１の姿勢に合わせて、高精度に主情報を表示させることが可能である。
【０１２９】
またユーザ１の姿勢や視線の方向等を算出することなく、主表示領域４０を設定することも可能である。例えば、搭乗シート１２のリクライニング角度と、その角度に応じた主情報の表示位置等が予め記録されたテーブル等が用いられてもよい。このようなテーブルを適宜参照することで、現在のリクライニング角度にあった主情報の表示位置等を容易に設定することが可能である。
【０１３０】
なお、ユーザ１の姿勢の変化が小さい場合や、一時的な変化である場合等には、主表示領域４０の設定を維持するといった処理が実行されてもよい。例えば、リクライニング角度の変化が小さい場合、あるいはユーザ１が一時的に首を曲げる等の動作を行った場合には、主情報の表示位置を変化させない。このような処理が実行されてもよい。これにより、表示位置が頻繁に変化するといった状況を回避することが可能となり、安定した視聴体験を提供することが可能である。
【０１３１】
主表示領域４０が設定されると、主表示領域４０を基準として、副情報の表示位置が設定される。また主情報と関連する関連情報は、表示対象面１３の主情報が表示される主表示領域４０以外の領域へ表示される。従って、副情報の表示位置及び関連情報の表示位置は、ユーザ１の姿勢に応じて変化することになる。副情報及び関連情報の表示位置等については、図７及び８等を用いて、後に詳しく説明する。
【０１３２】
このように、本実施形態では、ユーザ１の姿勢情報に基づいて、表示対象面１３に表示される主情報、副情報、及び関連情報の各々の表示位置等が適宜制御される。別の観点では、出力制御部１０５は、ユーザ１の姿勢に合わせて、表示対象面に表示される表示内容の全体のレイアウトを適宜制御することが可能であるとも言える。
【０１３３】
図７は、主情報、副情報、及び関連情報の表示位置の一例を示す模式図である。図７Ａでは、車両１０の前方の映像（移動風景）が主情報４１として表示される。図７Ｂでは、ミュージックビデオが主情報４１として表示される。図７Ｃでは、花火の映像が主情報４１として表示される。
【０１３４】
図８は、主情報４１、副情報４２、及び関連情報４３の一例を示す模式図である。図８Ａ〜図８Ｃの左側には、図７Ａ〜図７Ｃで用いられる主情報４１、副情報４２、及び関連情報４３の表示例が模式的に図示されている。また図８Ａ〜図８Ｃの中央には主情報４１及び関連情報４３の模式図が示されており、図８Ａ〜図８Ｃの右側には主情報４１の模式図が示されている。なお、図８に示す各図の外枠は、表示対象面１３の外枠に対応している。
【０１３５】
図７Ａでは、ユーザ１は、車両１０の前方に向かって搭乗シート１２に座っている。従ってユーザ１の視野４は車両１０の前方に向けられる。このユーザ１の視野４の中心を基準として、車両１０の外部の映像である移動風景（主情報４１）がユーザ１の正面に表示されるように主表示領域４０が設定される。
【０１３６】
主表示領域４０の外側には、関連情報が表示される。図８Ａの右側に示すように、表示対象面１３では移動風景の上側には余剰領域４４が生じる。この余剰領域４４に対して、図８Ａの中央に示すように、主情報４１（移動風景）に関連する関連情報（空の画像等）が表示される。このように、主表示領域４０に表示される主情報４１により表現される空間を拡張する拡張画像４５を関連情報４３として用いることが可能である。
【０１３７】
拡張画像４５を生成する方法等は限定されない。例えば図８Ａの移動風景の映像の上端に自然に接続することが可能な空の画像等が生成される。これにより、主表示領域４０の外側まで拡張画像４５を自然に広げることが可能である。また、移動風景における空の色等が解析され、移動風景の空の色になじむような色合いの空の画像が拡張画像４５として生成される。これにより、表示対象面１３の全体にわたって、移動風景が表示されているような視覚効果を発揮することが可能となり、開放的な空間を演出することが可能となる。
【０１３８】
レイアウト制御部２５は、主表示領域４０の周縁に副情報４２を表示可能である。ここで主表示領域４０の周縁とは、例えば主表示領域４０の中心から外れた位置であり、主表示領域４０の内側、領域の境界、及び外側等を含む。またレイアウト制御部２５は、主表示領域４０に重畳して副情報４２を表示可能である。これにより、ユーザ１が容易に視認可能な位置に副情報４２を表示することが可能となり、ユーザビリティを向上することが可能である。
【０１３９】
図７Ａに示す例では、主表示領域４０の中心の下側の位置に、副情報４２を表示する副表示領域４６が設定される。すなわち、副表示領域４６は、ユーザ１の視野４の中心の下側に設定される。副表示領域４６をユーザ１の視野４の中心の下側に設定することで、ユーザ１は例えば目線を少しずらすことで、容易に副情報４２を参照することが可能である。なお、実際の表示では、副表示領域４６を表す枠等は表示されない。
【０１４０】
また例えば、副表示領域４６は、主表示領域４０の外側で、かつ平均的なユーザ１の視野の範囲内に収まる領域に適宜設定することが可能である。すなわち、主表示領域４０に表示される主情報４１の視聴を阻害することなく、かつ、ユーザ１が副情報４２を容易に参照可能なように、副表示領域４６が設定されてもよい。この他、主表示領域４０の中心の上側、左側、及び右側といった、主表示領域４０の中心から外れた位置に副情報４２の表示位置を設定することが可能である。副情報４２の表示位置を設定する方法等は限定されない。例えば人間工学等に基づいて、ユーザ１が容易に視認可能であり、かつ主情報４１の視聴に影響を及ぼさない表示位置等に副表示領域４６が設定されてもよい。また主情報４１の種類等に応じて、副情報４２の表示位置等が適宜設定されてもよい。例えば、主情報４１として、ユーザ１が集中して視聴するような映像コンテンツ（映画、ＴＶ番組、ミュージックビデオ等）が表示される場合には、副情報４２は主表示領域４０の外側に表示される。また主情報４１として、車両１０の内部空間１１を演出するための映像コンテンツ（花火、山の風景、ＢＧＶ（Background Video）等）表示される場合には、副情報４２は主表示領域４０に重畳して表示される。このような処理が実行されてもよい。
【０１４１】
図７Ｂに示す例では、ユーザ１により選択されたミュージックビデオが主情報４１として表示される。ミュージックビデオが表示される主表示領域４０はユーザ１の前方に設定される。従ってユーザ１の上方側の表示対象面１３に余剰領域４４ができる。この場合、図８Ｂの右側及び中央に示すように、ミュージックビデオに関連した関連情報４３として、ステージを照らす照明等の画像（拡張画像４５）が用いられる。これによりステージの上方の空間が拡張されたような視覚効果を実現することが可能である。
【０１４２】
また例えば、ユーザ１が搭乗シート１２の背もたれを倒し、ユーザ１の視野４が上側にシフトすると、視野４のシフトに合わせて主表示領域４０が上側にシフトする。この結果、表示対象面１３の下側に余剰領域４４ができることもあり得る。このような場合、例えばステージの手前でライブを盛り上げる観客等の画像が新たに関連情報４３として表示される。
【０１４３】
またミュージックビデオの視聴中にユーザ１に対してビデオ通話がかかってきたとする。この場合、図８Ｂの左側に示すように、ビデオ通話を知らせるアイコン等が副情報４２として表示される。このように、様々な通知情報が副情報４２として表示可能である。
【０１４４】
ユーザ１は、操作用画像６０等を介して所定の入力操作が実行することで、ビデオ通話を開始あるいは拒否することが可能である。例えばビデオ通話が開始された場合には、通話する相手の映像が主情報４１として選択され、表示対象面１３に表示される。このような処理が実行されてもよい。
【０１４５】
図７Ｃに示す例では、花火の映像が主情報４１として表示される。また搭乗シート１２がリクライニングされており、ユーザ１の視野４は斜め上方に向けられている。従って花火の映像が表示される主表示領域４０は表示対象面１３の上側に設定され、表示対象面１３の下側には関連情報４３が表示される。
【０１４６】
図８Ｃの右側及び中央に示すように、花火の映像の関連情報４３として例えば山の風景等を含む拡張画像４５が表示される。これにより、花火の映像の下側の空間を拡張することが可能である。
【０１４７】
花火の映像では、花火を打ち上げる音や、花火が炸裂する音等が再生される。このような場合、例えば音響制御部２３により、ユーザ１の姿勢情報に基づいて、ユーザ１の上半身の傾きや頭部の位置等が検出される。そして、検出されたユーザ１の姿勢に合わせて、音声の出力方向が適宜制御される。
【０１４８】
例えば花火を打ち上げる音はユーザ１の足元から聞こえるように出力し、花火が炸裂する音はユーザ１の正面から聞こえるように出力するといった制御が実行される。これにより、臨場感のある音響空間が実現され、優れたエンタテイメント性を発揮することが可能となる。
【０１４９】
また花火の映像を視聴している最中に、ユーザ１により操作入力が行われるとする。この場合、図８Ｃの左側に示すように、各種の選択肢等を表すアイコン等を含むメニュー情報が副情報４２として表示される。なお、図８Ｃの左側の表示例は、ユーザ１が背もたれを倒している場合の表示例であり、ユーザ１の視野は花火の映像が表示される範囲に向けられる。従って副情報４２は、ユーザ１の視野の中心の下側に表示される。
【０１５０】
なお、ユーザ１による操作入力が所定の期間内に検出されなかった場合には、副情報４２を消して、主情報４１及び関連情報４３のみを表示するといった処理が実行されてもよい。これにより、ユーザ１は、拡張された花火の映像だけを視聴することが可能となり、余分な表示を気にすることなく視聴体験を継続することが可能となる。
【０１５１】
図７及び図８で説明した主情報、副情報、及び関連情報の他にも様々な表示を行うことが可能である。例えば野球やサッカー等のスポーツ中継のライブ映像等がメインコンテンツ（主情報４１）として表示されてもよい。この場合、関連情報４３として、例えば試合に出場している選手の氏名やポジション等の付加情報を示す画像等を用いることが可能である。このように、関連情報４３は、主情報４１に関する付加情報を含んでもよい。これにより、例えばユーザ１が要求している情報等を同時に表示するといったことが可能となり、エンタテイメント性の高い視聴体験を提供することが可能となる。
【０１５２】
図９〜図１６は、副情報４２の表示パターンの一例を示す模式図である。なお図９〜図１６の外枠は副表示領域４６を表す。実際の表示では、副表示領域４６を表す枠等は表示されない。
【０１５３】
図９は、車体情報５０、時間情報５１、及びユーザ１の生体情報５２の表示パターンの一例である。図９では車体情報として、車両１０の速度を表示する円形のインジケータ、バッテリー残量、後続可能距離等が表示される。この他、車体情報として、モータやエンジンの回転数、車両１０の位置や方位等が表示されてもよい。
【０１５４】
また図９の中央には、現在時刻が表示される。この他、目的地への到着予想時刻や、移動に要する時間等が表示されてもよい。図９の左側には、ユーザ１の生体情報５２が表示される。例えば、ユーザ１の血圧、心拍数、心拍のタイミング等が生体センサにより適宜取得され、グラフィカルに表示される。この他、ユーザ１の体温や血中酸素量等様々な生体情報５２が表示されてよい。
【０１５５】
例えば、図９に示す副情報４２は、車両１０（表示対象面１３）の初期起動時に表示される。すなわち、図９に示すような表示が車両１０の起動時にデフォルトで表示される。このような処理が実行されてもよい。
【０１５６】
図１０は、地図情報５３の表示パターンの一例である。図１０の左側及び中央には、図９で説明した車体情報５０及び時間情報５１が表示される。また図１０の右側には、車両１０の周辺の地図や車両１０の現在位置等を表すナビゲーション画像が表示される。地図情報  の具体的な構成は限定されない。
【０１５７】
例えば、図１０に示す副情報４２は、車両１０が走行を開始したタイミングで表示される。すなわち、図９に示す生体情報５２が、車両１０が走行を開始すると図１０に示す地図情報５３に切り替わる、このような処理が実行されてもよい。
【０１５８】
図１１は、サービスからの通知情報５４の表示パターンの一例である。例えばビデオ通話サービスにより、外部から通話要求が受信されると、図１１に示すような通知情報を表すアイコンが表示される。また通話要求を受けるために必要な操作（例えば所定の位置をタップする操作等）を表すメッセージ等が一緒に表示されてもよい。
【０１５９】
図１２は、車両１０からの通知情報５４の表示パターンの一例である。例えば車両１０が目的地に到着した場合に、到着を知らせる旨のメッセージ等が表示される。このように、表示対象面１３では、ユーザ１への通知情報５４がサブコンテンツ（副情報４２）として適宜表示される。これにより、ユーザ１は、必要な通知を適宜参照することが可能となる。
【０１６０】
図１３は、メニュー情報５５の表示パターンの一例である。図１３に示す例では、選択肢を表すアイコンが複数表示される。中央のアイコンは、選択対象とされている選択肢を表している。例えばユーザ１が所定の位置でスワイプ操作等を行うことで、選択対象となる選択肢を変更することが可能である。
【０１６１】
アイコンの内側には、例えば選択肢の内容を表すサムネイル等が表示される。これにより、直感的にメニューを選択することが可能となり、操作性を向上することが可能となる。また表示対象面１３には、選択を決定するために必要な操作を表すメッセージ等が表示される。これにより、ユーザ１は表示対象面１３を視認しながら、メッセージに従って手元の操作を行うことが可能となる。
【０１６２】
図１４は、設定リストの表示パターンの一例である。設定リストでは、表示対象面１３での表示に関する設定項目や、音響に関する設定項目、車両１０の動作に関する設定項目等の各種の設定項目を確認することが可能である。図１４では、設定項目のオン／オフの状態や、設定されている数値等が確認可能である。
【０１６３】
図１５は、詳細情報の表示パターンの一例である。例えば副情報４２として、ユーザ１が選択したコンテンツや、車両１０周辺の店舗等に関する詳細情報が表示可能である。図１５に示す例では、アイコン（サムネイル）とテキストとにより詳細情報が表示される。これに限定されず、例えば写真や動画等が詳細情報として表示されてもよい。
【０１６４】
図１６は、コンテンツコントローラの表示パターンの一例である。例えばユーザ１により選択された映像コンテンツ等が再生される場合に、コンテンツコントローラ等を用いて、映像コンテンツの停止／再生や、巻戻し／早送り等の制御が実行される。このような情報がサブコンテンツ（副情報４２）として表示されてもよい。
【０１６５】
なお、副情報４２の表示パターンは、図９〜図１６に示す表示パターンに限定されない。例えば副情報４２の種類に応じた任意の表示パターンが表示対象面１３に表示可能であってもよい。また副情報４２が表示される範囲（副表示領域４６）のサイズ等も限定されず、表示される副情報４２の数や、表示パターン６１の形状に応じて、副表示領域４６を適宜設定することが可能である。
【０１６６】
図１７は、副情報４２の表示方法の一例を示す模式図である。図１７では、副情報４２が表示される際に、アニメーションが用いられる。例えば副情報４２の表示位置（副表示領域４６）がユーザ１の視野４の中心の下側等に設定されているとする。例えば副情報４２は、ユーザ１の視野４の外側（画面の下側）から、設定された表示位置に向けて移動するように表示される。
【０１６７】
また副情報４２は、表示位置に近づくにつれて、色が濃くなる（透明度が下がる）ように表示される。すなわち、副情報４２が表示位置に向けて視野４の外側からフェードインするアニメーションが表示される。このようなアニメーションを用いることで、ユーザが視聴している映像コンテンツ等を邪魔しないように、ユーザ１の視認可能な範囲（視界最適エリア）に向けて副情報４２を表示させることが可能となる。
【０１６８】
また徐々に色を濃くする視覚効果等を用いることで、主情報４１等になじむように副情報４２を自然に表示することが可能である。また副情報４２が移動しながら表示されるため、ユーザ１は容易に副情報４２に気付くことが可能となる。
【０１６９】
副情報４２を表示する方法は限定されない。例えば副情報４２を左右方向に移動するようなアニメーションが用いられてもよい。あるいは、副情報４２が設定された表示位置から移動することなくフェードイン／フェードアウトするといった処理が実行されてもよい。この他、副情報４２を表示する任意の視覚処理が用いられてよい。
【０１７０】
図１８は、ユーザ１による操作入力の一例を示す模式図である。図１８の左側には、搭乗シート１２に座るユーザ１が模式的に図示されている。また図１８の右側には、ユーザ１が操作入力を行うための操作用画像６０が表示される操作領域１４が模式的に図示されている。
【０１７１】
本実施形態では、操作入力制御部２２により、ユーザ１の姿勢情報に基づいて、ユーザ１の周囲に操作用画像６０が表示される操作領域１４が設定される。ここで、ユーザ１の周囲とは、例えばユーザ１の手が届く範囲等であり、手を使った操作入力等が可能な範囲である。
【０１７２】
例えば、姿勢取得部２０により読み込まれた、搭乗シート１２のリクライニング角度やユーザ画像に基づいて、ユーザ１の手が届く範囲等が算出される。算出された範囲内の、画像が投影可能な領域等に、操作領域１４が設定される。
【０１７３】
また例えば、搭乗シート１２のリクライニング角度と、その角度に応じて設定される操作領域１４が予め記録されたテーブル等が用いられてもよい。この場合、現在のリクライニング角度に応じた操作領域１４が、テーブルから適宜読み込まれる。このような処理が実行されてもよい。
【０１７４】
図１８に示す例では、搭乗シート１２のアームレスト（肘掛）に操作領域１４が設定される。設定された操作領域１４の情報は図示しない操作入力部３４に出力され、操作入力部３４のプロジェクタにより操作領域１４に対して操作用画像６０が投影される。この結果、ユーザ１は手元に表示された操作用画像６０を用いて所定の操作入力を実行することが可能となる。
【０１７５】
操作用画像６０は、例えばユーザ１の指や手が置かれた位置が操作入力の起点となるように表示される。これにより、上下左右の選択、タッピング等の決定操作、スワイプ操作、及び回転操作等を容易に行うことが可能である。
【０１７６】
図１８では、操作用画像６０として左右の選択アイコンが表示される。例えばユーザ１が左のアイコンに振れる動作を行ったとする。この場合、操作入力部３４のセンシングカメラによりユーザ１の動作が検出され、左のアイコンが選択されたと判定される。同様に右のアイコンに振れる動作が行われると、右のアイコンが選択されたと判定される。このように、ユーザ１は操作用画像６０に従って手元の動作を行うことで任意の操作入力を行うことが可能である。なお、操作用画像６０については、図２１を参照して後に詳しく説明する。
【０１７７】
またユーザ１が搭乗シート１２の背もたれをフラットにした場合、アームレストにおいた手元を見ることが難しくなることが考えられる。このような場合には、ユーザ１が視認可能でありユーザ１の手が届く他の領域（例えば車両１０の内部空間１１の側面等）に、操作領域１４が設定され、設定された操作領域１４に操作用画像６０が表示される。これにより、ユーザ１の姿勢が変化した場合であっても、ユーザ１は容易に操作入力を実行することが可能となる。
【０１７８】
図１９及び図２０は、操作領域１４の表示位置の一例を示す模式図である。図１９では、４人乗りの車両１０を例に挙げて、操作領域１４の表示位置について説明する。車両１０には、４つの搭乗シート１２ａ〜１２ｄと、４つの操作入力部３４ａ〜３４ｄ（プロジェクタ及びセンシングカメラ）とがそれぞれ設けられる。
【０１７９】
操作入力部３４ａ及び操作入力部３４ｂは車両１０の右側及び左側のフロントピラー（Ａピラー）に設けられる。また操作入力部３４ｃ及び操作入力部３４ｄは車両１０の右側及び左側のセンターピラー（Ｂピラー）に設けられる。操作入力部３４の設置位置等は限定されない。
【０１８０】
１人のユーザ１が車両１０に搭乗する場合（左上の図）、当該ユーザ１の周囲に操作領域１４が設定される。例えばユーザ１が着席した前列右側の搭乗シート１２ａに最も近い、右側のフロントピラーに設置された操作入力部３４ａにより、ユーザ１の周囲に操作用画像６０が表示される。
【０１８１】
２人のユーザ１が車両１０に搭乗する場合（左下の図）、各ユーザ１の周囲にそれぞれ操作領域１４が設定される。このとき、前列右側のユーザ１の周辺には、操作入力部３４ａにより操作用画像６０が表示され、前列左側のユーザ１の周辺には、操作入力部３４ｂにより操作用画像６０が表示される。なお操作入力部３４ａ（３４ｂ）により前列左側（前列右側）のユーザ１の周辺に操作用画像６０が表示されてもよい。
【０１８２】
３人のユーザ１が車両１０に搭乗する場合（右上の図）、後側の搭乗シート１２にユーザ１が搭乗する。例えば図１９に示すように後側の搭乗シート１２ｃ及び１２ｄが隣接されたベンチタイプのシートである場合には、搭乗シート１２ｃ及び１２ｄの中間にユーザ１が着席することも考えられる。このような場合、センターピラーに設置された操作入力部３４ｃ及び３４ｄのどちらかを用いて、後列中央のユーザ１の周辺に操作用画像６０が適宜表示される。
【０１８３】
４人のユーザ１が車両１０に搭乗する場合（右下の図）、例えば後列右側のユーザ１の周辺には、操作入力部３４ｃにより操作用画像６０が表示され、後列左側のユーザ１の周辺には、操作入力部３４ｄにより操作用画像６０が表示される。このように、車両１０に搭乗する人数や、着席する位置等が変化した場合であっても、搭乗したユーザ１の各々に対して、適正に操作用画像６０等を表示することが可能である。
【０１８４】
図２０には、図１９に示す車両１０の内部空間１１を側面から見た場合の模式図が示されている。なお図２０では、図１９に示す操作入力部３４の図示が省略されている。図２０に示すように、操作用画像６０は、例えばドアパネル等の内部空間１１の側面に表示することが可能である。また後側の搭乗シート１２（リアシート）に着席したユーザ１に対しては、前側の搭乗シート１２（フロントシート）の背面部等に操作用画像６０を表示することも可能である。
【０１８５】
操作用画像６０の表示位置は限定されない。例えば車両１０の側面に設けられたウィンドウが遮光機能等を備えている場合には、ウィンドウに操作用画像６０を表示するといったことも可能である。この他、各ユーザ１の姿勢に合わせて、ユーザ１の手が届く任意の位置に操作用画像６０が表示されてよい。
【０１８６】
図２１は、操作用画像６０の表示パターンの一例を示す模式図である。図２１には、操作用画像６０の表示パターン６１ａ〜６１ｆが図示されている。例えばこれらの表示パターン６１ａ〜６１ｆが、操作入力部３４のプロジェクタにより、ユーザ１の姿勢に応じてユーザ１の周辺に適宜投影される。なお長方形の外枠は表示されない。
【０１８７】
表示パターン６１ａでは、左右の選択アイコンが表示される。表示パターン６１ａは、例えば図１３に示す選択肢を選択する際に表示される。表示パターン６１ｂでは、上下左右の４つの選択アイコンが表示される。また４つの選択アイコンの中央には、選択を決定するための決定アイコンがテキスト画像（ＥＮＴＥＲ）により表示される。このように操作用画像６０としてテキスト画像が表示されてもよい。
【０１８８】
表示パターン６１ｃでは、数字のテキスト画像により表示された選択アイコンが表示される。これにより、選択肢を直接選択するといったことが可能となる。数字の数等は限定されず、例えば０〜９までの数字を表す選択アイコン等が表示されてもよい。これにより数値入力が可能となる。
【０１８９】
表示パターン６１ｄでは、パラメータの値等を調整するための調整アイコンが表示される。例えばマイナス（−）及びプラス（＋）で表示された調整アイコンを用いることで、映像コンテンツの明るさや音量等のパラメータを容易に調整することが可能である。
【０１９０】
表示パターン６１ｅでは、円形のジョグダイヤルが表示される。ユーザ１は、例えばジョグダイヤルの周方向に沿って指先を回転させることで、パラメータの値等を容易に調整することが可能である。表示パターン６１ｆでは、円形のジョグダイヤルの内側に、表示パターン６１ｂに示す選択アイコン及び決定アイコンが表示される。例えばこのような操作用画像が表示されてもよい。
【０１９１】
なお、操作用画像６０の表示パターンは、図２１に示す表示パターン６１ａ〜６１ｆに限定されない。例えば操作入力の種類に応じた任意の表示パターンが操作用画像６０として用いられてよい。
【０１９２】
以上、本実施形態に係る出力制御部１０５は、ユーザ１の周囲の前方から上方にかけて覆うように配置された表示対象面１３に主情報４１と主情報４１とは異なる種類の副情報４２とが表示される。これら互いに種類の異なる主情報４１及び副情報４２は、ユーザ１の姿勢情報に基づいてその表示位置がそれぞれ制御される。これにより、ユーザ１の使用感を向上しつつ、高いエンタテイメント性を発揮することが可能となる。
【０１９３】
例えばディスプレイ等の表示装置を用いてテレビ番組や映画等を視聴する場合が考えられる。ユーザは、例えばディスプレイ等が設置された位置に注目することになる。この結果、ユーザに無理な姿勢をとらせてしまうといった可能性があり、ディスプレイ等の視聴がユーザの負担になる場合があり得る。
【０１９４】
本実施形態では、ユーザ１の前方から上方にかけて覆うように配置された表示対象面１３に対して主情報４１（メインコンテンツ）と副情報４２（サブコンテンツ）とが表示される。主情報４１及び副情報４２の表示位置は、ユーザ１の姿勢に合わせて適宜調整される。
【０１９５】
これにより、ユーザ１が搭乗シート１２をリクライニングして、ユーザ１の姿勢が変化した場合であっても、ユーザ１は無理な姿勢をとることなく、必要な情報を見続けることが可能となる。この結果、ユーザ１は楽な姿勢で視聴を継続することが可能となり、ユーザ１の使用感（ユーザビリティ）を十分に向上することが可能である。
【０１９６】
また出力制御部１０５は、主情報４１をユーザ１の正面に表示し、副情報４２をユーザ１の視野４の中心から外れた位置に表示することが可能である。これにより、メインコンテンツの再生表示を阻害することなく、通知情報５４（Ｎｏｔｉｆｉｃａｔｉｏｎ）等のサブコンテンツを容易に確認することが可能である。この結果、様々な情報をストレスなく扱うことが可能となり、非常に高いユーザビリティを発揮することが可能となる。
【０１９７】
表示対象面１３には、主情報４１に関連する関連情報４３が表示される。これにより、表示対象面１３の全体にわたってメインコンテンツを拡張して表示するといったことが可能となる。この結果、例えばユーザ１が視線をメインコンテンツから離した場合であっても、エンタテイメント空間に包まれているような感覚となり、映像に対する没入感が阻害されることを回避することが可能である。このように、エンタテイメント性の高い視聴体験を提供することが可能である。
【０１９８】
＜その他の実施形態＞
本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
【０１９９】
上記の実施形態では、ユーザの視野の中心から外れた位置に副情報が表示された。これに限定されず、ユーザの視野の中心に副情報が表示されてもよい。例えば重要な通知等が受信された場合には、ユーザの視野の中心に通知情報を表示する。このような処理が実行されてもよい。この他、副情報の表示位置は限定されず、例えば副情報の内容等に応じて表示位置が制御されてもよい。
【０２００】
上記では車両に搭載された出力制御部により、表示対象面への表示制御等を含む、本技術に係る情報処理方法が実行された。しかしながら車両に搭載された出力制御部とネットワーク等を介して通信可能な他のコンピュータとにより、本技術に係る情報処理方法、及びプログラムが実行されてもよい。また車両に搭載された出力制御部と、他のコンピュータとが連動して、本技術に係るコンテンツ提供システムが構築されてもよい。
【０２０１】
すなわち本技術に係る情報処理方法、及びプログラムは、単体のコンピュータにより構成されたコンピュータシステムのみならず、複数のコンピュータが連動して動作するコンピュータシステムにおいても実行可能である。なお本開示において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれもシステムである。
【０２０２】
コンピュータシステムによる本技術に係る情報処理方法、及びプログラムの実行は、例えばユーザの姿勢に関する姿勢情報の取得、及び表示対象面への主情報及び副情報の表示位置の制御等が、単体のコンピュータにより実行される場合、及び各処理が異なるコンピュータにより実行される場合の両方を含む。また所定のコンピュータによる各処理の実行は、当該処理の一部または全部を他のコンピュータに実行させその結果を取得することを含む。
【０２０３】
すなわち本技術に係る情報処理方法、及びプログラムは、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成にも適用することが可能である。
【０２０４】
上記では、移動体の一例として車両を例に説明を行なったが、移動体の種類等に係らず本技術は適用可能である。本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、パーソナルモビリティ、飛行機、船舶、建設機械、農業機械（トラクター）などのいずれかの種類の移動体に搭載される装置として実現されてもよい。
【０２０５】
また本開示に係る技術は、移動体に搭載する場合に限定されない。例えば、アミューズメント施設や教育施設で用いられる表示システム等に、本技術が適用されてもよい。また家庭用のホームエンタテイメントシステムとして、表示システムを構築することも可能である。この他、任意の表示システムに対して本技術は適用可能である。
【０２０６】
以上説明した本技術に係る特徴部分のうち、少なくとも２つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。
【０２０７】
なお、本技術は以下のような構成も採ることができる。
（１）ユーザの姿勢に関する姿勢情報を取得する取得部と、
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する表示制御部と
を具備する情報処理装置。
（２）（１）に記載の情報処理装置であって、
前記第１の情報は、前記ユーザが選択した映像コンテンツ、及び外部の映像の少なくとも一方を含む
情報処理装置。
（３）（１）又は（２）に記載の情報処理装置であって、
前記第２の情報は、前記ユーザへの通知情報、メニュー情報、及び外部の環境情報の少なくとも１つを含む
情報処理装置。
（４）（１）から（３）のうちいずれか１つに記載の情報処理装置であって、
前記表示制御部は、前記ユーザの視野の中心を基準として、前記第１の情報の表示位置を設定する
情報処理装置。
（５）（４）に記載の情報処理装置であって、
前記表示制御部は、前記ユーザの視野の中心を基準として、前記第１の情報が表示される主表示領域を設定する
情報処理装置。
（６）（５）に記載の情報処理装置であって、
前記表示制御部は、前記主表示領域を基準として、前記第２の情報の表示位置を設定する
情報処理装置。
（７）（５）又は（６）に記載の情報処理装置であって、
前記表示制御部は、前記主表示領域の周縁に前記第２の情報を表示可能である
情報処理装置。
（８）（５）から（７）のうちいずれか１つに記載の情報処理装置であって、
前記表示制御部は、前記主表示領域に重畳して前記第２の情報を表示可能である
情報処理装置。
（９）（１）から（８）のうちいずれか１つに記載の情報処理装置であって、
前記姿勢情報は、前記ユーザが使用するシートのリクライニング角度、及び前記ユーザを撮影したユーザ画像の少なくとも一方を含む
情報処理装置。
（１０）（９）に記載の情報処理装置であって、
前記姿勢情報は、前記ユーザ画像に基づいて検出された前記ユーザの視野に関する視野情報を含む
情報処理装置。
（１１）（１）から（１０）のうちいずれか１つに記載の情報処理装置であって、
前記表示制御部は、前記第１及び前記第２の情報の各々と異なる種類の第３の情報の表示を制御することが可能である
情報処理装置。
（１２）（１１）に記載の情報処理装置であって、
前記表示制御部は、前記被表示面の、前記第１の情報が表示される主表示領域以外の領域へ、前記第３の情報を表示する
情報処理装置。
（１３）（１２）に記載の情報処理装置であって、
前記第３の情報は、前記主表示領域に表示される前記第１の情報により表現される空間を拡張する拡張画像、及び前記第１の情報に関する付加情報の少なくとも一方を含む
情報処理装置。
（１４）（１）から（１３）のうちいずれか１つに記載の情報処理装置であって、
前記表示制御部は、前記ユーザが操作入力を行うための操作用画像の表示位置を制御することが可能である
情報処理装置。
（１５）（１４）に記載の情報処理装置であって、
前記表示制御部は、前記姿勢情報に基づいて、前記ユーザの周囲に前記操作用画像が表示される操作領域を設定する
情報処理装置。
（１６）（１）から（１５）のうちいずれか１つに記載の情報処理装置であって、さらに、
前記姿勢情報に基づいて、音声の出力方向を制御する音声制御部を具備する
情報処理装置。
（１７）ユーザの姿勢に関する姿勢情報を取得し、
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する
ことをコンピュータシステムが実行する情報処理方法。
（１８）ユーザの姿勢に関する姿勢情報を取得するステップと、
前記取得された姿勢情報に基づいて、前記ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面への、第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御するステップと
をコンピュータシステムに実行させるプログラム。
（１９）表示装置と、
ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面と、
前記ユーザの姿勢に関する姿勢情報を取得する取得部と、
前記取得された姿勢情報に基づいて、前記表示装置により前記被表示面に表示される第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する表示制御部と
を具備する表示システム。
（２０）ユーザを移動させることが可能な移動体であって、
表示装置と、
ユーザの周囲を少なくとも前方から上方に向かって覆うように配置された被表示面と、
前記ユーザの姿勢に関する姿勢情報を取得する取得部と、
前記取得された姿勢情報に基づいて、前記表示装置により前記被表示面に表示される第１の情報及び前記第１の情報とは異なる種類の第２の情報の各々の表示位置を制御する表示制御部と
を具備する移動体。
【符号の説明】
【０２０８】
１…ユーザ
４…視野
５…中心視線方向
１０…車両
１２…搭乗シート
１３…表示対象面
２０…姿勢取得部
２１…表示情報制御部
２２…操作入力制御部
２３…音響制御部
３３…表示装置
４０…主表示領域
４１…主情報
４２…副情報
４３…関連情報
４５…拡張画像
５０…車体情報
５４…通知情報
５５…メニュー情報
６０…操作用画像
１００…車両制御システム
１０５…出力制御部
【図１】
2019124158.tif 000003
【図２】
2019124158.tif 000004
【図３】
2019124158.tif 000005
【図４】
2019124158.tif 000006
【図５】
2019124158.tif 000007
【図６】
2019124158.tif 000008
【図７】
2019124158.tif 000009
【図８】
2019124158.tif 000010
【図９】
2019124158.tif 000011
【図１０】
2019124158.tif 000012
【図１１】
2019124158.tif 000013
【図１２】
2019124158.tif 000014
【図１３】
2019124158.tif 000015
【図１４】
2019124158.tif 000016
【図１５】
2019124158.tif 000017
【図１６】
2019124158.tif 000018
【図１７】
2019124158.tif 000019
【図１８】
2019124158.tif 000020
【図１９】
2019124158.tif 000021
【図２０】
2019124158.tif 000022
【図２１】
2019124158.tif 000023
【国際調査報告】
2019124158.tif 000024
2019124158.tif 000025
2019124158.tif 000026
2019124158.tif 000027