(57)【要約】【課題】運転者に提示すべき要素を推定して、同一のディスプレイに、表示要素を複数のソースから抽出して提示する。【解決手段】本発明による車載用情報提示システムは、運転状態情報提供部（ａ）で運転状態に関連する複数の情報を提供する。運転意図情報理解部（ｂ）で前記複数の運転状態情報を加工処理して提示意図を抽出する。ウィンドウ形状・表示位置決定部（ｃ）で前記提示意図に基づいて表示要素のウィンドウ形状表示位置に関するパラメータを決定する。ウィンドウ画像生成・合成部（ｅ）で前記パラメータに従って、複数の映像情報ソース（ｄ）から複数の表示要素を生成する。ディスプレイ（ｆ）は、ウィンドウ画像生成・合成部の出力を表示する。【選択図】図１
2007237785.tif 000002
【特許請求の範囲】
【請求項１】
運転状態に関連する複数の情報を提供する運転状態情報提供部と、
前記複数の運転状態情報を加工処理して提示意図を抽出する運転意図情報理解部と、
前記提示意図に基づいて表示要素のウィンドウ形状表示位置に関するパラメータを決定するウィンドウ形状表示位置決定部と、
複数の映像情報ソースと、
前記パラメータと予め定められている表示要素間の制約条件に従って、前記複数の映像情報ソースから複数の表示要素を生成するウィンドウ画像生成合成部と、
ウィンドウ画像生成合成部の出力を表示するディスプレイと、
から構成した車載用情報提示システム。
【請求項２】
前記運転状態情報は、
車両の速度変化，ハンドル切り角または方向指示器の情報のいずれかを含む走行情報と、
姿勢，発話情報あるいは注視情報の何れかを含む運転者情報の２以上の組み合わせである請求項１記載の車載用情報提示システム。
【請求項３】
前記複数の映像情報ソースは車両の前後方向，左右方向の２以上の組み合わせであり、前記表示要素はそれぞれから取り出され変形されたものである請求項１記載の車載用情報提示システム。
【請求項４】
前記表示要素間の制約条件は、表示要素の相互の位置関係が車両回りの空間の相対位置関係の束縛を受けている請求項１記載の車載用情報提示システム。
【請求項５】
前記ウィンドウ形状表示位置決定部は、前記運転意図情報理解部の速度の理解を参照して、車両の前方の表示要素を上下させるパラメータを発生させるように構成されている請求項１記載の車載用情報提示システム。
【請求項６】
前記ウィンドウ形状表示位置決定部は、前記提示意図により、前記表示要素のウィンドウに関連し、フレームレートまたは解像度，拡大または縮小率，ウィンドウ枠の態様または、ウィンドウ枠内の要素の透明度のいずれかあるいはこれらを組み合わせて指定するパラメータを出力するように構成されている請求項１記載の車載用情報提示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は安全で快適な運転を支援する車載用情報提示システムに関する。
さらに詳しく言えば、複数の広角カメラの映像から表示要素を切り出し変形し、車両の外の空間と感覚的に対応する位置関係を保って運転に最も必要と推定される映像情報を含む関心表示要素と関連する他の表示要素をディスプレイに提示する車載用情報提示システムに関する。
【背景技術】
【０００２】
コンピュータとネットワークの高速化とイメージセンサの高性能高機能化、さらに、画像ディスプレイの高性能低価格化も進み、自動車には多数のコンピュータとイメージ機器が搭載されるようになっている。
安心安全や快適で楽しいドライブを支援するために、複数のカメラとディスプレイが組み込まれ、後方の状況を確認するためのバックモニタやサイドミラーの高度化の実用化も加速している。
【０００３】
そのため、運転支援等に関連して、数多くの提案がなされている。非特許文献１，２記載のものは、いずれも運転支援に関するものであり、複数台の広角カメラ等の出力等を加工して運転者に提供しようとするものである。
特許文献１〜３記載の発明（車載カメラ映像合成透視装置）は、車両各部に設置されたカメラの画像の台形変換を開示しているもので、奥行き感の表示に適している。
特許文献４記載の発明（車両用間接視認装置）は、視認性向上のために遠近感を得る方法として扇形拡大法を開示している。
特許文献５記載の発明（運転支援装置）は、各カメラ画像個々について視点変換を行った後、画像合成し、サイドビュー表示では台形変換表示することを開示している。
特許文献６記載の発明（画像表示制御装置）は、ドライバが大まかにどの方向から見ているかがわかるように、３面鏡を正面から見たように左右画像を変形することを開示している。
特許文献７記載の発明（注視点高解像度化による計算機ホログラム表示方法並びに装置並びにこの方法を記録した記録媒体）は、視点位置を検出して、視点部分について高解像度データを読み出し表示することを開示しているが、車載装置の開示はない。
特許文献８記載の発明（画像生成装置、画像生成方法）は、画像生成装置および画像生成方法に関するものであり、数台のカメラで撮影された複数枚の画像について、画像を互いに独立して表示するものではなく、前記数台で撮影しているエリア全体の様子が直観的に分かるように、一枚の合成した画像を表示するものである。
特許文献９記載の発明（車両用周囲視認装置および表示制御装置）は、複数のカメラで撮像した映像を一画面内に表示し、舵角に基づいて必要な映像を拡大するものである。
【特許文献１】特許第３１５４６７６号公報
【特許文献２】特許第３４８８６７９号公報
【特許文献３】特許第３４８８６８０号公報
【特許文献４】特開平０９−０４８２８２号公報
【特許文献５】特開２００１−３３４８６９号公報
【特許文献６】特開２００３−２５５９２５号公報
【特許文献７】特開平１０−３２６０７１号公報
【特許文献８】特許第３２８６３０６号公報
【特許文献９】特開２００５−１８６６４８号公報
【非特許文献１】田森, 藤城, 坂根, 竹林「車載用イメージングセンサを用いたマルチモーダルクルージングアシスト」情報処理学会第67回全国大会, 6X-1 (2005.3).
【非特許文献２】沖野, 黒木, 田森, 大谷, 坂根, 秡川, 竹林「サラウンド感覚の拡張によるクルジングアシスト」人工知能学会第19回全国大会, 1D2-01 (2005).
【発明の開示】
【発明が解決しようとする課題】
【０００４】
以上のように、数多くの提案がなされているが、現状の車載向けの画像情報機器システムでは、カメラで撮影した映像をそのまま、または若干の加工を施して、ディスプレイに提示しているだけであり、運転者や同乗者の状況や要望を配慮した、気の利いた形で複数の画像情報とその間の関連を提示する段階に至っていない。
【０００５】
（本発明の目的）本発明の主たる目的は安全で快適な運転環境を実現させることができる車載用情報提示システムを提供することである。そのための具体的な目的は次のとおりである。
ア）運転者の認知能力を向上させるような画像情報の提示方式を提案し、認知エラーの少ない、安心で快適な運転環境の実現を可能にする車載用情報提示システムを提供することである。
イ）そのために各種センサやカメラから得られた車両周囲の状況や車両情報，車内状況から運転者に提示する気の利いた映像情報を生成・提示することで、運転者にとって理解しやすい映像情報の提示環境を実現する。
ウ）さらに、本発明は、仮想的に映像を提示するだけでなく、車外状況や車体情報や運転者の行動に応じて、知りたい情報の詳細を知ることができる環境を目指している。
エ）映像の中に加工した映像を重ねるのではなく、車両全周囲の映像を位置関係が認知しやすい形に変形し、さらに車体情報や運転者の行動によりインタラクティブに映像を変化させることで、周辺認知の手助けとなる環境を目指している。
オ）さらに具体的には、スイッチによって映像を切り替えるのではなく、周囲の状況や運転者の行動によって提示映像の詳細を注目できるようにすることで、運転者のサラウンド感覚を拡張し、快走支援となることを目指している。
【課題を解決するための手段】
【０００６】
前記目的を達成するために、本発明による請求項１記載の車載用情報提示システムは、
運転状態に関連する複数の情報を提供する運転状態情報提供部（ａ）と、
前記複数の運転状態情報を加工処理して提示意図を抽出する運転意図情報理解部（ｂ）と、
前記提示意図に基づいて表示要素のウィンドウ形状表示位置に関するパラメータを決定するウィンドウ形状表示位置決定部（ｃ）と、
複数の映像情報ソース（ｄ）と、
前記パラメータと予め定められている表示要素間の制約条件に従って、前記複数の映像情報ソースから複数の表示要素を生成するウィンドウ画像生成合成部（ｅ）と、
ウィンドウ画像生成合成部の出力を表示するディスプレイ（ｆ）とから構成されている。
上記の制約条件は、ルールとしてプログラミング記述することや、オブジェクト指向分野の制約思考プログラミングで実装してもよい。
【０００７】
本発明による請求項２記載の車載用情報提示システムは、請求項１記載の車載用情報提示システムにおいて、前記運転状態情報は、
車両の速度変化，ハンドル切り角または方向指示器の情報のいずれかを含む走行情報と、姿勢，発話情報あるいは注視情報の何れかを含む運転者情報の２以上を組み合わせたものである。
【０００８】
本発明による請求項３記載の車載用情報提示システムは、請求項１記載の車載用情報提示システムにおいて、
前記複数の映像情報ソースは車両の前後方向，左右方向の２以上の組み合わせであり、前記表示要素はそれぞれから取り出され変形されたものである。
本発明による請求項４記載の車載用情報提示システムは、請求項１記載の車載用情報提示システムにおいて、
前記表示要素間の制約条件は、表示要素の相互の位置関係が車両回りの空間の相対位置関係の束縛を受けている。
すなわち、表示要素の拡縮があっても、たとえば上下，左右の関係は制約され、左と右が入れ替わることはない。
【０００９】
本発明による請求項５記載の車載用情報提示システムは、請求項１記載の車載用情報提示システムにおいて、
前記ウィンドウ形状表示位置決定部は、前記運転意図情報理解部の速度の理解を参照して、車両の前方の表示要素を上下させるパラメータを発生させるように構成されている。  この構成によれば、速度の理解にしたがって、遠近の情報を区別して感覚的に提示することができる。
【００１０】
本発明による請求項６記載の車載用情報提示システムは、請求項１記載の車載用情報提示システムにおいて、
前記ウィンドウ形状表示位置決定部は、前記提示意図により、前記表示要素のウィンドウに関連し、フレームレートまたは解像度，拡大または縮小率，ウィンドウ枠の態様または、ウィンドウ枠内の要素の透明度のいずれかあるいはこれらを組み合わせて指定するパラメータを出力するように構成されている。
この構成によれば、表示要素の提示の影響力を感覚的に強調したり、単に存在または関連を認識させるにすぎないものとすることができる。
なお、本発明による車載用情報提示システムは、請求項１記載の車載用情報提示システムにおいて、
請求項２から６記載のシステムのすべてを組み合わせることもできる。
さらに、本発明による車載用情報提示システムは、請求項２記載の車載用情報提示システムにおいて、
前記運転者情報は、ステレオカメラで取得した運転者の頭部の移動に関する情報を利用することもできる。
【発明の効果】
【００１１】
本発明によれば、状況に応じた関心表示要素（画面）を最適な映像拡大手段により拡大表示するとともに、その他の映像も規定の位置に表示し続けることで画像の位置関係を崩すことはない。これにより、運転者は所望する場所の映像を確認できるとともに、映像が切り替わる瞬間を注視していなくとも、映像の制約条件の拘束下にある位置関係から、状況の把握が容易となる。最も必要な場所の映像がメイン表示（関心表示要素）されているので、判断が容易となる。
【発明を実施するための最良の形態】
【００１２】
以下図面等を参照して本発明による車載用情報提示システムの実施形態を詳しく説明すする。図１は、本発明による車載用情報提示システムのシステムブロック図、図２は運転意図情報理解部に入力される情報の詳細を示すブロック図、図３はウィンドウ形状・表示位置決定部の詳細を示すブロック図、図４は映像情報ソースとウィンドウ画像生成・合成部の関係を示すブロック図である。
運転状態情報提供部（ａ）は、図１，図２に示す運転状態に関連する複数の情報を提供する。本発明による車載用情報提示システムの前記運転状態情報は、図に示すように車両の速度変化，ハンドル切り角または方向指示器の情報のいずれかを含む走行情報と、姿勢，発話情報あるいは注視情報の何れかを含む運転者情報の２以上を組み合わせたものである。
運転意図情報理解部（ｂ）は、前記複数の運転状態情報を組み合わせて提示意図を決定する。ウィンドウ形状・表示位置決定部（ｃ）は、前記提示意図と制約条件に基づいて表示要素のウィンドウ形状表示位置に関するパラメータを決定する。（図３）
【００１３】
複数の映像情報ソース（ｄ）は、車両に配置された前方、左右前方、左右後方、後方を担当する広角動画カメラ等であり、ウィンドウ画像生成・合成部（ｅ）は、前記パラメータと予め定められている表示要素間の制約条件に従って、前記複数の映像情報ソースから複数の表示要素を生成する。（図４）
ディスプレイ（ｆ）は、ウィンドウ画像生成・合成部の出力を表示する。この表示により、シングルスクリーンマルチウィンドウ方式による映像情報提示が行われる。（後述する図５にマルチウィンドウ形式の表示例をビューとして示してある。）
フロントディスプレイ（専用のディスプレイ）またはカーナビゲーション用のディスプレイ中に複数の映像情報（表示要素）を提示し、それらをインタラクティブに変化させることで、知りたい情報にアクセスしやすくし、サラウンド感覚の拡張をさせるものである。
【００１４】
図５は、ディスプレイ中の表示要素の加工および配列の原理を説明するための図である。
映像情報ソース（図１（ｄ））からの映像がディスプレイのビューとして提供される過程を概念的あるいは仮定的に示している。映像情報ソース（図１（ｄ））から切り出された映像は、変形されディスプレイに提示される。この提示の内容は抽出された運転者の関心により変わる。図中、映像ソースは、映像情報ソースからの信号のメモリ領域、ウィンドウの部分は、ウィンドウ形状・表示位置決定部のパラメータ出力による表示要素の例であり、これがディスプレイのビューとして提示される。
図６は、ディスプレイ中の関心表示要素の拡大提示状態を説明するための図、図７はディスプレイ中の表示要素の上下移動の状態を説明するための図である。
図６の左右の画面は、それぞれディスプレイ内の表示要素を示している。この場合の表示要素は前方と、左右前方に関するものである。
図６中、右側の画面は関心表示要素が右前方と推定された場合の表示であり、右前方の要素が左側の画面に比べて拡大されて提示されている。頭部の右方向覗き込みに関心表示要素を拡大して最も見やすい状態を形成している。
【００１５】
図７は、車の速度に依存して表示が上下に移動する例を示している。これは、ウィンドウ形状・表示位置決定部（ｃ）が、運転意図情報理解部（ｂ）の速度の理解を参照して、車両の前方の表示要素を上下させるパラメータを発生させることによってなされる。
この提示例では車の速度が小さいときは前方の俯角を大きくして、足元の注意を喚起するようにしてある（図中左側の画像）。車の速度が増加するにしたがって、俯角が小さくなり、画像全体の表示も上方向に移動するようにすることができる（図中右側の画像）。
法定速度を越えると表示要素をさらに上方向に移動させて、速度オーバーを運転者に知らせることもできる。
【００１６】
ウィンドウ形状・表示位置決定部（ｃ）は、前記提示意図により、前記表示要素のウィンドウに関連し、より感覚的な表示を可能にするパラメータを出力するものである。
フレームレートまたは解像度は、注意すべき映像（関心表示要素）については、フレームレートを大きく保つか、解像度を大きくし、注意を要しない映像（通常の表示要素）等については、フレームレートを落とすか、解像度を小さくする。
拡大または縮小率は、注意すべき映像（関心表示要素）については、拡大率を大きくし、注意を要しない映像（通常の表示要素）等については、縮小する。
ウィンドウ枠については、関心表示要素では、ウィンドウ枠を設けたり、影をつけて強調することができる。
表示要素の透明度については、当該表示要素以外の表示要素（下位レイヤの映像）の可視化のために、特定のものを半透明にすることができる。なお、これらの部分については、図８，図９の表示例を参照して後述する。
これらのパラメータは、関連しまたは選択的に使用できる。
【００１７】
次に運転者情報が運転者の姿勢を車載のステレオカメラで取得する場合の例について、詳しく説明する。車載カメラによって撮影した映像を全て見せるのではなく、運転者の意図を理解して計算し、必要なところだけを提示することで、運転者に視覚的広がり感を与える。運転者が所望しているところを意図通りに見せるためには、所望対象をどのように判断するかが重要である。「運転者の意図理解」と「状況把握」が必要となる。
運転者の意図を理解するには、運転者の頭部位置や動き，向きなどを各種センサ（車内用ステレオカメラその他）からセンシングし、「何に注意を払っているのか」，「そのときに見えていなくて重要な情報は何か」などを判断する必要がある。運転者が鏡の奥を見ようとする自然な行為を捉えることで、運転者の意図を推定する。
【００１８】
運転者は走行状況によって所望対象が変わるので、状況の把握をする必要がある。例えば、左折時には、左後方と左前方に運転者の注意を促し、歩行者，自転車などとの接触を避けなければならない。夜間時，雨天時などは、昼間の運転よりも気を配りながら運転するように意識させるべきである。そこで、車速，車体位置などの車内，車外の状況，車体情報を各種センサから取得し、走行状況を判断する。
【００１９】
表１に、走行情報と運転者情報を処理し提示制御情報を出力する運転意図情報理解部のプログラムを示す。
【表１】
2007237785.tif 000003
【００２０】
表２に、提示制御情報からウィンドウ形状・表示パラメータを算出するウィンドウ形状・表示位置決定部のプログラムを示す。
【表２】
2007237785.tif 000004
【００２１】
表３は、ウィンドウ形状・表示位置決定部の提示面情報を用いて、映像ソース１〜ｎであるカメラ画像から透視投影画像を生成するウィンドウ画像生成・合成部の動作を示すプログラムである。
【表３】
2007237785.tif 000005
【００２２】
図８はウィンドウの拡大提示方法を示す図であり、（ア）映像ソースの提示領域をウィンドウサイズにあわせて拡大する方法、（イ）映像ソースは変化させずウィンドウのアスペクト比を保持したまま拡大する方法、（ウ）映像ソースは変化させずウィンドウ形状を変化させ拡大する方法を示している。図９は拡大ウィンドウの重ね合わせ方法を説明するための図であり、（ア）他のウィンドウよりも上位レイヤに影や枠などの装飾を施し表示する方法、（イ）ウィンドウを半透明にし下位レイヤウィンドウを透過表示する方法を示している。
【００２３】
図１０は、運転者情報である運転者の頭部の姿勢データと、走行情報である後退情報および車速情報から提示制御情報（図２，図３参照）を出力するまでの運転意図情報理解部（ｂ）の処理の流れを説明するための図である。前記制御情報に基づいて、ウィンドウ形状・表示位置決定部（ｃ）から、ウィンドウ形状・表示パラメータが出力され、ウィンドウ画像生成・合成部（ｅ）が、映像情報ソース１〜ｎ（ｄ）の情報を処理して出力映像をディスプレイ（ｆ）に供給する。図１２は、前記運転者情報と走行情報に基づいて運転意図情報理解部が出力する提示制御情報に基づくディスプレイ（ｆ）の表示の実例を示す説明図である。同図（ａ）は中速時の、（ｂ）は後退・右覗き込み時の、（ｃ）は低速・左覗き込み時の、それぞれのディスプレイ画像を示す。この実例では車速を画面下部中央部の最前面に表示している。
【００２４】
運転者にどのような情報を提供するかの判断の要素として、運転者の姿勢あるいは注視方向の情報は極めて有効である。
運転者の意図を推定するために、運転席の前にステレオカメラを搭載することで、運転者の前後左右への覗き込み行為である運転者情報としての姿勢情報（注視情報）を取得することができる。（図２の（ａ）部分）
表１に示すように、運転意図情報理解部では、各種センサからの入力をチェックし新しい情報の到着があれば、到着したセンサ情報とセンサ情報−運転意図情報対応ルールを用いて運転意図情報を検索する。発見された運転意図と運転意図情報−提示制御情報対応ルールから、提示制御情報を作成する。作成した提示制御情報を優先度に応じて並べ替えを行い、ウィンドウ形状・表示位置決定部に送信する。
表２に示すように、ウィンドウ形状・表示位置決定部では、映像ソース情報からウィンドウ情報を取得し、提示制御情報からウィンドウ操作要求を生成する。基本ルール表を用い、取得したウィンドウ情報とウィンドウ操作要求からウィンドウの形状、表示位置、表示属性を調整し、生成されたウィンドウパラメータをウィンドウ画像生成・合成部へ送信する。
表３に示すように、ウィンドウ画像生成・合成部では、新しいウィンドウパラメータが到着する現在のウィンドウパラメータを更新する。並行して、映像情報ソースから個々のウィンドウを描画し、ウィンドウ映像を合成し提示画像を生成、モニタに出力する。
【００２５】
運転者情報は、図１０に示すように、ステレオカメラ撮像による運転者の頭部画像とその距離画像を入力する。ステレオカメラ画像の一方のカメラ画像を取り込み現フレーム画像メモリに保管する。
その前のフレームの画像データは、前フレーム画像メモリに保管される（画像メモリを２分割して現フレームメモリと前フレームメモリとして、処理後、その機能が入れ替わる方法も取ることができる）。フレーム間の差分画像生成部では現フレームメモリと前フレームメモリとの差分を取り、差分画像を生成する。この結果を、水平・垂直のヒストグラムによる四角領域生成部に入力し、水平と垂直それぞれのヒストグラムを取り、それぞれのヒストグラムの両端から四角領域を生成する。この四角領域データを四角領域内の運転者の頭部領域抽出部に入力する。
【００２６】
一方、ステレオカメラの距離画像を距離画像メモリに保管し、四角領域内の運転者の頭部領域抽出部に入力する。
四角領域内の運転者の頭部領域抽出部では、入力された四角領域データと距離画像から四角領域内にある距離画像のみを抽出する（四角領域内の運転者頭部の領域を抽出）。
【００２７】
この結果から、重心抽出（現フレーム）部において、運転者の頭部の重心位置を抽出する。（重心を求める方法は、該当領域内の水平・垂直それぞれの画素の積算や１次モーメントによる水平画素分の重心と垂直画素分の重心を求める方法等が利用できる。）
前フレームの重心データは、前フレーム重心メモリに保管される。フレーム間の重心の差分抽出部では、現フレームの重心データと前フレームの重心データとの差分を取る。この結果を重心データ変換部で頭部速度データに変換し、ウィンドウ形状・表示位置決定部へ出力する。
【００２８】
走行情報である後退情報を後退情報データ変換部に入力し、後退データに変換後、ウィンドウ形状・表示位置決定部で必要なデータとして出力する。
走行情報である車速情報を車速情報データ変換部に入力し、車速データに変換後、ウィンドウ形状・表示位置決定部で必要なデータとして出力する。
運転意図情報理解部で求めた頭部速度データ、後退データ及び車速データを用いてウィンドウ形状・表示位置決定部においてウィンドウの形状や表示位置を決定する。
【００２９】
次に、ウィンドウ形状・表示位置決定部の詳細な動作を説明する。
ウィンドウ形状・表示位置決定部では提示制御情報に基づき映像を表示するための映像画面の形状と表示位置を決定し、ウィンドウ形状・表示パラメータをウィンドウ画像生成・合成部に出力する。
図１０の運転意図情報理解部の出力である頭部速度データや後退データや車速データのような図２の提示制御情報を図３のウィンドウ形状・表示位置決定部に入力する。同図のウィンドウ形状・表示位置決定部の内部では、入力された提示制御情報を用いて、形状変形ルールと位置決定ルールとの基本ルールに則り、映像ソース情報ごとに運転意図−ウィンドウ操作対応表により、ウィンドウ形状調整部、ウィンドウ表示位置調整部及びウィンドウ表示属性調整部にてそれぞれのパラメータを調整し、ウィンドウ形状・表示パラメータを出力する。
【００３０】
表示画面内における各部のウィンドウの表示形状と表示位置の例を図１１Ａ，図１１Ｂに示す。
図１１Ａの（ａ）で、表示画面全体部分１１１を示し、この画面内に各部の映像を表示するように各パラメータが決定される。
正面ウィンドウ１１２は正面の映像を、左側方ウィンドウ１１３は左側方の映像を、右側方ウィンドウ１１４は右側方の映像を、後方ウィンドウ１１５は後方の映像を、左後方ウィンドウ１１６は左側後方の映像を、右後方ウィンドウ１１７は右側後方の映像を、それぞれ表示するウィンドウを示す。
左後方ウィンドウ１１６及び右後方ウィンドウ１１７は、常に映像表示の一番手前に表示されるようにウィンドウが設定される。
図１１Ａの（ａ）は駐停車時の各部のウィンドウの表示形状と表示位置を示す。
車速データと後退データ（この場合は前進）の入力による車速に対応したウィンドウの表示の動きは、前進低速時は同図（ｂ）、前進中速時は同図（ｃ）、前進高速時は同図（ｄ）のようになる。
これは車速が高速になるほど運転者の視点位置が車両前方遠くの水平に近付き、低速になるほど運転者の視点位置が車両の近くを見るように、正面ウィンドウの中心位置が上下に動き、同時に左側方ウィンドウ及び右側方ウィンドウそれぞれの正面ウィンドウ側の辺の中心位置が上下に動く、と共に合わせてウィンドウ形状が変わる。
同図の（ａ）〜（ｂ）〜（ｃ）〜（ｄ）のそれぞれの間の車速の場合には、車速に応じてなめらかに表示位置が移動するように、各ウィンドウの形状・表示位置が変わるように各パラメータが決定される。
左側方ウィンドウ及び右側方ウィンドウについては、車速に対応させて動作させないようにすることも可能である（図１２（ｃ））。
【００３１】
ギアがＲ（後退）に入ると後退データ（この場合は後退）が入力されるので、図１１Ｂの（ｅ）後退時のように後方ウィンドウを大きく表示し、正面ウィンドウは画面中央下に表示するように各パラメータが決定される。
後方ウィンドウを大きく表示するには、図８の視野の拡張による方法を用いることができる。
覗き込み時は、頭部速度データの入力により左右を判定し、右覗き込み時は図１１Ｂの（ｆ）、左覗き込み時は同図（ｇ）のようにそれぞれ表示するように、各ウィンドウの形状・表示に対応する各パラメータが決定される。
また、頭部速度データの値に応じて、正面ウィンドウの左右位置が、左側方ウィンドウ及び右側方ウィンドウの正面ウィンドウ側の辺の左右位置が、それぞれなめらかに表示位置が移動するように、ウィンドウの表示位置が変わり同時にウィンドウ形状が変わるように各パラメータが決定される。
この時、左側方ウィンドウ及び右側方ウィンドウは、それぞれ台形の形状が変化するように見える。
左側方ウィンドウ及び右側方ウィンドウの形状変更は、図８の映像の拡大による方法を用いることができる。
覗き込みによる左側方ウィンドウ及び右側方ウィンドウの形状・表示位置の決定とその他の決定とは、組合せて使用することが可能である。
【００３２】
提示意図に基づき図９のように、ウィンドウ枠の表示、ウィンドウ枠に影を付加して表示、ウィンドウ枠と付加した影の表示、ウィンドウの透明度を変えて下の映像を見せる表示を行うこともでき、運転者の映像の認知度を上げることができる。
このようにウィンドウ形状・表示位置決定部では、入力された提示制御情報により各部の映像を表示するウィンドウの形状と表示位置を決定し、ウィンドウ形状・表示パラメータをウィンドウ画像生成・合成部に出力する。
また、提示意図に基づき関心表示要素のウィンドウ以外の通常の表示要素のウィンドウ内に表示する映像のフレームレートや解像度を下げるようパラメータを指定できる。この場合、ウィンドウ画像生成・合成部では、映像情報ソースを取り込む時にフレームレートや解像度を下げて取り込むことができる映像キャプチャ入力部の構成とすれば実現できる。あるいは、映像情報ソース側にフレームレートや解像度を下げる要求を出し、映像情報ソースとしてフレームレートや解像度を下げた映像を出力するように構成すれば実現できる。
【産業上の利用可能性】
【００３３】
本発明による車載用情報提示システムは、運転者の関心を推定して最も好ましい情報を提供するように構成されているから、運転者の疲労を防止することができ、運転業務を支援でき、運輸産業の分野で利用できる。
【図面の簡単な説明】
【００３４】
【図１】本発明による車載用情報提示システムのシステムブロック図である。
【図２】運転意図情報理解部に入力される情報の詳細を示すブロック図である。
【図３】ウィンドウ形状・表示位置決定部の詳細を示すブロック図である。
【図４】映像情報ソースとウィンドウ画像生成・合成部の関係を示すブロック図である。
【図５】ディスプレイ中の表示要素の切り出し変形配列を原理的に説明するための図である。
【図６】ディスプレイ中の関心表示要素の拡大提示状態を説明するための図である。
【図７】ディスプレイ中の表示要素の上下移動の状態を説明するための図である。
【図８】ウィンドウ形状の拡張・拡大を説明するための図である。
【図９】ウィンドウの影や枠などの装飾表示や半透明化による透過表示を説明するための図である。
【図１０】運転者の頭部の姿勢データの詳細な処理を説明するためのブロック図である。
【図１１Ａ】表示画面内における各部のウィンドウの表示形状と表示位置の例を説明するための図である。
【図１１Ｂ】表示画面内における各部のウィンドウの表示形状と表示位置のさらに他の例を説明するための図である。
【図１２】ディスプレイの表示の実例を示す説明図である。
【符号の説明】
【００３５】
（ａ）  運転状態情報提供部
（ｂ）  運転意図情報理解部
（ｃ）  ウィンドウ形状・表示位置決定部
（ｄ）  映像情報ソース
（ｅ）  ウィンドウ画像生成・合成部
（ｆ）  ディスプレイ
１１１  表示画面全体部分
１１２  正面ウィンドウ
１１３  左側方ウィンドウ
１１４  右側方ウィンドウ
１１５  後方ウィンドウ
１１６  左後方ウィンドウ
１１７  右後方ウィンドウ
【図１】
2007237785.tif 000006
【図２】
2007237785.tif 000007
【図３】
2007237785.tif 000008
【図４】
2007237785.tif 000009
【図５】
2007237785.tif 000010
【図６】
2007237785.tif 000011
【図７】
2007237785.tif 000012
【図８】
2007237785.tif 000013
【図９】
2007237785.tif 000014
【図１０】
2007237785.tif 000015
【図１１Ａ】
2007237785.tif 000016
【図１１Ｂ】
2007237785.tif 000017
【図１２】
2007237785.tif 000018