(57)【特許請求の範囲】
【請求項１】
カメラの撮像画像の一部を抽出した抽出画像を表示部に表示させる画像制御部と、
前記表示部に対するユーザの目の相対位置を示す基準位置を検出する基準位置検出部と
を備える画像表示装置であって、
前記画像表示装置は、前記ユーザが前記表示部を注視しているか否かを判定する注視判定部をさらに備え、
前記画像制御部は、前記ユーザが前記表示部を注視していると前記注視判定部が判定した場合、前記撮像画像の抽出範囲を前記基準位置に応じて変化させ、
前記画像制御部は、前記ユーザが前記表示部を注視している状態で前記基準位置が所定条件の変化をしたとき、前記抽出画像に別のカメラが撮像した別の撮像画像の一部又は全部を合わせて前記表示部に表示させ、
前記画像制御部は、前記ユーザが前記表示部を注視していないと前記注視判定部が判定した場合、前記撮像画像の前記抽出範囲を固定する
ことを特徴とする画像表示装置。
【請求項２】
請求項１に記載の画像表示装置において、
前記基準位置は、前記ユーザの頭の位置又は目の位置である
ことを特徴とする画像表示装置。
【請求項３】
請求項１又は２に記載の画像表示装置において、
前記画像制御部は、位置センサが検出した前記表示部の位置に基づいて前記抽出範囲を変化させる
ことを特徴とする画像表示装置。
【請求項４】
請求項３記載の画像表示装置において、
前記画像制御部は、
前記表示部の位置が、仮想的な前記基準位置である仮想基準位置又は前記基準位置自体に対して左右方向に移動した場合、上下方向における前記抽出範囲の縮尺を維持したまま前記抽出範囲を左右方向に移動させ、又は
前記表示部の位置が前記仮想基準位置又は前記基準位置に対して上下方向に移動した場合、左右方向における前記抽出範囲の縮尺を維持したまま前記抽出範囲を上下方向に移動させる
ことを特徴とする画像表示装置。
【請求項５】
請求項３記載の画像表示装置において、
前記画像制御部は、前記表示部の位置が、仮想的な前記基準位置である仮想基準位置又は前記基準位置自体に対して前後方向に移動した場合、前記抽出範囲を拡大又は縮小する
ことを特徴とする画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラの撮像画像の一部を抽出した抽出画像を表示する画像表示装置に関する。
【背景技術】
【０００２】
特許文献１では、表示手段（後側方モニタ）を通じての視認可能領域を運転者の好みに応じて変更可能な運転支援装置を提供することを課題としている（［０００４］、要約）。当該課題を解決するため、特許文献１（要約）において、運転支援装置１０は、車両に設けられ車外の所定領域を撮影可能な外界カメラ１３と、外界カメラ１３が撮影した映像を車両の運転者に視認可能に表示するモニタ１５とを備える。さらに、運転支援装置１０は、外界カメラ１３により撮影された映像の中で前記所定領域より狭い領域を設定する領域設定手段を備える。モニタ１５は、前記領域設定手段により設定された設定領域Ｓ’のみを視認可能とする。
【０００３】
特許文献１では、運転者の眼球の位置（アイポイント）に基づいて設定領域Ｓ’の位置を自動的に変更する（［００３８］〜［００４１］）。
【０００４】
特許文献２では、バックミラーの使用感に近い車両周囲確認用モニタ装置を提供することを目的としている（［０００７］、要約）。当該目的を達成するため、特許文献２（要約）では、車両後方を撮像するバックカメラ１１で撮像された入力画像Ｖｏを処理する画像処理手段１４と、処理された出力画像Ｖａ，Ｖｂを表示する画像表示手段１２と、運転者Ｄ（Ｄａ，Ｄｂ）の頭部の相対的位置を検出する姿勢検出手段１３とを設ける。画像処理手段１４は、姿勢検出手段１３が検出した運転者頭部の相対的位置に基づいて、入力画像Ｖｏの全撮像範囲から一部を切り出して出力画像Ｖａ，Ｖｂとする処理を実行可能である。加えて、画像処理手段１４は、姿勢検出手段１３に検出される運転者頭部の相対的位置の変位量に応じて、その変位方向と逆方向に入力画像Ｖｏの切出し範囲（Ｖａ，Ｖｂ）を移動させる処理を実行可能である。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−０１８７６０号公報
【特許文献２】特開２０１３−２１６２８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記のように、特許文献１では、運転者のアイポイントに基づいて設定領域Ｓ’（モニタ１５の表示領域）を自動的に設定する（［００３８］〜［００４１］）。特許文献１では、運転者がモニタ１５を見ているか否かにかかわらず設定領域Ｓ’が自動的に設定されてしまう。このため、運転者がモニタ１５を見ていない場合にも、設定領域Ｓ’が頻繁に変化することになり煩わしい。
【０００７】
同様に、特許文献２では、運転者頭部の相対位置に基づいて画像表示手段１２における出力画像Ｖａ，Ｖｂの範囲を設定する（要約）。特許文献２では、運転者が画像表示手段１２を見ているか否かにかかわらず出力画像Ｖａ，Ｖｂの範囲が自動的に設定されてしまう。このため、運転者が画像表示手段１２を見ていない場合にも、出力画像Ｖａ，Ｖｂの範囲が頻繁に変化することになり煩わしい。
【０００８】
本発明は上記のような課題を考慮してなされたものであり、車両の周囲画像等の抽出画像の利用に関するユーザの利便性を向上可能な画像表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明に係る画像表示装置は、
カメラの撮像画像の一部を抽出した抽出画像を表示部に表示させる画像制御部と、
前記表示部に対するユーザの目の相対位置を示す基準位置を検出する基準位置検出部と
を備えるものであって、
前記画像表示装置は、前記ユーザが前記表示部を注視しているか否かを判定する注視判定部をさらに備え、
前記画像制御部は、前記ユーザが前記表示部を注視していると前記注視判定部が判定した場合、前記撮像画像の抽出範囲を前記基準位置に応じて変化させ、
前記画像制御部は、前記ユーザが前記表示部を注視している状態で前記基準位置が所定条件の変化をしたとき、前記抽出画像に別のカメラが撮像した別の撮像画像の一部又は全部を合わせて前記表示部に表示させ、
前記画像制御部は、前記ユーザが前記表示部を注視していないと前記注視判定部が判定した場合、前記撮像画像の前記抽出範囲を固定する
ことを特徴とする。
【００１０】
本発明によれば、ユーザが表示部を注視している場合、表示部に対するユーザの目の相対位置を示す基準位置（例えば目、頭、鼻又は肩の位置）に応じて撮像画像の抽出範囲を変化させる。前記画像制御部は、前記ユーザが前記表示部を注視している状態で前記基準位置が所定条件の変化をしたとき、前記抽出画像に別のカメラが撮像した別の撮像画像の一部又は全部を合わせて前記表示部に表示させる。これにより、ユーザの基準位置が所定条件の変化をしたときには、１つの表示部に複数の画像を表示することでユーザの利便性を向上することが可能となる。また、前記画像制御部は、前記ユーザが前記表示部を注視していないと前記注視判定部が判定した場合、前記撮像画像の前記抽出範囲を固定する。このような構成によれば、ユーザが表示部を注視していないにもかかわらず撮像画像の抽出範囲が変化することにより生じる煩わしさを解消することが可能となる。従って、抽出画像（例えば車両の周囲画像）の利用に関するユーザの利便性を向上できる。
【００１１】
前記基準位置が前記ユーザの頭の位置又は目の位置である場合、ユーザが表示部を注視していない状態で頭の位置又は眼球の位置が変化しても、撮像画像の抽出範囲は固定されたままとなる。このため、ユーザが周辺監視等の目的（周辺視）のために頭又は目の位置を変化させた場合でも、撮像画像の抽出範囲は固定されたままとなる。従って、周辺監視等の際のユーザの利便性を向上することが可能となる。
【００１３】
前記画像制御部は、位置センサが検出した前記表示部の位置に基づいて前記抽出範囲を変化させてもよい。これにより、ユーザが表示部の位置を調整可能な構成において、表示部の位置の変化に応じた抽出画像を表示することが可能となる。
【００１４】
前記画像制御部は、前記表示部の位置が、仮想的な前記基準位置である仮想基準位置又は前記基準位置自体に対して左右方向に移動した場合、上下方向における前記抽出範囲の縮尺を維持したまま前記抽出範囲を左右方向に移動させてもよい。また、前記画像制御部は、前記表示部の位置が前記仮想基準位置又は前記基準位置に対して上下方向に移動した場合、左右方向における前記抽出範囲の縮尺を維持したまま前記抽出範囲を上下方向に移動させてもよい。
【００１５】
これにより、ユーザが表示部を仮想基準位置又は基準位置に対して左右方向又は上下方向に移動させることが可能な構成において、表示部の位置の変化に応じた抽出画像を表示することが可能となる。
【００１６】
前記画像制御部は、前記表示部の位置が、前記仮想基準位置又は前記基準位置自体に対して前後方向に移動した場合、前記抽出範囲を拡大又は縮小してもよい。これにより、ユーザが表示部を仮想基準位置又は基準位置に対して前後方向に移動させることが可能な構成において、表示部の位置の変化に応じた抽出画像を表示することが可能となる。
【発明の効果】
【００１７】
本発明によれば、車両の周囲画像等の抽出画像の利用に関するユーザの利便性を向上可能となる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態に係る画像表示装置を搭載した車両の概略構成図である。
【図２】前記実施形態におけるミラー表示制御のフローチャートである。
【図３】前記実施形態における抽出範囲設定制御のフローチャート（図２のＳ１６の詳細）である。
【図４】前記実施形態において抽出範囲を変化させる方法を説明するための第１図である。
【図５】前記実施形態において前記抽出範囲を変化させる方法を説明するための第２図である。
【図６】前記実施形態において前記抽出範囲を変化させる方法を説明するための第３図である。
【図７】前記実施形態における基準抽出範囲設定制御のフローチャートである。
【発明を実施するための形態】
【００１９】
Ａ．一実施形態
＜Ａ−１．構成＞
［Ａ−１−１．全体構成］
図１は、本発明の一実施形態に係る画像表示装置１２を搭載した車両１０の概略構成図である。図１に示すように、画像表示装置１２は、後方カメラ２０と、側方カメラ２２ａ、２２ｂと、運転者カメラ２４と、後席カメラ２６と、電子ルームミラー２８と、ミラー位置調整機構３０と、ミラー位置センサ３２と、電子制御装置３４（以下「ＥＣＵ３４」という。）とを有する。本実施形態の車両１０は、右ハンドル車である。代わりに、左ハンドル車であっても同様の構成を採用することができる。以下では、後方カメラ２０、側方カメラ２２ａ、２２ｂ、運転者カメラ２４及び後席カメラ２６をカメラ２０、カメラ２２ａ、２２ｂ、２４、２６ともいう。
【００２０】
［Ａ−１−２．後方カメラ２０］
後方カメラ２０は、車両１０後方の画像（以下「後方画像Ｉｒｒ」という。）を撮像するカラーカメラである。後方画像Ｉｒｒは、車両１０が後退する際に電子ルームミラー２８に表示されて運転者１００（図４〜図６）の操作を補助すると共に、車両１０の通常走行時に車両１０の後方を運転者１００が確認するためのものである。
【００２１】
後方カメラ２０は、車両１０の後部において車両１０の後方を向いて配置される。より具体的には、後方カメラ２０は、例えばリアバンパに配置される。或いは、後方カメラ２０は、車室内においてリアウィンドウの近傍（例えばルーフ）に配置されてもよい。後方カメラ２０が撮像した後方画像Ｉｒｒのデータは、ＥＣＵ３４に出力される。
【００２２】
［Ａ−１−３．側方カメラ２２ａ、２２ｂ］
側方カメラ２２ａ、２２ｂは、車両１０側方の画像（以下「側方画像Ｉｓｄ」という。）を撮像するカラーカメラである。側方カメラ２２ａ（以下「左側方カメラ２２ａ」ともいう。）は、車両１０の左側方の画像（以下「左側方画像Ｉｌｔ」という。）を撮像する。側方カメラ２２ｂ（以下「右側方カメラ２２ｂ」ともいう。）は、車両１０の右側方の画像（以下「右側方画像Ｉｒｔ」という。）を撮像する。側方画像Ｉｓｄは、車両１０の通常走行時又は後退時に車両１０の側方（後側方を含む。）を運転者１００が確認するためのものである。
【００２３】
側方カメラ２２ａ、２２ｂは、車両１０の側部（例えばサイドミラー）において車両１０の後側方を向いて配置される。側方カメラ２２ａ、２２ｂが撮像した側方画像Ｉｓｄのデータは、ＥＣＵ３４に出力される。
【００２４】
［Ａ−１−４．運転者カメラ２４］
運転者カメラ２４は、運転者１００（図４〜図６）の略正面の画像（以下「運転者画像Ｉｄｒ」という。）を撮像するカラーカメラである。運転者画像Ｉｄｒは、運転者１００の基準位置Ｐｒｅｆ及び視線方向Ｄｌｓを確認するためのものである（詳細は後述する。）。運転者カメラ２４は、運転席１０８（図６）の前方（例えば電子ルームミラー２８の近傍）において運転席１０８側を向いて配置される。運転者カメラ２４が撮像した運転者画像Ｉｄｒのデータは、ＥＣＵ３４に出力される。
【００２５】
［Ａ−１−５．後席カメラ２６］
後席カメラ２６は、後席１１４（図６）の略正面の画像（以下「後席画像Ｉｒｓ」という。）を撮像するカラーカメラである。後席画像Ｉｒｓは、後席１１４に座っている同乗者１１０を映し出すものである（詳細は後述する。）。後席カメラ２６は、後席１１４の前方且つ上方において後席１１４側を向いて配置される。後席カメラ２６が撮像した後席画像Ｉｒｓのデータは、ＥＣＵ３４に出力される。
【００２６】
［Ａ−１−６．電子ルームミラー２８］
電子ルームミラー２８（以下「電子ミラー２８」又は「ミラー２８」ともいう。）は、車室内において、運転者１００（乗員）から見てフロントウィンドウ（図示せず）の上部の手前（車両１０の進行方向後ろ側）に配置される。ミラー２８は、車両１０の周囲画像Ｉｓｒを表示する表示部５０（図１）を備える。ここでの周囲画像Ｉｓｒは、例えば後方画像Ｉｒｒのみ又は後方画像Ｉｒｒ及び側方画像Ｉｓｄの組合せから生成される。このため、運転者１００は、ミラー２８の表示部５０を介して車両１０の後方及び／又は側方の様子を確認することができる。
【００２７】
本実施形態において、表示部５０は、例えば液晶パネル、有機エレクトロルミネッセンス（ＥＬ）等の表示パネルから構成される。或いは、表示部５０は、図示しないプロジェクタの投影画像が投影される投影部であってもよい。
【００２８】
なお、上記のように、後方カメラ２０及び側方カメラ２２ａ、２２ｂは車両１０の外側を向いている。このため、後方画像Ｉｒｒ及び側方画像Ｉｓｄは、車両１０の内部の画像が含まれない。従って、通常の使用状態において、ミラー２８の表示部５０には、車両１０の内部が表示されない。よって、表示部５０に映し出される画像（周囲画像Ｉｓｒ）は、通常のルームミラー（表面が鏡面加工されているもの）に映し出される像と異なる。
【００２９】
［Ａ−１−７．ミラー位置調整機構３０］
ミラー位置調整機構３０（以下「調整機構３０」ともいう。）は、ミラー２８（又は表示部５０）の位置Ｐ（以下「ミラー位置Ｐｍｒ」又は「表示部位置Ｐｄｐ」という。）を運転者１００の操作により調整可能である。或いは、図示しないミラー位置操作ボタンとモータとを組み合わせた駆動機構によりミラー位置Ｐｍｒ（又は表示部位置Ｐｄｐ）を調整してもよい。
【００３０】
具体的には、調整機構３０は、左右方向スライド機構６０と、上下方向スライド機構６２と、前後方向スライド機構６４とを含む。左右方向スライド機構６０は、ミラー２８を車両１０の左右方向に変位させる。上下方向スライド機構６２は、ミラー２８を車両１０の前後方向に変位させる。前後方向スライド機構６４は、ミラー２８を車両１０の前後方向に変位させる。
【００３１】
左右方向スライド機構６０、上下方向スライド機構６２及び前後方向スライド機構６４に加え又はこれらスライド機構６０、６２、６４の１つ又は複数に代えて、傾斜角調整機構及び回転角機構を設けてもよい。傾斜角調整機構は、車両１０の左右方向（幅方向）、上下方向及び前後方向におけるミラー２８の傾斜角を調整する機構である。回転角調整機構は、ミラー２８の回転角を調整する機構である。傾斜角調整機構及び回転角調整機構は、例えばボールジョイントにより構成される。
【００３２】
［Ａ−１−８．ミラー位置センサ３２］
ミラー位置センサ３２（以下「位置センサ３２」ともいう。）は、ミラー位置Ｐｍｒ（又は表示部位置Ｐｄｐ）を検出してＥＣＵ３４に出力する。左右方向スライド機構６０、上下方向スライド機構６２又は前後方向スライド機構６４によるミラー２８の変位に際しては、各スライド機構６０、６２、６４のスライダの位置座標によりミラー位置Ｐｍｒを特定する。位置センサ３２は、例えば、光電式又は電磁式の位置検出素子を含む。また、調整機構３０が傾斜角調整機構又は回転角調整機構を含む場合、位置センサ３２は、光電式又は電磁式の角度検出素子（ホール素子等）を含む。
【００３３】
［Ａ−１−９．ＥＣＵ３４］
（Ａ−１−９−１．ＥＣＵ３４の概要）
ＥＣＵ３４は、ミラー２８の表示部５０に映し出す画像を制御するものであり、入出力部７０、演算部７２及び記憶部７４を備える。入出力部７０は信号の入出力を行う。入出力部７０には、アナログ／デジタル変換器及びデジタル／アナログ変換器を含むことができる。演算部７２は、記憶部７４に記憶されたプログラム及びデータを用いて各種の制御を実行する。演算部７２は、中央演算装置（ＣＰＵ）を含む。演算部７２の詳細は後述する。
【００３４】
記憶部７４は、演算部７２が用いるプログラム及びデータを記憶するものであり、ランダム・アクセス・メモリ（以下「ＲＡＭ」という。）を備える。ＲＡＭとしては、レジスタ等の揮発性メモリと、フラッシュメモリ等の不揮発性メモリとを用いることができる。また、記憶部７４は、ＲＡＭに加え、リード・オンリー・メモリ（以下「ＲＯＭ」という。）を有してもよい。
【００３５】
（Ａ−１−９−２．演算部７２）
図１に示すように、演算部７２は、基準位置検出部８０と、注視判定部８２と、画像制御部８４とを有する。
【００３６】
基準位置検出部８０は、基準位置Ｐｒｅｆを運転者画像Ｉｄｒに基づいて検出する。基準位置Ｐｒｅｆは、表示部５０に対する運転者１００の目１０４の相対位置を示すものである。本実施形態では、基準位置Ｐｒｅｆは、運転者１００の視線Ｌｓ上の一点（例えば開始点）であり、視線Ｌｓの検出及び後述する抽出範囲Ｒｓｂの設定に用いられる。
【００３７】
本実施形態において、基準位置Ｐｒｅｆは、運転者１００の目１０４（眼球）（図４〜図６）の位置に基づいて設定される。例えば、両方の目１０４の座標の中点を基準位置Ｐｒｅｆとすることができる。或いは、一方の目１０４の座標を基準位置Ｐｒｅｆとしてもよい。或いは、運転者１００の頭１０２、鼻、肩の特定位置等を基準位置Ｐｒｅｆとしてもよい。なお、ここにいう目１０４とは、眼球自体に関する位置（アイポイント）であり、瞳孔１０６の位置とは別である。このため、基準位置Ｐｒｅｆは、瞳孔１０６の位置とは異なることに留意されたい。
【００３８】
注視判定部８２は、運転者１００が表示部５０を注視しているか否かを判定する。ここにいう「注視」とは、運転者１００が意図的に見ることを意味する。このため、運転者１００が意図せずに視野範囲の中に表示部５０が入る場合を含まない。本実施形態では、運転者１００が表示部５０を注視しているか否かを、運転者１００の視線Ｌｓ上に表示部５０があるか否かにより判定する。詳細は、図２を参照して後述する。
【００３９】
画像制御部８４は、カメラ２０、２２ａ、２２ｂ、２４、２６が撮像した画像（以下「撮像画像Ｉｃｐ」ともいう。）を用いて表示部５０に表示する周囲画像Ｉｓｒ（抽出画像）を制御する。以下では、後方カメラ２０、側方カメラ２２ａ、２２ｂ、運転者カメラ２４及び後席カメラ２６の撮像画像Ｉｃｐをそれぞれ撮像画像Ｉｒｒ、Ｉｌｔ、Ｉｒｔ、Ｉｄｒ、Ｉｒｓともいう。
【００４０】
図１に示すように、画像制御部８４は、抽出範囲設定部９０及び表示制御部９２を有する。抽出範囲設定部９０は、カメラ２０、２２ａ、２２ｂ、２４、２６の撮像画像Ｉｃｐの抽出範囲Ｒｓｂを設定する抽出範囲設定制御を実行する。抽出範囲設定制御の詳細は、図３を参照して後述する。表示制御部９２は、抽出範囲設定制御で設定された抽出範囲Ｒｓｂを用いて撮像画像Ｉｃｐの一部を抽出して周囲画像Ｉｓｒとして表示部５０に表示させる。
【００４１】
＜Ａ−２．制御＞
［Ａ−２−１．ミラー表示制御］
図２は、本実施形態におけるミラー表示制御のフローチャートである。ミラー表示制御は、ルームミラー２８の表示に関する制御であり、ＥＣＵ３４が実行する。図２のステップＳ１１において、ＥＣＵ３４は、運転者カメラ２４の撮像画像Ｉｃｐ（運転者画像Ｉｄｒ）を取得する。
【００４２】
ステップＳ１２において、ＥＣＵ３４の基準位置検出部８０は、運転者画像Ｉｄｒに基づいて視線基準位置Ｐｒｅｆ＿ｌｓを検出する。本実施形態における視線基準位置Ｐｒｅｆ＿ｌｓは、運転者１００の一方の目１０４（例えば左目）の瞳孔１０６の位置とする。
【００４３】
ステップＳ１３において、ＥＣＵ３４の注視判定部８２は、運転者画像Ｉｄｒに基づいて運転者１００の視線方向Ｄｌｓを検出する。具体的には、ＥＣＵ３４は、パターンマッチングを用いて運転者画像Ｉｄｒから運転者１００の頭１０２、目１０４及び瞳孔１０６を抽出する。次いで、ＥＣＵ３４は、頭１０２及び目１０４の位置に基づいて頭１０２の回転角度を算出する。また、ＥＣＵ３４は、目１０４における瞳孔１０６の位置に基づいて瞳孔１０６の角度（左右方向及び上下方向）を算出する。そして、ＥＣＵ３４は、頭１０２の回転角度及び瞳孔１０６の角度に基づいて注視方向Ｄｌｓを算出する。
【００４４】
ステップＳ１４において、ＥＣＵ３４の注視判定部８２は、視線基準位置Ｐｒｅｆ＿ｌｓ及び視線方向Ｄｌｓに基づいて運転者１００の視線Ｌｓを検出する。視線Ｌｓは、視線基準位置Ｐｒｅｆ＿ｌｓを通り且つ視線方向Ｄｌｓに向かう直線として定義される。
【００４５】
ステップＳ１５において、ＥＣＵ３４の注視判定部８２は、運転者１００が電子ルームミラー２８（又は表示部５０）を注視しているか否かを判定する。換言すると、ＥＣＵ３４は、運転者１００の視線Ｌｓがルームミラー２８の表面と交差しているか否かを判定する。なお、ここでのルームミラー２８の表面の座標は、運転者カメラ２４とミラー２８との位置関係より予め記憶部７４に記憶されている。
【００４６】
運転者１００がルームミラー２８を注視している場合（Ｓ１５：ＹＥＳ）、ステップＳ１６において、ＥＣＵ３４の抽出範囲設定部９０等は、抽出範囲設定制御を実行する。抽出範囲設定制御は、撮像画像Ｉｃｐのうち周囲画像Ｉｓｒとして抽出する範囲（以下「抽出範囲Ｒｓｂ」という。）を設定する制御である。抽出範囲設定制御の詳細については、図３〜図６を参照して後述する。
【００４７】
運転者１００がルームミラー２８を注視していない場合（Ｓ１５：ＮＯ）、ステップＳ１７において、ＥＣＵ３４の抽出範囲設定部９０は、抽出範囲Ｒｓｂとして基準抽出範囲Ｒｒｅｆを選択する。基準抽出範囲Ｒｒｅｆは、基準の抽出範囲Ｒｓｂ（固定値）であり、本実施形態では、ミラー表示制御の開始前に実行し得る基準抽出範囲設定制御により変更可能である。或いは、基準抽出範囲Ｒｒｅｆは変更できない固定値としてもよい。基準抽出範囲設定制御の詳細については、図７を参照して後述する。
【００４８】
ステップＳ１６又はＳ１７の後、ステップＳ１８において、ＥＣＵ３４の表示制御部９２は、撮像画像Ｉｃｐから周囲画像Ｉｓｒを生成する。その際、ＥＣＵ３４は、ステップＳ１６又はＳ１７で設定した抽出範囲Ｒｓｂを用いて撮像画像Ｉｃｐの一部を抜き出す。例えば、周囲画像Ｉｓｒが後方画像Ｉｒｒのみから抽出される場合、後方カメラ２０の撮像画像Ｉｃｐから周囲画像Ｉｓｒを抽出する。また、周囲画像Ｉｓｒが後方画像Ｉｒｒ及び側方画像Ｉｓｄ（左周囲画像Ｉｓｒ又は右周囲画像Ｉｓｒ）の両方から抽出される場合、ＥＣＵ３４は、後方カメラ２０の撮像画像Ｉｒｒと、側方カメラ２２ａの撮像画像Ｉｌｔ又は側方カメラ２２ｂの撮像画像Ｉｒｔとから周囲画像Ｉｓｒを抽出する。
【００４９】
ステップＳ１９において、ＥＣＵ３４の表示制御部９２は、抽出した周囲画像Ｉｓｒを電子ルームミラー２８の表示部５０に表示させる。
【００５０】
［Ａ−２−２．抽出範囲設定制御］
（Ａ−２−２−１．抽出範囲設定制御の全体的な流れ）
図３は、本実施形態における抽出範囲設定制御のフローチャート（図２のＳ１６の詳細）である。上記のように、抽出範囲設定制御は、撮像画像Ｉｃｐのうち周囲画像Ｉｓｒを抽出する抽出範囲Ｒｓｂを設定する制御であり、ＥＣＵ３４の抽出範囲設定部９０等が実行する。
【００５１】
図３のステップＳ２１において、ＥＣＵ３４の基準位置検出部８０は、運転者画像Ｉｄｒに基づいて運転者１００の基準位置Ｐｒｅｆを検出する。上記のように、基準位置Ｐｒｅｆは、表示部５０に対する運転者１００の目１０４の相対位置を示す。本実施形態における基準位置Ｐｒｅｆは、運転者１００の目１０４（眼球）（図４〜図６）の位置に基づいて設定される。例えば、図２のステップＳ１２で検出した視線基準位置Ｐｒｅｆ＿ｌｓを運転者１００の基準位置Ｐｒｅｆとしてもよい。
【００５２】
ステップＳ２２において、ＥＣＵ３４は、基準位置Ｐｒｅｆに応じて抽出範囲Ｒｓｂを変化させる。抽出範囲Ｒｓｂを変化させる方法については、図４〜図６を参照して後述する。ステップＳ２３において、ＥＣＵ３４は、画像合成処理を実行する条件（以下「画像合成条件」という。）が成立したか否かを判定する。画像合成処理は、周囲画像Ｉｓｒに別画像を合成する処理である。ここでの別画像は、例えば、後席カメラ２６が撮像した後席画像Ｉｒｓとすることができる。
【００５３】
画像合成条件が成立した場合（Ｓ２３：ＹＥＳ）、ステップＳ２４において、ＥＣＵ３４は、画像合成処理を実行する。画像合成処理の詳細は、図６を参照して後述する。画像合成条件が成立しない場合（Ｓ２３：ＮＯ）、ＥＣＵ３４は今回の抽出範囲設定制御を終了する。
【００５４】
（Ａ−２−２−２．抽出範囲Ｒｓｂを変化させる方法）
図４〜図６は、本実施形態において抽出範囲Ｒｓｂを変化させる方法を説明するための第１図〜第３図である。図４〜図６では、運転者１００の頭１０２、目１０４及び瞳孔１０６が示されている。図６には、運転者１００の運転席１０８も示されている。また、図６では、後席１１４に座った同乗者１１０の頭１１２も示されている。運転者１００及び同乗者１１０の頭１０２、１１２以外の部位は図示を省略している。上記のように、ＥＣＵ３４は、基準位置Ｐｒｅｆに応じて抽出範囲Ｒｓｂを変化させる（図３のＳ２２）。
【００５５】
図４では、運転者１００の基準位置Ｐｒｅｆが左右方向（車幅方向）に移動した場合の抽出範囲Ｒｓｂの変化が示されている。図４は、車両１０の上方から下方に向かって見た平面図である。図４において、破線で示す部分が移動前の運転者１００の頭１０２、視線Ｌｓ及び抽出範囲Ｒｓｂであり、実線で示す部分が移動後の運転者１００の頭１０２、視線Ｌｓ及び抽出範囲Ｒｓｂである。
【００５６】
以下では、図４における移動前の視線Ｌｓ及び抽出範囲Ｒｓｂを視線Ｌｓ１及び抽出範囲Ｒｓｂ１ともいい、図４における移動後の視線Ｌｓ及び抽出範囲Ｒｓｂを視線Ｌｓ２及び抽出範囲Ｒｓｂ２ともいう。
【００５７】
上記のように、後方画像Ｉｒｒ及び側方画像Ｉｓｄは、車両１０の内部の画像を含んでいないため、表示部５０に映し出される画像（周囲画像Ｉｓｒ）は、通常のルームミラー（表面が鏡面加工されているもの）に映し出される像と異なる。換言すると、図４では、抽出範囲Ｒｓｂ１、Ｒｓｂ２それぞれが車両１０内にも及んでいるが、実際の周囲画像Ｉｓｒは、車両１０の内部の画像が含まれない（図５及び図６も同様である。）。
【００５８】
図４の場合、運転者１００の頭１０２が右側に移動することで基準位置Ｐｒｅｆも右側に移動する。この際、ＥＣＵ３４は、従来のルームミラーと同様となるように、基準位置Ｐｒｅｆの移動に応じて周囲画像Ｉｓｒを変化させる。具体的には、頭１０２が右側に移動すると、ＥＣＵ３４は、抽出範囲Ｒｓｂを後方画像Ｉｒｒの範囲を少なくすると共に左側方画像Ｉｓｄの範囲を増やす。このため、ＥＣＵ３４は、図４において、抽出範囲Ｒｓｂを時計回りに移動させる。換言すると、移動後の抽出範囲Ｒｓｂ２は、移動前の抽出範囲Ｒｓｂ１に対して時計回りに移動した位置にある。
【００５９】
なお、運転者１００の頭１０２が右側に移動すると、基準位置Ｐｒｅｆはミラー２８から離間する（又は遠ざかる）ことにもなる。このため、ＥＣＵ３４は、周囲画像Ｉｓｒの倍率を小さくするように演算する。これに伴い、抽出範囲Ｒｓｂは拡大されることとなる。但し、図４では、抽出範囲Ｒｓｂの移動（回転）を分かり易くするため、抽出範囲Ｒｓｂの大きさを変化させていない。
【００６０】
図５では、運転者１００の基準位置Ｐｒｅｆが前後方向に移動した場合の抽出範囲Ｒｓｂの変化が示されている。図５は、車両１０の上方から下方に向かって見た平面図である。図５において、破線で示す部分が移動前の運転者１００の頭１０２、視線Ｌｓ及び抽出範囲Ｒｓｂであり、実線で示す部分が移動後の運転者１００の頭１０２、視線Ｌｓ及び抽出範囲Ｒｓｂである。
【００６１】
以下では、図５における移動前の視線Ｌｓ及び抽出範囲Ｒｓｂを視線Ｌｓ３及び抽出範囲Ｒｓｂ３ともいい、図５における移動後の視線Ｌｓ及び抽出範囲Ｒｓｂを視線Ｌｓ４及び抽出範囲Ｒｓｂ４ともいう。
【００６２】
図５の場合、運転者１００の頭１０２が前方に移動することで基準位置Ｐｒｅｆも前方に移動する。この際、ＥＣＵ３４は、従来のルームミラーと同様となるように、基準位置Ｐｒｅｆの移動に応じて周囲画像Ｉｓｒを変化させる。具体的には、頭１０２がミラー２８に接近すると（又は近づくと）、ＥＣＵ３４は、周囲画像Ｉｓｒの倍率を大きくするように演算する。このため、ＥＣＵ３４は、抽出範囲Ｒｓｂを縮小する。換言すると、移動後の抽出範囲Ｒｓｂ４は、移動前の抽出範囲Ｒｓｂ３に対して大きくなる。
【００６３】
なお、運転者１００の頭１０２が前方に移動すると、基準位置Ｐｒｅｆはミラー２８に対して右側に移動することにもなる。このため、ＥＣＵ３４は、抽出範囲Ｒｓｂを時計回りに移動させるように演算する（図４参照）。但し、図５では、抽出範囲Ｒｓｂの拡大を分かり易くするため、抽出範囲Ｒｓｂの時計回りの移動を反映していない。
【００６４】
図６では、運転者１００の基準位置Ｐｒｅｆが上下方向に移動した場合の抽出範囲Ｒｓｂの変化が示されている。図６は、車両１０の右側方から左側方に向かって見た側面図である。図６において、破線で示す部分が移動前の運転者１００の頭１０２、視線Ｌｓ及び抽出範囲Ｒｓｂであり、実線で示す部分が移動後の運転者１００の頭１０２、視線Ｌｓ及び抽出範囲Ｒｓｂである。
【００６５】
以下では、図６における移動前の視線Ｌｓ及び抽出範囲Ｒｓｂを視線Ｌｓ５及び抽出範囲Ｒｓｂ５ともいい、図６における移動後の視線Ｌｓ及び抽出範囲Ｒｓｂを視線Ｌｓ６及び抽出範囲Ｒｓｂ６ともいう。
【００６６】
図６の場合、運転者１００の頭１０２が上方に移動することで基準位置Ｐｒｅｆも上方に移動する。この際、ＥＣＵ３４は、従来のルームミラーと同様となるように、基準位置Ｐｒｅｆの移動に応じて周囲画像Ｉｓｒを変化させる。具体的には、図６の場合、ミラー２８の上部が運転者１００に近くなるように傾斜している。このため、頭１０２が上方に移動すると、ＥＣＵ３４は、抽出範囲Ｒｓｂを下方に移動させる。換言すると、移動後の抽出範囲Ｒｓｂ６は、移動前の抽出範囲Ｒｓｂ５に対して下方に位置する。
【００６７】
なお、ミラー２８が図６のように傾斜している場合、運転者１００の頭１０２が上方に移動すると、基準位置Ｐｒｅｆはミラー２８に接近する（又は近づく）ことにもなる。このため、ＥＣＵ３４は、周囲画像Ｉｓｒの倍率を大きくするように演算する。これに伴い、抽出範囲Ｒｓｂは縮小されることとなる。但し、図６では、抽出範囲Ｒｓｂの移動（回転）を分かり易くするため、抽出範囲Ｒｓｂの大きさを変化させていない。
【００６８】
（Ａ−２−２−３．画像合成処理）
上記のように、図６では、運転者１００の基準位置Ｐｒｅｆが上下方向に移動した場合の抽出範囲Ｒｓｂの変化が示されており、運転者１００の頭１０２が上方に移動することに伴って、抽出範囲Ｒｓｂが下方に変化する。
【００６９】
これに加え、本実施形態では、頭１０２が上方に所定距離移動することは、画像合成条件（図３のＳ２３）にも該当する。このため、頭１０２が上方に所定距離移動することで画像合成条件が成立すると（Ｓ２３：ＹＥＳ）、ＥＣＵ３４は、後方画像Ｉｒｒの一部又は全部に後席画像Ｉｒｓを重畳させて表示部５０に表示させる。ここにいう重畳とは、ある画像の内部に別の画像を表示することを意味する。本実施形態の場合、例えばパターンマッチングを用いて後席画像Ｉｒｓから同乗者１１０の画像を抽出する。そして、抽出した同乗者１１０の画像のみを後方画像Ｉｒｒに重ね合わせて表示する。
【００７０】
なお、後方画像Ｉｒｒに後席画像Ｉｒｓを重畳させる代わりに、後方画像Ｉｒｒから後席画像Ｉｒｓに切り替えてもよい。或いは、後方画像Ｉｒｒの表示領域を狭くして、後方画像Ｉｒｒと後席画像Ｉｒｓの両方を表示することもできる。
【００７１】
また、後方画像Ｉｒｒへの後席画像Ｉｒｓの重畳は、所定の重畳終了条件が成立すると終了する。当該重畳終了条件としては、例えば、運転者１００の視線が表示部５０から外れたこととすることができる。これに加えて又はこれに代えて、所定時間（例えば３〜１０秒間のいずれか）が経過したことを重畳終了条件としてもよい。
【００７２】
［Ａ−２−３．基準抽出範囲設定制御］
図７は、本実施形態における基準抽出範囲設定制御のフローチャートである。上記のように、基準抽出範囲設定制御は、基準抽出範囲Ｒｒｅｆを設定する制御であり、ミラー位置調整機構３０によるミラー位置Ｐｍｒ（表示部位置Ｐｄｒ）の調整等に応じて行われる。基準抽出範囲設定制御は、図２のミラー表示制御の前に実行可能である。ＥＣＵ３４の抽出範囲設定部９０が実行する。
【００７３】
上記のように、車両１０を基準とした左右方向、前後方向及び上下方向に関して頭１０２の移動を考える場合、表示部５０と頭１０２との関係は複数の方向への移動を伴うため、説明が複雑になる。そこで、理解を容易化するため、図７のフローチャートでは、表示部５０に対する頭１０２の移動方向の観点から、表示部５０の位置Ｐ（表示部位置Ｐｄｐ）と基準抽出範囲Ｒｒｅｆの関係を説明する。
【００７４】
なお、実際に基準抽出範囲Ｒｒｅｆを設定する場合、表示部５０の位置Ｐ（表示部位置Ｐｄｐ）と、基準抽出範囲Ｒｒｅｆの位置及び大きさとの関係をマップに規定しておけばよい。
【００７５】
図７のステップＳ３１において、ＥＣＵ３４は、位置センサ３２から表示部位置Ｐｄｐ（空間座標）を取得する。ステップＳ３２において、ＥＣＵ３４は、運転者１００の仮想的な基準位置Ｐｒｅｆ（以下「仮想基準位置Ｐｒｅｆｖ」という。）に対して表示部５０が左右方向に移動しているか否かを判定する。当該判定は、位置Ｐｄｐの前回値と比較して今回値が左右方向に変化しているか否かに基づいて判定する。仮想基準位置Ｐｒｅｆｖに対して表示部５０が左右方向に移動している場合（Ｓ３２：ＹＥＳ）、ステップＳ３３に進む。仮想基準位置Ｐｒｅｆｖに対して表示部５０が左右方向に移動していない場合（Ｓ３２：ＮＯ）、ステップＳ３４に進む。
【００７６】
ステップＳ３３において、ＥＣＵ３４は、左右移動量ΔＰｌｒに応じて基準抽出範囲Ｒｒｅｆを変化させる。例えば、運転者１００の仮想基準位置Ｐｒｅｆｖに対して表示部５０が左に移動した場合、表示部５０に対して運転者１００の仮想基準位置Ｐｒｅｆｖが右に移動することと同義である。このため、ＥＣＵ３４は、基準抽出範囲Ｒｒｅｆを左に移動させる（図４参照）。この際、上下方向における基準抽出範囲Ｒｒｅｆの縮尺は維持する。
【００７７】
ステップＳ３４において、ＥＣＵ３４は、仮想基準位置Ｐｒｅｆｖに対して表示部５０が前後方向に移動しているか否かを判定する。当該判定は、位置Ｐｄｐの前回値と比較して今回値が前後方向に変化しているか否かに基づいて判定する。仮想基準位置Ｐｒｅｆｖに対して表示部５０が前後方向に移動している場合（Ｓ３４：ＹＥＳ）、ステップＳ３５に進む。仮想基準位置Ｐｒｅｆｖに対して表示部５０が前後方向に移動していない場合（Ｓ３４：ＮＯ）、ステップＳ３６に進む。
【００７８】
ステップＳ３５において、ＥＣＵ３４は、前後移動量ΔＰｆｒに応じて基準抽出範囲Ｒｒｅｆを変化させる。例えば、仮想基準位置Ｐｒｅｆｖに対して表示部５０が接近した場合、上下方向及び左右方向に基準抽出範囲Ｒｒｅｆを拡大させて表示倍率を減少させる（図５参照）。
【００７９】
ステップＳ３６において、ＥＣＵ３４は、運転者１００の仮想基準位置Ｐｒｅｆｖに対して表示部５０が上下方向に移動しているか否かを判定する。当該判定は、位置Ｐｄｐの前回値と比較して今回値が上下方向に変化しているか否かに基づいて判定する。表示部５０が上下方向に移動している場合（Ｓ３６：ＹＥＳ）、ステップＳ３７において、ＥＣＵ３４は、上下移動量ΔＰｖに応じて基準抽出範囲Ｒｒｅｆを変化させる。
【００８０】
例えば、運転者１００の仮想基準位置Ｐｒｅｆｖに対して表示部５０が下方に移動した場合、表示部５０に対して運転者１００の仮想基準位置Ｐｒｅｆｖが上方に移動することと同義である。このため、基準抽出範囲Ｒｒｅｆを下方に移動させる（図６参照）。この際、左右方向における基準抽出範囲Ｒｒｅｆの縮尺は維持する。
【００８１】
なお、ステップＳ３２、Ｓ３４、Ｓ３６のいずれの場合も、仮想基準位置Ｐｒｅｆｖの代わりに実際の基準位置Ｐｒｅｆ（検出値）を用いてもよい。
【００８２】
また、ボールジョイント等により電子ミラー２８の傾斜調整（上下方向、左右方向及び前後方向）並びに回転調整が可能である場合、ミラー２８の傾斜角及び回転角に基づいて上記と同様の考え方で基準抽出範囲Ｒｒｅｆを変更する。
【００８３】
＜Ａ−３．本実施形態の効果＞
以上説明したように、本実施形態によれば、運転者１００（ユーザ）が表示部５０を注視している場合（図２のＳ１５：ＹＥＳ）、表示部５０に対する運転者１００の目１０４の相対位置を示す基準位置Ｐｒｅｆに応じて撮像画像Ｉｃｐの抽出範囲Ｒｓｂを変化させる（図２のＳ１６、図３）。一方、運転者１００が表示部５０を注視していない場合（図２のＳ１５：ＮＯ）、基準位置Ｐｒｅｆにかかわらず撮像画像Ｉｃｐの抽出範囲Ｒｓｂを固定する（Ｓ１７）。このため、運転者１００が表示部５０を注視していないにもかかわらず撮像画像Ｉｃｐの抽出範囲Ｒｓｂが変化することにより生じる煩わしさを解消することが可能となる。従って、車両１０の周囲画像Ｉｓｒ（抽出画像）の利用に関する運転者１００の利便性を向上できる。
【００８４】
本実施形態において、基準位置Ｐｒｅｆは、運転者１００（ユーザ）の頭１０２又は目１０４の位置とすることができる（図３のＳ２１、図４〜図６）。これにより、運転者１００が表示部５０を見ていない状態で頭１０２又は目１０４の位置が変化しても、撮像画像Ｉｃｐの抽出範囲Ｒｓｂは固定されたままとなる。このため、運転者１００が周辺監視等の目的（周辺視）のために頭１０２又は目１０４の位置を変化させた場合でも、撮像画像Ｉｃｐの抽出範囲Ｒｓｂは固定されたままとなる。従って、周辺監視等の際の運転者１００の利便性を向上することが可能となる。
【００８５】
本実施形態において、画像制御部８４は、運転者１００（ユーザ）が表示部５０を注視している状態（図２のＳ１５：ＹＥＳ）で画像合成条件が成立したとき（図３のＳ２３：ＹＥＳ）（例えば、基準位置Ｐｒｅｆが所定条件の変化をしたとき（図６））、周囲画像Ｉｓｒ（抽出画像）に後席カメラ２６（別のカメラ）が撮像した撮像画像Ｉｃｐ（別の撮像画像）の一部又は全部を合わせて表示部５０に表示させる（図３のＳ２４）。これにより、基準位置Ｐｒｅｆが所定条件の変化をしたときには、１つの表示部５０に複数の画像を表示することで運転者１００の利便性を向上することが可能となる。
【００８６】
本実施形態において、画像制御部８４は、位置センサ３２が検出した表示部５０の位置Ｐｄｐに基づいて基準抽出範囲Ｒｒｅｆ（又は抽出範囲Ｒｓｂ）を変化させる（図７）。これにより、運転者１００（ユーザ）が表示部５０の位置Ｐｄｐを調整可能な構成において、表示部５０の位置Ｐｄｐの変化に応じた周囲画像Ｉｓｒを表示することが可能となる。
【００８７】
本実施形態において、画像制御部８４は、表示部５０の位置Ｐｄｐが仮想基準位置Ｐｒｅｆｖ（又は基準位置Ｐｒｅｆ）に対して左右方向に移動した場合（図７のＳ３２：ＹＥＳ等）、上下方向における基準抽出範囲Ｒｒｅｆ（又は抽出範囲Ｒｓｂ）の縮尺を維持したまま抽出範囲Ｒｓｂを左右方向に移動させる（Ｓ３３等）。表示部５０の位置Ｐｄｐが仮想基準位置Ｐｒｅｆ（又は基準位置Ｐｒｅｆ）に対して上下方向に移動した場合（図７のＳ３６：ＹＥＳ等）、左右方向における基準抽出範囲Ｒｒｅｆ（又は抽出範囲Ｒｓｂ）の縮尺を維持したまま基準抽出範囲Ｒｒｅｆ（又は抽出範囲Ｒｓｂ）を上下方向に移動させる（Ｓ３７等）。
【００８８】
これにより、運転者１００が表示部５０を仮想基準位置Ｐｒｅｆ（又は基準位置Ｐｒｅｆ）に対して左右方向又は上下方向に移動させることが可能な構成において、表示部５０の位置Ｐｄｐの変化に応じた周囲画像Ｉｓｒを表示することが可能となる。
【００８９】
本実施形態において、画像制御部８４は、表示部５０の位置Ｐｄｐが仮想基準位置Ｐｒｅｆ（又は基準位置Ｐｒｅｆ）に対して前後方向に移動した場合（図７のＳ３４：ＹＥＳ等）、基準抽出範囲Ｒｒｅｆ（又は抽出範囲Ｒｓｂ）を拡大又は縮小する（Ｓ３５等）。これにより、運転者１００が表示部５０を仮想基準位置Ｐｒｅｆ（又は基準位置Ｐｒｅｆ）に対して前後方向に移動させることが可能な構成において、表示部５０の位置Ｐの変化に応じた周囲画像Ｉｓｒを表示することが可能となる。
【００９０】
Ｂ．変形例
なお、本発明は、上記実施形態に限らず、本明細書の記載内容に基づき、種々の構成を採り得ることはもちろんである。例えば、以下の構成を採用することができる。
【００９１】
＜Ｂ−１．搭載対象＞
上記実施形態では、画像表示装置１２を車両１０に搭載した（図１）。しかしながら、例えば、運転者１００（ユーザ）の基準位置Ｐｒｅｆに応じて抽出範囲Ｒｓｂを変化させる観点からすれば、これに限らない。例えば、船舶、航空機等の移動物体に画像表示装置１２を適用してもよい。或いは、画像表示装置１２をクレーン等の可動装置に用いることもできる。
【００９２】
＜Ｂ−２．表示部５０＞
上記実施形態では、表示部５０を電子ルームミラー２８に配置したが（図１）、車両１０又はその他の対象の周囲画像Ｉｓｒ（抽出画像）を表示する表示部５０であれば、これに限らない。例えば、車両１０のサイドミラー（ドアミラー）又は図示しないナビゲーション装置に表示部５０を配置することが可能である。或いは、ヘッド・アップ・ディスプレイ（ＨＵＤ）として表示部５０をフロントウィンドウ等に配置してもよい。
【００９３】
＜Ｂ−３．後方カメラ２０及び側方カメラ２２ａ、２２ｂ＞
上記実施形態では、後方カメラ２０及び側方カメラ２２ａ、２２ｂをカラーカメラとしたが、車両１０の周囲画像Ｉｓｒに用いられる撮像画像Ｉｃｐを取得するものであれば、これに限らない。例えば、夜間等に使うことを想定してモノクロカメラ又は近赤外線カメラを後方カメラ２０及び側方カメラ２２ａ、２２ｂの一部又は全部として用いてもよい。
【００９４】
上記実施形態では、後方カメラ２０及び側方カメラ２２ａ、２２ｂの撮像画像Ｉｃｐを周囲画像Ｉｓｒとして用いた（図４〜図６）。しかしながら、例えば、運転者１００が表示部５０を注視しているか否かにより撮像画像Ｉｃｐの抽出範囲Ｒｓｂを設定する観点からすれば、これに限らない。例えば、後方カメラ２０又は側方カメラ２２ａ、２２ｂの一方のみ撮像画像Ｉｃｐを用いてもよい。或いは、これらに加えて又はこれらに代えて、後席カメラ２６の撮像画像Ｉｃｐを用いることも可能である。
【００９５】
＜Ｂ−４．運転者１００による表示部５０の注視＞
上記実施形態では、運転者１００が表示部５０を注視しているか否かを、運転者１００の視線Ｌｓが表示部５０と交差しているか否かにより判定した（図２のＳ１５）。しかしながら、例えば、運転者１００が表示部５０を注視しているか否かを判定する観点からすれば、これに限らない。例えば、運転者１００の視野範囲（又は当該視野範囲の一部）の中に表示部５０があるか否かにより判定してもよい。
【００９６】
＜Ｂ−５．抽出範囲設定制御＞
上記実施形態の抽出範囲設定制御（図３）では、基準位置Ｐｒｅｆ自体（座標）に応じて抽出範囲Ｒｓｂを変化させた（Ｓ２２）。しかしながら、例えば、運転者１００が表示部５０を注視している場合に抽出範囲Ｒｓｂの変化を許容する観点からすれば、これに限らない。例えば、単位時間当たりの基準位置Ｐｒｅｆの変化量ΔＰｒｅｆ［ｍｍ／ｓ］に基づいて抽出範囲Ｒｓｂを変化させてもよい。
【００９７】
＜Ｂ−６．画面合成処理＞
上記実施形態では、周囲画像Ｉｓｒに別画像（例えば後席画像Ｉｒｓ）をそのまま合成した。しかしながら、例えば、周囲画像Ｉｓｒに別画像を合成する観点からすれば、これに限らない。例えば、画像合成処理では、周囲画像Ｉｓｒに半透明の別画像を合成することも可能である。或いは、もともと周囲画像Ｉｓｒに半透明の別画像を合成しておき、画像合成条件と同等の条件が成立した場合、半透明の画像の透過率を下げてはっきり見えるようにしてもよい。
【００９８】
上記実施形態では、画像合成条件の成否を判定し（図３のＳ２３）、画像合成条件が成立した場合（Ｓ２３：ＹＥＳ）、後方画像Ｉｒｒに後席画像Ｉｒｓを合成する画像合成処理を行った（Ｓ２４）。しかしながら、画像合成条件の成否の判定（Ｓ２３）及び画像合成処理（Ｓ２４）を省略することも可能である。
【００９９】
＜Ｂ−７．基準抽出範囲Ｒｒｅｆの設定＞
上記実施形態では、ミラー位置調整機構３０における変位に応じて基準抽出範囲Ｒｒｅｆを変更可能とした（図７）。しかしながら、例えば、運転者１００が表示部５０を注視している場合に抽出範囲Ｒｓｂの変化を許容する観点からすれば、これに限らない。例えば、基準抽出範囲Ｒｒｅｆは、ミラー位置調整機構３０における変位にかかわらず固定とすることも可能である。
【符号の説明】
【０１００】
１０…車両                              １２…画像表示装置
２０…後方カメラ（カメラ）              ２２ａ…左側方カメラ（カメラ）
２２ｂ…右側方カメラ（カメラ）          ２６…後席カメラ（別のカメラ）
２８…電子ルームミラー                  ３２…ミラー位置センサ（位置センサ）
５０…表示部                            ８０…基準位置検出部
８２…注視判定部                        ８４…画像制御部
１００…運転者（ユーザ）                １０２…頭
１０４…目                              Ｉｃｐ…撮像画像
Ｉｒｓ…後席画像（別の撮像画像）        Ｉｓｒ…周囲画像（抽出画像）
Ｐｄｐ…表示部の位置                    Ｐｒｅｆ…基準位置
Ｐｒｅｆｖ…仮想基準位置                Ｒｓｂ…抽出範囲
【図１】
0006770330.tif 000002
【図２】
0006770330.tif 000003
【図３】
0006770330.tif 000004
【図４】
0006770330.tif 000005
【図５】
0006770330.tif 000006
【図６】
0006770330.tif 000007
【図７】
0006770330.tif 000008