(57)【特許請求の範囲】
【請求項１】
車両の車室を撮像する撮像部に撮像された前記車室の画像を、表示部に表示する制御に対応する所定のジェスチャが記憶された記憶部と、
前記撮像部から出力された前記車室に関する画像信号を処理して前記車室の画像に含まれる操作者のジェスチャを識別し、識別した前記ジェスチャが前記記憶部に記憶された前記所定のジェスチャと一致するか判定し、
識別した前記ジェスチャと前記所定のジェスチャとが一致する場合には、撮像された前記車室の画像を前記表示部に表示する制御を行う制御部と、
前記車室における後席を主に照明する照明部と、
が設けられ、
前記撮像部は、前記操作者における前記ジェスチャを行う部分であって、前記照明部により照明されていない非照明部分を撮像する位置に配置されていることを特徴とする車内状況表示装置。
【請求項２】
車両の車室を撮像する撮像部に撮像された前記車室の画像を、表示部に表示する制御に対応する所定のジェスチャが記憶された記憶部と、
前記撮像部から出力された前記車室に関する画像信号を処理して前記車室の画像に含まれる操作者のジェスチャを識別し、識別した前記ジェスチャが前記記憶部に記憶された前記所定のジェスチャと一致するか判定し、
識別した前記ジェスチャと前記所定のジェスチャとが一致する場合には、撮像された前記車室の画像を前記表示部に表示する制御を行う制御部と、
が設けられ、
前記撮像部は、撮像する領域の変更が可能であり、
前記記憶部には、撮像する領域変更の制御に対応する変更に係るジェスチャが更に記憶され、
前記制御部は、前記識別した前記ジェスチャが前記記憶部に記憶された前記変更に係るジェスチャと一致するか判定し、
識別した前記ジェスチャと前記変更に係るジェスチャとが一致する場合には、前記変更に係るジェスチャに対応する前記撮像する領域変更の制御を行う制御信号を、前記撮像部に出力することを特徴とする車内状況表示装置。
【請求項３】
前記車室の内部を照明する照明部が更に設けられ、
前記撮像部は、前記操作者における前記ジェスチャを行う部分であって、前記照明部により照明された照明部分を撮像する位置に配置されていることを特徴とする請求項２記載の車内状況表示装置。
【請求項４】
前記制御部は、前記表示部に撮像された前記車室の画像を表示する制御を開始してから、所定期間が経過すると、前記表示部における撮像された前記車室の画像の表示を終了する制御を行うことを特徴とする請求項１から３のいずれか１項に記載の車内状況表示装置。
【請求項５】
前記記憶部には、前記表示部における撮像された前記車室の画像の表示を終了する制御に対応する終了に係るジェスチャが記憶され、
前記制御部は、前記識別した前記ジェスチャが前記記憶部に記憶された前記終了に係るジェスチャと一致するか判定し、
識別した前記ジェスチャと前記終了に係るジェスチャとが一致する場合には、前記表示部における撮像された前記車室の画像の表示を終了する制御を行うことを特徴とする請求項１から３のいずれか１項に記載の車内状況表示装置。
【請求項６】
前記制御部において前記ジェスチャが識別される前記操作者は、前記車両の運転者であることを特徴とする請求項１から５のいずれか１項に記載の車内状況表示装置。
【請求項７】
前記制御部によって識別されるジェスチャは、前記操作者の手のうち、前記撮像部に近い側の手によるジェスチャであることを特徴とする請求項１から６のいずれか１項に記載の車内状況表示装置。
【請求項８】
前記車両への不正侵入を検知する不正侵入検知部と、
前記画像信号を前記車両の外部に設置された受信部へ送信する送信部と、
が更に設けられ、
前記制御部は、前記不正侵入検知部から前記車両への不正侵入を検知した際に出力される検知信号が入力されると、前記画像信号を前記受信部へ送信させる制御信号を前記送信部に出力することを特徴とする請求項１から７のいずれか１項に記載の車内状況表示装置。
【請求項９】
前記制御部は、前記不正侵入検知部から前記車両への不正侵入を検知した際に出力される検知信号が入力されると、更に、撮像された前記車室の画像が、前記表示部に表示されることを禁止する制御を行うことを特徴とする請求項８記載の車内状況表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両を運転する運転者が車内の状況、特に車両後席の状況確認する際に用いて好適な車内状況表示装置に関する。
【背景技術】
【０００２】
近年、６歳未満の子供を車に乗せる際には、車両の座席に取り付けられたチャイルドシートに子供を座らせることが義務付けられている。また、チャイルドシートは車両の後席に設置することが、安全を確保するために推奨されている。このように、子供を後席に設置したチャイルドシートに着席させた状態で、親である運転者が車両を運転する場合、運転者が視線を前方から大きく逸らすことなく、後席の子供の状態を確認することが難しかった。
【０００３】
そのため、車両の運転者が視線を前方から大きく逸らすことなく、後席の子供の状況など、車両の同乗者の状況の確認ができる技術の開発が望まれ、この要望に応えるために種々の技術が提案されている（例えば、特許文献１から５参照。）。
【０００４】
具体的には、特許文献１には、インストルメントパネルに設けられたスイッチを操作することにより、後席の状況をカメラで撮影し、撮影した映像を前席の乗員に見える位置に配置されたディスプレイに表示させる技術が記載されている。
【０００５】
特許文献２には、車両の天井中央に設置された車室内全体の検知が可能なカメラモジュールにより後席の状況を撮影し、撮影した映像をダッシュボートの中央上部等に設けられた表示部に表示させる技術が記載されている。
【０００６】
特許文献３には、車両のインナーリヤビューミラー周辺等に設置された３Ｄカメラにより車室内の状況を撮影し、撮影した３Ｄ映像（３次元映像）を情報処理することにより後席に座った乗員に関する情報を抽出する技術が記載されている。
【０００７】
特許文献４に記載された技術は、チャイルドシートに設けられた振動センサや温度センサなどの各種センサにより検出された情報を、インストルメントパネル等に設けられた表示部に表示する技術であり、さらに、後席の状況を確認する後席モニター用のミラーが設けられたものである。
【０００８】
特許文献５には、車両の天井に、前席の乗員または後席の乗員が映るミラーをそれぞれ設置し、このミラーに映った各乗員を車両の後部等に配置されたカメラで撮影する技術が記載されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００３−０２５９１１号公報
【特許文献２】特開２００３−１０４１３２号公報
【特許文献３】特開２００８−２６１７４９号公報
【特許文献４】特開２００９−１３７４８４号公報
【特許文献５】特開２０１０−１２５８８２号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
これまでに提案されている技術、例えば特許文献１から５などに記載された技術では、ディスプレイなどの表示部に表示される映像を、後席の状況の表示する映像に切り替える際に用いられる切替えスイッチを設ける必要がある。運転者は、この切替えスイッチを操作することにより、表示部に後席の状況を表示させることができる。
【００１１】
このような場合、運転者は切替えスイッチを操作するために視線を前方から切替えスイッチに向ける必要があり、車両を安全に運転するに際して好ましくないという問題があった。さらに、切替えスイッチを別途設ける必要があるため、スイッチ類の数が増加し、操作を行う運転者等に対する負荷が増加するという問題があった。その他に、切替えスイッチを別途設けると、スイッチ本体や、スイッチに関連した部品を追加して設けることとなり、製造コストが高くなるという問題もあった。
【００１２】
また、車両の盗難や車上荒らし等を目的として車両への不正侵入した者を撮影するセキュリティカメラと、後席の状況を撮影するカメラとが共用される場合、上述の切替えスイッチが設けられていると、セキュリティカメラの存在を不正侵入者に知られる可能性があるという問題があった。
【００１３】
本発明は、上記の課題を解決するためになされたものであって、操作に用いられるスイッチを増やすことなく表示される車内の状況を制御することができる車内状況表示装置を提供することを目的とする。
【課題を解決するための手段】
【００１４】
上記目的を達成するために、本発明は、以下の手段を提供する。
本発明の車内状況表示装置は、車両の車室を撮像する撮像部に撮像された前記車室の画像を、表示部に表示する制御に対応する所定のジェスチャが記憶された記憶部と、前記撮像部から出力された前記車室に関する画像信号を処理して前記車室の画像に含まれる操作者のジェスチャを識別し、識別した前記ジェスチャが前記記憶部に記憶された前記所定のジェスチャと一致するか判定し、識別した前記ジェスチャと前記所定のジェスチャとが一致する場合には、撮像された前記車室の画像を前記表示部に表示する制御を行う制御部と、前記車室における後席を主に照明する照明部と、が設けられ、前記撮像部は、前記操作者における前記ジェスチャを行う部分であって、前記照明部により照明されていない非照明部分を撮像する位置に配置されていることを特徴とする。
【００１５】
このように、撮像部により撮像された車室内の画像（車室内の状況）、特に、後席の状況を表示部に表示することで、操作者は後ろを振り返ることなく、表示部を見るだけで車室内の状況、特に、後席の状況を確認することができる。
【００１６】
さらに、操作者が所定のジェスチャを行うことにより、表示部に車室内の状況を表示させることができるため、表示部に車室内の状況を表示させるスイッチを別途設ける必要がない。また、操作者は、表示部に車室内の状況を表示させる際に、上述のスイッチを操作する必要がないため、視線を車内状況表示装置に向ける必要がない。その他に、車室の画像における後席部分の輝度が高くなり、操作者は、後席の状況を把握しやすくなる。
本発明の車内状況表示装置は、車両の車室を撮像する撮像部に撮像された前記車室の画像を、表示部に表示する制御に対応する所定のジェスチャが記憶された記憶部と、前記撮像部から出力された前記車室に関する画像信号を処理して前記車室の画像に含まれる操作者のジェスチャを識別し、識別した前記ジェスチャが前記記憶部に記憶された前記所定のジェスチャと一致するか判定し、識別した前記ジェスチャと前記所定のジェスチャとが一致する場合には、撮像された前記車室の画像を前記表示部に表示する制御を行う制御部と、が設けられ、前記撮像部は、撮像する領域の変更が可能であり、前記記憶部には、撮像する領域変更の制御に対応する変更に係るジェスチャが更に記憶され、前記制御部は、前記識別した前記ジェスチャが前記記憶部に記憶された前記変更に係るジェスチャと一致するか判定し、識別した前記ジェスチャと前記変更に係るジェスチャとが一致する場合には、前記変更に係るジェスチャに対応する前記撮像する領域変更の制御を行う制御信号を、前記撮像部に出力することを特徴とする。
このようにすることで、操作者が望む位置、例えば車室の右後席や左後席などの画像を表示部に表示することができる。撮像する領域の変更には、撮像する領域を水平方向に移動させるパンや、上下方向に移動させたりするチルトなどの変更の他に、撮像する領域の拡大や縮小を行うズームイン、ズームアウトなどの変更も含まれる。
更に、車室の内部を照明する照明部を設けて、操作者におけるジェスチャを行う部分であって、照明部により照明された照明部分を撮像する位置に撮像部を配置することが望ましい。例えば、照明部における照明光の出射方向と、撮像部における撮像方向とが同じ方向であることが望ましい。このようにすることで、車室の画像におけるジェスチャを行う部分の輝度が高くなり、制御部は、車室の画像から操作者のジェスチャを容易に識別できる。
【００１７】
撮像された車室の画像は、所定期間の間、表示部に表示されると、表示が自動的に終了するように、制御部によって制御されることが望ましい。
このようにすることで、操作者は、撮像された車室の画像の表示を終了する操作を行う必要がなく、操作者の負担を減らすことができる。なお、所定期間としては、操作者が表示部に表示された車室の画像を確認するのに必要な時間よりも長い期間であることが好ましい。
【００１８】
記憶部には、表示部への車室の画像の表示を終了する制御に対応する終了に係るジェスチャが記憶され、制御部は、画像信号から識別されたジェスチャが上述の終了に係るジェスチャと一致するか否かを判定し、一致すると判定された場合には、表示部への車室の画像の表示を終了する制御を行うことが望ましい。
【００１９】
つまり、操作者は自らの意思で、表示部への車室の画像の表示を終了させることができる。このようにすることで、車室の画像を所定期間だけ表示した後に自動的に表示を終了する場合と比較して、操作者が表示された車両の画像を見逃すことを防止できる。
【００２０】
制御部においてジェスチャが識別される操作者を、車両の運転者に限定することが望ましい。このように、識別する対象である操作者を運転者に限定することで、操作者を限定しない場合と比較して、運転者が座っている領域においてのみジェスチャの識別を行えばよく、車室の画像におけるジェスチャの識別が行われる領域が狭くなる。そのため、同じ処理能力を備えた制御部を用いてジェスチャの識別を行っても、より細かなジェスチャの識別を行うことができ、ジェスチャの識別率を向上させることができる。さらに、ジェスチャの識別を行う領域を限定しているため、ジェスチャの識別に用いられるアルゴリズムを簡略化することができる。
【００２１】
制御部によって識別されるジェスチャは、操作者の手のうち、撮像部に近い側の手によるジェスチャであることが望ましい。このようにジェスチャを操作者の手によるジェスチャに限定することにより、手のジェスチャに限定しない場合と比較して、運転者の手が動く範囲においてのみジェスチャの識別を行えばよく、ジェスチャの識別率を向上させることができる。さらに手は、体の他の部分と比較して、グー、チョキ、パーなど、形状を大きく変化させることができる部位であるため、手によるジェスチャを識別対象とすることで、ジェスチャの誤認識を抑制することができるとともに、ジェスチャの識別に用いられるアルゴリズムを簡略化することができる。
【００２２】
特に、操作者の手のうち、撮像部に近い側の手によるジェスチャに限定することにより、撮像部から遠い側の手によるジェスチャを識別する場合と比較して、さらに、ジェスチャの識別率を向上させることができる。つまり、撮像部から遠い側の手によりジェスチャを行う場合、撮像部に撮像されやすいように、遠い側の手を撮像部に近づけて行うことが考えられる。この場合、遠い側の手が運転者の体の前側を横切り、その後に遠い側の手によりジェスチャが行われる。これに対して、撮像部に近い側の手によりジェスチャを行う場合、近い側の手が運転者の体の前を横切ることがない。ジェスチャを行う手が体の前を横切ると、制御部においてジェスチャを行う手を識別しつづけることが困難になり、ジェスチャを誤識別する可能性が高くなる。そのため、ジェスチャを行う手を、体の前を横切らない撮像部に近い側の手とすることにより、ジェスチャの識別率を向上させることができる。
【００２３】
また、撮像部から遠い側の手を撮像部に近づけてジェスチャを行うと、ジェスチャを行う手が運転者の体の前を横切ることになるため、車両の運転動作に妨げになる可能性がある。これに対して、撮像部に近い側の手でジェスチャを行う場合には、近い側の手を運転者の体の前を横切らせることなく、撮像部に近づけることができる。
【００２４】
更に、車室の内部を照明する照明部を設けて、操作者におけるジェスチャを行う部分であって、照明部により照明された照明部分を撮像する位置に撮像部を配置することが望ましい。例えば、照明部における照明光の出射方向と、撮像部における撮像方向とが同じ方向であることが望ましい。このようにすることで、車室の画像におけるジェスチャを行う部分の輝度が高くなり、制御部は、車室の画像から操作者のジェスチャを容易に識別できる。
【００２８】
車両への不正侵入を検知する不正侵入検知部と、画像信号を車両の外部に設置された受信部へ送信する送信部が設けられている場合、制御部は、不正侵入検知部から不正侵入を検知した際に出力される検知信号が入力されると、画像信号を受信部へ送信させる制御信号を送信部に出力することが望ましい。このようにすることで、車両へ不正侵入した者を撮像部により撮像し、不正侵入者の画像信号を車両の外部に設置された受信部に送ることができる。
【００２９】
制御部は、不正侵入検知部から不正侵入を検知した際に出力される検知信号が入力されると、撮像部により撮像された車室の画像が、表示部に表示されることを禁止する制御を行うことが望ましい。このようにすることで、不正侵入者が撮像部により撮像されたことを知ることを防止できる。
【発明の効果】
【００３０】
本発明の車内状況表示装置によれば、撮像部から出力された画像信号は制御部において処理されて、撮像された車室の画像から操作者のジェスチャが識別される。制御部は、記憶部に記憶された所定のジェスチャと、識別されたジェスチャとが一致するか判定を行い、一致する場合には、画像信号を表示部に出力し、撮像された車室の画像を表示部に表示する制御を行う。そのため、操作者は後ろを振り返ることなく、表示部を見るだけで車室内の状況、特に、後席の状況を確認することができる。さらに、操作者が所定のジェスチャを行うことにより、表示部に車室内の状況を表示させることができるため、表示部に車室内の状況を表示させるスイッチを別途設ける必要がない。つまり、操作に用いられるスイッチを増やすことなく表示される車内の状況を制御することができるという効果を奏する。
【図面の簡単な説明】
【００３１】
【図１】本発明の第１の実施形態に係る後席状況表示装置の構成を説明する模式図である。
【図２】図１のカメラが車室の天井に配置されている状態を説明する図である。
【図３】図１のカメラおよび照明部の配置を説明する模式図である。
【図４】図１の表示機器に車室の内部の画像が表示されている状態を説明する図である。
【図５】図１の後席状況表示装置における動作を説明するフローチャートである。
【図６】図１のカメラにより撮像された車室の画像の一例を示す図である。
【図７】図１の後席状況表示装置に対して行うジェスチャの例を示す図である。
【図８】図１の後席状況表示装置に対して行うジェスチャの例を示す図である。
【図９】図１の後席状況表示装置に対して行うジェスチャの例を示す図である。
【図１０】図１の後席状況表示装置に対して行うジェスチャの例を示す図である。
【図１１】誤認識される可能性があるジェスチャの例を示す図である。
【図１２】ジェスチャと誤って認識される可能性のある動作の例を示す図である。
【図１３】ジェスチャと誤って認識される可能性のある動作の例を示す図である。
【図１４】図１の後席状況表示装置に対して行うジェスチャの他の例を示す図である。
【図１５】図４の表示機器における他の配置態様を説明する模式図である。
【図１６】本発明の第１の実施形態の変形例に係る後席状況表示装置の概略構成を説明する模式図である。
【図１７】図１６の表示機器の配置状態を説明する模式図である。
【図１８】本発明の第２実施形態に係る後席状況表示装置における制御を説明するフローチャートである。
【図１９】本発明の第３の実施形態に係る後席状況表示装置における制御を説明するフローチャートである。
【図２０】本発明の第４の実施形態に係る後席状況表示装置１における照明部２３０の配置を説明する模式図である。
【図２１】本発明の第５の実施形態に係る後席状況表示装置の全体構成を説明する模式図である。
【図２２】図２１の後席状況表示装置におけるカメラによる撮像領域の制御を説明するフローチャートである。
【図２３】カメラにパン動作を指示するジェスチャを示す図である。
【発明を実施するための形態】
【００３２】
〔第１の実施形態〕
以下、本発明の第１の実施形態に係る後席状況表示装置１ついて図１から図１５を参照して説明する。図１は、本実施形態に係る後席状況表示装置１の構成を説明する模式図である。
【００３３】
本実施形態の後席状況表示装置（車内状況表示装置）１は、車両における車室内の状況、特に後席の状況を前席の乗員、特に運転者が把握する際に用いられるものである。また、本実施形態の後席状況表示装置１は、車両に不正侵入した者を撮像して外部に送信するセキュリティシステムを利用したものであり、車両を保有する者（正規利用者）が車両を利用していない間は、セキュリティシステムとして働くものでもある。
【００３４】
後席状況表示装置１には、図１に示すように、ＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ：電子制御ユニット）１０と、カメラ（撮像部）２０と、照明部３０と、表示機器（表示部）４０と、通信機器（通信部）５０と、不正侵入検知機器（不正侵入検知部）６０と、が主に設けられている。
【００３５】
ＥＣＵ１０は、後席状況表示装置１の中心的な役割を果たすものであり、カメラ２０により撮像された画像を、表示機器４０に表示させる制御を行うものである。さらに、車両が正規利用者に利用されていない場合には、セキュリティシステムとしての制御を行うものでもある。ＥＣＵ１０には、ＣＰＵ（制御部）１１と、ＧＰＵ（制御部）１２と、メモリ（記憶部）１３と、映像出力１４と、が主に設けられている。
【００３６】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ：中央処理装置）１１は、信号の演算処理を行う電子回路であり、後席状況表示装置１における各種制御に係る演算を行うものであり、車両が正規利用者に利用されていない場合には、セキュリティシステムにおける各種制御に係る演算を行うものである。
【００３７】
ＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１２は、ＣＰＵ１１と同様に信号の演算処理を行う電子回路であり、ジェスチャの抽出などの画像信号の演算処理を行うものである。なお、ＣＰＵ１１およびＧＰＵ１２による詳しい制御内容は後述する。
【００３８】
メモリ１３は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）やＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）などの半導体記憶装置であって、ＣＰＵ１１やＧＰＵ１２における演算処理に用いられるプログラムが記憶されるものである。更に、メモリ１３には、後席状況表示装置１における各種の制御内容と、後述する各種のジェスチャとを対応させるテーブルが予め記憶されている。
【００３９】
映像出力１４は、カメラ２０から出力された画像信号であって、表示機器４０において表示可能な形式に変換された信号を表示機器４０に出力するインターフェースである。映像出力１４から表示機器４０への信号の出力は、ＣＰＵ１１から出力される制御信号に基づいて制御されている。
【００４０】
図２は、図１のカメラ２０が車室の天井に配置されている状態を説明する図である。図３は、図１のカメラ２０および照明部３０の配置を説明する模式図である。
カメラ２０は、図２および図３に示すように、車室の天井における前方中央に配置され、車両の車室内を撮像するものである。本実施形態では、カメラ２０は、広角な撮像範囲を持つ魚眼レンズを備え、車室の前席および後席を含む全領域を撮像できるものに適用して説明する。さらにカメラ２０は、セキュリティシステムの撮像手段としても用いられるものであり、車両に不正侵入した者を撮像するものでもある。
【００４１】
照明部３０は、図１および図３に示すように、車室内を照明するものであり、車室の天井における前方中央に配置されたものである。照明部３０は、車室内に向けて照明光を出射する姿勢で配置され、照明部３０から出射される照明光の方向は、図３に示すように、カメラ２０の光軸方向を同じ方向（車両の前上方から後下方に向く方向）とされている。カメラ２０は、ジェスチャを行う左手のうち、照明光が照射された照明領域を少なくとも撮像する。なお、照明部３０から出射される照明光は、可視光であってもよいし、赤外線であってもよいし、両者を含むものであってもよく、特に限定するものではない。
【００４２】
図４は、図１の表示機器４０に車室の内部の画像が表示されている状態を説明する図である。
表示機器４０は、図１および図４に示すように、カメラ２０により撮像された車室の内部の画像を表示するものである。本実施形態では、表示機器４０は、車両のインスツルメントパネルに配置されたもの（いわゆるメータマルチ画面）であり、車室の内部の画像を表示しない場合には、車両の運転状態などの各種情報を表示するものである例に適用して説明する。
【００４３】
通信機器５０は、主に、セキュリティシステムに利用される機器であり、図１に示すように、車両の外部に設置された受信局（受信部）５１に、無線によって画像信号を送信するものである。通信機器５０からの画像信号の送信は、ＣＰＵ１１から出力される制御信号に基づいて制御される。
【００４４】
受信局５１は、受信した画像信号を、例えば、車両に対するセキュリティサービスを提供している会社のサービスセンタに送信する。なお、受信局５１が受信した画像信号を送信する宛先は、車両の正規利用者が任意に設定してもよく、特に限定するものではない。
【００４５】
不正侵入検知機器６０は、主に、セキュリティシステムに利用される機器である。不正侵入検知機器６０は、車両への不正侵入を検知すると検知信号を出力するものである。
不正侵入検知機器６０としては、例えば、赤外線センサ、超音波センサ、加速度センサ、焦電センサ、振動センサ、衝撃センサ、音圧センサ、ガラス割れ検知センサなどの各種のセンサを例示することができる。不正侵入検知機器６０は、これらのセンサのいずれかを用いてドアのこじ開けや、窓の破砕などの侵入行動を検出するものである。
【００４６】
ＥＣＵ１０、表示機器４０、通信機器５０、および、不正侵入検知機器６０の間には、それぞれの間でデータや信号の通信を可能とする車載通信網１５が設けられている。車載通信網１５としては、ＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）等の公知の車載ネットワークを用いることができ、特に限定するものではない。
【００４７】
次に、上記の構成からなる後席状況表示装置１における動作について説明する。図５は、図１の後席状況表示装置１における動作を説明するフローチャートである。
後席状況表示装置１は、車両の正規利用者である運転者が車両に乗り込み、車両のエンジンが始動されると動作を開始する。ここで、後席状況表示装置１が動作を開始するタイミングは、上述のように、車両のエンジンを始動させたときであってもよいし、エンジンキーを差し込み口に差し込み、アクセサリＯＮの位置まで回転させたときであってもよいし、車両のドアにおけるロックを解除したときであってもよいし、ドアを開閉させたときであってもよいし、アクセルを踏んでいるときであってもよいし、車両の速度が０でなくなったとき（走行を開始したとき）であってもよく、特に限定するものではない。
【００４８】
なお、後席状況表示装置１のＥＣＵ１０は、セキュリティシステムの制御も行うものであるため、後席状況表示装置１の動作が停止している間も、ＥＣＵ１０に電力が供給されてセキュリティシステムとしての制御を行っている。
【００４９】
後席状況表示装置１が動作を開始すると、図５に示すように、ＥＣＵ１０のＣＰＵ１１は、カメラ２０による車室内の撮像を開始する制御を行う（Ｓ１１）。カメラ２０は、撮像した車室の画像を画像信号として出力し、画像信号はＥＣＵ１０に入力される。
【００５０】
ＥＣＵ１０のＧＰＵ１２は、入力された画像信号を演算処理することにより、カメラ２０が撮像した車室の画像から、運転者のジェスチャを認識する処理を開始する（Ｓ１２）。そして、ＧＰＵ１２によるジェスチャ認識の処理により、ジェスチャが認識できたか否か判定を行い（Ｓ１３）、ジェスチャが認識できなかった場合（ＮＯの場合）、Ｓ１２に戻り、ジェスチャの認識処理が繰り返し行われる。
【００５１】
ジェスチャ認識の処理により、ジェスチャが認識できた場合（ＹＥＳの場合）には、ＣＰＵ１１は、認識されたジェスチャが車両後席の表示を要求するジェスチャか否かの判定を行う（Ｓ１４）。ジェスチャの判定は、メモリ１３に記憶された車両後席の表示を要求するジェスチャと、認識されたジェスチャとが一致するか否かに基づいて行われる。認識されたジェスチャが、車両後席の表示を要求するジェスチャと一致しない場合（ＮＯの場合）には、ＣＰＵ１１は、表示機器４０に対して新たな制御を行うことなく、つまり、表示機器４０が表示している内容をそのまま表示させつづけ（Ｓ１５）、上述のＳ１２に戻り、同様の動作を繰り返す。
【００５２】
認識されたジェスチャが車両後席の表示を要求するジェスチャと一致する場合（ＹＥＳの場合）には、ＣＰＵ１１は、表示機器４０にカメラ２０で撮像された車室の画像を表示させる制御を行う（Ｓ１６）。具体的には、それまで表示機器４０に対して、表示する画像の信号を出力していた機器に対して、画像の信号の出力を停止させる制御信号を出力するとともに、ＥＣＵ１０の映像出力１４から、カメラ２０で撮像された車室の画像の信号を出力させる。車室の画像の信号は、表示機器４０に入力され、表示機器４０に車室の画像が表示される。その後、上述のＳ１２に戻り、同様の動作を繰り返す。
【００５３】
ここで、ＧＰＵ１２におけるジェスチャを認識する処理について説明する。
ＧＰＵ１２は、入力された画像信号を処理することにより運転者におけるカメラ２０側の手（車両中央側の手、右ハンドル車の場合には左手）によるジェスチャを認識する。より具体的には、カメラ２０により撮像された車室の画像から手指の形状の抽出を行う。形状の抽出方法としては、画像における手指のエッジを検出して抽出する方法や、予め記憶された手指の形状のテンプレートとのマッチングにより抽出する方法や、手指の関節モデルとの一致を行うことで抽出する方法など、種々の方法を用いることができる。
【００５４】
また、運転者によりジェスチャが行われた手が、右手か左手か判断する方法としては、手指形状のテンプレートとして左手の手指形状のテンプレートを用いて、認識された手の手指形状とのマッチングを行うことにより判断する方法や、カメラ２０により撮像された車室の画像において時間的に隣接する画像の間の差分を求めて、ジェスチャを行った手が運転者のどちら側から移動してきたかにより判断する方法や、時間的に連続する画像の中で手の動きをベクトルで表すオプティカルフロー（Ｏｐｔｉｃａｌ  ｆｌｏｗ）を利用する方法などを用いることができる。
【００５５】
図６は、図１のカメラ２０により撮像された車室の画像の一例を示す図である。図７から図１０は、図１の後席状況表示装置１に対して行うジェスチャの例を示す図である。
カメラ２０により撮像された車室の画像は、例えば図６に示すような画像となる。向かって左側に座り、ハンドルの握っているのが運転者であり、右側に座っているのが同乗者である。ＧＰＵ１２は、運転者が行う図７から図１０に示すいずれかのジェスチャを認識する処理を行う。メモリ１３に、車両後席の表示を要求するジェスチャとして記憶されるのは、図７から図１０に係るジェスチャのうちの一つであってもよいし、複数のジェスチャであってもよい。
【００５６】
ここで、図７に示されているのは、５本の指を開き（いわゆるパーの状態）手のひらをカメラ２０に向けるジェスチャであり、図８に示されているのは、５本の指を閉じて（いわゆるグーの状態）拳をカメラ２０に向けるジェスチャである。図９に示されているのは、人差し指と中指を開き、他の指を閉じて（いわゆるチョキの状態）手のひらの側をカメラ２０に向けるジェスチャであり、図１０に示されているのは、人差し指、中指および薬指を開き、他の指を閉じて、開いた指が横に延びるようにしてカメラ２０に向けるジェスチャである。
【００５７】
図１１は、誤認識される可能性があるジェスチャの例を示す図であり、図１２および図１３は、ジェスチャと誤って認識される可能性のある動作の例を示す図である。
なお、メモリ１３に記憶されるジェスチャには、車室で運転者が行う他の動作と近似するジェスチャが除かれることが、ジェスチャの誤認識を防止する観点から好ましい。例えば、図１１に示す、人差し指を開き、他の指を閉じて、人差し指を上に向けて手のひらの側をカメラ２０に向けるジェスチャは、除かれることが好ましい。このジェスチャは、図１２に示すように、運転者がマップランプのスイッチなど、車室の天井前方に配置されたスイッチを操作する動作に近似している。また、図１２に示されているのは、車両後方の確認に用いられるルームミラーの向きを調節するために、運転者がルームミラーに手を伸ばす動作である。この際の手指の形に近似したジェスチャも、メモリ１３に記憶されるジェスチャから除かれることが好ましい。
【００５８】
さらに、ジェスチャの誤認識を防止する方法として、ＧＰＵ１２が一つのジェスチャを認識した後に、他のジェスチャの認識を停止するインターバルの期間を設ける方法が考えられる。このようにすることで、運転者が後席状況表示装置１への制御の入力を意図したジェスチャを行った後、運転動作に戻る際に、偶然、他のジェスチャに相当する手指の形状が形つくられても、当該他のジェスチャが後席状況表示装置１のＧＰＵ１２に認識されることはない。
【００５９】
上記の構成によれば、カメラ２０により撮像された車室内の画像（車室内の状況）、特に、後席の状況を表示機器４０に表示することで、操作者である運転者は後ろを振り返ることなく、表示機器４０を見るだけで車室内の状況、特に、後席の状況を確認することができる。
【００６０】
さらに、運転者が所定のジェスチャを行うことにより、表示機器４０に車室内の状況を表示させることができるため、表示機器４０に車室内の状況を表示させるスイッチを別途設ける必要がない。言い換えると、後席状況表示装置１の操作に用いられるスイッチを増やすことなく、表示機器４０に車室内の状況を表示させることができる。また、運転者は、表示機器４０に車室内の状況を表示させる際に、スイッチを操作する必要がないため、視線を後席状況表示装置１に向ける必要がなく、容易に後席状況表示装置１を操作することができる。
【００６１】
本実施形態の後席状況表示装置１のように、識別する対象である操作者を運転者に限定することで、操作者を限定しない場合と比較して、運転者が座っている領域においてのみジェスチャの識別を行えばよく、車室の画像におけるジェスチャの識別が行われる領域が狭くなる。そのため、同じ処理能力を備えたＧＰＵ１２を用いてジェスチャの識別を行っても、より細かなジェスチャの識別を行うことができ、ジェスチャの識別率を向上させることができる。さらに、ジェスチャの識別を行う領域を限定しているため、ジェスチャの識別に用いられるアルゴリズムを簡略化することができる。
【００６２】
ＧＰＵ１２によって識別されるジェスチャを運転者の手によるジェスチャに限定することにより、手のジェスチャに限定しない場合と比較して、運転者の手が動く範囲においてのみジェスチャの識別を行えばよく、ジェスチャの識別率を向上させることができる。さらに手は、体の他の部分と比較して、グー、チョキ、パーなど、形状を大きく変化させることができる部位であるため、手によるジェスチャを識別対象とすることで、ジェスチャの誤認識を抑制することができるとともに、ジェスチャの識別に用いられるアルゴリズムを簡略化することができる。
【００６３】
特に、運転者の手のうち、カメラ２０に近い側の手によるジェスチャに限定することにより、カメラ２０から遠い側の手によるジェスチャを識別する場合と比較して、さらに、ジェスチャの識別率を向上させることができる。つまり、カメラ２０から遠い側の手によりジェスチャを行う場合、カメラ２０に撮像されやすいように、遠い側の手をカメラ２０に近づけて行うことが考えられる。この場合、遠い側の手が運転者の前側を横切り、その後に遠い側の手によりジェスチャが行われる。ジェスチャを行う手が体の前を横切ると、ＧＰＵ１２においてジェスチャを行う手を識別しつづけることが困難になり、ジェスチャを誤識別する可能性が高くなる。そのため、ジェスチャを行う手を、体の前を横切らないカメラ２０に近い側の手とすることにより、ジェスチャの識別率の低下を防止することができる。
【００６４】
また、カメラ２０から遠い側の手をカメラ２０に近づけてジェスチャを行うと、ジェスチャを行う手が運転者の体の前を横切ることになるため、車両の運転動作に妨げになる可能性がある。これに対して、カメラ２０に近い側の手でジェスチャを行う場合には、近い側の手を運転者の体の前を横切らせることなく、カメラ２０に近づけることができ、運転動作を妨げることがない。
【００６５】
照明部３０における照明光の出射方向と、カメラ２０における撮像方向とが同じ方向であるため、運転者におけるジェスチャを行う手の部分であって、照明部３０により照明された照明部分がカメラ２０により撮像される。このようにすることで、車室の画像におけるジェスチャを行う手の部分の輝度が高くなるため、ＧＰＵ１２は、車室の画像から運転者のジェスチャを容易に識別することができる。
【００６６】
図１４は、図１の後席状況表示装置１に対して行うジェスチャの他の例を示す図である。
なお、上述の実施形態のように、運転者は、カメラ２０から適度に離れた位置で、左手によるジェスチャを行ってもよいし、図１４に示すように、カメラ２０および照明部３０を左手で覆ってもよい。このようにすると、左手の全体形状をカメラ２０により撮像できないが、カメラ２０に撮像された画像における左手部分の輝度が特に高くなる。そのため、ＧＰＵ１２による撮像された画像から左手部分の抽出が容易となる。例えば、左手でカメラ２０および照明部３０を覆う度に、所定制御の開始や、終了を行う利用の仕方が可能となる。
【００６７】
図１５は、図４の表示機器４０における他の配置態様を説明する模式図である。
なお、表示機器４０は、図４に示すように、インスツルメントパネルに設けられたものであってもよいし、図１５に示すように、インスツルメントパネルの上方に配置されるヘッドアップディスプレイ（ＨＵＤ）であってもよく、特に限定するものではない。
【００６８】
なお、上述の実施形態では、ＧＰＵ１２においてジェスチャの識別が行われる例に適用して説明したが、ジェスチャの識別をＣＰＵ１１や、その他の演算処理を行う電子回路等で行ってもよく、特に限定するものではない。
【００６９】
〔第１の実施形態の変形例〕
次に、本発明の第１の実施形態の変形例について図１６および図１７を参照して説明する。
【００７０】
本実施形態の後席状況表示装置の基本構成は、第１の実施形態と同様であるが、第１の実施形態とは、さらに、カーナビゲーションシステム（以下、「カーナビ」と表記する。）と後席状況表示装置とが統合されている点が異なっている。なお、第１の実施形態と同一の構成要素等については、同一の符号を付してその説明を省略する。
【００７１】
図１６は、本変形例に係る後席状況表示装置１０１の概略構成を説明する模式図である。
本変形例の後席状況表示装置（車内状況表示装置）１０１は、車両のカーナビを利用したものであり、後席状況表示装置１０１として利用されていない間は、カーナビとして働くものである。なお、本変形例の後席状況表示装置１０１は、第１の実施形態と同様に、セキュリティシステムとして利用することも可能である。後席状況表示装置１０１には、図１６に示すように、本体１１０と、カメラ２０と、照明部３０と、不正侵入検知機器６０と、が主に設けられている。
【００７２】
本体１１０は、後席状況表示装置１０１の中心的な役割を果たすものであり、カメラ２０により撮像された画像を内蔵した表示機器１４０に表示するものである。さらに、後席状況表示装置１０１が利用されていない場合には、カーナビとしての機能するものでもある。本体１１０には、ＣＰＵ（制御部）１１１と、ＧＰＵ（制御部）１１２と、メモリ（記憶部）１１３と、表示機器（表示部）１４０と、通信機器（通信部）１５０と、が主に設けられている。
【００７３】
ＣＰＵ１１１は、信号の演算処理を行う電子回路であり、後席状況表示装置１０１における各種制御に係る演算を行うものであり、後席状況表示装置１０１が利用されていない場合には、カーナビにおける各種制御に係る演算を行うものである。
【００７４】
ＧＰＵ１１２は、ＣＰＵ１１１と同様に信号の演算処理を行う電子回路であり、ジェスチャの抽出などの画像信号の演算処理を行うものである。後席状況表示装置１０１が利用されていない場合には、カーナビとして動作する際に表示される画像（例えば地図画像）に関する演算処理を行うものである。なお、ＣＰＵ１１１およびＧＰＵ１１２による詳しい制御内容は後述する。
【００７５】
メモリ１１３は、ＲＡＭやＲＯＭなどの半導体記憶装置であって、ＣＰＵ１１１やＧＰＵ１１２における後席状況表示装置１０１として動作する際の演算処理や、カーナビとして動作する際の演算処理に用いられるプログラムが記憶されるものである。更に、メモリ１１３には、後席状況表示装置１０１における各種の制御内容と、後述する各種のジェスチャとを対応させるテーブルが予め記憶されている。
【００７６】
図１７は、図１６の表示機器１４０の配置状態を説明する模式図である。
表示機器１４０は、図１６および図１７に示すように、後席状況表示装置１０１として機能する際には、カメラ２０により撮像された車室の内部の画像を表示するものであり、カーナビとして機能する際には、地図画像等の画像を表示するものである。本実施形態では、表示機器１４０は本体１１０と一体に構成され、図１７に示すように、運転席と助手席の間に位置するセンターコンソールに配置されている例に適用して説明する。
【００７７】
通信機器１５０は、主に、カーナビに利用される機器であり、図１６に示すように、車両の外部に設置された受信局５１や、ＧＰＳ衛星（図示せず）などとの間で、無線によって画像信号や、各種情報を送受信するものである。
【００７８】
次に、上記の構成からなる後席状況表示装置１０１における動作は、第１の実施形態と同様であるので、その説明は省略する。
このように、後席状況表示装置１０１を、カーナビと統合することにより、カーナビに搭載されたＣＰＵやＧＰＵなどの計算資源を後席状況表示装置１０１に利用することができる。言い換えると、後席状況表示装置１０１の専用ＥＣＵを設けることなく、後席状況表示装置１０１としての機能を実現することができ、部品点数の削減を図ることができる。
【００７９】
その一方で、第１の実施形態の後席状況表示装置１のように専用ＥＣＵを用いて後席状況表示装置１としての機能を実現する場合には、カーナビが装備されていない車両に後席状況表示装置１を設けることができる。さらに、カーナビがすでに装備されている車両に、後から後席状況表示装置１を設けることもできる。
【００８０】
〔第２の実施形態〕
次に、本発明の第２の実施形態について図１８を参照して説明する。
本実施形態の後席状況表示装置の基本構成は、第１の実施形態と同様であるが、第１の実施形態とは、表示機器に車室の画像を表示した後の制御が異なっている。よって、本実施形態においては、図１８を用いて後席状況表示装置における制御について説明し、その他の構成要素等の説明を省略する。
【００８１】
図１８は、本実施形態に係る後席状況表示装置１における制御を説明するフローチャートである。
第１の実施形態と同様に、本実施形態の後席状況表示装置１においても、車両の正規利用者である運転者が車両に乗り込み車両のエンジンが始動されると、その動作を開始する。後席状況表示装置１が動作を開始して、カメラ２０による車室内の撮像を開始する制御を行う制御（Ｓ１１）から、表示機器４０に車室の画像が表示される制御（Ｓ１６）までは、第１の実施形態と同様であるため、その説明を省略する。
【００８２】
ＥＣＵ１０のＣＰＵ１１は、表示機器４０に車室の画像を表示させる制御信号を出力すると同時に、タイマ（図示せず）に経過時間の計測を開始する制御信号を出力する。その後、ＣＰＵ１１は、タイマにより計測された経過時間が、メモリ１３に記憶された所定期間を経過したか否かの判定を行う（Ｓ１１７）。タイマにより計測された経過時間が、所定期間を経過していない場合（ＮＯの場合）には、タイマによる経過時間の計測が継続される。
【００８３】
タイマにより計測された経過時間が、所定期間を経過した場合（ＹＥＳの場合）には、ＣＰＵ１１は、表示機器４０への車室の画像の表示を終了させる制御信号を映像出力１４に出力する。それと同時に、車室の画像を表示する以前に、表示機器４０に表示されていた画像を表示機器４０に表示させる制御信号を出力する（Ｓ１１８）。その後、上述のＳ１２に戻り、同様の動作を繰り返す。
【００８４】
上記の構成によれば、運転者は、表示機器４０への車室の画像の表示を終了する操作を行う必要がないため、表示を終了させる操作という運転者の負担を減らすことができる。なお、所定期間としては、運転者が表示機器４０に表示された車室の画像を確認するのに必要な時間よりも長い期間であることが好ましい。具体的には、２秒から３秒程度の期間を例示することができる。また、所定期間は、操作者である運転者等により所望の長さに変更可能とされていてもよい。
【００８５】
〔第３の実施形態〕
次に、本発明の第３の実施形態について図１９を参照して説明する。
本実施形態の後席状況表示装置の基本構成は、第１の実施形態と同様であるが、第１の実施形態とは、表示機器に車室の画像を表示した後の制御が異なっている。よって、本実施形態においては、図１９を用いて後席状況表示装置における制御について説明し、その他の構成要素等の説明を省略する。
【００８６】
図１９は、本実施形態に係る後席状況表示装置１における制御を説明するフローチャートである。
第１の実施形態と同様に、本実施形態の後席状況表示装置１においても、車両の正規利用者である運転者が車両に乗り込み車両のエンジンが始動されると、その動作を開始する。後席状況表示装置１が動作を開始して、カメラ２０による車室内の撮像を開始する制御を行う制御（Ｓ１１）から、表示機器４０に車室の画像が表示される制御（Ｓ１６）までは、第１の実施形態と同様であるため、その説明を省略する。
【００８７】
ＥＣＵ１０のＧＰＵ１２は、表示機器４０に車室の画像に表示されると、入力された画像信号を処理することにより運転者におけるカメラ２０側の手によるジェスチャの認識を開始する（Ｓ２１７）。そして、ＧＰＵ１２によるジェスチャ認識の処理により、ジェスチャが認識できたか否か判定を行い（Ｓ２１８）、ジェスチャが認識できなかった場合（ＮＯの場合）、Ｓ２１７に戻り、ジェスチャの認識処理が繰り返し行われる。
【００８８】
ジェスチャ認識の処理により、ジェスチャが認識できた場合（ＹＥＳの場合）には、ＣＰＵ１１は、認識されたジェスチャが車両後席の表示の終了を要求するジェスチャか否かの判定を行う（Ｓ２１９）。ここで、車両後席の表示の終了を要求するジェスチャは、車両後席の表示を要求するジェスチャとは異なるジェスチャである。
【００８９】
ジェスチャの判定は、メモリ１３に記憶された車両後席の表示の終了を要求するジェスチャと、認識されたジェスチャとが一致するか否かに基づいて行われる。認識されたジェスチャが、車両後席の表示の終了を要求するジェスチャと一致しない場合（ＮＯの場合）には、Ｓ２１７に戻り、ジェスチャの認識処理が繰り返し行われる。
【００９０】
認識されたジェスチャが、車両後席の表示の終了を要求するジェスチャと一致する場合（ＹＥＳの場合）には、ＣＰＵ１１は、表示機器４０への車室の画像の表示を終了させる制御信号を映像出力１４に出力する。それと同時に、車室の画像を表示する以前に、表示機器４０に表示されていた画像を表示機器４０に表示させる制御信号を出力する（Ｓ１１８）。その後、上述のＳ１２に戻り、同様の動作を繰り返す。
【００９１】
上記の構成によれば、運転者は自らの意思で、表示機器４０への車室の画像の表示を終了させることができる。このようにすることで、車室の画像を所定期間だけ表示した後に自動的に表示を終了する場合と比較して、運転者が表示された車両の画像を見逃すことを防止できる。
【００９２】
〔第４の実施形態〕
次に、本発明の第４の実施形態について図２０を参照して説明する。
本実施形態の後席状況表示装置の基本構成は、第１の実施形態と同様であるが、第１の実施形態とは、照明部の配置が異なっている。よって、本実施形態においては、図２０を用いて照明部の配置などについて説明し、その他の構成要素等の説明を省略する。
【００９３】
図２０は、本実施形態に係る後席状況表示装置１における照明部２３０の配置を説明する模式図である。
本実施形態に係る後席状況表示装置１の照明部２３０は、図２０に示すように、車室の天井における約中央に配置されたものであり、車室内、特に後席を照明するものである。照明部２３０から出射された照明光は、運転手のジェスチャを行う左手のうち、カメラ２０に撮像されない領域を照明する。言い換えると、カメラ２０は、ジェスチャを行う左手のうち、照明光が照射されない非照明領域を撮像する。なお、照明部２３０から出射される照明光は、可視光であってもよいし、赤外線であってもよいし、両者を含むものであってもよく、特に限定するものではない。上記の構成によれば、車室の画像における後席部分の輝度が高くなり、運転者は、後席の状況を把握しやすくなる。
【００９４】
〔第５の実施形態〕
次に、本発明の第５の実施形態について図２１から図２３を参照して説明する。
本実施形態の後席状況表示装置の基本構成は、第１の実施形態と同様であるが、第１の実施形態とは、カメラによる撮像領域を制御する点が異なっている。よって、本実施形態においては、図２１から図２３を用いてカメラによる撮像領域の変更について説明し、その他の構成要素等の説明を省略する。
【００９５】
図２１は、本実施形態に係る後席状況表示装置の全体構成を説明する模式図である。本実施形態の後席状況表示装置３０１には、図２１に示すように、ＥＣＵ３１０と、カメラ（撮像部）３２０と、照明部３０と、表示機器４０と、通信機器５０と、不正侵入検知機器６０と、が主に設けられている。
【００９６】
ＥＣＵ３１０は、後席状況表示装置３０１の中心的な役割を果たすものであり、カメラ３２０により撮像された画像を、表示機器４０に表示させる制御を行うものであり、カメラ３２０により撮像される領域の制御を行うものでもある。ＥＣＵ３１０には、ＣＰＵ（制御部）３１１と、ＧＰＵ１２と、メモリ（記憶部）３１３と、映像出力１４と、が主に設けられている。
【００９７】
ＣＰＵ３１１は、信号の演算処理を行う電子回路であり、後席状況表示装置３０１における各種制御に係る演算を行うものであり、カメラ３２０により撮像される領域の制御に係る演算を行うものである。
【００９８】
メモリ３１３は、ＲＡＭやＲＯＭなどの半導体記憶装置であって、ＣＰＵ３１１やＧＰＵ１２における演算処理に用いられるプログラムが記憶されるものである。更に、メモリ３１３には、後席状況表示装置３０１における各種の制御内容と、後述するカメラ３２０により撮像される領域の制御と、各種のジェスチャ（変更に係るジェスチャ）とを対応させるテーブルが予め記憶されている。
【００９９】
カメラ３２０は、車室の天井における前方中央に配置され、車両の車室内を撮像するものである。本実施形態では、カメラ３２０は、ＣＰＵ３１１から出力される制御信号に基づいて、撮像する範囲を左右方向に移動させるパン、上下方向に移動させるチルトの動作、および、撮像する範囲の拡大および縮小を行うズームの動作を行うことができるものである。
【０１００】
次に、本実施形態の特徴であるカメラ３２０による撮像領域の制御について説明する。図２２は、図２１の後席状況表示装置におけるカメラによる撮像領域の制御を説明するフローチャートである。なお、表示機器４０にカメラ３２０により撮像された車室の画像が表示されるまでの制御は、第１の実施形態や、第２の実施形態、および、第３の実施形態と同様であるため、その説明を省略する。
【０１０１】
表示機器４０にカメラ３２０により撮像された車室の画像が表示されると、ＧＰＵ１２は、入力された画像信号を演算処理することにより、カメラ３２０が撮像した車室の画像から、運転者のジェスチャを認識する処理を開始する（Ｓ３０１）。そして、ＧＰＵ１２によるジェスチャ認識の処理により、ジェスチャが認識できたか否か判定を行い（Ｓ３０２）、ジェスチャが認識できなかった場合（ＮＯの場合）、Ｓ３０１に戻り、ジェスチャの認識処理が繰り返し行われる。
【０１０２】
ジェスチャ認識の処理により、ジェスチャが認識できた場合（ＹＥＳの場合）には、ＣＰＵ３１１は、認識されたジェスチャが、カメラ３２０に対してパン動作の制御を行うことを指示するジェスチャか否かの判定を行う（Ｓ３０３）。認識されたジェスチャがパン動作を指示するジェスチャと判定された場合（ＹＥＳの場合）には、ＣＰＵ３１１は、カメラ３２０に対して、パン動作を行わせる制御信号を出力する（Ｓ３０４）。
【０１０３】
認識されたジェスチャがパン動作を指示するジェスチャと判定されなかった場合（ＮＯの場合）には、ＣＰＵ３１１は、認識されたジェスチャが、カメラ３２０に対してチルト動作の制御を行うことを指示するジェスチャか否かの判定を行う（Ｓ３０５）。認識されたジェスチャがチルト動作を指示するジェスチャと判定された場合（ＹＥＳの場合）には、ＣＰＵ３１１は、カメラ３２０に対して、チルト動作を行わせる制御信号を出力する（Ｓ３０４）。
【０１０４】
認識されたジェスチャがチルト動作を指示するジェスチャと判定されなかった場合（ＮＯの場合）には、ＣＰＵ３１１は、認識されたジェスチャが、カメラ３２０に対してズーム動作の制御を行うことを指示するジェスチャか否かの判定を行う（Ｓ３０７）。認識されたジェスチャがズーム動作を指示するジェスチャと判定された場合（ＹＥＳの場合）には、ＣＰＵ３１１は、カメラ３２０に対して、ズーム動作を行わせる制御信号を出力する（Ｓ３０８）。
【０１０５】
認識されたジェスチャがズーム動作を指示するジェスチャと判定されなかった場合（ＮＯの場合）や、パン動作を行わせる制御信号の出力後や、チルト動作を行わせる制御信号の出力後や、ズーム動作を行わせる制御信号の出力後には、カメラ３２０により撮像された車室の画像の表示機器４０への表示が継続される（Ｓ３０９）。
【０１０６】
図２３は、カメラ３２０にパン動作を指示するジェスチャを示す図である。
カメラ３２０にパン動作を指示するジェスチャとしては、図２３に示すように、人差し指を開き、人差し指を、カメラ３２０をパンさせる方向に向けるジェスチャを例示することができる。また、カメラ３２０にチルト動作を指示するジェスチャとしては、図１１に示すように、人差し指を開き、人差し指を、カメラ３２０をチルトさせる方向に向けるジェスチャを例示することができる。
【０１０７】
さらに、カメラ３２０にズーム動作、例えば５倍のズーム動作を指示するジェスチャとしては、図７に示すように、５本の指を開いたジェスチャを例示することができる。これらの動作の組合せとして、パン動作と３倍のズーム動作を同時に指示するジェスチャとしては、図１０にしめすように、３本の指を開き、開いた指を、カメラ３２０をパンさせる方向に向けるジェスチャを例示することができる。
【０１０８】
上記の構成によれば、運転者が望む位置、例えば車室の右後席や左後席などの画像を表示機器４０に表示することができる。
なお、上述の実施形態のように、カメラ３２０自体が、パン動作、チルト動作、ズーム動作を行うものであってもよいし、第１の実施形態のように、カメラ２０自体は固定されており、画像処理により、表示機器４０に表示される画像がパン動作、チルト動作、ズーム動作されるものであってもよく、特に限定するものではない。
【符号の説明】
【０１０９】
１，１０１，３０１…後席状況表示装置（車内状況表示装置）、１１，１１１，３１１…ＣＰＵ（制御部）、１２，１１２…ＧＰＵ（制御部）、１３，１１３，３１３…メモリ（記憶部）、２０，３２０…カメラ（撮像部）、３０，２３０…照明部、４０，１４０…表示機器（表示部）、５０，１５０…通信機器（通信部）、６０…不正侵入検知機器（不正侵入検知部）、５１…受信局（受信部）
【図１】
0005549571.tif 000002
【図２】
0005549571.tif 000003
【図５】
0005549571.tif 000004
【図１２】
0005549571.tif 000005
【図１３】
0005549571.tif 000006
【図１６】
0005549571.tif 000007
【図１８】
0005549571.tif 000008
【図１９】
0005549571.tif 000009
【図２１】
0005549571.tif 000010
【図２２】
0005549571.tif 000011
【図３】
0005549571.tif 000012
【図４】
0005549571.tif 000013
【図６】
0005549571.tif 000014
【図７】
0005549571.tif 000015
【図８】
0005549571.tif 000016
【図９】
0005549571.tif 000017
【図１０】
0005549571.tif 000018
【図１１】
0005549571.tif 000019
【図１４】
0005549571.tif 000020
【図１５】
0005549571.tif 000021
【図１７】
0005549571.tif 000022
【図２０】
0005549571.tif 000023
【図２３】
0005549571.tif 000024