(57)【要約】【課題】  カメラの配置位置の自由度が高く、設備コストを増大させることなく適切に乗員の状態を認識することを可能とした乗員状態検出装置を提供する。【解決手段】  カメラ２０を用いて取得した乗員の画像を基にして乗員状態を検出する乗員状態検出装置であって、乗員の着座位置（シート１０１〜１０３）より前方に、例えば、天井から吊り下げて固定したミラー１０を配置し、カメラ２０を対象乗員の着座位置より後方に配置して、このカメラ２０によりミラー１０を介して対象乗員の状態を撮影する。【選択図】  図１
2010125882.tif 000002
【特許請求の範囲】
【請求項１】
車室内に設置されて乗員を撮影するカメラと、前記カメラで取得した映像から乗員の状態を検出する画像処理部とを備える乗員状態検出装置において、
所定の検出対象乗員の着座位置より前方に配置されるミラーを備えており、
前記カメラは、前記所定の検出対象乗員の着座位置より後方に配置され、前記ミラーを介して前記所定の検出対象乗員の状態を撮影する乗員状態検出装置。
【請求項２】
前記車室内には、少なくとも乗員が着座する前席シートと後席シートが車両前後方向に並べて配置されており、前記所定の検出対象乗員は前席シートの乗員であり、前記カメラにより後席シートの乗員をあわせて撮影する請求項１記載の乗員状態検出装置。
【請求項３】
前記後席シートの乗員の着座位置より前方に配置される第２のミラーをさらに備えており、前記カメラは、前記第２のミラーを介して前記後席シートの乗員の状態を撮影する請求項２記載の乗員状態検出装置。
【請求項４】
前記カメラは、前記後席シートの乗員着座位置より後方に配置されている請求項３記載の乗員状態検出装置。
【請求項５】
前記ミラーは、鏡面の周囲に枠を備えている請求項１〜４のいずれかに記載の乗員状態検出装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両において乗員の状態を検出する乗員状態検出装置に関する。
【背景技術】
【０００２】
近年、運転手を含む車両の乗員の画像を車室内に設置したカメラにより取得する装置の開発が進められている。特許文献１に開示されている発明は、こうした装置の一つであり、車室前方のルームミラーの後方に、フロントガラス越しに車両前方の映像を取得するカメラを配置し、ルームミラーの近傍に配置されるミラーを介してこのカメラにより車室内の映像をあわせて取得するものである。
【０００３】
この装置は、ドライブレコーダを兼用し、主に事故時における車室内の状態を記録するものである。このほかに、取得した画像から画像処理によって乗員の状態を認識し、運転者の挙動（例えば、居眠り運転や脇見運転の有無）判定や、他の乗員の状態判定を行う装置もみられる。
【特許文献１】特開２００７−３１３９５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載されている技術においては、ルームミラー近傍に設置されたカメラにより乗員を撮影しているが、ルームミラー近傍からは、後席側は前席シートの死角に入る部分が多くなり、後席側の乗員の画像を取得しづらくなる。後席側の乗員を撮影するために別のカメラを配置する手法もあるが、この場合には、画像認識もそれぞれの画像に対して行う必要があり、カメラおよび画像認識装置のコストが増大してしまう。また、カメラの配置位置の自由度が低いという欠点がある。
【０００５】
そこで本発明は、カメラの配置位置の自由度が高く、設備コストを増大させることなく適切に乗員の状態を認識することを可能とした乗員状態検出装置を提供することを課題とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、本発明に係る乗員状態検出装置は、車室内に設置されて乗員を撮影するカメラと、このカメラで取得した映像から乗員の状態を検出する画像処理部とを備える乗員状態検出装置において、所定の検出対象乗員の着座位置より前方に配置されるミラーを備えており、カメラは、この所定の検出対象乗員の着座位置より後方に配置され、このミラーを介して所定の検出対象乗員の状態を撮影するものである。
【０００７】
車室内には、少なくとも乗員が着座する前席シートと後席シートが車両前後方向に並べて配置されており、所定の検出対象乗員は前席シートの乗員であり、カメラにより後席シートの乗員をあわせて撮影するとよい。すなわち、前席シートの着座位置より前に前席シート乗員の撮影用のミラーを配置し、前席シートの着座位置より後方に配置したカメラで前席シートと後席シートの乗員を同時に撮影する。
【０００８】
後席シートの乗員の着座位置より前方に配置される第２のミラーをさらに備えており、カメラは、この第２のミラーを介して後席シートの乗員の状態を撮影するとよい。この場合、カメラは、後席シートの乗員着座位置より後方に配置されると好ましい。
【０００９】
これらのミラーは、鏡面の周囲に枠を備えていると好ましい。
【発明の効果】
【００１０】
本発明によれば、検出対象乗員をその着座位置より前に配置されるミラーを介してその着座位置より後に配置されるカメラにより撮影する。検出対象乗員とカメラの間に遮蔽物（例えば、シートや他の検出対象乗員）が存在する場合でも、ミラーを利用することで、検出対象乗員を適切に撮影することができるのでカメラの設置自由度が向上する。また、検出対象乗員の正面像の取得が容易になるので、状態検出精度も向上する。
【００１１】
前席シートと後席シートの乗員を同時に撮影可能とすることで、カメラの台数を減らすことができる。また、その際に、前席シートの乗員撮影に前席シートが遮蔽物とならず、適切な撮影ができる。
【００１２】
後席シートの乗員についてもミラーを介して撮影を行うことで、後席シートより後方や、下方にカメラを配置することが可能となるので、カメラの設置自由度が向上する。特に、後席シートより後方にカメラを配置する場合、カメラを乗員の通常の視覚範囲外に配置することができる。
【００１３】
ミラーに枠を設けることで、取得した画像内でミラーを介して取得した画像か否かの認識が容易になり、画像処理が容易になる。
【発明を実施するための最良の形態】
【００１４】
以下、添付図面を参照して本発明の好適な実施の形態について詳細に説明する。説明の理解を容易にするため、各図面において同一の構成要素に対しては可能な限り同一の参照番号を附し、重複する説明は省略する。
【００１５】
本発明に係る乗員状態検出装置の第１の実施形態を図１〜図３に示す。図１、図２は、それぞれその車室内配置を示す車室内部の上面図、縦断面図であり、図３は、装置のブロック構成図である。
【００１６】
この実施形態では、車室１００内の前席シート１０１、１０２と、後席シート１０３の着座位置１０３Ｒ、１０３Ｌのそれぞれ前方に対応するミラー１０ＦＲ、１０ＦＬ、１０ＲＲ、１０ＲＬがそれぞれ天井１０５から吊り下げられる形で配置されている。カメラ２０は、車室１００の後方にフロントガラス１０６および各ミラー１０に向けて同じく天井１０５から吊り下げられる形で配置される。カメラ２０の画角は、ミラー１０ＦＲ、１０ＦＬ、１０ＲＲ、１０ＲＬの全てを含むよう設定される。車室１００内の位置関係の理解を容易にするため、図１、図２には、ハンドル１０９、ドアミラー１１０Ｒ、１１０Ｌをあわせて示している。
【００１７】
カメラ２０としては、赤外線領域に感度を有し、動画像を取得可能なカメラを用いるとよく、出力画像をデジタルデータとして出力する機能をさらに備えているとよい。カメラ２０の映像信号は、画像処理部３０に入力される。画像処理部３０は、ＲＯＭ、ＲＡＭ、メモリ等によって構成され、内部に前処理部３１、乗員認識処理部３２、後処理部３３を備える。これらの処理部３１〜３３は、画像処理部３０内でハードウェアとして区分されていてもよいが、ハードウェアの一部または全部を共用し、ソフトウェア的に区分されていてもよい。また、そのソフトウェアは一部を共用していてもよく、あるソフトウェアの一部として構成されていてもよい。さらに、画像処理部３０は、車両内の他の制御ＥＣＵ等の一部として構成されていてもよい。
【００１８】
前処理部３１は、例えば、取得画像の明るさ、コントラストを調整し、取得した画像中から各ミラーによる鏡像を切り出す。カメラ２０として映像信号をアナログ出力するカメラを用いている場合、前処理部３１または画像処理部３０とカメラ２０との間にＡ／Ｄ変換器を設けるとよい。
【００１９】
乗員認識処理部３２は、切り出した画像中から乗員を認識する。例えば乗員の顔を認識して処理するシステムを採用することができる（例えば、特開２００８−２１７６９３号公報記載の技術）。
【００２０】
後処理部３３は、乗員認識処理部３２の処理結果を他の車両内の制御ＥＣＵへと送信する処理を行う。この送信は、車内ＬＡＮを通じて行われる。
【００２１】
ミラー１０は、図４に示されるように鏡面１１の周囲に枠１２が設けられているものを用いるとよい。この鏡面１１としては、カメラが感度を有する赤外線領域の光を反射し、可視光は透過、吸収するタイプの鏡を用いるとよい。この鏡面１１としては、いわゆるコールドフィルター（例えば、河合光学株式会社製コールドフィルターや二光光学株式会社製コールドフィルター）を用いることができる。このように赤外光のみを反射する鏡面１１を用いることで、乗員は、鏡面１１がその視界に入り込んでも鏡面１１上に自己の鏡像を認識することがないので、乗員がミラー１０を意識せずにすむ。
【００２２】
本実施形態の動作を簡単に説明する。カメラ２０は、各ミラー１０を領域内に含む映像を取得し、画像処理部３０へと転送する。画像処理部３０は、その前処理部３１で必要な前処理を行った後、乗員認識処理部３２において乗員の認識を行い、認識結果を後処理部３３へと送る。後処理部３３は、他のシステムでの処理に必要な情報形式へと加工したうえ、車内ＬＡＮを介して転送する。
【００２３】
本実施形態においては、シート１０１、１０２、１０３Ｒ、１０３Ｌに着座している各乗員の正面像をそれぞれミラー１０ＦＲ、１０ＦＬ、１０ＲＲ、１０ＲＬを介して取得することができる。特に、前席シート１０１、１０２がミラー１０ＦＲ、１０ＦＬとカメラ２０との間を遮蔽することがないので、前席シート１０１、１０２の乗員像を確実に取得することができる。このため、乗員の認識、状態検出の精度が向上する。また、１台のカメラ２０で全乗員の撮影が可能であり、設備コストが低減できるほか、画像認識処理装置の負担も抑えられる。
【００２４】
本発明に係る乗員状態検出装置のミラー、カメラの配置は、上記の実施形態に限られるものではない。以下、ミラー、カメラの別の配置例のいくつかについて説明する。
【００２５】
図５に示す配置例は、各ミラー１０の配置は、図１、図２に示される配置と同様であるが、カメラ２１を車室後部のパネル上部に配置される。このとき、各ミラー１０とカメラ２１との間でシート１０１〜１０３が遮らないよう配置する必要がある。この配置は、特にセダン等の車両において有効である。
【００２６】
図６に示される配置例においては、カメラ２２を前席シート１０１、１０２の中間に設けられたコンソールボックス１１１内に上向きに配置されている。この配置では、カメラ２２が露出していないので、乗員が撮影されていることを意識しなくてすむ。
【００２７】
図７に示される配置例においては、カメラ２３の配置は、図１、２に示される配置と同じであるが、前席前方と、後席前方にシート１０１〜１０３の右端近傍から左端近傍まで達する幅の長いミラー１３Ｆ、１３Ｒを天井付近に配置している。このように幅の長いミラーを採用することにより、本来の着座位置からずれた位置に座っている乗員や、後席シートの中央に着座している乗員の画像を取得することができ、状態検出精度が向上する。
【００２８】
図８に示される配置例は、車室内にシートが３列配置されている場合の配置例を示している。この場合には、前席シート１０１、中間シート１０３、後席シート１０４のそれぞれの前方の天井からミラー１４Ｆ、１４Ｃ、１４Ｒを配置し、車室後方の天井にカメラ２４を配置している。
【００２９】
以上の説明では、各列のシートに対応してカメラを配置する例を説明したが、複数の列の乗員を同じミラーで同時に取得するようにしてもよい。また、一部の乗員についてはミラーを介することなく直接撮影するカメラ配置をとってもよい。また、上述した配置例を組み合わせてカメラ、ミラーの配置を決めてもよい。
【図面の簡単な説明】
【００３０】
【図１】本発明に係る乗員状態検出装置の第１の実施形態の車室内配置を示す車室内上面図である。
【図２】図１に対応する車室内縦断面図である
【図３】本発明に係る乗員状態検出装置の第１の実施形態のブロック構成図である。
【図４】本発明に係る乗員状態検出装置に適用されるミラーの構成図である。
【図５】本発明に係る乗員状態検出装置の車室内配置の別の例を示す車室内縦断面図である。
【図６】本発明に係る乗員状態検出装置の車室内配置のさらに別の例を示す車室内縦断面図である。
【図７】本発明に係る乗員状態検出装置の車室内配置のさらに別の例を示す車室内上面図である。
【図８】本発明に係る乗員状態検出装置の車室内配置のさらに別の例を示す車室内縦断面図である。
【符号の説明】
【００３１】
１０、１３、１４…ミラー、１１…鏡面、１２…枠、２０〜２４…カメラ、３０…画像処理部、３１…前処理部、３２…乗員認識処理部、３３…後処理部、１００…車室、１０１〜１０４…シート、１０５…天井、１０６…フロントガラス、１０９…ハンドル、１１０…ドアミラー、１１１…コンソールボックス。
【図１】
2010125882.tif 000003
【図２】
2010125882.tif 000004
【図３】
2010125882.tif 000005
【図４】
2010125882.tif 000006
【図５】
2010125882.tif 000007
【図６】
2010125882.tif 000008
【図７】
2010125882.tif 000009
【図８】
2010125882.tif 000010