(57)【要約】【課題】  運転者の後方視界を妨げず、且つ眼及びその周辺部分を確実に撮影可能にする。【解決手段】  運転者撮影装置は、運転席の前方の斜め上方に設置されるルームミラー１と、ルームミラー１の後方の斜め上方に設けられルームミラー１に向けて赤外線を照射するＬＥＤ２と、運転者の顔面に対応する領域に向けて設置された赤外線に感度を有する赤外線カメラと４とを備えている。ルームミラー１は、可視光線を反射し赤外線を透過する第１の反射ミラー１ａと、このミラー１ａに対して角度θでその背後に設けられ赤外線を反射する第２の反射ミラー１ｂとで構成される。運転者３の後方視界は第１の反射ミラー１ｂで提供され、ＬＥＤ２から第１の反射ミラー１ａと第２の反射ミラー１ｂとを介して運転者の顔面が照射された赤外線は赤外線カメラ４に進むことで、運転者３の顔画像が赤外線カメラ４で撮影される。【選択図】  図２
2006252138.tif 000002
【特許請求の範囲】
【請求項１】
可視光線を反射し赤外線を透過する第１の反射手段と、該第１の反射手段に対して所定角θでその背後に設けられ赤外線を反射する第２の反射手段とを備え、運転席の前方の斜め上方に設置された後方監視ミラーと、
前記後方監視ミラーの後方の斜め上方に設置され、前記後方監視ミラーに向けて赤外線を照射する運転者照明装置と、
運転者の顔面に対応する領域に向けて設置された赤外線に感度を有するカメラと、
を備えたことを特徴とする運転者撮影装置。
【請求項２】
前記運転者照明装置は、前記第１の反射手段による後方視界の中心線に対して２θの方向に設置したことを特徴とする請求項１記載の運転者撮影装置。
【請求項３】
前記赤外線カメラを覆い、可視光線を透過せず赤外線を透過するカバーを設けたことを特徴とする請求項１又は２記載の運転者撮影装置。
【請求項４】
前記赤外線カメラは、高ダイナミックレンジのカメラである請求項１〜３のいずれかに記載の運転者撮影装置。
【請求項５】
請求項１〜４のいずれかに記載の運転者撮影装置と、
この運転者撮影装置で撮影された画像から運転者の顔または眼を検出し、検出した顔または眼の画像に基づいて運転者の状態を判定する画像認識装置と、
を備えた運転者監視装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、自動車等の移動体において運転者の顔面を撮影するために好適な運転者撮影装置およびこの運転者撮影装置を用いた運転者監視装置に関する。
【背景技術】
【０００２】
運転者の居眠り運転検知や脇見運転検知など自動車運転手の眼を中心とした顔面を画像撮影し運転者の状態を検知する安全技術が開発されている。
【０００３】
そのための画像撮影方法としては、ダッシュボードやインスツルメンツパネル、あるいはルームミラー周辺やルームミラー内部などに赤外線カメラを設置し、この赤外線カメラにより運転者の前方からその顔面を運転者を幻惑させたりすることがないように、且つ安定した照射が可能なように赤外線で直接撮影するようにしている。
【０００４】
ところが、運転者の顔面の位置は体格、姿勢、座席シートの設定状態により大きく変化するため、それらの撮影方法では、想定される顔面の存在範囲を十分にカバーする大きな画角の赤外線カメラを使用することが必要であり、さらに、そのようにして撮影された大きな画角の画像から顔面部分を特定する処理が必要である。そこで、適切に調整されたルームミラーを後方から見た場合にルームミラー内に運転手の眼部分が必ず映ることを利用して、ルームミラーを介して後方から撮像することにより、顔位置によらず常に眼部分の画像を取得する装置について提案されている（特許文献１）。
【特許文献１】特開平１１−３０４４２８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１のものでは、以下に述べるような問題点があった。
【０００６】
（１）撮影装置の設置位置が制限される。特に眼部分が画像の中心となる画像を取得するためには、撮影装置をルームミラーから後方へと向かう直線上に設置させる必要がある。
【０００７】
（２）後方視界が部分的に撮影装置により隠蔽される。したがって、ルームミラー本来の機能である運転者に対する後方視界提供機能を妨げる。
【０００８】
（３）上記後方視界提供機能への妨げを小さくするには、撮影装置を小型にし、かつ撮影装置を可能な限りルームミラーから遠方へ配置する必要がある。
【０００９】
（４）撮影装置とルームミラーの距離を大きくすればするほど、ルームミラーを介して取得される画像は運転者の眼を中心とした狭い領域となり、眼以外の顔面の画像情報を得ることが困難になる。さらに、運転者の顔位置が変化した場合に画像内に眼部分が含まれなくなる可能性が増大する。
【００１０】
（５）撮影装置が運転者から視認されるため、運転者に対し監視されているという心理的圧迫感または不安感を与える。
【００１１】
この発明は、運転者の後方視界を妨げず、且つ眼の部分を確実に撮影する運転者撮影装置の提供を目的とする。
【課題を解決するための手段】
【００１２】
この発明の運転者撮影装置は、可視光線を反射し赤外線を透過する第１の反射手段と、該第１の反射手段に対して所定角θでその背後に設けられ赤外線を反射する第２の反射手段とを備え、運転席の前方の斜め上方に設置された後方監視ミラーと、
前記後方監視ミラーの後方の斜め上方に設置され、前記後方監視ミラーに向けて赤外線を照射する運転者照明装置と、
運転者の顔面に対応する領域に向けて設置された赤外線に感度を有するカメラと、を備えたことを特徴とする。カメラには、例えば赤外線カメラを使用することができる。
【００１３】
この発明では、第１の反射手段を従来のルームミラーとして使用することにより、後方視界からの可視光線は第１の反射手段で反射して運転者の眼に必ず届く。一方、後方監視ミラーの後方の斜め上方に前記後方監視ミラーに向けて赤外線を照射する運転者照明装置を設置することで、赤外線は後方監視ミラーの第１の反射手段を透過し第２の反射手段で反射して運転者の顔を照射する。運転者の顔で反射した赤外線は、例えばダッシュボード等に設けられた赤外線カメラで受光されることにより、運転者の顔画像が撮影される。
【００１４】
第１の反射手段と第２の反射手段のなす角度は所定角θに設定されているために、上記後方視界からの可視光線が後方監視ミラーに向かう方向と、上記赤外線が後方監視ミラーに向かう方向とは完全に異なる。この運転者照明装置により後方視界が妨げられることがない。
【００１５】
また、運転者照明装置が後方視界を妨げることがないため、第２の反射手段に接近した位置に設けたり、また、所定角θを適切な角度に設定することで自由度の高い位置に設置することが可能である。これにより、顔面の撮影位置や撮影領域の微調整が可能であり、眼の部分を含む広い範囲を撮影することも容易となる。
【００１６】
この発明の一つの実施態様では、前記第１の反射手段による後方視界の中心線に対して２θの方向に運転者照明装置が設置される。
【００１７】
一般の光学原理から、第１の反射手段と第２の反射手段とのなす角度がθであるとき、同一方向から第１の反射手段に入射した可視光線と赤外線は、それぞれ第１と第２の反射手段で反射されそれぞれの方向に進む。それぞれの反射光線の方向が互いになす角度は、第１の反射手段に入射した入射角にかかわらず常に２θである。このことは、光の進行方向が逆であっても同様となる。
【００１８】
したがって、運転者が第１の反射手段で後方を視認するように調整された状態においては、運転者照明装置は、運転者の顔位置にかかわらず、常に運転者の眼を中心とした顔面部分を後方視界を妨げることなく照射することができる。
【００１９】
前記赤外線カメラを、可視光線を透過せず赤外線を透過するカバーで覆うことにより、運転者からは赤外線カメラが見えなくなる。このため、赤外線カメラで監視されているような圧迫感がなくなる。
【００２０】
また、この発明の運転者撮影装置は、前記赤外線カメラを高ダイナミックレンジのＣＭＯＳ赤外線カメラで構成したことを特徴とする。
【００２１】
さらに、この発明の運転者監視装置は、上記運転者撮影装置と、この運転者撮影装置で撮影された画像から運転者の顔または眼を検出し、検出した顔または眼の画像に基づいて運転者の状態を判定する画像認識装置と、を備えたことを特徴とする。
【００２２】
この発明では、高ダイナミックレンジのカメラ、例えば高ダイナミックレンジのＣＭＯＳ赤外線カメラを使用することにより、明暗差が大きい環境下でも運転者の顔や眼の部分の画像を綺麗に撮影でき、これにより、照明無しまたは空間全体を照明した場合と比べて、顔の特定や顔の認識が容易になり、運転者の状態を判定する場合においても、正確な判定が可能になる。
【発明の効果】
【００２３】
この発明によれば、運転者の視界を確保しつつ、その視界中心線と異なった角度で運転者の顔、特に眼やその付近に対して赤外線を照射できるため、運転者の後方視界を遮らずに、運転者の顔、特に眼やその付近の画像を正確に撮影することができ、運転者が居眠り状態や脇見運転状態にあるかどうかを正確に判定することができる。
【発明を実施するための最良の形態】
【００２４】
図１はこの発明の実施形態である運転者撮影装置の構成を示す図である。この運転者撮影装置は、ルームミラーの後方の斜め上方からルームミラーに向けて赤外線（近赤外線を含む。以下同様）を照射し反射させることで、運転者の顔面を赤外線照射する。運転者の前方やや下方には、赤外線カメラを設置し、運転者の顔面で反射された赤外線を受光することで運転者の顔を撮影する。
【００２５】
撮影された画像は、画像認識装置に入力されて、顔の認識、居眠り／脇見運転の検出・警告等に用いられる。
【００２６】
図１は自動車の車室を側面から表した図であるが、ルームミラー１は、車室内の中央前方の天井付近に、角度を調整可能に設けられている。このルームミラー１は、本発明の後方監視ミラーに対応している。
【００２７】
前記ルームミラー１は、運転者３が運転席に座ったとき、運転を開始する前に、このルームミラー１を介して後方の視界が確保できるように向き（角度）が調整される。運転者３は、ルームミラー１を介した視野がリアウィンドウ５をカバーできるように、すなわち、ルームミラー１およびリアウィンドウ５を介して後方の車両等を監視できるように調整する。このように調整されたときの運転者の後方の視野には、後述する赤外線照射手段が存在していない。
【００２８】
ルームミラー１の後方の斜め上方の天井部には、赤外線照射手段であるＬＥＤ２が設けられている。このＬＥＤ２の赤外線照射方向は、ルームミラー１に向けられる。ルームミラー１は、後述のように第１の反射ミラーとこの背後に角度θをもって取りつけられた第２の反射ミラーとで構成され、第１の反射ミラーは可視光線を反射して赤外線を透過し、第２の反射ミラーは赤外線を反射する特性のものが使用される。これにより、運転者の顔は、ＬＥＤ２からの赤外線が第１の反射ミラーを透過して第２の反射ミラーで反射することにより照射される。運転者の顔は運転中に大きく変動することはないため、ＬＥＤ２の照射範囲はレンズ等（不図示）で適当に絞られる。その照射範囲は、少なくともルームミラー１を含む領域であれば十分である。
【００２９】
ダッシュボード６には、運転者の顔で反射された赤外線を受光する赤外線カメラ４が設けられている。この赤外線カメラ４の設置場所は、ダッシュボード６の他、ステアリング（ハンドル部）の中央部など、運転者の顔部分を撮影可能な場所であればどこでも良い。
【００３０】
運転者の顔部分に照射された赤外線は上記赤外線カメラで受光されることにより、運転者の顔、特に眼及びその周辺部分の画像は赤外線カメラ４で撮像される。
【００３１】
前記赤外線カメラ４は、高ダイナミックレンジのＣＭＯＳ赤外線カメラ（ＨＤＲＣ）であることが望ましい。すなわち、自動車の車内、特に運転席は、直接外界に視野が開けており、たとえば直射日光による高いコントラストや夜間の極めて低い照度など撮影条件としては劣悪な条件である。このような条件であっても、高ダイナミックレンジのＣＭＯＳ赤外線カメラであれば、人間の網膜に近いダイナミックレンジを有し、光の強さに対する応答が対数的な関係になるようにされている。これにより、同一画面内における明るい被写体と暗い被写体の明暗比が１０００万倍の０．０１ルクス〜１０万ルクスの高いダイナミックレンジで撮像が可能である。
【００３２】
これにより、直射日光に照らされた顔面など明暗差が激しい（コントラストの強い）被写体であっても、従来の撮像素子のように、ハイライト部は真っ白になったり、シャドウ部は真っ黒になってしまう「白飛び」や「黒つぶれ」の画像になることがない。
【００３３】
ダッシュボード６内には、上記ＬＥＤ２の発光制御や赤外線カメラ４の出力に基づく画像認識処理等を行う画像認識装置７が設けられている。
【００３４】
図２は上記ルームミラー１の構成を示す図である。図３は、ルームミラー１の具体的な構成図である。
【００３５】
このルームミラー１は、第１の反射ミラー１ａと、この第１の反射ミラー１ａに対して所定角θでその背後に設けられた第２の反射ミラー１ｂと、これらのミラー１ａ、１ｂを支持するハウジング１ｃと、ハウジング１ｃを保持し、車体に固定する支持アーム１ｄとで構成されている。運転者が良好な後方視界を得るよう調整可能なようにハウジング１ｃと支持アーム１ｄは回転可能な構造で接続され、上下左右方向に回転可能な構造となっている。第１の反射ミラー１ａは、詳細については後述するコールドミラーで構成されている。
【００３６】
第１の反射ミラー１ａと第２の反射ミラー１ｂとは、本実施形態では互いに所定角θを持って固定されるが、撮像しようとする顔面領域を変更する場合やＬＥＤ２の位置を変更する場合などであれば角度を変更することが可能な構造であっても構わない。
【００３７】
第１の反射ミラー１ａであるコールドミラーは、可視光線領域の光を反射し、ＬＥＤ２の発生する赤外線を透過する性質を持つ。本実施形態では、ＬＥＤ２の発生する赤外線は、波長950nmを中心として、900nmから1040nmの範囲の近赤外域にある。そこで、第１の反射ミラー１ａは900nm以上の波長の光を透過し、かつ人間の眼の可視領域である400nmから700nmの光を反射する性質を持つ。本実施形態で使用するコールドミラーは、ガラス上の真空蒸着膜による干渉効果を原理とするものを使用するが、このような原理によらず、前記のような波長に応じた反射・透過の性質を持つものであれば、コールドミラーに代えて使用できる。
【００３８】
第２の反射ミラー１ｂは800nmから1040nmの波長の近赤外線を反射する鏡である。その波長の光を反射する性質を有しておれば、それ以外の波長は反射しても吸収しても透過しても構わない。本実施形態では、容易に低コストで入手できる、ガラスに銀メッキを施した鏡を使用する。
【００３９】
図３に示すように、ルームミラー１に対して後方視界中心線Ａから入射した光のうち可視光線成分は第１の反射ミラー１ａにより反射され、運転者の眼の方向Ｘに向かう。ＬＥＤ２から方向Ｙに発した赤外線は、第１の反射ミラー１ａを透過し、第２の反射ミラー１ｂで反射し、さらに第１の反射ミラー１ａを透過して方向Ｘに進む。方向Ｘは運転者の顔、特に眼の方向である。その赤外線は運転者の顔で反射してダッシュボードに設けられている赤外線カメラ４に進む。したがって、赤外線カメラ４により運転者の顔画像が撮影される。また、後方視界から入射した光のうち、第１の反射ミラー１ａを透過した赤外線成分は第２の反射ミラー１ｂにより反射され運転者の眼と異なる方向Ｚへ向かう。
【００４０】
赤外線カメラ４は、運転者３の顔面の全体を撮影するに足る画角で撮影する。
【００４１】
光学原理から、第１の反射ミラー１ａと第２の反射ミラー１ｂとのなす角度がθであるとき、同一方向から第１の反射ミラー１ａに方向Ｘから入射した可視光線と赤外線は、それぞれ第１と第２の反射ミラー１ａ、１ｂで反射されそれぞれの方向に進むが、このとき、それぞれの反射光の方向が互いになす角度は、第１の反射ミラー１ａに入射した入射角にかかわらず常に２θである。このことは、光の進行方向が逆であっても同様となる。したがって、方向Ｙから入射して第２の反射ミラー１ｂで反射して方向Ｘに進む赤外線と、方向Ａから入射する可視光線とのなす角度は、方向Ａからの可視光線の入射角にかかわらず、常に２θとなる。
【００４２】
ここで、方向Ａは後方視界の中心に一致し、方向Ｘは運転者の眼の方向であり、方向ＹはＬＥＤ２からの赤外線の照射方向である。
【００４３】
上記の構成において、運転者３は、第１の反射ミラー１ａを通常の後方監視ミラーとして使用する一方、赤外線を視認できない運転者はＬＥＤ２から照射され第２の反射ミラー１ｂで反射する赤外線を意識することはない。したがって、方向Ａからの後方視界は第１の反射ミラー１ａにより確保される。一方、ＬＥＤ２から照射される赤外線は第１の反射ミラー１ａを透過し、第２の反射ミラー１ｂで反射し、さらに第１の反射ミラー１ａを透過して運転者３の顔面を照射することにより、赤外線カメラ４により、運転者の顔画像が撮影される。したがって、運転者の顔画像は赤外線カメラ４で確実に撮影される。
【００４４】
第１の反射ミラー１ａは、運転者３が後方を視認できるように調整されているから、運転者の顔位置がどこであっても、赤外線カメラ４では、常に、運転者の眼を中心とした領域で赤外線の照射された領域の顔画像を取得することができる。
【００４５】
以上の説明は、垂直面について述べたが、水平面についても同様である。すなわち、水平と垂直のそれぞれの平面において、後方視界の中心線Ａから第１と第２の反射ミラー１ａ、１ｂのなす角度θの２倍の角度をなす位置にＬＥＤ２を設置することで、常に運転者３の眼を中心とした顔画像を撮影することができる。そして、顔部分だけが照明されているために、その領域の探索が容易であり、処理量が大幅に軽減される。
【００４６】
図４は、ＬＥＤ２の内部構成図である。
【００４７】
点灯制御手段２０は、投光の発光・非発光、および発光した場合の発光量を制御する。例えば撮影を行うときのみ発光し撮影しないときは非発光とすることにより無用な電力消費と発熱を避けることができる。あるいは、運転者の周囲に外部から赤外線が照射されているときには撮影に十分な強さになるに足るよう発光量を制御するような使い方も考えられる。さらには、赤外線カメラ４が画像を取得する瞬間に同期して発光する、あるいは発光時の画像と非発光時の画像を個別に取得し差を比較するというような使い方のための制御も考えられる。
【００４８】
ＬＥＤ駆動手段２１は、点灯制御手段１１からの指示に応じてＬＥＤ部２２に電流を供給して発光を制御する。駆動電流を制御することにより、発光する赤外線の強度を制御することができる。
【００４９】
ＬＥＤ部２２は、ＬＥＤ駆動手段１２から供給される電流により赤外線を発生するひとつまたは複数の赤外ＬＥＤ素子である。本実施例では、950nmを中心に800nmから1040nmの範囲の波長の近赤外線を発生する近赤外ＬＥＤ素子（例えばシャープ株式会社製GL381）を使用する。赤外ＬＥＤ素子の使用個数は、必要とされる光量と、個々の素子の発光光量により決まる。発光する赤外線の波長は、人間に殆ど不可視で、運転手顔面が撮像するのに適当な反射率を持ち、安価に入手でき、安価な撮像素子で撮影でき、空気中で大きく減衰しない、などの特性を持つ必要がある。本実施形態で使用する波長域はその要件を満たすが、要件を満たすのであれば他の波長域を使用しても構わないことはもちろんである。
【００５０】
レンズ２３は、ＬＥＤ部２２により発生された赤外線を、適切な拡がり角度を持つように収束させる。大きな領域に光線を照射してもルームミラー１で反射されて運転者の顔に照射される以外の光線は無駄になるので、本実施形態ではルームミラー１全体をちょうど照射するような拡がりを光線に与えている。ルームミラー１を含む円の半径を100mm、ＬＥＤ２からルームミラー１までの距離が300mmであるとして、適切な拡がり角度は 2*tan-1(100/300)、すなわち約37度である。また、そのとき、ルームミラー１の大きさを水平方向に200mm、垂直方向に50mmであるとし、ルームミラー１から運転者の顔面までの距離を400mmとすると、運転者の顔面が撮影される範囲は、垂直方向に116mm、水平方向に466mmとなり、運転者の眼を撮影するのに十分な大きさを持つ。光線の利用効率が問題とされない場合、あるいは赤外線ＬＥＤ素子自体が持つ発光指向性が適切な拡がり角を満たす場合であればレンズ２３は不要である。
【００５１】
図５は赤外線カメラ４の構成図である。
【００５２】
赤外線カメラ４に入射した赤外線は画角制御手段４０を経て、レンズ４１により収束させられ、赤外線撮像素子４２上に結像し電子データに変換されて、画像データ出力手段４３により画像データとして出力される。
【００５３】
画角制限手段４０は、撮影しようとする画像のルームミラー１以外の部分からの光を遮断するためのものである。ルームミラー１による反射光以外の光線は、不要であるばかりでなく、フレアやゴーストや迷光によるノイズの原因となり好ましくない。そのため、画角制限手段により赤外線撮像素子４２に入射する光線を、ルームミラー１およびその周辺に制限することが望ましい。ルームミラー１は可動ではあるがその動きはハウジング１ｃと支持アーム１ｄとの接続部の回転機構を中心とした回転運動であることと、運転者が得るべき後方視界が車両のリアウィンドウ５を通しての視界であることから、その可動範囲は限定されており予測可能である。したがって、ルームミラー１が可動範囲内全体を撮影可能で範囲外が遮蔽されるような画角制限手段を使用することにより、必要以外の光線が赤外線撮像素子４２に入射することを制限することができる。不要な光線による影響が問題にならない場合かあるいはレンズ４１がそのような画角制限機能を併せ持つのであれば、画角制限手段４０は無くても良い。
【００５４】
赤外線撮像素子４２は、ＬＥＤ２が発生する波長の赤外線に対して十分な感度を持つものを使用する。本実施形態では、ＬＥＤ２が発生する赤外線の波長は950nmをピーク波長とする800nmから1040nmの波長域である。一般にシリコンフォトダイオードは可視光線領域のみならず、1100nｍ程度の波長の近赤外線領域までの感度を持つため、シリコンフォトダイオードの原理を使用して製作されたＣＣＤ，ＣＭＯＳなどの撮像素子を使用した赤外線カメラが使用できる。例えば、ソニー社製のＣＣＤ撮像素子ICX429ALLの例では、950nmの波長においてもピーク感度の20%程度の感度を持つので本実施形態における赤外線撮像素子４２として感度の点では好適である。同様の赤外感度を持つシリコンフォトダイオードを使用して製作された高ダイナミックレンジのＣＭＯＳ赤外線カメラであればさらに好適である。また、外乱光の影響を小さくするために、可視光線を遮断し赤外線を透過するフィルタなどの手段を用いて撮像素子がＬＥＤ２からの光の波長域以外の波長の光を感知しないようにしても良い。
【００５５】
赤外線カメラ４で取得された画像は画像認識装置７（図１参照）に送られる。
【００５６】
画像認識装置７は受け取った画像データを処理し、画像中の運転者顔面情報から自動車の安全機能や快適機能を実現するために必要な運転者の状態に関する情報を認識し出力する。運転者の顔画像から得られる運転者の状態により実現される機能は多様であり、本発明は認識機能を特定するものでは無いが、本実施形態では一例として脇見検知機能のための視線検出機能を持つものとする。
【００５７】
脇見検知を実現する一方法として、運転者の視線を検出し、視線方向が適切なタイミングで適切な方向を向いていることを判定する方法がある。視線を検知することによる方法は、別の実現方法である運手者の顔の向きにより判定する方法に比べて、実際の注視方向を検出するという点で高精度で確実度が高い。一方で、視線を検出する画像認識処理は、顔の向きを検出する画像認識処理に比べて大幅に高度な処理であり、入力される画像から運転者の眼を迅速かつ確実に検出することが要求される。本発明は、運転者の眼部分を撮影するものであるため、視線検出機能は本発明の実施形態として好適である。
【００５８】
図６に画像認識装置７の構成例を示す。
【００５９】
赤外線カメラ４から送られた画像データは眼検出手段７０に送られる。眼検出手段７０は、画像中から人間の眼を検出し、検出された眼部分画像データを視線検出手段７１に送り、同時に眼検出の成否すなわち眼の検出結果の有無情報を判定手段に送る。
【００６０】
視線検出手段７１は、眼部分の画像データから眼全体の形状と眼部分内の瞳の相対位置から視線方向を検出し、視線情報出力７２として出力する。同時に、視線検出の成否すなわち視線の検出結果の有無情報を判定手段に送る。
【００６１】
判定手段７３は、眼検出の有無情報と視線検出の有無情報から、眼の状態を判定し判定情報出力７４として出力する。判定情報出力７４に出力される情報は、例えば眼が検出されないときは眼検出失敗とされるが、これは運転者が前方を向いていない可能性があることを示す情報として利用される。あるいは、眼検出は成功したが、視線が検出されない場合は視線検出失敗とされ、これは運転者が眼を閉じている可能性があることを示す情報として利用される。あるいは、眼検出失敗にかかわらず視線検出が成功した場合は、何らかの画像認識処理上の誤認識が発生とした可能性が高いとするというような、視線情報出力の信頼度を示す情報として利用されることも可能である。
【００６２】
図７は、ＬＥＤ２の設置位置例を示す図である。
【００６３】
前記第２の反射ミラー１ｂと第２の反射ミラー１ｂとのなす角度θはゼロから９０度の範囲で任意に設定可能である。このため、この角度θを調整することにより、ＬＥＤ２の設置位置の自由度を高くできる。例えば、図７（Ａ）のように、ＬＥＤ２を第２の反射ミラー１ｂに近づけると運転者３の眼を中心とした広い範囲を照射することができ、反対に、図７（Ｂ）のように、ＬＥＤ２を第２の反射ミラー１ｂから遠ざけると運転者３の眼とその周辺の狭い範囲を照射することができる。いずれの場合も、ＬＥＤ２が後方視界を妨げることがないから運転者３はいつの場合も問題なく後方を監視することができる。また、運転者３の顔位置にかかわらず常に運転者の眼を含む領域だけを効率的に照射することができるため、ＬＥＤ２が出力すべき総光量は眼が存在する可能性のなる全領域を照明する場合に比して大幅に少なくて済み、コスト、省電力、小型化、発熱の点で有利となる。
【００６４】
なお、図３において説明したように、図８のように後方から赤外線を含む外光３０、例えば後続車のヘッドライトの光などがルームミラー１に向けて照射されることがあり、その場合、従来のルームミラー１においては運転者３の顔面に強い赤外線が照射されることになるが、本実施形態では、この方向からの外光３０は、図示のように第１の反射ミラー１ｂを通過し、第２の反射ミラー１ｂにより運転者３の顔面と異なる方向Ｚに反射されるため、撮影画像に影響を及ぼすことがない。
【００６５】
また、図８において、可視光線を透過せず、赤外線を透過するカバー３１で赤外線カメラ４の受光部を覆うことにより、運転者３からは赤外線カメラ４が完全に隠蔽される。このように構成することで、運転者３に対する心理的圧迫感をなくし、また、内装デザイン上の制約もなくすことができる。
【００６６】
なお、この実施形態は、自動車に適用した例を示したが、自動車以外に、鉄道車両、船舶等に適用することも可能である。
【図面の簡単な説明】
【００６７】
【図１】この発明の実施形態である運転者撮影装置の構成を説明する図
【図２】ルームミラー１の構成を示す図
【図３】ルームミラー１の具体的な構成を示す図
【図４】ＬＥＤ２の構成を示す図
【図５】赤外線カメラ４の構成を示す図
【図６】画像認識装置７の構成を示す図
【図７】赤外線カメラ４の設置例を示す図
【図８】赤外線カメラ４を隠蔽するカバーを示す図
【符号の説明】
【００６８】
１−ルームミラー
１ａ−第１の反射ミラー
１ｂ−第２の反射ミラー
２−（近赤外高輝度）ＬＥＤ
３−運転者
４−赤外線カメラ
７−画像認識装置
【図１】
2006252138.tif 000003
【図２】
2006252138.tif 000004
【図３】
2006252138.tif 000005
【図４】
2006252138.tif 000006
【図５】
2006252138.tif 000007
【図６】
2006252138.tif 000008
【図７】
2006252138.tif 000009
【図８】
2006252138.tif 000010