(57)【要約】【課題】撮影画像に基づいて顔が映っていないと判定された場合に余所見であることを判定する。【解決手段】取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定し、撮影画像に映る顔の確度が確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定し、確度閾値を撮影画像に映る顔の確度に基づいて更新する。【選択図】図１
2019171903.tif 000002
【特許請求の範囲】
【請求項１】
取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する確度判定部と、
前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する余所見判定部と、
前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する確度閾値更新部と、
を備える余所見判定装置。
【請求項２】
前記確度閾値更新部は、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した前記撮影画像に映る顔の確度の統計値と、新たに取得した前記撮影画像の顔の角度との乖離に基づいて前記確度閾値を更新する
請求項１に記載の余所見判定装置。
【請求項３】
前記確度閾値更新部は、前記撮影画像に映る顔の確度が前記確度閾値未満で、前記撮影画像を送信した撮影装置から受信した一連の撮影画像に映る各顔の前記確度閾値以上の確度の算出ができていない状況である場合であって、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した前記撮影画像に映る顔の確度の統計値が、前記確度閾値の下限値以上である場合には当該確度閾値の値を減じる
請求項２に記載の余所見判定装置。
【請求項４】
前記確度閾値更新部は、前記撮影画像に映る顔の確度が前記確度閾値未満で、前記撮影画像を送信した撮影装置から受信した一連の撮影画像に映る各顔の前記確度閾値以上の確度の算出ができていない状況でない場合であって、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した前記撮影画像に映る顔の確度の統計値が、前記確度閾値の下限値未満である場合には前記確度閾値を前記下限値に更新する
請求項２に記載の余所見判定装置。
【請求項５】
前記確度閾値更新部は、前記撮影画像に映る顔の確度が前記確度閾値以上で、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した前記撮影画像に映る顔の確度の統計値が、現在の前記確度閾値の値よりも高い場合には、現在の前記確度閾値の値を増加させる
請求項２に記載の余所見判定装置。
【請求項６】
前記確度閾値更新部は、前記撮影画像に映る顔の確度が前記確度閾値以上で、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した前記撮影画像に映る顔の確度の統計値が、現在の前記確度閾値の値よりも低い場合には、現在の前記確度閾値の値の変更を停止する
請求項２に記載の余所見判定装置。
【請求項７】
撮影装置と余所見判定装置とを備えた余所見判定システムであって、
前記余所見判定装置が、
取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する確度判定部と、
前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する余所見判定部と、
前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する確度閾値更新部と、
を備える余所見判定システム。
【請求項８】
取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定し、
前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定し、
前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する
余所見判定方法。
【請求項９】
余所見判定装置のコンピュータを、
取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する確度判定手段、
前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する余所見判定手段、
前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する確度閾値更新手段、
として機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、余所見判定装置、余所見判定システム、余所見判定方法、プログラムに関する。
【背景技術】
【０００２】
車等の移動体を操作する運転者の余所見を検知する技術が特許文献１に開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】国際公開第２０１６／０５２５０７号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述のような運転時の余所見を判定する技術では撮影画像に映る顔の視線に基づいて余所見の検知を行う。しかしながら撮影画像に顔が映っていない場合にはそもそも余所見判定を行っておらず、顔が映っていない場合でも運転状況に応じて適切に余所見判定を行うことが求められている。
【０００５】
そこでこの発明は、上述の課題を解決する余所見判定装置、余所見判定システム、余所見判定方法、プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００６】
本発明の第１の態様によれば、余所見判定装置は、取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する確度判定部と、前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する余所見判定部と、前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する確度閾値更新部と、を備えることを特徴とする。
【０００７】
本発明の第２の態様によれば、撮影装置と余所見判定装置とを備えた余所見判定システムは、前記余所見判定装置が、取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する確度判定部と、前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する余所見判定部と、前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する確度閾値更新部と、を備えることを特徴とする。
【０００８】
本発明の第３の態様によれば、余所見判定方法は、取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定し、前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定し、前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新することを特徴とする。
【０００９】
本発明の第４の態様によれば、プログラムは、余所見判定装置のコンピュータを、取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する確度判定手段、前記撮影画像に映る顔の確度が前記確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する余所見判定手段、前記確度閾値を前記撮影画像に映る顔の確度に基づいて更新する確度閾値更新手段、として機能させることを特徴とする。
【発明の効果】
【００１０】
本発明によれば、撮影画像に基づいて顔が映っていないと判定された場合に運転状況に応じて余所見であるか否かを判定することができる。
【図面の簡単な説明】
【００１１】
【図１】本実施形態による運転状況監視システムを示す図である。
【図２】本実施形態による余所見判定装置のハードウェア構成図である。
【図３】本実施形態による余所見判定装置の機能ブロック図である。
【図４】本実施形態によるドライブレコーダのハードウェア構成を示す図である。
【図５】本実施形態によるドライブレコーダの制御装置の機能ブロック図である。
【図６】本実施形態によるドライブレコーダの処理フローを示す図である。
【図７】本実施形態による余所見判定装置の処理フローを示す第一の図である。
【図８】本実施形態による余所見判定装置の処理フローを示す第二の図である。
【図９】本実施形態による余所見判定装置の最小構成を示す図である。
【発明を実施するための形態】
【００１２】
以下、本発明の一実施形態による余所見判定装置を図面を参照して説明する。
図１は同実施形態による運転状況監視システム（余所見判定システム）を示す図である。
図１で示すように運転状況監視システム１００は余所見判定装置１と、運転状況センシング装置の一態様であるドライブレコーダ２と含んで構成される。余所見判定装置１とドライブレコーダ２とは無線通信ネットワークや有線通信ネットワークを介して接続される。ドライブレコーダ２は一例としては車両に設けられている。余所見判定装置１は市中を走る複数の車両にそれぞれ設置されたドライブレコーダ２と通信接続する。
【００１３】
図２は余所見判定装置のハードウェア構成図である。
この図が示すように余所見判定装置１はＣＰＵ（Central Processing Unit）１０１、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access Memory）１０３、データベース１０４、通信モジュール１０５等の各ハードウェアを備えたコンピュータである。
【００１４】
図３は余所見判定装置の機能ブロック図である。
余所見判定装置１は電源が投入されると起動し、予め記憶する余所見判定プログラムを実行する。これにより余所見判定装置１には、制御部１１、情報取得部１２、余所見開始判定部１３、余所見判定部１４、判定結果出力部１５、確度判定部１６、確度閾値更新部１７、を少なくとも備える。
【００１５】
制御部１１は他の機能部を制御する。
情報取得部１２は撮影画像、車両情報、天候情報、加速度情報などのドライブレコーダ２から送信された情報を取得する。
余所見開始判定部１３は余所見判定を開始するかを判定する。
余所見判定部１４は顔が検出できない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する。また余所見判定部１４は顔方向が所定の条件範囲内でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する。また余所見判定部１４は顔方向が所定の条件範囲内でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する。また余所見判定部１４は撮影画像に映る顔の確度が確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する。
判定結果出力部１５は余所見判定結果を出力する。
【００１６】
確度判定部１６は取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する。
確度閾値更新部１７は確度閾値を撮影画像に映る顔の確度に基づいて更新する。また確度閾値更新部１７は現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の統計値と、新たに取得した撮影画像の顔の角度との乖離に基づいて確度閾値を更新する。また確度閾値更新部１７は、撮影画像に映る顔の確度が確度閾値未満で、撮影画像を送信した撮影装置から受信した一連の撮影画像に映る各顔の確度閾値以上の確度の算出ができていない状況である場合であって、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の統計値が、確度閾値の下限値以上である場合には確度閾値の値を減じる。また確度閾値更新部１７は、撮影画像に映る顔の確度が確度閾値未満で、撮影画像を送信した撮影装置から受信した一連の撮影画像に映る各顔の確度閾値以上の確度の算出ができていない状況でない場合であって、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の統計値が、確度閾値の下限値未満である場合には確度閾値を下限値に更新する。また確度閾値更新部１７は、撮影画像に映る顔の確度が確度閾値以上で、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の統計値が、現在の確度閾値の値よりも高い場合には、現在の確度閾値の値を増加させる。また確度閾値更新部１７は、撮影画像に映る顔の確度が確度閾値以上で、現在時刻と当該現在時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の統計値が、現在の確度閾値の値よりも低い場合には、現在の確度閾値の値の変更を停止する。
【００１７】
図４はドライブレコーダのハードウェア構成を示す図である。
ドライブレコーダ２は、加速度センサ２１、通信装置２２、カメラ２３、制御装置２４、記憶装置２５などを含んで構成される。加速度センサ２１は車両の加速度を検知する。通信装置２２は余所見判定装置１と通信接続する。カメラ２３は車両の外部や内部を撮影して動画像、静止画像を生成する。
制御装置２４はドライブレコーダ２の各機能を制御する。記憶装置２５は動画像、静止画像、加速度センサ２１で検知した加速度やその他のドライブレコーダ２の外部から取得した情報等を記憶する。ドライブレコーダ２は基地局等を介して余所見判定装置１と通信接続する。なおドライブレコーダ２の制御装置２４は、ＣＰＵ、ＲＯＭ、ＲＡＭ等を備えたコンピュータである。
【００１８】
図５はドライブレコーダに備わる制御装置の機能ブロック図である。
制御装置２４はドライブレコーダが起動すると制御プログラムを実行する。これにより制御装置２４には、車両情報取得部２４１、天候情報取得部２４２、加速度情報取得部２４３、撮影画像取得部２４４、運転状況データ送信部２４５、撮影画像送信部２４６の各機能部が備わる。
【００１９】
図６はドライブレコーダの処理フローを示す図である。
次に運転状況監視システムの処理フローについて順を追って説明する。
まずドライブレコーダ２における運転状況情報の送信処理について説明する。
車両の電気系統が起動するとドライブレコーダ２が動作を始動する（ステップＳ１０１）。ドライブレコーダ２の加速度センサ２１はドライブレコーダ２の始動後に車両の加速度のセンシングを開始する（ステップＳ１０２）。またカメラ２３は車内および車外の撮影を開始する（ステップＳ１０３）。なおカメラ２３は車内側レンズと車外側レンズを備える。カメラ２３は車内側レンズを用いて車内を車内の運転者の顔の方向の対象物を撮影する。カメラ２３は車外側レンズを用いて車外の進行方向の対象物を撮影する。
【００２０】
そしてドライブレコーダ２の動作中、制御装置２４の車両情報取得部２４１は車両情報を取得する（ステップＳ１０４）。車両情報取得部２４１が取得する車両情報は車両に備わる各センサによって検出された車速、ハンドル角度、ウィンカー指示方向などであってよい。また天候情報取得部２４２は天候情報を取得する（ステップＳ１０５）。天候情報は気象庁や天候情報提供企業に備わるサーバ装置から取得してもよい。または天候情報は車両に備わるセンサ（ワイパー動作検出器や雨滴検出器）などからえられる情報であってよい。制御装置２４は、ワイパーが動作している場合、雨滴検出器が雨滴を検出している場合には雨天であると判定してよい。加速度情報取得部２４３は、加速度センサ２１から所定の時間間隔で加速度を取得する（ステップＳ１０６）。制御装置２４は車両情報、天候情報、加速度を所定の間隔で取得する。
【００２１】
運転状況データ送信部２４５は所定の間隔で車両情報、天候情報、加速度情報を余所見判定装置１へ送信するよう通信装置２２に指示する。通信装置２２は車両情報、天候情報、加速度情報を余所見判定装置１へ送信する（ステップＳ１０７）。撮影画像送信部２４６は撮影画像を余所見判定装置１へ送信するよう通信装置２２に指示する。通信装置２２は撮影画像を余所見判定装置１へ送信する（ステップＳ１０８）。制御装置２４は処理終了かを判定し（ステップＳ１０９）、処理終了までステップＳ１０２からの処理を繰り返す。車両情報、天候情報、加速度情報、撮影画像には、ドライブレコーダ２のＩＤ、運転者のＩＤ、センシング時刻が付与されてよい。なお上述の処理において加速度や、天候情報を送信しているが、車両情報のみで余所見判定を行う場合には、それらの情報を送信しなくてもよい。
【００２２】
図７は余所見判定装置の処理フローを示す第一の図である。
余所見判定装置１において情報取得部１２はドライブレコーダ２のＩＤ、運転者のＩＤに基づいて、対応する車両情報、天候情報、加速度情報、撮影画像の組を、当該各ＩＤに紐づけて順次データベース１０４へ記録する（ステップＳ２０１）。そして制御部１１は余所見判定処理を行うよう余所見開始判定部１３、余所見判定部１４に指示する。
【００２３】
余所見開始判定部１３はある一つのドライブレコーダ２を特定し、そのＩＤに紐づいて記録されているセンシング時刻、車両情報、天候情報、加速度情報、撮影画像を取得する。余所見判定部１４は車両情報に含まれる車速が前方方向の速度（前進）を示し、かつウィンカー指示方向が方向指示を指定しておらず、所定の速度以上であるかを判定する（ステップＳ２０２）。所定の速度は一例としては２０ｋｍ／ｈなど値であてよい。余所見判定部１４は車速が前進を示し、ウィンカー指示を指定しておらず、所定の速度以上である場合に余所見判定を開始すると決定する。
【００２４】
余所見開始判定部１３は他の情報を利用して、または他の情報を追加で利用して余所見判定を開始すると決定してもよい。例えば、余所見判定部１４は加速度が０以上かを判定して、加速度が０以上である場合に余所見判定を開始すると決定してもよい。また余所見判定部１４はハンドル角度が所定の範囲内か否かによって余所見判定を開始すると決定してもよい。ハンドル角度の所定の範囲は例えば直進方向を基準とする左右１０度などであってよい。また余所見判定部１４は天候情報が雨を示す場合に余所見判定を開始すると決定してもよい。余所見判定部１４は車外の撮影画像に基づいて余所見判定を開始すると決定してもよい。例えば、撮影画像の直進方向に対象物が映る場合、撮影画像に車線のカーブが映る場合、余所見判定を開始すると決定してよい。余所見判定部１４は余所見判定を開始すると決定すると、余所見判定部１４は開始を指示する。余所見判定部１４は余所見判定を開始するかどうかの判定処理を所定の間隔で繰り返す。
【００２５】
余所見判定部１４は現在の処理対象のドライブレコーダ２のＩＤに基づいて情報取得部１２の既に取得している撮影画像を当該情報取得部１２から入力する。余所見判定部１４は余所見判定を開始すると決定した場合、所定の間隔でドライブレコーダ２から受信する撮影画像を順次読み取る。
【００２６】
余所見判定部１４は撮影画像を読み取ると、余所見判定を続けることが出来る程度に撮影画像に顔が映っているかを判定する顔検出処理を行う。余所見判定部１４は新たに取得した撮影画像内に顔を検出できるかを判定する（ステップＳ２０３）。余所見判定部１４は撮影画像に写る顔の確度が確度閾値以上である場合に撮影画像内に顔を検出し、撮影画像に写る顔の確度が確度閾値より小さい場合に撮影画像内に顔を検出できない。余所見判定部１４は新たに取得した撮影画像内に顔を検出した場合次の顔方向検出処理を行う。余所見判定部１４は新たに取得した撮影画像内に顔を検出できない場合、新たに取得した撮影画像のセンシング時刻を基準として過去の所定期間までの間のセンシング時刻の撮影画像について、所定割合以上の回数で顔が映っていない（撮影画像に映る顔の確度が確度閾値以上でない）かを判定する（ステップＳ２０４）。余所見判定部１４は、所定期間の間に取得した撮影画像について、所定割合以上の回数で顔が映っていない場合、余所見をしていると判定する（ステップＳ２０５）。余所見判定部１４は、所定期間の間に取得した撮影画像について、顔が映っていない回数が所定割合未満の場合、余所見と判定せずに、余所見判定を開始するかを判定する処理に戻る。
【００２７】
上述の顔検出処理において余所見判定部１４は、運転者が眼鏡やマスクをかけている場合、余所見判定を続けることが出来る程度に撮影画像に顔が映っていないと判定されてもよい。この場合、余所見判定部１４は処理を終了すると判定してもよい。
【００２８】
余所見判定部１４は顔方向検出処理において、新たに取得した撮影画像内の顔方向が直進方向を基準とする所定の範囲内かを判定する（ステップＳ２０６）。所定範囲は直進方向を基準として左右１０度などの範囲であってよい。余所見判定部１４は現在の車速に基づいて所定範囲の広さを変更してもよい。例えば余所見判定部１４は速度が低速の場合には、運転者が広い範囲を目視する可能性が高くなるため、直進方向を基準とする幅を左右２０度などと広げるようにしてもよい。余所見判定部１４は新たに取得した撮影画像内の顔方向が所定の範囲内である場合、視線方向検出処理を行う。余所見判定部１４は新たに取得した撮影画像内の顔方向が所定の範囲内でない場合、新たに取得した撮影画像のセンシング時刻を基準として過去の所定期間までの間の撮影画像の余所見判定結果を取得する。余所見判定部１４はそれら判定結果について、顔が直進方向を基準とする所定範囲内となる回数が所定割合以上かを判定する（ステップＳ２０７）。余所見判定部１４は、所定期間の間に取得した撮影画像について、顔が直進方向を基準とする所定範囲内となる回数が所定割合以上でない場合、余所見をしていると判定する（ステップＳ２０８）。余所見判定部１４は、顔が直進方向を基準とする所定範囲内となる回数が所定割合以上かを判定する処理において当該所定割合の値を変動させてもよい。例えば余所見判定部１４は、当該所定割合の値を速度が低下するほど減少させる。これにより車両が低速の場合には、広範囲を目視する可能性が高いが、広範囲を目視したとした場合でも余所見判定とされず運転者に対する必要以上の余所見アラートの出力を削減することができる。
【００２９】
余所見判定部１４は視線方向検出処理において、新たに取得した撮影画像内の視線方向が直進方向を基準とする所定の範囲内かを判定する（ステップＳ２０９）。所定範囲は直進方向を基準として左右１０度などの範囲であってよい。余所見判定部１４は速度が低速の場合には、運転者が広い範囲を目視する可能性が高くなるため、直進方向を基準とする幅を左右２０度などと広げるようにしてもよい。余所見判定部１４は新たに取得した撮影画像内の視線方向が所定の範囲内である場合、余所見と判定せずに、余所見判定を開始するかを判定する処理に戻る。余所見判定部１４は新たに取得した撮影画像内の視線方向が所定の範囲内でない場合、新たに取得した撮影画像のセンシング時刻を基準として過去の所定期間までの間の撮影画像の余所見判定結果を取得する。余所見判定部１４はそれら判定結果について、視線が直進方向を基準とする所定範囲内となる回数が所定割合以上かを判定する（ステップＳ２１０）。余所見判定部１４は、所定期間の間に取得した撮影画像について、視線が直進方向を基準とする所定範囲内となる回数が所定割合以上でない場合、余所見をしていると判定する（ステップＳ２１１）。余所見判定部１４は、視線が直進方向を基準とする所定範囲内となる回数が所定割合以上かを判定する処理において当該所定割合の値を変動させてもよい。例えば余所見判定部１４は、当該所定割合の値を速度が低下するほど減少させる。これにより車両が低速の場合には、広範囲を目視する可能性が高いが、広範囲を目視したとした場合でも余所見判定とされず運転者に対する必要以上の余所見アラートの出力を削減することができる。
【００３０】
余所見判定部１４は余所見が行われていると判定した場合には、判定結果出力部１５へ余所見判定結果を出力するよう指示する。判定結果出力部１５は余所見が行われていると判定したドライブレコーダ２のＩＤを取得する。判定結果出力部１５はドライブレコーダ２のＩＤに基づいてその送信先となるネットワークアドレスをデータベース１０４から取得する。送信先のネットワークアドレスは予めデータベース１０４に記録されているものとする。判定結果出力部１５は当該送信先に余所見検知を示す情報を送信する（ステップＳ２１２）。判定結果出力部１５は余所見検知を示す情報を、ドライブレコーダ２のＩＤや運転者のＩＤに紐づけてデータベース１０４に記録してもよい。余所見判定部１４は終了するかを判定する（ステップＳ２１３）。終了しない場合、余所見判定装置１は次にドライブレコーダ２から受信した処理を用いて同様の処理を所定間隔で繰り返す。
【００３１】
ドライブレコーダ２は余所見検知の情報を受信する。ドライブレコーダ２は余所見検知の情報を受信すると、アラーム音を発信するなど、余所見検知を運転者に知らせる処理を行う。これにより運転者は余所見運転を認識することができる。
【００３２】
図８は余所見判定装置の処理フローを示す第二の図である。
余所見判定検出装置１において確度判定部１６は上述したステップＳ２０３の顔検出処理で撮像画像に映る顔の確度を算出し、算出した確度が確度閾値以上であるかを判定する。これにより確度判定部１６は撮影画像内に顔を検出できるかを判定する（ステップＳ３０１）。確度は顔らしさの指標となる値（例えば単位はパーセント）であり、高ければ顔検出の精度が高く、低ければ顔検出の精度が低い。よって確度判定部１６は撮影画像に写る顔の確度が確度閾値以上である場合に撮影画像内に顔を検出し、撮影画像に写る顔の確度が確度閾値より小さい場合に撮影画像内に顔を検出できない。
【００３３】
確度閾値更新部１７が確度閾値を撮影画像に映る顔の確度に基づいて更新する確度閾値更新処理を上述した余所見判定処理と並行して実行する。確度閾値更新部１７は確度閾値更新処理において、顔を検出した場合、確度閾値増加更新処理を行い、顔を検出できない場合、次の確度閾値削減更新処理を行う。
【００３４】
確度閾値更新部１７は確度閾値削減更新処理において、ドライブレコーダ２から受信した一連の撮影画像に映る各顔の確度閾値以上の確度の算出ができていない状況であるかを判定する（ステップＳ３０２）。例えば確度閾値更新部１７は余所見判定処理を開始してから所定時間以上確度が確度閾値以下の状態が継続している場合や、新たに取得した撮影画像のセンシング時刻を基準として過去の所定期間までの間の確度が確度閾値以下の状態が継続しているが場合に、当該状況であると判定する。確度閾値更新部１７は当該状況でない場合、処理を終了する。
【００３５】
確度閾値更新部１７は確度閾値以上の確度の算出ができていない状況である場合、新たに取得した撮影画像のセンシング時刻（現在時刻）と当該センシング時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の平均値（統計値）が、確度閾値の下限値以上であるかを判定する（ステップＳ３０３）。
【００３６】
確度閾値更新部１７は確度の平均値が確度閾値の下限値以上である場合には現在の確度閾値の値を減じる（ステップＳ３０４）。例えば確度閾値更新部１７は算出した確度の平均値まで確度閾値の値を減じる。或いは新たな確度閾値の下限値未満の値とならない場合には、確度閾値更新部１７は現在の確度閾値の値から所定値或いは所定割合減じてもよい。閾値更新部１７は確度の平均値が確度閾値の下限値未満である場合には確度閾値の値を下限値に更新する（ステップＳ３０５）。
【００３７】
ステップＳ３０１において顔を検出した場合、確度閾値更新部１７は確度閾値増加更新処理を行う。確度閾値更新部１７はこの確度閾値増加更新処理において、新たに取得した撮影画像のセンシング時刻（現在時刻）と当該センシング時刻を基準とした所定時間前までの過去の時刻との間の時間において取得した撮影画像に映る顔の確度の平均値が、現在の確度閾値の値よりも所定値以上高いかを判定する（ステップＳ３０６）。ここで確度の平均値を算出する所定時間はステップＳ３０３において確度の平均値を算出する所定時間と異なる時間であってもよいし、同じ時間であってもよい。
【００３８】
確度閾値更新部１７は確度の平均値が現在の確度閾値の値より所定値以上高い場合には、現在の確度閾値の値を増加させる（ステップＳ３０７）。例えば確度閾値更新部１７は算出した確度の平均値に確度閾値の値を更新する。或いは新たな確度閾値が現在の値よりも大きくなるのであれば、確度閾値更新部１７は算出した確度の平均値から所定値を減じた値を確度閾値の値としてもよい。
【００３９】
確度閾値更新部１７は確度の平均値が現在の確度閾値の値よりも低い場合には、現在の確度閾値の値の変更を停止する（ステップＳ３０８）。すなわち確度閾値更新部１７は確度の平均値が現在の確度閾値の値よりも低い場合には、確度閾値の値を変更しない。
【００４０】
上述の処理においてはクラウドサーバとして通信ネットワークに接続された余所見判定装置１が余所見判定を行っている。しかしながら上述の余所見判定の処理はドライブレコーダ２が単独で行うようにしてもよい。つまりドライブレコーダ２が余所見判定装置１として動作してもよい。この場合、ドライブレコーダ２が上述の情報取得部１２、余所見開始判定部１３、余所見判定部１４、判定結果出力部１５、確度判定部１６、確度閾値更新部１７と同様の処理を行うようにしてもよい。またはドライブレコーダ２と接続された車内に搭載されている車載器が情報取得部１２、余所見開始判定部１３、余所見判定部１４、判定結果出力部１５、確度判定部１６、確度閾値更新部１７の処理を備えてもよい。この場合、車載器が余所見判定装置１として動作する。この場合、車載器の情報取得部１２、余所見開始判定部１３、余所見判定部１４、判定結果出力部１５、確度判定部１６、確度閾値更新部１７、と同様の処理を行う。
【００４１】
上述の処理によれば顔の方向や視線の方向が検知できない場合でも顔が検出できたかどうかで余所見検知を行うことができる。
また上述の処理によれば顔方向や視線方向が少しずれただけで余所見検知アラートをすることはなく、所定期間内において所定割合で顔方向や視線方向がずれた場合に余所見検知アラートを出力する。これにより運転者に対する不要な余所見検知アラートの出力を削減することができる。
また上述の余所見判定装置１によれば、低速での運転などの所定の速度以下など視線方向が前方から離れるような場合に余所見であると判定されてしまうことを回避する。これにより運転者に対する不要な余所見検知アラートの出力を削減することができる。
また上述の処理によれば余所見判定装置１は車両の速度低下に応じて余所見判定の可能性があると判定する場合の直進方向を基準とする範囲を広げる処理を行うことで、速度に応じた適切な顔方向、視線方向の範囲に基づく余所見判定を行うことができる。
また上述の処理によれば余所見判定装置１は視線が直進方向を基準とする所定範囲内となる回数が所定割合以上かを判定する処理において速度が低下するほど当該所定割合の値を減少させる。これにより速度に応じた適切な顔方向、視線方向の範囲に基づく余所見判定を行うことができる。
【００４２】
また上述の処理によれば余所見判定装置１は運転者の状態に合わせて顔検出するための条件となる確度閾値を自動で調整することができる。例えば余所見判定装置１は余所見判定処理を開始してから一度も顔を検出できていない場合や、所定時間以上顔を検出できていない状態が続いた場合等に、確度閾値を減じて顔検出をしやすくすることができる。これにより運転者が眼鏡やマスクをかけている場合等の顔検出に悪条件なときであっても精度良く余所見判定を行うことができる。また余所見判定装置１は運転者の顔検出率が高い場合や改善した場合に確度閾値を自動で増加させることで、余所見判定の精度の不必要な低下を防ぐことができる。
【００４３】
図９は余所見判定装置の最小構成を示す図である。
余所見判定装置１は少なくとも余所見判定部１４、確度判定部１６、確度閾値更新部１７を備えればよい。確度判定部１６は取得した撮影画像に映る顔の顔らしさの指標となる確度が確度閾値以上であるかを判定する。余所見判定部１４は撮影画像に映る顔の確度が確度閾値以上でない時間が単位時間当たりに所定割合以上である場合には余所見状態と判定する。確度閾値更新部１７は確度閾値を撮影画像に映る顔の確度に基づいて更新する。
【００４４】
上述の余所見判定装置１およびドライブレコーダ２は内部に、コンピュータシステムを有している。そして、上述した各処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしても良い。
【００４５】
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【符号の説明】
【００４６】
１・・・余所見判定装置
２・・・ドライブレコーダ
１１・・・制御部
１２・・・情報取得部
１３・・・余所見開始判定部
１４・・・余所見判定部
１５・・・判定結果出力部
１６・・・確度判定部
１７・・・確度閾値更新部
２１・・・加速度センサ
２３・・・カメラ
２４・・・制御装置
２４１・・・車両情報取得部
２４２・・・天候情報取得部
２２３・・・加速度情報取得部
２４４・・・撮影画像取得部
２４５・・・運転状況データ送信部
２４６・・・撮影画像送信部
【図１】
2019171903.tif 000003
【図２】
2019171903.tif 000004
【図３】
2019171903.tif 000005
【図４】
2019171903.tif 000006
【図５】
2019171903.tif 000007
【図６】
2019171903.tif 000008
【図７】
2019171903.tif 000009
【図８】
2019171903.tif 000010
【図９】
2019171903.tif 000011