(57)【要約】従来例おいては、運転者の会話の継続時間によって漫然運転と判定しているため、運転者の会話への集中度が低い場合にも、運転者の会話への集中度が高い場合にも一律の警告を行うことしかできない。この発明においては、運転者の会話への集中度に応じた適切な警告が可能となる。
2019171452.tif 000002
【特許請求の範囲】
【請求項１】
自車両の内部に設けられた運転者の顔を撮像する撮像装置が所定の間隔で撮像する画像に基づいて運転者の発話間隔を算出する発話間隔算出部と、
前記発話間隔に基づいて、前記運転者の会話への集中度を判定する会話集中度判定部と、
前記会話への集中度に応じて前記自車両が注意喚起地点に接近したことを示す警告を変更する警告制御部と、
を備える運転支援装置。
【請求項２】
前記警告制御部は、前記運転者の会話への集中度に応じて前記警告の音量、前記警告を報知するタイミング、前記警告の頻度及び前記警告の回数の内、少なくとも一つを変更する請求項１記載の運転支援装置。
【請求項３】
前記会話集中度判定部は、前記会話間隔が前記運転者の通常の発話間隔よりも短い状態が予め定められた回数連続した場合に、前記発話間隔に基づいて前記運転者の会話への集中度を判定する請求項１記載の運転支援装置。
【請求項４】
前記会話集中度判定部は、前記発話間隔を予め定められた複数の閾値と比較することで、前記会話への集中度を複数段階に判定する請求項３に記載の運転支援装置。
【請求項５】
自車両の内部に設けられた運転者の顔を撮像する撮像装置が所定の間隔で撮像する画像に基づいて運転者の発話間隔を算出するステップと、
前記発話間隔に基づいて、前記運転者の会話への集中度を判定するステップと、
前記会話への集中度に応じて前記自車両が注意喚起地点に接近したことを示す警告を変更するステップと、
を備える運転支援方法。
【請求項６】
自車両の内部に設けられた運転者の顔を撮像する撮像装置と、
前記自車両が注意喚起地点に接近したことを前記運転者に警告する警告装置と、
前記撮像装置の撮像した画像から前記運転者の会話への集中度を判定し、前記会話への集中度に応じて前記警告を変更する運転支援装置と、
を備える運転支援システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は運転支援装置、運転支援方法及び運転支援装置を備えた運転支援システムに関する。
【背景技術】
【０００２】
例えば、運転者の会話の継続時間から、運転者が漫然運転であるかを判定し、漫然運転と判定した場合に、運転者に警報を行う装置が存在する（下記特許文献）。
【先行技術文献】
【特許文献】
【０００３】
特開平８−１９２６５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記従来例においては、運転者の会話の継続時間によって漫然運転と判定しているため、運転者の会話への集中度が低い場合にも、運転者の会話への集中度が高い場合にも一律の警告を行うことしかできない。したがって、会話への集中度が高いときには警告に気付きづらく、会話の集中度が低いときには警告を煩わしいと感じる問題がある。【０００５】
この発明は上記した問題点を解決するためになされたものであり、運転者の会話への集中度に応じた適切な警告を行うことが可能な運転支援装置の提供を目的とする。
【課題を解決するための手段】
【０００６】
この発明に係る運転支援装置は、自車両の内部に設けられ、運転者の顔を撮像する撮像装置が所定の間隔で撮像する画像に基づいて運転者の発話間隔を算出する発話間隔算出部と、発話間隔に基づいて、運転者の会話への集中度を判定する会話集中度判定部と、会話への集中度に応じて前記自車両が注意喚起地点に接近したことを示す警告を変更する警告制御部と、
を備える。
【発明の効果】
【０００７】
この発明の運転支援装置は、運転者の会話への集中度に応じた適切な警告が可能となる。
【図面の簡単な説明】
【０００８】
【図１】本実施の形態1に係る運転支援装置を用いた運転支援システムの構成例を示すブロック図である。
【図２】図２Ａ及び図２Ｂは、この発明の実施の形態１に係る運転支援装置のハードウェア構成例を示す図である。
【図３】本実施の形態１に係る運転支援装置の警告制御処理の動作を示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、この発明を実施するための形態について、図を参照して説明する。なお、各図中の同一又は相当する部分には同一の符号を付しており、その重複説明は適宜に簡略化ないし省略する。
【００１０】
実施の形態1
図１は本実施の形態1に係る運転支援装置を備えた運転支援システムの構成例を示すブロック図である。
図１に示すように、運転支援システムは、運転者の顔を撮像する撮像装置１０と、運転者に注意喚起が必要な地点（例えば、渋滞している地点や事故多発地点、車線減少地点）の情報を記憶した注意喚起地点ＤＢ（Ｄａｔａｂａｓｅ）２０と、自車両の位置を取得する自車両位置取得部３０と、撮像装置１０の撮像した画像から運転者の会話への集中度を判定し、注意喚起地点、自車両の位置及び運転者の会話への集中度に基づいて運転者に対して警告を行うか否かを判断する運転支援装置４０と、運転支援装置４０が警告を行うと判定した場合に、運転者に対して警告を行う警告装置５０とを備えている。
【００１１】
撮像装置１０は、自車両の内部の前方（例えば、ダッシュボード、インストルメントパネル）に設けられており、運転者の顔の画像（顔画像）を所定の間隔おきに撮像する。撮像装置１０の一例としては、ＣＣＤ（ｃｈａｒｇｅ−ｃｏｕｐｌｅｄ−ｄｅｖｉｃｅ）や赤外線カメラが挙げられる。
注意喚起地点ＤＢ２０は、書き換え可能な不揮発性の記憶装置（例えば、ハードディスクドライブや、フラッシュメモリ）によって構成されている。この注意喚起地点ＤＢ１０には、例えば、渋滞している地点や事故が多発している地点、車線が減少する地点、路面が凍結している凍結地点等、運転者に注意喚起が必要な地点（注意喚起地点）が記憶される。
【００１２】
自車両位置取得部３０は、例えば、自車両に設けられたＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｇ  Ｓｙｓｔｅｍ）（不図示）から自車両の位置情報を取得する。
警告装置５０は、注意喚起地点ＤＢ２０および自車両位置取得部３０に接続され、自車両が注意喚起地点に対して所定の距離に接近したこと判定した場合には、運転者に対して注意喚起地点に接近していることを示す警告メッセージまたは警告アイコンを提示する。
【００１３】
運転支援装置４０は、運転者の発話間隔を検出する発話間隔検出部４１と、発話間隔に基づいて運転者の会話への集中度を判定する会話集中度判定部４２と、運転者の会話への集中度に応じて自車両が注意喚起地点に接近したことを運転者に示す警告を変更するように警告装置５０を制御する警告制御部４３とを備えている。
【００１４】
発話間隔算出部４１は、撮像装置１０が所定の間隔おきに撮像した運転者の顔の画像を取得し、当該画像に基づいて運転者の口の開閉動作を検出する。更に、発話間隔検出部４１は、運転者の口の開閉動作が停止したことを検出した場合、次に運転者の口の開閉動作が行われるまでの時間（発話間隔）Ｔをカウントする。そして、発話間隔検出部４１は、カウントした発話間隔Ｔを会話集中度判定部４２に出力する。
【００１５】
会話集中度判定部４２は、発話間隔算出部４１から発話間隔Ｔが出力された場合、発話間隔Ｔが運転者の通常の発話間隔Ｔｊよりも短い状態（Ｔ＜Ｔｊ）が予め定められた回数（ｎ回）以上連続しているか否かを判定する。そして、発話間隔Ｔが運転者の通常の発話間隔Ｔｊよりも短い状態（Ｔ＜Ｔｊ）がｎ回以上連続していると判定した場合は、発話間隔Ｔに基づいて運転者の会話への集中度（会話集中度）を算出する。そして、会話集中度判定部４２は、当該会話集中度を警告制御部４３に出力する。
なお、上記した通常発話間隔とは、例えば、現在までの運転者の発話間隔の平均値や運転者が自車両のイグニッションスイッチをＯＮにしてから予め定められた時間の発話間隔の平均値である。
【００１６】
次に、会話集中度の判定方法について説明する。
会話集中度の判定方法は、運転者の発話間隔Ｔが運転者の通常の発話間隔Ｔｊよりも短い状態（Ｔ＜Ｔｊ）がｎ回以上連続している場合、運転者の発話間隔Ｔと通常発話間隔Ｔｊとの差分ΔＴｎを算出する。さらに、予め定められた２つの閾値Ｔ１、Ｔ２（Ｔ１＜Ｔ２）と差分ΔＴｎとを比較し、運転者の会話集中度を３段階に判定する。つまり、ΔＴｎ＜Ｔ１の場合は、運転者の会話集中度はレベル１（軽度不注意状態）であると判定する。Ｔ１≦ΔＴｎ≦Ｔ２の場合は、運転者の会話集中度はレベル２（中度不注意状態）であると判定する。Ｔ２＜ΔＴｎの場合は、運転者の会話集中度はレベル３（重度不注意状態）であると判定する。
なお、上記では会話集中度を３段階に分ける方法について説明したが、これは一例であり、閾値の設定の仕方に応じて任意の段階に分けることが可能である。
【００１７】
警告制御部４３は、会話集中度判定部４２から会話集中度が出力されると、会話集中度に応じて自車両が注意喚起地点に接近していることを示す警告の音量、警告を報知するタイミング、警告の回数及び警告の頻度の内、少なくとも一つを変更するように警告装置５０を制御する。
つまり、運転者は会話の集中度が高いほど警告に気付きづらくなるため、運転者の会話への集中度が高いほど警告の音量を上げる、警告を報知するタイミングを早める、警告の回数を増やす、または、警告の頻度を高くすることで運転者が気付きやすい警告を行う。
【００１８】
なお、運転支援装置４０が自車両の車速を取得する車速取得部（不図示）を更に備える構成とし、車速が予め定められた閾値以上な場合のみ、警告制御４３が警告装置５０の制御を行うようにしてもよい。
【００１９】
次に、運転支援装置４０のハードウェア構成例を説明する。
図２Ａ及び図２Ｂは、運転支援装置４０のハードウェア構成例を示す図である。
運転支援装置４０における発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３の各機能は、処理回路によって実現される。即ち、運転支援装置４０は上記各機能を実現するための処理回路を備える。当該処理回路は、図２Ａに示すように専用のハードウェアである処理回路１００ａであってもよいし、図２Ｂに示すようにメモリ１００ｃに格納されているプログラムを実行するプロセッサ１００ｂであってもよい。
【００２０】
図２Ａに示すように、発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３が専用のハードウェアである場合、処理回路１００ａは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ−ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）、またはこれらを組み合わせたものが該当する。発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３の各部の機能それぞれ処理回路で実現してもよいし、各部の機能をまとめて１つの処理回路で実現してもよい。
【００２１】
図２Ｂに示すように、発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３がプロセッサ１００ｂである場合、各部の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアはプログラムとして記述され、メモリ１００ｃに格納される。プロセッサ１００ｂは、メモリ１００ｃに記憶されたプログラムを読み出して実行することにより、発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３の各機能を実現する。即ち、発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３は、プロセッサ１００ｂにより実行されるときに、後述する図3に示す各ステップが結果的に実行されることになるプログラムを格納するためのメモリ１００ｃを備える。また、これらのプログラムは、発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３の手順または方法をコンピュータに実行させるものであるともいえる。
【００２２】
ここで、プロセッサ１００ｂとは、例えば、ＣＰＵ（Central Processing Unit）、処理装置、演算装置、プロセッサ、マイクロプロセッサ、マイクロコンピュータ、またはＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）などのことである。メモリ１００ｃは、例えば、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  ＥＰＲＯＭ）等の不揮発性または揮発性の半導体メモリであってもよいし、ハードディスク、フレキシブルディスク等の磁気ディスクであってもよいし、ミニディスク、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）等の光ディスクであってもよい。
【００２３】
なお、発話間隔算出部４１、会話集中度判定部４２及び警告制御部４３の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。このように、運転支援装置４０における処理回路１００ａは、ハードウェア、ソフトウェア、ファームウェア、または、これらの組み合わせによって、上述の各機能を実現することができる。
【００２４】
次に、運転支援装置４０における警告制御の動作について図３を用いて説明する。
図３は、実施の形態１に係る警告制御の動作を示すフローチャートである。
【００２５】
発話間隔算出部４１は、撮像装置１０が所定の間隔で撮像する運転者の顔の画像（顔画像）を取得し（ステップＳＴ１）、取得した顔画像から運転者の発話間隔Ｔを算出する（ステップＳＴ２）。会話集中度判定部４２は、ステップＳＴ２で算出した発話間隔Ｔが通常発話間隔Ｔｊよりも短い状態（Ｔ＜Ｔｊ）が予め定められた回数（ｎ回）以上連続しているかを判定し（ステップＳＴ３）、発話間隔Ｔが通常発話間隔Ｔｊよりも短い状態（Ｔ＜Ｔｊ）がｎ回以上連続していない場合（ステップＳＴ３；ＮＯ）、ステップＳＴ１の処理に戻る。一方、発話間隔Ｔが通常発話間隔Ｔｊよりも短い状態（Ｔ＜Ｔｊ）がｎ回以上連続する場合（ステップＳＴ３；ＹＥＳ）、発話間隔Ｔに基づいて運転者の会話への集中度（会話集中度）を判定する（ステップＳＴ４）。警告制御部４３は、ステップＳＴ４で判定した会話集中度に応じた警告を行うように警告装置５０を制御する（ステップＳＴ５）。そして、ステップＳＴ１の処理に戻る。
【００２６】
以上のように、実施の形態１によれば、自車両の内部に設けられた運転者の顔を撮像する撮像装置１０が所定の間隔で撮像する画像に基づいて運転者の発話間隔Ｔを算出する発話間隔算出部４１と、運転者の発話間隔Ｔに基づいて運転者の会話への集中度を判定する会話集中度判定部４２と、会話への集中度に応じて自車両が注意喚起地点に接近したことを示す警告を変更する警告制御部４３と、を備える構成としたので、運転者の会話への集中度に応じた警告を行うことが可能となり、運転者の会話への集中度に応じた適切な警告が可能となる。これによって、運転者が警告を聞き逃すことを抑制することができる。
【符号の説明】
【００２７】
１０  撮像装置、２０  注意喚起地点ＤＢ、３０  自車両位置取得部、４０  運転支援装置、４１  発話間隔算出部、４２  会話集中度判定部、４３  警告制御部、５０  警告装置、１００ａ  処理回路、１００ｂ  プロセッサ、１００ｃ  メモリ
【図１】
2019171452.tif 000003
【図２】
2019171452.tif 000004
【図３】
2019171452.tif 000005
【国際調査報告】
2019171452.tif 000006
2019171452.tif 000007
2019171452.tif 000008
2019171452.tif 000009