(57)【特許請求の範囲】
【請求項１】
駐車スペースが設けられる駐車場を利用する車両で利用されるナビゲーション装置と、前記車両の運転を支援する運転支援情報を前記ナビゲーション装置に配信する運転支援装置と、を備え、
前記ナビゲーション装置は、
前記車両に搭載される車載カメラから得られる画像を前記運転支援装置に送信し、前記運転支援装置から前記駐車場を利用する前記車両で利用される前記ナビゲーション装置に配信される前記運転支援情報を受信し、
前記車両に搭載されない前記運転支援装置は、
ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースと、
前記ナビゲーション装置から受信した前記画像に含まれる前記ランドマークを、前記駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するランドマーク認識部と、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定する在車判定部と、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応し、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報管理部と、を備え、
前記運転支援情報管理部は、
前記ランドマークが設置される前記所定位置より前記車両の位置を判定する位置判定部と、
前記運転支援情報を作成する運転支援情報作成部と、
前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報配信部と、を備え、
前記ランドマーク認識部は、
前記駐車場が立体駐車場である場合に、前記立体駐車場の各フロアの入口に表示される前記ランドマークに基づいてフロア階数を判定するフロア階数判定部と、
前記フロア毎に分割されたブロックに設置される前記ランドマークに基づいて前記ブロック毎の表示内容を判定するブロック判定部と、を有し、
前記位置判定部は、前記フロア階数又は前記表示内容に基づいて、前記車両の位置を判定し、
前記運転支援情報作成部は、前記駐車場の駐車状況をフロア毎に示すフロアマップと、前記フロア内の前記ブロック毎に駐車状況を示すブロックマップとを前記駐車場地図として作成し、
前記運転支援情報配信部は、前記車両が前記フロアに進入する場合に前記フロアマップを配信し、前記車両が前記フロア内を走行する場合に前記ブロックマップを配信する
運転支援システム。
【請求項２】
前記画像、及び前記ナビゲーション装置から受信する車両情報に基づいて、他の前記車両が走行中、駐車中又は出庫予定のいずれかの車両状態を判定する車両状態判定部を備え、
前記運転支援情報作成部は、前記車両の前記車両状態が示される前記駐車場地図を作成する
請求項１に記載の運転支援システム。
【請求項３】
前記在車判定部は、前記画像の変化に基づいて前記駐車スペースを求め、前記駐車スペースに設定した判定領域の変化に応じて前記駐車スペースの空車又は在車を判定する
請求項１又は２に記載の運転支援システム。
【請求項４】
前記運転支援情報管理部は前記車両の近くにいる歩行者、又は前記車両に接近する他の車両の存在を警告する警告情報を前記運転支援情報として作成する
請求項１〜３のいずれか一項に記載の運転支援システム。
【請求項５】
駐車スペースが設けられる駐車場を利用する車両で利用されるナビゲーション装置と、前記車両の運転を支援する運転支援情報を前記ナビゲーション装置に配信する運転支援装置と、を備え、
前記ナビゲーション装置は、
前記車両に搭載される車載カメラから得られる画像を前記運転支援装置に送信し、前記運転支援装置から前記駐車場を利用する前記車両で利用される前記ナビゲーション装置に配信される前記運転支援情報を受信し、
前記車両に搭載されない前記運転支援装置は、
ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースと、
前記ナビゲーション装置から受信した前記画像に含まれる前記ランドマークを、前記駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するランドマーク認識部と、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定する在車判定部と、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応し、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報管理部と、を備え、
前記運転支援情報管理部は、
前記ランドマークが設置される前記所定位置より前記車両の位置を判定する位置判定部と、
前記運転支援情報を作成する運転支援情報作成部と、
前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報配信部と、を備え、
前記ランドマーク認識部は、前記ランドマークの時間経過における大きさの変化により前記車両の走行又は駐車を判定する走行判定部を有し、
前記在車判定部は、前記走行判定部によって前記車両が走行していると判定された場合に、前記車両の側面方向を撮影可能に設置された前記車載カメラが撮影した前記画像に基づいて前記駐車スペースの在車又は空車を判定し、前記走行判定部によって前記車両が駐車していると判定された場合に前記車両の前方を撮影可能に設置された前記車載カメラが撮影した前記画像に基づいて前記駐車スペースの在車又は空車を判定する
運転支援システム。
【請求項６】
駐車スペースが設けられる駐車場を利用する車両で利用されるナビゲーション装置と、前記車両の運転を支援する運転支援情報を前記ナビゲーション装置に配信する運転支援装置と、前記車両の車両識別情報に関連づけられた端末識別情報を有する携帯端末と、を備え、
前記ナビゲーション装置は、
前記車両に搭載される車載カメラから得られる画像を前記運転支援装置に送信し、前記運転支援装置から前記駐車場を利用する前記車両で利用される前記ナビゲーション装置に配信される前記運転支援情報を受信し、
前記車両に搭載されない前記運転支援装置は、
ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースと、
前記ナビゲーション装置から受信した前記画像に含まれる前記ランドマークを、前記駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するランドマーク認識部と、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定する在車判定部と、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応し、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報管理部と、を備え、
前記運転支援情報管理部は、
前記ランドマークが設置される前記所定位置より前記車両の位置を判定する位置判定部と、
前記運転支援情報を作成する運転支援情報作成部と、
前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報配信部と、を備え、
前記携帯端末は、前記携帯端末が有する端末カメラから得られる端末画像と、前記携帯端末の端末識別情報とを前記運転支援装置に送信し、前記運転支援装置から前記運転支援情報を受信し、
前記ランドマーク認識部は、前記端末画像に含まれる前記ランドマークを認識し、
前記運転支援情報管理部は、前記端末識別情報に関連づけられた前記車両から前記携帯端末の現在位置までの経路を反映した前記駐車場地図を前記運転支援情報として作成し、前記携帯端末に前記運転支援情報を配信する
運転支援システム。
【請求項７】
車両に搭載されない運転支援装置であって、
ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースと、
駐車スペースが設けられる駐車場を利用する前記車両に搭載される車載カメラから得られる画像を、前記車両で利用されるナビゲーション装置から受信し、前記画像に含まれる前記ランドマークを、前記駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するランドマーク認識部と、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定する在車判定部と、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応し、前記駐車スペースが設けられる前記駐車場を利用する前記車両の運転を支援する運転支援情報であって、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報管理部と、を備え、
前記運転支援情報管理部は、
前記ランドマークが設置される前記所定位置より前記車両の位置を判定する位置判定部と、
前記運転支援情報を作成する運転支援情報作成部と、
前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報配信部と、を備え、
前記ランドマーク認識部は、
前記駐車場が立体駐車場である場合に、前記立体駐車場の各フロアの入口に表示される前記ランドマークに基づいてフロア階数を判定するフロア階数判定部と、
前記フロア毎に分割されたブロックに設置される前記ランドマークに基づいて前記ブロック毎の表示内容を判定するブロック判定部と、を有し、
前記位置判定部は、前記フロア階数又は前記表示内容に基づいて、前記車両の位置を判定し、
前記運転支援情報作成部は、前記駐車場の駐車状況をフロア毎に示すフロアマップと、前記フロア内の前記ブロック毎に駐車状況を示すブロックマップとを前記駐車場地図として作成し、
前記運転支援情報配信部は、前記車両が前記フロアに進入する場合に前記フロアマップを配信し、前記車両が前記フロア内を走行する場合に前記ブロックマップを配信する
運転支援装置。
【請求項８】
車両に搭載されない運転支援装置であって、
ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースと、
駐車スペースが設けられる駐車場を利用する前記車両に搭載される車載カメラから得られる画像を、前記車両で利用されるナビゲーション装置から受信し、前記画像に含まれる前記ランドマークを、前記駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するランドマーク認識部と、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定する在車判定部と、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応し、前記駐車スペースが設けられる前記駐車場を利用する前記車両の運転を支援する運転支援情報であって、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報管理部と、を備え、
前記運転支援情報管理部は、
前記ランドマークが設置される前記所定位置より前記車両の位置を判定する位置判定部と、
前記運転支援情報を作成する運転支援情報作成部と、
前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報配信部と、を備え、
前記ランドマーク認識部は、前記ランドマークの時間経過における大きさの変化により前記車両の走行又は駐車を判定する走行判定部を有し、
前記在車判定部は、前記走行判定部によって前記車両が走行していると判定された場合に、前記車両の側面方向を撮影可能に設置された前記車載カメラが撮影した前記画像に基づいて前記駐車スペースの在車又は空車を判定し、前記走行判定部によって前記車両が駐車していると判定された場合に前記車両の前方を撮影可能に設置された前記車載カメラが撮影した前記画像に基づいて前記駐車スペースの在車又は空車を判定する
運転支援装置。
【請求項９】
車両に搭載されない運転支援装置であって、
ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースと、
駐車スペースが設けられる駐車場を利用する前記車両に搭載される車載カメラから得られる画像を、前記車両で利用されるナビゲーション装置から受信し、前記画像に含まれる前記ランドマークを、前記駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するランドマーク認識部と、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定する在車判定部と、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応し、前記駐車スペースが設けられる前記駐車場を利用する前記車両の運転を支援する運転支援情報であって、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報管理部と、を備え、
前記運転支援情報管理部は、
前記ランドマークが設置される前記所定位置より前記車両の位置を判定する位置判定部と、
前記運転支援情報を作成する運転支援情報作成部と、
前記運転支援情報を前記ナビゲーション装置に配信する運転支援情報配信部と、を備え、
前記車両の車両識別情報に関連づけられた端末識別情報を有する携帯端末が有する端末カメラから得られる端末画像と、前記携帯端末の端末識別情報とを前記携帯端末から受信し、
前記ランドマーク認識部は、前記端末画像に含まれる前記ランドマークを認識し、
前記運転支援情報管理部は、前記端末識別情報に関連づけられた前記車両から前記携帯端末の現在位置までの経路を反映した前記駐車場地図を前記運転支援情報として作成し、前記携帯端末に前記運転支援情報を配信する
運転支援装置。
【請求項１０】
車両で利用されるナビゲーション装置と、駐車スペースが設けられる駐車場を利用する前記車両の運転を支援する運転支援情報を前記ナビゲーション装置に配信する、前記車両に搭載されない運転支援装置と、を備える運転支援システムが行う運転支援方法であって、
前記ナビゲーション装置が、前記車両に搭載される車載カメラから得られる画像を前記運転支援装置に送信するステップと、
前記運転支援装置が、前記ナビゲーション装置から受信した前記画像に含まれるランドマークを、前記ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するステップと、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定するステップと、
前記駐車場が立体駐車場である場合に、前記立体駐車場の各フロアの入口に表示される前記ランドマークに基づいてフロア階数を判定するステップと、
前記フロア毎に分割されたブロックに設置される前記ランドマークに基づいて前記ブロック毎の表示内容を判定するステップと、
前記フロア階数又は前記表示内容に基づいて、前記車両の位置を判定するステップと、
前記車両が前記フロアに進入する場合に配信される、前記駐車場の駐車状況をフロア毎に示すフロアマップと、前記車両が前記フロア内を走行する場合に配信される、前記フロア内の前記ブロック毎に駐車状況を示すブロックマップとを駐車場地図として作成するステップと、
前記運転支援装置が、前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応する前記運転支援情報であって、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される前記駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信するステップと、
前記ナビゲーション装置が、前記運転支援装置から前記運転支援情報を受信するステップと、を含む
運転支援方法。
【請求項１１】
車両で利用されるナビゲーション装置と、駐車スペースが設けられる駐車場を利用する前記車両の運転を支援する運転支援情報を前記ナビゲーション装置に配信する、前記車両に搭載されない運転支援装置と、を備える運転支援システムが行う運転支援方法であって、
前記ナビゲーション装置が、前記車両に搭載される車載カメラから得られる画像を前記運転支援装置に送信するステップと、
前記運転支援装置が、前記ナビゲーション装置から受信した前記画像に含まれるランドマークを、前記ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するステップと、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定するステップと、
前記ランドマークの時間経過における大きさの変化により前記車両の走行又は駐車を判定するステップと、
前記車両が走行していると判定された場合に、前記車両の側面方向を撮影可能に設置された前記車載カメラが撮影した前記画像に基づいて前記駐車スペースの在車又は空車を判定し、前記車両が駐車していると判定された場合に前記車両の前方を撮影可能に設置された前記車載カメラが撮影した前記画像に基づいて前記駐車スペースの在車又は空車を判定するステップと、
前記運転支援装置が、前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応する前記運転支援情報であって、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示される駐車場地図を含む前記運転支援情報を作成し、前記運転支援情報を前記ナビゲーション装置に配信するステップと、
前記ナビゲーション装置が、前記運転支援装置から前記運転支援情報を受信するステップと、を含む
運転支援方法。
【請求項１２】
車両で利用されるナビゲーション装置と、駐車スペースが設けられる駐車場を利用する前記車両の運転を支援する運転支援情報を前記ナビゲーション装置に配信する、前記車両に搭載されない運転支援装置と、前記車両の車両識別情報に関連づけられた端末識別情報を有する携帯端末とを備える運転支援システムが行う運転支援方法であって、
前記ナビゲーション装置が、前記車両に搭載される車載カメラから得られる画像を前記運転支援装置に送信するステップと、
前記運転支援装置が、前記ナビゲーション装置から受信した前記画像に含まれるランドマークを、前記ランドマークの設置位置と、前記ランドマークの登録画像とを管理する駐車場画像データベースから読み出した前記ランドマークの登録画像と照合して、前記ランドマークの設置位置を認識するステップと、
前記画像に含まれる前記駐車スペース毎に他の前記車両の在車又は空車を判定するステップと、
前記携帯端末が有する端末カメラから得られる端末画像と、前記携帯端末の端末識別情報とを前記携帯端末から受信するステップと、
前記端末画像に含まれる前記ランドマークを認識するステップと、
前記ランドマークが設置される所定位置に基づいて判定された前記車両の位置に対応する前記運転支援情報であって、前記車両が利用する駐車場に設けられる前記駐車スペースの在車又は空車が示され、前記端末識別情報に関連づけられた前記車両から前記携帯端末の現在位置までの経路を反映した駐車場地図を含む前記運転支援情報を作成し、前記携帯端末に前記運転支援情報を配信するステップと、
前記携帯端末が、前記運転支援装置から前記運転支援情報を受信するステップと、を含む
運転支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば、自動車等の車両を運転する運転者を支援する運転支援システム、運転支援装置及び運転支援方法に関する。
【背景技術】
【０００２】
従来、車両等に搭載され、運転者に経路案内を行うナビゲーション装置が知られている。このナビゲーション装置では、上空にある複数のＧＰＳ（Global Positioning System）衛星が衛星電波に載せて送信したＧＰＳ信号を受信して現在位置を測位し、表示装置に表示された地図に車両の現在位置を重畳して表示することが可能である。そして、近年では、特許文献１に開示されたような技術が検討されていた。
【０００３】
この特許文献１には、「情報提供装置の利用者は各地点における付加情報を入手し、車両が生成した画像からセンターサーバが走りやすさや駐車場の空き状況を判定することにより動的に変わる情報を利用者に提供する。」と記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１４５５４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、ナビゲーション装置がＧＰＳ信号を受信できないような環境では、ナビゲーション装置が車両の正確な位置を把握することができないため、目的地の周辺の状況を案内できないことがあった。また、ナビゲーション装置は目的地までの経路を案内するに過ぎず、経路に付随する有用な情報が運転者に提供されていなかった。
【０００６】
特許文献１に開示された技術においても、ＧＰＳ信号を受信できない環境で経路を案内することは考慮されておらず、目的地の周辺における詳しい情報を運転者が得ることはできなかった。
【０００７】
本発明はこのような状況に鑑みて成されたものであり、例えば、運転者に対し車両の運転を支援する情報を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る車両で利用されるナビゲーション装置は、車両に搭載される車載カメラから得られる画像を運転支援装置に送信し、運転支援装置から駐車スペースが設けられる駐車場を利用する車両の運転を支援する運転支援情報を受信する。
車両に搭載されない運転支援装置は、ナビゲーション装置から受信した画像に含まれるランドマークを、ランドマークの設置位置と、ランドマークの登録画像とを管理する駐車場画像データベースから読み出したランドマークの登録画像と照合して、ランドマークの設置位置を認識し、画像に含まれる駐車スペース毎に他の車両の在車又は空車を判定し、駐車場が立体駐車場である場合に、立体駐車場の各フロアの入口に表示されるランドマークに基づいてフロア階数を判定し、フロア毎に分割されたブロックに設置されるランドマークに基づいてブロック毎の表示内容を判定し、フロア階数又は表示内容に基づいて、車両の位置を判定し、車両がフロアに進入する場合に配信される、駐車場の駐車状況をフロア毎に示すフロアマップと、車両がフロア内を走行する場合に配信される、フロア内のブロック毎に駐車状況を示すブロックマップとを駐車場地図として作成し、運転支援装置が、ランドマークが設置される所定位置に基づいて判定された車両の位置に対応する運転支援情報であって、車両が利用する駐車場に設けられる駐車スペースの在車又は空車が示される駐車場地図を含む運転支援情報を作成し、運転支援情報をナビゲーション装置に配信する。
また、本発明に係る車両で利用されるナビゲーション装置は、車両に搭載される車載カメラから得られる画像を運転支援装置に送信し、運転支援装置から駐車スペースが設けられる駐車場を利用する車両の運転を支援する運転支援情報を受信する。
車両に搭載されない運転支援装置は、ナビゲーション装置から受信した画像に含まれるランドマークを、ランドマークの設置位置と、ランドマークの登録画像とを管理する駐車場画像データベースから読み出したランドマークの登録画像と照合して、ランドマークの設置位置を認識する。画像に含まれる駐車スペース毎に他の車両の在車又は空車を判定し、ランドマークの時間経過における大きさの変化により車両の走行又は駐車を判定し、車両が走行していると判定された場合に、車両の側面方向を撮影可能に設置された車載カメラが撮影した画像に基づいて駐車スペースの在車又は空車を判定し、車両が駐車していると判定された場合に車両の前方を撮影可能に設置された車載カメラが撮影した画像に基づいて駐車スペースの在車又は空車を判定し、運転支援装置が、ランドマークが設置される所定位置に基づいて判定された車両の位置に対応する運転支援情報であって、車両が利用する駐車場に設けられる駐車スペースの在車又は空車が示される駐車場地図を含む運転支援情報を作成し、運転支援情報をナビゲーション装置に配信する。
また、本発明に係る車両で利用されるナビゲーション装置は、車両に搭載される車載カメラから得られる画像を運転支援装置に送信し、運転支援装置から駐車スペースが設けられる駐車場を利用する車両の運転を支援する運転支援情報を受信する。
車両に搭載されない運転支援装置は、ナビゲーション装置から受信した画像に含まれるランドマークを、ランドマークの設置位置と、ランドマークの登録画像とを管理する駐車場画像データベースから読み出したランドマークの登録画像と照合して、ランドマークの設置位置を認識する。画像に含まれる駐車スペース毎に他の車両の在車又は空車を判定する。そして、携帯端末が有する端末カメラから得られる端末画像と、携帯端末の端末識別情報とを携帯端末から受信し、端末画像に含まれるランドマークを認識し、ランドマークが設置される所定位置に基づいて判定された車両の位置に対応する運転支援情報であって、車両が利用する駐車場に設けられる駐車スペースの在車又は空車が示され、端末識別情報に関連づけられた車両から携帯端末の現在位置までの経路を反映した駐車場地図を運転支援情報として作成し、携帯端末に運転支援情報を配信し、携帯端末が、運転支援装置から運転支援情報を受信する。
【発明の効果】
【０００９】
本発明によれば、ランドマークに基づいて判定された車両の位置に対応する運転支援情報により、運転者の運転を支援することができる。
上記した以外の課題、構成及び効果は、以下の実施の形態例の説明により明らかにされる。
【図面の簡単な説明】
【００１０】
【図１】本発明の第１の実施の形態例に係る運転支援システムの内部構成例を示すブロック図である。
【図２】本発明の第１の実施の形態例に係る計算機のハードウェア構成例を示すブロック図である。
【図３】本発明の第１の実施の形態例に係る駐車位置情報管理テーブルの例を示す構成図である。
【図４】本発明の第１の実施の形態例に係るランドマーク位置情報管理テーブルの例を示す構成図である。
【図５】本発明の第１の実施の形態例に係る施設出口付近のランドマーク登録画像の例を示す説明図である。
【図６】本発明の第１の実施の形態例に係る駐車場内のランドマーク登録画像の例を示す説明図である。
【図７】本発明の第１の実施の形態例に係るフロア入口のランドマーク登録画像の例を示す説明図である。
【図８】本発明の第１の実施の形態例に係る運転支援システムが行う処理の全体の流れを示すフローチャートである。
【図９】本発明の第１の実施の形態例に係る駐車車両に搭載されたフロントカメラの撮影範囲の例を示す説明図である。
【図１０】本発明の第１の実施の形態例に係る駐車車両のフロントカメラが撮影する画像の例を示す説明図である。
【図１１】本発明の第１の実施の形態例に係る駐車場内における走行車両の例を示す説明図である。
【図１２】本発明の第１の実施の形態例に係る走行車両のサイドカメラが撮影した画像に基づいて空きスペースを検出する例を示す説明図である。
【図１３】本発明の第１の実施の形態例に係る在車判定部が行う空きスペースの検出処理の例を示すフローチャートである。
【図１４】本発明の第１の実施の形態例に係るランダムフォレストの原理を示す説明図である。
【図１５】図１３のステップＳ１６に示す空車判定処理に用いられる学習データの例を示す説明図である。
【図１６】図１３のステップＳ１７に示す在車判定処理に用いられる学習データの例を示す説明図である。
【図１７】本発明の第１の実施の形態例に係る車両状態判定部３１が行う出庫予定車両の検出処理の例を示すフローチャートである。
【図１８】本発明の第１の実施の形態例に係るフロアマップの例を示す説明図である。
【図１９】本発明の第１の実施の形態例に係るブロックマップの例を示す説明図である。
【図２０】本発明の第１の実施の形態例に係る警告対象の検出例を示す説明図である。
【図２１】本発明の第２の実施の形態例に係る運転支援システムの内部構成例を示すブロック図である。
【図２２】本発明の第２の実施の形態例に係る駐車位置案内処理の流れを示すフローチャートである。
【図２３】本発明の第２の実施の形態例に係る駐車位置案内の例を示す説明図である。
【発明を実施するための形態】
【００１１】
以下、本発明の第１の実施の形態例に係る運転支援装置について説明する。本明細書及び図面において、実質的に同一の機能又は構成を有する構成要素については、同一の符号を付することにより重複する説明を省略する。
【００１２】
図１は、運転支援システム１の内部構成例を示すブロック図である。
運転支援システム１は、駐車スペースが設けられる駐車場を利用する複数の車両２と、車両２の運転を支援する運転支援情報を車両２に配信する運転支援装置３とを備えている。運転支援装置３はセンターサーバとして用いられ、クライアントとして用いられる車両２との間で、不図示の無線ネットワークを介して互いにデータを送受信することが可能である。
【００１３】
以下の説明では、１台の車両２が駐車可能な大きさの領域を駐車スペースと呼ぶ。駐車スペースは、駐車場内に複数個設けられており、白線、車止め等によって各駐車スペースが仕切られている。そして、車両２が駐車している駐車スペースの状態を「在車」と呼び、車両２が駐車していない駐車スペースの状態を「空車」と呼び、空車である駐車スペースを「空きスペース」と呼ぶ。また、車両２を駐車スペースに停めることを「入庫」と呼び、車両２が駐車スペースから出ることを「出庫」と呼ぶ。
【００１４】
車両２は、車載カメラ２１、ナビゲーション装置２２を備える。車両２は、車載カメラ２１から得られる画像を運転支援装置３に送信し、運転支援装置３から運転支援情報（例えば、駐車場地図、警告情報）を受信する。
【００１５】
車載カメラ２１は、車両２のフロントガラス付近に搭載され、車両２の進行方向を撮影する。また、車載カメラ２１は、車両２のドアミラー付近に搭載されることで、車両２の側面方向を撮影することもできる。車両２の進行方向を撮影する車載カメラ２１は、フロントカメラ２１Ｆと呼ぶ（後述する図９を参照。）。また、車両２の側面方向撮影する車載カメラ２１は、サイドカメラ２１Ｌ、２１Ｒと呼ぶ（後述する図１１、図１２を参照。）。この車載カメラ２１は、車両２が搭載する不図示のドライブレコーダに画像（動画像）を記録している。
【００１６】
ナビゲーション装置２２は、画像送信部２３、車両情報送信部２４、運転支援情報受信部２５、表示部２６を備える。
画像送信部２３は、車載カメラ２１から所定のタイミング（例えば、数秒毎）で受信した画像（静止画像）、又はドライブレコーダから所定のタイミングで読み出した画像を運転支援装置３に送信する。
【００１７】
車両情報送信部２４は、例えば、車両２に搭載される不図示のエンジンのオン又はオフの情報や、エンジンの起動時刻又は停止時刻といった車両情報を運転支援装置３に送信する。
運転支援情報受信部２５は、運転支援装置３から運転支援情報を受信する。
表示部２６は、運転者に運転支援情報を提示することが可能である。表示部２６に表示された運転支援情報により、車両２の運転者は駐車場の空きスペースまで車両２を運転したり、車両２の周囲で発生する可能性のある警告対象を知ったりすることができる。
【００１８】
運転支援装置３は、駐車場画像データベースＤ１、車両情報データベースＤ２、駐車場地図データベースＤ３、車両状態判定部３１、ランドマーク認識部３２、在車判定部３３、運転支援情報管理部３４を備える。
【００１９】
駐車場画像データベースＤ１は、車両２の駐車位置と、ランドマークの設置位置とを管理するものであり、車両２の画像送信部２３から送信された画像を蓄積する。この駐車場画像データベースＤ１は、駐車位置情報管理テーブルＴ１（第１テーブルの一例）と、ランドマーク位置情報管理テーブルＴ２（第２テーブルの一例）を備える。
駐車位置情報管理テーブルＴ１は、駐車場に駐車中の車両２の情報を管理する。
ランドマーク位置情報管理テーブルＴ２は、駐車場内に設置され、駐車場周辺の案内表示を目的とした標識、案内板等を含むランドマークが設置された位置やランドマークの種別を含む画像を管理する。各テーブルの詳細な内容については後述する図３と図４に示す。
【００２０】
車両情報データベースＤ２は、車両２の車両情報送信部２４から送信された車両情報を蓄積する。
駐車場地図データベースＤ３は、駐車場地図をフロアやブロック毎に予め蓄積している。この駐車場地図には、例えば、軽車両専用のエリアや身障者用の優先エリア等の情報が含まれている。
【００２１】
車両状態判定部３１は、駐車場画像データベースＤ１から読み出した画像と、車両情報データベースＤ２から読み出した車両情報とに基づいて、駐車スペースにおける車両状態を判定する。この車両状態には、車両２が駐車中であるか、車両２が走行中であるか、駐車スペースから車両２が出ようとする出庫予定であるかといった３種類の状態のいずれかが含まれる。なお、駐車場画像データベースＤ１に格納される画像に音声が付加されていれば、車両状態判定部３１は、音声の変化（例えば、エンジン音）に基づいて、車両２の状態を判定することもできる。
【００２２】
ランドマーク認識部３２は、車両２から受信した画像に含まれるランドマークを認識する。そして、ランドマーク認識部３２は、車両２から受信した画像に含まれるランドマークを、ランドマーク位置情報管理テーブルＴ２から読み出したランドマーク登録画像と照合して、ランドマークの設置位置を認識する。そして、ランドマーク認識部３２は、ランドマークの認識結果を、車両２から受信した画像毎に駐車位置情報管理テーブルＴ１に書込む。このランドマーク認識部３２は、走行判定部３２ａ、フロア階数判定部３２ｂ、ブロック内表示判定部３２ｃを備える。
【００２３】
走行判定部３２ａは、ランドマーク認識部３２によって認識されるランドマーク画像の時間経過における大きさの変化により、車両２の走行又は駐車を判定することができる。例えば、走行判定部３２ａは、ランドマーク画像が時間経過と共に拡大していれば車両２が走行中であると判定し、ランドマーク画像が時間経過しても大きさが変わらなければ、車両２が駐車していると判定することができる。
【００２４】
フロア階数判定部３２ｂは、駐車場が立体駐車場である場合に、立体駐車場の各フロアの入口に表示されるランドマークに基づいてフロア階数を判定する。
ブロック内表示判定部３２ｃは、フロアが分割されたブロック毎に設置されるランドマークに基づいてブロックの表示内容を判定する。
【００２５】
在車判定部３３は、車載カメラ２１が撮影した画像に含まれる駐車スペース毎に他の車両２の在車又は空車を判定する。このとき、在車判定部３３は、画像の変化に基づいて駐車スペースを求め、駐車スペースに設定した判定領域の変化に応じて駐車スペースの空車又は在車を判定する。そして、在車判定部３３は、駐車スペース毎に判定した在車又は空車の判定結果、駐車時間等の情報を駐車場画像データベースＤ１に書き込む。
【００２６】
運転支援情報管理部３４は、ランドマークが設置される所定位置に基づいて判定された車両２の位置に対応する運転支援情報を車両２に配信する。このとき、運転支援情報管理部３４は、駐車場を利用する車両２の駐車状態情報と駐車位置情報に基づいて、駐車スペースの在車又は空車が示される駐車場地図を運転支援情報として作成し、走行中の車両２に駐車場地図を配信する。ここで、駐車状態情報とは、空きスペースに車両２が駐車中又は出庫予定のいずれかを示す情報である。駐車位置情報とは、駐車状態情報によって特定される車両２の駐車位置を示す情報である。この運転支援情報管理部３４は、位置判定部３４ａ、運転支援情報作成部３４ｂ、運転支援情報配信部３４ｃを備える。
【００２７】
位置判定部３４ａは、ランドマークが設置される所定位置より車両２の位置を判定する。このとき、位置判定部３４ａは、車両状態、駐車スペースの在車又は空車の判定結果、ランドマーク（フロア階数又は表示内容）に基づいて、駐車場内における車両２の駐車位置又は走行位置を判定している。
【００２８】
運転支援情報作成部３４ｂは、運転支援情報として、運転者に示される駐車場地図を作成する。この駐車場地図には、駐車場地図データベースＤ３から読み出した駐車場地図に基づいて作成される、駐車場の駐車状況をフロア毎に示すフロアマップ（後述する図１８を参照。）、フロア内のブロック毎に駐車状況を示すブロックマップ（後述する図１９を参照。）が含まれる。また、運転支援情報作成部３４ｂは、車両２の車両状態が示される駐車場地図（後述する図１９を参照。）を作成する。駐車場地図には、駐車状態情報の他に、例えば、身障者用駐車スペース、軽車両専用スペース、駐車回数が多く人気のあるスペース、見通しが悪く出庫しにくいスペース、歩行者の飛出しが多い地点等の情報も含まれる。また、駐車場地図には、車両２の近くにいる歩行者、又は車両２に接近する他の車両２の存在を運転者に警告する警告情報が含まれる場合もある。
【００２９】
この運転支援情報作成部３４ｂは、フロアマップ作成部３４ｂ１とブロックマップ作成部３４ｂ２を備える。
フロアマップ作成部３４ｂ１は、駐車場地図データベースＤ３から読み出したフロア毎の駐車場地図に、例えば、在車又は空車の情報を反映したフロアマップを作成する。
ブロックマップ作成部３４ｂ２は、フロア内が特定のブロックで仕切られている場合に、駐車場地図データベースＤ３から読み出したブロック毎の駐車場地図に、例えば、警告情報等を反映したブロックマップを作成する。
【００３０】
運転支援情報配信部３４ｃは、運転支援情報作成部３４ｂによって作成された運転支援情報を車両２に配信する。この運転支援情報には、上述したフロアマップ、ブロックマップ等の駐車場地図が含まれる。
【００３１】
＜計算機のハードウェア構成例＞
次に、運転支援システム１の各装置を構成する計算機１０のハードウェア構成を説明する。
図２は、計算機１０のハードウェア構成例を示すブロック図である。
【００３２】
計算機１０は、いわゆるコンピュータとして用いられるハードウェアであり、車両２、運転支援装置３にそれぞれ設けられており、本実施の形態例に係る各機能を実現することが可能である。この計算機１０は、バス１４にそれぞれ接続されたＣＰＵ（Central Processing Unit：中央処理装置）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３を備える。さらに、計算機１０は、表示部１５、操作部１６、不揮発性ストレージ１７、ネットワークインタフェース１８とを備える。
【００３３】
ＣＰＵ１１は、本実施の形態例に係る各機能を実現するソフトウェアのプログラムコードをＲＯＭ１２から読み出して実行する。ＲＡＭ１３には、演算処理の途中で発生した変数やパラメータ等が一時的に書き込まれる。表示部１５は、例えば、液晶ディスプレイモニタであり、計算機１０で行われる処理の結果等を表示する。運転支援装置３が備える操作部１６には、例えば、キーボード、マウス等が用いられ、これらを用いて運転支援装置３の管理者が所定の操作入力、指示を行うことが可能である。一方、車両２が備える操作部１６には、例えば、表示部１５と重ね合わせたタッチパネルディスプレイが用いられ、運転者がディスプレイ面をタッチすることにより操作入力を行うことが可能である。このようなタッチパネルディスプレイが、車両２の表示部２６に用いられる。
【００３４】
不揮発性ストレージ１７としては、例えば、ＨＤＤ（Hard disk drive）、ＳＳＤ（Solid State Drive）、フレキシブルディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード等が用いられる。この不揮発性ストレージ１７には、ＯＳ（Operating System）、各種のパラメータの他に、計算機１０を機能させるためのプログラムが記録されている。運転支援装置３には、運転支援装置３の駐車場画像データベースＤ１、車両情報データベースＤ２、駐車場地図データベースＤ３を構築するために不揮発性ストレージ１７が用いられる。車両２には、車載カメラ２１によって撮影された画像、運転支援装置３から受信した運転支援情報等を記録するために不揮発性ストレージ１７が用いられる。
【００３５】
ネットワークインタフェース１８には、例えば、ＮＩＣ（Network Interface Card）等が用いられ、端子が接続されたＬＡＮ（Local Area Network）、無線ネットワーク等を介して各種のデータを送受信することが可能である。ネットワークインタフェース１８は、例えば、車両２の画像送信部２３、車両情報送信部２４、運転支援情報受信部２５として用いられる他、運転支援装置３が車両２と通信を行うための不図示の通信部として用いられる。
【００３６】
図３は、駐車位置情報管理テーブルＴ１の構成図である。
駐車位置情報管理テーブルＴ１は、撮影画像ｆ１、車両ＩＤｆ２、駐車スペース番号ｆ３、ランドマーク認識結果ｆ４、撮影時刻ｆ５、駐車時間ｆ６、在空判定結果ｆ７の各フィールドによって構成される。
【００３７】
撮影画像ｆ１には、車載カメラ２１が撮影し、運転支援装置３に送信された画像が画像（１）、画像（２）、…として格納されている。
車両ＩＤｆ２には、撮影画像ｆ１の画像に含まれる車両２であって、駐車スペースに駐車中の車両２を特定するための車両ＩＤ（車両識別情報）が格納されている。なお、車両ＩＤｆ２には、車両ＩＤの代わりに在車判定部３３によって画像から識別されたナンバープレートの登録番号が格納されてもよい。
【００３８】
駐車スペース番号ｆ３には、駐車スペースを特定するための駐車スペース番号が格納されている。
ランドマーク認識結果ｆ４には、ランドマーク認識部３２が認識したランドマークのランドマーク種別が格納される。
撮影時刻ｆ５には、車載カメラ２１が撮影を開始した時刻が格納される。
【００３９】
駐車時間ｆ６には、車両２の駐車時間が格納される。駐車時間は、例えばある撮影開始時刻で撮影された駐車スペースが在車から空車に状態が変化するまでを不図示のタイマーでカウントされた時間であり、車両ＩＤｆ２に格納される車両ＩＤ毎に求められる。
在空判定結果ｆ７には、在車判定部３３が判定した駐車スペースの在車又は空車の判定結果が格納される。在空判定結果ｆ７には、駐車スペースを出ようとする車両２の判定結果が格納される場合もある。
【００４０】
このように駐車位置情報管理テーブルＴ１によって、画像に含まれる駐車スペースが在車又は空車のいずれであるかが管理される。なお、駐車位置情報管理テーブルＴ１に、駐車場経営の指標となる回転率（駐車容量に対する総入庫台数）等の情報を蓄積することで、事業者の駐車場運営に役立てることもできる。
【００４１】
図４は、ランドマーク位置情報管理テーブルＴ２の例を示す図である。
駐車場設計時には、予めフロア内の柱の位置や、フロアの出入り口の位置は決定され、これらの柱や出入り口に表示される案内表示内容であるランドマークも決定されている。このため、ランドマーク位置情報管理テーブルＴ２には、駐車場の設計時の情報に基づいて、ランドマークの設置位置を管理するための各種の情報が格納されている。
【００４２】
ランドマーク位置情報管理テーブルＴ２は、登録画像ｆ１１、ランドマーク種別ｆ１２、位置ｆ１３の各フィールドによって構成される。
登録画像ｆ１１には、駐車場に設置されるランドマークが撮影されたランドマーク登録画像が、登録画像（１）、登録画像（２）、…として予め格納されている。
ランドマーク種別ｆ１２には、ランドマークの種別（ブロックを識別するもの、フロア又は施設の出入口を識別するもの等）が格納されている。
位置ｆ１３には、登録画像ｆ１１に登録されたランドマークが設置されている駐車場内における位置が格納されている。位置ｆ１３の（ｘ，ｙ，ｚ）におけるｚ情報は、例えば立体駐車場の場合に、フロア階数（例えば、フロアが３階であれば、“３Ｆ”と表示される。）を示す高さ情報として用いられる。
【００４３】
ここで、ランドマーク位置情報管理テーブルＴ２に予め登録されているランドマーク登録画像の例について、図５〜図７を参照して説明する。
【００４４】
図５は、施設の出口付近で撮影されたランドマーク登録画像５０の例を示す説明図である。この施設は、例えば、駐車場が併設された店舗であるとする。
ランドマーク位置情報管理テーブルＴ２の登録画像ｆ１１には、ランドマーク登録画像５０が格納されている。そして、ランドマーク登録画像５０には、出入り口の名称を記載したランドマーク５１が含まれる。ランドマーク認識部３２は、車載カメラ２１によって撮影された画像からランドマーク５１を検出すると、ランドマーク位置情報管理テーブルＴ２から検索したランドマーク登録画像５０と照合する。これにより、ランドマーク認識部３２は、ランドマーク５１の種別を認識することができる。
【００４５】
図６は、駐車場内で撮影されたランドマーク登録画像５２の例を示す説明図である。
立体駐車場であれば、各フロア内に設けられた柱５３には、フロアを区切る複数のブロックの位置を示すブロック番号５４がランドマークとして設置されている。このようなブロック番号５４が含まれるランドマーク登録画像５２が、ランドマーク位置情報管理テーブルＴ２に予め格納されている。
【００４６】
図７は、フロア入口で撮影されたランドマーク登録画像５５の例を示す図である。
フロア出入り口には、フロアの階数を示すゲート５６が設けられ、このゲート５６には、フロアの階数を示す表示内容５７がランドマークとして取付けられている。このような表示内容５７が含まれるランドマーク登録画像５５が、ランドマーク位置情報管理テーブルＴ２に予め格納されている。
【００４７】
次に、運転支援装置３が行う全体処理について、図８を参照して説明する。
【００４８】
図８は、駐車場地図の作成及び配信処理の例を示すフローチャートである。
始めに、駐車場を利用する車両２の車載カメラ２１から送信された画像が駐車場画像データベースＤ１（図３の撮影画像ｆ１）に入力される（Ｓ１）。次に、ランドマーク認識部３２の走行判定部３２ａは、駐車場画像データベースＤ１から画像を読み出して、駐車場を利用する車両２が駐車中であるか走行中であるかを判定する（Ｓ２）。
【００４９】
ステップＳ２の判定処理にて、車両２が駐車中であると判定されると、在車判定部３３は、車両２が駐車中に撮影した画像に基づいて、空きスペースを検出する（Ｓ３）。空きスペースの検出処理において、ランドマーク認識部３２が画像内のランドマークを認識する。そして、位置判定部３４ａは、ランドマーク認識部３２が認識したランドマーク画像に基づいて車両２の駐車位置を判定する（Ｓ４）。
【００５０】
一方、ステップＳ２の判定処理にて、車両２が駐車場を走行中であると判定されると、在車判定部３３は、車両２が走行中に撮影した画像に基づいて、空きスペースを検出する（Ｓ５）。そして、位置判定部３４ａは、ランドマーク画像に基づいて車両２の走行位置を判定する（Ｓ６）。
【００５１】
ステップＳ４又はＳ６の後、運転支援情報作成部３４ｂは、在車判定部３３によって判定された空きスペースの情報を重畳した駐車場地図を運転支援情報として作成する（Ｓ７）。そして、運転支援情報配信部３４ｃは、位置が判定された車両２に駐車場地図を配信する（Ｓ８）。
【００５２】
なお、ステップＳ３、Ｓ４の処理を入れ替えて、車両２の駐車位置を特定した後に、空きスペースを検出してもよい。同様にステップＳ５、Ｓ６の処理を入れ替えて、車両２の走行位置を特定した後に、空きスペースを検出してもよい。
【００５３】
ここで、ステップＳ３において駐車中の車両２（以下、「駐車車両」とも呼ぶ。）が空きスペースを検出する処理について説明する。
車両２の運転者が目的地の駐車場内の空きスペースに駐車したいと考えていても、従来のナビゲーション装置が備える経路誘導機能では、車両２が目的地の周辺に到着した時点で誘導を停止していた。このため、駐車場や駐車場の空きスペースまで車両２を誘導する運転支援情報を運転者に提供できていなかった。また、従来、駐車場内全体の空きスペースを検出する方式として、駐車場内の駐車スペース毎に予め設置された超音波センサや固定カメラを使って空きスペースを検出する方式が知られていた。しかし、駐車場の空きスペースを検出する特別な装置等の設備を駐車場に設置しなければならないため、特に中小型規模の駐車場を経営するような事業者にとってコスト負担が大きかった。これに対して、本実施の形態例に係る運転支援装置３では、以下の図９〜図１２に示すような各車両２の車載カメラ２１によって撮影された画像を用いて駐車場の空きスペースを検出する。
【００５４】
図９は、駐車車両に搭載されたフロントカメラ２１Ｆの撮影範囲の例を示す説明図である。
この例では、駐車スペースに駐車した車両２を、駐車車両６０、６１と呼ぶ。駐車車両６０、６１の車載カメラ２１の一例として、前方を撮影可能なフロントカメラ２１Ｆが用いられているとする。駐車車両６０のフロントカメラ２１Ｆの視野６２には３台分の駐車スペースが含まれる。一方、駐車車両６１のフロントカメラ２１Ｆの視野６３についても３台分の駐車スペースが含まれる。駐車車両６０が駐車する奥行き側の駐車スペースには、柱６４が設置され、柱６４に設置されたランドマーク６５が見える状態である。なお、駐車車両６１が駐車する手前側の駐車スペースにも同様の柱が設置されているが、図９では記載を省略する。フロントカメラ２１Ｆの光学系の仕様により視野が広くなると空きスペースの検出対象となる駐車スペースの数が増える。このため、駐車車両６０、６１が増えると、在車判定部３３が在車又は空車判定を行える駐車スペースの数も多くなり、広い駐車場であっても駐車スペースの状況を把握しやすくなる。
【００５５】
図１０は、駐車車両６１のフロントカメラ２１Ｆが撮影する画像の例を示す説明図である。
始めに、ランドマーク認識部３２は、駐車車両６１のフロントカメラ２１Ｆが撮影した画像を利用してフロア内の柱に表示されたランドマーク６５を認識する。このとき、ランドマーク認識部３２は、ランドマーク位置情報管理テーブルＴ２の情報を参照して、認識したランドマーク６５の種別、設置位置を特定する。
【００５６】
次に、在車判定部３３は、走行判定部３２ａによって車両２が駐車していると判定された場合にフロントカメラ２１Ｆが撮影した図１０に示す画像に基づいて駐車スペースの在車又は空車を判定する。ここで、在車判定部３３が駐車スペースの在車判定を行う場合には、駐車スペース毎にランダムフォレスト等の機械学習を用いて判定するために必要な判定領域６６〜６８を設定する。判定領域６６〜６８は、例えば、車両２のフロントグリル付近、駐車スペースの白線を跨るような領域に設定される。そして、判定領域６６〜６８内の画像に基づいて、各駐車スペースにおける在車判定がなされる。図中で“○”と示した駐車スペースは空車であり、“×”と示した駐車スペースは在車であることを表す。判定領域６６〜６８を用いた在車判定は、後述する図１３において詳細な処理を説明する。
【００５７】
ところで、時々刻々と駐車場の在空状態が変化するため、在車判定部３３は、例えば、取得した画像の駐車車両の判定領域６６〜６８の近傍において横軸方向に投影分布をとる。例えば、駐車場の構内が薄暗ければ判定領域６６〜６８内の輝度が下がり、駐車スペースに車両２が駐車していれば輝度が上がるといった輝度変化が投影分布に反映される。これにより在車判定部３３は、判定領域６６〜６８毎、すなわち駐車スペース毎に在車判定をすることも可能となり、駐車スペース数を自動的にカウントし、空きスペースを検出することも可能となる。
【００５８】
次に、ステップＳ５において走行中と判定された車両（以下、「走行車両」とも呼ぶ。）が撮影した画像から空きスペースを検出し、ステップＳ６において走行車両７０の走行位置を特定する処理について、図１１と図１２を参照して説明する。
【００５９】
図１１は、駐車場内における走行車両７０の例を示す説明図である。この走行車両７０には、車載カメラ２１の一例として、フロントカメラ２１Ｆの他に、車両２の側面方向を撮影可能なサイドカメラ２１Ｌ、２１Ｒが搭載されている。そして、走行車両７０は、駐車場内の通路である車路７１を走行している。
【００６０】
始めに、ランドマーク認識部３２は、走行車両７０のフロントカメラ２１Ｆが撮影した画像を利用してフロア内の柱に表示されたランドマーク７２、７３を認識する。このとき、ランドマーク認識部３２は、ランドマーク位置情報管理テーブルＴ２の情報を参照して、認識したランドマーク７２、７３の種別、設置位置を特定する。ところで、走行車両７０から受信した画像に含まれるランドマーク７２、７３の大きさは拡大又は縮小したり、回転がかかったりする。このため、ランドマーク認識部３２は、例えばＳＵＲＦ（Speeded Up Robust Features）やＳＩＦＴ（Scale-Invariant Feature Transform）と呼ばれる特徴量抽出画像処理ライブラリを用いてランドマーク７２、７３を安定して認識する。
【００６１】
図１２は、走行車両７０のサイドカメラ２１Ｌ、２１Ｒが撮影した画像に基づいて空きスペースを検出する例を示す説明図である。
在車判定部３３は、基本的に駐車車両６０のフロントカメラ２１Ｆによって撮影された画像（図１０を参照。）を画像処理して、空きスペースを検出している。しかし、在車判定部３３は、フロントカメラ２１Ｆと同様の撮影条件でサイドカメラ２１Ｌ、２１Ｒが撮影した走行車両７０の側面方向の画像を画像処理することで、空きスペースを検出することもできる。このため、在車判定部３３は、走行判定部３２ａによって車両２が走行していると判定された場合に、サイドカメラ２１Ｌ、２１Ｒが撮影した画像に基づいて駐車スペースの在車又は空車を判定する。
【００６２】
フロントカメラ２１Ｆの視野７４には、走行車両７０の前方にある２本の柱と、柱に表示されたランドマーク７２、７３が含まれる。そして、サイドカメラ２１Ｌ、２１Ｒの視野７５、７６には、複数の駐車スペースが含まれる。このため、在車判定部３３は、走行車両７０が走行する車路７１の両側の駐車スペースから空きスペースを検出することもできる。
【００６３】
その後、位置判定部３４ａは、特定されたランドマーク７２、７３の設置位置に基づいて走行車両７０の走行位置を特定する。位置判定部３４ａが走行車両７０の走行位置を特定すると、走行車両７０は近傍の空きスペース情報の配信を受けることができる。また、位置判定部３４ａは、走行車両７０の近くを走行する他の車両２に空きスペースの情報を配信することもできる。
【００６４】
次に、図８のステップＳ３、Ｓ５における空きスペースの検出処理の詳細な例について説明する。
図１３は、在車判定部３３が行う空きスペースの検出処理の例を示すフローチャートである。この処理では、図９に示した駐車車両６０の車載カメラ２１が撮影する画像に基づいて、在車判定部３３が処理を行うものとする。
【００６５】
空きスペースを検出するための前処理として、在車判定部３３は駐車場画像データベースＤ１から読み出した画像に基づいて車路７１の背景画像を作成し、この背景画像を駐車位置情報管理テーブルＴ１の撮影画像ｆ１の画像に関連づけて登録しておく（Ｓ１１）。駐車スペースに他の車両２が駐車していなければ、車路７１の背景画像には駐車場の壁面及び路面が含まれる。
【００６６】
ステップＳ１１の前処理を経た後、在車判定部３３は、本処理を開始する。この処理において、在車判定部３３は、車載カメラ２１から駐車場画像データベースＤ１に逐次入力される画像を駐車場画像データベースＤ１から読み出し（Ｓ１２）、この画像内の車路７１に走行車両７０が存在しているか否かを判定する（Ｓ１３）。
【００６７】
例えば、車路７１に走行車両７０が存在している間は、駐車車両６１の視野６３内に走行車両７０が含まれ、在車判定部３３は空きスペースを正しく検出できない。このため、在車判定部３３は、車路７１に走行車両７０が存在しなくなる、すなわち視野６３に走行車両７０が含まれなくなるまで処理を待つ。
【００６８】
在車判定部３３が行う空きスペース検出処理には、例えば、駐車スペースに在車中の画像と空車中の学習データ（後述する図１５と図１６を参照。）を用いて行われるランダムフォレスト等の機械学習が用いられる（Ｓ１４）。そして、判定領域６６〜６８内の画像がランダムフォレストを用いて識別される。
【００６９】
そして、在車判定部３３は、駐車スペースにおける車両２の有無を判断する（Ｓ１５）。在車判定部３３は、車両２が存在していない駐車スペースを空車と判定し（Ｓ１６）、車両２が存在している駐車スペースを在車と判定する（Ｓ１７）。
【００７０】
ステップＳ１６又はＳ１７の後、在車判定部３３は、ランドマーク認識部３２によって認識されたランドマークの認識結果に基づいて（Ｓ１８）、画像内における空きスペースの位置を特定する。その後、在車判定部３３は、必要に応じて車路７１の背景画像を更新する（Ｓ１９）。
【００７１】
図１３に示した処理は、駐車車両６０が前方の空きスペースを検出するものであるが、走行車両７０が側面方向の空きスペースを検出する場合にも本処理を適用可能である。この場合、走行車両７０自体が車路７１を走行しているため、ステップＳ１１〜１３の処理は不要となる。
【００７２】
ここで、ステップＳ１４で用いられるランダムフォレストについて説明する。
図１４は、ランダムフォレストの原理を示す説明図である。
【００７３】
在車判定部３３は、予め在車の特徴を表した画像と、空車の特徴を表した画像とを、ランダムフォレストと呼ばれる機械学習により、駐車スペースが在車又は空車のいずれであるかを判定する。機械学習による処理には他にもニューラルネットワークや、ＳＶＭ（サポートベクターマシン）等を用いた在車判定処理が存在するが、本実施の形態例に係る在車判定部３３は、処理負荷が軽くチューニングが容易なランダムフォレストを用いる。ランダムフォレストでは、学習データ８０に基づいてサンプリングが行われ、予測対象となる判定用のツリー８１が作成される。そして、各ツリー８１の出力値８２の投票結果の総和８３が、基準値（例えば０．７）以上である場合に判定結果を採用するというロジックになっている。
【００７４】
図１５は、図１３のステップＳ１６に示す空車判定処理に用いられる学習データ８０の例を示す説明図である。
駐車スペースに車両２が存在しなければ、車載カメラ２１によって撮影された画像には、白線９０、９１、車止めの縁石９２の画像が含まれる。在車判定部３３は、この画像から白線９０、９１の一部を含む判定領域９３を設定する。在車判定部３３は、判定領域９３内の画像を空車判定処理に用いられる学習データ８０として駐車場画像データベースＤ１（図４に示す登録画像ｆ１１）に登録する。
【００７５】
図１６は、図１３のステップＳ１７に示す在車判定処理に用いられる学習データ８０の例を示す説明図である。
駐車スペースに車両２が存在していれば、車載カメラ２１によって撮影された画像には、駐車車両画像９４が含まれる。在車判定部３３は、この駐車車両画像９４から、例えば車両であることを特徴づけるフロントグリル画像を含む判定領域９５を設定する。そして、在車判定部３３は、判定領域９５内の画像を在車判定処理に用いられる学習データ８０として、駐車場画像データベースＤ１（図４に示す登録画像ｆ１１）に登録する。
【００７６】
このように駐車場画像データベースＤ１に登録された学習データ８０が、図１３のステップＳ１４において在車判定部３３が行うランダムフォレストの処理に用いられ、駐車スペースの在車又は空車の判定が行われる。
【００７７】
次に、出庫予定車両の検出処理について説明する。
図１７は、車両状態判定部３１が行う出庫予定車両の検出処理の例を示すフローチャートである。
【００７８】
車両状態判定部３１が出庫予定車両を検出する際には、例えば、駐車場のあるフロア毎、又はブロック毎の駐車スペース数に対して在車と判定された駐車スペース数の割合（以下、満車率と呼ぶ。）が基準値以上（例えば、７０％以上）であるか判定する（Ｓ２１）。ブロック毎の満車率が基準値以上であれば、走行車両を運転する運転者が目視で空きスペースを探すのが困難であると考えられる。このため、本システムにより空きスペースを案内する処理が有効となる。
【００７９】
ステップＳ２１にて、ブロック毎の満車率が基準値以上であると判定されると、車両状態判定部３１は、車両情報データベースＤ２から読み出した車両情報に基づいて駐車車両のエンジンがオンからオフの状態に変化したことを検出する（Ｓ２２）。このとき、車両２が駐車スペースに判定したと分かる。
【００８０】
次に、ランドマーク認識部３２は、車載カメラ２１の画像からランドマーク情報を抽出し（Ｓ２３）、抽出したランドマーク情報から駐車中の車両２の位置を特定し（Ｓ２４）、時刻情報とともに駐車場画像データベースＤ１に登録する（Ｓ２５）。
【００８１】
さらに、駐車時間が一定時間経過後にエンジンオフからオンの状態に変化したことを検出し（Ｓ２６）、再び車載カメラ２１の画像からランドマーク情報を抽出する（Ｓ２７）。そして、駐車場画像データベースＤ１内に先に登録された駐車位置情報と同じ情報が一致した場合、出庫予定車両と判定する。そして、運転支援情報管理部３４を経由し、出庫予定車両の近くを走行する車両２に空きスペース情報として配信する（Ｓ２８）。
【００８２】
ここで、出庫予定車両は、運転支援情報管理部３４から出庫予定車両の近傍にある車両２の車載カメラ２１によって撮影された画像を、駐車場画像データベースＤ１から画像そのものを抽出して配信を受けることができる。また、出庫予定車両は、運転支援情報管理部３４が画像から検出した歩行者や通過車両等の出庫に際して障害となりうる事象の配信を受けることもできる（Ｓ２９）。
【００８３】
なお、ステップＳ２１において、ブロックの満車率が基準値未満であれば、図１３で説明した空きスペースの検出処理により空きスペースを検出し、運転支援情報管理部３４を経由して空きスペース地図情報を車両２に配信した後（Ｓ３０）、本フローを終了する。
【００８４】
次に、運転支援装置３から車両２に配信される運転支援情報について、図１８〜図２０を参照して説明する。
【００８５】
図１８は、フロアマップ１００の例を示す説明図である。
フロアマップ１００は立体駐車場等の階層化された駐車場において、走行車両がフロアに進入する前に、フロア全体の空きスペースの状況がどのようになっているか把握することを目的として作成される。このフロアマップ１００は、駐車スペースの空きスペースを個別に示すものではなく、空き状況に応じて大まかに色分けした駐車エリア１０１、１０２を示して運転者に空きの駐車エリア１０２まで誘導するものである。そして、凡例１０３に色分けの内容が示されている。このため、運転者は、進入しようとするフロアに空きの駐車エリアがなければ、別のフロアに移動する判断が可能となる。また、空きの駐車エリアがないフロアでは、車両２のうろつき交通を減らすことができる。また、軽車両専用のエリアや身障者用の優先スペース等も色分けして表示されるため、運転者は事前に車両２を駐車可能であるか否かを判断することができる。
【００８６】
図１９は、ブロックマップ１１０の例を示す説明図である。
ブロックマップ１１０は、フロア内の駐車希望の空いているスペースに近づいた車両２に配信される。このブロックマップ１１０において、在車、走行車両、歩行者を表す図形が凡例１１１に示されている。ブロックマップ１１０は、駐車スペース毎に在車又は空車を示す詳細な情報１１１を運転者に示す。また、ブロックマップ１１０は、駐車し易いスペース１１２、身障者優先スペース１１３、逆走等が起こりやすい逆送多発地点１１４等も運転者に示す。これにより、運転者は安全に車両２を運転することができる。
【００８７】
図２０は、警告対象の検出例を示す説明図である。
駐車車両１２０には、死角で見えない視野がある。このため、駐車車両１２０が出庫する際には、死角から歩行者１２１が飛び出したり、車路を走行する走行車両１２３と接触したりする恐れがある。そこで、駐車車両１２０は、車路を挟んで反対側に駐車している駐車車両１２４に搭載された車載カメラ２１の画像を警告対象の検出に用いる。警告対象を検出するためには、例えば、在車判定部３３が駐車車両１２０の付近を移動する走行車両１２３を検出したり、ランダムフォレストにより歩行者１２１を検出したりする処理が用いられる。あるいは、運転支援情報作成部３４ｂが、歩行者１２１をパターン認識して警告情報を作成してもよい。そして、運転支援情報作成部３４ｂは、検出された警告対象に基づいて警告情報を運転支援情報として作成し、この警告情報を駐車車両１２０に配信する。これにより駐車車両１２０が出庫する際に、警告対象に近づくような事態を防ぐことができる。
【００８８】
以上説明した第１の実施の形態例に係る運転支援システム１によれば、駐車場を利用する車両２に搭載された車載カメラ２１によって撮影された画像に基づいて、駐車場に設けられたランドマークを認識する。これにより、ＧＰＳ信号を受信できないような環境であっても、運転支援装置３が車両２の駐車位置又は走行位置を特定し、車両２に対して個別に運転支援情報を配信することができる。
【００８９】
また、在車判定部３３は、駐車場の周辺又は内部を走行し、駐車場を利用する各車両２の車載カメラ２１によって撮影された画像に基づいて、駐車スペースの在車又は空車を判定することができる。これにより効率的に駐車場の空きスペースを検出することができる。そして、運転支援装置３は、各車両２の車載カメラ２１が撮影した画像を相互に利用して、広範囲の駐車場から検出した空きスペースを走行車両に配信することができる。このため、車両２に運転支援情報を配信するための特別な設備や車両２を誘導するための人員を用意しなくても、運転者に空きスペースを知らせる運転支援が可能となる。このように事業者にとっては駐車場を運営するためのコストを低減することができ、駐車場の利用者にとっては利便性向上を図ることができる。
【００９０】
また、運転支援装置３から車両２にフロアマップ又はブロックマップを含む駐車場地図が配信される。これにより、運転者は、車両２の現在位置を把握できると共に、駐車しやすい駐車スペースまで車両２を運転し易くなる。
【００９１】
［２．第２の実施の形態例］
次に、本発明の第２の実施の形態例に係る運転支援システムについて説明する。この運転支援システムは、例えば、運転者が施設から出て駐車場に駐車した車両に戻る際、車両を駐車した位置が分からないといった状況を改善するため、運転者に駐車位置までの経路を知らせることを目的として運用される。
【００９２】
図２１は、運転支援システム１Ａの内部構成例を示すブロック図である。
運転支援システム１Ａは、車両２、運転支援装置３に加えて、運転者が保持する携帯端末４を備える。
【００９３】
携帯端末４は、車両２を降車した運転者によって保持される。携帯端末４を一意に識別するための端末ＩＤ（端末識別情報）は、車両２の車両ＩＤと予め関連付けられている。この携帯端末４は、端末カメラ４１、画像送信部４２、運転支援情報受信部４３、表示部４４を備える。
端末カメラ４１は、運転者が駐車場の入口付近で撮影した端末画像を画像送信部４２に送る。
画像送信部４２は、端末カメラ４１によって撮影された端末画像を、端末ＩＤと共に運転支援装置３に送信する。端末画像は、駐車場画像データベースＤ１に格納される。
運転支援情報受信部４３は、携帯端末４の現在位置から車両２の駐車位置までの経路情報を含む駐車場地図を運転支援情報として運転支援情報管理部３４から受信する。
表示部４４は、運転支援情報受信部４３が受信した駐車場地図を表示する。
【００９４】
運転支援装置３のランドマーク認識部３２は、端末画像に含まれるランドマークを認識する。そして、運転支援情報管理部３４は、端末ＩＤに関連づけられた車両ＩＤを有する車両２から携帯端末４の現在位置までの経路を反映した駐車場地図を運転支援情報として作成し、携帯端末４に駐車場地図を配信する。なお、図２１に示す運転支援システム１Ａのその他の構成は、図１に示す運転支援システム１と同じであるため、詳細な説明を省略する。
【００９５】
図２２は、駐車位置案内処理の例を示すフローチャートである。
駐車位置案内処理では、車載カメラ２１の画像と、ランドマーク情報から求めた車両２の駐車位置情報とを駐車場画像データベースＤ１に予め登録しておく（Ｓ４１）。このため、図３に示した駐車位置情報管理テーブルＴ１には、車両２の駐車位置情報（例えば、フロア、ブロック、駐車スペース番号、車両２の車両ＩＤ等）を格納するフィールドが設けられるものとする。
【００９６】
運転者が施設で買い物等を行った後に、施設の出口付近に来た際、図５に示すような施設出口付近の風景を携帯端末４の端末カメラ４１で撮影すると（Ｓ４２）、端末画像が運転支援装置３に送信される。ランドマーク認識部３２は、携帯端末４の端末カメラ４１によって撮影された端末画像から認識したランドマーク画像を、ランドマーク位置情報管理テーブルＴ２のランドマーク登録画像と照合して端末画像内のランドマークを認識する。そして、位置判定部３４ａは、ランドマーク位置情報管理テーブルＴ２の位置ｆ１３により運転者の現在位置を判定する。
【００９７】
その後、運転支援情報作成部３４ｂは、携帯端末４の現在位置と、車両２の駐車位置までの経路探索処理を行う（Ｓ４４）。そして、駐車場地図に探索した経路を重畳した運転支援情報を携帯端末４に配信する（Ｓ４５）。これにより運転者は、どのような経路を辿れば駐車した車両２に到達できるか知ることができる。
【００９８】
図２３は、駐車位置案内の例を示す図である。
位置判定部３４ａが判定した携帯端末４の現在位置から、運転者１３１の駐車車両１３２までの経路情報１３３が駐車場地図に重畳されて携帯端末４に配信される。これにより運転者１３１は迷うことなく、駐車車両１３２まで到達できる。なお、運転支援装置３は、運転者１３１が保持する携帯端末４だけでなく、運転者１３１の家族や関係者が保持する携帯端末４にも経路情報１３３を重畳した駐車場地図を配信してもよい。
【００９９】
［３．変形例］
なお、運転支援装置３に設けられる各データベースは、運転支援装置３とは別に設けてもよい。このため、車両２から運転支援装置３に送信された画像、車両情報は、駐車場画像データベースＤ１、車両情報データベースＤ２に格納されることなく、各種の処理に用いられてもよい。
【０１００】
また、運転支援装置３が運転支援情報として車両２に配信する警告情報は、駐車場内に限らず、一般道等を走行する車両２に配信されてもよい。
また、車両２が自動運転可能であれば、車両２が運転支援装置３から配信された運転支援情報を移動先の情報に反映することで、適切な経路を自動的に選択して走行することも可能である。
【０１０１】
また、車両２に運転支援装置３を搭載し、複数の車両２が互いに通信を行うことで（例えば、アドホック通信）、車両２の周囲の状況を運転支援情報として得てもよい。
また、携帯端末４としては、スマートフォン、フィーチャーフォン、ページャー、ウェアラブル端末（例えば、携帯音楽プレイヤー、メガネ端末、腕時計端末）等の様々なものを想定しうる。
また、携帯端末４にナビゲーション装置２２の機能を持たせてもよい。
【０１０２】
また、車両２又は携帯端末４が運転支援装置３から受信する運転支援情報は、画像だけでなくスピーカから放音される音声メッセージによっても運転者に伝えられるようにしてもよい。
また、車載カメラ２１として、車両２の後方を撮影するリアカメラを設けてもよい。
また、運転支援装置３は、従来のように駐車場に設置された監視カメラから受信する監視画像を、車両２から受信する画像と組み合わせることで、車両２がまばらに駐車しているような駐車場であっても効率的に駐車スペースの在車又は空車を判定することもできる。
【０１０３】
また、本発明は上述した実施の形態例に限られるものではなく、特許請求の範囲に記載した本発明の要旨を逸脱しない限りその他種々の応用例、変形例を取り得ることは勿論である。
例えば、上述した実施の形態例は本発明を分かりやすく説明するために装置及びシステムの構成を詳細且つ具体的に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施の形態例の構成の一部を他の実施の形態例の構成に置き換えることは可能であり、さらにはある実施の形態例の構成に他の実施の形態例の構成を加えることも可能である。また、各実施の形態例の構成の一部について、他の構成の追加、削除、置換をすることも可能である。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【０１０４】
１…運転支援システム、２…車両、３…運転支援装置、４…携帯端末、２１…車載カメラ、３１…車両状態判定部、３２…ランドマーク認識部、３３…在車判定部、３４…運転支援情報管理部、Ｄ１…駐車場画像データベース、Ｄ２…車両情報データベース、Ｄ３…駐車場地図データベース
【図１】
0006503218.tif 000002
【図２】
0006503218.tif 000003
【図３】
0006503218.tif 000004
【図４】
0006503218.tif 000005
【図５】
0006503218.tif 000006
【図６】
0006503218.tif 000007
【図７】
0006503218.tif 000008
【図８】
0006503218.tif 000009
【図９】
0006503218.tif 000010
【図１０】
0006503218.tif 000011
【図１１】
0006503218.tif 000012
【図１２】
0006503218.tif 000013
【図１３】
0006503218.tif 000014
【図１４】
0006503218.tif 000015
【図１５】
0006503218.tif 000016
【図１６】
0006503218.tif 000017
【図１７】
0006503218.tif 000018
【図１８】
0006503218.tif 000019
【図１９】
0006503218.tif 000020
【図２０】
0006503218.tif 000021
【図２１】
0006503218.tif 000022
【図２２】
0006503218.tif 000023
【図２３】
0006503218.tif 000024