(57)【要約】【課題】乗客のプライバシーを保護しつつ旅客自動車内の暗い部分であっても忘れ物を検知可能な忘れ物防止システムを提供する。【解決手段】忘れ物防止システム１は、可視光では撮像できない部位を含むタクシー車内の撮像を赤外線を用いて行うカメラ１０を備える。忘れ物防止システム１は、赤外線画像のうち解像度の高い特定波長の赤外線画像をもとに、乗客が乗車していないときには存在しない物体の有無を乗客の降車の際に解析する。物体が有る場合には、警告部４０により、タクシーの乗務員に忘れ物が発生した可能性があることを警告する。【選択図】図１
2015041344.tif 000002
【特許請求の範囲】
【請求項１】
乗客が存在する賃走状態と、乗客が存在しない空車状態とを有する旅客自動車に設置され、当該時点の撮像環境では他の波長よりも高い解像度となる特定波長の赤外線を用いて前記旅客自動車の車内を撮像する撮像装置と、
前記空車状態のときに前記撮像装置より取得した第１赤外線画像に映された物体を解析し、その解析結果を保持するとともに、前記空車状態から賃走状態に変化した後、乗客が降車する際に前記撮像装置より取得した第２赤外線画像に映された物体を解析し、その解析結果を前記保持されている解析結果と比較する解析手段と、
前記解析手段による比較内容に応じて、乗客以外の物体が車内に存在するかどうかを判別する判別手段と、
前記乗客以外の物体が車内に存在すると判別された場合に、前記旅客自動車の乗務員に向けて、忘れ物が発生した可能性があることを警告する警告手段と、を備える、
忘れ物防止システム。
【請求項２】
前記解析手段は、前記撮像装置により撮像された前記第１赤外線画像又は第２赤外線画像を異なる波長毎に解析し、解析結果同士の比較が最も容易な波長の解析結果を前記比較の結果として前記判別手段へ出力する、
請求項１記載の忘れ物防止システム。
【請求項３】
前記撮像装置は、前記波長の赤外線だけを透過させるフィルタを有する、
請求項２記載の忘れ物防止システム。
【請求項４】
前記撮像装置は、前記車内の後部座席のフロアのほか、フロアマット及びトランク内部の一方を撮像可能に配置される、
請求項１、２又は３記載の忘れ物防止システム。
【請求項５】
少なくとも賃走状態又は空車状態を示すメータをさらに備えており、
前記解析手段は、前記メータが空車状態を示す間、繰り返し前記第１赤外線画像を前記撮像装置から取得して前記解析を行い、最新の解析結果を保持するとともに、この最新の解析結果と前記第２赤外線画像に映された物体の解析結果とを比較するものであり、
前記警告手段は、前記メータが賃走状態の後、乗客が降車した所定時間経過前に、前記警告する、
請求項１ないし４のいずれかの項記載の忘れ物防止システム。
【請求項６】
前記メータが空車状態のときに前記撮像装置が撮像した第１赤外線画像又は前記第２赤外線画像の解析結果に乗客に相当する物体が存在するとき、又は、前記メータが賃走状態のときに前記撮像装置が撮像した前記第１赤外線画像又は前記第２赤外線画像の解析結果に乗客に相当する物体が存在するときに、その旨を表す報知情報を出力するメータ管理手段をさらに備える、
請求項１ないし５のいずれかの項記載の忘れ物防止システム。
【請求項７】
前記メータ管理手段は、前記報知情報の出力後一定時間経過しても前記メータの状態が変更されない場合に、強制的に当該メータの状態を変更させる、
請求項６記載の忘れ物防止システム。
【請求項８】
前記警告又は前記報知情報の出力に対して前記乗務員が応答することで、前記旅客自動車の発車を許可する許可手段をさらに備える、
請求項１〜７のいずれかの記載の忘れ物防止システム。
【請求項９】
乗客が存在する賃走状態と、乗客が存在しない空車状態とを有する旅客自動車に設置され、当該時点の撮像環境では他の波長よりも高い解像度となる特定波長の赤外線を用いて前記旅客自動車の車内を撮像する撮像装置が接続されるコンピュータが実行する方法であって、
前記旅客自動車が空車状態のときに前記撮像装置より取得した第１赤外線画像に映された物体を解析し、その解析結果を保持するとともに、前記空車状態から賃走状態に変化した後、乗客が降車する際に前記撮像装置より取得した第２赤外線画像に映された物体を解析し、その解析結果を前記保持されている解析結果と比較する段階と、
前記解析結果の比較内容に応じて乗客以外の物体が車内に存在するかどうかを判別する段階と、
前記乗客以外の物体が車内に存在すると判別された場合に、前記旅客自動車の乗務員に向けて、忘れ物が発生した可能性があることを警告する段階とを有する、
旅客自動車の乗務員に対する情報提供方法。
【請求項１０】
乗客が存在する賃走状態と、乗客が存在しない空車状態とを有する旅客自動車に設置され、当該時点の撮像環境では他の波長よりも高い解像度となる特定波長の赤外線を用いて前記旅客自動車の車内を撮像する撮像装置が接続されるコンピュータを忘れ物防止システムとして動作させるためのコンピュータプログラムであって、
前記コンピュータを、
前記空車状態のときに前記撮像装置より取得した第１赤外線画像に映された物体を解析し、その解析結果を保持するとともに、前記空車状態から賃走状態に変化した後、乗客が降車する際に前記撮像装置より取得した第２赤外線画像に映された物体を解析し、その解析結果を前記保持されている解析結果と比較する解析手段、
前記解析手段による比較内容に応じて乗客以外の物体が車内に存在するかどうかを判別する判別手段、
前記乗客以外の物体が車内に存在すると判別された場合に、前記旅客自動車の乗務員に向けて、忘れ物が発生した可能性があることを警告する警告手段、として機能させるコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、タクシーやハイヤーなどの旅客自動車の乗務員に、乗客の忘れ物がある可能性を通知する忘れ物防止システムに関する。
【背景技術】
【０００２】
旅客自動車では、乗客による忘れ物防止のために、従来から様々な仕組みが提案されている。例えば特許文献１には、車内撮影用の監視カメラにより、空車時にドアが開いたとき及び精算後にドアが閉じたときに車内を撮像し、撮像した車内映像を基準映像と比較することで忘れ物の有無を検知する車内忘れ物防止装置が提案されている。基準映像は、乗客が乗車するときの映像である。忘れ物有りを検知した場合には、忘れ物が有ることを乗客又は乗務員に報知する。
また、特許文献２には、忘れ物として検知すべき物品のリストを記憶しておき、乗客が降車した際に車両内の物品を判別し、判別した物品がリストに含まれる場合に当該物品を忘れ物として検知する車載装置が提案されている。物品の判別は、撮像装置により撮像された乗客の乗車前後の画像の差分に基づいて行われる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−３３８５３５号公報
【特許文献２】特開２０１２−１２３４９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１、２に開示された装置は、いずれも撮像装置により車内を撮像し、その撮像画像から忘れ物を検知するものである。撮像装置による撮像画像から忘れ物を検知する方法は、センサ等により忘れ物を検知する方法よりも一般的にはコスト面で優位となる。しかし、撮像装置で車内を撮像するため、乗客の顔が撮像される可能性がある。乗客を特定できる形態の撮像は、乗客のプライバシー保護の観点から好ましくない。乗客によっては、撮像されることを好ましく思わず、抵抗感を抱くことも考えられる。
また、可視光による撮像では、撮像装置からみて何らかの物体の影になったり、トランクルームなどのように暗い部分では、忘れ物の検知が困難となる。さらに、従来の撮像装置による撮像では、天候（晴天、曇天）、時間帯（日中、夜間）、走行環境（トンネル等の有無）、太陽光の角度によって、映り方が異なる。そのため、撮像時の光量のムラによって物体の認識処理に誤差が生じたり、影を物体と誤認識したりする場合がある。
【０００５】
本発明は、乗客のプライバシーを保護しつつ、天候、時間帯等の影響を受けずに旅客自動車内への忘れ物を検知可能な忘れ物防止システムを提供することを課題とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するための本発明の忘れ物防止システムは、乗客が存在する賃走状態と、乗客が存在しない空車状態とを有する旅客自動車に設置され、当該時点の撮像環境では他の波長よりも高い解像度となる特定波長の赤外線を用いて前記旅客自動車の車内を撮像する撮像装置と、前記空車状態のときに前記撮像装置より取得した第１赤外線画像に映された物体を解析し、その解析結果を保持するとともに、前記空車状態から賃走状態に変化した後、乗客が降車する際に前記撮像装置より取得した第２赤外線画像に映された物体を解析し、その解析結果を前記保持されている解析結果と比較する解析手段と、前記解析手段による比較内容に応じて乗客以外の物体が車内に存在するかどうかを判別する判別手段と、前記乗客以外の物体が車内に存在すると判別された場合に、前記旅客自動車の乗務員に向けて、忘れ物が発生した可能性があることを警告する警告手段と、を備えることを特徴とする。
この忘れ物防止システムは、コンピュータプログラムと、このコンピュータプログラムを読み込み可能なコンピュータとの協働により実現することができる。また、このコンピュータにより、旅客自動車の乗務員に対する情報提供方法を実施することができる。
【発明の効果】
【０００７】
本発明は、例えば車内への太陽光の入射角度、光量、天候に応じて最適な解像度となる特定波長の赤外線を用いて旅客自動車の車内を撮像する。そのため、可視光により撮影を行う従来の撮像装置では生じ得る、影を物体と誤認したり、あるいは、影の部分に存在する物体を認識できないなどの事態の発生を防止することができる。また、赤外線画像に映された物体の解析を行うため、乗客のプライバシーを害することもない。
また、赤外線画像に映された物体の解析結果に基づいて忘れ物の可能性がある物体や乗客の判別を行うので、画像を保持したり、画像同士を比較する場合に比べて、処理の負荷を著しく軽減させることができる。そのため、乗客の忘れ物の可能性の有無を迅速に判別することができる。
【図面の簡単な説明】
【０００８】
【図１】忘れ物防止システムの全体構成図。
【図２】忘れ物防止システムに形成される機能構成図。
【図３】（ａ）、（ｂ）はカメラの配置と撮像範囲の説明図。
【図４】忘れ物防止システムが実行する処理のタイミングの説明図。
【図５】乗客が降車するときに実行する忘れ物防止システムの処理手順説明図。
【図６】空車状態のときに実行される忘れ物防止システムの処理手順説明図。
【図７】賃走状態のときに実行される忘れ物防止システムの処理手順説明図。
【発明を実施するための形態】
【０００９】
以下、本発明の実施の形態を図面を用いて詳細に説明する。
【００１０】
＜システム構成＞
図１は、本実施形態の忘れ物防止システムの構成図である。この忘れ物防止システム１は、旅客自動車の一例であるタクシーに搭載されており、乗客の忘れ物の有無をタクシーの乗務員に通知する。
【００１１】
忘れ物防止システム１は、撮像装置として、カメラ１０が複数台設けられる。複数のカメラ１０は、タクシーの車両内の各所に、できるだけ死角を作らないように配置される。本実施形態では、後部座席右シートの足下を撮像する右シートカメラ１１、後部座席左シートの足下を撮像する左シートカメラ１２、後部座席シートを頭上から撮像する頭上カメラ１３、及びトランク内部を撮像するトランクカメラ１４が、車両内に備えられる。
但し、カメラ１０の数量、配置は、本例に限らず、コスト及び忘れ物の検知精度を考慮して、適宜設けられる。
【００１２】
カメラ１０は、赤外線に感度を持つ赤外線カメラであり、自動シャッタにより静止画像を撮る。シャッタ音は出ないように設定する。赤外線カメラは、可視光線の赤色より波長が長く（周波数が低い）、電波より波長の短い電磁波に感度を持つカメラであり、可視光による撮像ができない部位、例えばトランク内部、後部座席のフロアマット、夜のように車内が暗い場合であっても撮像が可能である。また、赤外線カメラでは、被写体の相対的な大きさの解析によって乗客の存在は認識できるが、乗客の顔までは識別しない。そのため、乗客のプライバシーを害することもない。
【００１３】
忘れ物防止システム１は、忘れ物検知に関する主な機能をコンピュータの一種である制御部２０において形成する。制御部２０は、インタフェース２１、ＣＰＵ（Central Processing Unit）２２、ＲＡＭ（Random Access Memory）２３、ＲＯＭ（Read Only Memory）２４を備える。また、大容量記録媒体であるＨＤＤ（Hard Disk Drive）２５を備える。
インタフェース２１、ＣＰＵ２２、ＲＡＭ２３、ＲＯＭ２４及びＨＤＤ２５は、バスを介して相互にデータの送受信が可能に接続されている。
【００１４】
インタフェース２１は、カメラ１０により撮像された赤外線画像を取得する。インタフェース２１は、タクシーメータ３０に接続されており、タクシーメータ３０の状態（賃走、空車、割増、支払）を表す状態データを取得する。タクシーメータ３０は、乗務員の操作により、その状態（賃走状態、空車状態、割増状態、支払状態）が変更されるが、後述するとおり、制御部２０からの制御データにより、状態が強制変更される場合もある。
インタフェース２１は、警告部４０にも接続されている。警告部４０は、スピーカ４１及び警告灯４２に接続される。
【００１５】
ＣＰＵ２２は、ＨＤＤ２５から本発明のコンピュータプログラムを読み込み、さらに、ＲＯＭ２４から制御に必要な制御プログラムを読み込み、これらをＲＡＭ２３を作業領域として実行することで、乗客の忘れ物検知に関する処理を実行する。
【００１６】
図２は、ＣＰＵ２２がコンピュータプログラムを実行することで制御部２０に形成される機能を表す機能ブロック図である。
制御部２０は、画像管理部１０１、通知部１０４、メータ管理部１０５、波長毎の画像解析部２０１〜２０４、解析結果比較部２０５〜２０８、解析結果保持部２０９〜２１２、判別部３００として機能する。
【００１７】
メータ管理部１０５は、タクシーメータ３０の管理と、タクシーメータ３０からの状態データに基づく画像管理部１０１の制御とを行う。具体的には、インタフェース２１を通じてタクシーメータ３０より取得した状態データに基づき、タクシーの状態を認識する。例えばタクシーメータ３０からの状態データが賃走状態を表すものであれば、乗客を乗車させて走行している状態と認識する。同様に、空車状態であれば、乗客が存在しない状態で走行している状態と認識する。割増状態であれば、深夜帯に乗客を乗車させて走行している状態と認識する。支払状態であれば、賃走状態の後に停止して、乗客から支払いを受けている状態と認識する。
【００１８】
これらの認識結果に基づき、メータ管理部１０５は、カメラ１０の作動タイミング（シャッタの押下及びそれにより撮像された画像の取得タイミング）を定めるカメラ制御信号を画像管理部１０１へ送出する。また、後述する判別部３００から制御データを受信したときに、タクシーメータ３０の状態を強制的に変更する。
メータ管理部１０５におけるこれらの機能動作については、後述する。
【００１９】
画像管理部１０１は、上記のカメラ制御信号に基づき、カメラ１０から赤外線画像（画像を表現するための電子データ）を取得する。赤外線画像は、タクシーが空車状態のときは一定時間毎、例えば１分間毎に繰り返し取得する。タクシーが乗客を乗せるために停止し、賃走状態に変化したときは、取得を停止しても良いが、乗客の有無を監視する場合は、そのまま継続するか、あるいは赤外線画像の取得周期を５分以上にして取得する。タクシーが空車状態から賃走状態に変化し、さらに支払い状態に変化した場合は、その時点で赤外線画像を取得し、その後、画像取得を停止する。以後の説明では、特に、区別する必要がない場合を除き、空車状態又は賃走状態で取得する赤外線画像を第１赤外線画像、支払い状態に変化したときに取得する赤外線画像を第２赤外線画像という。
【００２０】
取得した赤外線画像は、複数の波長の画像の集合として画像管理部１０１に入力される。波長Ａ画像解析部２０１は、これらの複数の波長の画像のうち、波長Ａの画像に映されている物体の輪郭、配置等を解析し、解析結果を、解析結果保持部２０９に保持させる。この処理を赤外線画像を取得する度に繰り返す。
【００２１】
解析結果比較部２０５は、解析結果保持部２０９に保持されている解析結果と今回の解析結果とを比較する。解析結果が同じである場合は、車内に変化が無いことを表す情報（「変化無し」）を判別部３００へ出力する。画像の同じ位置で毎回映される物体は、固定的に設置されている物体ということになるので、当該物体を基準物体として保持したり、あるいは、当該基準物体にマスキングを施し、毎回の解析及び比較のための処理負荷を軽減するようにしてよい。
【００２２】
一方、解析結果が異なる場合は、車内の物体の配置に変化があったことを表す情報（「変化有り」）を判別部３００へ出力する。解析結果が異なる場合は、例えば、基準物体とは異なる物体が新たに存在することになった場合、あるいは、乗客と思われる物体が存在する場合である。乗客が映り込む場合、乗客は赤外線画像における相対割合が大きくなるのが通常であり、しかも、乗客の場合には体温が検知される。そのため、そのような物体を乗客とみなし、「変化有り」に加え、乗客の存在を表す情報（「乗客有り」）を判別部３００へ出力する。
【００２３】
同様の処理を、波長Ｂ画像解析部２０２、波長Ｃ画像解析部２０３、波長Ｄ画像解析部２０４、解析結果比較部２０６，２０７，２０８、解析結果保持部２１０，２１１，２１２について行う。すなわち、波長Ｂ画像解析部２０２は、波長Ｂの画像に映されている物体の輪郭、配置等を解析し、解析結果を解析結果保持部２１０に保持させる。波長Ｃ画像解析部２０３は、波長Ｃの画像に映されている物体の輪郭、配置等を解析し、解析結果を解析結果保持部２１１に保持させる。波長Ｄ画像解析部２０３は、波長Ｄの画像に映されている物体の輪郭、配置等を解析し、解析結果を解析結果保持部２１２に保持させる。解析結果比較部２０６，２０７，２０８は、それぞれ対応する解析結果保持部に保持されている最新の解析結果と今回の解析結果とを比較する。
【００２４】
なお、画像管理部１０１は、波長Ａ、波長Ｂ、波長Ｃ、波長Ｄのうち、撮像時点の撮像環境では他の波長よりも高い解像度となる１つ又はいくつか（本例では３つ以下）の波長の解析結果だけを有効にすることを判別部３００に通知しておくことが望ましい。
有効にする波長は、車内へのカメラ１０の取付位置、カメラ１０の性能、走行時間帯、天候、車内へ入射される太陽光の状況のような撮像環境に応じた実測結果に基づき、個別に設定する。例えば、さまざまな季節、天候、時間帯第１赤外線画像又は第２赤外線画像を波長Ａ、波長Ｂ、波長Ｃ、波長Ｄ毎に解析した結果、解析結果同士の比較が最も容易な波長の解析結果が波長Ａ，波長Ｄのものであったする。この場合、波長Ｂ、波長Ｃについては無効フラグを立て、あるいは、波長Ａ及び波長Ｄの画像解析について有効フラグを立て、波長Ａ及び波長Ｄの画像解析結果だけがフィルタリングされるようにする。
【００２５】
判別部３００は、メータ管理部１０５より入力される状態データ、画像管理部１０１より入力される有効波長の情報、及び、有効波長の赤外線画像の解析結果の比較内容に応じて、車内における乗客、乗客の忘れ物である可能性のある物体の判別を行う。すなわち、乗客が乗車する前と降車するときの赤外線画像同士を単に比較するのではなく、取得した赤外線画像に映された物体の解析結果の比較により、乗客又は物体の存在の有無を判別する。
【００２６】
例えば、タクシーが空車状態で、有効な波長の画像解析が波長Ａ及び波長Ｄのものであり、解析結果比較部２０５、２０８から「変化無し」の情報が入力されている場合は、物体も乗客も存在しないと判別する。
他方、タクシーが賃走状態から支払状態に変化し、乗客が降車したにも関わらず「変化有り」の情報が入力されている場合は、直前に乗車した乗客の忘れ物の可能性がある物体が存在すると判別する。また、タクシーが空車状態であるにも関わらず、「乗客有り」の情報が入力される場合、あるいは、タクシーが賃走状態であるにも関わらず、「変化無し」の情報が入力される場合は、タクシーメータ３０の変更し忘れの可能性があると判別する。
【００２７】
判別部３００は、タクシーメータ３０の変更し忘れの可能性がある状態が、一定時間（例えば１分間）以上継続する場合は、その旨を表す報知情報を通知部１０４へ出力するとともに、制御データをタクシーメータ管理部１０５に出力する。報知情報は乗務員へ報知する目的で生成される情報であり、制御データは、タクシーメータ３０の状態を変更させるためのデータである。制御データは、報知情報の出力後一定時間経過後も同じ状態であるときに出力される。制御データを受領したタクシーメータ管理部１０５は、タクシーメータ３０の状態を強制的に変更することができる。
【００２８】
通知部１０４は、メータ管理部１０５からの報知情報と、判別部３００からの判別結果とをもとに警告情報を生成し、この警告情報を警告部４０に向けて出力する。警告情報の内容及びデータ形式は、報知情報かどうか、あるいは、判別部３００の判別結果がどのような内容かによって異なるものとなる。
報知情報の場合、警告情報は、乗客にその旨が知得されることがないようにするため、警告灯４２の作動信号として生成される。この作動信号により、警告等４２が例えば赤色で点滅する。また、判別部３００の判別結果が「変化有り」の場合、警告情報は、「忘れ物が存在する可能性があります。」という音声メッセージであり、スピーカ４１から合成音声により出力される。
なお、警告情報の出力は、スピーカ４１又は警告等４２以外の出力装置であってもよい。
【００２９】
＜カメラ配置＞
図３は、カメラ１０の具体的な配置及び撮像部位の説明図である。図３（ａ）は、タクシー車内を横から見た場合の断面図であり、図３（ｂ）は、タクシー車内の俯瞰図である。上述の通り、本実施形態において配置されるカメラ１０は、右シートカメラ１１、左シートカメラ１２、頭上カメラ１３、及びトランクカメラ１４の４台である。
【００３０】
右シートカメラ１１は、前列座席右シートの下部に設けられており、後部座席右シート前のフロアマット上及び後部座席右シートと後部座席右側ドアとの間を撮像可能に配置される。左シートカメラ１２は、前列座席左シートの下部に設けられており、後部座席左シート前のフロアマット上及び後部座席左シートと後部座席左側ドアとの間を撮像可能に配置される。右シートカメラ１１及び左シートカメラ１２は、それぞれ、後部座席シートの座面より下側を撮像するようにする。これにより、右シートカメラ１１及び左シートカメラ１２は、後部座席シートに乗車する乗客の顔を撮像することはできないし、乗客にこれらのカメラ１１，１２の存在を気付かせることもない。
【００３１】
頭上カメラ１３は、後部座席シート上の天井に設けられており、後部座席シートの座面上を撮像可能に配置される。頭上カメラ１３を後部座席シートの背もたれ部分より後方に配置することで、後部座席シートに乗車する乗客の顔を撮像することはできないし、乗客にそのカメラ１３の存在を気付かせることもない。しかし、後方過ぎると頭上カメラ１３から後部座席シート上に死角ができる。そのため、忘れ物検知の観点からは、あまり後方に頭上カメラ１３を配置することは好ましくない。本実施形態では、頭上カメラ１３を後部座席シートのヘッドレスト上方に設けており、乗客の顔を撮像することなく、後部座席シートの座面上全体を撮像することとしている。
【００３２】
トランクカメラ１４は、トランク内上部に設けられており、トランクの床面全体を撮像可能に配置される。
【００３３】
以上のように本実施形態のカメラ１０は、タクシー車内の、主に後部座席シート周辺、フロアマット、及びトランク内部を撮像可能に配置される。忘れ物の検知精度を上げる場合には、カメラの台数を増やす。例えば頭上カメラ１３を２台にして、後部座席右シート上及び後部座席左シート上に設けるようにしてもよい。また、逆に、乗務員により比較的視認しやすい後部座席左シート周辺を撮像部位から除く（左シートカメラ１２を除く）ようにしてコストを削減してもよい。また、カメラ１０にパン、チルトが可能なもの或いは広角レンズを用いて、撮像部位を可変にして、１台のカメラで広範囲を撮像するようにしてもよい。
【００３４】
＜運用形態：情報提供方法＞
次に、上記のように構成される忘れ物防止システム１の運用形態例を説明する。ここでは、忘れ物防止システム１を、乗務員に対する情報提供のためのツールとして使用する場合の例を挙げる。
図４は、忘れ物防止システム１において実行される情報処理のタイミングの説明図である。この情報処理は、乗客の乗車、降車、タクシーの発車等のイベントにより、主として乗務員により操作されるタクシーメータ３０の状態に応じて適宜行われる。なお、図４では、空車状態では乗客が存在せず、賃走状態では乗客が存在する場合の例である。
【００３５】
忘れ物防止システム１が実行する処理は、タクシーが空車状態のときに、カメラ１０より取得した第１赤外線画像のうち、有効波長の画像に映された物体の輪郭、位置等を解析し、その解析結果を保持するとともに、空車状態から賃走状態に変化した後、乗客が降車する際にカメラ１０より取得した第２赤外線画像に映された物体を解析し、その解析結果を保持されている解析結果と比較する段階を有する。
【００３６】
赤外線画像に映された物体の解析には多大な処理を要するところ、空車状態では、忘れ物防止システム１の処理負荷が比較的少ないため、そのような解析を詳細に行うことができる。そのため、通常は賃走状態よりも長い時間走行する空車状態のときに、第１赤外線画像に基づき、車内後部のシート周辺、フロア・マット、及びトランク内部の配置状況を特定するなどの解析を行い、その結果を保持しておく。これらの処理は走行中、繰り返し行われる。その周期は、上述したとおり通常は１分程度であるが、空車状態が一定時間継続される度に自動的に間隔が長くなるようにしてもよい。
【００３７】
乗客が降車するときには、乗務員により、タクシーメータ３０が賃走状態から支払状態に変えられる。支払状態のときに忘れ物防止システム１が実行する処理は、第２赤外線画像に映された物体の解析を行い、予め保持されている最新の解析結果と第１赤外線画像による解析結果との比較を行い、比較内容に応じて、乗客以外の物体が車内に存在するかどうかを判別する段階と、乗客以外の物体が車内に存在すると判別された場合に、乗務員に向けて、忘れ物が発生した可能性があることを警告する段階とを有する。
警告は、タクシーメータ３０が賃走状態の後、乗客が降車した所定時間経過前、例えば降車直後から１分以内に行う。これにより、乗客がタクシーから離れる前に乗務員が忘れ物の有無を確認することができる。
【００３８】
なお、乗客による支払いが迅速に行われ、警告が発車に間に合わない可能性もある。発車後に警告が行われると、忘れ物の可能性を検知しても忘れ物の防止にならない。そのため、警告を発車の前に確実に行うために、警告の他に忘れ物の可能性が無い旨の通知を行うようにしてもよい。
あるいは、乗務員が警告又は報知情報に対して応答した場合にだけ発車を許可する許可機能を制御部２０に設けることで、警告が発車後に行われることを防止するようにしてもよい。この場合の乗務員による応答は、例えば警告又は報知情報の出力がスピーカ４１により行われる場合にはスピーカ４１の消音、警告灯４２により行われる場合には警告灯４２のリセットがある。これにより、忘れ物の可能性がある物体が存在する場合に、タクシーの乗務員に確実にその状況を知らせることができる。
【００３９】
上記の乗務員に対する情報提供を行う際の忘れ物防止システム１の処理手順は、以下のようになる。
図５は、乗客が降りようとするときの情報提供処理の手順説明図である。忘れ物防止システム１は、タクシーメータ３０が支払状態であることを確認する。支払状態でなければ、当該情報提供処理を行わない（Ｓ１０：Ｎ）。
タクシーメータ３０が支払状態であれば（Ｓ１０：Y）、乗客が降車するタイミングであるので、制御部２０は、「ご乗車ありがとうございます。お忘れ物の無いようにお手回りの品をご確認ください。」のような音声案内を、スピーカ４１により行う（Ｓ１１）。このような音声案内により、まず、乗客に忘れ物への注意を喚起する。
【００４０】
音声案内中に、忘れ物防止システム１は、第１赤外線画像に映された物体の解析結果と第２赤外線画像に映された物体の解析結果の比較内容に応じて忘れ物の可能性がある物体の有無を判別する（Ｓ１２）。具体的には、第２赤外線画像における解析結果と、予め保持されている第１赤外線画像における解析結果とを比較する。その結果、いずれも基準物体であり、変化が無い場合は、忘れ物の可能性のある物体が存在しないことになるので、変化無し通知を行い、そのまま当該情報提供処理を終える（Ｓ１２「無」）。
第２赤外線画像に映された物体を確認できない場合、例えば車外からの光が強すぎる場合（赤外線画像の白飛び等）場合（Ｓ１２「判断不可」）、次の周期の第２赤外線画像に基づく判別処理を繰り返す。それでも判断できない場合は、基準物体と異なる物体が存在しないと判別する。当該物体が存在した場合（Ｓ１２：有）、警告を出力する（Ｓ１３）。
【００４１】
以上のような処理により、乗務員は、スピーカ４１からの警告音（音声）や警告灯４２の表示により、忘れ物の発生の可能性を知ることができるので、降車した乗客に対して直ちに、忘れ物に対する注意を喚起することができる。
【００４２】
＜走行中の解析処理＞
図６及び図７は、タクシーが走行しているときに忘れ物防止システム１が実行する処理手順説明図である。図６は、タクシーメータ３０が支払状態から空車状態に変化した後にタクシーが走行を開始したとき、図７はタクシーメータ３０が賃走状態で走行しているときの例である。なお、図６では、空車状態時に解析した基準物体に関する情報が解析結果として保持されているものとする。
【００４３】
図６を参照すると、忘れ物防止システム１は、タクシーメータ３０が空車状態であることを認識すると（Ｓ２０：Y）、物体、乗客の判別処理を行う（Ｓ２１）。すなわちカメラ１０から赤外線画像を取得して、その赤外線画像に映された車内の物体の輪郭、配置等を解析する。赤外線画像に映された物体が乗客かどうかの判別基準については上述したとおりである。今回の解析結果と予め保持されている前回の解析結果と比較し、基準物体との変化が無ければ、忘れ物の可能性のある物体が存在しないことになるので、変化無し通知を行い（Ｓ２１「変化無し」，Ｓ２２）、Ｓ２０の処理に戻る。変化無し通知は、警告灯４２を緑色に点灯させてもよく、あるいは、何も表示させないようにしてもよい。
【００４４】
Ｓ２１において、乗客に相当する物体は存在しないが、基準物体と異なる物体が存在すると判別した場合（Ｓ２１：「変化有り」，「乗客無し」）、忘れ物防止システム１は、その物体を輪郭等によって特定する（Ｓ２３）。この状態は、図５の情報提供処理の際における物体の判別漏れであるため、改めて警告を出した後、Ｓ２０の処理に戻る。
【００４５】
Ｓ２１において、乗客が存在すると判別した場合（Ｓ２１：「変化有り」，「乗客有り」）、タクシーメータ３０の状態と実際の車内の状態とが異なることになる。これは、一般的には、乗務員がタクシーメータ３０を空車状態から賃走状態ないし割増状態に切り替え忘れた場合に生じる現象である。そこで、忘れ物防止システム１は、乗客有り通知を行い（Ｓ２４）、警告灯４２を点滅させる。一定時間経過前であれば、警告灯４２の点滅状態を継続したままＳ２０に戻る。一定時間経過後も同じであれば、タクシーメータ３０の状態を強制的に変更させる（Ｓ２５：Y、Ｓ２６）。
なお、乗務員が応答した場合に警告灯４２の点滅を解消できることは、上述したとおりである。また、タクシーメータ３０の状態を強制的に変更させる必要がない場合は、その処理を省略し、乗客有り通知のまま、Ｓ２０に戻るようにする。
【００４６】
図７を参照し、忘れ物防止システム１は、タクシーメータ３０が賃走状態であることを認識すると（Ｓ３０：Y）、乗客の有無の判別を行う（Ｓ３１）。
Ｓ３１において、乗客が存在すると判別した場合（Ｓ３１：「乗客有り」）、タクシーメータ３０の状態と実際の車内の状態とが一致するので、乗客有り通知を行い（Ｓ３２）、Ｓ３０に戻る。乗客有り通知は、警告灯４２を緑色に点灯させてもよく、あるいは、何も表示させないようにしてもよい。
【００４７】
Ｓ３１において、乗客が存在しないと判別した場合（Ｓ３１：「乗客無し」）、タクシーメータ３０の状態と実際の車内の状態とが異なることになる。これは、一般的には、乗務員がタクシーメータ３０を賃走状態から空車状態に切り替え忘れた場合に生じる現象である。そこで、忘れ物防止システム１は、乗客無し通知を行い（Ｓ３３）、警告灯４２を点滅させる。一定時間経過前であれば、警告灯４２の点滅状態を継続したままＳ３０に戻る。一定時間経過後も同じであれば、タクシーメータ３０の状態を強制的に変更させる（Ｓ３４：Y、Ｓ３５）。
なお、乗務員が応答した場合は、点滅状態を解消できることは、上述したとおりである。また、タクシーメータ３０の状態を強制的に変更させる必要がない場合は、その処理を省略し、乗客無し通知のまま、Ｓ３０に戻るようにする。
【００４８】
［実施形態による効果］
以上説明したように、本実施形態の忘れ物防止システム１では、カメラ１０のシャッタを押す時点の撮像環境では他の波長よりも高い解像度となる特定波長の赤外線を用いてタクシーの車内を撮像する。そのため、可視光により撮影を行う従来の撮像装置では生じ得る、影を物体と誤認したり、あるいは、影の部分に存在する物体を認識できないなどの事態の発生を防止することができる。
また、赤外線画像に映された物体の輪郭や配置等の解析を繰り返し行い、解析結果同士を比較して、乗客及び忘れ物の可能性の高い物体を判別する。そのため、撮像画像それ自体を保持し、画像同士を比較する場合に比べて、処理の負荷量が著しく軽減される。これにより、乗客が支払いを済ませ、降車するまでの僅かな時間の間に、忘れ物の可能性のある物体を検知することができる。
さらに、赤外線を用いて撮像するため、乗客のプライバシーを害さないことはもとより、トランクルームや後部座席のシート下部あるいはフロアマットのように暗い場所に存在する物体をも識別することができる。そのため、可視光を用いた撮像装置を用いる場合よりも、検知精度を格段に高めることができる。
【００４９】
［変形例］
本実施形態は、忘れ物防止システム１をタクシーに搭載した場合の例であるが、タクシー以外にもハイヤー等の他の旅客自動車に搭載してもよい。
また、本実施形態では、特定波長の赤外線画像に映された物体の解析を行う例として、図２の波長別画像解析部２０１〜２０４、解析結果比較部２０５〜２０８、解析結果保持部２０９〜２１２を設けているが、この例に限定されない。例えば、当該特定波長の赤外線だけを透過させるフィルタ（フィルタリング回路）を設けるようにしてもよい。
ＧＰＳレシーバを設け、ＧＰＳデータから導かれる位置データ及び時刻データに基づいて、いつ、どこで乗車した乗客の忘れ物であるかを特定できるようにしてもよい。この場合、忘れ物の可能性のある物体を判別したときに、当該物体に関する情報をＧＰＳデータに関連付けて保持しておく必要がある。
【符号の説明】
【００５０】
１…忘れ物防止システム、１０…カメラ、１１…右シートカメラ、１２…左シートカメラ、１３…頭上カメラ、１４…トランクカメラ、２０…制御部、２１…インタフェース、２２…ＣＰＵ、２３…ＲＡＭ、２４…ＲＯＭ、２５・・・ＨＤＤ、３０…タクシーメータ、４０…警告部、４１…スピーカ、４２…警告灯、１０１…画像管理部、１０４…通知部、１０５…メータ管理部、２０１〜２０４・・・波長別の画像解析部、２０５〜２０８・・・解析結果比較部、２０９〜２１２・・・解析結果保持部。
【図１】
2015041344.tif 000003
【図２】
2015041344.tif 000004
【図３】
2015041344.tif 000005
【図４】
2015041344.tif 000006
【図５】
2015041344.tif 000007
【図６】
2015041344.tif 000008
【図７】
2015041344.tif 000009