(57)【要約】      （修正有）【課題】物体の外観へ与える影響が低減された情報を検出可能であり、運転者に利便性のある情報を提供する。【解決手段】移動体に搭載されたカメラモジュール１は、遠赤外線カメラ１２と、コントローラ１１とを備える。コントローラ１１は、遠赤外線カメラが撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、位置情報を取得した旨を報知するとともに、位置情報が示す位置を表示させる。【選択図】図２
2018056780.tif 000002
【特許請求の範囲】
【請求項１】
遠赤外線カメラと、
前記遠赤外線カメラが撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置を表示させるコントローラと、
を備えるカメラモジュール。
【請求項２】
請求項１に記載のカメラモジュールにおいて、
前記コントローラは、前記撮像物が示す位置情報を検出するとき、当該位置情報を取得した旨を報知する、カメラモジュール。
【請求項３】
請求項１又は２に記載のカメラモジュールにおいて、
前記コントローラは、ユーザ操作を受け付けると、現在地から、前記撮像物が示す位置情報に対応する位置までの案内を実行する、カメラモジュール。
【請求項４】
請求項１乃至３のいずれか一項に記載のカメラモジュールにおいて、
前記コントローラは、前記撮像物が示す位置情報を検出するとき、当該位置情報に関連付けられたＵＲＬ、クーポン又は広告の少なくとも１つを表示させる、カメラモジュール。
【請求項５】
遠赤外線カメラと、
モニタと、
前記遠赤外線カメラが撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置を前記モニタに表示させるコントローラと、
を備えるカメラモニタシステム。
【請求項６】
遠赤外線カメラと、
モニタと、
前記遠赤外線カメラが撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置を前記モニタに表示させるコントローラと、
を備えるカメラモニタシステムが設けられた移動体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラモジュール、カメラモニタシステム及び移動体に関する。
【背景技術】
【０００２】
従来、車両に搭載した赤外線カメラで他の車両のナンバープレートを撮影して、撮像画像から文字を認識し、認識された文字と、データベースに登録された捜索対象の識別情報とを照合する照合装置が知られている（例えば特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２４５３８５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記特許文献１のナンバープレートに記載されるナンバーは、赤外線カメラのみならず可視光でも認識可能であるため、車両などの外観へ影響を与えるものである。また上記特許文献１の照合装置では、データベースに登録された捜索対象を認識することを目的としており、それ以外の処理を行うことができない。
【０００５】
かかる事情に鑑みてなされた本発明の目的は、物体の外観へ与える影響が低減された情報を検出可能であり、且つ当該情報に基づいて運転者に利便性のある情報を提供することができるカメラモジュール、カメラモニタシステム及び移動体を提供することにある。
【課題を解決するための手段】
【０００６】
本開示の一実施形態に係るカメラモジュールは、遠赤外線カメラと、前記遠赤外線カメラが撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置を表示させるコントローラと、を備える。
【０００７】
また、本開示の一実施形態に係るカメラモニタシステムは、遠赤外線カメラと、モニタと、前記遠赤外線カメラが撮影した画像において物体検出を実行するコントローラを備える。コントローラは更に、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置を前記モニタに表示させる。
【０００８】
また、本開示の一実施形態に係る移動体には、遠赤外線カメラと、モニタと、コントローラとを備えるカメラモニタシステムが設けられる。コントローラは、前記遠赤外線カメラが撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置を前記モニタに表示させる。
【発明の効果】
【０００９】
本開示の一実施形態に係るカメラモジュール、カメラモニタシステム及び移動体によれば、運転者に利便性のある情報を提供することができる。
【図面の簡単な説明】
【００１０】
【図１】本開示の実施形態１に係るカメラモジュール及びモニタが取り付けられた移動体の概略的な側面図である。
【図２】図１に示すカメラモジュール及びモニタの機能ブロック図である。
【図３】図１に示すカメラモジュールが備える遠赤外線カメラが撮像した撮像画像の一例である。
【図４】図１に示すモニタが表示する位置情報を示す図である。
【図５】図１に示すモニタが表示するウェブサイトを示す図である。
【図６】図１に示すモニタが表示する地図及びアイコンを示す図である。
【図７】図１に示すカメラモジュールにおけるコントローラの動作を示すフローチャートである。
【図８】図３に示す撮像画像において撮像されている光景の、可視光領域における見え方を示す図である。
【発明を実施するための形態】
【００１１】
［実施形態１］
以下、本開示の実施形態１について図面を参照して説明する。図１に示すように、本開示の実施形態１に係るカメラモジュール１及びモニタ２は移動体９に搭載される。本実施形態１のカメラモジュール１は、一例として移動体９の前方を直接撮像可能な位置、例えばフロントグリルの近傍に取り付けられる。モニタ２は、移動体９の車室内の、運転者に視認可能な位置に設けられる。
【００１２】
本開示における「移動体」には、車両、船舶、航空機を含む。本開示における「車両」には、自動車、鉄道車両、産業車両、及び生活車両を含むが、これに限られない。例えば車両には、滑走路を走行する飛行機を含めてよい。自動車は、乗用車、トラック、バス、二輪車、及びトロリーバス等を含むがこれに限られず、道路上を走行する他の車両を含んでよい。軌道車両は、機関車、貨車、客車、路面電車、案内軌道鉄道、ロープウエー、ケーブルカー、リニアモーターカー、及びモノレールを含むがこれに限られず、軌道に沿って進む他の車両を含んでよい。産業車両は、農業及び建設向けの産業車両を含む。産業車両には、フォークリフト、及びゴルフカートを含むがこれに限られない。農業向けの産業車両には、トラクター、耕耘機、移植機、バインダー、コンバイン、及び芝刈り機を含むが、これに限られない。建設向けの産業車両には、ブルドーザー、スクレーバー、ショベルカー、クレーン車、ダンプカー、及びロードローラを含むが、これに限られない。生活車両には、自転車、車いす、乳母車、手押し車、及び電動立ち乗り二輪車を含むが、これに限られない。車両の動力機関は、ディーゼル機関、ガソリン機関、及び水素機関を含む内燃機関、並びにモーターを含む電気機関を含むが、これに限られない。車両は、人力で走行するものを含む。なお、車両の分類は、上述に限られない。例えば、自動車には、道路を走行可能な産業車両を含んでよく、複数の分類に同じ車両が含まれてよい。
【００１３】
図２は、カメラモニタシステム８の機能ブロック図である。カメラモニタシステム８は、カメラモジュール１とモニタ２とを有する。カメラモジュール１とモニタ２とは、専用線又はＣＡＮ(Controller Area Network)バス等を介して情報及び信号を伝達可能である。
【００１４】
カメラモジュール１はコントローラ１１と遠赤外線カメラ１２と通信部１３とを有する。
【００１５】
コントローラ１１は、１又は複数のプロセッサを含む。コントローラ１１は、種々の処理のためのプログラム及び演算中の情報を記憶する１又は複数のメモリを含んでよい。メモリは、揮発性メモリ及び不揮発性メモリが含まれる。メモリは、プロセッサから独立しているメモリ、及びプロセッサの内蔵メモリが含まれる。プロセッサには、特定のプログラムを読み込ませて特定の機能を実行する汎用のプロセッサ、特定の処理に特化した専用のプロセッサが含まれる。専用のプロセッサには、特定用途向けＩＣ（ＡＳＩＣ；Application Specific Integrated Circuit）が含まれる。特定用途向けＩＣは、ＤＳＰ（Digital Signal Processor）として、ホワイトバランス処理、色補間処理などの前段処理を施し、前段処理を施した画像信号に、さらに輪郭強調処理などの後段処理を施してよい。プロセッサには、プログラマブルロジックデバイス（ＰＬＤ；Programmable Logic Device）が含まれる。ＰＬＤには、ＦＰＧＡ（Field-Programmable Gate Array）が含まれる。コントローラ１１は、一つまたは複数のプロセッサが協働するＳｏＣ（System-on-a-Chip）、及びＳｉＰ（System In a Package）のいずれかであってよい。
【００１６】
遠赤外線カメラ１２は、遠赤外線を撮像するカメラである。遠赤外線は、温度に応じて物体から放出される波長約４μｍから１ｍｍの電磁波である。遠赤外線カメラ１２は、例えば８μｍから１４μｍ程度の波長帯域の光を検出するカメラである。遠赤外線カメラ１２の波長帯域はこれに限られず、この帯域以外の他の帯域、又は、この帯域を含む他の帯域の遠赤外線又は電磁波を撮像してよい。遠赤外線カメラ１２を構成するレンズなどの光学部材としては、例えば、ゲルマニウム、シリコン、硫化亜鉛等が使用される。光学部材の材料としては、使用する遠赤外線の波長に応じて、他の材料を使用してよい。遠赤外線カメラ１２の撮像素子としては、マイクロボロメータ型の検出器を使用することができる。遠赤外線カメラ１２の撮像素子としては、熱電素子及び焦電素子などの他の熱型赤外センサ、又は、量子型赤外線撮像素子等を用いることができる。
【００１７】
遠赤外線カメラ１２は、所定のフレームレートで遠赤外線の画像を撮像する。遠赤外線カメラ１２のフレームレートは３０ｆｐｓ（frame per second）または、６０ｆｐｓとすることができるが、１０ｆｐｓ程度としてよい。フレームレートは、設計に応じて適宜定めることができる。例えばコントローラ１１は、遠赤外線カメラ１２を制御して、移動体９の速度に応じてフレームレートを変化させてよい。
【００１８】
通信部１３は、有線通信又は無線通信を行うことにより、各種情報の送受信を行うインタフェースである。通信部１３は例えば専用線を介して画像をモニタ２に出力する。また通信部１３は、例えばインターネット等のネットワークＮＷを介して、外部のサーバ装置からウェブサイトの画面情報を取得することができる。
【００１９】
モニタ２は例えば液晶ディスプレイ（ＬＣＤ（Liquid Crystal Display））、又は、有機若しくは無機ＥＬディスプレイである。本実施形態のモニタ２は、一例としてタッチスクリーンとして構成され、ユーザによるタッチ操作を受け付け可能である。
【００２０】
遠赤外線カメラ１２は、起動されている間、被写体を撮像して撮像画像を生成する。生成された撮像画像の一例を図３に示す。本実施形態では図３に示すように、所定の撮像物としての二次元コードが、移動体９前方を走行するバスの後方の面の領域Ｒ１に描かれているものとして説明する。二次元コードは例えばＱＲ（Quick Response）コード（登録商標）である。コントローラ１１は撮像画像を遠赤外線カメラ１２から取得し、当該撮像画像に対して物体検出を実行する。
【００２１】
物体検出の結果、撮像画像において、所定の撮像物に対応する画像領域（以下、単に撮像物と称する）を検出すると、コントローラ１１は当該撮像物に応じた処理を実行する。具体的にはコントローラ１１は、撮像物を検出すると、当該撮像物が示す情報を読み取る。撮像物が現在地と異なる位置情報を示すとき、コントローラ１１は、モニタ２の任意の領域に表示される画像Ｒ２において、図４に示すような位置情報Ｌ１を表示させ、コントローラ１１が位置情報Ｌ１を取得した旨を報知する。コントローラ１１は画像Ｒ２において、図４に示すように、位置情報Ｌ１を取得した旨を示す情報Ｃを表示させる。現在地と異なる位置とは、現在地から所定距離以上離れている位置を指す。
【００２２】
位置情報とは、例えば緯度情報と経度情報との組み合わせ、又は住所である。画像Ｒ２は、位置情報Ｌ１を取得した旨を示す情報Ｃ及び位置情報Ｌ１だけでなく、関連情報Ｌ２を含んでよい。関連情報Ｌ２は、位置情報Ｌ１が示す位置の事業者の名称、事業者の営業時間、事業者のＵＲＬ（Uniform Resource Locator）、広告又は割引等のサービスを受けるためのクーポン等の情報であって位置情報Ｌ１に関連付けられている。広告はインターネット等のネットワークＮＷから取得されてよい。広告及びクーポンは、ユーザ操作により、自動的に表示されるか否かを設定可能である。
【００２３】
コントローラ１１は、店舗のＵＲＬを選択するユーザ操作を受け付けると、通信部１３を制御して、当該ＵＲＬが示すウェブサイトにアクセスする。コントローラ１１は、当該ウェブサイトを、図５に示すようにモニタ２全体に表示させる。ウェブサイトは、モニタ２の一部の領域に表示されてよい。
【００２４】
コントローラ１１は、位置情報が示す位置をモニタ２の地図上に出力する。このとき図６に示すように、コントローラ１１はモニタ２において、当該位置を示すアイコンＩを所定の地図上に表示させる。
【００２５】
モニタ２は、アイコンＩを選択するユーザ操作を受け付けると、コントローラ１１の制御に基づいて、現在地から、当該アイコンＩに対応する位置までのルート案内、すなわちナビゲーションを実行する。
【００２６】
コントローラ１１が、遠赤外線カメラ１２から取得した撮像画像のフレーム毎に実行する動作を、図７に示すフローチャートを参照して説明する。
【００２７】
ステップＳ１にてコントローラ１１は遠赤外線カメラ１２から撮像画像を取得する。ステップＳ２にてコントローラ１１は、取得した撮像画像に対して物体検出を実行する。ステップＳ３にてコントローラ１１は、現在地と異なる位置情報を示す撮像物を検出したか否かを判定する。ステップＳ３にてＹｅｓのとき、ステップＳ４にてコントローラ１１はモニタ２において、位置情報を検出した旨を報知する。続いてステップＳ５にてコントローラ１１は、検出された撮像物が示す位置情報が示す位置をモニタ２に出力する。
【００２８】
ステップＳ６にてコントローラ１１は、現在地から、撮像物が示す位置情報に対応する位置までの案内を指示するユーザ操作を受け付けたか否かを判定する。ステップＳ６にてＹｅｓのとき、ステップＳ７にてコントローラ１１は、指示された案内を実行する。
【００２９】
本実施形態によれば、遠赤外線カメラ１２が撮像した撮像画像において物体検出が実行される。したがって撮像物として、可視光に対して透明且つ遠赤外線カメラ１２に対して検出可能なものを採用可能である。このため、図３に示す領域Ｒ１における二次元コードは、図８に示すように、可視光領域において認識又は検出されない。したがって、仮に位置情報を自動車又はバス等の車体に描く場合でも、位置情報が車体の外観へ与える影響は低減される。また、位置情報が、車体でなく道路に沿って設置された看板、壁、ガードレール又は標識等に描かれる場合も同様である。撮像物は、遠赤外線を放出する放射率を有する塗料で描かれてよいし、ステッカーとして貼付されてよい。
【００３０】
また本実施形態によれば、遠赤外線カメラ１２が撮像した撮像画像において物体検出が実行される。このため、夜間又悪天候等で可視光を検出することが難しい状況であっても、撮像物を検出することが可能である。
【００３１】
また本実施形態によれば、コントローラ１１は、遠赤外線カメラ１２が撮影した画像において物体検出を実行し、検出された撮像物が現在地と異なる位置情報を示すとき、当該位置情報が示す位置をモニタ２に表示させる。これにより、レストラン等の事業者の事業場所に関する、利便性のある情報を運転者に提供することが可能である。
【００３２】
また本実施形態によれば、コントローラ１１は、撮像物が示す位置情報を検出するとき、位置情報を取得した旨を報知する。これにより運転者は、当該報知がなされない場合に比べて、位置情報が取得されたことをより確実に認識することができる。
【００３３】
また本実施形態によれば、コントローラ１１は、ユーザ操作を受け付けると、現在地から、撮像物が示す位置情報に対応する位置までの案内を実行する。これにより運転者は、興味を持った位置を訪れることができるため、利便性が一層向上する。
【００３４】
また本実施形態によれば、コントローラ１１は、撮像物が示す位置情報Ｌ１を検出するとき、位置情報に関連付けられた関連情報Ｌ２をモニタ２に表示させる。これにより運転者は、興味を持った位置についての情報を得ることができるため、利便性が一層向上する。
【００３５】
［他の実施形態］
上記実施形態１では、撮像物は二次元コードである。しかしながら実施形態２の撮像物は、文字、数字、又は図形等の記号であってよいし、バーコード等の一次元コードであってよい。
【００３６】
上記実施形態１では撮像物は、可視光に対して透明である。しかしながら、実施形態３の撮像物は、可視光に対して半透明又は不透明のいずれであってよい。
【００３７】
実施形態４において、カメラモジュール１の各機能部は一体構成されてよい。例えばモニタ２にコントローラ１１又は通信部１３が内蔵されてよい。
【００３８】
上記実施形態１では、コントローラ１１は、位置情報を取得した旨をモニタ２に表示することにより報知する。実施形態５におけるコントローラ１１は、位置情報を取得した旨を、音声又はランプの点灯により報知してよい。
【００３９】
上記実施形態１では、画像Ｒ２は、事業者に関する関連情報Ｌ２を表示する。しかしながら実施形態６において、画像Ｒ２に表示される関連情報Ｌ２は、事業者に関するものに限らず、任意の施設又は建物に関するものであってよい。
【００４０】
上記実施形態１では、一の撮像画像において検出される位置情報は１つであるが、実施形態７では、同時に複数の位置情報が検出可能である。この場合、コントローラ１１は、複数の位置情報に対応する複数のアイコンを地図上に表示させてよい。
【００４１】
上記実施形態１では、カメラモジュール１の通信部１３がウェブサイトにアクセスするが、実施形態８では、当該アクセス機能は、移動体９が備える別の情報端末により実現されてよい。
【００４２】
上記実施形態１では、カメラモジュール１は移動体９のフロントグリルの近傍に取り付けられる。しかしながら、実施形態９のカメラモジュール１は、例えば、移動体９のヘッドライトの下部等、移動体９の前方を直接撮像可能な任意の位置に取り付けられてよい。
【００４３】
本開示の実施形態１乃至９に係るコントローラ１１をコンピュータで構成することができる。このとき、各機能を実現する処理内容を記述したプログラムを、そのコンピュータの内部又は外部の記憶部に格納し、そのコンピュータの中央演算処理装置（ＣＰＵ）によってこのプログラムを読み出して実行させることでコントローラ１１を実現することができる。また、このようなプログラムは、例えばＤＶＤ（Digital Versatile Disc）またはＣＤ−ＲＯＭ（Compact Disc-Read Only Memory）などの可搬型記録媒体の販売、譲渡、貸与等により流通させることができる。また、そのようなプログラムを、例えばネットワーク上にあるサーバの記憶部に記憶しておき、ネットワークを介してサーバから他のコンピュータにそのプログラムを転送することにより、流通させることができる。また、そのようなプログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムまたはサーバから転送されたプログラムを、一旦、自己の記憶部に記憶することができる。また、このプログラムの別の実施態様として、コンピュータが可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することとしてよい。更に、このコンピュータにサーバからプログラムが転送される度に、逐次、受け取ったプログラムに従った処理を実行することとしてよい。
【符号の説明】
【００４４】
１    カメラモジュール
１１  コントローラ
１２  遠赤外線カメラ
１３  通信部
２    モニタ
８    カメラモニタシステム
９    移動体
【図１】
2018056780.tif 000003
【図２】
2018056780.tif 000004
【図３】
2018056780.tif 000005
【図４】
2018056780.tif 000006
【図５】
2018056780.tif 000007
【図６】
2018056780.tif 000008
【図７】
2018056780.tif 000009
【図８】
2018056780.tif 000010