(57)【要約】【課題】複数の撮像部から得られた情報に基づいて画像を生成する画像生成装置、および画像生成プログラムにおいて、駐車時の支援とドライブレコーダとの両方に利用できるようにする。【解決手段】画像表示システム１において画像処理部１０は、表示画像合成部２３の機能を用いて、複数の画像のうちの少なくとも一部から表示部４１に表示させるための表示画像を生成する。また、記録画像合成部２４の機能を用いて、複数の画像のうちの少なくとも一部から表示画像とは異なる、記録用の記録画像を生成する。  このような画像表示システム１によれば、表示画像と記録画像とを別々に生成するので、表示画像を用いて駐車時の支援を行い、記録画像をドライブレコーダにて記録することができる。よって、画像表示システム１を駐車時の支援とドライブレコーダとの両方に利用することができる。【選択図】図１
2014089513.tif 000002
【特許請求の範囲】
【請求項１】
車両に搭載され、複数の撮像部（３１〜３５）から得られた情報に基づいて画像を生成する画像生成装置（１０）であって、
前記複数の画像のうちの少なくとも一部から表示部（４１）に表示するための表示画像を生成する表示画像生成手段（２３）と、
前記複数の画像のうちの少なくとも一部から前記表示画像とは異なる、記録用の記録画像を生成する記録画像生成手段（２４）と、
を備えたことを特徴とする画像生成装置。
【請求項２】
請求項１に記載の画像生成装置において、
前記記録画像生成手段は、前記表示画像よりも画像内に含まれる領域が広い記録画像を生成すること
を特徴とする画像生成装置。
【請求項３】
請求項２に記載の画像生成装置において、
前記記録画像生成手段は、ある撮像部から入力される撮像画像をそのまま取り込んだ原画像を含む画像を記録画像として生成すること
を特徴とする画像生成装置。
【請求項４】
請求項１〜請求項３の何れか１項に記載の画像生成装置において、
前記記録画像生成手段は、自車両の進行方向が撮像された画像を含む記録画像を生成すること
を特徴とする画像生成装置。
【請求項５】
請求項１〜請求項４の何れか１項に記載の画像生成装置において、
前記表示画像生成手段は、自車両の走行状態または走行環境に応じて生成する画像態様を変更すること
を特徴とする画像生成装置。
【請求項６】
請求項１〜請求項５の何れか１項に記載の画像生成装置において、
前記記録画像生成手段は、複数の画像が含まれる記録画像を生成し、前記複数の画像のうちの一部の画像は前記表示画像の少なくとも一部であること
を特徴とする画像生成装置。
【請求項７】
請求項１〜請求項６の何れか１項に記載の画像生成装置において、
前記記録画像生成手段は、自車両を上空から見たときの画像を表すトップビュー画像を含む記録画像を生成すること
を特徴とする画像生成装置。
【請求項８】
コンピュータを、請求項１〜請求項７の何れか１項に記載の画像生成装置を構成する各手段として機能させるための画像生成プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の撮像部から得られた情報に基づいて画像を生成する画像生成装置、および画像生成プログラムに関する。
【背景技術】
【０００２】
上記の画像生成装置として、複数の画像から自車両を上空から見たと仮定したトップビュー画像を生成し、駐車時の支援に用いるものが知られている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平０３−０９９９５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで近年では、事故時の画像（事故画像）を記録するドライブレコーダを設置する要求が高まっている。そこで、駐車時の支援に用いるトップビュー画像を事故画像として記録することが考えられるが、トップビュー画像には、信号の灯色等の周囲の様子が含まれないことが多く、事故の状況を把握するためには適さないという問題点があった。
【０００５】
そこで、このような問題点を鑑み、複数の撮像部から得られた情報に基づいて画像を生成する画像生成装置、および画像生成プログラムにおいて、駐車時の支援とドライブレコーダとの両方に利用できるようにすることを本発明の目的とする。
【課題を解決するための手段】
【０００６】
かかる目的を達成するために成された画像生成装置において、表示画像生成手段は、複数の画像のうちの少なくとも一部から表示部に表示するための表示画像を生成する。また、記録画像生成手段は、複数の画像のうちの少なくとも一部から表示画像とは異なる、記録用の記録画像を生成する。
【０００７】
このような画像生成装置によれば、表示画像と記録画像とを別々に生成するので、表示に適した表示画像を用いて駐車時の支援を行い、記録に適した記録画像をドライブレコーダの機能にて記録することができる。よって、画像生成装置を駐車時の支援とドライブレコーダの機能との両方に利用することができる。
【０００８】
なお、本発明の画像生成装置においては、一時的に表示画像と記録画像とが同一となったとしても、表示画像と記録画像とが異なる時期があれば構わない。また、表示画像および記録画像のうちの少なくとも一方の画像が、複数の撮像部から得られた画像を合成したものであってもよい。
【０００９】
さらに、上記目的を達成するためには、コンピュータを、画像生成装置を構成する各手段として機能させるための画像生成プログラムとしてもよい。また、各請求項の記載は、可能な限りにおいて任意に組み合わせることができる。この際、発明の目的を達成できる範囲内において一部構成を除外してもよい。
【図面の簡単な説明】
【００１０】
【図１】本発明が適用された画像表示システム１の概略構成を示すブロック図である。
【図２】画像処理部１０のＣＰＵ１１が実行する画像生成処理を示すフローチャートである。
【図３】画像生成処理のうちの画像選択処理を示すフローチャートである。
【図４】表示画像と記録画像との組み合わせの一例を示す説明図である。
【発明を実施するための形態】
【００１１】
以下に本発明にかかる実施の形態を図面と共に説明する。
［本実施形態の構成］
本発明が適用された画像表示システム１は、例えば乗用車等の車両に搭載されており、複数の撮像画像に基づいて、表示用に利用される表示画像と、記録用に利用される記録画像とを生成する機能を有する。詳細には、図１に示すように、画像表示システム１は、複数のカメラ３１〜３５と、画像処理部１０と、表示部４１と、記録部４２とを備えている。
【００１２】
複数のカメラ３１〜３５としては、自車両の後方を撮像範囲とするリアカメラ３１、自車両の左側および右側をそれぞれ撮像範囲とする左カメラ３２および右カメラ３３、自車両の前方を撮像範囲とするフロントカメラ３４およびナイトビューカメラ３５を備えている。なお、ナイトビューカメラ３５はフロントカメラ３４と概ね同様の撮像範囲を有するが、フロントカメラ３４とは異なり暗視カメラとしての機能を有する。
【００１３】
また、リアカメラ３１、左カメラ３２、右カメラ３３、およびフロントカメラ３４による撮像範囲は一部が重複し、これらのカメラからの画像を組み合わせることで、自車両全周の画像が得られるよう設定されている。
【００１４】
次に、表示部４１は周知のディスプレイとして構成されている。この表示部４１は、画像処理部１０によって生成された表示画像を表示させる。
記録部４２は、画像を記録可能な周知のレコーダとして構成されている。記録部４２は、画像処理部１０によって生成された記録画像を記録する。なお、記録部４２は、所定時間分（例えば１時間程度）の画像を記録可能であり、所定時間分の画像を記録後は古い画像から順に上書きする。
【００１５】
画像処理部１０は、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３等を備えた周知のコンピュータとして構成されている。画像処理部１０のＣＰＵ１１は、ＲＯＭ１２等に記録されたプログラム（画像生成プログラムを含む）に基づいて、後述する画像生成処理等の各種処理を実施する。
【００１６】
画像処理部１０は、ＣＰＵ１１が実行する処理として、状況推定部２１、画像入力・変換部２２、表示画像合成部２３、および記録画像合成部２４としての機能を備えている。状況推定部２１としての機能では、自車両に設けられた各種センサから、シフトレンジ（シフトポジション）の情報、車速の情報、照度センサによる車両周囲の明るさの情報、ユーザによる操作の情報等を受け、自車両の走行状態や走行環境を推定し、どのような画像を生成するかを選択する。
【００１７】
また、画像入力・変換部２２としての機能では、表示または記録する画像の選択結果に基づいて、これらの画像を生成するために必要な画像を入力し、自車両を上空から見たときの画像を表すトップビュー画像や後方パノラマ画像等、加工が必要な画像を生成する。なお、トップビュー画像は、自車両の全周を撮像範囲とする複数のカメラ３１〜３４による画像の組み合わせから得られる画像であり、この画像を得るための処理は周知技術である。また、後方パノラマ画像は、リアカメラ３１、左カメラ３２、および右カメラ３３による撮像画像を組み合わせることで自車両の側方から後方を撮像範囲とする画像であり、この画像を得るための処理についても周知技術である。
【００１８】
表示画像合成部２３および記録画像合成部２４としての機能では、画像入力・変換部２２の機能で取得または生成した複数の画像のうちから、１または複数の画像を選択し、表示または記録するための画像を生成する。そして、表示画像合成部２３の機能は生成した画像を表示部４１に出力し、記録画像合成部２４の機能は生成した画像を記録部４２に出力する。
【００１９】
［本実施形態の処理］
このように構成された画像表示システム１において、画像処理部１０（ＣＰＵ１１）は、図２に示す画像生成処理を実施する。画像生成処理は、例えば車両の電源が投入されると開始される処理である。
【００２０】
画像生成処理では、図２に示すように、まず、カメラ３１〜３５による撮像画像を取得する（Ｓ１１０）。そして、状況推定部２１として機能を利用して画像選択処理を実施する（Ｓ１３０）。画像選択処理は、自車両の走行状態または走行環境に応じて生成する画像態様を設定する処理である。
【００２１】
詳細には、図３に示すように、まず、シフトポジションがＲ（リバース）であるか否かを判定する（Ｓ２１０）。シフトポジションがＲであれば（Ｓ２１０：ＹＥＳ）、低速取り回し（後退）を選択し（Ｓ２２０）、画像選択処理を終了する。
【００２２】
シフトポジションがＲでなければ（Ｓ２１０：ＮＯ）、自車両の速度が低速であるか否かを判定する（Ｓ２３０）。ここで、「低速」とは、自車両がすれ違いや駐車のために速度を落として走行していることを示し、例えば時速３０ｋｍ／ｈ未満の状態を示す。
【００２３】
自車両の速度が低速であれば（Ｓ２３０：ＹＥＳ）、低速取り回し（前進）を選択し（Ｓ２４０）、画像選択処理を終了する。自車両の速度が低速でなければ（Ｓ２３０：ＮＯ）、ヘッドライトおよびナイトビューカメラ３５を使用する旨のナイトビュースイッチがオンされているか否かを判定する（Ｓ２５０）。
【００２４】
ヘッドライトおよびナイトビューカメラ３５がオンされていれば（Ｓ２５０：ＹＥＳ）、中・高速走行（夜間）を選択し（Ｓ２６０）、画像選択処理を終了する。また、ヘッドライトまたはナイトビューカメラ３５がオフであれば（Ｓ２５０：ＮＯ）、中・高速走行（昼間）を選択し（Ｓ２７０）、画像選択処理を終了する。
【００２５】
このような画像選択処理が終了すると、図２に戻り、画像入力・変換部２２および表示画像合成部２３としての機能を利用して、表示画像を合成し（Ｓ１４０）、表示画像を表示部４１に出力する（Ｓ１５０）。また、画像入力・変換部２２および記録画像合成部２４としての機能を利用して、記録画像を合成し（Ｓ１６０）、記録画像を記録部４２に出力する（Ｓ１７０）。
【００２６】
ここで、Ｓ１４０およびＳ１６０の処理について生成される具体的な画像態様について以下に説明する。
画像選択処理において低速取り回し（後退）が選択された場合には、図４に示すように、表示画像合成部２３および記録画像合成部２４の機能では、トップビュー画像およびフロントカメラ３４の画像を並べた画像を生成する。また、画像選択処理において低速取り回し（前進）が選択された場合には、表示画像合成部２３および記録画像合成部２４の機能では、トップビュー画像およびリアカメラ３１の画像を並べた画像を生成する。低速移動時には、進行方向および車両の周囲を確認しながら車両を移動することが好ましいため、運転者を支援するため、および記録するために、このようにトップビュー画像および進行方向の画像を生成する。
【００２７】
なお、低速取り回し（前進）および低速取り回し（後退）が選択された場合には、本実施形態では表示画像合成部２３および記録画像合成部２４の機能を利用して同様の画像を生成するよう説明したが、例えば、記録画像合成部２４の機能では記録画像に含まれるトップビュー画像の占める面積の割合を表示画像よりも大きくするなど、表示画像とは異なる画像を生成してもよい。このとき、画像入力・変換部２２の機能を用いて準備した表示画像のための画像と共通の画像を記録画像に採用することで、処理負荷の軽減を図っている。
【００２８】
また、画像選択処理において中・高速走行（昼間）が選択された場合には、表示画像合成部２３の機能では、後方パノラマ画像を生成し、記録画像合成部２４の機能では後方パノラマ画像よりも画角（画像に表示される範囲）が広いトップビュー画像およびフロントカメラ３４の画像を並べた画像を生成する。
【００２９】
自車両の速度が比較的速いときは、高速移動時に確認しづらくなる後方の画像を表示画像として生成することで運転支援をする。また、記録画像としては進行方向が含まれる画像を採用する。
【００３０】
さらに、画像選択処理において中・高速走行（夜間）が選択された場合には、表示画像合成部２３の機能では、ナイトビューカメラ３５による画像をそのまま取得した原画像を生成し、記録画像合成部２４の機能ではトップビュー画像およびフロントカメラ３４の画像を並べた画像を生成する。このとき、記録画像としては、トップビュー画像およびナイトビューカメラ３５による画像としてもよい。
【００３１】
［本実施形態による効果］
以上のように詳述した画像表示システム１において画像処理部１０は、表示画像合成部２３の機能を用いて、複数の画像のうちの少なくとも一部から表示部４１に表示させるための表示画像を生成する。また、記録画像合成部２４の機能を用いて、複数の画像のうちの少なくとも一部から表示画像とは異なる、記録用の記録画像を生成する。
【００３２】
このような画像表示システム１によれば、表示画像と記録画像とを別々に生成するので、表示画像を用いて駐車時の支援を行い、記録画像をドライブレコーダの機能にて記録することができる。よって、画像表示システム１を駐車時の支援とドライブレコーダの機能との両方に利用することができる。
【００３３】
また、上記画像表示システム１において画像処理部１０は、表示画像よりも画像内に含まれる領域が広い記録画像を生成する。
このような画像処理部１０によれば、より撮像範囲の広い画像を撮像画像として記録することができる。よって、自車両が他の物体と衝突する場合、他の物体の接近方向等の周辺状況を良好に記録することができる。
【００３４】
さらに、上記画像表示システム１において画像処理部１０は、あるカメラ３１〜３５から入力される撮像画像をそのまま取り込んだ原画像（撮像画像の一部領域を削除していない画像）を含む画像を記録画像として生成する。
【００３５】
このような画像処理部１０によれば、カメラ３１〜３５からの撮像画像に含まれる全領域を利用する原画像を含む画像を記録画像として生成するので、より広範囲が撮像された画像を生成することができる。
【００３６】
また、上記画像表示システム１において画像処理部１０は、自車両の進行方向が撮像された画像を含む記録画像を生成する。
このような画像処理部１０によれば、自車両の進行方向を確実に記録画像に含むことができる。
【００３７】
さらに、上記画像表示システム１において画像処理部１０は、自車両の走行状態または走行環境に応じて生成する画像態様を変更する。
このような画像処理部１０によれば、自車両の走行状態または走行環境に応じて最適な画像を生成することができる。
【００３８】
また、上記画像表示システム１において画像処理部１０は、複数の画像が含まれる記録画像を生成し、複数の画像のうちの一部の画像は表示画像の少なくとも一部としている。
このような画像処理部１０によれば、表示画像の一部をそのまま記録画像にも利用するので、記録画像を生成する際の処理負荷を軽減することができる。
【００３９】
さらに、上記画像表示システム１において画像処理部１０は、トップビュー画像を含む記録画像を生成する。
このような画像処理部１０によれば、自車両が他の物体に接近する際に、トップビュー画像を生成して記録することができるので、記録画像から他の物体の接近方向を容易に特定することができる。
【００４０】
［その他の実施形態］
本発明の実施の形態は、上記の実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の形態を採りうる。
【００４１】
例えば、上記実施形態において、Ｓ１４０〜Ｓ１５０の処理、およびＳ１６０〜Ｓ１７０の処理を並列で実施したが、これらの処理を直列で実施してもよい。また、中・高速走行（夜間）を選択した場合には、周囲の明るさや通常のカメラ（フロントカメラ３４）の認識性に応じて記録用に採用する画像を変更するようにしてもよい。
【００４２】
［本実施形態の構成と本発明の構成との対応関係］
本実施形態における画像処理部１０は本発明でいう画像生成装置に相当し、本実施形態におけるカメラ３１〜３５は本発明でいう撮像部に相当する。また、本実施形態における表示画像合成部２３は本発明でいう表示画像生成手段に相当し、本実施形態における記録画像合成部２４は本発明でいう記録画像生成手段に相当する。
【符号の説明】
【００４３】
１…画像表示システム、１０…画像処理部、１１…ＣＰＵ、１２…ＲＯＭ、１３…ＲＡＭ、２１…状況推定部、２２…画像入力・変換部、２３…表示画像合成部、２４…記録画像合成部、３１…リアカメラ、３２…左カメラ、３３…右カメラ、３４…フロントカメラ、３５…ナイトビューカメラ、４１…表示部、４２…記録部。
【図１】
2014089513.tif 000003
【図２】
2014089513.tif 000004
【図３】
2014089513.tif 000005
【図４】
2014089513.tif 000006