(57)【要約】【課題】見たい動画の内容を容易に確認することができる技術を提供する。【解決手段】  情報処理装置７は、動画生成部３１と、表示制御部３３と、入力検出部３５と、を備える。動画生成部３１は、少なくとも複数の動画を合成した動画である合成動画１０１を生成する。表示制御部３３は、動画を表示可能である表示部５に動画を表示させる。入力検出部３５は、表示部５に表示された合成動画上の位置及び合成動画１０１を基準とした方向のうちの少なくともいずれか一方を入力する入力操作を実行可能である入力装置５に対する入力操作を検出する。また上記表示制御部３３は、合成動画１０１を構成する複数の動画のうちの入力検出部３５により検出された入力に応じた１つ以上の動画に基づく動画であって、少なくとも合成動画１０１とは異なる表示態様である動画を、表示部５に表示させる。【選択図】図１
2017143340.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも複数の動画を合成した動画である合成動画（１０１、１４１ａ、１５１）を生成する動画生成部（３１）と、
動画を表示可能である表示部（５）に動画を表示させる表示制御部（３３）と、
前記表示部に表示された前記合成動画上の位置及び前記合成動画を基準とした方向のうちの少なくともいずれか一方を入力する入力操作を実行可能である入力装置（５）に対する前記入力操作を検出する入力検出部（３５）と、を備え、
前記表示制御部は、前記合成動画を構成する前記複数の動画のうちの前記入力検出部により検出された前記入力に応じた１つ以上の動画に基づく動画であって、少なくとも前記合成動画とは異なる表示態様である動画（１２１、１２３、１２５、１２７、１４１ｂ）を、前記表示部に表示させる、情報処理装置（７）。
【請求項２】
請求項１に記載の情報処理装置であって、
前記表示制御部は、前記複数の動画のうち前記入力検出部により検出された前記入力に応じた前記合成動画の一部を構成する１つ以上の動画に基づく動画である個別動画を、前記表示部に表示させる、情報処理装置。
【請求項３】
請求項２に記載の情報処理装置であって、
前記複数の動画のうち、前記入力検出部により検出された前記入力に応じて定まる２つ以上の動画を合成する画像合成部（３７）を備え、
前記個別動画は、前記画像合成部により合成された動画を含む、情報処理装置。
【請求項４】
請求項２又は請求項３に記載の情報処理装置であって、
前記合成動画は、該合成動画を構成する前記複数の動画それぞれに対応する該合成動画上の範囲が設定されており、
前記入力装置は、前記合成動画上の位置を入力する入力操作が実行可能に構成されており、
前記個別動画は、前記複数の動画のうち、前記入力検出部により検出された前記位置に対応する１つ以上の動画に基づく動画である、情報処理装置。
【請求項５】
請求項１から請求項４までのいずれか１項に記載の情報処理装置であって、
前記複数の動画は、車両に搭載される複数のカメラにより撮影された動画である、情報処理装置。
【請求項６】
コンピュータを、
少なくとも複数の動画を合成した動画である合成動画（１０１、１４１ａ）を生成する動画生成部（３１）、
動画を表示可能である表示部（５）に動画を表示させる表示制御部（３３）、
前記表示部に表示された前記合成動画上の位置及び前記合成動画を基準とした方向のうちの少なくともいずれか一方を入力する入力操作を実行可能である入力装置（５）に対する前記入力操作を検出する入力検出部（３５）、として機能させるプログラムであって、
前記表示制御部は、前記合成動画を構成する前記複数の動画のうちの前記入力検出部により検出された前記入力に応じた１つ以上の動画に基づく動画であって、少なくとも前記合成動画とは異なる表示態様である動画（１２１、１２３、１２５、１２７、１４１ｂ）を、前記表示部に表示させる、プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両の周辺を撮影して表示する技術に関する。
【背景技術】
【０００２】
車両に搭載されたカメラにて撮影された動画を記録しておき、後に再生する技術が知られている。例えば、特許文献１では、撮影した動画を構成する静止画に時刻とＧＰＳ信号とを関連付けて記録する技術が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第５３２４７２２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
車両に備えられた複数のカメラにより同時に動画を撮影した場合などには、関連する複数の動画が存在することとなる。これらの動画を再生する際には、例えばファイル名に基づいて動画を個別に選択して再生する方法が考えられるが、その場合は、各動画の内容がどのようなものであるのかが感覚的に分かりにくいという問題があった。
【０００５】
本発明は、見たい動画の内容を容易に確認することができる技術を提供することを目的としている。
【課題を解決するための手段】
【０００６】
本開示の第１の局面は、動画生成部（３１）と、表示制御部（３３）と、入力検出部（３５）と、を備える情報処理装置（７）である。
動画生成部は、少なくとも複数の動画を合成した動画である合成動画（１０１、１４１ａ）を生成する。表示制御部は、動画を表示可能である表示部（５）に動画を表示させる。入力検出部は、表示部に表示された合成動画上の位置及び合成動画を基準とした方向のうちの少なくともいずれか一方を入力する入力操作を実行可能である入力装置（５）に対する入力操作を検出する。
【０００７】
そして、上記表示制御部は、合成動画を構成する複数の動画のうちの入力検出部により検出された入力に応じた１つ以上の動画に基づく動画であって、少なくとも上記合成動画とは異なる表示態様である動画（１２１、１２３、１２５、１２７、１４１ｂ）を、表示部に表示させる。
【０００８】
このような構成によれば、複数の動画により構成される合成動画が表示された状態から、ユーザの操作に応じて、少なくとも１つの動画に基づく動画が表示される。よってユーザは、合成動画を構成する動画に含まれる、ユーザが見たい動画の内容を容易に確認することができる。
【０００９】
本開示の第２の局面は、コンピュータを、動画生成部（３１）、表示制御部（３３）、入力検出部（３５）、として機能させるプログラムである。動画生成部、表示制御部、入力検出部の構成は、上述した第１の局面と同様の構成である。
【００１０】
このような構成によれば、コンピュータに、上述した第１の局面の情報処理装置と同様の機能を発揮させることができる。
なお、この欄及び特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本発明の技術的範囲を限定するものではない。
【図面の簡単な説明】
【００１１】
【図１】画像処理システムの構成を示すブロック図である。
【図２】画像表示処理のフローチャートである。
【図３】第１実施形態の合成動画を示す図である。
【図４】タッチ入力処理のフローチャートである。
【図５】フロントレフト映像を示す図である。
【図６】フロント映像を示す図である。
【図７】レフト映像を示す図である。
【図８】ライト映像を示す図である。
【図９】バック映像を示す図である。
【図１０】第２実施形態の合成動画を示す図である。
【図１１】第２実施形態の合成動画であって、表示態様を変化させた状態を示す図である。
【図１２】他の実施形態の合成動画を示す図である。
【発明を実施するための形態】
【００１２】
以下、図面を参照しながら、発明を実施するための形態を説明する。
［１．第１実施形態］
［１−１．構成］
画像処理システム１は自動車等の車両に搭載されて用いられるシステムであって、図１に示すように、車両に搭載される４つのカメラである前カメラ３ａ，後カメラ３ｂ，左カメラ３ｃ，及び右カメラ３ｄと、タッチパネル５と、Ｅｌｅｃｔｒｏｎｉｃ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ（以下、ＥＣＵ）７と、を備えている。以下の説明において、上記４つのカメラ全てを指すときには単にカメラ３と記載する。なおＥＣＵ７が、情報処理装置の一例である。
【００１３】
画像処理システム１は、カメラ３にて撮影された車両周辺の画像を合成した合成動画を生成し、タッチパネル５にその合成動画を表示させることによって合成動画の再生を実現する。
【００１４】
カメラ３は、車両に設けられた撮像装置であって、例えば公知のＣＣＤイメージセンサやＣＭＯＳイメージセンサなどを用いることができる。各カメラは所定の時間間隔（一例として１／１５ｓ）で車両周辺を撮影し、撮影した撮影画像をＥＣＵ７に出力する。前カメラ３ａ，後カメラ３ｂ，左カメラ３ｃ，右カメラ３ｄは、それぞれ、車両の前方、後方、左方、右方を撮影するように配置されている。
【００１５】
タッチパネル５は、画像を表示可能な液晶や有機ＥＬなどの表示画面を有する表示装置と、その表示画面に重ねて配置される光を透過する入力装置と、を有する一般的なタッチパネル装置であり、ＥＣＵ７から入力される信号に従って表示装置が画像を表示するとともに、入力装置に対するユーザの入力操作を受け付け、入力信号としてＥＣＵ７に出力する。なお、このタッチパネル５が表示部及び入力装置に相当する。
【００１６】
ＥＣＵ７は、カメラ入力信号処理部１１、タッチパネル入力信号処理部１２、出力信号処理部１３、画像処理部１４を有する。
カメラ入力信号処理部１１は、カメラ３から入力される撮影画像のアナログ信号をデジタル信号に変換して画像処理部１４に出力する。
【００１７】
タッチパネル入力信号処理部１２は、タッチパネル５から入力される入力信号をデジタル信号に変換して画像処理部１４に出力する。
出力信号処理部１３は、画像処理部１４から出力された画像データのデジタル信号をアナログ信号に変換し、タッチパネル５に出力する。タッチパネル５は、受信した信号に基づいて画像を表示する。
【００１８】
画像処理部１４は、ＣＰＵ２１と、ＲＡＭ、ＲＯＭ、フラッシュメモリ等の半導体メモリ（以下、メモリ２３）と、を有する周知のマイクロコンピュータを中心に構成される。画像処理部１４の各種機能は、ＣＰＵ２１が非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、メモリ２３が、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムの実行により、プログラムに対応する方法が実行される。なお、画像処理部１４を構成するマイクロコンピュータの数は１つでも複数でもよい。
【００１９】
カメラ入力信号処理部１１から入力された動画データは、メモリ２３に格納され、合成動画や後述する個別動画を生成するときに使用される。
画像処理部１４は、ＣＰＵ２１がプログラムを実行することで実現される機能の構成として、図１に示すように、動画生成部３１と、表示制御部３３と、入力検出部３５と、画像合成部３７と、を備える。画像処理部１４を構成するこれらの要素を実現する手法はソフトウェアに限るものではなく、その一部又は全部の要素を、論理回路やアナログ回路等を組み合わせたハードウェアを用いて実現してもよい。
【００２０】
動画生成部３１は、少なくとも複数の動画を合成した動画である合成動画を生成する。合成動画は、複数の動画のみを合成して生成されるものであってもよいし、動画以外の画像が含まれていてもよい。
【００２１】
本実施形態において、動画とは、複数の静止画像を連続的に切り換えることで静止画像の変化に応じた動きを表現することのできる、複数の静止画像から構成される映像を意味する。また合成動画とは、複数の動画に含まれる静止画像同士を合成して新たな静止画像を生成し、その生成された複数の静止画像から構成される動画を意味する。
【００２２】
なお、合成動画を構成する複数の動画は、カメラ３により過去に撮影されてメモリ２３に保存されている動画であってもよいし、カメラ３により撮影中の動画であってもよい。
表示制御部３３は、表示すべき画像を示す制御信号をタッチパネル５に出力して、タッチパネル５に動画を表示させる。
【００２３】
入力検出部３５は、タッチパネル５におけるユーザの指などによりタッチされた位置を検出するとともに、その位置の変化を検出する。即ち、所謂タップやフリックなどの操作を検出する。これにより、タッチパネル５に表示された合成動画上の位置及び合成動画１０１を基準とした方向を入力する入力操作を検出する。
【００２４】
本実施例において、タッチパネル５は、タッチされた位置を０≦Ｘ≦２４０、０≦Ｙ≦３６０の範囲の座標で特定する。以下の説明において、タッチされた位置をタッチ座標とも記載する。
【００２５】
画像合成部３７は、合成動画を構成する複数の動画、即ち４つのカメラ３により撮影された４つ動画のうち、入力検出部３５により検出された入力に応じて定まる２つ以上の動画を合成する。
【００２６】
また、上述した表示制御部３３は、合成動画を構成する複数の動画のうちの入力検出部３５により検出されたタッチパネル５への入力に応じた１つ以上の動画に基づく動画であって、少なくとも上記合成動画とは異なる表示態様である動画である個別動画を、タッチパネル５に表示させる。
【００２７】
個別動画とは、合成動画を構成する複数の動画のうちの一部の動画であって、入力検出部３５により検出された入力に応じた１つ以上の動画に基づく動画である。ここでいう、１つ以上の動画に基づく動画、とは、１つ以上の動画を材料とした動画であって、材料となる動画そのものや、材料となる動画の視点を変換したり、複数の動画を合成したりする画像処理が施されたものなどが該当する。本実施形態では、個別動画には、４つのカメラ３により撮影されたそれぞれの動画と、画像合成部３７により合成された動画と、が含まれる。
【００２８】
［１−２．処理］
次に、画像処理部１４のＣＰＵ２１が実行する画像表示処理について、図２のフローチャートを用いて説明する。
【００２９】
まずＳ１では、ＣＰＵ２１は、タッチパネル５に車両の周辺を示す鳥瞰図の動画を再生する。ここで表示される動画を、図３を用いて説明する。
鳥瞰図である合成動画１０１は、画像処理システム１が搭載された車両１０３の上方の視点から車両１０３を真下に見下ろした画像から構成される動画である。この合成動画１０１は、４つのカメラ３により撮影された異なる視点の動画を１つの視点の動画に合成したものである。なお、車両１０３自体はカメラによって撮影されないため、予め準備された画像が合成に用いられる。
【００３０】
この合成動画１０１は、破線で区切られた９つの領域に分けられる。合成動画１０１において、車両１０３の左前方を第１領域１１１とし、車両１０３の中央前方を第２領域１１２とし、車両１０３の右前方を第３領域１１３とし、車両１０３の左方を第４領域１１４とし、車両１０３の中央部分を第５領域１１５とし、車両１０３の右方を第６領域１１６とし、車両１０３の左後方を第７領域１１７とし、車両１０３の中央後方を第８領域１１８とし、車両１０３の右後方を第９領域１１９とする。
【００３１】
合成動画１０１は、合成動画１０１を構成する複数の動画それぞれに対応する合成動画１０１上の範囲が設定されている。具体的には、前カメラ３ａにより撮影された動画には第１領域１１１、第２領域１１２、第３領域１１３が対応付けられており、後カメラ３ｂにより撮影された動画には第７領域１１７、第８領域１１８、第９領域１１９が対応付けられており、左カメラ３ｃにより撮影された動画には第１領域１１１、第４領域１１４、第７領域１１７が対応付けられており、右カメラ３ｄにより撮影された動画には第３領域１１３、第６領域１１６、第９領域１１９が対応付けられている。
【００３２】
Ｓ２では、ＣＰＵ２１は、タッチパネル５にタッチ入力がなされるまで待機する。タッチ入力がなされれば、処理がＳ３に移行する。
Ｓ３では、ＣＰＵ２１は、タッチ入力処理を実行する。タッチ入力処理について、図４のフローチャートを用いて説明する。
【００３３】
まずＳ１１では、ＣＰＵ２１は、タッチ座標のＹの値が２４０＜Ｙを満たすか否かを判定する。Ｙの値が２４０＜Ｙを満たせば、処理がＳ１２に移行する。一方、Ｙの値が２４０＜Ｙを満たさなければ、処理がＳ１７に移行する。
【００３４】
Ｓ１２では、ＣＰＵ２１は、タッチ座標のＸの値がＸ≦８０を満たすか否かを判定する。Ｘの値がＸ≦８０を満たせば、即ちタッチ座標が第１領域１１１に位置していれば、処理がＳ１３に移行する。一方、Ｘの値がＸ≦８０を満たさなければ、処理がＳ１４に移行する。
【００３５】
Ｓ１３では、ＣＰＵ２１は、個別動画の一例であるフロントレフト映像を合成してタッチパネル５に表示させる。図５に示すように、フロントレフト映像１２１は、前カメラ３ａと左カメラ３ｃとにより撮影された動画を合成した動画であって、第１領域１１１に対応する動画である。つまり、図３における第１領域１１１をタップすることで、その部分を拡大して合成された動画が合成動画１０１に代えてタッチパネル５に表示される。このＳ１２の後、本処理を終了する。本処理が終了したときに、図４の画像表示処理も同時に終了する。以下の説明においても同様である。
【００３６】
なおフロントレフト映像１２１は、それまで表示されていた合成動画１０１の続きとなるタイミングから表示される構成としてもよいし、動画の最初や一定時間前のタイミングから表示される構成としてもよい。このことは以下の個別動画においても同様である。
【００３７】
説明を図４に戻る。Ｓ１４では、ＣＰＵ２１は、タッチ座標のＸの値が８０＜Ｘ≦１６０を満たすか否かを判定する。Ｘの値が８０＜Ｘ≦１６０を満たせば、即ちタッチ座標が第２領域１１２に位置していれば、処理がＳ１５に移行する。一方、Ｘの値が８０＜Ｘ≦１６０を満たさなければ、即ちタッチ座標が第３領域１１３に位置していれば、処理がＳ１６に移行する。
【００３８】
Ｓ１５では、ＣＰＵ２１は、個別動画の一例であるフロント映像をタッチパネル５に表示させる。図６に示すように、フロント映像１２３は、前カメラ３ａにより撮影された動画であって、第２領域１１２に対応する動画である。つまり、図３における第２領域１１２をタップすることで、その部分を拡大し、またより前方まで表示される動画が合成動画１０１に代えて表示される。このＳ１５の後、本処理を終了する。
【００３９】
Ｓ１６では、ＣＰＵ２１は、個別動画の一例であるフロントライト映像をタッチパネル５に表示させる。フロントライト映像は、図示しないが、前カメラ３ａと右カメラ３ｄとにより撮影された動画を合成した動画であって、第３領域１１１に対応する動画である。このＳ１６の後、本処理を終了する。
【００４０】
Ｓ１７では、ＣＰＵ２１は、タッチ座標のＹの値が１２０＜Ｙ≦２４０を満たすか否かを判定する。Ｙの値が１２０＜Ｙ≦２４０を満たせば、処理がＳ１８に移行する。一方、Ｙの値が１２０＜Ｙ≦２４０を満たさなければ、つまりＹ＜２４０であれば、処理がＳ２３に移行する。
【００４１】
Ｓ１８では、ＣＰＵ２１は、タッチ座標のＸの値がＸ≦８０を満たすか否かを判定する。Ｘの値がＸ≦８０を満たせば、即ちタッチ座標が第４領域１１４に位置していれば、処理がＳ１９に移行する。一方、Ｘの値がＸ≦８０を満たさなければ、処理がＳ２０に移行する。
【００４２】
Ｓ１９では、ＣＰＵ２１は、個別動画の一例であるレフト映像をタッチパネル５に表示させる。図７に示すように、レフト映像１２５は、左カメラ３ｃにより撮影された動画であって、第４領域１１４に対応する動画である。つまり、図３における第４領域１１４をタップすることで、その部分を拡大した動画が合成動画１０１に代えて表示される。このＳ１９の後、本処理を終了する。
【００４３】
Ｓ２０では、ＣＰＵ２１は、タッチ座標のＸの値が８０＜Ｘ≦１６０を満たすか否かを判定する。Ｘの値が８０＜Ｘ≦１６０を満たせば、即ちタッチ座標が第５領域１１５に位置していれば、処理がＳ２１に移行する。一方、Ｘの値が８０＜Ｘ≦１６０を満たさなければ、即ちタッチ座標が第６領域１１６に位置していれば、処理がＳ２２に移行する。
【００４４】
Ｓ２１では、ＣＰＵ２１は、個別動画の一例である拡大映像を表示する。拡大映像とは、図３の合成動画１０１と視点の方向は同じであるが、縮尺を大きくして車両１０３の周辺を合成動画１０１よりも遠くまで表示した動画である。このＳ２１の後、本処理を終了する。
【００４５】
Ｓ２２では、ＣＰＵ２１は、個別動画の一例であるライト映像をタッチパネル５に表示させる。図８に示すように、ライト映像１２７は、右カメラ３ｄにより撮影された動画であって、第６領域１１６に対応する動画である。つまり、図３における第６領域１１６をタップすることで、その部分を拡大した動画が合成動画１０１に代えて表示される。このＳ２２の後、本処理を終了する。
【００４６】
Ｓ２３では、ＣＰＵ２１は、タッチ座標のＸの値がＸ≦８０を満たすか否かを判定する。Ｘの値がＸ≦８０を満たせば、即ちタッチ座標が第７領域１１７に位置していれば、処理がＳ２４に移行する。一方、Ｘの値がＸ≦８０を満たさなければ、処理がＳ２５に移行する。
【００４７】
Ｓ２４では、ＣＰＵ２１は、個別動画の一例であるバックレフト映像をタッチパネル５に表示させる。バックレフト映像は、図示しないが、後カメラ３ｂと左カメラ３ｃとにより撮影された動画を合成した動画であって、第７領域１１７に対応する動画である。このＳ２４の後、本処理を終了する。
【００４８】
Ｓ２５では、ＣＰＵ２１は、タッチ座標のＸの値が８０＜Ｘ≦１６０を満たすか否かを判定する。Ｘの値が８０＜Ｘ≦１６０を満たせば、即ちタッチ座標が第８領域１１８に位置していれば、処理がＳ２６に移行する。一方、Ｘの値が８０＜Ｘ≦１６０を満たさなければ、即ちタッチ座標が第９領域１１９に位置していれば、処理がＳ２７に移行する。
【００４９】
Ｓ２６では、ＣＰＵ２１は、個別動画の一例であるバック映像をタッチパネル５に表示させる。図９に示すように、バック映像１２９は、後カメラ３ｂにより撮影された動画であって、第８領域１１８に対応する動画である。つまり、図３における第８領域１１８をタップすることで、その部分を拡大し、またより後方まで表示される動画が合成動画１０１に代えて表示される。このＳ２６の後、本処理を終了する。
【００５０】
Ｓ２７では、ＣＰＵ２１は、バックライト映像をタッチパネル５に表示させる。バックライト映像は、図示しないが、後カメラ３ｂと右カメラ３ｄとにより撮影された動画を合成した動画であって、第９領域１１９に対応する動画である。このＳ２７の後、本処理を終了する。
【００５１】
［１−３．効果］
以上詳述した第１実施形態によれば、以下の効果が得られる。
（１ａ）画像処理システム１では、複数の動画に基づいて構成される合成動画１０１が表示されることで、ユーザは複数の動画を同時に確認することができる。そして、ユーザがタッチパネル５にタッチして合成動画１０１上の範囲を指定することで、合成動画１０１を構成する動画の一部の動画に基づく個別動画が表示される。よってユーザは、タッチパネル５を操作して、任意のタイミングで、容易に見たい動画の内容を確認することができる。
【００５２】
（１ｂ）個別動画には、合成動画１０１を構成する動画のうちの２つの動画を合成して生成された動画が含まれている。そのため、ユーザにタッチパネル５が操作されたときには、単に合成動画１０１を構成する動画が拡大して表示されるだけでなく、ユーザが見たい範囲をより適切な態様として表示させることができる。
【００５３】
なお、個別動画を構成する動画の数は２つに限定されることは無く、例えば、３つの動画を合成して生成されるものであってもよい。３つの動画を合成した動画の例としては、例えば、車両の前方かつ上方から車両を後方に見下ろした視点の動画が考えられる。
【００５４】
（１ｃ）ユーザがタッチパネル５を操作して合成動画１０１上の任意の位置をタップしたときに、タッチ座標に応じた個別動画が表示される。よって、ユーザは、個別動画が車両を基準としたどの位置の動画であるのかを容易に認識することができる。
【００５５】
［２．第２実施形態］
［２−１．第１実施形態との相違点］
第２実施形態は、基本的な構成は第１実施形態と同様であるため、共通する構成については説明を省略し、相違点を中心に説明する。なお、第１実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
【００５６】
前述した第１実施形態では、タッチパネル５には合成動画１０１を表示し、合成動画１０１上の領域をユーザがタップしたときに、表示される画像が個別動画に切り換えられる構成を例示した。これに対し、第２実施形態では、タッチパネル５への入力操作に応じて合成動画の視点を変更する構成である点で、第１実施形態と相違する。
【００５７】
図１０に示すように、本実施形態の合成動画は、画像処理システム１が搭載された車両１０３の後方かつ上方の視点から、車両１４３を斜め後方に見下ろした画像である三次元ビュー動画１４１ａを示す図である。
【００５８】
この三次元ビュー動画１４１ａは、少なくとも前カメラ３ａ、左カメラ３ｃ、右カメラ３ｄの３つ又は４つのカメラにより撮影された動画、即ち異なる視点の動画を１つの視点の動画に合成したものである。車両１４３自体はカメラ３によって撮影されないため、予め準備された画像が合成に用いられる。
【００５９】
この三次元ビュー動画１４１ａは、タッチパネル５に対して指１４７等によってフリック操作を行うことで、表示される動画の視点が変更する。例えば、左から右にフリック操作を行うと、図１１に示す三次元ビュー動画１４１ｂのように、表示される動画の視点が左側に移動して表示態様が変化し、車両１４３を左から見たような視点となる。
【００６０】
このように本実施形態では、フリック操作を行うことで、車両１４３を見る視点を移動させることができる。つまり、例えば視点を車両１４３の前方かつ上方に移動させることで、三次元ビュー動画は車両の前方かつ上方から車両１４３を後方に見下ろす視点となり、車両１４３の後方を広く視認することができるようになる。また例えば視点を車両１４３の右方に移動させることで、三次元ビュー動画は車両の右方から車両１４３を左に見る視点となり、車両１４３の左方を広く視認することができるようになる。
【００６１】
［２−２．効果］
以上詳述した第２実施形態によれば、以下の効果が得られる。
（２ａ）タッチパネル５に表示される合成動画である三次元ビュー動画１４１ａは、フリック操作により視点を変化させることができる。よって、ユーザは車両１４３を基準として視認したい方向の動画を容易に視認することができるとともに、表示されている動画が車両１４３を基準としてどの方向を示しているのかを容易に把握することができる。
【００６２】
［３．他の実施形態］
以上、本発明を実施するための形態について説明したが、本発明は上述の実施形態に限定されることなく、種々変形して実施することができる。
【００６３】
（３ａ）上記実施形態では、ユーザが入力操作を行う入力装置としてタッチパネル５を例示したが、表示装置に表示された合成動画上の位置及び合成動画を基準とした方向のうちの少なくともいずれか一方を指定する入力操作が実行可能な装置であれば、これに限定されるものではない。なお、合成動画を基準とした方向とは、ユーザが合成動画の表示される表示画面の正面から合成動画を見たときに、そのユーザを基準とした合成動画の上下、左右などの方向である。
【００６４】
このような入力装置としては、例えば、表示装置から離れた位置に設置されたタッチパッドやジョイスティック、方向を指示するボタンなど、様々な装置を採用することができる。
【００６５】
また上述した合成動画上の位置とは、上記実施形態で示したタッチ座標に限定されるものではなく、一定の範囲を示すものであってもよい。例えば、入力装置は、第１領域１１１〜第９領域１１９のいずれかを指定できるように構成されていてもよい。
【００６６】
（３ｂ）上記実施形態では、車両に搭載されたカメラ３により撮影された車両周辺の動画がタッチパネル５に表示される構成を例示したが、車両周辺の動画以外の動画を再生する場合に本発明の構成を適用してもよい。
【００６７】
例えば、複数の防犯カメラにより撮影された動画を合成して合成動画として再生し、ユーザの操作に応じて、所望の位置が個別画像により表示される構成とすることが考えられる。
【００６８】
（３ｃ）上記第１実施形態では、タッチパネル５に合成動画１０１が表示され、タッチパネル５に入力操作を行うことでタッチパネル５に個別動画が表示される構成を例示した。
【００６９】
しかしながら、合成動画が表示される表示装置と、個別動画が表示される表示装置と、は異なる表示装置であってもよい。このように構成することで、合成動画と個別動画とを同時に視認することができる。この場合、それらの２つ以上の表示装置が表示部に相当する。
【００７０】
（３ｄ）カメラ３それぞれの設置される位置、及び、設置されるカメラの数は、上記実施形態の構成に限定されない。複数のカメラは、それぞれ、少なくとも一部が異なる撮影範囲を撮影可能となるように、異なる位置や異なる角度で設けることができる。また、車両の周囲全体を撮影する構成でなく、例えば、車両の前方と左右のみ、又は、車両の後方と左右のみを撮影するように複数のカメラが配置されていてもよい。
【００７１】
（３ｅ）上記第１実施形態では、合成動画として、４つのカメラ３にて撮影された動画を１つの視点の動画に変更した動画を表示する構成を例示したが、合成動画は、１つの視点の動画でなくともよい。
【００７２】
例えば、図１２に示す合成動画１５１は、車両１０３を中心として、各カメラ３の撮影方向と対応する位置に各カメラ３にて撮影された動画を合成した動画である。この合成動画１５１において、フロント映像１２３、レフト映像１２５、ライト映像１２７、バック映像１２９をタップすると、タップした動画が拡大して表示される。このように構成されていても、ユーザの任意のタイミングで希望する個別動画を再生することができる。
【００７３】
（３ｆ）上記第１実施形態では、タッチパネル５への入力に応じて個別動画が表示される構成を例示し、上記第２実施形態ではタッチパネル５への入力に応じて合成動画の視点が変化する構成を例示した。しかしながら、タッチパネル５への入力が行われたときに合成動画とは異なる表示態様である動画が表示される構成であれば、表示される動画は上記実施形態の例に限定されず、合成動画を構成する動画に基づく様々な態様の動画を表示させることができる。
【００７４】
なお、ここでいう表示態様とは、動画として視認される状態のことを意味する。但し、カメラ３により撮影された元の動画が示す内容そのものは除外する。つまり、異なる表示態様の動画とは、撮影対象の経時的な変化による動画の内容の変化を除き、表示される動画の一部又は全部において、動画を構成する元の動画の変更、視点の変化、拡大・縮小、明るさ、色、表示・非表示の変化、強調演出、などの状態が異なる動画を意味する。
【００７５】
（３ｇ）上記各実施形態における１つの構成要素が有する機能を複数の構成要素に分担させたり、複数の構成要素が有する機能を１つの構成要素に発揮させたりしてもよい。また、複数の構成要素が有する複数の機能を、１つの構成要素によって実現したり、複数の構成要素によって実現される１つの機能を、１つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、特許請求の範囲に記載した文言のみによって特定される技術思想に含まれるあらゆる態様が本発明の実施形態である。
【００７６】
（３ｈ）上述したＥＣＵ７の他、当該ＥＣＵ７を構成要素とするシステム、当該ＥＣＵ７としてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実態的記録媒体など、種々の形態で本発明を実現することもできる。
【符号の説明】
【００７７】
１…画像処理システム、５…タッチパネル、７…ＥＣＵ、３１…動画生成部、３３…表示制御部、３５…入力検出部、３７…画像合成部、１０１…合成動画、１２１…フロントレフト映像、１２３…フロント映像、１２５…レフト映像、１２７…ライト映像、１２９…バック映像、１４１ａ…三次元ビュー動画、１４１ｂ…三次元ビュー動画、１５１…合成動画
【図１】
2017143340.tif 000003
【図２】
2017143340.tif 000004
【図３】
2017143340.tif 000005
【図４】
2017143340.tif 000006
【図５】
2017143340.tif 000007
【図６】
2017143340.tif 000008
【図７】
2017143340.tif 000009
【図８】
2017143340.tif 000010
【図９】
2017143340.tif 000011
【図１０】
2017143340.tif 000012
【図１１】
2017143340.tif 000013
【図１２】
2017143340.tif 000014