(57)【要約】【課題】動画像の合成時に、編集操作なしに動画の合成を行なう動画合成装置を提供すること。【解決手段】合成用動画記憶部１１４に格納されている合成用動画ファイル１０３は、入力映像に付加する映像効果の制御を示す入力映像制御情報１０５と、入力映像制御情報１０５の映像効果を付加するタイミングを示す同期情報１０４と、入力映像と合成する合成用映像１０６を有し、入力映像制御情報１０５と同期情報１０４を解析する入力映像制御情報解析部１０７と、入力映像制御情報解析部１０７から取得した同期情報１０４を入力映像に付加し、入力映像制御情報１０５に従って効果を付加する入力映像効果・同期情報付加部１０２と、同期情報１０４と合成用映像１０６の解析を行い同期合成部１０９へ送る合成用映像制解析御部１０８と、入力映像と合成用映像を同期情報１０４を用いて合成する同期合成部１０９を備える。【選択図】図１
2006109211.tif 000002
【特許請求の範囲】
【請求項１】
複数の映像を合成処理する動画合成装置であって、
合成する映像のうち１つを入力する映像入力手段と、
同期情報と入力映像制御情報と合成用映像を有する合成用動画ファイルを取得する合成用動画取得手段と、
前記合成用動画ファイルの前記入力映像制御情報と前記同期情報を解析する入力映像制御情報解析手段と、
前記映像入力手段からの入力映像に、合成時に複数の映像を同期させるために使用する前記同期情報を付加する入力映像効果・同期情報付加手段と、
前記同期情報が付加された入力映像と前記合成用動画ファイルの合成用映像を、前記同期情報に基づいて合成する同期合成手段とを備えた動画合成装置。
【請求項２】
前記合成用動画ファイルの合成用映像を解析し、解析結果に基づき合成用映像を制御する合成用映像解析手段を備えることを特徴とする請求項１記載の動画合成装置。
【請求項３】
前記合成用動画ファイルを１つ以上記憶する合成用動画記憶手段と、
前記合成用動画記憶手段に記憶されている前記合成用動画ファイルを選択する選択手段を備えたことを特徴とする請求項２記載の動画合成装置。
【請求項４】
前記合成用動画ファイルは、合成用映像制御情報を更に備え、
前記合成用映像解析制御手段は、前記合成用動画ファイルの前記合成用映像制御情報を解析し、解析結果に基づき合成用映像を制御することを特徴とする請求項３記載の動画合成装置。
【請求項５】
入力映像を解析する合成用映像制御情報解析手段と、
前記合成用映像制御情報解析手段により得られた解析結果に基づき合成用映像を制御する合成用映像効果付加手段を備えたことを特徴とする請求項４記載の動画合成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は動画編集技術、特に、動画の合成や編集を行なう動画合成装置に関するものである。
【背景技術】
【０００２】
従来、放送などの分野では、コンピュータやハードディスク等からなるノンリニア編集装置が用いられている。従来のノンリニア編集装置では、編集に先立って編集の対象となる複数の映像や音声を表すデータが蓄積されており、複数の映像を並べる順序や複数の映像に対する効果（エフェクト処理、合成処理など）等をユーザが指定することにより映像編集情報を作成し、蓄積された各データを、映像編集情報に基づいて放送内容等に合わせた編集を行なっている（例えば、特許文献１参照）。
【０００３】
更に、詳細に説明すると、従来例のノンリニア編集装置では、編集に先立って、編集の対象となる映像、音声を表す蓄積データが所定のフォーマット（例えば、ＤＶＣＰＲＯ、ＭＰＥＧ規格等に準拠するフォーマット）で蓄積されている。ユーザは、複数の映像を並べる順序や複数の映像接続方法等を指定し、これらの指示に応じて映像編集情報が作成される。作成された映像編集情報に基づいて、蓄積されている蓄積データの中から必要となる映像音声蓄積データの読み出しが指示され、映像（及び、この映像に伴う音声。以下同様）に映像効果（及び音声効果、映像効果又は音声効果を特殊効果と呼ぶ）が加えられることで映像が編集される。編集後の映像は、画面に表示され、また、ビデオデッキにセットされた磁性テープに記録され、磁気テープに記録された映像が放送等に用いられることとなる。
【０００４】
映像効果の追加や合成については、例えば、各々が映像をデコードすることのできる２台のデコーダ、及び、デコードされた映像に処理を施すための映像音声合成部を含んでおり、１台のデコーダにてデコードされた１本の映像に対して色変更処理、モザイク処理や、フェードイン、フェードアウト等の画面の切り替え効果を付加する処理（エフェクト処理）を施し、また、２台のデコーダにて並列にデコードされた２本の映像に対して、ワイプ方式（ある表示画面に対して右から左へ、又は上から下へと他の表示画面を重ねることにより表示画面を切り替える方式）、ディゾルブ方式（ある表示画像から他の表示画像へと順次濃度を変えていくことにより表示画像を切り替える方式）などの画面切り替え効果を付加する処理（エフェクト処理）に伴う映像の合成、ピクチャ・イン・ピクチャ（ある映像上に縮小されたほかの映像をはめ込むこと）による映像の合成がなされる。
【特許文献１】特開２００２−２３２８２７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、前記従来の技術では、編集対象の映像を一旦画面に表示し、ユーザが表示中の映像を確認しながら各指示を入力指定する編集操作を行なう必要があった。そのため、組み込み機器等でその場で気軽に合成効果を付加することはできなかった。
【０００６】
本発明は、前記従来の課題を解決するもので、合成時のユーザによる編集作業をなくし、動画同士を合成しつつ、合成する動画に合わせた特殊効果を付加するといった機能を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記従来の課題を解決するために、本発明の動画合成装置は、複数の映像を合成処理する動画合成装置であって、合成する映像のうち１つを入力する映像入力手段と、同期情報と入力映像制御情報と合成用映像を有する合成用動画ファイルを取得する合成用動画取得手段と、前記合成用動画ファイルの前記入力映像制御情報と前記同期情報を解析する入力映像制御情報解析手段と、前記映像入力手段からの入力映像に、合成時に複数の映像を同期させるために使用する前記同期情報を付加する入力映像効果・同期情報付加手段と、前記同期情報が付加された入力映像と前記合成用動画ファイルの合成用映像を、前記同期情報に基づいて合成する同期合成手段とを備え、合成用動画ファイルの内容に従って動画合成の処理をおこなう。
【０００８】
本構成によって、合成時の編集操作がなくなり、前もって用意する合成する動画と合成する映像を入力することにより、２つの動画を合成しつつ映像に合わせた特殊効果を付加するといった機能を提供することができる。
【発明の効果】
【０００９】
本発明の動画合成装置によれば、ビデオカメラなどリアルタイムの映像を入力する機器において、リアルタイムに入力される動画に対し、編集操作なしに、入力したその場で動画同士の合成を行い、効果を付加できるようになる。
【００１０】
また、本発明の動画合成装置によれば、動画入力より前もって映像効果の制御情報を生成することにより、同じ制御情報を用いることが可能となり、同じ規則に従った複数の映像を出力することが可能となる。
【発明を実施するための最良の形態】
【００１１】
以下本発明の実施の形態について、図面を参照しながら説明する。
【００１２】
（実施の形態１）
図１は、本発明の実施の形態１における動画合成装置の構成図である。まず、図１の構成要素について説明する。
【００１３】
図１において、映像入力部１０１は、合成する映像のうちの１つを入力する。
【００１４】
合成用動画記憶部１１４は、合成用動画ファイルを記憶および管理を行う。
【００１５】
合成用動画ファイル１０３は、合成用動画記憶部１１４に格納されており、映像入力部１０１から入力される入力映像に付加する映像効果の制御を示す入力映像制御情報１０５と、入力映像制御情報１０５の映像効果を合成用動画のどのタイミングで入力映像に付加するかということをはかるための同期情報１０４と、入力映像と合成する合成用映像１０６を有している。入力映像制御情報１０５は、例えば、ｖｉｄｅｏに付加する効果の種類としては、モザイク、フェード、ネガポジ、セピア、ソラリ、ストレッチ、パステルのようなデジタル効果と、ワイプ、ピクチャ・イン・ピクチャ、ディゾルブ処理等の特殊効果がある。また、ａｕｄｉｏに付加する効果の種類としては、エコー、空間演出を行うリバーブ、グラフィックイコライザを利用した音響効果等がある。また、合成用動画ファイル１０３に含まれる合成用映像１０６は、映像データそのものであってもよいし、対象の映像データを識別するための識別子や格納位置（アドレスなど）を示す情報であってもよい。また、ここでは、合成用動画記憶部１１４に格納されているとしたが、合成用動画ファイルを外部から取得するよう構成してもよい。
【００１６】
操作部１１３は、合成用動画記憶部１１４から入力映像と合成する合成用動画ファイルを選択する機能と、合成の開始・停止を指示する機能を有する。例えば、ユーザがボタンやキーを入力操作することにより指示を決定し、決定した指示を受け取って対応する処理を実施する。
【００１７】
入力映像制御情報解析部１０７は、操作部１１３からの指示を受け取り、合成用動画記憶部１１４に記憶されている合成用動画ファイル１０３から入力映像制御情報１０５と同期情報１０４を取得し、取得した入力映像制御情報１０５と同期情報１０４を解析する。
【００１８】
合成用映像制解析御部１０８は、操作部１１３からの指示を受け取り、合成用動画記憶部１１４に記憶されている合成用動画ファイル１０３から同期情報１０４と合成用映像１０６を取得し、取得した同期情報１０４と合成用映像１０６の解析を行い、同期合成部１０９へ送る。
【００１９】
入力映像効果・同期情報付加部１０２は、映像入力部１０１から受け取った入力映像に対して、入力映像制御情報解析部１０７により得られる同期情報１０４を付加し、入力映像制御情報１０５に従ってデジタル効果または特殊効果等の映像編集を行う。
【００２０】
同期合成部１０９は、同期情報１０４を有する入力映像と、同期情報１０４を有する合成用映像を、同期情報１０４を利用して合成して、合成した動画を出力する。
【００２１】
動画記録部１１０は、同期合成部１０９が合成した動画を受け取り、動画ファイルとして動画記憶部１１１へと記憶する。
【００２２】
動画再生部１１２は、同期合成部１０９が合成した動画を受け取り、動画ファイルとして再生を行なう。
【００２３】
以上により、映像入力部１０１から入力される入力映像を、前もって記憶されている合成用映像１０６と合成して、記録または再生することが可能となる。
【００２４】
図２は、本発明の実施の形態１における動画合成出力のフローチャートである。図２に従い、本発明の動画合成方法を説明する。なお、既に映像入力部１０１は、外部から映像の入力中であり、合成用動画ファイルを選択して動画合成処理を開始した場合の一例である。合成用動画ファイルを選択した後で、外部からの映像入力を開始し、そのタイミングに合わせて動画合成処理を開始してもよい。
【００２５】
まず、合成用動画ファイル指定のステップ２０１において、操作部１１３は、合成用動画記憶部１１４から合成用動画ファイル１０３を選択する。
【００２６】
次に合成用動画入力のステップ２０２において、操作部１１３は、入力映像制御情報解析部１０７と合成用映像解析制御部１０８と同期合成部１０９に合成の開始を通知する。開始が通知された入力映像制御情報解析部１０７と合成用映像解析制御部１０８は、合成用動画記憶部１１４から選択された合成用動画ファイル１０３を取得する。
【００２７】
次に解析のステップ２０３において、入力映像制御情報解析部１０７は、取得した合成用動画ファイル１０３の解析を行い、同期情報１０４と入力映像制御情報１０５を抽出する。
【００２８】
映像解析制御のステップ２０４において、合成用映像解析制御部１０８は、取得した合成用動画ファイル１０３のから同期情報１０４と合成用映像１０６を抽出して解析を行い、同期制御部１０９に通知する。
【００２９】
同期情報・効果付加ステップ２０５において、入力映像効果・同期情報付加部１０２は、解析のステップ２０３の結果得られる同期情報１０４を映像入力に付加し、入力映像制御情報１０５をもとに入力映像に対してデジタル効果または特殊効果等の映像編集を行なう。ｖｉｄｅｏに付加する効果の種類としては、モザイク、フェード、ネガポジ、セピア、ソラリ、ストレッチ、パステルのようなデジタル効果と、ワイプ、ピクチャ・イン・ピクチャ、ディゾルブ処理等の特殊効果がある。また、ａｕｄｉｏに付加する効果の種類としては、エコー、空間演出を行うリバーブ、グラフィックイコライザを利用した音響効果等がある。
【００３０】
合成のステップ２０６において、同期合成部１０９は、入力映像効果・同期情報付加部１０２と合成用映像解析制御部１０８から受け取ったそれぞれの動画に付加された同期情報を利用して、これら２つの動画を合成する。合成技術に関しては一般的なクロマキーによる手法がある。一例として、合成用映像１０６において入力映像を表示したい領域をキー色で設定し、その領域に入力映像を重ねることで合成を行なう。また、同期情報１０４に基づいた合成用映像１０６の位置を確認し、終端であれば始端に戻るといった合成用映像１０６の読み込み制御を行うことにより、合成用動画ファイルよりも長い時間記録する場合などに、動画ファイルを繰り返して使用することにより、入力映像の長さに合わせて、任意の時間、動画を合成することで可能となる。
【００３１】
合成動画出力のステップ２０７において、同期合成部１０９が合成処理した動画を出力する。動画記録部１１０は、同期合成部１０９から合成動画を受け取り、動画記憶部１１１へと記憶する。また、動画再生部１１２は、同期合成部１０９から合成動画を受け取り、再生出力を行なう。なお、動画記録部１１０と動画再生部１１２の両方が処理を行うとしたが、どちらか一方のみが合成動画を受け取って、処理を行ってもよい。
【００３２】
終了判定のステップ２０８において、操作部１１３は、合成動画の出力を終了するか判定制御を行う。操作部１１３は、ユーザから終了が指示されると、合成処理終了と判定し（ステップ２０８がＹＥＳ）、同期合成部１０９に合成の終了を指示することで、合成処理を終了する。一方、ユーザからの終了指示がなければ（ステップ２０８がＮＯ）、ステップ２０５に遷移し、動画の合成を継続する。
【００３３】
なお、本実施の形態１では合成停止時に操作部１１３が同期合成部１０９に対して停止指示をするようにしていたが、操作部１１３が入力映像効果・同期情報付加部１０２と入力映像制御情報解析部１０７と合成用映像解析制御部１０８に停止を通知することにより、合成用動画１０３を解析し同期情報１０４を読み取ったところまでを完全に合成して停止することもできる。同じく、操作部１１３が動画記録部１１０や動画再生部１１２に指示すれば、即時に記録を停止したり、再生を停止することもできる。
【００３４】
かかる構成によれば、前もって合成用動画ファイルを準備しておくことで、合成時における動画合成のための編集作業を合成する動画の選択と合成開始・停止の指示のみで行うことができる。
【００３５】
（実施の形態２）
図３は、本発明の実施の形態２における動画合成装置の構成図である。まず、図３の構成要素について説明する。
【００３６】
図３において、映像入力部３０１は、合成する映像のうちの１つを入力する。
【００３７】
合成用動画ファイル３０４は、合成用動画記憶部３１８に格納されており、映像入力部３０１から入力される入力映像に付加する映像効果の制御を示す入力映像制御情報３０６と、入力映像制御情報１０５の映像効果を合成用動画のどのタイミングで入力映像に付加するかということをはかるための同期情報３０５と、入力映像と合成する合成用映像３０７と、繰り返し再生等の合成用映像３０７に対する制御情報である合成用映像制御情報３０８を有している。入力映像制御情報３０６は、例えば、ｖｉｄｅｏに付加する効果の種類としては、モザイク、フェード、ネガポジ、セピア、ソラリ、ストレッチ、パステルのようなデジタル効果と、ワイプ、ピクチャ・イン・ピクチャ、ディゾルブ処理等の特殊効果がある。また、ａｕｄｉｏに付加する効果の種類としては、エコー、空間演出を行うリバーブ、グラフィックイコライザを利用した音響効果等がある。また、合成用動画ファイル３０４に含まれる合成用映像３０７は、映像データそのものであってもよいし、対象の映像データを識別するための識別子や格納位置（アドレスなど）を示す情報であってもよい。
【００３８】
操作部３１６は、合成用動画記憶部１１４から入力映像と合成する合成用動画ファイルを選択する機能と、合成の開始・停止を指示する機能を有する。例えば、ユーザがボタンやキーを入力操作することにより指示を決定し、決定した指示を受け取って対応する処理を実施する。
【００３９】
合成用映像制御情報解析部３０２は、入力映像の既存の画像解析手法によりビデオ・オーディオの成分分析といった解析処理を行い、合成用動画ファイルを制御するための情報、例えば、入力映像の音量や輝度の調整などを抽出する。
【００４０】
入力映像制御情報解析部３０９は、操作部１１３からの指示を受け取り、合成用動画記憶部３１８に記憶されている合成用動画ファイル３０４から、入力映像制御情報３０６と同期情報３０５を取得し、取得した入力映像制御情報３０６と同期情報３０５を解析する。
【００４１】
入力映像効果・同期情報付加部３０３は、映像入力部３０１から受け取った入力映像に対して、入力映像制御情報解析部３０９により得られる同期情報３０５を付加し、更に、入力映像制御情報３０９から得られる入力映像制御情報３０６に従い、デジタル効果または特殊効果等の映像編集を行う。
【００４２】
合成用映像解析制御部３１０は、操作部１１３からの指示を受け取り、合成用動画記憶部３１８に記憶されている合成用動画ファイル３０４から同期情報３０５と合成用映像３０７と合成用映像制御情報３０８を取得し、取得した合成用映像制御情報３０８を解析し、解析結果に基づき合成用映像３０７のどの部分を合成するかを決定し、合成用効果付加部３１１に決定した映像と同期情報３０５を送信する。
【００４３】
合成用映像効果付加部３１１は、合成用映像解析制御部３１０から受け取った映像に対して、合成用映像制御情報解析部３０２が抽出した制御情報をもとに、音量調整や輝度調整といった制御を行う。例えば、抽出した入力映像の輝度に応じて、合成用映像の対応する映像の輝度を調整したり、入力映像の音量に応じて、合成用映像の音量を調整するなどを行う。
【００４４】
同期合成部３１２は、入力映像効果・同期情報付加部３０３から通知される入力映像と、合成用映像効果負株３１１から通知される合成用映像を、同期情報３０５を利用して合成して、合成した動画を出力する。
【００４５】
動画記録部３１３は、同期合成部３１２が合成した動画を受け取り、動画ファイルとして動画記録部３１４へ記録する。
【００４６】
動画再生部３１５は、同期合成部３１２が合成した動画を受け取り、動画ファイルとして再生を行なう。
【００４７】
以上により、映像入力部３０１から入力される入力映像を、前もって記憶されている合成用映像３０７と合成する際に、入力映像の輝度や音量などの情報や合成用映像制御情報を用いることにより、合成用映像の調整した後で、入力映像の合成を行なうことが可能となる。
【００４８】
図４は、本発明の実施の形態２における動画合成記録のフローチャートである。図４に従い、本発明の動画合成方法を説明する。なお、既に映像入力部３０１は、外部から映像の入力中であり、合成用動画ファイルを選択して動画合成処理を開始した場合の一例である。
【００４９】
まず、合成用動画指定のステップ５０１において、操作部３１６は、合成用動画記憶部３１８から合成用動画ファイル３０４を選択する。
【００５０】
次に、合成用動画入力５０２において、操作部３１６は、入力映像制御情報解析部３０９と合成用映像解析制御部３１０と同期合成部３１２と合成用映像制御情報解析部３０２に合成の開始を通知する。開始が通知された入力映像制御情報解析部３０９と合成用映像解析制御部３１０は、合成用動画記憶部３１８から選択された合成用動画ファイル３０４を取得する。
【００５１】
次に解析のステップ５０３において、入力映像制御情報解析部３０９は、取得した合成用動画ファイル３０４の解析を行い、同期情報３０５と入力映像制御情報３０６を抽出する。
【００５２】
映像解析制御のステップ５０４において、合成用映像解析制御部３１０は、取得した合成用動画ファイル３０４から同期情報３０５と合成用映像３０７を抽出して解析を行い、合成用映像付加部３１１に通知する。なお、図６に示すように、合成用動画ファイル３０４内に、合成用映像制御情報３０８を有することで、この制御方法を記述して合成用映像解析制御部３１０で解析制御を行ってもよい。図６の説明は、後述する。
【００５３】
同期情報・効果付加のステップ５０５において、入力映像効果・同期情報付加部３０３は、入力映像制御情報付加部３０９により得られる同期情報３０５を映像入力に付加し、入力映像制御情報３０６をもとに入力映像に対してデジタル効果または特殊効果等の映像編集を行なう。効果の種類には、モザイク付加、フェード効果、ネガポジ反転、セピア処理のようなデジタル効果と、ワイプ、ピクチャ・イン・ピクチャ、ディゾルブ処理等の特殊効果がある。
【００５４】
解析のステップ５０６において、合成用映像制御情報解析部３０２は、入力映像３０１に対して、既存の画像解析手法によりビデオ・オーディオの成分分析といった解析処理を行い、音量や輝度の調整など合成用動画ファイルを制御する情報を抽出し、合成用映像効果付加部３１１に通知する。
【００５５】
効果付加のステップ５０７において、合成用映像効果付加部３１１は、合成用映像制御情報解析部３０２の解析結果を受け取り、受け取った結果に基づき効果を付加する。この効果付加は、入力映像の輝度が高ければ、合成用映像の対応する映像の輝度を調整すること。入力映像の音量が高ければ、合成用映像の音量を調整するなどである。
【００５６】
合成のステップ５０８において、合成制御部３１２は、入力映像効果・同期情報付加部３０３と合成用映像効果付加部３１１から受け取ったそれぞれの映像に付加されている同期情報を利用して、これら２つの動画の同期をとり、フレームの合成を行う。
【００５７】
合成動画出力のステップ５０９において、同期合成部３１２が合成処理した動画を出力する。動画記録部３１３は、同期合成部３１２から合成動画を受け取り、動画記憶部３１４へと記憶する。また、動画再生部３１５は、同期合成部３１２から合成動画を受け取り、再生出力を行なう。なお、動画記録部３１３と動画再生部３１５の両方が処理を行うとしたが、どちらか一方のみが合成動画を受け取って、処理を行ってもよい。
【００５８】
入力停止判断のステップ５１０において、操作部３１６は、映像入力部３０１からの入力映像の入力を停止するかの判定制御を行なう。操作部３１６は、ユーザから停止が指示されると、入力停止を判定し（ステップ５１０がＹｅｓ）、同期合成部３１２に入力の停止を指示することで、入力映像停止時間を決定し、映像入力部３０１からの映像の使用を停止する（ステップ５１１）。
【００５９】
終了判定のステップ５１２において、同期合成部３１２は、合成用映像制御情報３０８、または、操作部３１６からの終了指示に基づいて、合成処理終了と判定し（ステップ５１２がＹＥＳ）、同期制御部３１２に合成の終了を指示することで、合成処理を終了する。一方、合成処理を終了しない場合（ステップ５１２がＮＯ）、ステップ５０５に遷移し、動画の合成を継続する。
【００６０】
図５、図６および図７を使用して、具体的に合成処理について説明する。
【００６１】
図５は、合成用映像３０７の構成の一例を示している。図５において、ｓｔｒｅａｍ（ａ）６２１、ｓｔｒｅａｍ（ｂ）６２２、ｓｔｒｅａｍ（ｃ）６２３は、合成用映像３０７を構成する３つの映像である。同期情報６０１、６０２、６０３は、それぞれｓｔｒｅａｍ（ａ）の先頭から５（ｓ）後、ｓｔｒｅａｍ（ｂ）の先頭から１０（ｓ）後、ｓｔｒｅａｍ（ｂ）の先頭から２（ｓ）後の同期情報である。合成用映像制御情報６１１、６１２、６１３は、それぞれｓｔｒｅａｍ（ａ）の先頭から５（ｓ）後、ｓｔｒｅａｍ（ｂ）の先頭から１０（ｓ）後、ｓｔｒｅａｍ（ｂ）の先頭から２（ｓ）後の合成用映像制御情報である。
【００６２】
図６は、図５の合成用映像６３０に対応する合成用映像制御情報７０１の記述内容である。合成用映像制御情報７０１において、再生順序および繰り返し制御に関する指定を合成制御情報７０１のように記述しておき、合成用映像解析制御部３１０において、合成制御情報３０８（７０１）を参照し、記録開始からｓｔｒｅａｍ（ａ）の終了まで（３０秒間）はｓｔｒｅａｍ（ａ）を合成用映像として使用する。次に入力映像が停止するまではｓｔｒｅａｍ（ｂ）を合成映像として繰り返し使用する。最後に入力映像停止後にエンディングなどの用途にｓｔｒｅａｍ（ｃ）を合成（挿入）指定することができる。なお、次映像への移行要因としてユーザがボタンを押すなど操作部３０１からの操作により合成映像の開始を指定してもよい。
【００６３】
図４のステップ５０５における効果付加について、図５で示す合成用映像を利用して説明する。合成開始後５秒の位置での効果は映像のａｕｄｉｏ、ｖｉｄｅｏともに８０％の割合でｆａｄｅ効果を付加するという処理を実行する。合成を続け、合成開始後４０秒の位置では、入力映像の画面サイズをＬ×Ｍとした座標系を想定して、ｘ＝１／２×Ｌ、ｙ＝１／５×Ｍの位置を始点とする幅１／４×Ｌ、高さ１／８×Ｍの矩形領域にモザイク処理を行うという指定である。図７はこのときの入力映像のどの領域に対してエフェクトを付加するのかを示した画面イメージである。
【００６４】
また、図４のステップ５１１で入力停止した後、出力を継続する場合（ステップ５１２がＮｏ）について、図５で示す合成用映像を用いて説明する。入力停止指示以降なので、ｓｔｒｅａｍ（ｃ）の合成用映像制御情報が参照される。入力停止指示から２（ｓ）後の同期情報は６０３に対応し、合成用映像制御情報は６１３に対応する。合成用映像制御情報７０１を参照し、合成停止指示後の挿入するように指定されている映像を合成するように指定する。合成用映像効果付加部３１１は、同期情報および合成用映像制御情報に従い、エフェクトを付加する。また、同期合成部３１２は、入力映像の映像が無いため、合成用映像のみを合成（挿入）することになる。合成用映像６３０の映像ｓｔｒｅａｍ（ｃ）６２３の終端まで繰り返した後に、出力終了判断５１２において、ｙｅｓの分岐に進み記録を停止する。
【００６５】
なお、本実施の形態では、合成用映像制御情報は映像の１フレームに対して１つ指定しているが、全区間または開始時刻と終了時刻を指定することにより、区間指定してもよい。
【００６６】
かかる構成によれば、前もって合成用動画ファイルを準備しておくことで、合成時における動画合成のための編集作業を合成する動画の選択と合成開始・停止の指示のみで行うことができる。また、入力映像の変化に応じて、合成用映像の色合いや音量の微調整など、合成用映像の調整ができる。
【産業上の利用可能性】
【００６７】
本発明にかかる動画合成装置は、前もって準備した合成用動画ファイルに基づいて動画合成を行なうことができ、ムービー記録・再生機などのＡＶ機器等に有用である。また、携帯電話やＰＣなど映像編集機能を有する機器などの用途にも応用できる。
【図面の簡単な説明】
【００６８】
【図１】本発明の実施の形態１における動画合成装置の構成図
【図２】本発明の実施の形態１における動画合成装置の動画合成出力処理の一例を示すフローチャート
【図３】本発明の実施の形態２における動画合成装置の構成図
【図４】本発明の実施の形態２における動画合成装置の動画合成出力処理の一例を示すフローチャート
【図５】本発明の実施の形態２における合成用動画ファイルの一例を示す図
【図６】本発明の実施の形態２における合成用映像制御情報の記述例を示す図
【図７】本発明の実施の形態２における映像効果付加の領域指定の画面イメージを示す図
【符号の説明】
【００６９】
１０１    映像入力部
１０２    入力映像効果・同期情報付加部
１０３    合成用動画ファイル
１０４    同期情報
１０５    入力映像制御情報
１０６    合成用映像
１０７    入力映像制御情報解析部
１０８    合成用映像解析制御部
１０９    同期合成部
１１０    動画記録部
１１１    動画記憶部
１１２    動画再生部
１１３    操作部
３０１    映像入力部
３０２    合成用映像制御情報解析部
３０３    入力映像効果・同期情報付加部
３０４    合成用動画ファイル
３０５    同期情報
３０６    入力映像制御情報
３０７    合成用映像
３０８    合成用映像制御情報
３０９    入力映像制御情報解析部
３１０    合成用映像解析制御部
３１１    合成用映像効果付加部
３１２    同期合成部
３１３    動画記録部
３１４    動画ファイル
３１５    動画再生部
３１６    操作部
３１８    合成用動画記憶部
６０１    同期情報
６０２    同期情報
６０３    同期情報
６１１    合成用映像制御情報
６１２    合成用映像制御情報
６１３    合成用映像制御情報
６２１    合成用映像６０１を構成する映像ｓｔｒｅａｍ（ａ）
６２２    合成用映像６０１を構成する映像ｓｔｒｅａｍ（ｂ）
６２３    合成用映像６０１を構成する映像ｓｔｒｅａｍ（ｃ）
６３０    合成用映像
７０１    合成用映像制御情報
【図１】
2006109211.tif 000003
【図２】
2006109211.tif 000004
【図３】
2006109211.tif 000005
【図４】
2006109211.tif 000006
【図５】
2006109211.tif 000007
【図６】
2006109211.tif 000008
【図７】
2006109211.tif 000009