(57)【要約】【課題】  手軽に、高度な映像・音声の編集を実現する。【解決手段】  映像編集装置１を用いて、ユーザは、操作部１５を介して映像の加工方法を複数登録し、登録された加工方法のうち入力映像の加工に使用する一の加工方法を指定する。映像編集装置１は、前記入力映像を該指定された加工方法に従って加工し、加工された映像を出力するとともに、登録された複数の加工方法を表す映像を表示する。【選択図】      図３
2006093852.tif 000002
【特許請求の範囲】
【請求項１】
データを入力する入力手段と、
データの加工方法を登録する登録手段と、
登録された複数の加工方法のうち入力データの加工に使用する加工方法を指定する指定手段と、
前記入力データを、前記指定手段によって指定された加工方法に従って加工する加工手段と、
前記加工手段によって加工されたデータを出力する手段と、
前記登録手段により登録された複数の加工方法を各々識別するための画像を表示する画像表示手段と、
を有するデータ加工装置。
【請求項２】
データを入力する入力手段と、
データの加工方法を登録する登録手段と、
前記登録手段によって登録された複数の加工方法のいずれかを各々指定する複数の操作子と、
前記操作子によって指定された加工方法に従って前記入力手段から入力されたデータを加工する加工手段と、
前記加工手段により加工されたデータを出力する手段と、
前記登録手段により登録された複数の加工方法を各々識別するための画像を前記複数の操作子の各々の近傍に表示する画像表示手段と、
を有するデータ加工装置。
【請求項３】
前記登録手段は、予め設定された複数の単位加工方法を記憶し、かつ、前記各単位加工方法の組み合わせを指定する組み合わせ指定操作子を有し、前記組み合わせ指定操作子の操作に従った加工方法の組み合わせを加工方法として登録することを特徴とする請求項１または２に記載のデータ加工装置。
【請求項４】
前記画像表示手段は、前記単位加工方法に対応した単位画像を記憶する単位画像記憶手段を有し、前記登録手段が加工方法の組み合わせを加工方法として登録した場合には、前記単位画像記憶手段内の対応する単位画像を順次組み合わせて前記画像を生成することを特徴とする請求項３に記載のデータ加工装置。
【請求項５】
映像を入力する入力部と、
ユーザが、映像の加工方法を登録し、該登録された複数の加工方法のうち入力映像の加工に使用する加工方法を指定するための操作部と、
前記入力映像を、前記操作部によって指定された加工方法に従って加工する加工部と、
前記加工部において加工された映像を出力する出力部と、
前記操作部によって登録された複数の加工方法を各々識別するための映像を表示する表示部と、
を有する映像編集装置。
【請求項６】
前記加工方法は、一連のエフェクト処理またはミキシング処理手順を規定したマクロであることを特徴とする請求項５に記載の映像編集装置。
【請求項７】
前記表示部に表示されるのは、前記加工部においてサンプル映像を前記複数の加工方法の各々に従って加工した映像である
ことを特徴とする請求項５に記載の映像編集装置。
【請求項８】
前記表示部に表示される映像は、前記入力映像を前記複数の加工方法の各々に従って加工した映像である
ことを特徴とする請求項５に記載の映像編集装置。
【請求項９】
コンピュータを、
映像の加工方法を登録し、該登録された複数の加工方法のうち入力映像の加工に使用する加工方法を指定する指定手段と、
入力映像に対し、前記指定手段により指定された加工方法に従って加工処理を施す加工手段と、
前記加工手段により加工処理が施された映像を出力する手段と、
前記複数の加工方法を識別するための映像の各々を表示する手段と、
して機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、データ、特に映像データを加工処理する装置に関する。
【背景技術】
【０００２】
ライブハウス等において、大型スクリーン上に表示される映像をＶＪ（Video Jockey）がステージ上で音楽に合わせて変化させていくという映像エンターテイメントが行なわれている。観客は、このようにスクリーン上で次から次へと移り変わる映像を見て楽しむのである。具体的には、ＶＪは、映像に様々なエフェクト処理を掛け、あるいは複数の映像を種々の手法を用いて切り換える、という作業をリアルタイムに行う。この際、複数のビデオ素材を入力して各映像にエフェクト処理を施した後、各々の映像を合成することにより最終的に映像を生成するための機器であるビデオミキサが用いられる。
【０００３】
このような映像編集作業においては、多数のエフェクト処理や複雑なミキシング方法の内容を理解した上で、更に、音楽に合わせてすばやく機器を操作する技術が求められる。このような技術を習得するまでには相当の時間が必要であり、一般のユーザが、手軽に、このような映像表現を行なうことは困難であった。
【０００４】
そこで、複雑な映像加工処理を手軽に扱うことを目的として、一連の加工処理内容を予め登録しておく、ということが行なわれている（例えば特許文献１および２を参照）。以下、このような処理手順のことを「マクロ」という。
【０００５】
しかしながら、映像編集技術に熟達していないユーザにとっては、マクロを組むこと自体面倒な作業である上、せっかくマクロを組んだとしても、そのマクロがどのような処理を規定するものであるのかを正確に把握していなければ使いこなせない。例えば、マクロの内容が「入力映像１に対してモザイクをかけつつワイプを左から右へ３秒間行なって入力映像２に画面転換する」というような処理内容であることを確認でき、その処理を理屈では理解できたしても、映像編集作業に不慣れなユーザにとって、それによって実際にどのような映像が生成されるのかを具体的にイメージすることは困難だからである。
【０００６】
【特許文献１】特開２００３−３７８０７号公報
【特許文献２】特開２００４−７２７７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
本発明は、上述した背景に鑑みてなされたものであり、映像編集に熟達していないユーザであっても、手軽に、複雑な映像加工処理を行なうことのできる映像編集装置を提供する。
【課題を解決するための手段】
【０００８】
上述した課題を解決するため、本発明は、その一の態様において、映像を入力する入力部と、ユーザが、映像の加工方法を登録し該登録された複数の加工方法のうち入力映像の加工に使用する加工方法を指定するための操作部と、前記入力映像を前記操作部によって指定された加工方法に従って加工する加工部と、前記加工部において加工された映像を出力する出力部と、前記操作部によって登録された複数の加工方法を各々識別するための映像を表示する表示部とを有する映像編集装置を提供する。
【０００９】
この映像編集装置によれば、登録されている加工方法の内容を表す映像が表示されるため、ユーザは登録されている加工方法がどのようなものであるかを直感的に把握することができる。
【００１０】
本発明は、また、コンピュータを、映像の加工方法を登録し該登録された複数の加工方法のうち入力映像の加工に使用する加工方法を指定するための手段と、入力映像に対し該指定された加工方法に従って加工処理を施す手段と、該加工処理が施された映像を出力する手段と、前記複数の加工方法を識別するための映像の各々を表示する手段として機能させるためのプログラムを提供する。
【発明を実施するための最良の形態】
【００１１】
＜実施例＞
図１は、本発明に係る映像編集装置１の機能構成を表す図である。同図に示すように、映像編集装置１は、制御部１１、映像入力部１２、ミキサ部１３、映像出力部１４、操作部１５、マクロ切換・表示部１６、およびバス１７から構成される。制御部１１は、ＣＰＵ、ＲＡＭ、ＲＯＭ等から構成され、各部を制御する。映像入力部１２は、複数の映像入力端子を有し、この入力端子を介して複数の映像信号が入力され、ミキサ部１３へ出力される。
【００１２】
ミキサ部１３は、画像処理プロセッサ等から構成され、ユーザによって指定された加工処理方法に従って、入力された映像に加工処理を施して映像出力部１４へ供給する。ここで映像加工方法とは、映像エフェクト処理の種類やその内容、あるいは一連の映像エフェクト処理手順（以下、マクロという）のことを言う。エフェクト処理とは、例えば、色補正、オーバーラップ、ワイプ、マスターフェード、ＰinＰ（ピクチャ・イン・ピクチャ）等の単位画像加工処理のことを指す。マクロとは、上述の単位エフェクト処理の組みあせ手順を規定するものであって、例えば、入力映像１を再生している状態からまず５秒間映像１と映像２を右から左にワイプ処理を実行して入力映像２に画面転換を行い、続いて１０秒間に亙ってディゾルブ処理を行い映像１へ画面転換する、というような処理内容を指す。
【００１３】
以下では、説明の便宜上、マクロ内容を「映像入力１＝色替え（レベル５）、モザイク（レベル３）；入力映像２＝色替え（レベル２）、モザイク（レベル６）；ミキシング＝ワイプ（３秒、左から右）」のように表記するものとする。この表記の意味するところは、「入力映像１に対してはレベル５の色替え処理とレベル３のモザイク処理とを行い、入力映像２に対してはレベル２の色替え処理とレベル６のモザイク処理を行った上で、両映像に対するミキシング処理としてワイプ処理を３秒間、左から右に行なう」というものである。
【００１４】
図２は、ミキサ部１３の詳細な構成を示す図である。同図に示すように、ミキサ部１３は、色替え処理部１３１ａ、モザイク処理部１３１ｂ、・・・の各エフェクト処理ユニットを有する。これら各映像処理ユニットは、入力映像ごとに処理を行うことができるものである。各映像処理ユニットによって加工された映像は、ミキシング処理部１３２へ入力され、ミキシング処理が行なわれる。なお、図２では、エフェクトユニットを２つのみ示しているが、これは一例にすぎず、必要なエフェクトの種類に応じてエフェクトユニットの数を適宜用意することが可能であることはいうまでもない。
【００１５】
例えば、ユーザが指定した映像加工方法が、「映像入力１＝色替え（レベル５）、モザイク（レベル３）；入力映像２＝色替え（レベル２）、モザイク（レベル６）；ミキシング＝ワイプ、（３秒、左から右）」というマクロであった場合、色替え処理部１３１ａは、入力映像１および２に対し、それぞれレベル５およびレベル２の色替え処理を行う。同様に、モザイク処理部１３１ｂは、それぞれレベル３およびレベル６のモザイク処理を行う。そして、ミキシング処理部１３２は、このようにして加工された入力映像１および２に対し、ワイプ処理を施して得られた映像信号を出力する。このように、ミキサ部１３は、ユーザが新たに映像加工方法を指定するまでは、順次入力されてくる映像に対しリアルタイムで同一の映像加工方法に従って処理を行い続ける。
【００１６】
映像出力部１４は、外部の表示装置と接続するための映像出力端子を備え、ミキサ部１３にて加工された映像をＣＲＴや液晶ディスプレイ等の外部表示装置へ出力する。これにより、ユーザは加工された映像を視認することができる。
【００１７】
操作部１５は、図３に示すように、ボタンやダイヤル等の操作子を有しており、ユーザはこの操作子を操作することにより、加工方法の指定やマクロの登録を行うことができるようになっている。同図において、「入力映像１」のブロックは、入力映像１に付与するエフェクトを指定するためのものである。加工方法を指定する際は、ダイヤルを回してエフェクトレベルを設定し、「色替え」、「モザイク」といったエフェクトの種類を指定するボタンを押下する。すると、ミキサ部１３において、設定した種類およびレベルのエフェクト処理が入力映像１に対して開始される。「入力映像２」のブロックについても同様である。
【００１８】
「ミキシング」のブロックは、複数の入力映像（図では２つ）のミキシング方法を指定するものである。ダイヤルを回して所望のパラメータを設定して「ワイプ」「ＰｉｎＰ」等のボタンを押下すると、ミキサ部１３において、入力映像１および２（各入力映像にエフェクト処理が指定されている場合はエフェクト処理後の映像１および２）を対象とするミキシング処理が開始される。
【００１９】
「マクロ」のブロックは、マクロの登録やマクロの内容の編集を行なうためのものである。ユーザは、まず、「登録」のボタンを押下しつつ、当該マクロを登録したいボタンＦ１〜Ｆ５ を押下する。続いて、上述したように、入力映像１および２、およびミキシングのブロックにおいて所定の操作を行ない、所望の一連の加工処理手順を入力したのち、最後に「登録」ボタンを押下することにより、登録が完了する。
【００２０】
この結果、例えば、ボタン「Ｆ１」には「映像入力１＝色替え（レベル５）、モザイク（レベル３）；入力映像２＝色替え（レベル２）、モザイク（レベル６）；ミキシング＝ワイプ（３秒、左から右）」という内容のマクロＭ１が登録され、「Ｆ２」には「映像入力１＝モザイク（レベル４）；入力映像２＝モザイク（レベル１）；ミキシング＝ＰｉｎＰ（１０秒、映像２の中央に映像１）」、という内容のマクロＭ２が登録される。このようにして登録されたマクロの内容は、制御部１１へ出力され制御部１１内のＲＯＭに書き込まれる。
【００２１】
マクロ切換・表示部１６は、ボタンＦ１〜Ｆ５とその下部にある液晶ディスプレイ等の表示部Ｄ１〜Ｄ５とによって構成される。各ボタンＦ１〜Ｆ５は、ユーザによって登録されたマクロＭ１〜Ｍ５と対応付けられている。具体的には、ユーザがマクロＭ１による加工処理を希望する場合、Ｆ１のボタンを押下する。すると、マクロＭ１が選択されたという情報が制御部１１を介してミキサ部１３へ送られ、この結果、ミキサ部１３では、制御部１１の制御の下、入力された映像に対しマクロＭ１に従った加工処理が開始される。
【００２２】
各表示部Ｄ１〜Ｄ５は、各マクロに対応したサンプル映像を表示する。すなわち、制御部１１は、例えばＲＯＭからサンプル映像を読出し、この映像に対しそれぞれのマクロＭ１〜Ｍ５に従って加工し、これを表示する。この結果、例えば、表示部Ｄ１にはマクロＭ１のワイプ処理が施された映像が３秒間ごとに繰り返し表示される。このようにして、表示部Ｄ１〜Ｄ５において、登録したマクロ処理の様子がサンプル画像として表示されるので、ユーザは、自身が登録したマクロＭ１の内容がどのようなものであったのか、映像として、直感的に、理解することができる。ユーザは、この映像を参照しながら所望のマクロを指定し、対応するボタンを押下することにより、ミキサ部１３において所望の映像加工処理が開始される。
【００２３】
なお、エフェクト処理およびミキシング処理の指定を解除したい場合は、該当のボタン（押下されている状態のボタン）を再度押下することにより行なうことができる。また、各マクロボタンは択一的に選択可能であってもよいし、複数個を同時に指定可能であってもよい。また、マクロボタンとそれ以外のボタンが同時に押下された場合は、マクロの加工処理を優先して適用してもよい。また、ボタンの押下状態をより分かりやすく報知するため、押下された状態ではボタンが発光するようにしてもよい。
【００２４】
＜変形例＞
本発明は、上述した実施形態に拘泥されるものではなく、例えば、以下に示す変形が可能である。
【００２５】
登録できるマクロの数は任意である。また、表示部の数が登録されるマクロの数よりも少なく、すべてのマクロを表示できない等の場合は、一部のマクロのみを表示させてもよい。また、マクロの登録においては、「登録開始」のボタンと「登録完了」のボタンの２つを用意しておいてもよい。この場合、「登録」ボタンを押しながら他のボタンを操作する必要はなくなる。具体的には、まず「登録開始」ボタンを押下し、エフェクト設定操作を行なった後、「登録完了」のボタンを押下することにより登録が完了する。さらに、全てのエフェクト処理、ミキシング処理に関する設定パラメータをユーザが操作子等を用いて入力してもよいが、マクロを登録する際には、設定操作を行なったタイミングを記録しておき、そのタイミングの通りに一連の加工処理を実行するようにしてもよい。例えば、マクロの内容が「モザイク処理を１．５秒間行い、続いてディゾルブ処理を２秒間行なう」というものである場合、それぞれの処理のパラメータとして「１．５秒」、「２秒」という値を入力するのではなく、例えばモザイク処理を登録するためのボタンを１．５秒間押下し続けたのち、ディゾルブ処理を登録するためのボタンを２秒間押下し続ける。映像編集装置１は、操作部１５からのボタンの押下タイミング情報を記録し、この情報から時間パラメータ（この例では「１．５秒」、「２秒」）を生成する。換言すれば、一連の加工処理手続きを実時間で入力していくのである。このようにすれば、エフェクト時間などの時間に関するパラメータを入力する手間を省くことができるだけでなく、数字による指定では表現がしづらい微妙なユーザの感覚をマクロとして登録することができる。
【００２６】
また、複数のマクロをグループ化し、グループごとにマクロ切り換えボタンを割り当てても良い。具体的には、マクロを登録する際に当該マクロの属性も一緒に登録しておく。属性とは各エフェクト処理に共通する特徴、性質、エフェクト処理が視聴者に与える印象であって、例えば、「派手系」、「渋め系」、「なごみ系」、「スピード感」といったものが考えられる。そして、属性が同じエフェクトは同一のグループとする。例えば、マクロＭ１１〜Ｍ１６の６個の「派手系」属性を有するエフェクトはボタンＦ１に割り当てる。この場合、デフォルトでは表示部Ｄ１に表示されるのはマクロＭ１１を表す映像であり、この状態で更にボタンを押下すると、マクロＭ１２を表す映像、マクロＭ１３を表す映像、・・・、と順次切り替わるようにしても良い。このような表示方法を採用すれば、多数のマクロから容易に所望のマクロを探し出すことが可能となる。また、ユーザが属性（すなわちグループ)を決定するのではなく、制御部１１がマクロ内容を判定して自動的にグループ分けを行なうこととしてもよい。
【００２７】
また、上述したように、映像加工方法として、複数の入力映像に対し異なるパラメータ（エフェクトを掛ける時間、エフェクトのレベル等）を設定し得る。よって、例えば、エフェクト時間が異なるエフェクト処理を複数個同時に実行する場合、各エフェクト処理は時間的にバラバラに終了することになり、結果として出力される映像が見苦しくなる場合がある。この場合、例えば、制御部１１は、一番時間の短い（または長い）エフェクトに他の全てのエフェクト処理の時間を合わせるようにパラメータを修正してもよい。あるいは、予めエフェクト毎に優先順位を決定しておき、全てのエフェクトの処理時間が最も優先順位の高いエフェクトのエフェクト処理時間に合わせる修正を行なってもよい。
【００２８】
上述した実施形態においては、表示部Ｄ１〜Ｄ５に表示される映像は入力映像と無関係なサンプル映像データであったが、これに限らず、例えば、入力映像１の映像データを表示部の大きさに合わせて縮小加工した映像データを用いても良い。具体的には、現在、マクロＭ１に従って加工処理が進行している場合、ミキサ部１３は、このマクロＭ１と別個に、入力映像１のデータを表示部Ｄ１〜Ｄ５の大きさに合わせて縮小し、マクロＭ１〜Ｍ５に従って映像加工処理を実行し、これを表示部Ｄ１〜Ｄ５にぞれぞれ表示させるのである。
【００２９】
これにより、ユーザはリアルタイムで入力される映像に対し、仮にマクロ処理Ｍ１〜Ｍ５を行なったとした場合に生成され外部表示装置に出力される映像の概要を確認することができる。すなわち、ユーザは、実際にマクロの切り換え操作を行なって外部表示装置に出力させて確認する必要がない。表示部Ｄ１〜Ｄ５に表示される映像を参考にして、現在の入力映像に対し最も適合するマクロを瞬時に選択して切り換えることができるのである。このようなユーザインタフェースを提供することにより、映像編集に慣れていないユーザに対しては所望の加工処理を選択する指針となり得、また映像編集のエキスパートに対しても創造性を喚起するという効果が期待される。
【００３０】
上述した実施形態においては、本発明の機能はハードウェア装置としての映像編集装置によって実現されたが、これに限らず、本発明の機能構成をパーソナルコンピュータ（ＰＣ）等で実行可能なソフトウェアとして実装してもよい。この場合、エフェクト処理やマクロの設定・切り換えを行なうのは、操作部１５に替えて、キーボードやマウス等の入力デバイスである。また、ＰＣのディスプレイ画面には、加工処理がなされた映像が表示ウウィンドウ２０１に表示される他、例えば、操作用ウィンドウ２０２と、マクロ内容を表す映像を表示するウィンドウ２０３とを同時に表示することとしてもよい。この表示画面構成の一例を図４に示す。
【００３１】
上述した実施形態においては、加工処理の対象は映像信号であったが、音声信号のみ、あるいは映像信号と音声信号が混合された信号を加工対象としてもよい。音声のみの加工処理の場合において、表示部Ｄ１〜Ｄ５に表示させる画像は任意であり、要は、ユーザが各マクロ内容を識別できるような静止画または動画であればよい。
【００３２】
上述した実施形態においては、入力される映像に対してリアルタイムで加工処理を行うことを想定しているが、これに限らず、一旦ＰＣのハードディスク等の記憶装置に映像データを取り込み、そこから映像編集装置１に映像データを出力し、加工後の映像をハードディスクに保存するという、いわゆるノンリニア編集の形態にも適用可能である。
【００３３】
上述した実施形態においては、表示部Ｄ１〜Ｄ５に表示されるのはマクロ内容を表す映像であったが、単一のエフェクト処理またはミキシング処理の内容であってもよいことは言うまでもない。例えば、ボタン「Ｆ１」には「ワイプ」を、ボタン「Ｆ２」には「ＰｉｎＰ」を割り当て、Ｄ１およびＤ２にはそれぞれワイプ処理のサンプル映像とＰｉｎＰのサンプル映像を表示させる。これにより、ビデオ編集が全くの初心者であっても、基本的なエフェクト処理を直感的に理解することができ、手軽に編集を楽しむことが可能となる。
【図面の簡単な説明】
【００３４】
【図１】本発明に係る映像編集装置の機能構成図である。
【図２】ミキサ部１３の機能構成図である。
【図３】映像編集装置１の外観図である。
【図４】本発明の変形例に係る表示画面の一例である。
【符号の説明】
【００３５】
１・・・映像編集装置、１１・・・制御部、１２・・・映像入力部、１３・・・ミキサ部、１４・・・映像出力部、１５・・・操作部、１６・・・マクロ切換・表示部、１３１ａ・・・色替え処理部、１３１ｂ・・・モザイク処理部、１３２・・・ミキシング処理部。
【図１】
2006093852.tif 000003
【図２】
2006093852.tif 000004
【図３】
2006093852.tif 000005
【図４】
2006093852.tif 000006