(57)【特許請求の範囲】
【請求項１】
映像素材データ、および、映像によって映像作成者の表現したい意志・概念・感情等を表現するデータである意思データを入力する入力手段と、
意思データと、映像素材データに対する操作を示す映像効果操作データとを関係づけた映像効果表に従い、前記入力手段により入力された映像作成者の意思データに対応する映像効果操作データを設定する映像効果操作データ設定手段と、
前記入力手段により入力された映像素材データに対して、前記映像効果操作データ設定手段により設定された映像効果操作データによる操作を施して、映像を作成する映像素材処理手段と
を有することを特徴とする映像処理装置。
【請求項２】
前記映像効果操作データ設定手段は、映像作成者の意思データと映像効果操作データが複数対応する場合には、いずれかを選択して映像作成者の意思に沿う映像効果操作データとして設定することを特徴とする請求項１に記載の映像処理装置。
【請求項３】
映像素材データ、映像によって利用者の表現したい意志・概念・感情等を表現するデータである意思データ、これらのデータの登録、削除の命令データを含む利用者情報の入出力を制御する利用者情報処理手段と、
当該映像素材データに表現する意思データを登録する意思データ登録処理部、当該意思データを削除する意思データ削除処理部、当該意思データを設定する意思データ固定処理部および当該意思データを格納する格納処理部から構成される意思情報処理手段と、
意思データとそれに対応する映像効果操作データを関係づけた映像効果表と、この映像効果表を参照して前記利用者情報処理手段により入力された意思データに対応する映像効果操作データを設定する映像効果操作データ設定処理部、前記映像効果操作データ設定処理部により設定した映像操作データを登録する映像効果操作データ登録処理部、前記映像データを設定する映像効果操作データ固定処理部、前記映像効果操作データを削除する映像効果操作データ削除処理部、および前記映像効果操作データ登録処理手段により登録処理された映像効果操作データを格納する映像効果操作データ格納部を有する映像効果操作データ処理手段と、
映像素材データ登録命令により映像素材データを登録処理する映像素材データ登録処理部、その登録処理された映像素材データを格納する映像素材データ格納部、映像素材データを設定する映像素材データ固定処理部、前記映像効果操作データ格納部に格納されている映像効果操作データにより、映像素材データ格納部に格納されている映像素材データに対して映像効果の処理を行う映像効果処理部、映像素材データを削除する映像素材データ削除処理部、および前記映像効果処理部により映像効果操作データで処理された映像素材データおよび映像素材データ格納部により格納された映像効果処理前の映像素材データを表示するための処理を行う映像素材データ表示処理部を有する映像素材情報処理手段と、
を有することを特徴とする映像処理装置。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、ビデオ編集機器あるいはビデオ・レコーダ等の映像処理装置に関し、特にそれらの装置における編集技術に関する。なお、本明細書においては、映像とは、動画像と音声などのデータとが同期したものであり、いわゆるマルチメディア情報の総称である。また、映像によって映像作成者の表現したい意志・概念・感情・対象等を「意思」という用語で代表させる。さらに、映像作成者の意思、および映像効果の関係を映像文法と呼ぶことにする。
【０００２】
【従来の技術】
従来の映像の編集装置としては、専用の操作卓（例えばソニー社製のＳｏｎｙエディテング・コントロール・ユニットＰＶＥ−５００およびソニー社製のＳｏｎｙデジタル・マルチ・エフェクト・スイッチャＤＦＳ−５００など）と、収録用ＶＴＲと２台以上の再生用ＶＴＲを用い、再生用ＶＴＲ間でディゾルブ、ワイプなどの特殊効果を用いながら、収録用ＶＴＲのマスターテープ上にビデオ信号の編集を行うものがある（これはＡ／Ｂロール編集と呼ばれる）。
この編集操作の流れは次のようになる。まず、バックグラウンド画像（画像を切り換える前に出力される画像）を選択し、次にフォアグラウンド画像（画像を切り換えた後に出力される映像）を選択する。続いてエフェクト（画像を切り換えるときの効果、本明細書では映像効果と呼ぶ）を選択し、トランジション（画像の切り換わり期間のこと）を設定する。最後にエフェクトを実行する。各操作は、専用のコントロールパネルを用いて設定される。なお、ディゾルブとは、バックグラウンド画像を徐々に消しながら、フォアグラウンド画像を徐々に表示して、２つの画像を溶け合うように重ねながら切り換える動作である。また、ワイプとは、画面転換法の一手法で、次の画面に移るときに左右上下などの方向から見開いていく方法である。
【０００３】
また、パーソナル・コンピュータを使って映像の編集をするソフトウェア、例えばＡｄｏｂｅ  Ｓｙｓｔｅｍｓ社製のＡｄｏｂｅ  Ｐｒｅｍｉｅｒｅが知られている（「Ａｄｏｂｅ  Ｐｒｅｍｉｅｒｅアドビ・プレミア教室」、株式会社エムディエヌコーポレーション、東京（１９９４）を参照）。これはＱｕｉｃｋＴｉｍｅムービー（以下、ムービーと略す）と呼ばれる形式のデジタル・ビデオ・データの編集を行うものである。
この編集ソフトウェアを使ってムービーを作成するには次のような手順で行う。利用者は、まずプロジェクト・ウィンドウにクリップ（後述の映像素材データに対応するムービーを構成する素材）を用意する。これは前記の再生用ＶＴＲの設定に相当する。利用者は、次にプロジェクト・ウィンドウに用意したクリップをコンストラクション・ウィンドウで編集する。コンストラクション・ウィンドウには複数のビデオ・トラック（標準的にはトラックＡ、トラックＢ、トラックＴおよびトラックＳ１がある）と複数の音声トラックがあり、利用者は、Ａ／Ｂロール編集（ここでは、複数のトラックのクリップ使って編集する方式）を行うことができる。コンストラクション・ウィンドウのトラックを示す領域の水平方向は、時間を表し、タイム・ルーラーと呼ばれる時間の目盛りが付けられている。ムービーの作成（編集）は、利用者がトラックにクリップを配置することによって行われる。利用者は、トラックＡにクリップＡを、トラックＢにクリップＢを配置することにより、Ａ／Ｂロール編集を行うことができる。先行するクリップＡ（上記のバックグラウンド画像に対応するクリップ）と後続するクリップＢ（上記のフォアグラウンド画像に対応するクリップ）を水平方向に重なるように配置し、トランジション・ウィンドウから選択した特殊効果をトラックＴに両クリップが重なった位置に配置すると、作成されるムービーは、クリップＡのあるタイミングで選択した特殊効果でクリップＢに遷移する映像となる。クリップＡが６秒の長さ、クリップＢが５秒の長さ、選択された特殊効果がクロス・ディゾルブ（Ｃｒｏｓｓ  Ｄｉｓｓｏｌｖｅ）で期間が１秒であったとき、作成されるムービーは、最初の５秒はクリップＡの映像であり、続く１秒がクリップＡからクリップＢへのクロスディゾルブの映像であり、最後の４秒はクリップＢの映像である長さ１０秒の映像となる。このような編集はマウスとキーボードを使って行うことができる。
【０００４】
その他に、テキスト、音声、動画等のマルチメディアの編集を行う編集装置は、種々知られている（特開平５−２０４５７６号公報、特開平５−２４２２０８号公報、特開平６−７７９９２号公報）。
【０００５】
【発明が解決しようとする課題】
利用者（映像作成者）は、上記のような従来の編集装置あるいは編集ソフトウェアにおいては、ズーム・アップ、パン、チィルト、ワイプあるいはディゾルブなど編集効果の技術的な用語を理解している必要があり、編集において意思と映像効果との対応がうまくとれないので、それらの編集装置または編集ソフトウェアは、映像作成のアマチュアにとっては使いづらいという欠点がある。例えば、ポストプロダクション又は放送局などで編集に従事する編集者は、編集において刺激的な映像を作成するためにクローズ・ショット又は素早いズームインなどの映像効果を用いるであろう（「高木栄，久保田信治，小野浩ほか：“マルチメディア化の新展開と情報映像の開発実験（最終報告）”，株式会社野村総合研究所，ｐｐ．Ｉ−１８〜Ｉ−５８（１９９２）」参照）。しかし、映像作成のアマチュアにとっては、そのような映像効果と刺激的な映像を作ろうとする意思が直接的に結び付かないために意図した映像とならない、つまり、刺激的な映像とはならないことが多い。
そこで本発明では、映像作成者が映像により表現したい意思を簡単に入力することができ、その入力された意思に沿った映像を作成できるようにすることを課題とする。
【０００６】
【課題を解決するための手段】
本発明は、
映像素材データ、および、映像によって映像作成者の表現したい意志・概念・感情等を表現するデータである意思データを入力する入力手段と、
意思データと、映像素材データに対する操作を示す映像効果操作データとを関係づけた映像効果表に従い、前記入力手段により入力された映像作成者の意思データに対応する映像効果操作データを設定する映像効果操作データ設定手段と、
前記入力手段により入力された映像素材データに対して、前記映像効果操作データ設定手段により設定された映像効果操作データによる操作を施して、映像を作成する映像素材処理手段を備えた映像処理装置である。
上記映像処理装置において、前記映像効果操作データ設定手段は、意思データに対応する映像効果操作データが複数ある場合に、選択された映像効果を映像作成者の意思に沿う映像効果データとして設定するよう構成とすることができる。
また、本発明は、次の構成とすることができる。
映像素材データ、映像によって利用者の表現したい意志・概念・感情等を表現するデータである意思データ、これらのデータの登録、削除の命令データを含む利用者情報の入出力を制御する利用者情報処理手段（１４）と、
当該映像素材データに表現する意思データを登録する意思データ登録処理部（２１）、当該意思データを削除する意思データ削除処理部（２２）、当該意思データを設定する意思データ固定処理部（２３）および当該意思データを格納する格納処理部（２４）から構成される意思情報処理手段（１１）と、
意思データとそれに対応する映像効果操作データを関係づけた映像効果表（３７）と、この映像効果表を参照して前記利用者情報処理手段により入力された意思データに対応する映像効果操作データを設定する映像効果操作データ設定処理部（３６）と、前記映像効果操作データ設定処理手段により設定した映像操作データを登録する映像効果操作データ登録処理部（３１）と、前記映像データを設定する映像効果操作データ固定処理部（３３）と、前記映像効果操作データを削除する映像効果操作データ削除処理部（３２）と、前記映像効果操作データ登録処理部により登録処理された映像効果操作データを格納する映像効果操作データ格納部（３４）とを有する映像効果操作データ処理手段（１２）と、
映像素材データ登録命令により映像素材データを登録処理する映像素材データ登録処理部（４１）と、その登録処理された映像素材データを格納する映像素材データ格納部（４４）と、映像素材データを設定する映像素材データ固定処理部（４３）と、前記映像効果操作データ格納部に格納されている映像効果操作データにより、映像素材データ格納部に格納されている映像素材データに対して映像効果の処理を行う映像効果処理部（４６）と、映像素材データを削除する映像素材データ削除処理部（４２）、前記映像効果処理部により映像効果操作データで処理された映像素材データおよび映像素材データ格納部により格納された映像効果処理前の映像素材データを表示するための処理を行う映像素材データ表示処理部（４７）とを有する映像素材情報処理手段（１３）と、
を有することを特徴とする映像処理装置。
【０００７】
【作用】
入力手段によって、映像作成者は、技術的な表現ではなく、より分かり易いあるいはより直観的な表現で、映像に表現したい意思を意思データとして入力する。また、映像処理を施す対象の映像素材データを入力する。
映像効果操作データ設定手段は、意思データと、映像素材データに対する操作を示す映像効果操作データとを関係づけた映像効果表を有し、この映像効果表を参照して、入力手段から入力された映像作成者の意思データに適応する映像効果操作データを設定する。その映像効果操作データを映像素材処理手段に伝え、映像素材処理手段は前記入力手段により入力された映像素材テータに映像効果操作データの内容に基づいて編集操作を施す。
従って、映像作成者は、意思に対応する適切な映像効果を知ることなく、映像表現にのみ注力することができる。また、映像素材に対して映像作成者の意思に沿った適切な映像効果が適応された映像を得ることができる。
【０００８】
【実施例】
以下図を用いて本発明の実施例を説明する。
図１に本発明に基づいた映像編集システムの構成例を示す。映像編集システムは、意思情報処理装置１１、映像文法情報処理装置１２、映像素材情報処理装置１３、利用者情報処理装置１４、ディスプレイ１５、キーボード１６、マウス１７およびビデオ・レコーダ１８から構成される。図２〜４は各装置の構成例を示したものである。
【０００９】
図２は、意思情報処理装置１１の構成例を示したものである。意思情報処理装置１１は、意思データ登録処理部２１、意思データ削除処理部２２、意思データ固定処理部２３、意思データ格納部２４および意思情報制御部２５から構成される。ここで、映像作成者の映像に表現したい意思を表すデータを意思データと呼ぶことにする。例えば、「わかりやすく」あるいは「刺激的に」などの映像作成者の意思を表現する文字列データは意思データである。これらの意思データは、想定する映像編集システムにおいてはメニューによる選択やダイアログ入力などの入力方法によって入力されるであろう。
【００１０】
図３は、映像文法情報処理装置１２の構成例を示したものである。映像文法情報処理装置１２は、映像効果操作データ登録処理部３１、映像効果操作データ削除処理部３２、映像効果操作データ固定処理部３３、映像効果操作データ格納部３４、映像文法情報制御部３５、映像効果処理部３６および映像効果表３７から構成される。ここで、映像作成者の映像に表現したい意思に対応する適切な映像効果の手続きを表すデータを映像効果操作データと呼ぶことにする。例えば、ディゾルブあるいはワイプなどの画像処理手続きおよびミュートなどの音声処理手続きは映像効果操作データである。
【００１１】
図４は、映像素材情報処理装置１３の構成例を示したものである。映像素材情報処理装置１３は、映像素材データ登録処理部４１、映像素材データ削除処理部４２、映像素材データ固定処理部４３、映像素材データ格納部４４、映像素材情報制御部４５、映像効果処理部４６および映像素材データ表示処理部４７から構成される。ここで、映像素材を表すデータを映像素材データと呼ぶことにする。この映像素材データは、前述のクリップに相当する。
【００１２】
映像編集システム内部（各装置間）の主なデータ、状態信号、制御信号および命令（データおよび制御信号）の流れは、図１中の矢印のようになる。
キーボード１６から入力されたキー・コードすなわち文字情報およびマウス１７から入力されたディスプレイ１５上の位置情報は、利用者情報処理装置１４に伝送される。映像素材データおよび各種状態信号に対応する状態などは、利用者情報処理装置１４からディスプレイ１５に出力される。また、利用者情報処理装置１４において映像素材データからビデオ信号に変換されたビデオ信号は、利用者情報処理装置１４からビデオ・レコーダ１８へ伝送され、逆に、ビデオ信号は、ビデオ・レコーダ１８から利用者情報処理装置１４へ伝送され、ビデオ信号から映像素材データに変換される。
【００１３】
意思データ存在状態信号、意思データ不在状態信号あるいは意思データ固定状態信号は、意思情報処理装置１１から利用者情報処理装置１４へ伝送される。映像効果操作データ存在状態信号、映像効果操作データ不在状態信号あるいは映像効果操作データ固定状態信号は、映像文法情報処理装置１２から利用者情報処理装置１４へ伝送される。映像素材データ存在状態信号、映像素材データ不在状態信号あるいは映像素材データ固定状態信号は、映像素材情報処理装置１３から利用者情報処理装置１４へ伝送される。
【００１４】
意思データ登録命令あるいは意思データ削除命令は、利用者情報処理装置１４から意思情報処理装置１１へ伝送される。映像効果処理開始制御信号は、利用者情報処理装置１４から映像文法情報処理装置１２へ伝送される。映像素材データ登録命令あるいは映像素材データ削除命令は、利用者情報処理装置１４から映像素材情報処理装置１３へ伝送される。
【００１５】
意思データは、意思情報処理装置１１から映像文法情報処理装置１２へ伝送される。意思データ固定制御信号は、映像文法情報処理装置１２から意思情報処理装置１１へ伝送される。映像効果操作データは、映像文法情報処理装置１２から映像素材処理装置１３へ伝送される。映像素材データ固定制御信号は、映像文法情報処理装置１２から映像素材情報処理装置１３へ伝送される。意思データ削除制御信号は、映像素材情報処理装置１３から意思情報処理装置１１へ伝送される。映像効果操作データ削除制御信号は、映像素材情報処理装置１３から映像文法情報処理装置１２へ伝送される。
【００１６】
映像編集システムの利用者が、この映像処理システムを使用して映像を作成するときの手順および映像編集システムの動作を次に示す。
ステップ（Ｓ１）  映像システムが利用者に意思データの不在状態を通知する。
ステップ（Ｓ２）  利用者が映像システムに映像作成者の意思データを登録する。
ステップ（Ｓ３）  映像システムが利用者に映像素材データの不在状態を通知する。
ステップ（Ｓ４）  利用者が映像システムに映像素材データを登録する。
ステップ（Ｓ５）  利用者が映像システムに映像効果の作用開始を要求する。
ステップ（Ｓ６）  映像システムが意思データおよび映像素材データの固定をする。
ステップ（Ｓ７）  映像システムが映像効果操作データの選択および登録をする。
ステップ（Ｓ８）  映像システムが映像素材データに映像効果操作データを作用させる。
ステップ（Ｓ９）  映像システムが利用者に映像効果の作用が生じた映像素材データを表示する。
ステップ（Ｓ１０）  映像システムが意思データ、映像素材データおよび映像効果操作データの削除をする。
図５は、（Ｓ１）−（Ｓ１０）の各事象が発生するタイミングを示した事象トレース図である。図中の符号（Ｓ１）−（Ｓ１０）は上記の符号に対応している。
【００１７】
図６、図７および図８は、それぞれ意思情報処理装置１１、映像素材情報処理装置１３および映像文法情報処理装置１２の状態遷移図である。各装置は、各種データの不在状態（Ｓ６１、Ｓ７１およびＳ８１）が初期状態となっている。以下これらの図を使って上記のステップ（Ｓ１）−（Ｓ１０）を詳説する。
【００１８】
ステップ（Ｓ１）「映像システムが利用者に意思データの不在状態を通知する。」に関する説明（図１、図2、図５、図６参照）。
意思情報処理装置１１の初期状態は、図６のように意思データ不在状態Ｓ６１が初期状態である。意思情報処理装置１１は、この意思データ不在状態Ｓ６１を利用者情報処理装置１４に意思データ不在状態信号で通知する(図2における意思情報制御部25から利用者情報処理装置14に通知される意思データ不在状態信号および図5における意思情報処理装置11から利用者情報処理装置14に通知される意思データ不在状態通知参照)。この通知を受けた利用者情報処理装置１４は、利用者にディスプレイ１５を使って意思データ不在状態Ｓ６１を表示する(図1における意思情報処理装置11から利用者情報処理装置14に通知される意思データ不在状態信号参照)。
なお、意思データ不在状態信号が意思情報処理装置11から利用者情報処理装置14に伝送されることは前述のとおりである([0013]節参照)。
【００１９】
ステップ（Ｓ２）「利用者が映像システムに映像作成者の意思データを登録する。」に関する詳細説明（図１、図２、図５、図６参照）。
利用者は、キーボード１６を使って意思データを言葉で利用者情報処理装置１４に入力し、マウス１７を使って登録を指示する。利用者情報処理装置１４は、意思情報処理装置１１の意思データ登録処理部２１に意思データ登録命令、すなわち登録される意思データおよび意思データ登録制御信号を伝送する(図1における利用者情報処理装置14から意思情報処理装置11に伝送される意思データ登録命令参照、また、図5における利用者情報処理装置14から意思情報処理装置11に通知される意思データ登録命令参照)。意思データ登録処理部２１は、意思データを意思データ格納部２４に格納し(図2における意思データ登録処理部21から意思データ格納部24に伝送される「意思データ」参照)、意思データ存在状態信号を意思情報制御部２５に伝送する(図2における意思データ登録処理部21から意思データ格納部24に伝送される意思データ存在状態信号参照)。意思情報処理装置１１は、この登録制御Ｃ６１により意思データ不在状態Ｓ６１から意思データ存在状態Ｓ６２に遷移する(図6参照)。意思データ存在状態Ｓ６２は、同様な登録制御Ｃ６２を繰り返しても意思データ存在状態Ｓ６２のままである。意思情報制御部２５は、意思データ存在状態Ｓ６２のとき利用者情報処理装置１４に意思データ存在状態信号を伝送する(図2において意思情報制御部25から利用者情報処理装置14に伝送される意思データ存在状態信号参照)。続いて利用者情報処理装置１４は、意思データ存在状態Ｓ６２をディスプレイ１５に表示する。
なお、意思データ登録命令が利用者情報処理装置14から意思情報処理装置11に伝送されることは前述のとおりである([0014]節参照)。また、意思データ存在状態信号が意思情報処理装置11から利用者情報処理装置14へ伝送されることは前述のとおりである([0013]節参照)。
【００２０】
ステップ（Ｓ３）「映像システムが利用者に映像素材データの不在状態を通知する。」に関する説明（図１、図４、図５、図７参照）。
映像素材情報処理装置１３の初期状態は、図７のように映像素材データ不在状態Ｓ７１が初期状態である。映像素材情報処理装置１３は、この映像素材データ不在状態Ｓ７１を利用者情報処理装置１４に映像素材データ不在信号で通知する(図1における映像素材情報処理装置13から利用者情報処理装置14に通知される映像素材データ不在信号参照。また、図4における映像処理装置13内の映像素材情報制御部45から利用者情報処理装置14に通知される映像素材データ不在信号参照。また、図5における映像素材情報処理装置13から利用者情報処理装置14に通知される映像素材データ不在状態通知参照)。この通知を受けた利用者情報処理装置１４は、利用者にディスプレイ１５を使って映像素材データ不在状態Ｓ７１を表示する(図1参照)。
【００２１】
ステップ（Ｓ４）「利用者が映像システムに映像素材データを登録する。」に関する説明（図１、図４、図５、図７参照）。
利用者は、マウス１７を使って利用者情報処理装置１４に映像素材データを指定し、登録を指示する(図1参照)。利用者情報処理装置１４は、映像素材情報処理装置１３の映像素材データ登録処理部４１に映像素材データ登録命令、すなわち登録される映像素材データおよび映像素材データ登録制御信号を伝送する(図1における利用者情報処理装置14から映像素材情報処理装置13に伝送される映像素材データ登録命令参照。また、図4における利用者情報処理装置14から映像素材情報処理装置13の映像素材データ登録処理部41に伝送される映像素材データ登録命令参照。また、図5における利用者情報処理装置14から映像素材情報処理装置13に通知される映像素材データ登録命令参照)。映像素材データ登録処理部４１は、映像素材データを映像素材データ格納部４４に格納し(図4における映像素材データ登録処理部41から映像素材データ格納部44に伝送される映像素材データ参照)、映像素材データ存在状態信号を映像素材情報制御部４５に伝送する(映像素材データ登録処理部41から映像素材情報制御部45に伝送される映像素材データ存在状態信号参照)。映像素材情報処理装置１３は、この登録制御Ｃ７１により映像素材データ不在状態Ｓ７１から映像素材データ存在状態Ｓ７２に遷移する(図7参照)。映像素材データ存在状態Ｓ７２は、同様な登録制御Ｃ７２を繰り返しても映像素材データ存在状態Ｓ７２のままである(図7参照)。映像素材情報制御部４５は、映像素材データ存在状態Ｓ７２のとき利用者情報処理装置１４に映像素材データ存在状態信号を伝送する(図4における映像素材情報制御部45から利用者情報処理部14に伝送される映像素材データ存在状態信号参照)。続いて利用者情報処理装置１４は、映像素材データ存在状態Ｓ７２をディスプレイ１５に表示する(図1参照)。
なお、映像素材データ存在状態が映像素材情報処理装置13から利用者情報処理装置14へ伝送されることは前述のとおりである([0013]節参照)。
また、映像素材データ登録命令が利用者情報処理装置14から映像素材情報処理装置13へ伝送されることは前述のとおりである([0014]節参照)。
【００２２】
ステップ（Ｓ５）「利用者が映像システムに映像効果の作用開始を要求する。」に関する詳細説明（図１、図３、図５、図７参照）。
利用者は、利用者情報処理装置１４にマウス１７を使って映像効果の作用開始を指示する(図1参照)。利用者情報処理装置１４は、映像文法情報処理装置１２の映像効果処理部３６に映像効果処理開始制御信号を伝送する(図1における利用者情報処理装置14から映像文法情報処理装置12へ伝送される映像効果処理開始制御信号参照。また、図3における利用者情報処理装置14から映像文法情報処理装置12の映像効果処理部36へ伝送される映像効果処理開始制御信号参照、また図5における利用者情報処理装置14から映像文法情報処理装置12に通知される映像効果作用開始制御参照)。
なお、映像効果処理開始制御信号が利用者情報処理装置14から映像文法情報処理装置12に伝送されることは前述のとおりである([0014]節参照)。
【００２３】
ステップ（Ｓ６）「映像システムが意思データおよび映像素材データの固定をする。」に関する詳細説明（図１、図２、図３、図４、図５、図６、図８参照）。
映像効果処理開始制御信号を検知した映像文法情報処理装置１２の映像効果処理部３６は、意思情報処理装置１１の意思データ固定処理部２３に意思データ固定制御信号を伝送し(図3における映像効果処理部36から意思情報処理装置11の意思データ固定処理部23に(図3では丸２に)伝送される意思データ固定制御信号参照。図2における映像効果処理部36から(図2では丸２から)意思情報処理装置11の意思データ固定処理部23に伝送される意思データ固定制御信号参照。図5における映像文法情報処理装置12から意思情報処理装置11に通知される意思データ固定制御参照)、映像素材情報処理装置１３の映像素材データ固定処理部４３に映像素材データ固定制御信号を伝送する(図3における映像効果処理部36から映像素材情報処理装置13の映像素材データ固定処理43に(図3では丸３に)伝送される映像素材データ固定制御信号参照、図4における映像効果処理部36から(図4では丸３から)映像素材情報処理装置13の映像素材データ固定処理43に伝送される映像素材データ固定制御信号参照。図5における映像文法情報処理装置12から映像素材情報処理装置13に通知される映像素材固定制御参照)。意思データ固定制御信号を検知した意思データ固定処理部２３は、意思情報制御部２５に意思データ固定状態信号を伝送する(図2における意思データ固定処理部23から意思情報制御部25に伝送される意思データ固定状態信号参照)。意思データ固定状態信号を検知した意思情報制御部２５は、意思データ格納部２４の意思データの変更を禁止し、利用者情報処理装置１４に意思データ固定状態信号を伝送する(図2における意思情報制御部25から利用者情報処理装置14に伝送される意思データ固定状態信号参照)。意思情報処理装置１１は、この固定制御Ｃ６５によって意思データ存在状態Ｓ６２から意思データ固定状態Ｓ６３に遷移する(図6参照)。意思データ固定状態信号を検知した利用者情報処理装置１４は、利用者にディスプレイ１５を使って意思データ固定状態Ｓ６３を表示する(図1参照)。
【００２４】
一方、映像素材データ固定制御信号を検知した映像素材情報処理装置１３の映像素材データ固定処理部４３は、映像素材情報制御部４５に映像素材データ固定状態信号を伝送する。映像素材データ固定状態信号を検知した映像素材情報制御部４５は、映像素材データ格納部４４の映像素材データの変更を禁止し、利用者情報処理装置１４に映像素材データ固定状態信号を伝送する。映像素材情報処理装置１３は、この固定制御Ｃ７５によって映像素材データ存在状態Ｓ７２から映像素材データ固定状態Ｓ７３に遷移する。映像素材データ固定状態信号を検知した利用者情報処理装置１４は、利用者にディスプレイ１５を使って映像素材データ固定状態Ｓ７３を表示する。
【００２５】
ステップ（Ｓ７）「映像システムが映像効果操作データの選択および登録をする。」に関する詳細説明（図１、図２、図３、図５、図６、図８参照）。
意思データ固定状態Ｓ６３となった意思情報処理装置１１は、意思データ格納部２４の意思データを映像文法処理装置１２の映像効果処理部３６に伝送する(図2における意思情報処理装置11内の意思データ格納部24から映像文法情報処理装置12の映像効果処理部36に(図2では丸１に)伝送される意思データ参照。図3における意思情報処理装置11内の意思データ格納部24から(図3では丸１から)映像文法情報処理装置12の映像効果処理部36に伝送される意思データ参照)。映像効果処理部３６は、当該意思データを映像効果表３７に入力する。映像効果表３７は、入力された意思データに対応する適切な映像効果操作データを映像効果処理部３６に出力する(図5における映像文法情報処理装置12が映像文法情報処理装置12自身へ通知する映像効果操作データ登録制御参照)。映像効果表３７については後に詳述する。
【００２６】
出力された当該映像効果操作データは、映像効果処理部３６から映像効果操作データ登録処理部３１に伝送される。映像効果操作データ登録処理部３１は、映像効果操作データ格納部３４に伝送された当該映像効果操作データを格納し、映像文法情報制御部３５に映像効果操作データ存在状態信号を伝送する。この登録制御Ｃ８１によって映像文法情報処理装置１２は、映像効果操作データ不在状態Ｓ８１から映像効果操作データ存在状態Ｓ８２に遷移する。映像効果操作データ存在状態Ｓ８２のとき映像文法情報制御部３５は、利用者情報処理装置１４に映像効果操作データ存在状態信号を伝送する。伝送された当該映像効果操作データ存在状態信号を検知した利用者情報処理装置１４は、利用者にディスプレイ１５を使って映像効果操作データ存在状態Ｓ８２を表示する。
【００２７】
続いて映像効果操作データ固定処理部３３は、映像文法情報制御部３５に映像効果操作データ固定状態信号を伝送し、映像効果操作データ格納部３４の映像効果操作データの変更を禁止する。映像文法情報処理装置１２は、この固定制御Ｃ８２によって映像効果操作データ存在状態Ｓ８２から映像効果操作データ固定状態Ｓ８３へ遷移する。伝送された当該映像効果操作データ固定状態信号を検知した映像文法情報制御部３５は、利用者情報処理装置１４に映像効果操作データ固定状態信号を伝送する。伝送された当該映像効果操作データ固定状態信号を検知した利用者情報処理装置１４は、利用者にディスプレイ１５を使用して映像効果操作データ固定状態Ｓ８３を表示する。
【００２８】
ステップ（Ｓ８）「映像システムが映像素材データに映像効果操作データを作用させる。」に関する詳細説明（図１、図３、図４、図５、図７、図８参照）。
映像効果操作データ固定状態Ｓ８３となったとき、映像文法情報処理装置１２の映像効果操作データ格納部３４は、映像効果操作データを映像素材情報処理装置１３の映像効果処理部４６に伝送する(図3における映像文法情報処理装置12の映像効果操作データ34から映像素材情報処理装置13の映像効果処理部46に(図3では丸４に)伝送される映像効果データ参照。図4における映像文法情報処理装置12の映像効果操作データ34から(図4では丸４から)映像素材情報処理装置13の映像効果処理部46に伝送される映像効果データ参照。図5における映像文法情報処理装置12から映像素材情報処理装置13に通知される映像効果作用開始制御参照)。この動作は映像効果操作データ作用開始制御Ｃ７６であり、映像素材情報処理装置１３は、映像素材データ固定状態Ｓ７３から映像効果操作データ作用中状態Ｓ７４へ遷移する(図7参照)。映像効果操作データ作用中状態Ｓ７４に遷移したとき、映像素材データ格納部４４は、映像効果処理部４６に映像素材データを伝送する(図4における映像素材データ格納部44から映像効果処理部46に伝送される映像素材データ参照)。映像効果処理部４６は、伝送された映像効果操作データを映像素材データ格納部４４から伝送された映像素材データに対して作用させる。すなわち、映像効果処理部４６において映像作成者の意思に沿った適切な映像効果が映像素材データに作用し、新しく映像素材データが生成される。
【００２９】
ステップ（Ｓ９）「映像システムが利用者に映像効果の作用が生じた映像素材データを表示する。」に関する詳細説明（図１、図４、図５参照）。
生成された当該映像素材データは、映像効果処理部４６から映像素材データ表示処理部４７に伝送される(図4における映像効果処理部46から映像素材データ表示処理部47に伝送される映像素材データ参照)。映像素材データ表示処理部４７は、利用者情報処理装置１４に伝送された当該映像素材データを伝送する(図4における映像素材データ表示処理部47から利用者情報処理装置14に伝送される映像素材データ参照。また、図5における映像素材情報処理装置13から利用者情報処理装置14に通知される映像素材データ表示制御参照)。利用者情報処理装置１４は、利用者にディスプレイ１５を使って映像作成者の意思に沿った適切な映像効果が作用した映像素材データを表示する(図1参照)。
【００３０】
ステップ（Ｓ１０）「映像システムが意思データ、映像素材データおよび映像効果操作データの削除をする。」に関する詳細説明（図１、図２、図５、図６、および図４、図７、図８参照）。
映像素材情報処理装置１３の映像効果処理部４６は、意思情報処理装置１１の意思データ削除処理部２２に意思データ削除制御信号を伝送する(図4において映像素材情報処理装置13の映像効果処理部46から意思情報処理装置11の意思データ削除処理部22に(図4では、丸５に)伝送される意思データ削除制御信号参照。図2において映像素材情報処理装置13の映像効果処理部46から(図2では、丸５から)意思情報処理装置11の意思データ削除処理部22に伝送される意思データ削除制御信号参照。図5において映像素材情報処理装置13から意思情報処理装置11に通知される意思データ削除制御参照)。当該意思データ削除信号を検知した意思データ削除処理部２２は、意思データ格納部２４に空データを伝送し、意思データ格納部２４のすべての意思データを削除する(図2において意思データ削除処理部22から意思データ格納部24に伝送される空データ参照)。この削除制御Ｃ６６によって意思情報処理装置１１は、意思データ固定状態Ｓ６３から意思データ不在状態にＳ６１に遷移する。すなわち、意思情報処理装置１１は初期状態となる(図6参照)。
【００３１】
また、映像素材情報処理装置１３の映像効果処理部４６は、映像文法情報処理装置１２の映像効果操作データ削除処理部３２に映像効果操作データ削除制御信号を伝送する。当該映像効果操作データ削除制御信号を検知した映像効果操作データ削除処理部３２は、映像効果操作データ格納部３４に空データを伝送し、映像効果操作データ格納部３４のすべての映像効果操作データを削除する。この削除制御Ｃ８３によって映像文法情報処理装置１２は、映像効果操作データ固定状態Ｓ８３から映像効果操作データ不在状態Ｓ８１に遷移する。すなわち、映像文法情報処理装置１２は初期状態となる。
【００３２】
映像素材データ削除処理部４２は、映像素材データ格納部４４に空データを伝送し、映像素材データ格納部４４のすべての映像素材データを削除する。この削除制御Ｃ７７によって映像素材情報処理装置１３は、映像効果操作データ作用中状態Ｓ７４から映像素材データ不在状態Ｓ７１に遷移する。すなわち、映像素材情報処理装置１３は初期状態となる。
【００３３】
ここで、ステップ（Ｓ７）における映像効果表３７の機能について詳述する。映像効果表３７は、意思データとその意思データに対応する適切な映像効果操作データとを結び付けるものである。文献「高木栄，久保田信治，小野浩ほか：“マルチメディア化の新展開と情報映像の開発実験（最終報告）”，株式会社野村総合研究所，ｐｐ．Ｉ−１８−Ｉ−５８（１９９２）」によれば本発明の意思データに対応する人間的要素と本発明の映像効果操作データに対応する映像制作技法とは特定の（適切な）対応関係が存在することが報告されている。人間的要素は、認知的要素（速さ、正確さ、容易さ、詳細さおよび記銘性）、生理要素（疲労および負担・ストレス）および心理要素（自然さ・違和感、好ましさ・快適さ、刺激感・やわらかさ、臨場感・迫力感、誘目性、退屈感、優位感・威容感、期待感・消沈感、当事者感・傍観者感）に分類されている。
【００３４】
一方、映像制作技法は、ショットの大きさ（ロング、ミディアムおよびクローズ）、カメラヘッドの動き（フォロー・パン、ウィップ・パン、インターラプテッド・パン、ゆっくりとしたパン、ティルト・アップおよびティルト・ダウン）、カメラの高さ（ロー・アングル、超ロー・アングル、ハイ・アングル、超ハイ・アングルおよびオーバーヘッド）、カメラ本体の動き（クレーン・アップ、クレーン・ダウン、ドリー・イン、ドリー・バック、トラックおよびハンディ）、ズーミング（ズーム・イン＜クイック＞、ズーム・イン＜スロー＞、ズーム・アウト＜クイック＞およびズーム・アウト＜スロー＞）、被写界深度（浅い被写界深度、深い被写界深度、フォーカス・イン、フォーカス・アウトおよびフォーカス・パン）、構図（フレーミング、バランスよい／悪い、トーン、スケール、環境、対象の態度、フレームの形、関心の統一、構図線の速度速い／遅いおよび注視点の連続性ある／ない）、配色（色彩感情、色の分離、鮮やかな色の存在および近似色の恒常性）、コマとコマの物理的なつなぎ方（フェー・ドイン、フェード・アウト、ミックスおよびカッティング）および結合の原理による分類（形式的結合、内容的結合、意味的結合および表現的結合）に分類されている。
【００３５】
例えば、人間的要素の心理要素の刺激感は、映像制作技法のショットの大きさのクローズおよびズーミングのズーム・イン＜クイック＞などに対応し、人間的要素の心理要素のやらわかさは、映像制作技法のショットの大きさのロングおよび被写界深度のフォーカス・アウトなどに対応している。映像効果表３７は、このような対応関係の情報を保持し、入力された意思データに対応する映像効果操作データを出力する。つまり、「刺激的に」といった意思データが映像効果表３７に入力されると、映像効果表３７は、「刺激的に」の意思データに対応する「クローズ・ショット」あるいは「ズーム・イン＜クイック＞」の映像効果操作データを選択し、出力する。あるいは、「やわらかく」といった意思データが映像効果表３７に入力されると、映像効果表３７は、「やわらかく」の意思データに対応する「ロング・ショット」あるいは「フォーカス・アウト」の映像効果操作データを選択し、出力する。利用者は、このような映像効果表３７の機能によって技術的な表現（上述の映像制作技法）を知ることなしに適切な映像効果を映像に表現して編集（映像作成）を行うことができる。
【００３６】
映像効果表３７は、データベースとして実装することもできる。図９は、意思データと映像効果操作データをデータベースとして表現した場合に、映像効果処理部３６から意思データとして「やわらかく」が入力されたときに、映像効果操作データとして「ロングショット」が映像効果表３７から出力されているようすを表す。登録される意思データとしては、他に「正確に」、「詳細に」又は「はっきりと」などが考えられる。それらに対応した映像効果操作データとしては、「浅い被写界深度」、「ズームアウト＜スロー＞」又は「ゆっくりとしたパン」などが考えられる。
【００３７】
次に例外処理（意思データの削除制御Ｃ６３およびＣ６４並びに映像素材データの削除制御Ｃ７３およびＣ７４）について補足する。
まず、意思データの削除制御Ｃ６３およびＣ６４について説明する。利用者は、意思データ存在状態Ｓ６２のときは意思データを意思データ格納部２４から削除することができる。利用者は、キーボード１６又はマウス１７を使って利用者情報処理装置１４に登録された意思データの削除を指定する。利用者情報処理装置１４は、意思情報処理装置１１に意思データ削除命令、すなわち削除される意思データおよび意思データ削除制御信号を伝送する。伝送された意思データおよび意思データ削除制御信号を検知した意思情報処理装置１１の意思データ削除処理部２２は、意思データ格納部２４の該当する意思データを削除する。その結果意思データ格納部２４に意思データが存在しない場合は、意思情報処理装置１１は、意思データ存在状態Ｓ６２から意思データ不在状態Ｓ６１へ遷移する（この場合の一連の削除処理は、削除制御Ｃ６３に該当する）。すなわち、意思情報処理装置１１は初期状態となる。続いて意思情報制御部２５は、利用者情報処理装置１４に意思データ不在状態信号を伝送する。意思データ不在状態信号を検知した利用者情報処理装置１４は、利用者にディスプレイ１５を使って意思データ不在状態Ｓ６１を表示する。一方、意思データ削除の結果、意思データ格納部２４に意思データが存在する場合は、意思情報処理装置１１は、意思データ存在状態Ｓ６２のままである（この場合の一連の削除処理は、削除制御Ｃ６４に該当する）。
【００３８】
次に、映像素材データの削除制御Ｃ７３およびＣ７４について説明する。利用者は、映像素材データ存在状態Ｓ７２のときは映像素材データを映像素材データ格納部４４から削除することができる。利用者は、キーボード１６又はマウス１７を使って利用者情報処理装置１４に登録された映像素材データの削除を指定する。利用者情報処理装置１４は、映像素材情報処理装置１３に映像素材データ削除命令、すなわち削除される映像素材データおよび映像素材データ削除制御信号を伝送する。伝送された映像素材データおよび映像素材データ削除制御信号を検知した映像素材情報処理装置１３の映像素材データ削除処理部４２は、映像素材データ格納部４４の該当する映像素材データを削除する。その結果映像素材データ格納部４４に映像素材データが存在しない場合は、映像素材情報処理装置１３は、映像素材データ存在状態Ｓ７２から映像素材データ不在状態Ｓ７１へ遷移する（この場合の一連の削除処理は、削除制御Ｃ７３に該当する）。すなわち、映像素材情報処理装置１３は初期状態となる。続いて映像素材情報制御部４５は、利用者情報処理装置１４に映像素材データ不在状態信号を伝送する。映像素材データ不在状態信号を検知した利用者情報処理装置１４は、利用者にディスプレイ１５を使って映像素材データ不在状態Ｓ７１を表示する。一方、映像素材データの削除の結果、映像素材データ格納部４４に映像素材データが存在する場合は、映像素材情報処理装置１３は、映像素材データ存在状態Ｓ７２のままである（この場合の一連の削除処理は、削除制御Ｃ７４に該当する）。
【００３９】
【発明の効果】
以上のように本発明によれば、映像作成者がアマチュアであっても映像による意思表示を簡単にすることができ、映像作成者の意思に沿った映像を作成することができる。
【図面の簡単な説明】
【図１】  本発明の映像処理装置の一実施例を示すブロック構成図である。
【図２】  実施例における意思情報処理装置を示すブロック構成図である。
【図３】  実施例における映像文法情報処理装置を示すブロック構成図である。
【図４】  実施例における映像素材情報処理装置を示すブロック構成図である。
【図５】  実施例の映像処理装置の各事象が発生するタイミングの一例を示した事象トレース図である。
【図６】  実施例における意思情報処理装置の内部状態の遷移の一例を示した状態遷移図である。
【図７】  実施例における映像素材情報処理装置の内部状態の遷移の一例を示した状態遷移図である。
【図８】  実施例における映像文法情報処理装置の内部状態の遷移の一例を示した状態遷移図である。
【図９】  実施例における映像効果表の一例を示した図である。
【符号の説明】
１１…意思情報処理装置、１２…映像文法情報処理装置、１３…映像素材情報処理装置、１４…利用者情報処理装置、１５…ディスプレイ、１６…キーボード、１７…マウス、１８…ビデオ・レコーダ、２１…意思データ登録処理部、２２…意思データ削除処理部、２３…意思データ固定処理部、２４…意思データ格納部、２５…意思情報制御部、３１…映像効果操作データ登録処理部、３２…映像効果操作データ削除処理部、３３…映像効果操作データ固定処理部、３４…映像効果操作データ格納部、３５…映像文法情報制御部、３６…映像効果処理部、３７…映像効果表、４１…映像素材データ登録処理部、４２…映像素材データ削除処理部、４３…映像素材データ固定処理部、４４…映像素材データ格納部、４５…映像素材情報制御部、４６…映像効果処理部、４７…映像素材データ表示処理部、Ｓ６１…意思データ不在状態、Ｓ６２…意思データ存在状態、Ｓ６３…意思データ固定状態、Ｃ６１…登録制御、Ｃ６２…登録制御、Ｃ６３…削除制御、Ｃ６４…削除制御、Ｃ６５…固定制御、Ｃ６６…削除制御、Ｓ７１…映像素材データ不在状態、Ｓ７２…映像素材データ存在状態、Ｓ７３…映像素材データ固定状態、Ｓ７４…映像効果操作データ作用中状態、Ｃ７１…登録制御、Ｃ７２…登録制御、Ｃ７３…削除制御、Ｃ７４…削除制御、Ｃ７５…固定制御、Ｃ７６…映像効果操作データ作用開始制御、Ｃ７７…削除制御、Ｓ８１…映像効果操作データ不在状態、Ｓ８２…映像効果操作データ存在状態、Ｓ８３…映像効果操作データ固定状態、Ｃ８１…登録制御、Ｃ８２…固定制御、Ｃ８３…削除制御
【図１】
0003902803.tif 000002
【図２】
0003902803.tif 000003
【図３】
0003902803.tif 000004
【図４】
0003902803.tif 000005
【図５】
0003902803.tif 000006
【図６】
0003902803.tif 000007
【図７】
0003902803.tif 000008
【図８】
0003902803.tif 000009
【図９】
0003902803.tif 000010