(57)【特許請求の範囲】
【請求項１】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、
前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納手段と、
前記格納されたアドバイスリストを表示するアドバイスリスト表示手段と、
前記表示されたアドバイスリストから任意の前記収集すべき情報素材を選択するための入力手段と、
前記選択された収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示手段と、
前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録手段と
を備えたことを特徴とするメディア作品制作支援装置。
【請求項２】
前記アドバイスリスト格納手段、アドバイス呈示手段及び記録動作状況記録手段は、携帯端末装置に格納されたものであることを特徴とする請求項１記載のメディア作品制作支援装置。
【請求項３】
前記アドバイスリスト格納手段、アドバイス呈示手段及び記録動作状況記録手段は、前記情報素材を記録するための情報記録装置に内蔵されていることを特徴とする請求項１記載のメディア作品制作支援装置。
【請求項４】
外部に前記情報素材を記録するための情報記録装置が接続され、前記情報記録装置の記録動作状況の情報が外部から入力されて前記記録動作状況記録手段に記録されることを特徴とする請求項１又は２記載のメディア作品制作支援装置。
【請求項５】
前記記録動作状況の情報は、前記情報記録装置で記録された記録媒体における各情報素材の記録開始位置及び記録終了位置を特定する情報であることを特徴とする請求項１〜４のいずれか１項記載のメディア作品制作支援装置。
【請求項６】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、
前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを複数種類格納したアドバイスリストデータベースと、
前記複数種類のアドバイスリストから任意の１又は複数のアドバイスリストの選択を促すためのアドバイスリスト選択画面を生成するアドバイスリスト選択画面作成手段と、
前記作成されたアドバイスリスト選択画面を表示する表示手段と、
前記アドバイスリスト選択画面に対する選択入力操作に基づいて前記アドバイスリストデータベースから前記選択されたアドバイスリストをアドバイスを表示する複数の機器に分配するため分割して出力するアドバイスリスト出力手段と
を備えてなることを特徴とするメディア作品制作支援装置。
【請求項７】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、
前記メディア作品の制作のためのシナリオを、このシナリオに必要な収集すべき情報素材を列挙したアドバイスリストと共に入力するシナリオ入力手段と、
前記アドバイスリストに基づいて呈示されたアドバイスに従って収集された情報素材を入力する情報素材入力手段と、
情報記録装置で前記情報素材を収集した際に記録された各情報素材に対する前記情報記録装置の記録動作状況の情報を入力する記録動作状況入力手段と、
前記入力されたシナリオに基づいて必要な前記情報素材を前記記録動作状況の情報と共に前記アドバイスリストとして表示するアドバイスリスト表示手段と、
前記表示されたアドバイスリストに基づいて前記収集すべき情報素材を順次選択するための情報素材選択手段と
を備えたことを特徴とするメディア作品制作支援装置。
【請求項８】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援プログラムであって、
前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納ステップと、
前記格納されたアドバイスリストを表示するアドバイスリスト表示ステップと、
前記表示されたアドバイスリストから任意の前記収集すべき情報素材を選択するためのステップと、
前記選択された収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示ステップと、
前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録ステップと
をコンピュータに実行させるメディア作品制作支援プログラム。
【請求項９】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援プログラムであって、
前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを複数種類格納したアドバイスリストデータベースから任意の１又は複数のアドバイスリストの選択を促すためのアドバイスリスト選択画面を生成し表示するアドバイスリスト選択画面生成表示ステップと、
前記アドバイスリスト選択画面に対する選択入力操作に基づいて前記アドバイスリストデータベースから前記選択されたアドバイスリストをアドバイスを表示する複数の機器に分配するため分割して出力するアドバイスリスト出力ステップと
をコンピュータに実行させるメディア作品制作支援プログラム。
【請求項１０】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援プログラムであって、
前記メディア作品の制作のためのシナリオをこのシナリオに必要な収集すべき情報素材を列挙したアドバイスリストと共に入力するシナリオ入力ステップと、
前記アドバイスリストに基づいて呈示されたアドバイスに従って収集された情報素材を入力する情報素材入力ステップと、
情報記録装置で前記情報素材を収集した際に記録された各情報素材に対する前記情報記録装置の記録動作状況の情報を入力する記録動作状況入力ステップと、
前記入力されたシナリオに基づいて必要な前記情報素材を前記記録動作状況の情報と共に前記アドバイスリストとして表示するアドバイスリスト表示ステップと、
前記表示されたアドバイスリストに基づいて前記収集すべき情報素材を順次選択するための情報素材選択ステップと
をコンピュータに実行させるメディア作品制作支援プログラム。
【請求項１１】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、
前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納手段と、
前記格納されたアドバイスリストに基づいて収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示手段と、
前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録手段と、
前記呈示されたアドバイスに従った記録がなされているかどうかを判定し、その判定結果を前記アドバイスに反映させるか、又は前記判定結果に応じて前記情報素材の収集処理を前記アドバイスが反映されるように制御する制御手段と
を備えたことを特徴とするメディア作品制作支援装置。
【請求項１２】
文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、
前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納手段と、
前記格納されたアドバイスリストに基づいて収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示手段と、
前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録手段と、
前記アドバイスリストと前記記録動作状況とを比較し、不足する情報素材がある場合には当該不足素材を補うか又は当該不足素材の入力を使用者に促す制御手段と
を備えたことを特徴とするメディア作品制作支援装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ディジタルビデオカメラ、ディジタルスチルカメラ、ボイスレコーダ等の情報記録装置を用いてメディア作品を制作する際に使用され、パーソナルコンピュータ、携帯情報端末、携帯電話装置等の情報端末装置を用いたメディア作品制作支援装置及びプログラムに関する。
【０００２】
【従来の技術】
ビデオカメラで撮影した映像をパーソナルコンピュータ（以下「パソコン」）で扱うことのできるデータに変換するビデオキャプチャカードと、パソコン上でビデオ画像を編集するソフトウェアを利用し、自作のビデオ作品をパソコン上で上映したり、ビデオテープに書き戻したりする方法で、放送事業従事者以外でも家庭でビデオ作品を制作することはすでに一般的に行われている。こうした画像編集は、ビデオカメラに限定せず、ディジタルスチルカメラで撮影した映像についても同様に行われている。音声の編集に関しては更に歴史が古く、マイクロフォンを接続したレコーダーで家庭内外の音声を記録し、後にテープ再生装置とレコーダーを接続することで、音楽や音声の編集が行われてきた。こうした音声編集も映像と同様にパソコン上で行うことのできる装置やソフトウェアが利用されている。
【０００３】
【発明が解決しようとする課題】
ビデオ撮影を例に挙げると、近年、ビデオカメラの性能向上により撮影画質が大幅に向上し、ついには市販のディジタルビデオカメラで撮影した映像をそのままテレビ放送に用いることができるまでになった。また、パソコンの性能向上は編集の容易さ、精緻さに貢献し、多様な画像効果（ワイプ、ディゾルブ、フェイドイン、フェイドアウトといったトランジションや、モザイク、ぼかしといった加工）を施した作品を家庭においても制作できるようになった。その一方で、撮影・編集技法については従来通り経験の積み重ねによるところが大きく、高価で高性能のカメラや編集ソフトウェアを用いることと、プロのディレクターが作成したビデオ作品がすぐにできることとは等価ではない。子供の運動会や友人の結婚式、家族のピクニックといった、イベントに即した撮影、編集技法を指導する書籍は多数出版されているが、それらのノウハウを全て記憶して撮影や編集を行うことは容易ではなく、また、本を片手に撮影を行うのは難しいことはいうまでもない。そのため家庭で撮影されるビデオの多くは編集されずに放置される傾向にある。家族親類でさえも長時間の無編集ビデオを見るのは苦痛であるため、「作品」は多くの人の目に触れずに死蔵されることになる。
【０００４】
また、編集ソフトウェアを使っても、編集に必要な場面を頭出しするのは人間の作業であり、撮影時にあらかじめテープの何分何秒から何分何秒までどういった場面を記録したという撮影ノートを残しておかない限り、手間は増えるばかりである。また、ソフトウェアに搭載されている画像効果などの数が増えても、それを適切なタイミングで適切な強さで使わなければセンスある作品にはつながらず、効果を施すについても操作の手間とレンダリングの時間とを要する。洗練されない編集が施されたビデオ作品に関してもやはり無編集と同様に自己満足の域を出ず、これがゆえに個人的に撮影されたビデオ作品の流通の障壁になっている。
【０００５】
ビデオ以外のメディアについても同様である。例えばパソコン上でメディア作品を作成し、スライドショーを実行するソフトウェアはすでに存在するが、無計画に収集された素材を利用してメディア作品を制作すると、挿入された画像の画質が不必要に高かったり、逆に作成ツール上で拡大すると画質が不足して粗い画像になってしまったりすることがある。こうした問題は、（１）まず完成した作品のスタイルを想定して必要な素材リストを作成し（２）それに即して素材収集を行う、という「作品制作の鉄則」ともいえる手順を踏まないためであり、プロとアマの違いを決定的にするものである。
【０００６】
本発明は、このような問題点に鑑みなされたもので、メディア作品の制作に精通していなくても、プロの技法に即した洗練されたメディア作品を制作するために必要な情報素材を的確に収集することができ、且つそのようなメディア作品の編集作業の負担を大幅に軽減することができるメディア作品制作支援装置及びプログラムを提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明に係る第１のメディア作品制作支援装置は、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納手段と、前記格納されたアドバイスリストを表示するアドバイスリスト表示手段と、前記表示されたアドバイスリストから任意の前記収集すべき情報素材を選択するための入力手段と、前記選択された収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示手段と、前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録手段とを備えたことを特徴とする。
【０００８】
本発明に係る第１のメディア作品制作支援プログラムは、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援プログラムであって、前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納ステップと、前記格納されたアドバイスリストを表示するアドバイスリスト表示ステップと、前記表示されたアドバイスリストから任意の前記収集すべき情報素材を選択するためのステップと、前記選択された収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示ステップと、前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録ステップとをコンピュータに実行させるものであることを特徴とする。
【０００９】
本発明の第１のメディア作品制作支援装置及びプログラムによれば、メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストがアドバイスリスト格納手段に格納され、このアドバイスリストが収集すべき情報素材に関するアドバイスとして呈示されるので、メディア作品の制作者は、メディア作品の制作に当たって、このアドバイスに従って情報記録装置を操作することにより、予め決められたシナリオに沿った作品を制作するために必要な情報素材を的確に漏れなく収集することができる。更に、情報素材の収集に伴い、記録動作状況の情報が呈示されたアドバイスと対応付けて記録されるので、記録された情報素材がどのアドバイスに従って収集されたものかが記録され、その後の編集作業を大幅に簡素化することができる。
【００１０】
この第１のメディア作品制作支援装置を携帯端末装置として実現すれば、ディジタルビデオカメラ、スチルカメラ、可搬型のボイスレコーダ等の情報記録装置と共に情報素材の収集現場に携帯することができ、任意の場所で情報素材を収集することが可能になる。この場合、本装置と情報記録装置とは、例えば通信ケーブル、無線通信等で相互に接続され、情報記録装置の記録動作状況の情報から本装置に外部から入力されるようにすれば良い。また、本装置を情報記録装置に内蔵されたものとすれば、更に使い勝手が向上する。なお、ここで記録動作状況の情報とは、例えば情報記録装置で情報素材が記録された記録媒体における各情報素材の記録開始位置及び記録終了位置を特定する情報等である。
【００１１】
本発明に係る第２のメディア作品制作支援装置は、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを複数種類格納したアドバイスリストデータベースと、前記複数種類のアドバイスリストから任意の１又は複数のアドバイスリストの選択を促すためのアドバイスリスト選択画面を生成するアドバイスリスト選択画面作成手段と、前記作成されたアドバイスリスト選択画面を表示する表示手段と、前記アドバイスリスト選択画面に対する選択入力操作に基づいて前記アドバイスリストデータベースから前記選択されたアドバイスリストをアドバイスを表示する複数の機器に分配するため分割して出力するアドバイスリスト出力手段とを備えてなることを特徴とする。
【００１２】
本発明に係る第２のメディア作品制作支援プログラムは、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援プログラムであって、前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを複数種類格納したアドバイスリストデータベースから任意の１又は複数のアドバイスリストの選択を促すためのアドバイスリスト選択画面を生成し表示するアドバイスリスト選択画面生成表示ステップと、前記アドバイスリスト選択画面に対する選択入力操作に基づいて前記アドバイスリストデータベースから前記選択されたアドバイスリストをアドバイスを表示する複数の機器に分配するため分割して出力するアドバイスリスト出力ステップとをコンピュータに実行させるものであることを特徴とする。
【００１３】
本発明に係る第２のメディア作品制作支援装置及びプログラムによれば、メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを複数種類格納したアドバイスリストデータベースから任意の１又は複数のアドバイスリストの選択を促すためのアドバイスリスト選択画面が生成、表示され、アドバイスリスト選択画面に対する選択入力操作に基づいてアドバイスリストデータベースから選択されたアドバイスリストが出力されるので、メディア作品の制作者は、その制作に際して、予め設定された複数のシナリオの中から任意のシナリオに基づくメディア作品の制作に必要な情報素材を列挙したアドバイスリストを選択して入手することができ、洗練されたオリジナルのメディア作品を制作することができる。なお、アドバイスリストの出力に当たり、選択されたアドバイスリストをアドバイスを表示する複数の機器に分配するため分割して出力するようにすれば、一連のメディア作品を複数の制作者で例えばショット毎に分担して情報収集することもでき、制作効率が向上すると共に、情報素材の収集範囲も拡大することができる。
【００１４】
本発明に係る第３のメディア作品制作支援装置は、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、前記メディア作品の制作のためのシナリオを、このシナリオに必要な収集すべき情報素材を列挙したアドバイスリストと共に入力するシナリオ入力手段と、前記アドバイスリストに基づいて呈示されたアドバイスに従って収集された情報素材を入力する情報素材入力手段と、情報記録装置で前記情報素材を収集した際に記録された各情報素材に対する前記情報記録装置の記録動作状況の情報を入力する記録動作状況入力手段と、前記入力されたシナリオに基づいて必要な前記情報素材を前記記録動作状況の情報と共に前記アドバイスリストとして表示するアドバイスリスト表示手段と、前記表示されたアドバイスリストに基づいて前記収集すべき情報素材を順次選択するための情報素材選択手段とを備えたことを特徴とする。
【００１５】
本発明に係る第３のメディア作品制作支援プログラムは、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援プログラムであって、前記メディア作品の制作のためのシナリオをこのシナリオに必要な収集すべき情報素材を列挙したアドバイスリストと共に入力するシナリオ入力ステップと、前記アドバイスリストに基づいて呈示されたアドバイスに従って収集された情報素材を入力する情報素材入力ステップと、情報記録装置で前記情報素材を収集した際に記録された各情報素材に対する前記情報記録装置の記録動作状況の情報を入力する記録動作状況入力ステップと、前記入力されたシナリオに基づいて必要な前記情報素材を前記記録動作状況の情報と共に前記アドバイスリストとして表示するアドバイスリスト表示ステップと、前記表示されたアドバイスリストに基づいて前記収集すべき情報素材を順次選択するための情報素材選択ステップとをコンピュータに実行させるものであることを特徴とする。
【００１６】
本発明に係る第３のメディア作品制作支援装置及びプログラムによれば、メディア作品の制作のためのシナリオ及びこのシナリオに必要な収集すべき情報素材を列挙したアドバイスリストと、このアドバイスリストに基づいて呈示されたアドバイスに従って収集された情報素材と、この情報素材の収集時に記録された各情報素材についての記録動作状況の情報とを入力し、入力されたシナリオに基づいて必要な情報素材を記録動作状況の情報に基づいて順次選択するようにしているので、収集された情報素材を使用した編集作業の負担を大幅に軽減することができる。
また、本発明に係る第４のメディア作品制作支援装置は、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納手段と、前記格納されたアドバイスリストに基づいて収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示手段と、前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録手段と、前記呈示されたアドバイスに従った記録がなされているかどうかを判定し、その判定結果を前記アドバイスに反映させるか、又は前記判定結果に応じて前記情報素材の収集処理を前記アドバイスが反映されるように制御する制御手段とを備えたことを特徴とする。
更に、本発明に係る第５のメディア作品制作支援装置は、文字、図形、画像及び音声の少なくとも一つを含むメディア作品を制作する際に使用されるメディア作品制作支援装置であって、前記メディア作品の制作に必要な収集すべき情報素材を列挙したアドバイスリストを格納するアドバイスリスト格納手段と、前記格納されたアドバイスリストに基づいて収集すべき情報素材に関する情報をアドバイスとして呈示するアドバイス呈示手段と、前記呈示されたアドバイスに基づいて情報記録装置で前記情報素材を収集した際に得られた前記情報記録装置の記録動作状況の情報を前記呈示されたアドバイスと対応付けて記録する記録動作状況記録手段と、前記アドバイスリストと前記記録動作状況とを比較し、不足する情報素材がある場合には当該不足素材を補うか又は当該不足素材の入力を使用者に促す制御手段とを備えたことを特徴とする。
【００１７】
【発明の実施の形態】
以下、本発明に係るメディア作品制作支援装置の実施形態を図面に即して説明する。
図１は、本発明の実施形態に係るメディア作品制作支援システムと、その使用状態を示す図である。この実施形態に係るメディア作品制作支援システムでは、情報記録装置としてディジタルビデオカメラ１０を使用し、ビデオ作品の制作のために３種類のメディア作品制作支援装置、即ち収集準備システム１１、収集システム１２及び編集システム１３を使用している。収集準備システム１１は、ビデオカメラ１０による撮影に先立ってシナリオを選択するためのシステム、収集システム１２は、ビデオカメラ１０による撮影時にアドバイスを提示するシステム、編集システム１３は、撮影の後に自動または半自動で編集を行うシステムである。
【００１８】
収集準備システム１１では、撮影や録音といった素材収集に先駆けて、予め設定された複数種類のシナリオデータを格納したシナリオデータベースからユーザ１４に作品の形態に合致したシナリオデータを選択させ、選択されたシナリオデータに含まれるアドバイスリストを収集システム１２に出力する。収集システム１２は例えば携帯情報端末から構成され、収集準備システム１１から出力されたアドバイスリストを内部に記憶し、このアドバイスリストを構成するアドバイスを順次ユーザ（制作者）１４に呈示する。各アドバイスは、完成作品のスタイルに必要な収集素材および収集方法等からなる。つまり、収集システム１２は、次に何を撮影、録音すべきか、またそれをどのように撮影、録音すれば効果的かを示すアドバイスを素材収集の都度、ユーザ１４に通知する。一方、このようにしてアドバイスに即して撮影を行うと、ビデオカメラ１０に記録されたそれぞれのショット（ビデオ映像の場合、複数の連続するフレームによって構成される、ある時間区間の映像。「カット」という場合もあるが、本明細書中ではトランジション、すなわち画面切り替えの種類の名前として「カット」を用いるので、それと区別するために「ショット」とよぶ）が、どのアドバイスに対して行われたものかを把握することができるので、収集システム１１は、この対応関係を記録動作状況として自動的に記録する。この記録動作状況は一種の撮影ノートであるので、これを電子的に編集システム１３に読み込ませれば、作品のシナリオの各部分で必要としている素材がビデオテープのどの部分に記録されているかをソフトウェアが自動的に読みとることができる。このようにして、ユーザ１４は、収集システム１２が与えるアドバイスに「管理される」形で撮影操作を行うことにより、収集素材のバリエーションや構図に注意力を割かれることなく、完成作品のシナリオに必要な素材収集を揃えることができ、更に編集システム１３は自動的に体裁の整った作品を編集することができる。
【００１９】
図２は、本実施形態に係る収集システム１２を用いてビデオ撮影を行っている様子及びアドバイスの具体例を示す図である。ユーザ１４は、携帯情報端末からなる収集システム１２とビデオカメラ１０とを用いて撮影を行っている。収集システム１２とビデオカメラ１０とはケーブル１５で結ばれ、相互に情報のやりとりを行っている。ケーブル１５による情報伝送路の例としては、パソコンと周辺機器、あるいはパソコン同士の通信ですでに普及しているＵＳＢ（Universal Serial Bus）やＩＥＥＥ１３９４規格による有線通信が挙げられる。ケーブル１５を用いず、赤外線通信、ギガヘルツ帯電波通信（Bluetoothなど）など、同様にすでにパソコンと周辺機器、パソコン同士などで用いられている無線通信を利用してもよい。
【００２０】
収集システム１２には撮影アドバイス画面２０が表示されている。撮影アドバイス画面２０には、作品のテーマとなるシナリオ名２１、これから撮影しようとする（あるいは、現在撮影中の）収集素材名２２と、その素材を撮影すべき大体の時間２３、撮影構図についてのテキストアドバイス２４およびイラストアドバイス２５が含まれている。アドバイス提示の形態はテキスト、イラストの一方だけでもかまわないし、視覚的表示を用いず、音声によってユーザに伝達する方法でもかまわない。上記のシナリオ名２２は、撮影開始に先駆けてユーザが一覧の中から選択したものが表示されており、後述する本発明の手法によってイベントシナリオに対応するアドバイスリストが収集システム１２に転送されている。収集システム１２では、後述する本発明の手法によって撮影の状況を解析し、収集素材名２２や収集時間２３、テキストアドバイス２４、イラストアドバイス２５の表示内容を選択して表示している。
【００２１】
撮影アドバイス画面２０の下部にはビデオカメラ１０の状態が示されている。図２ではビデオテープでの録画位置を示すタイムコード２６が表示されており、その左横には録画ボタン２７と一時停止ボタン２８が表示されている。一時停止中は一時停止ボタン２８が、録画中は録画ボタン２７が反転表示されるなどの方法でビデオカメラ１０の状態を表示する。これら二つのボタン２７，２８やタイムコード２６の表示は、そのいずれか一つ、あるいはいずれか二つ、あるいは全てが表示されていなくてもよい。一方、収集システム１２上でこれら二つのボタン２７，２８のいずれかをクリック（スタイラスと呼ばれる小型ペンで画面上に触れるか、あるいはマウスポインタをボタンの位置にあわせてクリックボタンを押下）することで、ケーブル１５などの情報伝送路を通じてビデオカメラ１０を直接コントロールしてもよい。すなわち、録画ボタン２７をクリックするとビデオカメラ１０での録画が開始されるといったものである。
【００２２】
このようにして収集システム１２上でのアドバイス表示に従って撮影を行うと、その撮影開始、終了のタイムコードが収集システム１２内に格納される。例えば、図２のように収集素材名２２として「12.徒競走(2)」というアドバイス表示がなされているときに、ユーザによって録画の開始、停止が行われたとする。録画開始のタイムコードが「００：０２：５４．１１」、録画停止のタイムコードが「００：０３：２０．０８」であったとすると、収集システム１２内部では「アドバイス番号１２、開始００：０２：５４．１１、停止００：０３：２０．０８」といった情報を格納する。このとき、停止時のタイムコードの代わりに撮影継続時間「００：００：２５．２７」を格納してもよい。この撮影継続時間は停止時と開始時のタイムコードの減算によって単純に求められる。一つのアドバイスに対して複数の撮影が行われた場合には、それぞれの開始・停止時のタイムコードを記録してもよい。ここまでの例では開始・停止時のタイムコードという最も単純な撮影情報を示したが、それ以外にも撮影時のカメラの露出、絞り、ズーム設定やそれらの時間変化を含めてもよいし、ビデオカメラ１０が傾きセンサーや加速度センサーを搭載したものである場合には、パン、ティルトといったカメラワークの情報を含めてもよい。さらに、収集システム１２あるいはビデオカメラ１０のいずれか一方がその機能を有していれば、撮影が行われた時刻や、撮影が行われた緯度経度を各々の内蔵時計やＧＰＳ（Global Positioning System）から得て、アドバイスに対応した撮影情報としてその情報も格納してもよい。こうして格納された撮影情報は後述する後段の編集システム１３によって利用され、自動、または半自動でビデオ作品の編集が行われる。
【００２３】
図３は収集準備システム１１の構成を示すブロック図、図４は収集準備システム１１の動作を示すフローチャート、図５は収集準備システム１１がユーザに対して表示する選択画面の例を示すイメージ図である。
図３に示すように、収集準備システム１１は、ユーザが選択することができる複数のシナリオを格納したシナリオデータベース１０１と、このシナリオデータベース１０１から任意の１又は複数のシナリオを選択するためシナリオ選択画面を生成するシナリオ選択画面作成部１０２と、生成されたシナリオ選択画面を表示する表示部１０３と、ユーザがシナリオ選択のための選択指示を入力する入力部１０４と、選択されたシナリオデータを外部に出力するシナリオデータ出力部１０５とを備えて構成されている。なお、本収集準備システム１１は、最も典型的にはビデオ作品制作支援のためのコンピュータプログラムをパソコン上で実行させることにより実現されるものである。
【００２４】
ここで「シナリオ」とは、「アドバイスリスト」と「編集スクリプト」からなる電子的データである。このうち「アドバイスリスト」はひとつの作品に対して収集すべき素材を列挙し、それぞれの素材を収集すべき時間や（ビデオ撮影であれば）アングル、ズームやパンといった撮影技法を指示するもので、ユーザの理解を助けるために図２の２５のようなイメージ図を含んでもよい。「編集スクリプト」は、「アドバイスリスト」に即して素材収集が行われたことを前提に、収集された素材をどの順で、どのような効果（ビデオならばディゾルブ、ワイプなど）で接続し、一連の作品を完成させるかという手順を示したものである。例えば「わが子の小学校の運動会を記録した３０分のビデオ作品」というシナリオの場合、「アドバイスリスト」としては「玄関を元気よく出る子供を１５秒、アングル固定、あらかじめ子供のバストショット（胸から上がフレームに入る構図）の位置にカメラを据えておき、ドアが閉じた状態で撮影開始。ドアが開き、子供の『いってきまーす』の声を拾ってフレームアウトした３秒後に撮影停止」といったものである。一方、「編集スクリプト」は「アドバイス番号３２で撮影された子供の横顔のアップをモノクロ画像に変換し、それをバックにタイトル字幕をスーパーインポーズして５秒、アドバイス番号３で撮影された玄関を元気よく出る子供の画像に１秒のディゾルブで接続。この際、ドアが開く２秒前から、子供がフレームアウトした１秒後までを使用…」といったものである。
【００２５】
次に、図４のフローチャートに基づいて、この収集準備システム１１の動作を説明する。
まず、シナリオデータベース１０１に接続する（Ｓ１１）。シナリオデータベース１０１は本システムが動作しているパソコン内、あるいは外部接続されているハードディスクやＣＤ−ＲＯＭ、その他の記憶媒体に格納されているものでもよいし、インターネットを経由して遠隔のコンピュータ内にあるものをアクセスしてもよい。次に収集準備システム１１は、図５（ａ）のようなシナリオ一覧の画面を表示して（Ｓ１２）、ユーザにシナリオの選択を促す（Ｓ１３）。この際、シナリオを階層的に絞り込んでゆく方法を使ってもよい。例えば「小学校の運動会、作品１５分、□野□介監督風」といった詳細なシナリオを一覧表から選択する代わりに、図５（ａ），（ｂ），（ｃ）のように、段階的にイベント種別、完成作品の時間、編集技法などを指定させる方法でもよい。
【００２６】
また、図５（ｃ）のように、この段階では一つのイベントに対して複数のシナリオを選択させてもよい。この場合、それぞれのシナリオが持つアドバイスリストを足しあわせ、いずれか一つが必要とする素材は全て収集するように後段の収集システム１２で促すことになる。さらに後段の編集システムで編集を行うに先立って、最終的に一つのシナリオに決することができるようになっていれば、本システム１１の動作に関して問題は生じない。シナリオ選択画面作成部１０２が、表示部１０３を通して図５（ａ）〜（ｃ）のような画面を表示すると、システム１１はユーザのシナリオ選択指示を入力部１０４から受け付ける（Ｓ１４）。シナリオが選択されると、シナリオ選択画面作成部１０２は表示部１０３から図５（ｄ）のような画面を出力し、指示されたシナリオのデータ出力を行うかどうかを確認する（Ｓ１５、Ｓ１６）。確認画面においてユーザがデータ出力を拒絶した場合には再びシナリオ一覧を表示して再選択を促すか（Ｓ１２）、データ出力を行うことなくプログラムを終了する（図示せず）。また、プログラムがこのような確認プロセスを必ず持つ必要もなく、シナリオ選択が行われ次第、以下で説明するデータ出力動作を行ってもよい。この場合、図５（ｄ）の画面は表示されることがなく、図４のＳ１５，Ｓ１６は存在しない。
【００２７】
パソコンからのデータ出力には様々な方法があり、本発明の手法ではいずれにも限定されない。例えばＵＳＢやＩＥＥＥ１３９４といった有線シリアル通信を用いてもよいし、赤外線やギガヘルツ帯の無線通信、あるいは一旦インターネットを経由し、電子メールプロトコルやＨＴＴＰプロトコルを利用して出力してもよい。さらに、データ出力はフロッピーディスクやメモリーカードに対して行い、後段の収集システムにおいてはこのディスクやカードを挿入し、そこに記録されたデータを参照してもよい。この出力動作はシナリオデータ出力部１０５からデータ出力端子１０６を介して行われ、選択された一つまたは複数のシナリオに必要なデータ全ての書き出しが終わるまで行われる（Ｓ１７〜Ｓ１９）。ここで出力されるデータはアドバイスリストと編集スクリプトの両方でもよいし、アドバイスリストのみでもよい。アドバイスリストのみを出力する場合には、編集スクリプトは図３〜５のいずれにも図示されていない方法で後段の編集システム１３に伝送されるものとする。この伝送については、この収集準備システム１１が機能するパソコンと後段の編集システム１３が動作するパソコンとが共通であれば、共有のファイルに記録することで実現可能であり、さらに、データパッケージとしてインターネット上に一時保管しておく方法でも実現可能である。すなわち、本システムを使用するどのユーザが、どのシナリオをダウンロードしたかをインターネット上で管理しておけば、後段の編集システム１３では選択されたシナリオを特定することができ、編集スクリプトを参照することもできる。
【００２８】
次に、収集システム１２について図面を参照しながら説明する。
図６は収集システム１２の構成を示すブロック図、図７は収集システム１２の動作を示すフローチャート、図８は収集システム１２がユーザに対して表示するアドバイス画面の例を示すイメージ図である。
収集システム１２は、図６に示すように構成されている。即ち、アドバイスリスト格納部２０１には、上述した収集準備システム１１から転送されたアドバイスリストが格納される。入力受付部２０５は、入力部２０６からの選択指示入力を受け付ける。アドバイス作成部２０３は、受け付けられた選択指示入力に基づいてアドバイス表示画面を作成し、これを表示部２０４を介してユーザに呈示する。記録動作状況分析部２０９は、記録動作状況入力端子２１０からビデオカメラ１０の記録動作状況の情報を入力し、これを分析する。記録動作状況格納部２０２は、入力された記録動作状況を格納する。記録制御信号出力部２０７は、入力部２０６からの選択指示入力及び記録動作状況分析部２０９の分析結果に基づいてビデオカメラ１０の記録動作を制御するコントロール信号をコントロール出力端子２０８を介して出力する。記録予定情報解析部２１１は、記録予定情報入力端子２１２を介してビデオカメラ１０からの映像信号を入力し、これを解析する。この解析結果は、アドバイス作成部２０３で作成されるアドバイス画面に反映されたり、記録制御信号出力部２０７のコントロール信号の生成に反映される。
【００２９】
次に、このように構成された収集システム１２の動作を図７のフローチャートに基づき説明する。なお、ここでは、一例としてビデオ作品制作支援用のプログラムが携帯情報端末上で実行されることにより本収集システム１２が実現される場合について説明する。
アドバイスリスト格納部２０１には、上で説明した方法などにより、あらかじめユーザによって選択され、収集システム１２に転送されたアドバイスリストが格納されている。上で説明したように、本システムに転送されたデータがシナリオ全体、すなわちアドバイスリストと編集スクリプトの両方であった場合には、編集スクリプトもこのアドバイスリスト格納部２０１、または記録動作状況格納部２０２のいずれか一方または両方に格納されるが、ここで説明する収集システムではこの編集スクリプトは直接に使われることはない。
【００３０】
撮影終了でなければ（Ｓ２１）、システムはまず、アドバイス作成部２０３および表示部２０４を通じて、ユーザに対してアドバイスリスト全体の表示か個別のアドバイス表示かの選択を促す（Ｓ２２）。アドバイスリスト全体表示とは例えば図８（ａ）のような収集素材名と収集時間のリストであり、個別アドバイス表示とは例えば図８（ｂ），（ｃ），（ｄ）のような、個々の収集素材についてのアドバイス表示である。画面表示の詳細については後述する。入力受付部２０５は、入力部２０６からユーザの選択指示を受け付け、それがアドバイスリスト全体表示ならばアドバイス作成部２０３に対して表示部２０４を通して図８（ａ）のようなアドバイスリスト全体表示を行うよう指示する（Ｓ２３，Ｓ３７）。ユーザが個別アドバイスを選択した場合、入力受付部２０５はその旨アドバイス作成部２０３に通知し、アドバイス作成部２０３は下記に述べる方法で作成したアドバイス表示画面を生成して表示部２０４を通して表示する（Ｓ２３，Ｓ２４）。このとき、表示されるアドバイスとは図８（ｂ），（ｃ），（ｄ）のようなものである。このアドバイス表示に際しては、文字によるテキストアドバイスだけでなく、イラストによるアドバイスを表示してもよい。
【００３１】
図９にはイラストアドバイス部分だけを書き出した別の例を示している。図９（ａ）のアドバイスは、運動会で主人公の徒競走が終わり、着順の旗のもとで余韻を感じている場面を撮影するためのイラストアドバイスの例である。後で詳細に説明するように、このアドバイスが表示された後に発生したビデオカメラの録画・停止動作を記録するため、イラストに示した状態に類似した構図にカメラが据えられたときに、録画開始を行うように促す文面もイラストに含まれている。図９（ｂ）のアドバイスは昼食の休憩時に弁当を食べる子供を撮影するためのものである。楽しさを演出するために被写体のセリフを録音する必要があるので、カメラマンが被写体に質問をするように文字によって促している。
【００３２】
画面内に図２の２７、２８のような操作ボタンアイコンを表示し、そのボタンアイコンがクリックされたときに、本発明の収集システムに接続されたビデオカメラ１０に対して、ケーブル１５などの情報伝送路を通して録画開始、停止などの制御信号を送信するようになっていてもよい。ユーザが何も指示しなければ次々と個別アドバイスを表示するような設定があらかじめ本システムになされていれば、Ｓ２２、Ｓ２３を省略して手順が流れてもよい。このとき、メニューボタンを押すとか、画面内に用意された「一覧」のボタンをクリックするなどの特別な操作を行うことでアドバイスリスト表示が行われるようになっていてもよい。
【００３３】
個別アドバイス作成の最も簡単な方法は、一場面の撮影が終わる都度、アドバイスリストに格納されている次の個別アドバイスを表示するというものである。例えばアドバイスリストに「玄関を出る子供」、「校門から入る観客たち」、「入場門で出番を待つ子供」という順で撮影アドバイスが格納されている場合、本システムの最初のアドバイスとして「玄関」を表示し、そのあと最初にビデオカメラが撮影状態から停止状態になったときに「校門」を、次に停止状態になった時に「入場門」を表示していく方法がある。もう少し高等な方法としては、各アドバイスに対する録画時間が各アドバイスに与えられている収集時間（例えば１５秒撮影するとよい、といった時間の面での録画アドバイス）に達した後の最初の停止状態で次のアドバイスに切り替えるという方法がある。また、アドバイス表示画面内に「次」、「前」といったボタンアイコンを備え、ユーザが意識的に次の順番にあるアドバイスを表示させるように指示するのを入力部２０６及び入力受付部２０５を通じて受け付けたり、同様に前の順番のアドバイスを選択させてもよい。さらに、一つ一つのアドバイスに対する撮影が終わる都度アドバイスリスト全体表示を行い、アドバイスリストの中から次に表示させたいアドバイスを一つ一つ選ばせるようにしてもよい。個別アドバイス表示画面内に図８に示すようにスキップボタン３１や撮影省略ボタン３１を設け、この個別アドバイスに対する撮影を保留したり、省略することを許してもよい。この場合、保留された個別アドバイスは、保留されない次の個別アドバイス表示の後に再表示し、省略された個別アドバイスは全ての個別アドバイス表示が終わっても表示されないようにしてもよい。
【００３４】
アドバイスリスト全体表示は、たとえば図８（ａ）のようなものである。この画面ではこのシナリオに関する収集すべき素材が列挙されている。各素材項目の左端にはチェックボックスが用意されており、既に撮影が完了した素材についてチェックマークが入っている。項目名の上をクリックすることにより、ポップアップ表示３３により、その項目に関するアドバイスの詳細が見られるようになっている。図８（ａ）の画面は説明のための一例であり、たとえばチェックボックスの代わりに「未撮影」、「撮影済み」、「保留」、「省略」などのステータスを表示してもよいし、ポップアップ表示３３のなかにイラストアドバイスを含めてもよい。画面右側の時間表示についても、アドバイスが要求する撮影時間の代わりに、実際に撮影された長さ（分、秒）や、時刻などを表示してもよい。
【００３５】
説明の都合上、図７のステップＳ２５〜Ｓ２９、およびステップＳ３３〜Ｓ３６の説明は後で詳しく述べる。
このように、個別アドバイスが表示された状態で素材収集動作（ビデオカメラの場合には録画開始、停止など）を行ったとき、記録動作状況分析部２０９はその録画開始から停止までの間の記録装置（ビデオカメラ）の状態を記録動作状況入力端子２１０から入力し、記録動作状況格納部２０２に格納する。ここで入力、格納される記録動作状況とは、この「発明の実施の形態」の冒頭に例示したように、最も単純なものとしてはビデオテープ上の記録位置、すなわちタイムコードであり、ビデオ撮影の場合にはパン、ティルト、ズームといったカメラワーク動作の区別、あるいはカメラワークの動作量そのものでもよい。パン、ティルト、ズームといったカメラワークを検出するのは、本システムに接続されたビデオカメラではあるが、その検出方法としては、たとえばカメラにジャイロセンサを内蔵し、３次元空間内に互いに直交する３軸の回りでの回転動作をセンシングすることにより、カメラが鉛直軸を中心に水平面内を動いた角度をパンの量とし、水平面内で撮影の光軸と直交する軸を中心に動いた角度をティルトの量とする方法がある。ズームに関してはカメラのズームボタン、または接続されている本システムから指示したズーム量をそのまま記録すればよい。さらに、ビデオカメラまたは本システムに画像処理手段を内蔵し、画像処理によってこうしたカメラワークを検出する方法もある。例えば画面をメッシュ上にブロック化し、各ブロックが前後のフレームでどう移動したかを追跡する。こうして各ブロックの移動量が動きベクトルとして検出されると、その動きベクトルの分布からカメラワークを推定できる。単純には、各ブロックの動きベクトルが画面の同方向に同じぐらいの長さを持って分布していればパンまたはティルト（横方向ならパン、縦方向ならティルト）、画面中心に向かっていればズームインまたはドリーといった推定方法である。このような画像処理的な推定方法については、すでに知られている（例えば本願出願人によって出願されている特開平９−２１２６４８号）。こうした画像処理機能を搭載した例については後でも述べる。他の記録動作状況としては、内蔵時計から得られる時刻や、ＧＰＳから得られる緯度経度、携帯電話の基地局固有番号などを利用したエリアＩＤをはじめとする位置情報、気温、気圧、湿度、撮影者の体温や血圧、フレーム内の被写体数や、被写体のＩＤ（名前）などといったものも、それらが検出可能であるのならば含んでよい。提示されたアドバイスに対応づけて記録動作状況を格納するというのが本発明の趣旨であるから、記録動作状況の内容そのものを限定するものではない。
【００３６】
この後に説明する方法によって個別アドバイス表示に対応した記録動作状況の格納が完了するまで、記録動作状況分析部２０９による記録動作状況の入力、分析は続けられる（Ｓ３１）。個別アドバイス表示に対応した記録動作状況の格納が完了すると、記録動作状況分析部２０９は表示していた個別アドバイスの識別番号に対して、そのアドバイスに対する素材収集が完了したことを記録動作状況格納部２０２に格納する（Ｓ３２）。この手順は、一つの個別アドバイスに対して複数の素材収集を禁止するものではない。アドバイス作成部２０３によって、アドバイスリストの中の全ての個別アドバイスに対する素材収集が完了したと判定されると、本システムを利用した素材収集作業は終了状態になる（Ｓ２１）。
【００３７】
記録動作状況がビデオ信号のタイムコードである場合、コントロール出力端子２０８、記録動作状況入力端子２１０は、たとえばＩＥＥＥ１３９４インターフェースであり、ＩＥＥＥ１３９４通信手順によってケーブルを介してビデオカメラにコントロール指示を出力したり記録動作状況を入力したりする。上述のＳ２４までの手順によって個別アドバイスが表示されているとき、記録動作状況分析部２０９は表示された個別アドバイスの識別番号を内部状態として保持する。この個別アドバイス識別番号は例えばアドバイスリストの中での該当アドバイスの順序でよい。この状態で、記録動作状況入力端子２１０を通して外部の情報記録装置、すなわちビデオカメラ１０から録画開始信号を受け付けたとする。このとき、記録動作状況分析部２０９はＩＥＥＥ１３９４インターフェースを通じて入力されてきたタイムコード情報を解読し、録画開始位置として記録動作状況格納部２０２に格納する。同様に、録画停止信号を受け付けたときにも、そのときのタイムコード情報を記録動作状況格納部２０２に格納し、同時にこの個別アドバイス表示に関連した記録動作状況格納が完了する。
【００３８】
記録動作状況格納部２０２に格納する記録動作状況としては、タイムコード以外にも例えば録画開始、停止時前後の１つまたは複数のフレーム画像そのものでもよい。後述する後段の編集システム１３で録画開始点、停止点を検索する際には、ビデオテープ中を走査し、ここで格納された開始、停止時の画像とのマッチングを取ることで開始点、停止点を求めることもできる。このマッチング手法としては、単純に各画素の輝度差を合計する方法のほか、画面全体の色相ヒストグラムを用いる方法など様々な方法があり、特に一つに限定するものではない。なお、画像の類似を判定する方法については、複数フレームの比較方法も含めて本願出願人による特開平９−２７０００６号にも複数の手法が例示されている。
【００３９】
このような画像マッチングによる開始、停止点の格納、検索は以下のような場合に有効である。タイムコードだけを用いた方法だと、タイムコードが連続しない場合に計時がリセットされる場合がある。現在一般に用いられているデジタルビデオカメラ（ＤＶカメラ）の場合、テープの最初から２分間録画すると「００：００：００．００」から「００：００：０１：２９」のタイムコードが付与されるが、録画停止状態にし、テープヘッダがその先のブランク部分を１秒程度進んでしまったあとに録画を続けるとタイムコードは再び「００：００：００．００」から付与される。このため、１つのテープの中で重複したタイムコードが記録されることはあり得る。画像マッチングを用いたり、それをタイムコードと併用することでこの問題を回避できる。
【００４０】
本システムに接続される情報記録装置がデジタルスチルカメラである場合には、上述のビデオカメラの場合のタイムコードに相当する情報として写真の識別番号を用いることができる。スチルカメラの場合、単数のフレームしか記録を行わないために録画開始から終了までの時間幅は意味を持たず、単にスチルカメラ内での写真の識別番号が意味を持つ。識別番号とは例えば「PCT0005.JPG」といった画像ファイル名である。記録動作状況分析部２０９は、こうした識別番号を記録動作状況として記録動作状況入力部２１０から受け付け、記録動作状況格納部２０２に格納する。
【００４１】
デジタルスチルカメラの場合にも後段の画像マッチングを想定し、フレーム画像そのものを記録動作状況の一部または全部として格納してもよい。デジタルスチルカメラの中には、その記録メディア（メモリカード）の中にフォルダによる階層構造を持つことができるものもあり、このようなカメラの場合には異なるフォルダには同じ名前の画像ファイルを保持できる。これら、異なるフォルダに存在しながらも同じ名前を持ったファイルは、後段でパソコンなどに転送された際にファイル名だけからでは識別が困難になることがある。画像そのものを状況記録に用いることで、この問題を回避できる。デジタルスチルカメラ使用時のその他の記録動作状況として、撮影が行われた年月日時間をもとりうる。これを記録動作状況の一部または全部として格納することにより、上述の同名ファイル問題を回避できる。
【００４２】
さらに、本システムに接続される情報記録装置がオーディオレコーダー（テープレコーダーやミニディスクレコーダー、パソコンを利用したディジタル音声記録方法など）である場合には、上のビデオカメラとディジタルスチルカメラの例で説明したのと同様に、タイムコード（アナログテープであれば、テープ先端からの録音時間位置や、カウンターなど）やオーディオファイル番号、あるいは録音が開始、終了された時刻などを記録動作状況として記録動作状況格納部２０２に格納してもよいし、音声波形そのものやそのパワースペクトラム、あるいはパワースペクトラムの時間変化などを記録動作状況として記録動作状況格納部２０２に格納してもよい。
【００４３】
本発明の収集システム１２は、外部に接続された情報記録装置が記録しようとする記録予定情報を入力する端子２１２を持っていてもよい。例えば本システムがＩＥＥＥ１３９４プロトコルによる情報伝送路によってビデオカメラ１０に接続されている場合、カメラが撮影しようとしている画像そのもの（記録予定情報）を本システムに入力することができる。以下ではこの場合の動作について説明する。
【００４４】
記録予定情報解析部２１１は、記録予定情報入力端子２１２を通じ、外部の情報記録装置が記録しようとしている情報、すなわち、ビデオカメラ１０の場合にはカメラのファインダーに映っている映像そのものを入力する。本発明の収集システム１２が最も簡単な構成を取る場合、記録予定情報解析部２１１はこの映像をそのままアドバイス作成部２０３に送り、アドバイス作成部２０３はすでに説明した方法によって選択されたアドバイスと、このファインダー画像の片方あるいは両方を表示部２０４に出力する。例えば図８（ｂ），（ｃ），（ｄ）には個別アドバイスがイラストともに表示されているが、そのイラストの上下左右に現在のファインダー映像を並べて表示してもよい。あるいは、イラストとファインダー画像を幅、高さともに同じ大きさになるようにシステム内部で変形し、両者を対応する画素ごとに平均することによって、イラストとファインダー画像とが重なり合った画像を作成、表示してもよい（オーバーラップ表示）。図９（ｃ）はアドバイスとファインダー画像とを重ね合わせた一例である。ファインダー画像には着順旗の下で座っている子供が捕らえられている。一方、表示部２０４は、アドバイスとして図示のような十字カーソルと矩形が組み合わさったターゲット位置／サイズ指定マーク４１を表示している。このターゲット位置／サイズ指定マーク４１は、十字カーソルの中央に顔の中心が、矩形の中に顔全体が収まるように構図を取ることを示唆するアドバイスであり、カメラマンはアドバイスに従った構図どりを行っている。このように、イラストとファインダー画像の両方が本収集システム１２上で一覧できるようにすることにより、ユーザはアドバイスが求めている撮影構図と実際にカメラがとらえている構図がどれだけ異なり、どのようにカメラを操作すれば両者を近づけることができるかを、端的に認知することができる。
【００４５】
次に記録予定情報解析部２１１が記録予定情報、すなわち画像の解析を行って本システム１２の動作に反映させる場合について説明する。この処理は、図７のステップＳ２５〜Ｓ２９及びＳ３３〜Ｓ３６に相当する。記録予定情報解析部２１１は記録予定情報入力端子２１２から記録予定情報が入力されると、それがこれから撮影しようという素材収集に関するアドバイスと照らして、どれだけ類似しているかを判定する（Ｓ２５，Ｓ２６）。例えばアドバイスに示されている撮影開始時の構図が「画面左半分に主人公の顔のアップ」であった場合、ファインダー画像の解析を行い、顔領域の重心が画像中の中央より左にあり、顔領域の面積が画面の３０％以上、といった条件を満たすときに「アドバイスと合致」と判定する。顔領域を求める方法は、最も単純には肌色領域を顔とする方法もあるが、その他にも様々な方法が提案されている（例えば小松ら「部分空間法を用いた向きによらない顔の切り出しと認識」；電子情報通信学会技法ＰＲＵ９５−１９１、1995年、安居院ら「静止濃淡情景画像からの顔領域の抽出」；電子情報通信学会論文誌Vol.J74-D-II,No.11,pp.1625-1627、1991年、横山ら「色彩画像からの顔の発見と顔部品の同定」；情報処理学会研究報告、コンピュータビジョンとイメージメディア 100--11、1996年など）。
【００４６】
さらに、シナリオが子供の運動会をテーマにしたものであるならば、主人公とは自分の子供のことであるので、ファインダー画像にとらえられている顔そのものが自分の子供の顔であるかどうかを判別することにより「アドバイスと合致」しているか否かを判定してもよい。こうした人物認証手法の例としては本願出願人によって出願されている特開平９−２５１５３４号が挙げられる。しかし、本発明は顔領域の推定や人物認証の手法に特段の限定を加えるものではない。
【００４７】
また、記録動作状況分析部２０９が記録動作状況入力端子２１０から入力された記録動作状況を分析し、アドバイスと合致しているか否かを判定してもよい。この例としては、例えばアドバイスが「カメラから約５ｍに主人公がいるようにとらえる」といったものであり、オートフォーカス（自動焦点合わせ）機能付きのスチルカメラまたはビデオカメラである場合には、被写体に焦点が合うようにカメラがレンズを光軸上で移動させているということを利用して、レンズの光軸上での位置関係、ひいては焦点距離を記録動作状況として入力し、アドバイスに合致しているかどうかを判定できる。他の情報としては、カメラが加速度センサあるいはジャイロセンサを持っている場合には、アドバイスが「被写体を下から見上げるアングルで」であるとき、カメラの仰角が上向きであるかどうかをセンサデータから知ることができる。
【００４８】
このように記録予定情報解析部２１１、記録動作状況分析部２０９の少なくとも一方により、アドバイスと記録予定情報とが合致すると判定される場合（Ｓ２６）、それがカメラをコントロールすべきタイミングであった場合（Ｓ２７）には、記録制御信号出力部２０７がビデオカメラ１０をコントロールする信号をコントロール出力端子２０８を通じて出力する（Ｓ２９）。「カメラをコントロールすべきタイミング」とは、たとえば録画の開始や停止であり、上に示した例のように「画面左半分に主人公の顔のアップから録画を開始し、主人公の全身を写すフルショットまで１０秒かけてズームアウト」といった撮影アドバイスのとき、本システム１２は「左半分に顔のアップ」と合致したときに録画開始信号を、「顔領域が画面面積の２％以下」になったときに録画停止信号を送るなどの動作を行う。また、この例で挙げたように１０秒でズームアウトといったアドバイスの場合には、ズームコントロール信号を出力し、ズームそのものも本システム１２からコントロールしてもよい。
【００４９】
もし録画中にアドバイスから逸脱する撮影が行われそうになったとき、本システム１２はそれを自発的に修正するように動作してもよい。例えば前の例のように「画面左半分に主人公の顔」というアドバイスにも拘わらず、人物の顔が右半分に検出されたとき（Ｓ２６）、もし本システム１２に接続されているビデオカメラ１０がモータードライブによって方向が変えられるマウントの上に載っていたならば、本システム１２はコントロール出力端子２０８を通してそのマウントに対する動作信号を出力し、アドバイス通りの構図になるように自動調整を試みる（Ｓ２８、Ｓ２９）。自動調整が不可能な場合、たとえば「固定アングルで１５秒流して撮影」というアドバイスにも拘わらず、ユーザがカメラを持ち運ぼうとしている場合（Ｓ２８）には、記録予定情報解析部２１１または記録動作状況分析部２０９はアドバイス作成部２０３にその旨通知し、アドバイス作成部２０３は、「カメラを動かさないでください！」といった状況依存アドバイスを生成し、このアドバイスを表示部２０４に表示する（Ｓ３３）。また、本システム１２がコントロール出力端子２０８を持たない場合にも、本システム１２から直接カメラ１０などを制御することができないため、警告表示を行う（Ｓ３３）。
【００５０】
図９（ｄ）には、こうした警告表示の一例を示している。この表示ではファインダー画像に重ね合わせてアドバイスが表示されている。アドバイスは点線４２によって被写体をこの位置に、この大きさで撮影することを促しているが、実際には人物４３は右側にとらえられている。そこで記録予定情報解析部２１１はその差を計算し、さらにアドバイス作成部２０３は状況依存アドバイスとしてカメラを右下に動かすことによってアドバイスに従った構図に近づけようとする。画面内の矢印４４は、ユーザ（カメラマン）に対してカメラを右下に動かすことを促すものである。このような警告を行ったにも拘わらず、ユーザが自発的にアドバイスに添うようなアクションを起こさない場合には（Ｓ３４）、本システム１２は（それが可能であれば）カメラ１０に対して録画の停止を指示し（Ｓ３５）、それに伴う記録動作状況信号＝「録画停止」を記録動作状況格納部２０２に格納する（Ｓ３６）。
【００５１】
以上の説明では、アドバイスは本発明の収集システム１２が内部に備えた表示部２０４に表示することを前提にしていたが、本システム１２の外部に接続した情報記録装置を表示部として利用する方法もある。この場合、表示部２０４は本システム内部になくてもよい。例えば、外部に接続されたビデオカメラがＩＥＥＥ１３９４によって表示アドバイスを受け付ける機能を有していた場合、本システムのアドバイス作成部２０３は、ビデオカメラが必要とするデータ形式にアドバイスを変換し、表示部２０４の代わりにビデオカメラ１０に対して出力する。ビデオカメラ１０側ではファインダー内あるいはその他の表示装置にこのアドバイスを表示できるので、ユーザはビデオカメラのファインダーと本システムの装置の両方に相互に目を転じることなく、撮影操作を行うことができる。また、アドバイス表示のために、本システムと外部の情報記録装置（例えばビデオカメラ）のいずれでもない第３の表示装置が外部に接続されることを許容し、その第３の表示装置に対してアドバイスを出力してもよい。さらに、本システム自身が情報記録装置を内蔵していてもよい。例えば、本システム１２がビデオカメラの一部機能となり、上記で説明した動作がすべてビデオカメラ内で完結していてもよい。
【００５２】
上記では、収集システム１２は独立の端末であり、アドバイスリスト、またはシナリオを提供する方法または装置については特に限定しなかったが、アドバイスリストまたはシナリオを提供する方法または装置が、上記で説明した収集準備システム１１であってもよい。この場合、両者はデータ形式や送受信方法について共通のプロトコルを持つ。さらに、上記で説明した収集準備システム１１と収集システム１２が一体となった装置またはプログラムであってもよい。これは例えば、携帯情報端末が携帯電話との接続やモデムカードの装着、内蔵などによってネットワークアクセス機能を持っており、シナリオをインターネット上から選択、ダウンロードできる場合などに実現できる方法である。
【００５３】
次に編集システム１３について図面を参照しながら説明する。
図１０は編集システム１３の構成を示すブロック図、図１１は編集システム１３の動作を示すフローチャート、図１２は編集システム１３がユーザに対して表示するアドバイス画面の例を示すイメージ図である。
編集システム１３は、図１０に示すように構成されている。入力部１は、ユーザからの指示を入力する。記録動作状況入力部３０２は、記録動作状況入力端子３０３から記録動作状況の情報を入力する。メディア選択部３０４は、編集するメディア作品のシナリオをシナリオ入力端子３０５から入力し、入力されたシナリオを参照してそれが必要とする素材のリストを内部に作成すると共に、作成された素材のリストと入力された記録動作状況とを比較して不足する素材のリストを作成する。編集インターフェイス作成部３０７は不足素材について必要なものを補うようにユーザに促すメッセージやその他の編集に必要なメッセージを作成し、これを表示部３０８に表示する。バッファ３０６は、シナリオや仮編集した素材などを一時的に保存する。入力メディアコントロール部３１１は、コントロール出力端子３１２を介して情報記録装置を再生制御する。メディア入力部３０９は、これによってメディア入力端子３１０から情報素材を順次入力する。メディア解析部３１３は、入力された情報素材を解析して編集に必要とする素材をバッファ３０６に格納する。メディア効果作成部３１４は、コンピュータグラフィックスの挿入等、種々のメディア効果を作品に付与する。メディア出力部３１５は、全ての編集が終了すると、メディア出力端子３１６を介して完成されたメディア作品を出力する。
【００５４】
次に、この編集システム１３の動作について説明する。なお、以下では図１０〜１２を参照しながら、例として本発明の編集システム１３が、アドバイスに従って撮影されたビデオと、各々のビデオ素材がどのアドバイスに対応して撮影されたものかという情報をもとに、ビデオ編集を行うプログラムとしてパソコン上で機能する場合を説明する。この例でいうアドバイスとは、上記で説明した収集準備システム１１を使ってユーザが選択したシナリオに含まれているアドバイスリストのことであり、撮影は上記で説明した収集システム１２の補助を受けて行ったものであるとする。
【００５５】
本編集システム１３は、例えば上で説明した収集システム１２と、その収集システム１２を伴って撮影を行ったビデオカメラ１０を、本編集システムのプログラムが作用するパソコンにＵＳＢやＩＥＥＥ１３９４などの通信方法を用いて接続して使用する。このとき、ビデオカメラ１０には撮影素材を記録したビデオテープが挿入されているものとする。本システム１３は入力部３０１からユーザの指示を受けて、編集作業を開始する。まず記録動作状況入力部３０２は、各素材収集（＝撮影）アドバイスに対してどのように撮影が行われたかという情報を記録動作状況入力端子３０３から入力する。ここで入力される情報は、第一には各アドバイスに対する撮影が記録されているテープ上の場所（タイムコード）であり、その他、ズームやパン、ティルトといったカメラワーク情報も含まれる。これらカメラワークの種類や、記録動作状況の例、さらにそれらの検知手法についてはすでにこれまでの例で述べたので省略する。もし、本システム１３が記録動作状況を入力する相手となる収集システム１２が、前々段の収集準備システム１１でユーザが選択したシナリオを保持している場合には、メディア選択部３０４はシナリオ入力端子３０５からこれを入力する。収集システム１２ではなく、収集準備システム１１が直接本システム１３に対して、例えばデータファイルなどの形で、シナリオを送信している場合には、同様にこれをシナリオ入力端子３０５から入力する。あるいは、選択されたシナリオを参照できる識別番号だけが収集システム１２から、または収集準備システム１１から送信され、その識別番号に対応するシナリオをネットワーク上から入手可能な場合には、シナリオ入力端子３０５はインターネットなどに接続し、シナリオを入力する。
【００５６】
次に、シナリオに沿って素材の補足、修正、追加、選択を行う（Ｓ４１）。即ち、メディア選択部３０４はシナリオを参照し、それが必要とする素材のリストを内部に作成する。リストやシナリオそのもの、仮編集した素材などを保管する目的でバッファ３０６は用いられる。メディア選択部３０５は、このリストと上記のようにして入力された記録動作状況情報を比較し、作品製作に必要な素材が全て揃っているか、不足するものは何かを列挙する（Ｓ４２）。不足するもののうち、本システム１３が自発的に補うことができるものについては、それを補う予備編集を行い、ユーザによる操作が必要なものについては編集インターフェース出力端子３０８を通して不足素材を補うようにユーザに促す（Ｓ４３）。
【００５７】
不足素材の例について次に説明する。例えば素材として子供の顔のアップが必要だったにもかかわらず、それを一度も撮影していなかったとする。このビッグクローズアップは画面一杯に顔を大写しするものであり、背景は関係ない。すると、システムはメディア入力部３０９と入力メディアコントロール部３１１に作用し、コントロール出力端子３１２からの出力信号によってビデオテープを再生させ、ビデオテープ全体に入っている画像を逐次、メディア入力端子３１０から入力するようにする。メディア解析部３１３は、この画像の中から、子供の顔がなるべく大きく撮影されている部分を探し出し、その映像から顔の部分だけを拡大し、不足素材と同様の素材をバッファ３０６内に生成する。顔領域認識や人物識別の技術についても、これまでの例の中で説明したのでここでは省略する。不足素材を補う代替素材が、このシナリオのために撮影された素材の中にも見つからない場合には、別途撮影された素材の中から代替素材を見出してもよい。例えば、運動会を撮影した素材の中には子供の顔のアップがなくても、夏休みに撮影した素材の中にはそれがあり、その素材がパソコンの記憶装置の中やインターネット上、あるいは運動会を撮影したビデオテープと同じテープ内に保存されている場合には、それを流用してもよい。この流用を行うかどうかの選択や、複数の代替素材が存在する場合の選択については、あらかじめユーザに指定させておいてもよいし、都度、ユーザに選択を促す画面を編集インターフェース作成部３０７が編集インターフェース出力端子３０８から出力してもよい。
一方、玄関前のプランターの植物を撮影し忘れていたとすると、これを既存の素材から合成するのは困難であるため、ユーザに対して（今からでもかまわないので）プランターの映像だけを追加して撮影してくるように、編集インターフェース作成部３０７が編集インターフェース出力端子３０８から促す。
【００５８】
不足素材を補う代替素材として、別の素材を合成、加工して仮の素材を製作する方法について上では例示したが、このほか、まったく構図の異なる素材を、当初予定されていた素材の代わりに用いてもよい。例えば、シナリオ中では子供の顔のアップを用いるべきところではあるが、その代わりに机上の帽子をつかみあげる子供の手のアップを撮影し、置き換えてもよい。これを実現するためには、こうしたインサート用の予備ショットを複数用意するようにシナリオが規定されていて、シナリオ中にも代替素材としての第２候補、第３候補を規定しておけばよいので、本発明の枠組みの中で実現できる。
【００５９】
また、上の収集準備システムの例で図５（ｃ）を用いて説明したように、複数のシナリオが選択されたままになっている場合には、図１２（ａ）のような画面を編集インターフェース作成部３０７が編集インターフェース出力端子３０８から出力して、いずれのシナリオを用いて作品を製作するかの選択を促す。あるいは、この段階で一つのシナリオに絞り込むかわりに、以降で説明する手順を各シナリオごとに実行し、複数のシナリオに対応した複数の作品を製作してもよい。
【００６０】
編集に必要なデータが揃ったら、シナリオに書かれている編集手順を順次読み出し、編集が終了するまで以下の手順を実行する（Ｓ４４）。まず、次のシナリオ項目を読み出して（Ｓ４５）、次のショットとして挿入されるべき素材がコンピュータグラフィックス（ＣＧ）であるかどうかを判定する（Ｓ４６）。ここでいうＣＧ素材とは、このショットにおいてビデオカメラによって撮影された素材を一切用いず、パソコン内で人工的に作成された映像のことである。実際のビデオ編集においては、たとえばタイトルバック、旅行記における地図、スポーツ映像における位置関係の説明（マラソンコースの鳥瞰図やチーム競技での各選手の配置）、技術プレゼンテーションにおけるグラフや表などがこれに相当する。もし、ＣＧ素材を追加すべきである場合には、メディア効果作成部３１４はシナリオ中の指示にしたがってＣＧを作成し、完成作品の一部としてバッファ３０６に仮格納する（Ｓ４７）。
【００６１】
一方、次のショットとして挿入されるべき素材が自然画像（ビデオカメラによって撮影された素材）を一部または全部に利用するものである場合、それに用いるべき素材が撮影されていて存在しているかをメディア選択部３０４が確認する（Ｓ４８）。存在していない場合には、不足素材として既に説明した方法を用いて仮に製作された代替素材を挿入するか、ユーザにその旨を通知し、対処の指示を促す（Ｓ４９）。存在している場合には、それが一意に定まる場合（Ｓ５０）、すでに記録動作状況入力端子３０３から記録動作状況入力部３０２が入力してバッファ３０６に仮保管してある記録動作状況情報から、テープ中で目的の素材が記録されている場所（タイムコード）を読み出し、入力メディアコントロール部３１１に対し、コントロール出力端子３１２から外部の装置（ビデオカメラ、またはビデオテープレコーダー）をコントロールして必要部分を再生するように指示する。指示にしたがって外部の装置が本システム１３に送ってきたメディア情報はメディア入力部３０９がメディア入力端子３１０から入力し、後段のメディア編集に供する（Ｓ５４）。
【００６２】
上では編集の進行に従って外部の装置をコントロールし、逐次必要な映像素材を読み込む方法について説明したが、これ以外にも、あらかじめ一括してビデオテープ中の映像音声データをパソコン内に取り込み、そこから編集に必要な素材を読み出してくる方法もある。また、撮影された素材の映像音声データがインターネット上に存在している場合には、インターネットを経由してそれらの情報をダウンロードしてきてもよい。
【００６３】
次のショットとして挿入されるべき素材が一つに限定できない場合もありうる（Ｓ５０）。これはまず第一の例として、インサート素材（撮影の主体との直接の関連性は薄いが、ストーリーの全体像を明確にするために撮影しておくクローズアップや俯瞰、小物など）を十分多くの量だけ撮影しておいたために、複数の素材がそのショットの候補になりうる場合である。この際、インサート素材の候補にはシナリオ中で同列の優先順位が与えられている。優先順位が異なるものであれば、メディア選択部３０４によって自動的に順位の高い素材が選択される。また、同じ場面を撮影した素材であるが、一方はカメラワークが早すぎて被写体がぼけていたり（モーションブラー）、被写体がフレームアウト（画面内からはみだすか、いなくなる）してしまっているのに対し、他方は正しく撮影されている場合もある。これもメディア解析部３１３による画像解析によって、顔領域がフレームの端に接していないか判定したり、画面全体にわたって画像の周波数成分（空間的なフーリエ変換を行った際の係数）を計算して、十分に高い周波数成分まで含まれているか（すなわち、画像がぼけていないか）を判定したりすることで、素材の優先順位を規定できる。こうした自動的な優先順位付けに基づき、本システムが自動編集モードで動作している場合には（Ｓ５１）、メディア選択部３０４によって自動的に素材が選択される（Ｓ５２）。また、自動編集モードでないときには、編集インターフェイス作成部３０７は、表示部３０８を介してユーザに選択指示を促す（Ｓ５３）。
【００６４】
本システムが自動編集モードで動作するかどうかについては、入力部３０１を介してあらかじめユーザの選択を受け付けておく。この際、編集インターフェース作成部３０７は表示部３０８を介して例えば図１２（ｂ）のような画面を提示し、選択を促す。図１２（ｂ）中には３つの選択肢が用意されている。「ぜんぶおまかせ」は、あるショットを製作するにあたって複数の素材が存在する場合には上記のような優先順位をシステムが自動的に計算し、最高順位のものを自動的に選択するモードである。この場合、優先順位を計算できない複数素材や、優先順位が１位の素材が依然として複数になる場合にはあらかじめ規定した方法（例えばランダムに選ぶ、あるいは素材時間がもっとも長いものを選ぶ、など）によって自動選択される。「ぜんぶ手動」は、複数候補が存在する場合にも優先順位を計算せず、あるいは計算してもそれにしたがって自動選択することなく、ユーザに選択を促す画面を表示する。この場合であって優先順位を計算した場合には、その計算結果を表示に付記することによってユーザに選択に役立つ付加情報を知らせてもよい。
【００６５】
「かんじんなところは手動」では、優先順位を計算するにあたっての各素材の優先度が規定以内の僅差である場合や、シナリオ中において特に手動選択が指示されている場合にはユーザに選択を促し、それ以外の部分では上記の方法でシステムが自動的に選択を行うものである。素材選択の優先度とは、例えば規定周波数以上の周波数成分のパワーの合計をもって画像のシャープさの指標としたり、あるいはあらかじめ「帽子のアップ＝０．８」、「物干台の体育着＝０．７」のように素材ごとにシナリオ中に数値で規定しておいてもよい。複数のシナリオが選択されている場合、あるいは編集モードが「かんじんなところは手動」「ぜんぶ手動」である場合には、図１２（ｃ）のような画面を編集インターフェース作成部３０７が表示部３０８に出力して、選択を促す（Ｓ５３）。図の例では、複数のタイトルショット候補５１と５２があり、その中から一つのショットを選択するようにユーザに促している。タイトルショット候補５１、５２は、システム１３内に記録されているタイトルショットイメージを（実際の合成結果のかわりにイメージ図として）提示してもよいし、実際に撮影された素材に対して後述するような編集エフェクトをメディア効果作成部３１４が先に施して仮に作成したプレビューを提示してもよい。
【００６６】
また、５３のようなユーザ操作による画像加工を許容する選択肢も提示し、ショットの編集テンプレートの一部（例えばタイトル文字）をユーザが改変できるようにしてもよいし、他の画像編集アプリケーションなどを用いて、ユーザが自分自身で加工編集した仮素材でこの部分を置き換えることを許容してもよい。
一方、本システムのメディア解析部３１３が顔領域判別の機能はもっているものの、人物識別の能力は備えていない場合には、以下のような動作をする。図１２（ｄ）の画面には、徒競走をトラックの外側から撮った素材映像が示されている。フレーム内に２人の顔が写っていることまでは本システムのメディア解析部３１３は認識したが、どちらが主人公である自分の子供かまでは判別できない。このため、後述するような編集エフェクトを主人公に対してだけ（あるいは主人公だけを除いて）施すという手順が決定できない。そこで図１２（ｄ）中のＡ，Ｂといった候補名を含む画面を編集インターフェース作成部３０７が表示部３０８に表示させて、重要人物として編集に配慮すべき被写体の選択を促す（Ｓ５３）。
【００６７】
以上のようにしてシナリオに沿った編集のための素材が列挙されると、メディア選択部３０４は素材中から編集に必要な部分を抜き出す（Ｓ５４）。この抜きだしの手順は例えば以下のようなものである。
図１３は「小学校の運動会」というシナリオ中で、朝、子供のための弁当を準備する母親を描く１シーンについての抜き出し手順を説明したイメージ図である。図１３（ａ）はシナリオ中に記述されている編集手順を図示したものであり、実際のシナリオ中ではテキストあるいはバイナリ・データとして記録されている。この１６秒のシーンは４つのショットで構成されている。最初のショットは弁当箱におかずをつめこむ母親の姿を上半身から手元まで撮影した素材（３）が利用される。この素材撮影についてのアドバイスとしては、こうしたカメラアングルのほか、１６秒使用するにあたって前後の余裕を見て全部で２０秒〜３０秒撮影することや、鼻歌まじりに作業することを促すこと、最後に「できた」「完成！」「できあがり」などの言葉を言ってもらうように促すこと、その最後のセリフから５秒あとぐらいまで撮影することなどが指示されている。
【００６８】
２番目のショットは母親の顔のアップを撮影した素材（４）、３番目のショットは弁当箱のアップを撮影した素材（５）であり、４番目のショットでは再び素材（３）のアングルに戻る。編集手順としては、作品先頭から１分１５秒の位置でカットインによってこのシーンを開始し、音声については切り替えによる奇異感をさけるために最初の１５フレーム（０．５秒）という短時間のフェードインにする。１分２０秒で顔のショットに、１分２３秒で弁当箱のショットに、１分２６秒で再び全体像に移る際もカットインを用い、音声については素材（３）のものを流し続けるようにする。このシーンの最後も、音声には同様に０．５秒の短いフェードアウトを施す。
【００６９】
図１３（ｂ）には、素材（３）に関するアドバイスにしたがって撮影された実際の素材（３）がある。１８秒程度の長さがあり、下段には模式的に音声波形を示している。このとき、システムは例えば以下のいずれかの方法で編集に使用すべき１６秒の区間を選択する。第１の方法（Ａ）では、この素材の録画停止位置の１７秒前から１秒前までを選択する。停止位置から１秒の余裕を見ているのは、録画停止直前には手ぶれが発生したり、演出外のセリフが入っている可能性があるからであり、余裕の量はより大きいものや少ないもの、全くないものをあらかじめ規定しておいてもよい。第２の方法（Ｂ）では、この素材の録画開始位置の１秒後から１７秒後までを採用する。開始後に１秒の余裕を見るのは、開始直後にも手ぶれなどが生じたり、光量、フォーカス、ビデオテープのトラッキングの不安定が生じたりする恐れがあるからである。第３の方法（Ｃ）では、音声波形を解析し、最後に「さあ、できた」といったセリフと推定できる瞬間から前に１３秒、後に３秒の区間を採択する。もし本システムのメディア解析部９１３が音声認識や音声による人物識別機能をもっていれば、確かに母親が「さあ、できた」あるいは「できた」「完成」「できあがり」などと発話を開始した瞬間を基準にしてもよい。顔のアップを撮影した素材（４）、弁当箱のアップを撮影した素材（５）については、インサートショットであり、とくにタイミングが重要なものではないため、撮影された素材の時間的中間点から前後に３秒などの任意の選択方式で採用される（Ｓ５４）。
【００７０】
以上のように準備された素材は、必要に応じてメディア効果作成部３１４による効果が施され、つなぎ合わせる編集が施される（Ｓ５７）。ここで施される効果は映像であればブラー（ぼかし）、モザイク、コントラストの強調、トリミング、グレイスケール化などであり、音声であればゲインの調整やフェード、ステレオ化などである。接続するショットのトランジション（切り替わり）効果もここで施され、例えばディゾルブ（クロスフェード）、ワイプ、スライドインなどがある。もし映像や音声に対してこのような効果（エフェクト）を施すようにシナリオに指示されている場合（Ｓ５５）、メディア効果作成部３１４によってエフェクトが施される（Ｓ５７）。一方、エフェクトを施す必要がない場合、すなわち、単純にカットで接続すればいい場合には、映像や音声はそのまま接続される（Ｓ５６）。
【００７１】
もし予めユーザによって自動編集モードが選択されている場合には、個々のショットの編集結果についてユーザに確認することなく次のショットの自動編集に移る（Ｓ５８）。もしユーザがあらかじめ、一つのショットの編集が終わるたびに自分で結果を確認し、必要があれば修正を施すというモードを選択した場合には、ここで仮に行われた編集結果を編集インターフェース作成部３０７は表示部３０８から出力し、ユーザによる確認、または修正が入力端子３０１から入力されるのを待つ（Ｓ５９）。
【００７２】
全ての編集が終了すると、メディア出力部３１５はメディア出力端子３１６から完成作品を出力する（Ｓ６０）。出力されるメディアの形態は、パソコンに内蔵されたビデオボードを介してＮＴＳＣまたはＰＡＬなどの放送方式のコンポジットビデオ信号であってもよいし、あるいはＩＥＥＥ３９４１を介したＤＶ形式であってもよい。さらに、ＭＰＥＧをはじめとするパソコン上で取り扱える映像メディアファイルの形式でもよい。
【００７３】
ここまでの編集システムでは、システムがメディア解析を行う例を説明したが、必ずしもメディアの内容に立ち入った解析を行わない構成でもかまわない。この場合、図１２（ｄ）を用いた説明のＡまたはＢの方法などにより、メディアの内容には関知せず、単純に記録動作状況情報だけから編集を行うポイントを見付け出すことでも実現できる。
【００７４】
上記では、編集システムは独立の端末であり、アドバイスリスト、またはシナリオに従って行われた素材収集に当たって記録動作状況を格納する方法または装置については特に限定しなかったが、記録動作状況を格納する方法または装置（すなわち収集システム）が、上記で説明した編集システムに内蔵されていてもよい。これは、例えば本発明の収集システムおよび編集システムが同一パソコン内のプログラムである場合に実現できる構成である。さらに、アドバイスリストまたはシナリオを提供する方法または装置（すなわち収集準備システム）が、上記で説明した編集システムに内蔵されていてもよい。これは例えば、本発明の収集準備システムおよび編集システムが同一パソコン内のプログラムである場合に実現できる構成である。
【００７５】
以上では、主に映像と音声を含むビデオ素材の収集準備、収集、編集システムについて説明したが、音声のみをメディアとして扱う収集準備、収集、編集システムであってもよいし、静止画像のみを扱う収集準備、収集、編集システムであってもよい。音声のみを扱う場合、アドバイスリストとしては、例えばカラオケのトップテンのＣＤ、ＭＤ等を作成するため、インターネット経由で音楽配信を受ける場合を想定すると、次に録音すべき音楽の配信元の情報をアドバイスとして含むものなどが考えられる。また、静止画像のみを扱うシステムの場合、本発明の収集システムを伴って素材収集を行う外部機器はディジタルスチルカメラであり、編集システムが完成作品として出力するのはスライドショー、あるいは、写真をレイアウトしたパネルなどである。
【００７６】
また、複数の記録装置を用いて素材収集を行ってもいい。これは例えば、シナリオ中に３台のビデオカメラを想定したアドバイスリストおよび編集スクリプトが用意されていれば、上記で説明した本発明の構成のままで実現が可能になる。３台のビデオカメラを同時に別々のカメラアングルから撮影させることにより、より完成度の高い作品を製作することができる。例えば子供の運動会を撮影する際、３人の子供に対してそれぞれの親に分担して撮影すべき素材を振り分けることによって、全体像と、それぞれの子供を中心とした映像の双方を撮影することができる。この場合、本システムはそれぞれの子供を主人公にした３通りの完成品を出力してもよい。
【００７７】
さらに、複数の記録装置としては異なるメディアの記録装置を用いてもよい。これは例えば、ビデオカメラとスチルカメラ、スチルカメラとオーディオレコーダーなどである。前者の組み合わせの場合、スチルカメラは一般的にビデオカメラよりも高い解像度を持っているため、完成作品にインサートする場合に少ない画質の劣化で拡大画像を作ることができる。後者の組み合わせの場合、ビデオカメラのように常時撮影を気にかけていなくても、効果的なスライドショーを製作することができる。
【００７８】
【発明の効果】
以上説明したように、本発明によればメディア作品制作のためのノウハウを持たない一般のユーザでも、プロフェッショナルのノウハウをテンプレートにした素材収集アドバイスを得ることができる。また、本発明によれば素材収集と同時に収集した素材に対して、それが何を意図して撮影された素材であるかというラベル付けが自動的になされるため、自動、または半自動によってプロフェッショナルと同様の構造立てを持ったメディア作品を製作することができる。
【図面の簡単な説明】
【図１】  本発明の一実施形態に係るメディア作品制作支援システムの構成を示す概念図である。
【図２】  同支援システムにおける収集システムの使用状態を示す図である。
【図３】  同支援システムにおける収集準備システムの構成を示すブロック図である。
【図４】  同収集準備システムの動作手順を示すフローチャートである。
【図５】  同収集準備システムの画面表示を例示するイメージ図である。
【図６】  同支援システムにおける収集システムの構成を示すブロック図である。
【図７】  同収集システムの動作手順を示すフローチャート。
【図８】  同収集システムの画面表示を例示するイメージ図である。
【図９】  同収集システムの画面表示の詳細を例示するイメージ図である。
【図１０】  同支援システムにおける編集システムの構成を示すブロック図である。
【図１１】  同編集システムの動作手順を示すフローチャートである。
【図１２】  同編集システムの画面表示を例示するイメージ図である。
【図１３】  同編集システムの内部処理を説明するイメージ図である。
【符号の説明】
１０…ビデオカメラ、１１…収集準備システム、１２…収集システム、１３…編集システム、１４…ユーザ、１５…ケーブル、１０１…シナリオデータベース、１０２…シナリオ選択画面作成部、１０３…表示部、１０４…入力部、１０５…シナリオデータ出力部、１０６…データ出力端子、２０１…アドバイスリスト格納部、２０２…記録動作状況格納部、２０３…アドバイス作成部、２０４…表示部、２０５…入力受付部、２０６…入力部、２０７…記録制御信号出力部、２０８…コントロール出力端子、２０９…記録動作状況分析部、２１０…記録動作状況入力端子、２１１…記録予定情報解析部、２１２…記録予定情報入力端子、３０１…入力部、３０２…記録動作状況入力部、３０３…記録動作状況入力端子、３０４…メディア選択部、３０５…シナリオ入力端子、３０６…バッファ、３０７…編集インターフェイス作成部、３０８…表示部、３０９…メディア入力部、３１０…メディア入力端子、３１１…入力メディアコントロール部、３１２…コントロール出力端子、３１３…メディア解析部、３１４…メディア効果作成部、３１５…メディア出力部、３１６…メディア出力端子。
【図１】
0003708854.tif 000002
【図２】
0003708854.tif 000003
【図３】
0003708854.tif 000004
【図６】
0003708854.tif 000005
【図４】
0003708854.tif 000006
【図５】
0003708854.tif 000007
【図７】
0003708854.tif 000008
【図８】
0003708854.tif 000009
【図９】
0003708854.tif 000010
【図１０】
0003708854.tif 000011
【図１１】
0003708854.tif 000012
【図１２】
0003708854.tif 000013
【図１３】
0003708854.tif 000014