(57)【要約】【課題】ネットワークへの接続環境が十分でない場合であっても、編集処理の開始の遅延を抑えることが可能な素材収録装置、この素材収録装置を用いた編集システム及びこの素材収録装置で用いられるテキストプロキシ作成方法を提供する。【解決手段】素材収録装置１０は、入力された映像データに対して画像解析部１２２１で画像解析を行い、映像データに含まれる画像をフレーム単位でテキスト化する。そして、素材収録装置１０は、テキストプロキシ作成部１２２２でこのフレーム単位のメタデータに基づいて、テキストプロキシデータを作成する。【選択図】      図３
2011061721.tif 000002
【特許請求の範囲】
【請求項１】
映像データを取得し、記録媒体に収録する素材収録装置において、
前記映像データに対して画像解析を行い、少なくとも前記映像データ内に含まれる物体、前記物体の大きさ及び前記映像データ内における前記物体の位置を認識する画像解析部と、
前記認識された物体、大きさ及び位置をフレーム単位でテキスト化して第１のメタデータを作成し、前記第１のメタデータに基づいてテキストプロキシデータを作成するテキストプロキシ作成部と
を具備することを特徴とする素材収録装置。
【請求項２】
前記映像データに基づいて、指定されたフレーム毎に静止画の画像ファイルを作成する画像ファイル作成部をさらに具備し、
前記テキストプロキシ作成部は、前記画像ファイルのファイル名を第２のメタデータとして、前記第１のメタデータ及び第２のメタデータに基づいて前記テキストプロキシデータを作成することを特徴とする請求項１記載の素材収録装置。
【請求項３】
前記映像データと共に取得された音声データをテキスト化する音声テキスト化部をさらに具備し、
前記テキストプロキシ作成部は、前記テキスト化された音声データを第３のメタデータとして、前記第１のメタデータ、前記第２のメタデータ及び前記第３のメタデータに基づいて前記テキストプロキシデータを作成することを特徴とする請求項２記載の素材収録装置。
【請求項４】
前記素材収録装置がネットワークを介して外部と接続する場合、
前記ネットワークの状態を監視する監視部と、
前記監視結果に基づいて、前記テキストプロキシデータを送信データとする第１の送信モードと、前記テキストプロキシデータ及び前記画像ファイルを送信データとする第２の送信モードと、前記テキストプロキシデータ、前記画像ファイル及び前記音声データを送信データとする第３の送信モードとのうちいずれかを選択する制御部と
をさらに具備することを特徴とする請求項３記載の素材収録装置。
【請求項５】
前記記録媒体は、前記テキストプロキシデータ、前記画像ファイル及び前記音声データを収録し、
前記制御部は、前記ネットワークを介して前記記録媒体に収録された映像データを出力する旨の要求を受けた場合、前記第１の送信モード、第２の送信モード及び第３の送信モードのうち選択した送信モードにおける送信データを、前記記録媒体から前記ネットワークを介して出力させることを特徴とする請求項４記載の素材収録装置。
【請求項６】
前記映像データを予め設定された符号化方式により符号化して符号化データとする符号化部をさらに備え、
前記制御部は、前記監視結果に基づいて、前記第１の送信モードと、前記第２の送信モードと、前記第３の送信モードと、前記符号化データを送信データとする第４の送信モードとのうちいずれかを選択することを特徴とする請求項４記載の素材収録装置。
【請求項７】
前記記録媒体は、前記テキストプロキシデータ、前記画像ファイル、前記音声データ及び前記符号化データを収録し、
前記制御部は、前記ネットワークを介して前記記録媒体に収録された映像データを出力する旨の要求を受けた場合、前記第１の送信モード、第２の送信モード、第３の送信モード及び第４の送信モードのうち、選択した送信モードにおける送信データを、前記記録媒体から前記ネットワークを介して出力させることを特徴とする請求項６記載の素材収録装置。
【請求項８】
前記映像データに基づいてプロキシ映像を作成するプロキシ映像作成部をさらに具備し、
前記制御部は、前記監視結果に基づいて、前記第１の送信モードと、前記第２の送信モードと、前記第３の送信モードと、前記第４の送信モードと、前記プロキシ映像を送信データとする第５の送信モードとのうちいずれかを選択することを特徴とする請求項６記載の素材収録装置。
【請求項９】
前記記録媒体は、前記テキストプロキシデータ、前記画像ファイル、前記音声データ、前記符号化データ及び前記プロキシ映像を収録し、
前記制御部は、前記ネットワークを介して前記記録媒体に収録された映像データを出力する旨の要求を受けた場合、前記第１の送信モード、第２の送信モード、第３の送信モード、第４の送信モード及び第５の送信モードのうち、選択した送信モードにおける送信データを、前記記録媒体から前記ネットワークを介して出力させることを特徴とする請求項８記載の素材収録装置。
【請求項１０】
前記画像解析の結果に基づいて、画像が大きく変化するフレームを検出し、前記フレームを、複数のフレームにより構成される一つのシーンの切替フレームとするシーン設定部をさらに具備し、
前記テキストプロキシ作成部は、前記切替フレームに基づいて、前記テキストプロキシデータに、少なくともシーンの開始フレーム及びシーンに含まれるフレーム数を含むシーン情報を記載することを特徴とする請求項１記載の素材収録装置。
【請求項１１】
前記画像解析の結果に基づいて、注目されるべきフレームを検出し、前記フレームを含む複数のフレームにより構成される一つのシーンに対して、他のシーンよりも高い優先度を設定し、
前記テキストプロキシ作成部は、前記シーン毎の優先度に関する情報を前記テキストプロキシデータに記載することを特徴とする請求項１記載の素材収録装置。
【請求項１２】
取得した映像データを収録する素材収録装置と、前記素材収録装置に収録された映像データをネットワークを介して編集するための編集装置とを具備する編集システムにおいて、
前記素材収録装置は、
前記映像データに対して画像解析を行い、少なくとも前記映像データ内に含まれる物体、前記物体の大きさ及び前記映像データ内における前記物体の位置を認識する画像解析部と、
前記認識された物体、大きさ及び位置をフレーム単位でテキスト化して第１のメタデータを作成し、前記第１のメタデータに基づいてテキストプロキシデータを作成するテキストプロキシ作成部と、
前記テキストプロキシデータをネットワークを介して前記編集装置へ送信する送信部と
を備え、
前記編集装置は、
前記テキストプロキシデータに基づいて画像を作成し、前記画像を表示する機能を備えることを特徴とする編集システム。
【請求項１３】
前記素材収録装置は、
前記映像データに基づいて、指定されたフレーム毎に静止画の画像ファイルを作成する画像ファイル作成部と、
前記映像データと共に取得された音声データをテキスト化する音声テキスト化部と
をさらに備え、
前記テキストプロキシ作成部は、前記画像ファイルのファイル名を第２のメタデータとし、前記テキスト化された音声データを第３のメタデータとして、前記第１のメタデータ、前記第２のメタデータ及び前記第３のメタデータに基づいて前記テキストプロキシデータを作成し、
前記記録媒体は、前記テキストプロキシデータ、前記画像ファイル及び前記音声データを収録することを特徴とする請求項１２記載の編集システム。
【請求項１４】
前記素材収録装置は、
前記記録媒体に収録されている映像データの出力を要求する旨の要求信号を、前記ネットワークを介して前記編集装置から受信する受信部と、
前記ネットワークの状態を監視する監視部と、
前記監視結果に基づいて、前記テキストプロキシデータを送信データとする第１の送信モードと、前記テキストプロキシデータ及び前記画像ファイルを送信データとする第２の送信モードと、前記テキストプロキシデータ、前記画像ファイル及び前記音声データを送信データとする第３の送信モードとのうちいずれかを選択する制御部と
をさらに備え、
前記制御部は、前記受信部で前記要求信号を受信した場合、前記第１の送信モード、第２の送信モード及び第３の送信モードのうち選択した送信モードにおける送信データを、前記記録媒体から読み出し、
前記送信部は、前記記録媒体から読み出した送信データを前記編集装置へ前記ネットワークを介して送信することを特徴とする請求項１３記載の編集システム。
【請求項１５】
前記素材収録装置は、
前記映像データを予め設定された符号化方式により符号化して符号化データとする符号化部と、
前記映像データに基づいてプロキシ映像を作成するプロキシ映像作成部と
をさらに備え、
前記記録媒体は、前記テキストプロキシデータ、前記画像ファイル、前記音声データ、前記符号化データ及び前記プロキシ映像を収録し、
前記制御部は、前記監視結果に基づいて、前記第１の送信モードと、前記第２の送信モードと、前記第３の送信モードと、前記符号化データを送信データとする前記第４の送信モードと、前記プロキシ映像を送信データとする第５の送信モードとのうちいずれかを選択し、前記受信部で前記要求信号を受信した場合、前記第１の送信モード、第２の送信モード、第３の送信モード、第４の送信モード及び第５の送信モードのうち、選択した送信モードにおける送信データを、前記記録媒体から読み出すことを特徴とする請求項１４記載の編集システム。
【請求項１６】
映像データを取得し、記録媒体に収録する素材収録装置で用いられるテキストプロキシ作成方法において、
前記映像データに対して画像解析を行い、少なくとも前記映像データ内に含まれる物体、前記物体の大きさ及び前記映像データ内における前記物体の位置を認識し、
前記認識された物体、大きさ及び位置をフレーム単位でテキスト化して第１のメタデータを作成し、
前記第１のメタデータに基づいてテキストプロキシデータを作成することを特徴とするテキストプロキシ作成方法。
【請求項１７】
前記映像データに基づいて、指定されたフレーム毎に静止画の画像ファイルを作成し、
前記映像データと共に取得された音声データをテキスト化し、
前記画像ファイルのファイル名を第２のメタデータとし、前記テキスト化された音声データを第３のメタデータとして、前記第１のメタデータ、前記第２のメタデータ及び前記第３のメタデータに基づいて前記テキストプロキシデータを作成することを特徴とする請求項１６記載のテキストプロキシ作成方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えば映像素材を収録する素材収録装置、この素材収録装置を用いた編集システム及びこの素材収録装置で用いられるテキストプロキシ作成方法に関する。
【背景技術】
【０００２】
現在、放送用番組素材の編集方法には、撮影した映像素材をランダムアクセス可能な記録媒体を持つ素材収録装置に収録し、収録した映像素材を編集装置上で編集プログラムを用いて編集を行うノンリニア編集がある。ノンリニア編集は、繰り返し編集及び手直しが容易であり、また映像素材における任意の位置から即座に再生する事が可能であるため、テレビ局等において主流の技術になっている。
【０００３】
ところで、上記素材収録装置に高精細映像素材が収録されている場合、この映像素材を編集装置で編集しようとすると、映像素材のコピーに時間がかかる。そのため、収録が完了してから映像素材の編集を開始するまでに時間がかかってしまう。そこで、素材収録装置は、高精細映像素材の収録と同時に、解像度の低い映像・音声データであるプロキシ映像を収録する（例えば、特許文献１参照）。素材収録装置は、プロキシ映像を先に編集装置へコピーすることで、編集装置のユーザに映像素材の編集を素早く開始させることが可能となる。なお、プロキシ映像のフレーム数等は高精細映像と同じである。
【０００４】
また、映像収録装置は、プロキシ映像を用いた編集の最中に、高精細映像素材を編集装置へコピーする。これにより、編集装置は、プロキシ映像の編集完了後（または編集途中）の編集データを高精細映像素材に適用することが可能となる。つまり、編集完了までの時間を短縮することが可能となる。
【０００５】
しかしながら、プロキシ映像の解像度が低いとはいっても、プロキシ映像を伝送するためには、ＭＰＥＧ４（Moving Picture Experts Group 4）等の映像フォーマットを使用しても、１分あたり１〜３ＭＢ程度（３２０×２４０、３０ｆｐｓの場合）かかってしまう。つまり、プロキシ映像を、携帯電話及びＰＨＳ（Personal Handy phone System）等を使用して送信する場合、ネットワークへの接続環境が十分でない場合（一時的なものを含め、帯域が狭い場合及び電波状況が悪くすぐ切断する場合等）には時間がかかることがある。
【０００６】
なお、収録した映像素材における映像シーン毎に所定のメタデータを付与することで、必要な映像シーンの選択を容易にし、映像素材の編集作業の効率化を図る技術が提案されている（例えば、特許文献２参照。）。しかしながら、特許文献２では、プロキシ映像のような簡易映像を送信することで、編集作業を効率化する方法に関しては記述されてない。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００３−３７８０４号公報
【特許文献２】特開２００６−７４８００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
以上のように、プロキシ映像を素材収録装置から編集装置へコピーして編集処理を行う場合であっても、ネットワークへの接続環境が十分でない場合には、プロキシ映像のコピーに時間がかかり、編集処理の開始に時間がかかることがあった。
【０００９】
この発明は上記事情によりなされたもので、その目的は、ネットワークへの接続環境が十分でない場合であっても、編集処理の開始の遅延を抑えることが可能な素材収録装置、この素材収録装置を用いた編集システム及びこの素材収録装置で用いられるテキストプロキシ作成方法を提供することにある。
【課題を解決するための手段】
【００１０】
上記目的を達成するため、本発明に係る素材収録装置は、映像データを取得し、記録媒体に収録する素材収録装置において、前記映像データに対して画像解析を行い、少なくとも前記映像データ内に含まれる物体、前記物体の大きさ及び前記映像データ内における前記物体の位置を認識する画像解析部と、前記認識された物体、大きさ及び位置をフレーム単位でテキスト化して第１のメタデータを作成し、前記第１のメタデータに基づいてテキストプロキシデータを作成するテキストプロキシ作成部とを具備する。
【００１１】
また、本発明に係るテキストプロキシ作成方法は、映像データを取得し、記録媒体に収録する素材収録装置で用いられるテキストプロキシ作成方法において、前記映像データに対して画像解析を行い、少なくとも前記映像データ内に含まれる物体、前記物体の大きさ及び前記映像データ内における前記物体の位置を認識し、前記認識された物体、大きさ及び位置をフレーム単位でテキスト化して第１のメタデータを作成し、前記第１のメタデータに基づいてテキストプロキシデータを作成することを特徴とする。
【００１２】
上記構成による素材収録装置及びテキストプロキシ作成方法では、素材収録装置は、映像データに対して画像解析を行い、映像データに含まれる画像をフレーム単位でテキスト化する。素材収録装置は、このフレーム単位のメタデータに基づいて、テキストプロキシデータを作成する。テキストプロキシデータは、従来のプロキシ映像よりも容量が小さいため、ネットワークの接続環境が十分でない場合であっても、コピーにかかる時間が節約されることとなる。
【００１３】
また、本発明に係る編集システムは、取得した映像データを収録する素材収録装置と、前記素材収録装置に収録された映像データをネットワークを介して編集するための編集装置とを具備する編集システムにおいて、前記素材収録装置は、前記映像データに対して画像解析を行い、少なくとも前記映像データ内に含まれる物体、前記物体の大きさ及び前記映像データ内における前記物体の位置を認識する画像解析部と、前記認識された物体、大きさ及び位置をフレーム単位でテキスト化して第１のメタデータを作成し、前記第１のメタデータに基づいてテキストプロキシデータを作成するテキストプロキシ作成部と、前記テキストプロキシデータをネットワークを介して前記編集装置へ送信する送信部とを備え、前記編集装置は、前記テキストプロキシデータに基づいて画像を作成し、前記画像を表示する機能を備えることを特徴とする。
【００１４】
上記構成による編集システムでは、素材収録装置は、映像データに対して画像解析を行い、映像データに含まれる画像をフレーム単位でテキスト化する。素材収録装置は、このフレーム単位のメタデータに基づいて、テキストプロキシデータを作成する。そして、素材収録装置は、このテキストプロキシデータを記録媒体に保存し、編集装置で利用できるようにしている。これにより、素材収録装置は、ネットワークの接続環境が十分でない場合であっても、収録した映像データの代わりとなるデータを、編集装置へ早急に送信することが可能となる。また、編集装置のユーザは、このテキストプロキシデータによる画像に基づいて編集を開始することが可能となる。
【発明の効果】
【００１５】
この発明によれば、ネットワークへの接続環境が十分でない場合であっても、編集処理の開始の遅延を抑えることが可能な素材収録装置、この素材収録装置を用いた編集システム及びこの素材収録装置で用いられるテキストプロキシ作成方法を提供することができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態に係る編集システムの機能構成を示すブロック図である。
【図２】図１の素材収録装置における符号化部の機能構成を示すブロック図である。
【図３】図１のプロキシ作成部の機能構成を示すブロック図である。
【図４】図１の記録部の機能構成を示すブロック図である。
【図５】図１のネットワークインタフェース部の機能構成を示すブロック図である。
【図６】図１の制御部に記録された選択テーブルの一例を示す図である。
【図７】図１の編集装置の機能構成を示すブロック図である。
【図８】図１の制御部が送信データの種別を選択する際の処理動作を示すフローチャートである。
【図９】図２の画像解析部による画像解析の一例を示す図である。
【図１０】図２のテキストプロキシ作成部により作成されたテキストプロキシデータの一例を示す図である。
【図１１】図１の制御部が編集装置からの編集要求に応答する際の処理動作を示すフローチャートである。
【図１２】図１の編集装置が図１０に示すテキストプロキシデータに基づいて作成した画像の例を示す図である。
【発明を実施するための形態】
【００１７】
以下、図面を参照しながら本発明に係る素材収録装置及び編集システムの実施の形態について詳細に説明する。
【００１８】
図１は、本発明の一実施形態に係る編集システムの機能構成を示すブロック図である。編集システムは、素材収録装置１０及び編集装置２０−１，２０−２を具備する。素材収録装置１０は、カメラ等により取得された映像データ及び音声データを収録する。編集装置２０−１，２０−２は、素材収録装置１０に収録されているデータをユーザが編集する際に用いる装置である。ユーザは、編集装置２０−１，２０−２を介して素材収録装置１０へ編集処理を要求する。素材収録装置１０は、編集装置２０−１，２０−２から編集要求を受けると、収録しているデータを編集装置２０−１，２０−２へ出力する。
【００１９】
素材収録装置１０は、符号化部１１、プロキシ作成部１２、ネットワークインタフェース部（ＮＷ−ＩＦ）１３、記録部１４及び制御部１５を備える。各構成要素は、バス１６を介してそれぞれ接続されている。なお、バス１６は、映像データ／音声データと制御データとで物理的に分けられる場合もあるが、ここでは簡略化のため共通とする。
【００２０】
図２は、本発明の一実施形態に係る素材収録装置１０における符号化部１１の機能構成を示すブロック図である。符号化部１１は、分配部１１１−１，１１１−２、遅延部１１２−１，１１２−２、高精細映像エンコーダ１１３及びインタフェース部１１５を備える。
【００２１】
符号化部１１に入力された映像データ／音声データは、分配部１１１−１により２系統に分配され、一方が遅延部１１２−１を介してエンコーダ１１３へ供給され、他方がプロキシ作成部１２へ供給される。
【００２２】
エンコーダ１１３は、予め設定されたフォーマット（例えば、ＭＰＥＣ２（Moving Picture Experts Group 2）等）で映像データ／音声データを符号化し、符号化後の符号化データを内部バスへ出力する。
【００２３】
また、符号化部１１に入力された音声データは、遅延部１１２−２を介して分配部１１１−２へ供給され、分配部１１１−２で２系統に分配される。分配された音声データのうち一方は内部バスへ出力され、他方はプロキシ作成部１２へ供給される。なお、遅延部１１２−１による遅延時間と、遅延部１１２−２による遅延時間とは、カメラ等により同時に取得した映像データと音声データとの再生タイミングを合わせるように予め設定されている。このとき、遅延部１１２−１の遅延時間と、遅延部１１２−２の遅延時間とはそれぞれ異なる時間である。
【００２４】
インタフェース部１１５は、内部バスを介して、符号化データ及び音声情報を受け取り、これらをバス１６へ出力する。
【００２５】
図３は、本発明の一実施形態に係る素材収録装置におけるプロキシ作成部１２の機能構成を示すブロック図である。プロキシ作成部１２は、プロキシ映像作成部１２１、テキストプロキシ処理部１２２及びインタフェース部１２３を具備する。
【００２６】
プロキシ映像作成部１２１は、符号化部１１から映像データ及び音声データを受け取り、これらに基づいてプロキシ映像を作成する。プロキシ映像作成部１２１は、作成したプロキシ映像をインタフェース部１２３へ出力する。
【００２７】
テキストプロキシ処理部１２２は、ＣＰＵ（Central Processing Unit）を備えたマイクロプロセッサから成る。テキストプロキシ処理部１２２は、ＣＰＵにより所定のプログラムを実行することで、画像解析部１２２１、テキストプロキシ作成部１２２２、画像ファイル作成部１２２３及び音声テキスト化部１２２４を動作させ、テキストプロキシデータを作成する。
【００２８】
画像解析部１２２１は、符号化部１１からの映像データに対して所定の画像解析方法を用いて画像解析を行う。この画像解析により、映像中に含まれる物体、その物体の位置及びその物体の大きさが認識される。なお、ここでの所定の画像解析方法は、周知の技術であるため、詳述は割愛する。画像解析の結果は、テキストプロキシ作成部１２２２へ出力される。
【００２９】
画像ファイル作成部１２２３は、符号化部１１からの映像データに基づいて、予め設定された間隔毎に画像ファイルを作成する。ここで、画像ファイルは、映像データに基づく静止画像である。画像ファイル作成部１２２３は、作成した画像ファイルをインタフェース部１２３へ出力する。また、画像ファイル作成部１２２３は、その画像ファイルのファイル名をテキストプロキシ作成部１２２２へ通知する。
【００３０】
音声テキスト化部１２２４は、符号化部１１からの音声データのうち、音声認識を開始したフレームから終了したフレームまでの音声をテキスト化し、テキストプロキシ作成部１２２２へ出力する。
【００３１】
テキストプロキシ作成部１２２２は、画像解析部１２２１からの画像解析の結果に基づいて、映像中に含まれる物体、その物体の位置及びその物体の大きさをフレーム毎にテキスト化し、フレーム毎のメタデータを作成する。また、テキストプロキシ作成部１２２２は、画像ファイル作成部１２２３から通知されたファイル名を所定のフレームにおけるメタデータとする。また、テキストプロキシ作成部１２２２は、音声テキスト化部１２２４からの音声テキストデータを、音声認識を開始したフレームから終了したフレームまでのメタデータとする。テキストプロキシ作成部１２２２は、以上のように作成したフレーム単位のメタデータをテキストプロキシデータとしてインタフェース部１２３へ出力する。
【００３２】
また、テキストプロキシ処理部１２２は、シーン設定部１２２５を備える。シーン設定部１２２５は、１つのシーンが自動又は手動のいずれにより作成されるかに基づいて、クリップ中におけるシーンの切り替わりとなるフレームを検出する。自動／手動の設定は、制御部１５の操作入力部１５３から入力されたユーザの操作により行われる。シーン設定部１２２５は、シーン設定が自動である場合には、画像解析部１２２１の解析結果に基づいて、例えば、画像がフレームの前後で大きく変化するフレームを検出する。そして、テキストプロキシ作成部１２２２へ、このフレーム情報を通知する。また、シーン設定部１２２５は、シーン設定が手動である場合には、操作入力部１５３からのユーザの操作により切替フレームを判断し、その情報をテキストプロキシ作成部１２２２へ通知する。テキストプロキシ作成部１２２２は、通知されたフレームの前のフレームまでを１シーンとしてテキストプロキシデータを作成する。
【００３３】
また、テキストプロキシ処理部１２２は、優先度設定部１２２６を備える。優先度設定部１２２６は、１シーン毎の優先度を自動又は手動のいずれかにより設定する。自動／手動の設定は、制御部１５の操作入力部１５３から入力されたユーザの操作により行われる。シーン毎の優先度とは、優先的に編集処理を行うべきシーンを示すものである。優先度設定部１２２６は、優先度の設定が自動である場合には注目されるべきフレームを検出し、そのフレームを含むシーンの優先度を他のシーンよりも高く設定する。例えば、音声データに基づいて、音声が大きくなっているフレームがある場合には、このフレームを注目されるべきフレームとして検出する。また、画像解析部１２２１の解析結果に基づいて、画像の光量が強くなったフレームを、注目されるべきフレームとして検出してもかまわない。また、優先度設定部１２２６は、優先度の設定が手動である場合には、操作入力部１５３からのユーザの操作に従って、優先度を設定する。
【００３４】
インタフェース部１２３は、プロキシ映像作成部１２１からのプロキシ映像と、テキストプロキシ処理部１２２からのテキストプロキシデータ及び画像ファイルとをバス１６を介して記録部１４へ出力する。
【００３５】
図４は、上記記録部１４の機能構成を示すブロック図である。記録部１４は、記録媒体１４１、メモリ管理部１４２及びインタフェース部１４３を備える。
【００３６】
インタフェース部１４３は、符号化部１１から符号化データ及び音声情報を受け取り、記録媒体１４１へ供給する。また、インタフェース部１４３は、プロキシ作成部１２からプロキシ映像、テキストプロキシデータ及び画像ファイルを受け取り、記録媒体１４１へ供給する。また、インタフェース部１４３は、記録媒体１４１から読み出されたデータをバス１６へ出力する。
【００３７】
メモリ管理部１４２は、ＣＰＵを備えたマイクロプロセッサから成る。メモリ管理部１４２は、制御部１５の指示に従ってＣＰＵにより所定のプログラムを実行することで、インタフェース部１４３からの符号化データ、音声情報、プロキシ映像、テキストプロキシデータ及び画像ファイルを記録媒体１４１における所定のエリアへ書き込む。
【００３８】
また、メモリ管理部１４２は、制御部１５の指示に従って、記録媒体１４１に書き込まれた符号化データ、音声情報、プロキシ映像、テキストプロキシデータ及び画像ファイルのうち少なくともいずれかを読み出し、インタフェース部１４３へ出力する。
【００３９】
図５は、上記ネットワークインタフェース部１３の機能構成を示すブロック図である。ネットワークインタフェース部１３は、送受信部１３１、ネットワーク監視部１３２及びインタフェース部１３３を備える。
【００４０】
送受信部１３１は、記録部１４で読み出されたデータをインタフェース部１３３から受け取り、ネットワークを介して編集装置２０−１，２０−２へ送信する。これにより、符号化データ、音声情報、プロキシ映像、テキストプロキシデータ及び画像ファイルのうち少なくともいずれかが編集装置２０−１，２０−２へ送信される。
【００４１】
また、送受信部１３１は、編集装置２０−１，２０−２に対する制御信号をネットワークを介して送信する。また、送受信部１３１は、編集装置２０−１，２０−２からの編集要求をネットワークを介して受信し、インタフェース部１３３へ出力する。
【００４２】
ネットワーク監視部１３２は、ＣＰＵを備えたマイクロプロセッサから成る。ネットワーク監視部１３２は、ネットワークパフォーマンスを随時測定する方法として例えば、定期的に送信先＝自装置として、送受信部１３１に固定データを送信させる。ネットワーク監視部１３２は、このデータを実際に受信するまでの時間及び受信できたパケット数を計測する。これにより、ネットワーク監視部１３２は、定期的にネットワークの状態を監視する。ネットワーク監視部１３２は、監視結果をインタフェース部１３３へ出力する。
【００４３】
インタフェース部１３３は、記録部１４で読み出されたデータをバス１６を介して受け取る。インタフェース部１３３は、このデータを送受信部１３１へ供給する。また、インタフェース部１３３は、編集装置２０−１，２０−２に対する制御信号をバス１６を介して制御部１５から受け取り、送受信部１３１へ出力する。また、インタフェース部１３３は、ネットワーク監視部１３２での監視結果を、バス１６を介して制御部１５へ出力する。さらに、インタフェース部１３３は、送受信部１３１で受信された編集要求をバス１６を介して制御部１５へ出力する。
【００４４】
上記制御部１５は、ＣＰＵ１５１、メモリ１５２及び操作入力部１５３を備える。制御部１５は、ＣＰＵ１５１が所定のプログラムを実行することで、素材収録装置１０における全体的な動作を制御する。メモリ１５２には、編集装置２０−１，２０−２へ送信するデータの種別情報を含むデータ種別設定情報、及び、ネットワークの状態と送信データの種別との関係が予め設定された選択テーブルが記録されている。本実施形態では、送信データには、符号化データ（高精細映像素材）、音声データ、画像ファイル、プロキシ映像及びテキストプロキシデータが含まれる。なお、ここでは詳細な説明は割愛するが、データ種別設定情報には、現在の送信データの種別情報の他に、素材収録装置１０の設定情報及び動作情報等に関する様々な管理データが含まれる。
【００４５】
制御部１５は、ネットワーク監視部１３２での監視結果に基づいてネットワークの帯域を取得する。制御部１５は、この帯域とメモリ１５２の選択テーブルとを参照して、送信データの種別を選択する。
【００４６】
図６は、制御部１５のメモリに記録された選択テーブルの一例を示す模式図である。図６において、制御部１５は、ネットワークの帯域が５００ｋｂｐｓ以下である場合には、テキストプロキシのみを送信データとして選択する。また、制御部１５は、帯域が５００ｋｂｐｓ〜１Ｍｂｐｓである場合には、テキストプロキシ及び画像ファイル（６０フレーム間隔）を送信データとして選択する。また、制御部１５は、帯域が１Ｍｂｐｓ〜３Ｍｂｐｓである場合には、テキストプロキシ及び画像ファイル（３０フレーム間隔）を送信データとして選択する。また、制御部１５は、帯域が３Ｍｂｐｓ〜５Ｍｂｐｓである場合には、テキストプロキシ、画像ファイル（３０フレーム間隔）及び音声データを送信データとして選択する。また、制御部１５は、帯域が５Ｍｂｐｓ〜１００Ｍｂｐｓである場合には、プロキシ映像及び音声データを送信データとして選択する。また、制御部１５は、帯域が１００Ｍｂｐｓ以上である場合には、高精細映像素材を送信データとして選択する。
【００４７】
また、制御部１５は、操作入力部１５３によりユーザからの操作を受け付ける。制御部１５は、ユーザ操作により送信データの種別が変更された場合には、メモリ１５２のデータ種別設定情報を更新する。
【００４８】
また、制御部１５は、編集装置２０−１，２０−２に対する制御信号をバス１６を介してネットワークインタフェース部１３へ出力する。
【００４９】
また、制御部１５は、編集装置２０−１，２０−２から編集要求を受けた場合には、データ種別設定情報を参照し、選択した種別のデータを読み出すように記録部１４へ指示を出す。
【００５０】
上記編集装置２０−１，２０−２は、素材収録装置１０からテキストプロキシデータを受信した場合、そのテキストプロキシデータに基づいて画像を作成する機能を有する。図７は、本発明の一実施形態に係る編集装置２０−１，２０−２の機能構成を示すブロック図である。図７における編集装置２０−１，２０−２は、編集制御部２１、内蔵記録媒体２２、編集部２３、復号化部２４、表示モニタ２５及びネットワークインタフェース部２６を有する。各構成要素は、バス２７によりそれぞれ接続される。
【００５１】
編集制御部２１は、編集装置２０−１，２０−２のユーザが編集要求を入力すると、その要求をネットワークインタフェース部２６を介して素材収録装置１０へ通知する。また、編集制御部２１は、素材収録装置１０から送信されたデータを受け取ると、そのデータを内蔵記録媒体２２へ記録する。編集制御部２１は、内蔵記録媒体２２に記録されたデータを復号化部２４で復号化し、表示モニタ２５に表示させる。なお、復号化部２４は、テキストプロキシデータを復号できるように、予め所定の復号化方式が設定されている。
【００５２】
ユーザは、表示モニタ２５の表示を参照し、編集部２３により、ＩＮ／ＯＵＴ点の設定やフェード処理の設定等の編集処理を行う。編集部２３は、この編集処理の編集結果をプレイリスト情報として内蔵記録媒体２２へ記録する。
【００５３】
次に、上記構成における動作を説明する。
【００５４】
図８は、本発明の一実施形態に係る制御部１５が送信データの種別を選択する際の処理動作を示すフローチャートである。
【００５５】
制御部１５は、ネットワーク監視部１３２による監視結果を受け取ると（ステップＳ８１）、この監視結果に基づいて、ネットワークの帯域を求める（ステップＳ８２）。制御部１５は、メモリ１５２に記録された選択テーブルを参照し、ネットワークの帯域に適した送信データの種別を選択し（ステップＳ８３）、処理を終了する。
【００５６】
これにより、ネットワークの帯域に応じて送信データの種別が設定される。
【００５７】
図９は、本発明の一実施形態に係る画像解析部１２２１による画像解析の一例を示す模式図である。
【００５８】
画像解析部１２２１は、一枚の画像を四等分し、画像中の物体、その物体の位置及び大きさを認識する。例えば、画像中の右下に女性の上半身が存在し、画像中の左に木が存在する場合には、右下の１マス分に女性の上半身がある旨及び左の２マス分に木がある旨を解析結果としてテキストプロキシ作成部１２２２へ出力する。テキストプロキシ作成部１２２２は、この解析結果に基づいて、画像解析データ１：種別＝人間、テキスト＝女性上半身、位置＝右下及び大きさ＝「１」を作成し、画像解析データ２：種別＝自然、テキスト＝木、位置＝左及び大きさ＝「２」を作成する。
【００５９】
図１０は、図９での画像解析の結果を利用してテキストプロキシ作成部１２２２により作成されたテキストプロキシデータの一例を示す模式図である。ここでは、テキストプロキシデータがＸＭＬ（Extensible Markup Language）で記述される場合について説明する。なお、テキストプロキシデータの記載フォーマットは、ＸＭＬに限定される訳ではない。
【００６０】
図１０に示すテキストプロキシデータは、クリップ全体の情報、１シーン毎の情報及び１フレーム毎の情報を有している。
【００６１】
クリップ全体の情報には、クリップＩＤ、シーン数及びフレーム数が記載される。
【００６２】
シーン情報は、クリップを構成するシーン数だけ設けられる。各シーン情報には、シーン番号、開始フレーム番号、フレーム数、優先度及びシーン情報付与方法が記載される。
【００６３】
フレーム情報は、クリップを構成するフレーム数だけ設けられる。各フレーム情報には、画像を構成する画像解析データの数及びその数に応じた画像解析データの詳細が１から順に記載される。図１０では、図９の画像解析により取得された画像解析データが例として記載されている。また、選択される送信データの種別によっては音声データも送信されるため、音声が認識されたフレームには、音声データに基づくメタデータ（音声データ種別及び音声テキスト）も記載される。また、選択される送信データの種別によっては画像ファイルも送信されるため、３０フレーム毎に画像ファイルのファイル名が記載される。
【００６４】
図１１は、本発明の一実施形態に係る制御部１５が編集装置２０−１からの編集要求に応答する際の処理動作を示すフローチャートである。
【００６５】
制御部１５は、編集装置２０−１からの編集要求を受信した場合（ステップＳ１１１）、データ種別設定情報を参照し、設定された種別の送信データを読み出すように記録部１４へ指示を出す（ステップＳ１１２）。これにより記録部１４からは、編集要求により指定された映像クリップが、設定された種別で読み出される。制御部１５は、読み出したデータを編集装置２０−１へ送信し（ステップＳ１１３）、処理を終了する。
【００６６】
ここで、素材収録装置１０における画像の分割区分と、編集装置２０−１，２０−２における画像の分割区分とは予め併せて設定されている。また、素材収録装置１０における画像の種別と、編集装置２０−１，２０−２における画像の種別とは予め併せて設定されている。さらに、編集装置２０−１，２０−２における内蔵記録媒体２２には、各画像解析データにおける「テキスト」で記載される画像が予め記録されている。これにより、編集装置２０−１，２０−２は、テキストプロキシデータの画像解析データにおける種別、テキスト、位置及び大きさの各記載に基づいて、画像を作成することが可能である。
【００６７】
図１２は、編集装置２０−１，２０−２が図１０に示すテキストプロキシデータに基づいて作成した画像の例を示す模式図である。なお、編集装置２０−１，２０−２の復号化部２４は、作成された画像がテキストプロキシに基づくものであることを示す印を、図１２に示すように画像中に表示するようにしてもよい。
【００６８】
以上のように、上記一実施形態では、素材収録装置１０は、映像データに対して画像解析を行い、映像データに含まれる画像をフレーム単位でテキスト化する。素材収録装置１０は、このフレーム単位のメタデータに基づいて、テキストプロキシデータを作成する。そして、素材収録装置１０は、このテキストプロキシデータを記録部１４に保存し、編集装置２０−１，２０−２で利用できるようにしている。これにより、素材収録装置１０は、ネットワークの帯域が非常に狭い場合、又は、ネットワークの品質が悪い場合であっても、収録した映像データの代わりとなるデータを、編集装置２０−１，２０−２へ早急に送信することが可能となる。
【００６９】
また、上記一実施形態では、素材収録装置１０は、ネットワーク環境を常に監視し、現状のネットワーク環境に適した送信データの種別を選択するようにしている。これにより、素材収録装置１０は、ネットワークの接続環境が不十分である場合であっても、その状況に適したデータを編集装置２０−１，２０−２へ送信することが可能となる。
【００７０】
また、上記一実施形態では、編集装置２０−１，２０−２は、テキストプロキシデータに基づいて画像を作成する機能を有するようにしている。これにより、編集装置２０−１，２０−２は、素材収録装置１０から送信されたテキストプロキシデータに基づいて画像を作成することが可能となる。つまり、編集装置２０−１，２０−２のユーザは、ネットワークの接続環境が不十分である場合であっても、テキストプロキシデータに基づいて作成される画像を参照して映像データの編集処理を行うことが可能とある。
【００７１】
また、上記一実施形態では、素材収録装置１０は、ネットワークの帯域が５００ｋｂｐｓ〜５Ｍｂｐｓである場合には、テキストプロキシデータと共に、所定フレーム毎に画像ファイルも送信するようにしている。これにより、編集装置２０−１，２０−２は、テキストプロキシデータに基づく画像と共に、所定フレーム毎に現実の素材の画像ファイルを表示することが可能となる。つまり、編集装置２０−１，２０−２のユーザは、送信された現実の素材の画像ファイルを参照しながら、映像素材の編集を行うことが可能となる。そのため、テキストプロキシデータに基づいた画像を用いて編集を行う場合であっても、現実の素材の編集に近くなり、編集がしやすい。
【００７２】
したがって、本発明に係る素材収録装置１０及び編集システムは、ネットワークへの接続環境が十分でない場合であっても、編集処理の開始の遅延を抑えることができる。
【００７３】
なお、この発明は上記各実施形態に限定されるものではない。例えば上記一実施形態では、素材収録装置１０がプロキシ作成部１２を具備する例について説明したが、プロキシ作成部１２を必ずしも具備する必要はない。例えば、編集装置２０−１，２０−２へプロキシ映像を送信する必要がなく、他の構成要素のいずれかにテキストプロキシ処理部１２２が格納されている場合には、プロキシ作成部１２はなくても構わない。
【００７４】
また、上記一実施形態では、プロキシ作成部１２にテキストプロキシ処理部１２２が格納される例について説明したが、テキストプロキシ処理部１２２は、符号化部１１又は記録部１４の内部バスに接続される場合であっても同様に実施可能である。
【００７５】
また、上記一実施形態では、テキストプロキシ処理部１２２で画像解析及び画像ファイル作成が行われる例について説明したが、本発明はこれに限定される訳ではない。例えば、テキストプロキシ処理部が符号化部１１の内部バスに接続される場合、画像解析及び画像ファイル作成を内部バスに接続される他の処理部で行っても構わない。また、画像解析及び画像ファイル作成を、エンコーダ１１３と並列したハードウェアでそれぞれ行うようにしても同様に実施可能である。
【００７６】
また、上記一実施形態では、制御部１５は、ネットワーク監視部１３２の監視結果に基づいて送信データの種別を選択する例について説明したが、送信データの種別は、予め設定されている場合であっても、同様に実施可能である。
【００７７】
また、上記一実施形態では、制御部１５は、監視結果に基づいて取得されたネットワークの帯域と、選択テーブルとを参照して送信データの種別を選択する例について説明したが、この選択方法に限定される訳ではない。例えば、送信するデータのデータサイズと、ネットワークの帯域とから送信にかかる時間を算出し、この時間が予め設定された時間以上である場合に、データサイズが小さくなるように送信データの種別を選択するようにしてもよい。
【００７８】
さらに、この発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。
【符号の説明】
【００７９】
１０…素材収録装置
１１…符号化部
１１１−１，１１１−２…分配部
１１２−１，１１２−２…遅延部
１１３…エンコーダ
１１５…ＩＦ部
１２…プロキシ作成部
１２１…プロキシ映像作成部
１２２…テキストプロキシ処理部
１２２１…画像解析部
１２２２…テキストプロキシ作成部
１２２３…画像ファイル作成部
１２２４…音声テキスト化部
１２２５…シーン設定部
１２２６…優先度設定部
１２３…ＩＦ部
１３…ＮＷ−ＩＦ部
１３１…送受信部
１３２…ネットワーク監視部
１３３…ＩＦ部
１４…記録部
１４１…記録媒体
１４２…メモリ管理部
１４３…ＩＦ部
１５…制御部
１５１…ＣＰＵ
１５２…メモリ
１５３…操作入力部
１６…バス
２０−１，２０−２…編集装置
２１…編集制御部
２２…内蔵記録媒体
２３…編集部
２４…復号化部
２５…表示モニタ
２６…ＮＷ−ＩＦ部
２７…バス
【図１】
2011061721.tif 000003
【図２】
2011061721.tif 000004
【図３】
2011061721.tif 000005
【図４】
2011061721.tif 000006
【図５】
2011061721.tif 000007
【図６】
2011061721.tif 000008
【図７】
2011061721.tif 000009
【図８】
2011061721.tif 000010
【図９】
2011061721.tif 000011
【図１０】
2011061721.tif 000012
【図１１】
2011061721.tif 000013
【図１２】
2011061721.tif 000014