(57)【要約】【課題】映像の内容に関わるメタデータを容易に生成可能なメタデータ生成装置を提供する。【解決手段】データベース１１には、映像についての同一種の特徴の程度を示す複数の特徴情報のそれぞれにつき、該特徴情報と当該特徴の程度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶される。映像抽出部１２は、映像を含む信号Ｖから１フレーム分の映像を抽出する。映像特徴量取得部１３は、映像の特徴の程度を示す特徴量を求める。メタデータ生成部１６は、データベース１１から当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力する。【選択図】図１
2011203943.tif 000002
【特許請求の範囲】
【請求項１】
映像についての同一種の特徴の程度を示す複数の特徴情報のそれぞれにつき、該特徴情報と当該特徴の程度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるデータベースと、
映像を含む信号から当該映像を抽出する映像抽出部と、
前記抽出された映像の前記特徴の程度を示す特徴量を求める映像特徴量取得部と、
前記データベースから当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部と
を備えることを特徴とするメタデータ生成装置。
【請求項２】
前記映像抽出部は、映像を含む前記信号から当該映像を構成する画像を抽出するものであり、
前記映像特徴量取得部は、抽出された画像の特徴の程度を示す特徴量を求めるものであり、
前記特徴量が保存される特徴量保存部と、
前記特徴量保存部から複数の特徴量を読み出す特徴量読み出し部とを備え、
前記メタデータ生成部に代えて、
当該各特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力するメタデータ生成部、または、当該各特徴量から代表的な特徴量を求め、該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部
を備えることを特徴とする請求項１記載のメタデータ生成装置。
【請求項３】
前記データベースは、映像の平均明度についての複数の範囲のそれぞれにつき、該範囲と該範囲内の平均明度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものであり、
前記映像特徴量取得部は、抽出された映像の平均明度を求める
ことを特徴とする請求項１または２記載のメタデータ生成装置。
【請求項４】
前記データベースは、映像に存在し得る複数の色の割合のそれぞれにつき、該色の割合と該色の割合を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものであり、
前記映像特徴量取得部は、抽出された映像における色の割合を求める
ことを特徴とする請求項１または２記載のメタデータ生成装置。
【請求項５】
映像を構成する画像における同一種の特徴量の画像間での差分の程度を示す複数の差分情報のそれぞれにつき、該差分情報と当該程度の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるデータベースと、
映像を含む信号から当該映像を抽出する映像抽出部と、
前記映像内の２つの画像について前記同一種の特徴量を求める映像特徴量取得部と、
前記２つの特徴量の差分を求める特徴量差分取得部と、
前記データベースから当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部と
を備えることを特徴とするメタデータ生成装置。
【請求項６】
前記特徴量の差分が保存される特徴量差分保存部と、
前記特徴量差分保存部から複数の差分を読み出す特徴量差分読み出し部とを備え、
前記メタデータ生成部に代えて、
当該各差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力するメタデータ生成部、または、当該各差分から代表的な差分を求め、該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部
を備えることを特徴とする請求項５記載のメタデータ生成装置。
【請求項７】
前記データベースは、画像の平均明度の画像間での差分についての複数の範囲のそれぞれにつき、該範囲と該範囲内の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものであり、
前記映像特徴量取得部は、抽出された映像を構成する２つの画像の平均明度を求め、
前記特徴量差分取得部は、当該平均明度の差分を求める
ことを特徴とする請求項４記載のメタデータ生成装置。
【請求項８】
映像についての同一種の特徴の程度を示す複数の特徴情報のそれぞれにつき、該特徴情報と当該特徴の程度を映像が有する場合に出力すべきメタデータとを含むレコードが記憶されたデータベースを備えるメタデータ生成装置が行うメタデータ生成方法であって、
前記メタデータ生成装置が、映像を含む信号から当該映像を抽出するステップと、
前記メタデータ生成装置が、前記抽出された映像の前記特徴の程度を示す特徴量を求めるステップと、
前記メタデータ生成装置が、前記データベースから当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するステップと
を備えることを特徴とするメタデータ生成方法。
【請求項９】
映像を構成する画像における同一種の特徴量の画像間での差分の程度を示す複数の差分情報のそれぞれにつき、該差分情報と当該程度の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが記憶されたデータベースを備えるメタデータ生成装置が行うメタデータ生成方法であって、
前記メタデータ生成装置が、映像を含む信号から当該映像を抽出するステップと、
前記メタデータ生成装置が、前記映像内の２つの画像について前記同一種の特徴量を求めるステップと、
前記メタデータ生成装置が、前記２つの特徴量の差分を求めるステップと、
前記メタデータ生成装置が、前記データベースから当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するステップと
を備えることを特徴とするメタデータ生成方法。
【請求項１０】
請求項８または９記載のメタデータ生成方法をコンピュータに実行させるためのコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、メタデータ生成装置およびメタデータ生成方法に関するものである。
【背景技術】
【０００２】
従来のコンテンツの作成においては、作成環境に関わる属性情報（例えば、作成年月日時、符号化方式、解像度、権利者、等々）は自動で生成できるが、メタデータ（映像の内容説明等）は、ほとんどの場合、人手で生成されるので、リソース（人、時間）が必要であった。
【０００３】
特許文献１では、映像に自動的にメタデータを付与する技術を開示している。この技術では、被写体(人やモノ)に固有の識別ＩＤを発信する無線タグ等を付けておき、撮影と同時に無線リーダ等で、映っている人やモノの識別ＩＤを受信し、映像と同期を取って記録する。さらには、予め登録しておいた識別ＩＤとメタデータのデータベースから、識別ＩＤをキーにメタデータを検索し、映像にメタデータを自動付与する。例えば、俳優の名前や性別、年齢等がフレーム単位で正確にメタデータとして生成できる。
【０００４】
また、特許文献２で開示された技術では、電子的なシナリオテキストと映像中から抽出されたテロップ情報を比較して、重要度を算出し、意味的なトピックの区切りを抽出する。これにより、ニュース映像等から話題の切れ目を解析でき、意味のある構造化、メタデータの付与が行える。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第４３５５２２７号公報
【特許文献２】特許第４２３９８５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の技術では、撮影時に被写体に無線タグ等のハードウェアを付与する必要があり、また、識別ＩＤとメタデータを結び付けておくデータベースを予め作成する必要がある。また、特許文献２の技術では、映像中のテロップ認識を行うので高度な画像処理が必要であり、テロップが無い映像については適用できない。
【０００７】
すなわち、従来にあっては、メタデータの生成は実現できるが、適用条件が厳しい場合があり、事前の準備も含めてリソース（人、時間、費用等）がかかるという課題があった。したがって、処理時間を要することや商品価格が高くなることなどから、実用化が困難である。
【０００８】
本発明は、上記の課題に鑑みてなされたものであり、その目的とするところは、映像の内容に関わるメタデータを容易に生成可能なメタデータ生成装置およびメタデータ生成方法を提供することにある。
【課題を解決するための手段】
【０００９】
上記の課題を解決するために、第１の本発明に係るメタデータ生成装置は、映像についての同一種の特徴の程度を示す複数の特徴情報のそれぞれにつき、該特徴情報と当該特徴の程度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるデータベースと、映像を含む信号から当該映像を抽出する映像抽出部と、前記抽出された映像の前記特徴の程度を示す特徴量を求める映像特徴量取得部と、前記データベースから当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部とを備えることを特徴とする。
【００１０】
例えば、前記映像抽出部は、映像を含む前記信号から当該映像を構成する画像を抽出するものであり、前記映像特徴量取得部は、抽出された画像の特徴の程度を示す特徴量を求めるものであり、前記メタデータ生成装置は、前記特徴量が保存される特徴量保存部と、前記特徴量保存部から複数の特徴量を読み出す特徴量読み出し部とを備え、前記メタデータ生成部に代えて、当該各特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力するメタデータ生成部、または、当該各特徴量から代表的な特徴量を求め、該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部を備える。
【００１１】
例えば、前記データベースは、映像の平均明度についての複数の範囲のそれぞれにつき、該範囲と該範囲内の平均明度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものであり、前記映像特徴量取得部は、抽出された映像の平均明度を求める。
【００１２】
例えば、前記データベースは、映像に存在し得る複数の色の割合のそれぞれにつき、該色の割合と該色の割合を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものであり、前記映像特徴量取得部は、抽出された映像における色の割合を求める。
【００１３】
第２の本発明に係るメタデータ生成装置は、映像を構成する画像における同一種の特徴量の画像間での差分の程度を示す複数の差分情報のそれぞれにつき、該差分情報と当該程度の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるデータベースと、映像を含む信号から当該映像を抽出する映像抽出部と、前記映像内の２つの画像について前記同一種の特徴量を求める映像特徴量取得部と、前記２つの特徴量の差分を求める特徴量差分取得部と、前記データベースから当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部とを備えることを特徴とする。
【００１４】
例えば、前記メタデータ生成装置は、前記特徴量の差分が保存される特徴量差分保存部と、前記特徴量差分保存部から複数の差分を読み出す特徴量差分読み出し部とを備え、前記メタデータ生成部に代えて、当該各差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力するメタデータ生成部、または、当該各差分から代表的な差分を求め、該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部とを備える。
【００１５】
例えば、前記データベースは、画像の平均明度の画像間での差分についての複数の範囲のそれぞれにつき、該範囲と該範囲内の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものであり、前記映像特徴量取得部は、抽出された映像を構成する２つの画像の平均明度を求め、前記特徴量差分取得部は、当該平均明度の差分を求める。
【００１６】
また、第３の本発明に係るメタデータ生成方法は、映像についての同一種の特徴の程度を示す複数の特徴情報のそれぞれにつき、該特徴情報と当該特徴の程度を映像が有する場合に出力すべきメタデータとを含むレコードが記憶されたデータベースを備えるメタデータ生成装置が行うメタデータ生成方法であって、前記メタデータ生成装置が、映像を含む信号から当該映像を抽出するステップと、前記メタデータ生成装置が、前記抽出された映像の前記特徴の程度を示す特徴量を求めるステップと、前記メタデータ生成装置が、前記データベースから当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するステップとを備えることを特徴とする。
【００１７】
また、第４の本発明に係るメタデータ生成方法は、映像を構成する画像における同一種の特徴量の画像間での差分の程度を示す複数の差分情報のそれぞれにつき、該差分情報と当該程度の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが記憶されたデータベースを備えるメタデータ生成装置が行うメタデータ生成方法であって、前記メタデータ生成装置が、映像を含む信号から当該映像を抽出するステップと、前記メタデータ生成装置が、前記映像内の２つの画像について前記同一種の特徴量を求めるステップと、前記メタデータ生成装置が、前記２つの特徴量の差分を求めるステップと、前記メタデータ生成装置が、前記データベースから当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するステップとを備えることを特徴とする。
【発明の効果】
【００１８】
本発明によれば、映像の内容に関わるメタデータを容易に生成することができる。
【図面の簡単な説明】
【００１９】
【図１】第１の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。
【図２】データベース１１の構成、特徴情報およびメタデータの一例を示す図である。
【図３】データベース１１の構成、特徴情報およびメタデータの別な一例を示す図である。
【図４】第１の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。
【図５】第３の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。
【図６】データベース２１の構成、差分情報およびメタデータの一例を示す図である
【図７】第４の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。
【発明を実施するための形態】
【００２０】
以下、本発明の実施の形態について図面を参照して説明する。
【００２１】
［第１の実施の形態］
図１は、第１の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。  
メタデータ生成装置１は、映像についての同一種の特徴の程度を示す複数の特徴情報のそれぞれにつき、該特徴情報と当該特徴の程度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるデータベース１１と、映像を含む信号から当該映像を抽出する映像抽出部１２と、抽出された映像の前記特徴の程度を示す特徴量を求める映像特徴量取得部１３と、当該特徴量が保存される特徴量保存部１４と、当該特徴量を特徴量保存部１４に保存する特徴量保存処理部１５と、データベース１１から当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部１６とを備える。
【００２２】
メタデータ生成装置１は、メタデータ生成方法を実行する際、まず、映像抽出部１２が、映像を含む信号Ｖから１フレーム分の映像を抽出し、当該映像を映像特徴量取得部１３に出力する。映像特徴量取得部１３は、映像の特徴の程度を示す特徴量を求め、特徴量保存処理部１５に出力する。特徴量保存処理部１５は、特徴量を特徴量保存部１４に保存する。映像抽出部１２、映像特徴量取得部１３および特徴量保存部１４による処理は最後のフレームまで繰り返される。
【００２３】
メタデータ生成部１６は、特徴量保存部１４から１以上のフレーム（全フレームでもよい）についての特徴量を読み出し、データベース１１から当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し、当該フレームに関連づけて出力する。
【００２４】
または、特徴量保存処理部１５は、特徴量を特徴量保存部１４に保存せず、メタデータ生成部１６に出力し、メタデータ生成部１６は、データベース１１から当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し、該特徴量に対応するフレームに関連づけて出力する。
【００２５】
図２は、データベース１１の構成、特徴情報およびメタデータの一例を示す図である。  データベース１１は、映像の平均明度についての複数の範囲のそれぞれにつき、該範囲と該範囲内の平均明度を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものである。
【００２６】
図２のデータベース１１には、例えば、値「２００〜２５５」で示される平均明度の範囲と「明るい」というメタデータとを含むレコードを含め、４つのレコードが予め記憶される。レコード間では、範囲、メタデータ共に、異なっている。
【００２７】
例えば、上記の「明るい」というメタデータとを含むレコードは、値「２００〜２５５」で示される範囲に平均明度が含まれば、その映像は明るいということを示している。
【００２８】
図２のデータベース１１を使用する場合、図１において、映像特徴量取得部１３は、抽出された映像の平均明度を求める。また、メタデータ生成部１６は、データベース１１から当該平均明度を示す範囲を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータに対応するフレームに関連づけて出力する。
【００２９】
よって、出力されるメタデータにより、例えば、映像が明るいということを明確化することができる。
【００３０】
図３は、データベース１１の構成、特徴情報およびメタデータの別な一例を示す図である。  
データベース１１は、映像に存在し得る複数の色の割合のそれぞれにつき、該色の割合と該色の割合を映像が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものである。
【００３１】
図３のデータベース１１には、例えば、映像における赤色（Ｒ）の画素の割合が７０％、緑色（Ｇ）の画素の割合が２０％、青色（Ｂ）の画素の割合が１０％ということを示す色の割合と「暖かい」というメタデータとを含むレコードを含め、複数のレコードが予め記憶される。レコード間では、少なくとも色の割合が、異なっている。
【００３２】
例えば、上記の「暖かい」というメタデータとを含むレコードは、映像における赤色（Ｒ）の画素の割合が７０％、緑色（Ｇ）の画素の割合が２０％、青色（Ｂ）の画素の割合が１０％なら、その映像は暖かい印象を与えるということを示している。
【００３３】
図３のデータベース１１を使用する場合、図１において、映像特徴量取得部１３は、抽出された映像における色の割合を求める。また、メタデータ生成部１６は、データベース１１から当該色の割合を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータに対応するフレームに関連づけて出力する。
【００３４】
よって、出力されるメタデータにより、例えば、映像は暖かい印象を与えるということを明確化することができる。
【００３５】
以上のように、第１の実施の形態に係るメタデータ生成装置によれば、特徴情報とメタデータとを含むレコードが予め記憶されるデータベース１１と、映像を抽出する映像抽出部１２と、映像の特徴の程度を示す特徴量を求める映像特徴量取得部１３と、データベース１１から当該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部１６とを備えるので、映像の内容に関わるメタデータを容易に生成することができる。
【００３６】
［第２の実施の形態］
図４は、第２の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。  
第２の実施の形態に係るメタデータ生成装置１Ａは、メタデータ生成装置１に類似した構成を有し、同一または類似の構成要素には、同一符号を付与し、適宜説明を省略または簡略化する。
【００３７】
映像抽出部１２、映像特徴量取得部１３、特徴量保存部１４、特徴量保存処理部１５については、第１の実施の形態のものと同様の機能を有する。
【００３８】
つまり、映像抽出部１２は、映像信号Ｖから映像を構成する１フレーム分の映像つまり画像の抽出を連続して行い、映像特徴量取得部１３は、抽出された画像の特徴の程度を示す特徴量を求め、特徴量保存処理部１５は、特徴量を特徴量保存部１４に保存する。
【００３９】
一方、メタデータ生成装置１Ａは、映像から複数のフレーム（画像）で構成される部分映像（例えば、映画におけるカット間の映像であり、以下、シーンという）の境界を検出するシーン境界検出部１７と、シーンの境界が検出されたら、当該シーンを構成する複数のフレーム（画像）に対応する各特徴量を特徴量保存部１４から読み出す特徴量読み出し部１８とを備え、図１のメタデータ生成部１６に代え、当該各特徴量を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択し、当該シーンに関連づけて出力するメタデータ生成部１９とを備える。
【００４０】
シーン境界検出部１７は、例えば、フレームごとにシーンの境界検出を試み、検出ができたら、特徴量読み出し部１８に特徴量を読み出させ、一方、検出ができなかったら、映像抽出部１２に次のフレームの抽出をさせる。
【００４１】
メタデータ生成部１９は、例えば、読み出された複数のメタデータから最も多いものを代表的なメタデータとして選択し、当該シーンに関連づけて出力する。
【００４２】
例えば、図２のデータベースを使用する場合、メタデータ生成部１９は、データベースから各平均明度を示す範囲を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力する。
【００４３】
例えば、図３のデータベースを使用する場合、メタデータ生成部１９は、データベースから各割合（色の割合）を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力する。
【００４４】
なお、メタデータ生成部１９は、当該各特徴量から代表的な特徴量を求め、該特徴量を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力するものであってもよい。
【００４５】
この場合、メタデータ生成部１９は、例えば、読み出された複数の特徴量の平均を代表的な特徴量として求め、該平均（特徴量）を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力する。
【００４６】
図２のデータベースを使用する場合、例えば、メタデータ生成部１９は、このように、複数の平均明度の平均を計算し、該平均を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力する。
【００４７】
一方、図３のデータベースを使用する場合、例えば、代表的な特徴量は、読み出された複数の特徴量、つまり、色の割合が複数ある中で、最も多いものであり、メタデータ生成部１９は、このような最も多い割合を求め、該割合を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力する。
【００４８】
または、シーン境界検出部１７を設けず、特徴量読み出し部１８は、映像を構成する全フレームに対応する各特徴量を特徴量保存部１４から読み出し、メタデータ生成部１９は、当該各特徴量を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択し、当該映像についてのメタデータとして出力してもよい。
【００４９】
なお、メタデータ生成部１９は、当該各特徴量から代表的な特徴量を求め、該特徴量を示す特徴情報を含むレコードをデータベース１１から検索し、該レコードからメタデータを読み出し、当該映像についてのメタデータとして出力するものであってもよい。
【００５０】
以上のように、第２の実施の形態に係るメタデータ生成装置によれば、映像抽出部１２は、映像を含む信号Ｖから当該映像を構成する画像（フレーム）を抽出するものであり、映像特徴量取得部１３は、抽出された画像の特徴の程度を示す特徴量を求めるものであり、特徴量保存部１４から複数の特徴量を読み出す特徴量読み出し部１８と、当該各特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力する、または、当該各特徴量から代表的な特徴量を求め、該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部１９とを備えることで、映像内のシーンや映像そのものの内容に関わるメタデータを容易に生成することができる。
【００５１】
［第３の実施の形態］
図５は、第２の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。  
メタデータ生成装置２は、映像を構成する画像における同一種の特徴量の画像間での差分の程度を示す複数の差分情報のそれぞれにつき、該差分情報と当該程度の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるデータベース２１と、映像を含む信号から当該映像を抽出する映像抽出部２２と、映像内の２つの画像について前記同一種の特徴量を求める映像特徴量取得部２３と、当該特徴量が交互に保存される特徴量保存部２４Ａおよび２４Ｂと、当該特徴量を交互に特徴量保存部２４Ａおよび２４Ｂに保存する特徴量保存処理部２５と、２つの特徴量の差分を求める特徴量差分取得部２６と、データベース２１から当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部２７とを備える。
【００５２】
なお、メタデータ生成装置２は、さらに、特徴量の差分が保存される特徴量差分保存部２８と、特徴量の差分を特徴量差分保存部２８に保存する特徴量差分保存処理部２９を備えてもよい。
【００５３】
メタデータ生成装置１は、メタデータ生成方法を実行する際、まず、映像抽出部２２が、映像を含む信号Ｖから１フレーム分の映像（画像）を抽出し、当該映像を映像特徴量取得部２３に出力する。映像特徴量取得部２３は、映像の特徴の程度を示す特徴量を求め、特徴量保存処理部２５に出力する。特徴量保存処理部２５は、まずは、例えば、特徴量保存部２４Ａに保存する。
【００５４】
次に、映像抽出部２２は、信号Ｖから次の１フレーム分の映像を抽出し、当該映像を映像特徴量取得部２３に出力する。映像特徴量取得部２３は、映像の特徴の程度を示す特徴量を求め、特徴量保存処理部２５に出力する。特徴量保存処理部２５は、今度は、特徴量を特徴量保存部２４Ｂに保存する。映像抽出部１２、映像特徴量取得部１３および特徴量保存部１４による処理は、例えば繰り返し行われる。
【００５５】
特徴量差分取得部２６は、特徴量保存部２４Ａおよび２４Ｂから、隣り合う２つのフレームについての特徴量を読み出し、２つの特徴量の差分を求め、差分をメタデータ生成部２７に出力する。
【００５６】
メタデータ生成部２７は、データベース２１から当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力する。
【００５７】
よって、このメタデータにより、隣り合う２つのフレーム間での特徴の変化を明確化することができる。
【００５８】
なお、特徴量差分取得部２６は、差分を特徴量差分保存処理部２９に与え、特徴量差分保存処理部２９が差分を特徴量差分保存部２８に保存し、メタデータ生成部２７は、全フレームの差分が特徴量差分保存部２８に保存されたら、全差分を読み出し、その各差分について、同様に、メタデータを出力してもよい。
【００５９】
また、特徴量差分取得部２６は、隣り合わない２つのフレームについての特徴量を読み出し、２つの特徴量の差分を求め、メタデータ生成部２７は、その差分について、同様に、メタデータを出力してもよい。
【００６０】
このメタデータによれば、映像における長い期間における特徴の変化を明確化することができる。
【００６１】
図６は、データベース２１の構成、差分情報およびメタデータの一例を示す図である。  データベース２１は、１フレーム分の映像（画像）の平均明度の画像（フレーム）間での差分についての複数の範囲のそれぞれにつき、該範囲と該範囲内の差分を当該画像間が有する場合に出力すべきメタデータとを含むレコードが予め記憶されるものである。
【００６２】
図６のデータベース２１には、例えば、値「２００〜２５５」で示される平均明度の差分の範囲と「激しい」というメタデータとを含むレコードを含め、４つのレコードが予め記憶される。レコード間では、範囲、メタデータ共に、異なっている。
【００６３】
例えば、上記の「激しい」というメタデータを含むレコードは、値「２００〜２５５」で示される範囲に平均明度の差分が含まれば、その映像の明るさの変化が激しいということを示している。
【００６４】
図６のデータベース２１を使用する場合、図５において、映像特徴量取得部２３は、各フレームの平均明度を求める。また、特徴量差分取得部２６は、当該平均明度の差分を求める。また、メタデータ生成部２７は、データベース２１から当該差分を示す範囲を含むレコードを検索し、該レコードからメタデータを読み出し出力する。
【００６５】
よって、出力されるメタデータにより、例えば、映像の明るさの変化が激しいということを明確化することができる。
【００６６】
以上のように、第３の実施の形態に係るメタデータ生成装置によれば、差分情報とメタデータとを含むレコードが予め記憶されるデータベース２１と、映像を抽出する映像抽出部２２と、映像内の２つの画像について特徴量を求める映像特徴量取得部２３と、２つの特徴量の差分を求める特徴量差分取得部２６と、データベース２１から当該差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部２７とを備えるので、映像の変化の様子に関わるメタデータを容易に生成することができる。
【００６７】
［第４の実施の形態］
図４は、第４の実施の形態に係るメタデータ生成装置の概略構成を示すブロック図である。  
第４の実施の形態に係るメタデータ生成装置２Ａは、メタデータ生成装置２やメタデータ生成装置１Ａに類似した構成を有し、同一または類似の構成要素には、同一符号を付与し、適宜説明を省略または簡略化する。
【００６８】
映像抽出部２２、映像特徴量取得部２３、特徴量保存部２４Ａ、２４Ｂ、特徴量保存処理部２５、特徴量差分取得部２６については、第１の実施の形態のものと同様の機能を有する。また、特徴量差分保存部２８、特徴量差分保存処理部２９は必須要素となる。
【００６９】
一方、メタデータ生成装置２Ａは、シーンの境界を検出するシーン境界検出部１７と、シーンの境界が検出されたら、当該シーンを構成する複数のフレーム）に対応する各特徴量の差分を特徴量差分保存部２８から読み出す特徴量差分読み出し部２０１とを備え、図５のメタデータ生成部２７に代え、当該各差分を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択し、当該シーンに関連づけて出力するメタデータ生成部２０２とを備える。
【００７０】
シーン境界検出部１７は、例えば、フレームごとにシーンの境界検出を試み、検出ができたら、特徴量差分読み出し部２０１に差分を読み出させ、一方、検出ができなかったら、映像抽出部２２に次のフレームの抽出をさせる。
【００７１】
メタデータ生成部２０２は、例えば、読み出された複数のメタデータから最も多いものを代表的なメタデータとして選択し、当該シーンに関連づけて出力する。
【００７２】
図６のデータベースを使用する場合、メタデータ生成部２０２は、各平均明度の差分を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択し、当該シーンに関連づけて出力する。
【００７３】
なお、メタデータ生成部２０２は、当該各差分から代表的な差分を求め、該差分を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力するものであってもよい。
【００７４】
この場合、メタデータ生成部２０２は、例えば、読み出された複数の差分の平均を代表的な差分として求め、該平均（差分）を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力する。
【００７５】
図６のデータベースを使用する場合、メタデータ生成部２０２は、このように、平均明度の差分が複数ある中で、その平均を計算し、該平均を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、当該シーンに関連づけて出力する。
【００７６】
または、シーン境界検出部１７を設けず、特徴量差分読み出し部２０１は、映像を構成する全フレームに対応する各差分を特徴量差分保存部２８から読み出し、メタデータ生成部２０２は、当該各差分を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択し、当該映像についてのメタデータとして出力してもよい。
【００７７】
なお、メタデータ生成部２０２は、当該各差分から代表的な差分を求め、該差分を示す差分情報を含むレコードをデータベース２１から検索し、該レコードからメタデータを読み出し、当該映像についてのメタデータとして出力するものであってもよい。
【００７８】
以上のように、第４の実施の形態に係るメタデータ生成装置によれば、特徴量の差分が保存される特徴量差分保存部２８と、特徴量差分保存部２８から複数の差分を読み出す特徴量差分読み出し部２０１と、当該各差分を示す差分情報を含むレコードを検索し、該レコードからメタデータを読み出し、該メタデータから代表的なメタデータを選択して出力する、または、当該各差分から代表的な特徴量を求め、該特徴量を示す特徴情報を含むレコードを検索し、該レコードからメタデータを読み出し出力するメタデータ生成部２０２とを備えることで、映像内のシーンや映像そのものの変化の様子に関わるメタデータを容易に生成することができる。
【００７９】
なお、汎用的なコンピュータを各実施の形態のメタデータ生成装置として機能させてもよい。また、上記のメタデータ生成方法をコンピュータにおいて実行させるためのコンピュータプログラムは、半導体メモリ、磁気ディスク、光ディスク、光磁気ディスク、磁気テープなどのコンピュータ読み取り可能な記録媒体に記録でき、また、インターネットなどの通信網を介して伝送させて、広く流通させることができる。
【符号の説明】
【００８０】
１、１Ａ、２、２Ａ…メタデータ生成装置
１１、２１データベース
１２、２２…映像抽出部
１３…映像特徴量取得部
１４、２４Ａ、２４Ｂ…特徴量保存部
１５、２５…特徴量保存処理部
１６、１９、２７、２０２…メタデータ生成部
１７…シーン境界検出部
２３…映像特徴量取得部
２６…特徴量差分取得部
２８…特徴量差分保存部
２９…特徴量差分保存処理部
２０１…特徴量差分読み出し部
【図１】
2011203943.tif 000003
【図２】
2011203943.tif 000004
【図３】
2011203943.tif 000005
【図４】
2011203943.tif 000006
【図５】
2011203943.tif 000007
【図６】
2011203943.tif 000008
【図７】
2011203943.tif 000009