(57)【要約】      （修正有）【課題】映像コンテンツに対して自動的にコンテンツ単位又は／及びチャプター単位で映像分類情報を付加してユーザに提供すると共に、該映像分類情報を修正可能にする。【解決手段】ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する映像規格変換部１１と、該映像規格変換部で変換された映像コンテンツに分類カテゴリを自動的に付与する分類カテゴリ付与部１３と、前記分類カテゴリを含むメタデータを作成するメタデータ作成部１４と、前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存するコンテンツ保存部１５と、受信された修正フィードバック情報を処理するフィードバック処理部１７とからなる。フィードバック処理部１７は、修正フィードバック情報の内容に応じて、映像分割部１２、分類カテゴリ付与部１３およびメタデータ作成部１４の内の少なくとも一つに更新処理要求をする。【選択図】図２
2010187185.tif 000002
【特許請求の範囲】
【請求項１】
ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する映像規格変換部と、
該映像規格変換部で変換された映像コンテンツに分類カテゴリを自動的に付与する分類カテゴリ付与部と、
前記分類カテゴリを含むメタデータを作成するメタデータ作成部と、
前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存するコンテンツ保存部と、
受信された修正フィードバック情報を処理するフィードバック処理部とを具備し、
前記フィードバック処理部は、修正フィードバック情報の内容に応じて、前記映像分割部、分類カテゴリ付与部およびメタデータ作成部の内の少なくとも一つに更新処理要求することを特徴とする映像コンテンツ保管視聴システム。
【請求項２】
ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する映像規格変換部と、
該映像規格変換部で変換された映像コンテンツを、関連する内容を一映像区間とする複数映像区間に分割する映像分割部と、
該分割部で分割された映像区間に分類カテゴリを自動的に付与する分類カテゴリ付与部と、
前記分類カテゴリを含むメタデータを作成するメタデータ作成部と、
前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存するコンテンツ保存部と、
受信された修正フィードバック情報を処理するフィードバック処理部とを具備し、
前記フィードバック処理部は、修正フィードバック情報の内容に応じて、前記映像分割部、分類カテゴリ付与部およびメタデータ作成部の内の少なくとも一つに更新処理要求することを特徴とする映像コンテンツ保管視聴システム。
【請求項３】
請求項１または２に記載の映像コンテンツ保管視聴システムにおいて、
前記分類カテゴリ付与部は、前記映像区間の特徴量を抽出する映像特徴量抽出部と、映像の特徴量と分類カテゴリとの関連を記憶する特徴量データベースと、前記特徴量と前記特徴量データベースとを比較して、該特徴量データベース中の類似する特徴量の分類カテゴリを該映像区間の分類カテゴリとする特徴量比較処理部とを含むことを特徴とする映像コンテンツ保管視聴システム。
【請求項４】
請求項１または２に記載の映像コンテンツ保管視聴システムにおいて、
前記分類カテゴリ付与部は、前記映像区間に付与した分類カテゴリを基に、前記映像コンテンツのタイトルを自動的に付与する機能を有することを特徴とする映像コンテンツ保管視聴システム。
【請求項５】
請求項１または２に記載の映像コンテンツ保管視聴システムにおいて、
前記メタデータ作成部は、前記映像コンテンツのタイトルと前記映像区間の分類カテゴリを含む前記映像コンテンツのメタデータを作成することを特徴とする映像コンテンツ保管視聴システム。
【請求項６】
請求項５に記載の映像コンテンツ保管視聴システムにおいて、
前記映像コンテンツのタイトルおよび前記映像区間の分類カテゴリを用いて、電子番組表（ＥＰＧ）を作成するＥＰＧ作成部と、
前記映像コンテンツのタイトルおよび前記映像区間の分類カテゴリのメタデータをＢＭＬまたはＨＴＭＬ言語で記述するＢＭＬ・ＨＴＭＬ作成部とを具備することを特徴とする映像コンテンツ保管視聴システム。
【請求項７】
請求項１または２に記載の映像コンテンツ保管視聴システムにおいて、
前記フィードバック処理部からの更新処理要求は前記映像区間の修正情報であり、
前記映像分割部は、該修正情報に従って映像区間の修正を行うことを特徴とする映像コンテンツ保管視聴システム。
【請求項８】
請求項３に記載の映像コンテンツ保管視聴システムにおいて、
前記フィードバック処理部からの更新処理要求は前記分類カテゴリの修正情報であり、
前記特徴量データベースは、該修正情報に従って、前記映像の特徴量と分類カテゴリとの関連の修正を行うことを特徴とする映像コンテンツ保管視聴システム。
【請求項９】
請求項５に記載の映像コンテンツ保管視聴システムにおいて、
前記フィードバック処理部からの更新処理要求は前記分類カテゴリの修正情報であり、
前記メタデータ作成部は、該修正情報に従って前記映像コンテンツのタイトルまたは前記映像区間の分類カテゴリの修正を行うことを特徴とする映像コンテンツ保管視聴システム。
【請求項１０】
ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する工程と、
該映像規格に変換された映像コンテンツに分類カテゴリを自動的に付与する工程と、
前記分類カテゴリを含むメタデータを作成する工程と、
前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存する工程と、
受信された修正フィードバック情報を処理する工程と、
前記修正フィードバック情報の内容に応じて、前記映像分割、分類カテゴリ付与およびメタデータ作成の内の少なくとも一つを更新処理する工程とからなる映像コンテンツ保管視聴方法。
【請求項１１】
ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する工程と、
該映像規格変換された映像コンテンツを、関連する内容を一映像区間とする複数映像区間に分割する工程と、
該分割された映像区間に分類カテゴリを自動的に付与する工程と、
前記分類カテゴリを含むメタデータを作成する工程と、
前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存する工程と、
受信された修正フィードバック情報を処理する工程と、
前記修正フィードバック情報の内容に応じて、前記映像分割、分類カテゴリ付与およびメタデータ作成の内の少なくとも一つを更新処理する工程とからなる映像コンテンツ保管視聴方法。
【請求項１２】
請求項１０または１１に記載の映像コンテンツ保管視聴方法において、
前記メタデータを基に電子番組表（ＥＰＧ）を作成する工程と、
前記メタデータをＢＭＬまたはＨＴＭＬで記述する工程とをさらに有することを特徴とする映像コンテンツ保管視聴方法。
【請求項１３】
請求項１０ないし１２のいずれかに記載の映像コンテンツ保管視聴方法において、
前記映像コンテンツの分類カテゴリは、該映像区間の特徴量を予め格納された映像の特徴量と比較し、類似度の高い特徴量に対応する分類カテゴリが用いられることを特徴とする映像コンテンツ保管視聴方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像コンテンツ保管視聴システムおよび方法に関し、特に、ユーザが、デジカメ、ビデオカメラ等で撮影した静止画像または動画像に自動的にコンテンツ名、チャプター名等を付けて保管すると共に、該コンテンツ名、チャプター名等の付けられた映像をＶｏＤ（ビデオオンデマンド）でユーザに提供することのできる映像コンテンツ保管視聴システムおよび方法に関する。また、必要に応じて、ユーザが該コンテンツ名、チャプター名等を修正してフィードバックできる機能を備えた映像コンテンツ保管視聴システムおよび方法に関する。
【背景技術】
【０００２】
下記の特許文献１には、次のような技術が開示されている。個人で撮影されたパーソナルビデオ映像等の記録媒体を代理店、郵便局、運送会社などを通してコンテンツ保管・加工業者に預け、ビデオコンテンツの保管・加工を依頼する。そしてその保管されたビデオコンテンツをブロードバンド系高速アクセス回線を経由して、保管依頼した人または関係者がパソコンもしくはテレビにて見たい時に見たい内容を自由に選択して視聴する。その保管依頼の際、ユーザは、住所等の顧客基本情報、コンテンツ加工に関する処理情報、文字でのディレクトリ情報を申込書に記入して依頼する。そうすると、該コンテンツ保管・加工業者は、前記パーソナルビデオ映像等をデジタル加工すると共に、該デジタル加工データに前記申込書に記載された情報を付加して保管する。また、ユーザが後にアクセスする際に必要となるＩＤ、パスワードが生成され、前記デジタル加工データと関連付けられて登録される。その後、該コンテンツ保管・加工業者は、ユーザから預かったコンテンツ媒体および生成されたＩＤとパスワードを、代理店、郵便局、運送会社などを通して依頼元ユーザへ引き渡すが、その際に、保管コンテンツへのアクセス方法についての詳細も告知される。
【０００３】
この従来方式によれば、各個人のパーソナルビデオ映像がコンテンツ保管・加工業者に委託保管されるので、ビデオコンテンツの紛失を回避できると共に、ブロードバンドを経由して自宅にいながら見ることができる。また、ビデオコンテンツの内容にディレクトリ情報が埋め込まれているので、見たい場面をオンデマンド形式により自由に選択して視聴することができるようになる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２６６７９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、前記した従来技術では、個人で撮影されたパーソナルビデオ映像等の記録媒体を代理店、郵便局、運送会社などを通してコンテンツ保管・加工業者に送る必要があるので時間と手間がかかるという課題、ユーザが文字でのディレクトリ情報を申込書に記入して依頼しなければならないので面倒であるという課題、コンテンツ保管・加工業者は該申込書に記入されたディレクトリ情報に基づいて手作業でコンテンツに入力する必要があるという課題および該ディレクトリ情報の修正については何ら配慮されていない課題等があった。
【０００６】
本発明の目的は、前記した課題を解消し、個人で撮影されたパーソナルビデオ映像等のコンテンツに対して自動的にコンテンツ単位又は／及びチャプター単位で映像分類情報を付加して保管し、該保管されたコンテンツをＶｏＤ等でユーザに提供することのできる映像コンテンツ保管視聴システムおよび方法を提供することにある。また、他の目的は、自動的に付加された映像分類情報をユーザが修正してフィードバックできる映像コンテンツ保管視聴システムおよび方法を提供することにある。
【課題を解決するための手段】
【０００７】
前記目的を達成するために、本発明は、ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する映像規格変換部と、該映像規格変換部で変換された映像コンテンツに分類カテゴリを自動的に付与する分類カテゴリ付与部と、前記分類カテゴリを含むメタデータを作成するメタデータ作成部と、前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存するコンテンツ保存部と、受信された修正フィードバック情報を処理するフィードバック処理部とを具備し、前記フィードバック処理部は、修正フィードバック情報の内容に応じて、前記映像分割部、分類カテゴリ付与部およびメタデータ作成部の内の少なくとも一つに更新処理要求する点に特徴がある。
【０００８】
また、ネットワーク経由でアップロードされた映像コンテンツを予め定められた映像規格に変換する映像規格変換部と、該映像規格変換部で変換された映像コンテンツを、関連する内容を一映像区間とする複数映像区間に分割する映像分割部と、該分割部で分割された映像区間に分類カテゴリを自動的に付与する分類カテゴリ付与部と、前記分類カテゴリを含むメタデータを作成するメタデータ作成部と、前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存するコンテンツ保存部と、受信された修正フィードバック情報を処理するフィードバック処理部とを具備し、前記フィードバック処理部は、修正フィードバック情報の内容に応じて、前記映像分割部、分類カテゴリ付与部およびメタデータ作成部の内の少なくとも一つに更新処理要求する点に他の特徴がある。
【０００９】
また、前記分類カテゴリ付与部は、前記映像区間の特徴量を抽出する映像特徴量抽出部と、映像の特徴量と分類カテゴリとの関連を記憶する特徴量データベースと、前記特徴量と前記特徴量データベースとを比較して、該特徴量データベース中の類似する特徴量の分類カテゴリを該映像区間の分類カテゴリとする特徴量比較処理部とを含む点に他の特徴がある。
【００１０】
また、前記映像分割部、分類カテゴリ付与部およびメタデータ作成部は、前記更新処理要求を受けると、前記修正フィードバック情報に従って、映像区間、分類カテゴリまたはメタデータを修正する点に他の特徴がある。
【発明の効果】
【００１１】
本発明によれば、ユーザのビデオカメラやデジカメなどで撮影された動画像または静止画像に対して、自動的にタイトルおよび映像区間の分類カテゴリを付与し、ユーザに提供することができるという効果がある。また、ユーザは、自動的に付与されたタイトルおよび映像区間の分類カテゴリを修正することができるので、自分の映像コンテンツに満足のいくタイトルや分類カテゴリを付けることができる。
【００１２】
また、修正情報は、映像分割部、分類カテゴリ付与部またはメタデータ作成部の更新処理に反映されるので、これらの処理精度が高められていくという効果、つまり学習効果がある。
【００１３】
また、ユーザは、自分が撮影した映像コンテンツをネットワークを介してＶｏＤプラットフォームに送信するだけで、自動的にタイトルおよび映像区間の分類カテゴリが付与され、コンテンツ保存部に保存されるので、従来方式のようなユーザが文字でのディレクトリ情報を申込書に記入して依頼したり、パーソナルビデオ映像等の記録媒体を代理店、郵便局、運送会社などを通してコンテンツ保管・加工業者に送らなければならないといった面倒さは一切ないという効果がある。
【図面の簡単な説明】
【００１４】
【図１】本発明が実施されるネットワーク環境の一例を示すブロック図である。
【図２】本発明の要部の構成を示すブロック図である。
【図３】本発明の一実施形態の構成を示すブロック図である。
【図４】図３のチャプター分割部からメタデータ作成部までの処理を説明するフローチャートである。
【図５】映像コンテンツのタイトル付与の説明図である。
【図６】ＥＰＧ作成の説明図である。
【図７】図３のＢＭＬ・ＨＴＭＬ作成部と映像ファイル（ＴＳ）作成部の処理を説明するフローチャートである。
【図８】ＢＭＬ・ＨＴＭＬ作成部で作成されたデータを表示した場合の表示例の概念図である。
【図９】図３のＶｏＤコンテンツ保存部内に保存されるデータの概念図である。
【図１０】ＶｏＤ視聴装置でなされるフィードバック（修正）機能の概要を示すフローチャートである。
【図１１】図３のフィードバック処理部の処理を示すフローチャートである。
【図１２】個別データベースへの顔情報の登録画面の概念図である。
【発明を実施するための形態】
【００１５】
以下に、図面を参照して本発明を詳細に説明する。図１は、本発明が実施されるネットワーク環境の一例の説明図である。
【００１６】
撮像装置１はビデオカメラ、デジカメなどからなり、該撮像装置１で撮影されたユーザ個人等の映像データは、ＰＣ等の端末装置２を経由して、または直接にＷｉＦｉ、ＷｉＭａｘ等によりインターネット網３に送られる。インターネット網３に送られた映像データ又は映像コンテンツ（以下、映像コンテンツと呼ぶ）はサーバであるＶｏＤプラットフォーム４に映像入力部から入力される。該ＶｏＤプラットフォーム４の構成は後で詳細に説明するが、前記映像入力部から受信した映像コンテンツをチャプター分けする機能、映像コンテンツ単位又は／及びチャプター単位で映像分類情報（メタデータ）を作成する機能、ＥＰＧ（電子番組表）作成機能、映像ファイル作成機能、該映像ファイルを保管する機能、ＩＤおよびパスワードを生成して該映像コンテンツに関連させる機能、ＶｏＤ視聴要求のアクセスに対応する機能、フィードバック情報に対応する機能などを有している。
【００１７】
ＶｏＤプラットフォーム４はＶｏＤ視聴装置６からインターネット網３又はＶｏＤインフラ網５を介してアクセスされると、前記ＩＤおよびパスワードを照合した上で要求された映像コンテンツを映像出力部からＶｏＤインフラ網５を介してＶｏＤ視聴装置６へ送出する。ＶｏＤ視聴装置６はテレビやＳＴＢ等からなり、ユーザは該ＶｏＤ視聴装置６の映像面上に映出された映像コンテンツの映像分類情報を用いて、見たい映像コンテンツやチャプターを選択的に映出することにより、効率的にかつ自宅に居ながら楽しむことができる。また、ＶｏＤプラットフォーム４で自動的に付けられた前記映像分類情報に満足しない場合には、ユーザは好みの映像分類情報をＶｏＤプラットフォーム４にフィードバックして、映像分類情報を修正することができる。また、ＶｏＤプラットフォーム４は、該フィードバック情報により前記チャプター分け機能および映像分類情報を作成する機能の精度が向上するように学習をすることができる。
【００１８】
まず、図２を参照して、前記ＶｏＤプラットフォーム４の構成の要部を説明する。該ＶｏＤプラットフォーム４は、ネットワーク経由でアップロードされた映像コンテンツが静止画像であるか動画像であるかを判定する静止画・動画判定部１０と、映像コンテンツを予め定められた映像規格に変換する映像規格変換部１１と、該映像規格変換部１１で変換された映像コンテンツを、関連する内容を一映像区間とする複数映像区間に分割する映像分割部１２と、該分割部１２で分割された映像区間に分類カテゴリを自動的に付与する分類カテゴリ付与部１３と、前記分類カテゴリを含むメタデータを作成するメタデータ作成部１４と、前記映像コンテンツの映像ファイルを前記メタデータと関連付けて保存するコンテンツ保存部１５と、該映像コンテンツの映像ファイルをユーザに送出する送出部１６と、受信された修正フィードバック情報を処理するフィードバック処理部１７とから構成される。前記静止画・動画判定部１０で動画像と判定された場合には、映像規格変換部１１は映像分割部１２に接続され、一方静止画像と判定された場合には映像分割部１２をスキップして分類カテゴリ部付与部１３に接続される。前記フィードバック処理部１７は、修正フィードバック情報の内容に応じて、前記映像分割部１２、分類カテゴリ付与部１３、または／およびメタデータ作成部１４に更新処理要求をする。
【００１９】
次に、前記ＶｏＤプラットフォーム４の構成の詳細を図３を参照して説明する。ＶｏＤプラットフォーム４は図示されているように、前記インターネット網３を介して送られてきた映像コンテンツが入力する映像入力部２１、例えばＤＶフォーマットの映像や静止画のＪＥＰＧ映像をＭＰＥＧ２や非圧縮映像に変換する映像規格変換部２２、該変換された映像をシーンやショットなどのチャプターに分割するチャプター分割部２３を有する。映像入力部２１は、映像コンテンツを受信すると共に静止画像であるか動画像であるかの判定をし、その判定信号で映像規格変換部２２をチャプター分割部２３へ接続するか該チャプター分割部２３をスキップして映像特徴量抽出部２４に接続するかの制御をする。静止画像の場合にはチャプター分割をする必要がないので、チャプター分割部２３をスキップする。映像規格変換部２２に、静止画が入力された場合には、複数の静止画を使用してスライドショー的な動画として、ＭＰＥＧ２や非圧縮映像に変換してもよい。
【００２０】
ＶｏＤプラットフォーム４は、また、前記分割されたチャプターから特徴量を抽出する映像特徴量抽出部２４、映像特徴量と映像分類情報（以下、分類カテゴリという）との対応データを格納する特徴量データベース（ＤＢ）２５、前記映像特徴量抽出部２４で抽出された映像特徴量と特徴量データＤＢ２５のデータとを比較する特徴量比較処理部２６を有する。前記分類カテゴリ付与部１３は、前記映像特徴量抽出部２４、特徴量ＤＢ２５および特徴量比較処理部２６に相当する。該分類カテゴリ付与部１３を構成する特徴量データＤＢ２５は、ニューラルネットワーク等を利用した知識ベースであって、分類カテゴリの付与を行うとともに、外部フィードバックによって学習可能なものであってもよい。ここに、前記特徴量ＤＢ２５は、少なくとも個別データベースと一般データベースを有する。前記個別データベースには、ユーザの個人認識用データ、例えばユーザの家族の顔認識用データと名前とがリンクして格納され、前記一般データベースには、一般的な映像特徴量、例えば赤ちゃん、ハイハイ、歩き、水遊び、誕生日、保育園、運動会、遊園地などの一般的な事象認識用のデータが格納される。
【００２１】
ＶｏＤプラットフォーム４は、また、前記特徴量比較処理部２６での比較処理により取得された映像特徴量に適合する分類カテゴリにより前記チャプターのメタデータを作成するメタデータ作成部２７、該チャプターのメタデータを総合して映像コンテンツのタイトルを作成し、該タイトルとチャプターのメタデータ等から電子番組表を作成するＥＰＧ（Electric Program Guide)作成部２８、前記メタデータをＢＭＬ（Broadcast Markup Language)またはＨＴＭＬで表すＢＭＬ・ＨＴＭＬ作成部２９、チャプター分割部２３よりの映像コンテンツと電子番組表とＢＭＬ・ＨＴＭＬで記述されたメタデータとで映像ファイルを作成する映像ファイル（ＴＳ；Transport  stream）作成部３０、該映像ファイルを格納するＶｏＤコンテンツ保存部３１および図１の映像出力部に相当するＶｏＤ送出部３２を有する。
【００２２】
該ＶｏＤプラットフォーム４は、さらに、図１のフィードバック情報入力部に相当するＶｏＤ受信部４１を有し、該ＶｏＤ受信部４１は、ユーザからのＶｏＤ視聴要求とフィードバック情報とを識別し、ＶｏＤ視聴要求であればＶｏＤコンテンツ保存部３１にＶｏＤ視聴要求を送り、一方フィードバック情報であれば該フィードバック情報をフィードバック処理部４２に送る。
【００２３】
ＶｏＤコンテンツ保存部３１はＶｏＤ視聴要求を受けるとＩＤおよびパスワードの照合をした上で、ユーザから要求された映像ファイルを読み出し、ＶｏＤ送出部３２、ＶｏＤインフラ網５を介して、ＶｏＤ視聴装置６に転送する。一方、フィードバック処理部４２は、フィードバック情報の内容を分析し、フィードバック情報がチャプター分け修正情報であれば、チャプター分割部２３に更新処理要求をし、メタデータの修正情報であれば、特徴量ＤＢ２５とメタデータ作成部２７に更新処理要求をする。なお、特徴量ＤＢ２５の修正に関しては、前記個別データベースや一般データベースが修正される（学習機能）と共に、メタデータ作成部２７で作成されたメタデータを修正する。
【００２４】
前記チャプター分割部２３は、基本的には、映像コンテンツの各フレーム間での映像変化量が時間的に予め定められた閾値以上の場合に該フレームをチャプター分け画面（又はカット画面又はシーンチェンジ画面）とし、該チャプター分け画面間の映像を映像特徴量抽出部２４に出力する。なお、該チャプター分割部２３は、例えば、電子情報通信学会秋期大会、Ｄ−２６４（１９９３）の「フィルタを用いた映像カット点検出」、電子情報通信学会秋期大会、Ｄ−５０１（１９９４）の「フレーム間輝度差分と色差相関による圧縮動画像データからのカット検出」、特開平０７−０５９１０８号公報、特開平０９−０８３８６４号公報等に記載されている周知の技術を用いて、チャプター分けを行うことができる。チャプター分割部２３は、前記閾値を修正する等して更新処理することができる。
【００２５】
次に、前記映像特徴量抽出部２４、特徴量比較処理部２６およびメタデータ作成部２７の動作を、図４のフローチャートを参照して説明する。以下では、前記チャプター分け画面間の映像を「チャプター映像」と呼ぶ。
【００２６】
ステップＳ１では、映像特徴量抽出部２４はチャプター映像から特徴量（映像の特徴となっている部分を定量化したもの）、例えば、動物体などの対象物の面積、周囲長、円形度、重心など及び／又は色特徴、顔特徴などを抽出する。該特徴量は、動物体に限らず、静止物体や背景画像の対象物からも抽出するのが好ましい。一例として、２００７年３月１５日  ＣＱ出版株式会社発行「改訂版ディジタル画像処理の基礎と応用」の第６０〜６２頁に記されている方法を用いて前記特徴量を抽出することができる。ステップＳ２では、特徴量比較処理部２６が、前記特徴量を特徴量ＤＢ２５内の情報と比較（例えば、パターン認識）し、分類カテゴリ候補と分類度を取得する。分類カテゴリ候補の例としては、赤ちゃん、ハイハイ、歩き、誕生日などがあり、分類度の例は、０〜１までの値とすることができる。分類度は、例えば赤ちゃん、ハイハイ、歩き、誕生日などの映像が、特徴量ＤＢ２５内の情報と比較し、その分類カテゴリ候補との一致度合いの値と、該分類カテゴリーが映っているフレーム数をチャプター映像のフレーム数で割り算することにより求めた値を掛けた値により表現することができる。また、該値に重み係数を掛けた値を分類度としてもよい。誕生日は大事な行事であるので、重み係数は大きくなる。また、前記チャプター映像に赤ちゃんの顔が映っている場合には、特徴量比較処理部２６は特徴量ＤＢ２５の個別データベースに予め登録されている顔情報にアクセスし、顔認識ができた場合にはこの顔情報とリンクしている名前を読み出し、該チャプター映像の分類カテゴリ候補のひとつとすることができる。
【００２７】
ステップＳ３では、メタデータ作成部２７がチャプター映像に対応したメタデータ（以下、チャプターメタと呼ぶ）を作成する。チャプターメタの例としては、対象ファイル名、チャプター画面の時刻情報、前記分類カテゴリ候補と分類度とからなる分類メタなどがある。また、他の分類カテゴリと合成したメタデータを生成することも可能である。例えば、はるかちゃんのハイハイとか、だいきくんの誕生日とかのメタデータとすると、より良好にチャプター映像を識別することができるようになる。図１２に、個別データベースへの顔情報の登録画面の概念図を示す。ステップＳ４では、全てのチャプター映像に対して分類付けが行われたか否かの判断がなされ、否定の場合には、ステップＳ５に進んで、次のチャプター映像が映像特徴量抽出部２４に送られる。そして、前記ステップＳ１〜Ｓ４の処理が繰り返される。
【００２８】
その後、ステップＳ４の判断が肯定になると、ステップＳ６に進んで、メタデータ作成部２７において全体の映像コンテンツについての分類カテゴリ候補（以下、タイトル候補と呼ぶ）を、演算により求める処理が行われる。この処理例を図５に示す。例えば各チャプター映像の始めから終わりまでの時間をＴｎ（ｎ＝１，２，・・・）とし、各チャプター映像で得られた各分類カテゴリ候補の分類度をＰｎｉ（ｉ＝１，２，・・・）とすると、Ｔｎ×Ｐｎｉが一番大きい値の分類カテゴリをタイトルの第１候補、二番目に大きい値の分類カテゴリをタイトルの第２候補とする。図示の例では、ハイハイが第１候補、赤ちゃんが第２候補となる。他の処理例として、映像コンテンツ全体で、同じ分類カテゴリ候補のＴｎ×Ｐｎｉの和を求め、該和の値が一番大きい分類カテゴリをタイトルの第１候補、二番目に大きい値の分類カテゴリをタイトルの第２候補としてもよい。次に、ステップＳ７では、前記タイトル候補を、全体の映像コンテンツすなわち映像ファイル全体のメタ（以下、タイトルメタと呼ぶ）として登録する。
【００２９】
次に、ＥＰＧ作成部２８は、図６に示されているように、前記タイトルメタと各チャプターメタを含むＥＰＧ（電子番組表）情報を作成する。例えば、タイトル：ハイハイ、内容：（０〜１分）赤ちゃん、ハイハイ、歩き、（１〜３分）ハイハイ、赤ちゃん、歩きといったＥＰＧ情報を作成する。
【００３０】
次に、前記ＢＭＬ・ＨＴＭＬ作成部２９および映像ファイル作成部３０の機能を図７を参照して説明する。
【００３１】
ステップＳ１１で、ＢＭＬ・ＨＴＭＬ作成部２９はタイトルメタおよびチャプターメタを利用して、ＢＭＬまたはＨＴＭＬデータを作成する。ステップＳ１２では、全部のチャプター映像のチャプターメタに対して、ＢＭＬまたはＨＴＭＬデータを作成したかどうかの判断がなされ、該判断が否定の場合にはステップＳ１１に戻って次のチャプター映像のＢＭＬまたはＨＴＭＬデータを作成する。ステップＳ１２の判断が肯定になると、ステップＳ１３に進んで、前記映像ファイル作成部３０は、前記ＢＭＬまたはＨＴＭＬデータと、前記ＥＰＧおよび映像コンテンツとを多重させ、映像ファイルを作成する。なお、該映像ファイルは、ＶoＤコンテンツ保存部に送付され、メタデータ作成部２７からＶoＤコンテンツ保存部に送付される前記タイトルメタおよびチャプターメタと関連付けられて保存される。前記タイトルメタおよびチャプターメタのＢＭＬまたはＨＴＭＬデータは、後で詳述するタイトルや分類カテゴリを修正するのに使用されるデータであり、図８にＶｏＤ視聴装置６の修正画面の概念図を示す。分類カテゴリ候補は前記Ｔｎ×Ｐｎｉの値の大きさ順にプルダウン方式にてユーザに選択可能に表示される。
【００３２】
図９は、前記ＶｏＤコンテンツ保存部３１に格納されるデータの概念図である。該ＶｏＤコンテンツ保存部３１には、図示されているように、映像ファイル（映像、ＢＭＬ・ＨＴＭＬデータ、ＥＰＧ）３１ａとメタデータ３１ｂとが関連付けられて格納される。該メタデータ３１ｂは、主に、ユーザによるＶｏＤ視聴要求時の検索処理の際に用いられることができる。
【００３３】
次に、図１０を参照して、ＶｏＤ視聴装置６でなされるフィードバック（修正）機能の概要を説明する。
【００３４】
ステップＳ２１では、ユーザがＩＤおよびパスワードを入力してＶｏＤ視聴の操作をする。ここでユーザは、視聴したい映像の検索をすることもできる。ステップＳ２２では、視聴要求された映像ファイルがＶｏＤコンテンツ保存部３１から読み出され、ＶｏＤ視聴装置６は該読み出された映像ファイルを受信する。ステップＳ２３では、ユーザによって修正機能が選択されたか否かの判断がなされ、肯定の場合には、ステップＳ２４に進み、各映像ファイルの代表チャプター映像（前記Ｔｎ×Ｐｎｉが最大の映像）をタイトルメタと共に表示する。Ｓ２４の右側の表示例では、赤ちゃん、ハイハイ、歩き、誕生日などが各映像ファイルのタイトルメタに相当し、Ａ，Ｂ，Ｃ，Ｄ，Ｅ，Ｆなどが各映像ファイルの代表チャプター映像に相当する。この表示は、ＶｏＤ視聴装置６の映像画面の一部の領域になされるのが好適である。以下に述べる表示についても同様である。
【００３５】
ステップＳ２５では、映像ファイルＡ〜Ｆの内のいずれか一つが選択されたか否かの判断がなされ、この判断が肯定の場合には、ステップＳ２６に進んで、タイトル候補をプルダウン方式で表示する。Ｓ２６の右側の表示例では、映像ファイルＡが選択され、そのタイトル候補が赤ちゃん、ハイハイ、歩きの順にプルダウン方式で表示された例を示す。ステップＳ２７では、タイトルの第１候補から他の候補への修正がなかったかどうかの判断がなされ、なかった場合にはステップＳ２９に進み、あった場合にはステップＳ２８で修正内容を前記ＶｏＤプラットフォーム４にフィードバックした後、再表示のためにステップＳ２６に戻る。なお、該フィードバックを受けたＶｏＤプラットフォーム４の動作は、図１１を参照して後述する。
【００３６】
ステップＳ２９では、選択された映像コンテンツ内のチャプター映像を、対応する分類カテゴリ候補と共に表示する。Ｓ２９の右の表示例では、前記チャプター映像がチャプター１，チャプター２の映像であり、それぞれに対応する分類カテゴリ候補が赤ちゃん、ハイハイ、歩き、誕生日などである。次いで、分類カテゴリの第１候補から他候補への修正がなかったかどうかの判断がなされ、なかった場合にはステップＳ３２に進み、あった場合にはステップＳ３１で修正内容を前記ＶｏＤプラットフォーム４にフィードバックした後再表示のためにステップＳ２９に戻る。ステップＳ３２では、チャプター分けの修正がなかったかどうかの判断がなされ、なかった場合にはステップＳ３４に進み、あった場合にはステップＳ３３で修正内容を前記ＶｏＤプラットフォーム４にフィードバックした後再表示のためにステップＳ２９に戻る。ステップＳ３４では、修正操作が終了したかどうかの判断がなされ、否定の場合にはステップＳ２４に戻って、再度各映像ファイルの代表チャプター映像をタイトルと共に表示する。以下、前記したステップＳ２４〜Ｓ３４の処理が繰り返される。この繰り返しの結果、ステップＳ３４の判断が肯定になると、修正処理は終了する。
【００３７】
次に、前記フィードバック情報を受信したＶｏＤプラットフォーム４の動作について図１１を参照して説明する。前記フィードバック処理部４２は、ステップＳ４１でフィードバック（修正）情報を受信したか否かの判断をし、肯定の場合にはステップＳ４２に進んで、修正内容がチャプター分けであるか否かの判断をする。この判断が肯定の場合にはステップＳ４４に進んで、チャプター分割部２３へ修正内容を通知する。そうすると、チャプター分割部２３は、チャプター分けを修正すると共にチャプター分けに使用されるパラメータなどを更新してその精度を高めるように学習する。
【００３８】
ステップＳ４３では、修正内容が映像コンテンツのタイトル又はチャプターの分類カテゴリであるか否かの判断がなされる。この判断が肯定の場合にはステップＳ４５に進んで特徴量ＤＢ２５、メタデータ作成部２７へ通知する。これにより、メタデータ作成部２７は、タイトルメタ又はチャプターメタを修正する。また、特徴ＤＢ２５の個人認識用データベースまたは一般データベースは更新され、メタデータ作成の精度を高めるように更新される。
【００３９】
なお、フィードバック処理部４２が更新処理要求を通知する際には、VoDコンテンツ保存部から、該当する映像コンテンツを得てチャプター分割部２３に送付し、チャプター分割、映像特徴量抽出、特徴量比較、メタデータ作成、映像ファイル作成を再度行うことになる。また、フィードバック処理部４２がVoDコンテンツ保存部から映像コンテンツを得る代わりに、別途、映像入力部２１、映像規格変換部２２、チャプター分割部２３のどこかに、映像コンテンツを保存し必要時にオリジナルの映像ファイルを呼び出せるようなデータベースを設けて対処してもよい。
【００４０】
本発明によれば、ユーザは自分で撮影した動画像や静止画像をネットを介してＶｏＤプラットフォームに送信するだけで、自動的にタイトルや分類カテゴリが付けられた映像コンテンツをＶｏＤコンテンツ保存部に保管することができる。そして、必要な時に、ＶｏＤ受信要求をすれば、ＶｏＤコンテンツ保存部から自分の映像コンテンツを読み出してＶｏＤ視聴装置に再生して楽しむことができる。また、前記自動的に付けられたタイトルや分類カテゴリを自分の好みに合わせて修正することができるので、満足のいくタイトルや分類カテゴリの付いた映像コンテンツをＶｏＤコンテンツ保存部に保存することができる。また、自分が撮影した映像をＶｏＤコンテンツ保存部に保存、管理できるので、自分で映像コンテンツを管理するといった煩わしさや、映像コンテンツを紛失したりすることから開放される。
【００４１】
以上、本発明を好ましい実施形態により説明したが、本発明の趣旨を逸脱しない範囲で、種々の変形ができることは明らかである。
【符号の説明】
【００４２】
４・・・ＶｏＤプラットフォーム、６・・・ＶｏＤ視聴装置、１１、２２・・・映像規格変換部、１２・・・映像分割部、１３・・・分類カテゴリ付与部、１４、２７・・・メタデータ作成部、１５・・・コンテンツ保存部、１６・・・送出部、１７・・・フィードバック処理部、２３・・・チャプター分割部、２４・・・映像特徴量抽出部、２５・・・特徴量ＤＢ、２６・・・特徴量比較処理部、２８・・・ＥＰＧ作成部、２９・・・ＢＭＬ・ＨＴＭＬ作成部、３０・・・映像ファイル（ＴＳ）作成部、３１・・・ＶｏＤコンテンツ保存部、３２・・・ＶｏＤ送出部、４１・・・ＶｏＤ受信部、４２・・・フィードバック処理部。
【図１】
2010187185.tif 000003
【図２】
2010187185.tif 000004
【図３】
2010187185.tif 000005
【図４】
2010187185.tif 000006
【図５】
2010187185.tif 000007
【図６】
2010187185.tif 000008
【図７】
2010187185.tif 000009
【図８】
2010187185.tif 000010
【図９】
2010187185.tif 000011
【図１０】
2010187185.tif 000012
【図１１】
2010187185.tif 000013
【図１２】
2010187185.tif 000014