(57)【要約】記憶媒体の価格が急激に低下したことで、ユーザは以前と比較してより多くのデータをより速く保存できるようになった。近い将来、記憶媒体は、ユーザが驚く程のデータ量を格納できるようになると予想される。情報量が膨大になると、後の検索のために、ユーザ自身が手動でマルチメディアコンテンツに対してインデックスを付すことは不可能と考えられる。ユーザをサポートするツールが必要である。これらのアルゴリズムの不都合な点は、処理負荷が非常に大きく、一般消費者向けの記憶装置としては不適切である点である。本発明は、圧縮処理等のマルチメディアコンテンツの処理中に使用できる処理パラメータを用いてコンテンツにインデックスを付す装置を提供する。データ圧縮は、殆ど全てのマルチメディアコンテンツを格納する前に行われる。
2004537780.tif 000002
【特許請求の範囲】
【請求項１】
マルチメディアコンテンツを受信し、所定の処理を施し、処理後のマルチメディアコンテンツを生成するビデオ処理部と；
前記ビデオ処理部に接続され、前記ビデオ処理部から、前記の処理後のマルチメディアコンテンツとは別個の処理パラメータを受け取るコンテンツ分析システムと；
を有し、
前記処理パラメータは、マルチメディアコンテンツの処理結果として生成され、
前記コンテンツ分析システムは、前記処理パラメータに対応して、マルチメディアコンテンツのコンテンツ記述子を生成することを特徴とするコンテンツ分析装置。
【請求項２】
請求項１に記載のコンテンツ分析装置であって、前記コンテンツ分析システムは、マルチメディアコンテンツにおけるシーンの変化を検知することを特徴とするコンテンツ分析装置。
【請求項３】
請求項２に記載のコンテンツ分析装置であって、
マルチメディアコンテンツに対してインデックスポインタを生成する手段、
をさらに有することを特徴とするコンテンツ分析装置。
【請求項４】
請求項２に記載のコンテンツ分析装置であって、
マルチメディアコンテンツのナビゲーションに用いることができるブックマークを作成する手段、
をさらに備えるコンテンツ分析装置。
【請求項５】
請求項１に記載のコンテンツ分析装置であって、前記ビデオ処理部がビデオ圧縮器であることを特徴とするコンテンツ分析装置。
【請求項６】
請求項１に記載のコンテンツ分析装置であって、前記ビデオ処理部が暗号化装置であることを特徴とするコンテンツ分析装置。
【請求項７】
マルチメディアコンテンツを受信し、所定の処理を施し、処理後のマルチメディアコンテンツを生成するビデオ処理部を有するブロードキャストシステムであって、
（a）前記受信マルチメディアコンテンツを処理し、
（b）前記の処理されたマルチメディアコンテンツをブロードキャスト送信し、
（c）前記ブロードキャスト送信されるマルチメディアコンテンツに、当該マルチメディアコンテンツとは別個に前記ビデオ処理部から供給される処理パラメータを含むストリームを添付し、
前記処理パラメータは、前記マルチメディアコンテンツを処理した結果生成されることを特徴とするブロードキャストシステム。
【請求項８】
請求項７に記載のブロードキャストシステムであって、前記ブロードキャスト送信されるマルチメディアコンテンツは、DVB標準に準拠して送信されることを特徴とするブロードキャストシステム。
【請求項９】
請求項７に記載のブロードキャストシステムで送信された前記マルチメディアコンテンツと前記処理パラメータを受信するマルチメディア装置であって、前記マルチメディアコンテンツに、前記処理パラメータに対応して、インデックスポインタをさらに生成することを特徴とするマルチメディア装置。
【請求項１０】
マルチメディアコンテンツを格納する記憶装置であって、請求項１に記載のコンテンツ分析装置を有することを特徴とする記憶装置。
【発明の詳細な説明】
【０００１】
本発明はコンテンツ分析装置に関する。
【０００２】
従来、ユーザは、アナログのオーディオ／ビデオ（A/V）コンテンツをテープやその他のアナログ記憶装置に格納していた。ユーザは、コンテンツに印を付けて、所望のコンテンツを後で検索できるようにしなければならなかった。今日では、ユーザは、マルチメディアのデータをデジタル形式で保存することを好む。より良い品質が得られ、必要な記憶容量も低く抑えられるためである。記憶媒体の価格が急激に低下したことで、ユーザは以前と比較してより多くのデータをより速く保存できるようになった。近い将来、記憶媒体は、ユーザが驚く程のデータ量を格納できるようになると予想される。情報量が膨大になると、後の検索のために、ユーザ自身が手動でマルチメディアコンテンツに対してインデックスを付けることは不可能と考えられる。ユーザをサポートするツールが必要である。
【０００３】
これらのアルゴリズムの不都合な点は、処理負荷が非常に大きく、一般消費者向けの記憶装置としては不適切である点である。
【０００４】
本発明の目的は、マルチメディアコンテンツを分析する際のフィージビリディ（実行可能性）を高めるコンテンツ分析装置を提供することにある。
【０００５】
上記の目的は、マルチメディアコンテンツを受信し、所定の処理を施し、処理後のマルチメディアコンテンツを生成するビデオ処理部と、前記ビデオ処理部に接続され、前記ビデオ処理部から、前記処理後のマルチメディアコンテンツとは別個の処理パラメータを受信するコンテンツ分析システムとを備えるコンテンツ分析装置を提供することで達成される。処理パラメータは、マルチメディアコンテンツを処理した結果生成される。コンテンツ分析システムは、マルチメディアコンテンツを示すコンテンツ記述子を、処理パラメータに対応して生成する。
【０００６】
デジタルマルチメディアデータが送信されるようになると、データは冗長な情報を取り除いて圧縮されるようになった。マルチメディアデータの標準的な圧縮技術としては、MPEG-1、MPEG-2、MPEG-4、MPEG-21、DivX、AC3、MP3等がある。適当な圧縮を行ったり、マルチメディアコンテンツを処理したりする際に用いられる情報は、コンテンツ自体の情報を既に含んでいる。こうした内部パラメータをコンテンツ分析システムの入力として用いることで、コンテンツ記述子のリアルタイムでの生成が可能になることが証明されている。さらに、圧縮したマルチメディアコンテンツは、ソースデータよりもバイト数が少ないため、その処理もより容易でより高速になる。
【０００７】
デジタルシステムは、マルチメディアコンテンツを処理あるいは圧縮するものである。既に多数のデジタルシステムが市販されており広く普及している。デジタルシステムの内部パラメータは、これまで所定の処理や圧縮にのみ用いられていた。しかし、内部パラメータをコンテンツ分析システムの入力として用いることでコンテンツ記述子のリアルタイムでの生成が可能になることが証明されている。これはインデックスポイントの自動生成にも同様に当てはまる。
【０００８】
デジタルシステムのハードウェアで前処理の大部分が既に終了しているため、コンテンツ分析の処理負荷は小さい。また、これらのアルゴリズムは消費者側の装置においてリアルタイムで実行することができ、追加のハードウェアは不要か、あるいは、必要だとしてもごく僅かである。これは、大きな利点である。
【０００９】
格納コンテンツはデジタルであるため、デジタル信号処理アルゴリズムを用いてコンテンツに自動的にインデックスを付したり、コンテンツの検索やブラウジングを行うことができる。また、上記の方法で生成されたインデックスやコンテンツの特徴は、ユーザに対してコンテンツを表示する際に、受信機において表示内容として用いることができる。
【００１０】
本発明の一実施例によれば、市販のSAA6750H  MPEG2エンコーダ（フィリップス  セミコンダクターズ社販売）を、コンテンツに関するメタデータを生成するようにプログラムすることができる。メタデータが含む情報としては、オーディオビジュアルのデータストリームの画像フォーマットが４：３なのか、レターボックス形式なのか、字幕の有無、輝度や輝度変化の情報等がある。また、音声信号の変化も検出することができる。従って、オーディオビジュアル情報の変化も検出できる。上記の変化は、映画のシーンの変化であっても良いし、映画からコマーシャルへ又はその逆への変化であっても良い。
【００１１】
上記SAA6750HのI2Cバスを用いることで、生成したメタデータを他の装置へ送信することができる。
【００１２】
図１は、本発明による装置の一実施例である装置１００を示す。装置１００は、デジタルシステム１０１とコンテンツ分析システム１０２とを有する。上述したように、本実施例において、デジタルシステム１０１はSAA6750H  MPEG2エンコーダである。
【００１３】
シーン変化を用いて、オーディオビジュアルのデータストリームにインデックスを付したり、オーディオビジュアルのデータストリームをナビゲーションするのに用いるブックマークを作成したりすることができる。
【００１４】
圧縮や符号化などの処理は、オーディオビジュアル情報を放送する放送局においてしばしば行われる。これは、放送信号がオーディオビジュアル情報のデータストリームを含んでいる場合に言えることである。しかし、オーディオビジュアル情報に対してインデックスを付すべき場合に、オーディオビジュアル情報の符号化及び／又は暗号化が行われないこともあり得る。
【００１５】
この場合、情報のプロバイダは、オーディオビジュアル情報と共にメタデータを提供できる。メタデータは、データを暗号化して生成されたものである。DVB（Digital  Video  Broadcasting）において、ブロードキャスト送信局が、MPEGデータストリームにプライベートデータストリームを添付することは周知である。オーディオビジュアル情報の符号化時に生成されるメタデータは、オーディオビジュアル情報と共にプライベートデータストリームで送信することができる。当業者にとって自明なその他の任意の方法も用い得る。
【００１６】
ブロードキャスト信号の受信側では、オーディオビジュアルデータを符号化する際に送信側で生成されたメタデータを、データのナビゲーションやインデックス付け、その他の目的に用いることができる。
【００１７】
情報提供側が、オーディオビジュアル情報を記録媒体に格納して提供する場合、メタデータも同様に記録媒体に格納することができる。メタデータは、オーディオビジュアル情報のデータストリームと共に記録媒体に格納しても良い。同じ記録媒体上の別のテーブルに格納することもできる。
【００１８】
リアルタイムでのコンテンツ分析と、このコンテンツ分析情報をオーディオビジュアル情報のデータストリームと共に提供して利用可能にすることは、マルチメディア関連のアプリケーションにとって極めて重要である。リアルタイムでのコンテンツ分析を行う際には、ブックマーク、アンカー、又は他のインデックスインジケータの生成と共に行われることもある。
【００１９】
従って、本発明は、記憶容量が大きいあらゆる種類のマルチメディアデバイスに適用し得る。マルチメディアコンテンツの圧縮や処理は、多様な記憶装置で既にシステム機能の一部となっている。この場合、メタデータは、オーディオビジュアル情報を受信する受信機内で生成することもできる。例としては、パーソナルビデオレコーダー（PVR）、パーソナルデジタルレコーダー（PDR）、セットトップボックス（STB）、DVDビデオレコーダー（DVD-VR）、ハードディスク装置（HDD）レコーダー、HiFiシステム（MP3変換、インターネットラジオ）、セキュリティ／モニタリングシステム、及び、他の多様な固定機器またはモバイル機器などが挙げられる。これらのシステム全てに対して、上述の思想に基くコンテンツ分析を適用し得る。本発明は必ずしも音声とビデオの双方の処理実行に適用する必要は無く、ビデオ情報のみに対して、あるいは、音声情報のみに対して適用することもできる。
【００２０】
本発明は、以下のように要約できる。
【００２１】
記憶媒体の価格が急激に低下したことで、ユーザは以前と比較してより多くのデータをより速く保存できるようになった。近い将来、記憶媒体は、ユーザが驚く程のデータ量を格納できるようになると予想される。情報量が膨大になると、後の検索のために、ユーザ自身が手動でマルチメディアコンテンツに対してインデックスを付けることは不可能と考えられる。ユーザをサポートするツールが必要である。これらのアルゴリズムの不都合な点は、処理負荷が非常に大きく、一般消費者向けの記憶装置としては不適切である点である。本発明は、圧縮処理等のマルチメディアコンテンツの処理中に使用できる処理パラメータを用いてコンテンツにインデックスを付す装置を提供する。データ圧縮は、殆ど全てのマルチメディアコンテンツを格納する前に行われる。
【図面の簡単な説明】
【００２２】
【図１】本発明による装置の実施例を示す図である。
【図１】
2004537780.tif 000003
【国際公開パンフレット】
2004537780.tif 000004
2004537780.tif 000005
2004537780.tif 000006
2004537780.tif 000007
2004537780.tif 000008
2004537780.tif 000009
2004537780.tif 000010
2004537780.tif 000011
【国際公開パンフレット（コレクトバージョン）】
2004537780.tif 000012
2004537780.tif 000013
【国際調査報告】
2004537780.tif 000014
2004537780.tif 000015
2004537780.tif 000016