知っておきたいキーワード
第14回

Keywords you should know.

MPEG-7

越 後 富 夫†
†大阪電気通信大学 情報通信工学部 情報工学科 教授"MPEG-7" by Tomio Echigo (Professor, Department of Engineering Informatics, Faculty of Information and Communication Engineering,Osaka Electro-Communication University, Osaka)
キーワード：マルチメディアコンテンツ，メタデータ，XML，ダイジェスト視聴

MPEG-7の概要

グコンテンツにも適用可能になっていています．しかし，将来的にすべてのます（図1）．

コンテンツにメタデータを付与するに画像・音楽・映像などのマルチメデ

MPEG-7は記述方式を定めています

は，メタデータ生成技術の大きな技術ィアコンテンツは，めざましい勢いでが，そのデータ抽出方法には言及せず，革新が必要とされています．MPEG-7増え続けています．衛星・地上波の放効率的な処理方法の実現は制作側の課は，現在の技術で可能な内容検索を実送型映像だけでなく，インターネット題としています．現状では，マルチメ現し，技術進歩とともに検索の効率化の投稿映像も人気を呼び，見たいコンディアコンテンツそのものの特徴を表を進める，現在と未来の技術の橋渡しテンツに到達するための検索技術が視現するデータ，例えば，画像におけるとなる重要な役割を担っています．

聴者にとって重要になっています．一色・テクスチャ特徴のメタデータは，MPEG-7の利用によって，個人の嗜好方，コンテンツの要約や再利用は，繰画像処理で自動化することが現実的でに沿ったコンテンツのダイジェスト返し利用が促進されることから，制作すが，一方で，映像における意味を表を，複数の格納場所から受信し，どこ者に大きな利益となる可能性が広がり現するメタデータは，自動認識するこにいても，どんな端末からでも視聴でます．大量のコンテンツから，そのすとが非常に困難なため，人手で入力しきる環境がまもなく登場します（図1）．

べてまたは一部を効率良くアクセスするには，コンテンツ記述方式の統一が放送映像有効なことから，MPEG-7（ISO/IEC

インデックス

1 5 9 3 8 ）と し て 標 準 化 さ れ ま し た ．

さまざまな種類のマルチメ
ディアコンテンツの格納場所・内容を整理する．

検索要求

MPEG-7は，Multimedia Content
Description Interfaceが正式名称にな

高画質視聴っているように，特定のアプリケーション形態を想定していません．例えばライブ中継等の実時間型，クライアンビデオ
ダイジェスト視聴
音楽コンテンツサーバ

トの要求に応じてサーバがコンテンツ個人嗜好に基づく要約を要求を供給するPull型，サーバがクライアントへ一方的にコンテンツを供給するPush型等のすべてに対応する規格になっています．さらに，コンテンツ，要約生成

メタデータの保存場所，取り扱い形態を規定していないので，従来のアナロ
176 （50）

図1 MPEG-7メタデータによって広がる視聴形態

映像情報メディア学会誌 Vol. 61, No. 2, pp. 176〜178（2007）

知っておきたいキーワード

MPEG-7標準文書

MPEG-7

コンテンツ組織化ツール

MPEG-7が標準化対象としたのは次メディア関連単一の特徴を記述するための基本ツールで特徴の表記方法（Syntax）とその意味（Semantics）を規定します．
（2）記 述 ス キ ー ム（ D e s c r i p t i o n
Scheme: DS）

構

コンテンツ
管理ツール
コンテンツ
記述ツール

造モデル
ナビゲーションおよびアクセスツール

制作関連の項目です．
（1）記述子（Descriptor: D）

集合体

利用形態

要約

ユーザ操作
関連ツール

ユーザ嗜好

ビュー
ユーザ利用履歴
意味内容

派生コンテンツ

基本要素
スキーマ定義ツール

基本データ型

リンク&メディア
位置参照

基本ツール

複数の記述ツール間の構造，意味的
図2 目的別に分類したMDSの各種スキーム関係を規定した枠組みを持ち，記述子と同様に表記方法と意味を規定します．なお記述スキームを構成する記述加規定しています．また，DDLの基礎てのツールを本パートで規定していまツール要素として，記述子や下記デーとなるXML Schemaの仕様概要も紹す．図2に，目的別に分類したMDSのタ型，他の記述スキームの構造を表し介しています．

各種スキームを示します．MDSを用ます．

パート3：Visual（ISO/IEC 15938-3）

いることで映像も書籍同様に作者・作（3）データ型（Data type）

映像コンテンツに対する記述子（D）

成日などの著作権に関する情報である

記述子あるいは記述スキームの構成および記述スキーム（DS）を規定してコンテンツ管理情報，目次，索引，あ部品として使われるツールを規定しまいます．具体的には，色，形状，模様，らすじに相当するコンテンツ記述情報

す．例として，行列の表現形式，時刻動き，画像内における部分指定を記述を記述することができます．さらに重の表現形式があります．

するためのツールの他，グリッド分割

要な部分だけのハイライトを示すため（4）記 述 定 義 言 語（ D e s c r i p t i o n

されたイメージにおいて，各グリッドのスキーム，ユーザ嗜好や利用履歴のDefinition Language: DDL）単位での特徴記述を可能としたツー記述のためのスキームを提供していま

記述子および記述スキームの表記方

ル，3次元物体をさまざまな角度からす．それらは大別して，以下の6項目法を規定するための言語です．World

見た場合の特徴記述を可能としたツーに分類されます．

Wide Web Consortium（W3C）で標ル，ビデオにおける各特徴データの時（1）基本要素（Basic elements）

準化策定されたスキーマ言語XML間分布を，特徴データの並びあるいはMPEG-7スキーマ定義ツール，行列，Schemaをベースに，マルチメディア補間によって記述可能としたツールな

メディア時間などの追加データ型，メコンテンツの特徴記述の際に必要となどを規定しています．

ディアへのロケータツールの他，テキる，各種データ型などを追加すること

パート4：Audio（ISO/IEC 15938-4）

スト注釈記述ツール（自由書式型，構で，記述定義言語を規定します．

音声コンテンツに対する記述子（D）

造化テキスト型），人（組織），場所，MPEG-7の具体的な内容を構成するおよび記述スキーム（DS）を規定して時間を記述するためのツール，コンテ

ISO/IEC標準文書は，以下のような11います．具体的には，パワー波形，パンツへの視聴者の感性を記述するためのパートからなっています．

ワースペクトラム，ピッチ，音色，無のツールを規定しています．これらの音領域などの低レベル特徴を記述する

多くは他の記述スキーム（DS）への構

パート1：S y s t e m s（ I S O / I E C
15938-1）

ための共通フレームワークの他，楽器成要素として用いられるデータ型です．

MPEG-7使用アプリケーションにおの音色の違いを記述可能としたツー（2）コンテンツ管理ツール

ける標準的な端末モデルの他，ル，音声コンテンツの分類に関するツ（Content Management）

MPEG-7メタデータのアクセス単位にール，音声認識等で用いられる音素のマルチメディアコンテンツのタイト関する規定，および，MPEG-7メタデ生起確率情報の記述などを可能としたルや制作者など制作に関する情報記ータのバイナリフォーマット（BiM）にツール，旋律の記述を可能としたツー

述，コンテンツの記録メディアに関す関する規定の詳細を記載しています．

ルなどを規定しています．

る情報記述，コンテンツの使用方法・

パート2：Description Definition

パート5：Multimedia Description

L a n g u a g e（ I S O / I E C

S c h e m e（ I S O / I E Cのツールを規定しています．

15938-2）

15938-5）（3）コ ン テ ン ツ 記 述 ツ ー ル

W3Cが策定したXML Schemaに対マルチメディアコンテンツの特徴記

するMPEG-7拡張として，ベクトルお述に必要なツールのうち先のパート3

よび行列データ型，時間データ型を追およびパート4に直接含まれないすべ

使用形態などに関する情報記述のため（Content Description）
マルチメディアコンテンツの構造を記述するツールや，コンテンツの（51） 177

知っておきたいキーワード

MPEG-7MPEG-7が対象とする多くのアプリケ抽出方法や記述データの利用事例など定しています．

ーションにおいて重要となることかの参考情報を記載しています．

（4）ナビゲーションおよびアクセス

ら，MPEG-7規格の一部として規定さ意味内容を記述するツールを規ツール（Navigation & Access）
マルチメディアコンテンツの要約記

パート9：Profiles and Levels

れました．

（ISO/IEC 15938-9）

パート6：Reference Software（ISO/IEC 15938-6）

述ツール，時空間あるいは周波数領域使用する記述ツール，記述データの型を宣言するプロファイルとレベルのなどにおけるコンテンツのさまざまな

パート3からパート5で規定された記述方法を規定します．シンプルメタ

見え方を記述するツール，コンテンツ

各種記述子（D），記述スキーム（DS），データプロファイル（SMP），ユーザのさまざまな形態（バリエーション）および，BiM符号化/複号化ツールの記述プロファイル（UDP），コア記述プを記述するツールを規定しています．

実装例を，これらを用いた基本的なアロファイル（CDP）を規定しています．

（5）コンテンツ組織化ツール

プリケーションシナリオに基づく参照（Content Organization）

ソ フ ト ウ ェ ア X M（ e X p e r i m e n t a l

マルチメディアコンテンツあるいはメタデータの集合体および，そのモデ全パートを横断するスキーマ定義を

パート7：Conformance Testing

パート11：MPEG-7 Profile Schemas

スト手法などを記載しています．

（User Interaction）
ユーザ嗜好および視聴履歴を記述す

MPEG-7 Descriptions

れらは，マルチメディアコンテンツの（ISO/IEC 15938-8）

記述を直接の対象としたものではあり

MPEG-7が規定した各ツールに関しませんが，この種の情報記述は，て，記述データを生成するための特徴

次に，MPEG-7準拠メタデー
タの実際の記述例を図3に紹介します．XML定義文書に従うことを示すため，<Mpeg7>...
</Mpeg7>でくくります．ファイル名J-MLB.mpgの映像コンテンツがURIで示す場所に格納され，コンテンツは音声を含む映像であることが記述されています．コンテンツは時間分割されたセグメントとして記述されており（Temporal</AudioVisual></MultimediaContne></Decription>

Decomposition），スタート時</Mpeg7>間とその長さで表す時間区間に，自由形態の注釈が記述さ

図3 MPEG-7記述データの一例

れています．

文

マを記述しています．

<Mpeg7 xmlns="urn:mpeg:mpeg7:schema:2001"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instanceﾓ xml:lang="en" type="complete"><Description xsi:type="ContentEntityType"><MultimediaContent xsi:type="AudioVisualType"><AudioVisual><MediaLocator><MediaUri>http://www.tmp.co.jp/video/J-MLB.mpg</MediUri></MediaLocator><TextAnnotation><FreeTextAnnotation>日本人メジャーリーガー</FreeTextAnnotation></TextAnnotation><TemporalDecomposition><AudioVisualSegment id="ボストン対シアトル1"><MediaTime><MediaTimePoint>PT0S</MediaTimePoint><MediaDuration>PT75S</MediaDuration></MediaTime><TextAnnotation><FreeTextAnnotation>初対決，イチロー対松坂</FreeTextAnnotation></TextAnnotation></AudioVisualSegment><AudioVisualSegment id="ボストン対シアトル2">．．．．．．．．

メタデータ記述例

考パート9で規定したプロファイル
SMP，UDP，CDPに対応するスキー

パート8：Extraction and Use ofるためのツールを規定しています．こ参（ISO/IEC 15938-11）

ン，MPEG-7準拠を検証するためのテ（6）ユーザ操作関連ツール

献1）國枝孝之，脇田由喜，高橋望： MPEG-7と映像検索 ，CQ出版（2004）
2）JoséM. Martínez："MPEG-7 Overview", ISO/IEC JTC1/SC29/WG11

178 （52）

記載しています．

（ISO/IEC 15938-7）
MPEG-7の使用に関するガイドライます．

Definition（ISO/IEC 15938-10）

Model）として紹介しています．

リングを記述するツールを規定していN6828（2004）

パート10：Schema

え ち ごと み お

越後富夫

2003年，大阪大学大学院基礎工学研
究科博士後期課程修了．1982年，日本アイ・ビー・エム（株）入社．東京基礎研究所にて，ロボットビジョン，映像メディア処理の研究に従事．2003年，大阪大学産業科学研究所客員教授．医用画像診断支援の研究に従事．2006年，大阪電気通信大学教授．博士（工学）．

映像情報メディア学会誌 Vol. 61, No. 2（2007）