(57)【要約】  オーディオ信号及びプリセット情報を受信する段階と、該プリセット情報から、オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクスを取得する段階と、該プリセットマトリクスを用いて前記オブジェクトの出力レベルを調節する段階と、を含むことを特徴とするオーディオ信号の処理方法が開示される。これによれば、それぞれのオブジェクトに対するユーザの設定なしに、既に設定されたプリセットメタデータを参考にしてオーディオ信号に適用するプリセットメタデータを選択し、選択されたプリセットメタデータと対応するプリセットレンダリングデータを用いて、オーディオ信号に含まれたオブジェクトのレベルを容易に調節することができる。【選択図】図２
2011510589.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも一つのオブジェクトを含むオーディオ信号及びプリセット情報を受信する段階と、
前記プリセット情報から、前記オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクスを取得する段階と、
前記プリセットマトリクスを用いて、前記出力チャネルに従い前記オブジェクトの出力レベルを調節する段階と、
出力レベルの調節された前記オブジェクトを含むオーディオ信号を出力する段階と、
を含み、
前記プリセット情報は、該プリセット情報が存在することを表すプリセット存在情報、及び該プリセット情報の個数を表すプリセット個数情報に基づいて取得され、
前記プリセットマトリクスは、前記プリセット情報がマトリクスで表現されていることを表すプリセットタイプ情報に基づいて取得されることを特徴とするオーディオ信号処理方法。
【請求項２】
前記プリセットマトリクスは、前記出力チャネルがモノ、ステレオ及びマルチチャネルのうち一つであることを表す出力チャネル情報に基づいて取得されることを特徴とする、請求項１に記載のオーディオ信号処理方法。
【請求項３】
前記プリセットタイプ情報は、１ビットで表現されることを特徴とする、請求項２に記載のオーディオ信号処理方法。
【請求項４】
前記プリセットマトリクスの次元は、前記オブジェクトの個数及び前記出力チャネルの個数に基づいて決定されることを特徴とする、請求項１に記載のオーディオ信号処理方法。
【請求項５】
少なくとも一つのオブジェクトを含むオーディオ信号を受信するオーディオ信号受信部と、
プリセット情報からプリセットメタデータを受信するプリセットメタデータ受信部と、
前記プリセット情報から、前記オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクスを取得するプリセットレンダリングデータ受信部と、
前記プリセットマトリクスを用いて、前記出力チャネルに従い前記オブジェクトの出力レベルを調節するオブジェクト調節部と、
出力レベルの調節された前記オブジェクトを含むオーディオ信号を出力する出力部と、
を含み、
前記プリセットマトリクスは、前記プリセット情報がマトリクスで表現されていることを表すプリセットタイプ情報に基づいて取得されることを特徴とするオーディオ信号処理装置。
【請求項６】
前記プリセットレンダリングデータ受信部は、前記出力チャネルがモノ、ステレオ及びマルチチャネルのうち一つであることを表す出力チャネル情報に基づいて前記プリセットマトリクスを取得することを特徴とする、請求項５に記載のオーディオ信号処理装置。
【請求項７】
前記プリセットタイプ情報は、１ビットで表現されることを特徴とする、請求項６に記載のオーディオ信号処理装置。
【請求項８】
前記プリセットマトリクスの次元は、前記オブジェクトの個数及び前記出力チャネルの個数に基づいて決定されることを特徴とする、請求項５に記載のオーディオ信号処理装置。
【請求項９】
デジタルオーディオデータを記憶し、コンピュータで読み取り可能な記憶媒体であって、
前記デジタルオーディオデータは、少なくとも一つのオブジェクトを含むオーディオ信号及びプリセット情報を含み、
前記プリセット情報は、前記プリセット情報を表現するプリセットメタデータ、前記プリセット情報が存在することを表すプリセット存在情報、前記プリセット情報の個数を表すプリセット個数情報、前記オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクス及び前記プリセット情報がマトリクスで表現されていることを表すプリセットタイプ情報を含み、
前記プリセット情報は、前記プリセット存在情報及び前記プリセット個数情報に基づいて取得され、
前記プリセットマトリクスは、前記プリセットタイプ情報に基づいて取得されることを特徴とする記憶媒体。
【請求項１０】
前記プリセットマトリクスは、前記出力チャネルがモノ、ステレオ及びマルチチャネルのうち一つであることを表す出力チャネル情報に基づいて取得されることを特徴とする、請求項９に記載の記憶媒体。
【請求項１１】
前記プリセットタイプ情報は、１ビットで表現されることを特徴とする、請求項１０に記載の記憶媒体。
【請求項１２】
前記プリセットマトリクスの次元は、前記オブジェクトの個数及び前記出力チャネルの個数に基づいて決定されることを特徴とする、請求項９に記載の記憶媒体。
【請求項１３】
少なくとも一つのオブジェクトをダウンミックスしてオーディオ信号を生成するオーディオ信号生成部と、
プリセット情報のプリセットメタデータを生成するメタデータ生成部と、
前記オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクス及び前記プリセット情報がマトリクスで表現されていることを表すプリセットタイプ情報を生成するプリセットレンダリングデータ生成部と、
を含むことを特徴とするオーディオ信号処理装置。
【請求項１４】
前記プリセットレンダリングデータ生成部は、前記出力チャネルがモノ、ステレオ及びマルチチャネルのうち一つであることを表す出力チャネル情報をさらに生成することを特徴とする、請求項１３に記載のオーディオ信号処理装置。
【請求項１５】
少なくとも一つのオブジェクトをダウンミックスしてオーディオ信号を生成する段階と、
プリセット情報の存在有無を表すプリセット存在情報を生成する段階と、
前記プリセット情報の個数を表すプリセット個数情報を生成する段階と、
前記プリセット情報を表現するプリセットメタデータを生成する段階と、
前記オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクスを生成する段階と、
前記プリセット情報がマトリクスで表現されていることを表すプリセットタイプ情報を生成する段階と、
を含むことを特徴とするオーディオ信号処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、オーディオ信号の処理方法及び装置に関連し、より詳細には、オーディオ信号を処理するための装置とその方法に関連する。本発明は、広範囲のアプリケーションに適合するが、デジタル媒体、放送信号などで受信されたオーディオ信号の処理に特に適合する。
【背景技術】
【０００２】
一般的に、複数個のオブジェクトを含むオーディオ信号を、モノまたはステレオ信号にダウンミックスしてダウンミックス信号を生成する過程において、オブジェクトからパラメータ（情報）が抽出される。それらのパラメータ（情報）は、ダウンミックスされた信号をデコーディングする過程で用いられ、オブジェクトのパニング（panning）とゲイン（gain）は、ユーザの選択によって制御することができる。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
しかし、ダウンミックス信号に含まれているオブジェクトは、ユーザの選択によって適切に調節しなければならない。ユーザがオブジェクトを制御する場合は、直接オブジェクトを制御しなければならず、不便であり、専門家によって制御してもらう場合に比べて、複数のオブジェクトを含むオーディオ信号を、環境に応じて最適の状態として再現することは困難である。
【課題を解決するための手段】
【０００４】
従って、本発明は、関連する技術の制限と不利点に伴う１つ以上の問題点を実質的に取り除くためのオーディオ信号を処理する装置、及びその方法を対象とする。
【０００５】
本発明の目的は、プリセットメタデータ及びプリセットレンダリングデータを含むプリセット情報を用いて、オーディオ信号に含まれたオブジェクトを調節することができるオーディオ信号処理方法及び装置を提供することにある。
【０００６】
本発明の他の目的は、プリセットレンダリングデータタイプがマトリクスである場合、オーディオ信号の出力チャネル情報に基づいてプリセットレンダリングデータを決定しオーディオ信号に適用することによって、出力チャネルにおけるオブジェクトのレベルを調節するオーディオ信号処理方法及び装置を提供することにある。
【０００７】
また、本発明のさらに他の目的は、オブジェクトを調節するプリセットレンダリングマトリクスを、エンコーダから伝送されたモノタイプ・プリセットレンダリングマトリクスまたはゲイン情報から段階的に生成するオーディオ信号処理方法及び装置を提供することにある。
【０００８】
本発明の更なる特徴と利点は、以下の明細書内で説明され、一部は明細書から明らかとなり、又は本発明の実施により知ることができる。本発明の目的とその他の利点は、明細書の記載、請求の範囲、添付図面内で具体的に示される構成により実現、及び達成される。
【０００９】
上記目的を達成するために、本発明によるオーディオ信号処理方法は、少なくとも一つのオブジェクトを含むオーディオ信号及びプリセット情報を受信する段階と、前記プリセット情報からプリセットマトリクスを取得する段階であって、前記プリセットマトリクスが、前記オブジェクトの出力チャネルに対する寄与の程度（contribution degree）を表すものである段階と、前記プリセットマトリクスを用いて、出力チャネルによって前記オブジェクトの出力レベルを調節する段階と、前記出力レベルの調節されたオブジェクトを含むオーディオ信号を出力する段階と、を含み、前記プリセット情報は、前記プリセット情報が含まれたか否かを表すプリセット存在情報及び前記プリセット情報の個数を表すプリセット個数情報に基づいて取得され、前記プリセットマトリクスは、前記プリセット情報がマトリクスで表現されたか否かを表すプリセットタイプ情報に基づいて取得されることを特徴とする。
【００１０】
本発明によれば、前記プリセットマトリクスは、前記出力チャネルがモノ、ステレオ及びマルチチャネルのうち一つであることを表す出力チャネル情報に基づいて取得されることを特徴とする。
【００１１】
本発明によれば、前記プリセットタイプ情報は、１ビットで表現されることを特徴とする。
【００１２】
本発明によれば、前記プリセットマトリクスの次元は、前記オブジェクトの個数及び前記出力チャネルの個数に基づいて決定されることを特徴とする。
【００１３】
本発明の他の側面によるオーディオ信号処理装置によれば、少なくとも一つのオブジェクトを含むオーディオ信号を受信するオーディオ信号受信部と、プリセット情報のプリセットメタデータを取得するプリセットメタデータ受信部と、前記オブジェクトの出力チャネルに対する寄与の程度を表すプリセットマトリクスを取得するプリセットレンダリングデータ受信部であって、前記プリセットレンダリングデータ受信部は、前記プリセットメタデータに対応する前記プリセットマトリクスであるプリセットレンダリングデータ受信部と、前記プリセットメタデータを表示するディスプレイ部と、前記プリセットメタデータのうち一つを選択する信号を受信する入力部と、前記選択されたプリセットメタデータに対応する前記プリセットマトリクスを用いて、出力チャネルによって前記オブジェクトの出力レベルを調節するオブジェクト調節部と、前記出力レベルの調節されたオブジェクトを含むオーディオ信号を出力する出力部と、を含むことを特徴とする。本発明によれば、前記出力部が、前記オーディオ信号を出力する場合、前記ディスプレイ部は、前記選択されたプリセットメタデータを表示することを特徴とする。
【００１４】
本発明によれば、前記ディスプレイ部は、前記オブジェクトの出力レベルをさらに表示することを特徴とする。
【００１５】
本発明によれば、前記プリセットマトリクスは、前記出力チャネルがモノ、ステレオ及びマルチチャネルのうち一つであることを表す出力チャネル情報に基づいて取得されることを特徴とする。
【００１６】
本発明によれば、前記プリセット情報は、前記プリセット情報の個数を表すプリセット個数情報に基づいて取得され、前記プリセットマトリクスは、前記プリセット情報がマトリクスで表現されたか否かを表すプリセットタイプ情報に基づいて取得されることを特徴とする。
【００１７】
本発明によれば、前記プリセット情報は、前記オブジェクトに適用される前記プリセットマトリクスの存在有無を表すプリセットオブジェクト適用情報をさらに含むことを特徴とする。
【００１８】
本発明によれば、前記ディスプレイ部は、前記プリセットオブジェクト適用情報に基づいて、前記オブジェクトに適用される前記プリセットマトリクスが存在するか否かをさらに表示することを特徴とする。
【００１９】
本発明によれば、前記ディスプレイ部は、前記プリセットメタデータをテキスト形態で表現することを特徴とする。
【００２０】
当然のことであるが、前記の一般的な記載と以下の詳細な説明の両方は、典型例、及び説明であり、請求項に記載される本発明の更なる説明を提供することを目的としている。
【発明の効果】
【００２１】
本発明は、下記のような効果及び利点を提供する。
【００２２】
第一に、オブジェクトに対するユーザの設定なしに、既に設定されたプリセット情報のうち一つを選択することによって容易にオブジェクトの出力チャネルのレベルを調節することができる。
【００２３】
第二に、プリセット情報を表現するプリセットメタデータを、メタデータの長さを示すプリセット長さ情報に基づいてテキスト形態で表現することによって、余分のコーディングを減らすことができる。
【００２４】
第三に、プリセットレンダリングデータのタイプがマトリクスである場合、オーディオ信号の出力チャネル情報に基づいて、プリセットレンダリングデータを示すプリセットマトリクスを決定することによって、オブジェクトの出力チャネルのレベルをより正確で効率的に調節することができる。
【００２５】
第四に、プリセットマトリクスを段階的に生成することによって、エンコーダから伝送されるビット率を減少させることができる。
【００２６】
第五に、複数個のオブジェクトのうち一部のオブジェクトのみを調節できるプリセットマトリクスを用いることによって、余分のコーディングを減少させることができる。
【００２７】
本発明の更なる理解を提供するために添付され、組み込まれ、及び本明細書の一部を構成する図面は、本発明の実施例を説明し、明細書と共に、本発明の原理を説明する。
【図面の簡単な説明】
【００２８】
【図１】本発明の実施例によるオーディオ信号に含まれたオブジェクトに適用されるプリセット情報の概念図である。
【図２】本発明の実施例によるオーディオ信号処理装置を示す図である。
【図３】本発明の実施例によるオーディオ信号処理装置におけるプリセット情報受信部を示す図である。
【図４】本発明の実施例によるオーディオ信号処理方法を示すフローチャートである。
【図５】本発明の実施例によるシンタックス（syntax）を示す図である。
【図６】本発明の他の実施例によるシンタックスを示す図である。
【図７】本発明のさらに他の実施例によるシンタックスを示す図である。
【図８】本発明のさらに他の実施例によるプリセットレンダリングデータ受信部を示す図である。
【図９】本発明のさらに他の実施例によるシンタックスを示す図である。
【図１０】本発明のさらに他の実施例によるオーディオ信号処理装置を示す図である。
【図１１】本発明の実施例によるプリセット情報受信部が具現された製品の概略的な構成を示す図である。
【図１２】図１１に示す製品に該当する端末及びサーバー間の関係を示す図である。
【図１３】本発明の実施例によるプリセット情報受信部が具現されたデジタルＴＶの概略的な構成を示す図である。
【図１４】本発明の一実施例によるプリセット情報受信部を含む製品のディスプレイ部を示す図である。
【発明を実施するための形態】
【００２９】
以下、添付の図面を参照しつつ、本発明の好ましい実施例について詳細に説明する。本明細書及び請求の範囲に使われた用語や単語は、通常的または辞書的な意味に限定して解析してはならず、発明者は自身の発明を最善の方法で説明するために用語の概念を適切に定義することができるという原則に立って、本発明の技術的思想に符合する意味及び概念として解釈しなければならない。したがって、本明細書に記載された実施例と図面に示された構成は、本発明の最も好ましい一実施例に過ぎないもので、本発明の技術的思想を全部代弁するものではないので、本出願時点においてこれらに代替可能な様々な均等物及び変形例がありうることが理解される。
【００３０】
特に、本明細書で、情報（information）は、値（values）、パラメータ（parameters）、係数（coefficients）、成分（elements）などを総称する用語と解釈され、オブジェクト（object）は、ギター（guitar）、ボーカル（vocal）、ピアノ（piano）等を含め、オーディオ信号を構成するソース（source）信号のそれぞれを示すものと解釈される。これらの意味は場合によって異なって解釈され、これらによって発明が限定されることはない。
【００３１】
本発明は、複数個のオブジェクトを含むオーディオ信号をデコーディングする方法において、これらオブジェクトを調節するための既に設定された情報のうち一つを用いることによって当該オーディオ信号を効果的にデコーディングする方法を提供する。
【００３２】
図１は、本発明の実施例による、オーディオ信号に含まれたオブジェクトに適用されるプリセット情報の概念図である。本明細書では、オブジェクトを調節するための既に設定された情報をプリセット情報（preset information）とする。プリセット情報は、オーディオ信号の特性または聴取環境によって選択しうる様々なモードを表すことができ、複数個とすることができる。また、プリセット情報は、プリセット情報の属性などを表現するためのメタデータ（metadata）と、オブジェクトを調節するために適用されるレンダリングデータ（rendering data）とを含む。メタデータは、テキスト形態で表示することができ、プリセット情報の属性（例えば、コンサートホールモード、カラオケモード、ニュースモード等）を表す他に、プリセット情報の作成者、作成日、適用されるプリセット情報を有するオブジェクト名などとして、当該プリセット情報を表すための関連情報を含むことができる。一方、レンダリングデータは、実質的にオブジェクトに適用されるデータであり、様々な形態を有することができ、特にマトリクス形態を有することができる。
【００３３】
図１を参照すると、プリセット情報１（preset 1）は、音楽信号をコンサートホールで聞くような音場感を提供するコンサートホールモード（concert hall mode）とすることができ、プリセット情報２（preset 2）は、オーディオ信号のうちボーカル（vocal）オブジェクトのレベルを減少させたカラオケモード（karaoke mode）とすることができ、プリセット情報ｎ（preset n）は、音声オブジェクトのレベルを増加させたニュースモード（news mode）とすることができる。また、プリセット情報２（preset 2）は、メタデータ２とレンダリングデータ２を含む。仮に、ユーザからプリセット情報２が選択されると、メタデータ２であるカラオケモード（karaoke mode）がディスプレイ部内で実現され、メタデータ２に関するレンダリングデータ２がオブジェクトに適用されてレベルを調節することができる。
【００３４】
この時、レンダリングデータがマトリクス形態であれば、レンダリングデータは、モノマトリクス（mono matrix）、ステレオマトリクス（stereo matrix）、マルチチャネルマトリクス（multi-channel matrix）を含むことができる。モノマトリクスは、オブジェクトの出力チャネルがモノである場合に適用されるレンダリングデータであり、ステレオマトリクスは、オブジェクトの出力チャネルがステレオである場合に適用されるレンダリングデータであり、マルチチャネルマトリクスは、オブジェクトの出力チャネルがマルチチャネルである場合に適用されるレンダリングデータである。オブジェクトの出力チャネルが決定されると、該決定された出力チャネルを用いてマトリクスが決定される。その後、該マトリクスをオブジェクトに適用してレベルを調節することができる。
【００３５】
このように、プリセット情報に含まれたメタデータ及びレンダリングデータを用いて当該オブジェクトを調節し、適用されたプリセット情報の属性または特徴を表現することによって、ユーザの所望する効果を有するオーディオ信号を効率的に提供することが可能になる。
【００３６】
図２は、本発明の実施例によるオーディオ信号処理装置２００を示す図である。
【００３７】
図２を参照すると、本発明の実施例によるオーディオ信号処理装置２００は、プリセット情報生成部２１０、プリセット情報受信部２２０、オブジェクト調節部２３０を含むことができる。
【００３８】
プリセット情報生成部２１０は、オーディオ信号に含まれたオブジェクトを調節するためのプリセット情報を生成するもので、メタデータ生成部２１２及びプリセットレンダリングデータ生成部２１４を含むことができる。メタデータ生成部２１２は、プリセット情報を表現するテキスト情報を受信してプリセットメタデータ（preset metadata）を生成することができる。このプリセットメタデータは、上記の通り、プリセット情報の特性または属性を表現するための情報でありうる。この時、メタデータ生成部２１２は、プリセットメタデータの文字長さの数を表すプリセット長さ情報（preset length information）をさらに生成することができる。このプリセット長さ情報は、バイト（byte）で表すことができるが、これに限定されることはない。
【００３９】
一方、オブジェクトのレベルを調節するためのゲイン及びオブジェクトのパニング（panning）のための情報が、プリセットレンダリングデータ生成部２１４に入力される場合、当該オブジェクトに適用されるプリセットレンダリングデータ（preset rendering data）を生成することができる。プリセットレンダリングデータは、オブジェクトごとに生成することができ、様々なタイプにすることができ、例えば、マトリクス形態などで具現されたプリセットマトリクス（preset matrix）とすることができる。また、プリセットレンダリングデータ生成部２１４は、プリセットレンダリングデータがマトリクス形態とされているかを表すプリセットタイプ情報（preset_type_flag）をさらに生成することができる。また、オブジェクトの出力チャネルが何本かを表す出力チャネル情報（output channel information）をさらに生成することもできる。
【００４０】
メタデータ生成部２１２で生成されたプリセット長さ情報及びプリセットメタデータと、プリセットレンダリングデータ生成部２１４で生成されたプリセットタイプ情報、出力チャネル情報、及びプリセットレンダリングデータは、一つのビットストリームに含めて伝送することができ、特に、オーディオ信号を含むビットストリームの補助領域（ancillary region）に含めて伝送することができる。
【００４１】
一方、プリセット情報生成部２１０は、プリセット長さ情報、プリセットメタデータ、プリセットタイプ情報、出力チャネル情報、及びプリセットレンダリングデータがビットストリームに含まれていることを表すプリセット存在情報（preset exist information）をさらに生成することができる。このプリセット存在情報は、プリセット情報に関する情報がどの領域に含まれているかを表すコンテナタイプ（container type）にしても良く、フラグタイプ（flag type）にしても良いが、これに限定されない。
【００４２】
また、プリセット情報生成部２１０は、複数個のプリセット情報を生成することができ、それぞれのプリセット情報は、プリセット長さ情報、プリセットメタデータ、プリセットタイプ情報、出力チャネル情報、及びプリセットレンダリングデータを含む。ここで、プリセット情報生成部２１０は、プリセット情報の個数を表すプリセット個数情報（preset number information）をさらに生成することができる。
【００４３】
プリセット情報受信部２２０は、プリセット情報生成部２１０で生成されて伝送されたプリセット情報を受信するもので、メタデータ受信部２２２及びプリセットレンダリングデータ受信部２２４を含むことができる。
【００４４】
メタデータ受信部２２２は、プリセットメタデータを受信して出力し、プリセットレンダリングデータ受信部２２４は、プリセットレンダリングデータ（例えば、プリセットマトリクス）を受信する。これについての詳細は、図３及び図４を参照して後述される。
【００４５】
オブジェクト調節部２３０は、複数個のオブジェクトを含むオーディオ信号と、プリセットレンダリングデータ受信部２２４で生成されたプリセットレンダリングデータとを受信する。このプリセットレンダリングデータは、オブジェクトに適用されてオブジェクトのレベルを調節したり、オブジェクトの位置を調節したりすることができる。
【００４６】
図３は、本発明のオーディオ信号処理装置２００のプリセット情報受信部２２０に含まれるメタデータ受信部３１０及びプリセットレンダリングデータ受信部３２０の概略的な構成を示す図である。
【００４７】
メタデータ受信部３１０は、プリセット長さ情報受信部３１２及びプリセットメタデータ受信部３１４を含む。プリセット長さ情報受信部３１２は、プリセット情報を表現するためのプリセットメタデータの長さを表すプリセット長さ情報（preset length information）を受信し、該プリセットメタデータの長さを得る。以降、プリセットメタデータ受信部３１４は、プリセット長さ情報が表す長さ分のビットストリームを読んで当該プリセットメタデータを受信する。また、プリセットメタデータ受信部３１４は、プリセット情報の種類または属性がわかるメタデータであるプリセットメタデータを、テキスト形式に変換して出力する。
【００４８】
プリセットレンダリングデータ受信部３２０は、プリセットタイプフラグ受信部３２２、出力チャネル情報受信部３２４、及びプリセットマトリクス受信部３２６を含む。プリセットデータタイプフラグ受信部３２２は、プリセットレンダリングデータがマトリクス形態なのかを表すプリセットタイプフラグ（preset_type_flag）を受信し、プリセットタイプフラグの意味は、下記の表１の通りである。
【００４９】
【表１】
2011510589.tif 000003
【００５０】
プリセットタイプフラグが、プリセットレンダリングデータのタイプがマトリクスである場合を表すならば、出力チャネル情報受信部３２４は、オーディオ信号に含まれたオブジェクトが何本の出力チャネルで再生されるかを表す出力チャネル情報を受信する。この出力チャネル情報は、モノチャネル、ステレオチャネル、またはマルチチャネル（５．１チャネル）を含むことができるが、これに限定されない。
【００５１】
プリセットマトリクス受信部３２６は、出力チャネル情報に基づいて、該オブジェクトの出力チャネルに対する寄与の程度を表し、プリセットメタデータに対応するプリセットマトリクスを受信し、出力する。この場合、プリセットマトリクスは、モノプリセットマトリクス、ステレオプリセットマトリクスまたはマルチチャネルプリセットマトリクスのうち一つであり、このプリセットマトリクスの次元は、オブジェクトの数及び出力チャネルの数に基づいて決定することができ、プリセットマトリクスは、（オブジェクトの数）＊（出力チャネルの数）の形態を有することができる。例えば、オーディオ信号に含まれたオブジェクトがｎ個であり、出力チャネル情報受信部３２４からの出力チャネルが５．１チャネル、すなわち、６個のチャネルである場合、プリセットマトリクス受信部３２６は、ｎ＊６の形態で具現された下記の等式１のプリセットマルチチャネルマトリクスを出力することができる。
【００５２】
【数１】
2011510589.tif 000004
【００５３】
ここで、マトリクス成分（ｍa,b)は、ａ番目のオブジェクトがｂ番目のチャネルに含まれる程度を表すゲイン値である。その後、このプリセットマルチチャネルマトリクスはオーディオ信号に適用され、該当のオブジェクトのレベルを調節することができる。
【００５４】
このように、本発明のプリセット情報受信部２２０は、プリセット長さ情報を用いて必要な分のビットストリームを読んで、効率的にプリセットメタデータを表現し、プリセットマトリクスを出力チャネル情報に基づいて取得することによって、オーディオ信号に含まれたオブジェクトのゲインなどを効果的に調節することができる。
【００５５】
図４は、本発明の実施例によるオーディオ信号処理方法を示すフローチャートである。
【００５６】
図４を参照すると、少なくとも１つのオブジェクトを含むオーディオ信号を受信する（Ｓ４１０）。また、オブジェクトのゲインまたはパニングなどを調節するために、既に設定されたプリセット情報が存在するか否かを表すプリセット存在情報（preset exist information）を受信し（Ｓ４１５）、プリセット情報が存在する場合、既に設定されたプリセット情報が何個（ｎ）かを表すプリセット個数情報を受信する（Ｓ４２０）。このプリセット個数情報は、プリセット情報が存在することを仮定しているので、（実際存在するプリセット個数）−１個で表現することができる。その後、プリセット情報を表現するためのメタデータが何ビット（または、バイト）を有するかを表すプリセット長さ情報を受信する（Ｓ４３０）。受信されたプリセット長さ情報に基づいてプリセットメタデータを受信し（Ｓ４３５）、例えば、カラオケモード、コンサートホールモード、ニュースモードなどを出力する（Ｓ４３７）。プリセットメタデータはテキスト形態とすることができ、上記の通り、プリセット情報の音場効果を表現するメタデータの他にも、プリセット作成者、作成日、プリセット情報で調節されたオブジェクト名などを開示するメタデータとすることもできるが、これに限定されない。
【００５７】
続いて、プリセット情報に含まれたプリセットレンダリングデータのタイプを表すプリセットタイプ情報を受信する（Ｓ４４０）。プリセットタイプ情報に基づいてプリセットデータのタイプがマトリクスなのか否かを判断し（Ｓ４４５）、マトリクスであると（Ｓ４４５のYes）、オブジェクトの出力チャネルが何本かを表す出力チャネル情報を受信する（Ｓ４５０）。エンコーディングされたプリセットマトリクスの中から、出力チャネル情報に基づいて該当するプリセットマトリクスを受信する（Ｓ４５５）。例えば、オブジェクトの出力チャネルがステレオである場合、受信されたプリセットマトリクスは、（オブジェクトの数）＊２の形態を有するステレオプリセットマトリクスになりうる。
【００５８】
上記の段階で受信されたプリセット長さ情報、プリセットメタデータ、プリセットタイプ情報、出力チャネル情報、及びプリセットマトリクスを含むプリセット情報（ｉ番目）が、プリセット個数情報が表すプリセット情報の個数（ｎ）よりも小さいか判断する（Ｓ４６０）。仮に、プリセット個数情報よりも小さい場合（Ｓ４６０のYes）、Ｓ４３０段階に戻り、次のプリセット情報（ｉ＋１番目）のプリセット長さ情報を受信する段階を反復する。仮に、プリセット個数情報と同一の場合（Ｓ４６０のNo）、プリセットマトリクスをオーディオ信号に適用してオブジェクトのレベルを調節する（Ｓ４６５）。一方、プリセットタイプがマトリクスでない場合（Ｓ４４５のNo）、エンコーダで設定されたマトリクス以外の形式で具現されたプリセットデータを受信し（Ｓ４５７）、受信されたプリセットデータをオーディオ信号に適用してオブジェクトのレベルを調節する（Ｓ４６８）。その後、調節されたオブジェクトを含むオーディオ信号を出力することができる。
【００５９】
プリセットマトリクスを適用してオブジェクトを調節する段階（Ｓ４６５）は、ユーザの選択によって決定されたプリセットマトリクスを用いることができる（図示せず）。ユーザは、プリセットメタデータを出力する段階（Ｓ４３７）で出力されたプリセットメタデータを参考して、所望のプリセット情報を選択することができる。例えば、ユーザが、プリセットメタデータのうち、カラオケモードと表現されたメタデータを選択する場合、出力チャネル情報に基づいて受信されたプリセットマトリクス（Ｓ４５５）のうち、カラオケモードであるプリセットメタデータに対応するプリセットマトリクスが選択される。その後、選択されたカラオケモードに対応するプリセットマトリクスがオーディオ信号に適用されることでオブジェクトのレベルを調節し、調節されたオブジェクトを含むオーディオ信号が出力される。
【００６０】
図５は、本発明の一実施例によるオーディオ信号処理方法を示すシンタックス（syntax）を表現したものである。
【００６１】
図５を参照すると、プリセット情報に関する情報は、ビットストリームのヘッダー（header）領域に存在することができる。ビットストリームのヘッダー領域からプリセット個数情報（bsNumPresets）を得ることができる。
【００６２】
プリセット個数情報が存在する場合（if(bsNumPresets)）、プリセット個数情報が表すプリセット情報の個数を取得する（numPresets=bsNumPresets+1）。例えば、プリセット個数情報は、プリセット情報が１個存在する場合、bsNumPresetsを０に設定できる。この場合、プリセット情報の実際の個数は、（プリセット個数情報）＋１と認識され、使用される。まず、プリセット個数情報をビットストリームから受信することができる。
【００６３】
また、プリセット個数情報に基づいてプリセット情報（ｉ番目のプリセット情報）ごとにプリセットレンダリングデータのタイプを表す情報を得ることができる（bsPresetType[i]）。仮に、プリセットレンダリングデータをマトリクスタイプで伝送する場合を特定プリセットタイプと定義する場合（マトリクスタイプである時、bsPresetType[i]が伝送される場合）、プリセットレンダリングデータのタイプを表す情報は、プリセットレンダリングデータがマトリクスタイプで生成されて伝送されたかを表す上記プリセットタイプ情報（preset_type_flag）でありうる。プリセットタイプ情報は、１ビットで表現することができる。
【００６４】
また、ｉ番目のプリセット情報に含まれたプリセットレンダリングデータがマトリクスタイプである場合（bsPresetType[i]）、出力チャネルが何本のチャネルを有するかを表す出力チャネル情報（bsPresetCh[i]）を取得し、出力チャネル情報に基づいて、オーディオ信号に含まれたオブジェクトのレベルを調節するためのプリセットマトリクスを取得する（getRenderingMatrix()）。
【００６５】
図６は、本発明の他の実施例によるオーディオ信号処理方法を示すシンタックス（syntax）を表現したものである。プリセット情報は、ヘッダー領域に含まれて、全てのフレームで同一に適用されることができるが、時間によって可変（以下、‘時変（time-variable）’という。）して適用されることによって、オブジェクトのレベルを効果的に調節することができる。プリセット情報が時変する場合には、フレームごとにプリセット情報に関する情報が含まれなければならない。したがって、プリセット情報がフレームごとに含まれたか否かを表す情報をヘッダーに含めることによって、効果的にビットストリームを構成することができる。
【００６６】
図６を参照すると、プリセット情報がフレームごとに含まれたか否かを表現するシンタックスが示される。図５に示すオーディオ信号の処理方法を示すシンタックス（syntax）と略同様であり、ただし、出力チャネル情報（bsPresetCh[i]）を取得した後、プリセット情報が時間的に可変して、すなわち、フレームごとに含まれたか否かを表すプリセット時変フラグ情報（bsPresetTimeVarying[i]）を含むことができる。このプリセット時変フラグ情報がビットストリームのヘッダー領域に含まれた場合、ビットストリームのフレーム領域に含まれたプリセットマトリクス及びプリセットメタデータを用いてオブジェクトのレベルを調節する。プリセット時変フラグ情報がヘッダーに存在する場合、フレームごとにプリセット情報の更新があるか否かを判断し、更新がない場合はそのまま（keep）利用し、更新がある場合は、読み込み（read）などの別のフラグを含めて効率的にビットストリームを構成することも可能である。
【００６７】
また、ビットストリームにプリセット情報が含まれているか否かを表すプリセット存在情報（bsPresetExtsts）を含むことができる。仮に、プリセット存在情報が、プリセット情報がビットストリームに含まれていないと表す場合は、プリセット個数情報（bsNumPresets）、プリセットタイプ情報（bsPresetType[i]）、出力チャネル情報（bsPresetCh[i]）、及びプリセット時変フラグ情報（bsPresetTimeVarying[i]）を取得するループ（loop）を行わなくて済む。このプリセット存在情報は、場合によってはシンタックス構文で省略可能である。
【００６８】
図７は、本発明のさらに他の実施例によるオーディオ信号処理方法を示すシンタックスを表現したものである。上記のプリセットマトリクスは、（オブジェクトの数）＊（出力チャネルの数）の形態を有するマトリクスであり、オブジェクトの出力チャネルに対する寄与の程度を表す。この場合、上記オブジェクトのうちの一部オブジェクトに関する情報のみを受信して用いる方が、伝送されるビット数を減少させる側面で効率的であるといえる。したがって、本発明のさらに他の実施例では、プリセット情報を用いて所望のオブジェクトのみを調節するオーディオ信号処理方法のシンタックスを提案する。
【００６９】
図７を参照すると、オブジェクトのそれぞれに対してオブジェクトのレベルを調節するためのプリセット情報が適用されるか否かを表すプリセットオブジェクト適用情報（bsPresetObject[i][j]）をシンタックスにさらに含むことができる。プリセットオブジェクト適用情報を用いることによって、プリセット情報が該当のオブジェクトに関する情報を含んでいるか否かを知らせることが可能になる。プリセットオブジェクト適用情報は、ビットストリームのヘッダー領域に存在しても良く、図６に示すように、プリセット情報が時変する場合には、フレームに存在しても良い。図７に示すように、各オブジェクトに対して、プリセット情報に該当のオブジェクトに関する情報を含むか否かを知らせることもでき、含むか否かを表すオブジェクトインデックスをビットストリームに含めることもできる。仮に、オブジェクトインデックスを用いる場合には、終了文字（exit character）を使ってより便利にビットストリームを構成することができる。
【００７０】
ハフマンテーブル（Huffman table）などを用いてロスレスコーディング（lossless coding）において符号化を行う場合、終了文字は、実際のパラメータの数よりもテーブルを１だけ大きく設計し、さらに割り当てられたパラメータを終了パラメータと定義することができる。この時、終了パラメータがビットストリームから取得されると、該当の情報を全部受信したと定義して用いることができる。例えば、プリセット情報が、総１０個のオブジェクトうち２個のオブジェクトに関する情報のみを含む場合（３番オブジェクト及び８番オブジェクトに関する情報）は、３番オブジェクト及び８番オブジェクトに該当するハフマンインデックスと終了パラメータに該当するハフマンインデックスを順に伝送することによって効果的にビットストリームを構成することができる。
【００７１】
図８は、本発明のさらに他の実施例であるプリセットマトリクスを段階的に生成するプリセットレンダリングデータ受信部の概略的な構成を示す図である。
【００７２】
図８を参照すると、プリセットレンダリングデータ受信部３２０は、プリセットタイプフラグ受信部３２２、出力チャネル情報受信部３２４、及びプリセットマトリクス決定部３２６を含む。その他の構成要素は、図２及び図３のプリセットレンダリングデータ受信部２２４，３２０と同じ構成及び効果を有するので、その詳細な説明は省略する。
【００７３】
一方、図８に示すように、プリセットマトリクス決定部３２６は、モノタイプ・プリセットマトリクス受信部８１０、ステレオタイプ・プリセットマトリクス生成部８２０、及びマルチチャネルタイプ・プリセットマトリクス生成部８３０を含む。
【００７４】
モノタイプ・プリセットマトリクス受信部８１０は、プリセット情報生成部（図示せず）から、（オブジェクトの数）形態のマトリクスで表現されるモノプリセットマトリクスを受信する。仮に、出力チャネル情報受信部３２４から受信された出力チャネル情報がモノである場合、モノプリセットマトリクスはそのまま出力され、オーディオ信号に適用されてオブジェクトのレベルを調節することができる。
【００７５】
一方、出力チャネル情報がステレオである場合には、ステレオタイプ・プリセットマトリクス生成部８２０にモノプリセットマトリクスが入力され、チャネル拡張情報をさらに受信して、（オブジェクトの数）＊２形態のステレオプリセットマトリクスを生成する。仮に、出力チャネル情報がマルチチャネルを表す場合には、ステレオプリセットマトリクスと多チャネル拡張情報がマルチチャネルタイプ・プリセットマトリクス生成部８３０に入力され、（オブジェクトの数）＊６の形態を有するマルチチャネルプリセットマトリクスを生成する。
【００７６】
このように、エンコーダでモノプリセットマトリクスのみを生成し、チャネル拡張情報を用いてプリセットマトリクス決定部３２６で段階的にプリセットマトリクスを生成することによって、再生環境がステレオのみに限定される場合、伝送されるビット数を節約することができ、ステレオまたはマルチチャネルのためのプリセットマトリクスを重複して伝送しなくて済む。
【００７７】
また、本発明のさらに他の実施例によるオーディオ信号処理方法は、プリセット情報を伝送する際に、ゲイン値を伝送し、必要に応じて、正規化したプリセットマトリクスを伝送する方法を提案する。これは、オーディオ信号に含まれたオブジェクトを調節するためにゲインのみを必要とする場合には、ゲイン値のみを伝送し、容易にプリセットマトリクス全体を伝送する方法として拡張することができる。例えば、上記の等式１のようなプリセットマトリクスを伝送するためには、ｎ＊６個のゲイン情報をまず伝送しなければならない。このゲイン情報は、下記の等式２で計算することができる
【００７８】
【数２】
2011510589.tif 000005
【００７９】
ここで、ｉはオブジェクト、ｊは出力チャネル、ｎＣＨは出力チャネルの数を表す。Ｇiはオブジェクトの数だけ存在するので、一つのプリセット情報に対してｎ個が必要とされる。
【００８０】
ゲイン情報に加えてパニング情報を必要とする場合、正規化したプリセットマトリクス（normalized preset matrix）をさらに用いる。この正規化したプリセットマトリクスは、下記の等式３のように定義することができる。
【００８１】
【数３】
2011510589.tif 000006
【００８２】
【表２】
2011510589.tif 000007
【００８３】
図９は、上記のプリセット情報にゲイン情報とパニングに関する情報を別途に含めて伝送する場合のシンタックスを表現したものである。このようなゲイン情報及びパニング情報は、ヘッダー領域またはフレーム領域に含めることができる。
【００８４】
図９を参照すると、イタリック体で表現された部分は、実際プリセット情報値をビットストリームから受信するものである。様々なノイズレスコーディング方式（noiseless coding scheme）を利用することができ、図９では関数として表現した。例えば、フレーム領域にそれらの情報が存在する場合、プリセット情報が存在するか否かを判断し、存在する場合にプリセット個数情報を受信する。その後、まず、ゲイン情報を受信し、この情報は、該当のオブジェクトをどのゲイン値で再生するかを表す。この場合、ゲイン情報は、上記のＧ＿ｉであっても良く、外部入力値によってオーディオ信号のレベルが調節された場合に生成される任意ダウンミックスゲイン（arbitrary downmix gain）（以下、ＡＤＧとする）であっても良い。
【００８５】
さらに取得されるパニング情報は、様々な形態でありうる。このパニング情報は、上記の正規化したプリセットマトリクスであっても良く、ステレオパニング情報及びマルチチャネルパニング情報に区分されていても良い。
【００８６】
図１０は、本発明のさらに他の実施例によるオーディオ信号処理装置を示す図である。
【００８７】
図１０を参照すると、本発明の別の実施例によるオーディオ信号処理装置は、主に、ダウンミキシング部１０１０、オブジェクト情報生成部１０２０、プリセット情報生成部１０３０、ダウンミックス信号処理部１０４０、情報処理部１０５０、及びマルチチャネルデコーディング部１０６０を含む。
【００８８】
まず、複数個のオブジェクトは、ダウンミキシング部１０１０に入力されて、モノまたはステレオダウンミックス信号として生成される。また、複数個のオブジェクトは、オブジェクト情報生成部１０２０に入力されて、オブジェクトのレベルを表すオブジェクトレベル情報（object level information）、ダウンミックス信号に含まれるオブジェクトのゲイン値及び／またはステレオダウンミックス信号の場合に、ダウンミックスチャネルに含まれるオブジェクトの程度を表すオブジェクトゲイン情報（object gain information）、オブジェクト間の関連有無を表すオブジェクト相関情報（object correlation information）を含むオブジェクト情報（object information）を生成する。
【００８９】
その後、ダウンミックス信号及びオブジェクト情報は、プリセット情報生成部１０３０に入力されて、オブジェクトのレベルを調節するためのプリセットレンダリングデータとプリセット情報を表現するためのプリセットメタデータとを含むプリセット情報を生成する。このプリセットレンダリングデータ及びプリセットメタデータが生成される過程は、図１乃至図９のオーディオ信号処理装置及び方法で説明した通りであるから、その詳細な説明は省略する。オブジェクト情報生成部１０２０で生成されたオブジェクト情報とプリセット情報生成部１０３０で生成されたプリセット情報は、ＳＡＯＣビットストリームに含めて伝送することができる。
【００９０】
情報処理部１０５０は、オブジェクト情報処理部１０５１及びプリセット情報受信部１０５２を含み、ＳＡＯＣビットストリームを受信する。
【００９１】
プリセット情報受信部１０５２は、ＳＡＯＣビットストリームから上記のプリセット存在情報、プリセット個数情報、プリセット長さ情報、プリセットメタデータ、プリセットタイプ情報、出力チャネル情報、及びプリセットマトリクスを受信し、その他図１乃至図９のオーディオ信号処理方法及び装置で説明された様々な実施例による方法を用いる。プリセット情報受信部１０５２は、プリセットメタデータとプリセットマトリクスを出力し、オブジェクト情報処理部１０５１はこれらを受信して、ＳＡＯＣビットストリームに含まれたオブジェクト情報と一緒に用いて、ダウンミックス信号を前処理（pre-processing）するためのダウンミックス処理情報（downmix processing information）とダウンミックス信号をアップミキシングするためのマルチチャネル情報（multi-channel information）を生成する。
【００９２】
その後、ダウンミックス処理情報は、ダウンミックス信号処理部１０４０に入力されて、ダウンミックス信号に含まれたオブジェクトのパニングを行うことができる。このように前処理されたダウンミックス信号は、情報処理部１０５０から出力されたマルチチャネル情報と一緒にマルチチャネルデコーディング部１０６０に入力されてアップミキシングされることで、マルチチャネルオーディオ信号を生成することができる。
【００９３】
このように、本発明のオーディオ信号処理装置は、複数個のオブジェクトを含むオーディオ信号を、オブジェクト情報を用いてマルチチャネル信号にデコーディングする際に、既に設定されたプリセット情報を用いることによって、容易にオブジェクトのレベルを調節することができる。また、この時、オブジェクトに適用されるプリセットマトリクスは、出力チャネル情報に基づいて受信されたマトリクス形態のデータを用いることによってオブジェクトのレベル調節を効果的に行い、エンコーダ端から伝送されるプリセット長さ情報に基づいてプリセット情報を表現するためのプリセットメタデータを出力することによってコーディング効率を高めることができる。
【００９４】
図１１は、本発明の一実施例によるメタデータ受信部及びプリセットレンダリングデータ受信部を含むプリセット情報受信部が具現された製品の概略的な構成を示す図であり、図１２は、本発明の実施例によるプリセット情報受信部が具現された製品間の関係を示す図である。
【００９５】
図１１を参照すると、有線／無線通信部１１１０は、有線／無線通信方式を通じてビットストリームを受信する。特に、有線／無線通信部１１１０は、有線通信部１１１１、赤外線通信部１１１２、ブルートゥース１１１３、無線ＬＡＮ通信部１１１４のうち、一つ以上を含むことができる。
【００９６】
ユーザ認証部１１２０は、ユーザ情報を受信してユーザ認証を行うもので、指紋認識部１１２１、虹彩認識部１１２２、顔面認識部１１２３、及び音声認識部１１２４のうち一つ以上を含むことができ、それぞれは、指紋、虹彩情報、顔面輪郭情報、音声情報を受信してユーザ情報に変換し、ユーザ情報及び既存に登録されているユーザデータとの一致有無を判断して、ユーザ認証を行うことができる。
【００９７】
入力部１１３０は、ユーザが各種の命令を入力するための入力装置であり、キーパッド部１１３１、タッチパッド部１１３２、リモコン部１１３３のうち一つ以上を含むことができるが、本発明はこれに限定されない。一方、後述するメタデータ受信部１１４１から出力される複数個のプリセット情報に対するプリセットメタデータが、ディスプレイ部１１６２を通じて画面に視覚化される場合に、入力部１１３０を介してユーザがプリセットメタデータを選択でき、選択されたプリセットメタデータに関する情報が制御部１１５０に入力される。
【００９８】
信号デコーディング部１１４０は、メタデータ受信部１１４１及びプリセットレンダリングデータ受信部１１４２を含む。メタデータ受信部１１４１は、プリセット長さ情報を受信し、これに基づいてプリセットメタデータを受信する。また、プリセットレンダリングデータ受信部１１４２は、プリセットタイプ情報によってプリセット情報がマトリクスと表現された場合、出力チャネル情報を受信し、これに基づいてプリセットレンダリングデータであるプリセットマトリクスを受信する。信号デコーディング部１１４０は、受信したビットストリーム、プリセットメタデータ、及びプリセットマトリクスを用いてオーディオ信号をデコーディングして出力信号を生成し、当該プリセットメタデータをテキストの形態で出力する。
【００９９】
制御部１１５０は、入力装置から入力信号を受信し、信号デコーディング部１１４０と出力部１１６０のプロセス全般を制御する。上記の通り、制御部１１５０に入力部１１３０から選択されたプリセットメタデータに関する情報が入力される場合、プリセットレンダリングデータ受信部１１４２は、選択されたプリセットメタデータに対応するプリセットマトリクスを受信し、これを用いてオーディオ信号をデコーディングする。
【０１００】
出力部１１６０は、信号デコーディング部１１４０により生成された出力信号などが出力される構成要素であり、スピーカー部１１６１及びディスプレイ部１１６２を含むことができる。出力信号がオーディオ信号の場合、出力信号はスピーカー部１１６１から出力され、ビデオ信号の場合、出力信号はディスプレイ部１１６２から出力される。また、制御部１１５０から入力されたプリセットメタデータをディスプレイ部１１６２を通じて画面に視覚化する。
【０１０１】
図１２は、図１１に示す製品に該当する端末及びサーバー間の関係を示す図である。
【０１０２】
図１２の（Ａ）を参照すると、第１端末１２１０及び第２端末１２２０は互いに有線／無線通信部を通じてデータやビットストリームを両方向に通信できることがわかる。
【０１０３】
図１２の（Ｂ）を参照すると、サーバー１２３０及び第１端末１２４０も同様、互いに有線／無線通信を行うことがわかる。
【０１０４】
図１３は、本発明の一実施例によるメタデータ受信部及びプリセットレンダリングデータ受信部を含むプリセット情報受信部が具現された放送信号デコーディング装置１３００の概略的な構成を示す図である。
【０１０５】
図１３を参照すると、デマルチプレクサ１３２０は、チューナー１３１０からＴＶ放送と関連したデータを受信する。受信されたデータはデマルチプレクサ１３２０で分離され、データデコーダ１３３０でデコーディングされる。一方、デマルチプレクサ１３２０で分離されたデータは、ＨＤＤのような記憶媒体１３５０に記憶されることができる。デマルチプレクサ１３２０で分離されたデータは、オーディオデコーダ１３４１及びビデオデコーダ１３４２を含むデコーダ１３４０に入力されて、オーディオ信号及びビデオ信号がデコーディングされる。オーディオデコーダ１３４１は、本発明の一実施例によるメタデータ受信部１３４１Ａ及びプリセットレンダリングデータ受信部１３４１Ｂを含み、メタデータ受信部１３４１Ａは、プリセット長さ情報を受信し、これに基づいてプリセットメタデータを受信する。また、プリセットレンダリングデータ受信部１３４１Ｂは、プリセットタイプ情報によってプリセット情報がマトリクスと表現された場合、出力チャネル情報を受信し、これに基づいてプリセットレンダリングデータであるプリセットマトリクスを受信する。オーディオデコーダ１３４１は、受信したビットストリーム、プリセットメタデータ、及びプリセットマトリクスを用いてオーディオ信号をデコーディングして出力信号を生成し、該プリセットメタデータをテキスト形態で出力する。
【０１０６】
ディスプレイ部１３７０は、ビデオデコーダ１３４２から出力されたビデオ信号とオーディオデコーダ１３４１から出力されたプリセットメタデータを画面に視覚化する。また、ディスプレイ部１３７０は、スピーカー部（図示せず）を含み、オーディオデコーダ１３４１から出力されるオブジェクトのレベルがプリセットマトリクスを用いて調節されたオーディオ信号を、ディスプレイ部１３７０に含まれたスピーカー部から出力する。また、デコーダ１３４０でデコーディングされたデータは、ＨＤＤのような記憶媒体１３５０に記憶することができる。
【０１０７】
一方、信号デコーディング装置１３００は、ユーザから情報を受信して、受信されたデータを制御できるアプリケーションマネージャー１３６０をさらに含むことができる。
【０１０８】
アプリケーションマネージャー１３６０は、ユーザインターフェースマネージャー１３６１及びサービスマネージャー１３６２を含む。ユーザインターフェースマネージャー１３６１は、ユーザから情報を受信するためのインターフェース（interface）を制御する。例えば、ディスプレイ部１３７０に視覚化されるテキストの書体、画面の明るさ、メニュー構成などを制御することができる。一方、サービスマネージャー１３６２は、デコーダ１３４０及びディスプレイ部１３７０で放送信号をデコーディングして出力する場合、受信する放送信号を、ユーザから入力される情報を用いて制御することができる。例えば、放送チャネルの設定、アラーム機能設定、成人認証機能などを提供することができる。アプリケーションマネージャー１３６０から出力されるデータは、デコーダ１３４０の他に、ディスプレイ部１３７０にも伝送して用いることができる。
【０１０９】
図１４は、本発明の一実施例によるプリセット情報受信部を含む製品のディスプレイ部を示す図である。ディスプレイ部は、ビットストリームに含まれた全てのプリセットメタデータを視覚化することができる。例えば、図１４に示すように、カラオケモード、コンサートホールモード、及びニュースモードが画面上に全て視覚化される。
【０１１０】
これらのプリセットメタデータのうち一つをユーザが選択する場合、ディスプレイ部は、カラオケモードに対応するプリセットマトリクスが複数個のオブジェクトに適用されることによって、レベルの調節されたオブジェクトを画面に視覚化する。例えば、ユーザがカラオケモードを選択する場合、ボーカルオブジェクトのレベルが最低に設定されたものが視覚化されることができる。また、ユーザがニュースモードを選択する場合には、オーディオ信号に適用されるプリセットマトリクスは、ボーカルオブジェクト以外のオブジェクトのレベルを減少させることとなる。
【０１１１】
図１４を参照すると、ニュースモードが選択された場合、ディスプレイ部は、ボーカルオブジェクトのレベルが、カラオケモード時におけるボーカルオブジェクトのレベルよりも増加し、その他オブジェクトのレベルは最低に設定されたものが視覚化される。
【０１１２】
したがって、ディスプレイ部にプリセット情報を表現するプリセットメタデータの他、プリセットマトリクスによって調節されたオブジェクトのレベルを視覚化することによって、ユーザは、所望のプリセットモードを適切に選択し、所望の音場感を有するオーディオ信号を聴取することが可能になる。
【産業上の利用可能性】
【０１１３】
本発明は、オーディオ信号のエンコーディング及びデコーディングに適用することができる。
【０１１４】
以上のように、本発明はたとえ限定された実施例及び図面によって説明されたが、本発明は、それらに限定されず、本発明の属する技術分野における通常の知識を有する者にとっては、本発明の技術思想と添付の特許請求の範囲及びその均等範囲内で様々な修正及び変形が可能であることは明らかである。
【図１】
2011510589.tif 000008
【図２】
2011510589.tif 000009
【図３】
2011510589.tif 000010
【図４】
2011510589.tif 000011
【図５】
2011510589.tif 000012
【図６】
2011510589.tif 000013
【図７】
2011510589.tif 000014
【図８】
2011510589.tif 000015
【図９】
2011510589.tif 000016
【図１０】
2011510589.tif 000017
【図１１】
2011510589.tif 000018
【図１２】
2011510589.tif 000019
【図１３】
2011510589.tif 000020
【図１４】
2011510589.tif 000021
【国際調査報告】
2011510589.tif 000022
2011510589.tif 000023