(57)【要約】【課題】  画像コンテンツの著作権保護と、高品質の画像をユーザに見せて、画像コンテンツの販売を促進したい。【解決手段】  画像符号化装置１００において、符号部１０、１２、１４、１６、１８は、動画像データを符号化する。品質情報付加部１８は、時間経過とともに品質が変化しながら表示されるよう、所定の設定値を符号化した動画像データに付加する。この設定値は、動画像の解像度、画質、およびフレームレートの少なくとも一つを段階的に低下させるものであってもよい。【選択図】  図１
2006229661.tif 000002
【特許請求の範囲】
【請求項１】
所定の設定値に応じて、時間経過とともに品質を変化させながら、動画像を表示することを特徴とする画像表示方法。
【請求項２】
前記設定値は、前記動画像の解像度、画質、およびフレームレートの少なくとも一つを段階的に低下させるものであることを特徴とする請求項１に記載の画像表示方法。
【請求項３】
前記設定値は、前記動画像の輝度、および色差の少なくとも一つを段階的に低下させるものであることを特徴とする請求項１に記載の画像表示方法。
【請求項４】
前記設定値は、前記動画像の表示領域を段階的に狭くするものであることを特徴とする請求項１から３のいずれかに記載の画像表示方法。
【請求項５】
前記動画像の表示領域外に、所定の広告を表示することを特徴とする請求項４に記載の画像表示方法。
【請求項６】
ユーザの所定のアクションに応じて、前記設定値を固定することを特徴とする請求項１から５のいずれかに記載の画像表示方法。
【請求項７】
動画像データを符号化する符号部と、
時間経過とともに品質が変化しながら表示されるよう、符号化した動画像データに所定の設定値を付加する付加部と、
を備えることを特徴とする画像符号化装置。
【請求項８】
時間経過とともに品質が変化しながら表示されるよう、動画像データを符号化する符号部と、
前記品質を変化させるための設定値を前記符号部に与える品質設定部と、
を備えることを特徴とする画像符号化装置。
【請求項９】
前記設定値は、前記動画像の解像度、画質、およびフレームレートの少なくとも一つを段階的に低下させるものであることを特徴とする請求項７または８に記載の画像符号化装置。
【請求項１０】
前記設定値は、前記動画像の輝度、および色差の少なくとも一つを段階的に低下させるものであることを特徴とする請求項７から９のいずれかに記載の画像符号化装置。
【請求項１１】
前記設定値は、前記動画像の表示領域を段階的に狭くするものであることを特徴とする請求項７から１０のいずれかに記載の画像符号化装置。
【請求項１２】
符号化された動画像データを復号する復号部と、
時間経過とともに品質が変化するよう設定された設定値を前記復号部に与える品質設定部と、を備え、
前記復号部は、前記設定値に応じて、前記品質を変化させながら復号することを特徴とする画像復号装置。
【請求項１３】
所定の設定値に応じて、時間経過とともに品質を変化させながら、動画像を表示することを特徴とする画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンテンツ配信などにより取得された動画像の再生に利用可能な画像表示方法、画像符号化装置、画像復号装置、および画像表示装置に関する。
【背景技術】
【０００２】
近年、ＤＶＤメディア、デジタル放送、およびネットワークを介したオンデマンド通信といったようなインフラの普及に伴い、デジタルコンテンツの利用が拡大している。デジタルコンテンツはコピーにより品質劣化が起こらないため、その著作権管理が重要になる。デジタルコンテンツなどの著作物の著作権を正当に保護することへの要求は、今後もさらに高まっていくと思われる。
【０００３】
画像の著作権を保護するために、特許文献１は、コンテンツ利用者に応じて、情報再生の許可度合い（以下、プロテクトレベルという。）を段階的に設定し、再生する技術を開示する。すなわち、プロテクトレベルの高い人には、高品質の動画像を配布し、低い人には品質を落とした動画像を配布する。
【０００４】
また、上述したようなインフラの普及に伴い、画像コンテンツ提供業者の数も増大し、競争が激化してきている。これらの業者は、著作権保護の重要性を認識しつつも、画像コンテンツの販売拡大にしのぎを削っている。また、広告収入を主な収入源とする画像コンテンツ提供業者も、提供しているコンテンツの利用者数増大を目指している。
【特許文献１】特開平９−１６３３０６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
上記特許文献１では、プロテクトレベルの低い人は、低品質の動画像を視聴することになり、本来の高品質の画像を視聴することができない。低品質の動画像では、プロテクトレベルの低い人にそのコンテンツを印象づけることが難しい。したがって、そのコンテンツの宣伝効果は余り期待できるものではなく、コンテンツの購入やコンテンツ配信サービスへの加入を促進するに、十分なものではなかった。
【０００６】
本発明はこうした状況に鑑みてなされたものであり、その目的は、画像コンテンツの著作権保護と利用促進とを両立することができる画像表示方法、画像符号化装置、画像復号装置、および画像表示装置を提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明のある態様の画像表示方法は、所定の設定値に応じて、時間経過とともに品質を変化させながら、動画像を表示する。「品質」は、劣化させてもよい。この態様によると、画像提供側が高品質および低品質の画像をユーザに見せることができることから、画像コンテンツの著作権保護を図りつつ、高品質の画像を印象づけることができる。
【０００８】
設定値は、動画像の解像度、画質、およびフレームレートの少なくとも一つを段階的に低下させるものであってもよい。また、動画像の輝度、および色差の少なくとも一つを段階的に低下させるものであってもよい。また、動画像の表示領域を段階的に狭くするものであってもよい。「表示領域」を狭くするとは、表示する画像自体のサイズを小さくしていってもよく、「段階的」とは、動画像の品質状態が３以上変化することを含んでもよい。画像自体のサイズを変化させずに見える領域を小さくしていってもよい。この態様によると、ユーザに見せる画像の品質を調整することができ、品質を低下させると、著作権を保護することができる。
【０００９】
動画像の表示領域外に、所定の広告を表示してもよい。この態様によると、画像提供側は、広告の機会や収入源を得ることができる。
【００１０】
ユーザの所定のアクションに応じて、設定値を固定してもよい。「所定のアクション」には、料金を支払う旨の法律的な意思表示を画像提供側に示すためのデータ送信であってもよい。「設定値」を通常再生時の値に固定してもよい。この態様によれば、著作権管理の解除を対価の取得に関連づけることができ、画像コンテンツの販売などを促進することができる。
【００１１】
本発明の別の態様は、画像符号化装置である。この装置は、動画像データを符号化する符号部と、時間経過とともに品質が変化しながら表示されるよう、符号化した動画像データに所定の設定値を付加する付加部と、を備える。この態様によると、画像提供側が高品質および低品質の画像をユーザに見せることができることから、画像コンテンツの著作権保護を図りつつ、高品質の画像を印象づけることができる。
【００１２】
本発明のさらに別の態様もまた、画像符号化装置である。この装置は、時間経過とともに品質が変化しながら表示されるよう、動画像データを符号化する符号部と、品質を変化させるための設定値を符号部に与える品質設定部と、を備える。この態様によると、画像提供側が高品質および低品質の画像をユーザに見せることができることから、画像コンテンツの著作権保護を図りつつ、高品質の画像を印象づけることができる。また、品質を劣化させる区間を設けた場合、配布すべき符号化した画像データの容量を削減することができる。
【００１３】
本発明のさらに別の態様は、画像復号装置である。この装置は、符号化された動画像データを復号する復号部と、時間経過とともに品質が変化するよう設定された設定値を復号部に与える品質設定部と、を備える。復号部は、設定値に応じて、品質を変化させながら復号する。この態様によると、著作権管理がなされた画像コンテンツであっても、一部の区間で高品質の画像を見ることができ、ユーザによる画像コンテンツの評価をし易くすることができる。
【００１４】
本発明のさらに別の態様は、画像表示装置である。この装置は、所定の設定値に応じて、時間経過とともに品質を変化させながら、動画像を表示する。この態様によると、著作権管理がなされた画像コンテンツであっても、一部の区間で高品質の画像を見ることができ、ユーザによる画像コンテンツの評価をし易くすることができる。
【００１５】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、コンピュータプログラム、記録媒体などの間で変換したものもまた、本発明の態様として有効である。
【発明の効果】
【００１６】
本発明によれば、画像コンテンツの著作権保護と利用促進とを両立することができる。
【発明を実施するための最良の形態】
【００１７】
本発明の概要を説明すると、コンテンツの作成者または著作権者が動画像の任意の期間にて、画質やフレームレートなどのパラメータを変化させ、再生する際に品質が劣化するよう設定する。視聴者は、コンテンツ提供側に対価を支払うなど、何らかの契約を行うことによって、本来の品質で映像を視聴することができる。変化させるパラメータとしては、解像度、画質、フレームレート、および色などがある。また、表示領域を狭くしてもよい。その場合、領域外には、課金を促すメッセージや広告を挿入することができる。
【００１８】
これを実現するためのに、まず、符号側で品質を調整せずに生成した符号化画像データを復号側に配布し、復号側で品質を調整しながら動画像を表示する例を説明する。
【００１９】
（実施形態１）
図１は、実施形態１に係る画像符号化装置１００の構成図である。画像符号化装置１００の構成は、ハードウエア的には、任意のコンピュータのＣＰＵ、メモリ、その他のＬＳＩで実現でき、ソフトウエア的にはメモリのロードされた符号化機能のあるプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。
【００２０】
直交変換部１０は、入力された原画像に対して、ウェーブレット変換や離散コサイン変換などを施す。例えばウェーブレット変換をする場合、直交変換部１０は、入力された原画像をサブバンドに分割して、各サブバンド画像のウェーブレット変換係数を計算し、階層化されたウェーブレット変換係数を生成する。具体的には、直交変換部１０は、原画像のｘ、ｙそれぞれの方向においてローパスフィルタおよびハイパスフィルタを適用し、４つの周波数サブバンドへ分割してウェーブレット変換する。これらのサブバンドは、ｘ、ｙの両方向において低周波成分を有するＬＬサブバンドと、ｘ、ｙのいずれかひとつの方向において低周波成分を有し、かつもう一方の方向において高周波成分を有するＨＬおよびＬＨサブバンドと、ｘ、ｙの両方向において高周波成分を有するＨＨサブバンドである。各サブバンドの縦横の画素数は処理前の画像のそれぞれ１／２であり、一回のフィルタリングで解像度、すなわち画像サイズが１／４のサブバンド画像が得られる。
【００２１】
直交変換部１０は、こうして得られたサブバンドのうち、ＬＬサブバンドに対して再度フィルタリング処理を行って、これをさらにＬＬ、ＨＬ、ＬＨ、ＨＨの４つのサブバンドに分割してウェーブレット変換する。直交変換部１０は、このフィルタリングを所定の回数行って、原画像をサブバンド画像に階層化し、各サブバンドのウェーブレット変換係数を出力する。量子化部１２は、直交変換部１０から出力されたウェーブレット変換係数などの所定の係数を所定の量子化幅で量子化する。
【００２２】
エントロピー符号化部１４は、量子化部１２により量子化された量子化値をエントロピー符号化する。例えば、上位ビットブレーンから順にスキャンしながら符号化する。このように、エントロピー符号化部１４の符号化対象は原画像であり、画像符号化部として機能する。
【００２３】
品質情報付加部１８は、本画像符号化装置１００で符号化された符号化ストリームが復号されて、表示される際の品質を制御する情報（以下、品質情報という。）を当該符号化ストリームに付加する。この品質情報は、復号する際の解像度、画質、フレームレート、表示範囲、色差、明暗などの各種パラメータの少なくとも一つを、復号する際の時間経過に関連づけて規定する。例えば、解像度の場合、復号を開始してから５分間フル解像度で復号し、次の５分間、高周波成分を除いて復号し、次の５分間、中周波数成分および高周波成分を除いて復号するとったように、時間的に解像度を下げながら復号および表示するよう、設定することができる。そして、最終的に直流成分のみを復号、表示するようにしてもよい。この復号方法は、上述したウェーブレット変換などのＳＶＣ（Scalable Video Codec）機能を持つ符号化ストリームの復号に適している。
【００２４】
画質を制御する場合、時間経過にしたがい、複数ビットで組成されるウェーブレット変換係数や離散コサイン変換係数などの係数のうち、復号するビット数を少なくしていく。画質を劣化させていく場合、徐々に下位ビットを復号しないようにしていく。
【００２５】
表示領域の制御は、画像に注目領域（Region of Interest;ＲＯＩ）を設定することにより、実行することができる。注目領域を特定するための情報（以下、ＲＯＩ情報という。）には、位置、形状、大きさ、画質などの情報が含まれる。このＲＯＩ情報も、時間経過にしたがい、その大きさを小さくしていくなどの設定を行うことができる。その他のパラメタータを含め、品質情報の内容の詳細については後述する。
【００２６】
品質情報付加部１８は、符号化ストリームのヘッダに記述することができる。ヘッダにも種々のレベルが存在するが、いづれのレベルに記述してもよい。例えば、ストリームヘッダ、シーケンスヘッダ、ＧＯＰ（Group of Picture）ヘッダ、フレームヘッダ、ピクチャヘッダなどに品質情報を記述することができる。
【００２７】
品質情報付加部１８は、復号側からのユーザの料金支払いなどに応じて、復号側で行われる品質管理を無効とする情報を生成することができる。この情報は、後述する符号化ストリーム生成部１６にて画像の符号化データに付加されて、または独立に、ユーザ側の後述する画像復号装置に送られ、その画像復号装置による動画像の品質管理が無効にされる。
【００２８】
符号化ストリーム生成部１６は、エントロピー符号化部１４から入力される画像の符号化データ、品質情報付加部１８から品質情報の符号化データなどを基に、符号化ストリームを生成する。そして、生成した符号化ストリームをネットワークや記録媒体に出力する。
【００２９】
以上説明したように本実施形態によれば、動画像の著作権保護と利用促進とを両立する画像符号化装置を実現することができる。画像提供側は、動画像の品質を時間経過とともに劣化させることにより、著作権を保護することができる。しかも、高品質の画像を一部の区間でユーザに鑑賞させて、印象付けを行うことができ、コンテンツの販売や、コンテンツ配信サービスへの加入を促すことができる。例えば、番組の出だしを無料かつ高画質で配信することにより、視聴者を引きつけ、番組途中から徐々に品質を落としていくことにより、最後までこの番組を試聴したいという視聴者のコンテンツ購入意欲を高めることができる。
【００３０】
また、画像提供側は、視聴用と再生用の動画像データを別々に用意する必要がないため、コンテンツ作成が簡易であり、記憶領域の削減も可能となる。さらに、表示領域を狭めていく場合、余った領域を、自社または他社の広告スペースとして利用することができ、広告料収入を得ることも可能になる。
【００３１】
（実施形態２）
図２は、実施形態２に係る画像復号装置２００の構成図である。画像復号装置２００は、上述した画像符号化装置１００で符号化された符号化ストリームのような、品質情報が付加された符号化ストリームを復号する。
【００３２】
ストリーム取得部２０は、外部から符号化ストリームを取得し、ストリーム用メモリ２２に一次記憶する。ストリーム配信により送信されてくる符号化ストリームを取得してもよいし、ＤＶＤ−ＲＯＭなどの記録メディアに記録された符号化ストリームも取得してもよい。
【００３３】
ストリーム取得部２０は、後述する品質設定部３６から復号すべきストリームレベルを指定される場合、そのストリームレベルに応じて、取得した符号化ストリームの一部を破棄して可変長復号部２４に渡す。例えば、解像度を下げるために、高周波成分を破棄することができる。
【００３４】
ストリーム用メモリ２２は、ストリーム取得部２０から入力された符号化ストリームを一時的に保持する。可変長復号部２４は、ストリーム取得部２０から渡された符号化ストリームをビットプレーン毎に復号し、量子化されている画素データや各種パラメータを復号し、逆量子化部２６に出力する。フレーム間予測符号化が用いられるストリームの場合、動きベクトルも復号する。また、エントロピー符号化されているストリームの場合、エントロピー復号を行う。
【００３５】
逆量子化部２６は、入力された画素データを逆量子化し、直交逆変換部２８に出力する。後述する量子化スケール設定部３８から量子化スケールが指定される場合、その量子化スケールに基づき、逆量子化する。直交逆変換部２８は、離散コサイン変換やウェーブレット変換などで変換された画素値を元に戻す。また、フレーム間予測符号化が用いられるストリームの場合、フレーム間の対応する画素の差分値を元に戻す。直交逆変換部２８は、当該画素値などを画素値計算部３０に出力する。画素値計算部３０は、復元された画素値を画像用メモリ４２に書き込む。
【００３６】
画像用メモリ４２は、画素値計算部３０により復元された画素値を一時的に保持する。なお、画像用メモリ４２は、アドレス空間が異なるようにすれば、ストリーム用メモリ２２と同じメモリを用いてもよい。
【００３７】
参照データ指定部４０は、ＭＰＥＧなどフレーム間予測符号化が用いられるストリームの場合に必要となる。参照データ指定部４０は、可変長復号部２４から渡される動きベクトルが指し示す、画像用メモリ４２に保持された参照画像の画素値を、参照値として指定する。その場合、画素値計算部３０は、参照データ指定部４０から指定された参照値と、それに対応する直交逆変換部２８から取得した差分値を加算して、画像用メモリ４２上に画素値を復元する。また、画素値計算部３０は、品質設定部３６から輝度や色差の補正を指定されると、輝度値の補正や色差の補正を行う。
【００３８】
フレーム再構成部３２は、画素値計算部３０がフレーム単位で復元した画素値を組み合わせて、動画像データを再構成する。品質設定部３６からフレームレートが指定されると、そのフレームレートで再構築する。また、品質設定部３６から表示サイズを指定されると、画素を間引いたり、増やしたりする。表示部５０は、フレーム再構成部３２が構築した動画像データを表示する。なお、表示部５０は外付けであってもよく、その場合、画像復号装置２００は、符号化ストリームの復号を行って、ケーブルや無線などで接続された図示しない表示装置に復号データを出力することになる。
【００３９】
品質管理部３４は、外部から入力される符号化ストリームに付加された品質情報を取得する。また、上述した品質管理を無効とする情報が別途、送信されてきた場合も、それを取得する。品質管理部３４は、取得した品質情報に基づき、動画像再生の経過時間、課金状況などを管理し、当該品質情報により指定された品質を品質設定部３６に指定する。
【００４０】
品質設定部３６は、品質管理部３４から指定された品質に基づき、品質を調整するためのパラメータを各部に設定する。まず、解像度を変化させる場合、ストリーム取得部２０にストリームレベルを指定する。図３は、時間経過とともに解像度を低下させる例を示す図である。時間は図の左から右に経過する。左の画面６０は、符号化ストリーム中のすべての周波数成分を使用して復号した画面を示す。中央の画面６２は、符号化ストリーム中の高周波成分を破棄して、復号した画面を示す。右の画面６４は、符号化ストリーム中の直流成分および低周波数成分のみを使用して復号した画面を示す。このように、高周波数成分を使用しないと、解像度は低くなり、高周波成分を使用すると、解像度は高くなる。ＳＶＣ機能を持つ符号化ストリームに対しては、どの周波数成分を使用するかをストリームレベルとして指定することにより、解像度を容易に変更することができる。
【００４１】
次に、画質を変化させる場合、品質設定部３６は、量子化スケール設定部３８に量子化スケールを設定する。図４は、時間経過とともに画質を低下させる例を示す図である。左の画面７０から右の画面７４になるにしたがって、画質を低下させている。品質設定部３６は、量子化スケールが徐々に低下するよう、量子化スケール設定部３８に量子化スケールを設定する。ＪＰＥＧ２０００などのように、ＲＯＩ機能が搭載されいている場合、画面全体をＲＯＩ領域に指定し、ＲＯＩ情報を変更していってもよい。
【００４２】
次に、表示領域を変化させる場合、品質設定部３６は、量子化スケール設定部３８にＲＯＩ情報を設定する。図５は、時間経過とともに表示領域を狭める例を示す図である。左の画面８０から右の画面８４になるにしたがって、表示領域が狭くなっていく。品質設定部３６は、中央に対してＲＯＩ領域を狭くしていく。なお、ＲＯＩ領域以外は、黒くしてもよいし、図５に示すようにＣＭ領域としてもよい。ＣＭ領域に表示するロゴマークやメッセージなどの広告は、画像とともに予め符号化されてもよいし、本画像復号装置２００の画素値計算部３０で重畳されてもよい。
【００４３】
なお、図５の処理と、図３または図４の処理を組み合わせれば、中央に対して狭くなっていく領域の解像度または画質を維持しながら、その領域以外の解像度または画質を低下させていくこともできる。
【００４４】
次に、表示する画像サイズを変化させる場合、品質設定部３６は、フレーム再構成部３２に表示サイズを設定する。図６は、時間経過とともに画像を縮小する例を示す図である。左の画面９０から右の画面９４になるにしたがって、画像が縮小されていく。品質設定部３６は、品質管理部３４から指定された表示サイズが復元した動画像のサイズと同じ場合、何もする必要がない。その表示サイズが復元した動画像のサイズより小さい場合、一定の割合で画素を間引くよう、フレーム再構成部３２に設定する。また、指定された表示サイズが復元した動画像のサイズより大きい場合、隣接する画素値から計算して画素を増やす。この拡大縮小処理は、システムへの負担が大きくなる場合、ハードウェア的に専用の拡大縮小回路を設けて、処理するとよい。
【００４５】
次に、フレームレートを変化させる場合、品質設定部３６は、フレーム再構成部３２にフレームレートを指定する。図７は、時間経過とともにフレームレートを低下させる例を示す図である。なお、フレームレートとはフレームの更新頻度を示す。図７では、時間経過ともにフレームレートを低下させている。同じ期間に対して、８枚、４枚、２枚とフレームレートを低下させている。なお、フレームを更新しなければ、静止画像となり、品質設定部３６は静止画像にすることもできる。
【００４６】
次に、表示画像の明るさを変化させる場合、品質設定部３６は、画素値計算部３０に輝度の補正値を設定する。画素値計算部３０は、その補正値に応じて、元の輝度値に対して加算または減算する。加算すると明るくなり、減算すると暗くなる。
【００４７】
次に、表示画像の色を変化させる場合、品質設定部３６は、画素値計算部３０に色差の補正値を設定する。画素値計算部３０は、その補正値に応じて、色差の補正を行う。元の色差値に対して、補正後の色差値を零に近づけるように補正すると、白黒画像に近づけることができる。色差値が零になると、白黒画像になる。
【００４８】
品質設定部３６は、以上に説明したパラメータ変更の二つ以上を組み合わせて、行ってもよい。また、品質設定部３６は、品質管理を無効とする情報を受信した場合、以上に説明したパラメータを通常値に設定する。なお、動画像の再生開始のときの品質も、任意に設定することができる。また、映画のエンドロールなど、後ろの部分の画像を鮮明に表示したい場合など、用途に応じて、時間経過とともに品質を高くしていくこともできる。
【００４９】
以上説明したように本実施形態によれば、動画像の著作権保護と利用促進とを両立する画像復号装置を実現することができる。画像提供側は、動画像の品質を時間経過とともに劣化させることにより、著作権を保護することができる。しかも、高品質の画像を一部の区間でユーザに鑑賞させて、印象付けを行うことができ、コンテンツの販売や、コンテンツ配信サービスへの加入を促すことができる。また、表示領域を狭めていく場合、余った領域を、自社または他社の広告スペースとして利用することができ、広告料収入を得ることも可能になる。
【００５０】
ユーザ側は、一部の区間について、高品質の画像を鑑賞することでき、そのコンテンツを購入するか否かなどの判断を適切に下す材料を得ることができる。ユーザ側は、コンテンツ提供業者と契約を締結することにより、通常の品質で動画像を再生することができるようになる。また、表示領域外に広告が表示されると、ユーザ側が低額な料金または無料でコンテンツを利用することができる可能性が大きくなり、このような仕組みはユーザ側にとっても大きな利点がある。
【００５１】
次に、符号側で品質を調整して生成した符号化画像データを復号側に配布する例を説明する。
【００５２】
（実施形態３）
図８は、実施形態３に係る画像符号化装置３００の構成図である。なお、画像符号化装置３００は、フレーム間符号化を用いて符号化することができるが、一般的な処理であるため、図８ではその部分を省略してある。
【００５３】
画素値補正部３０２は、後述する品質設定部３１８により輝度値や色差値の変更がなされる場合、品質設定部３１８からの設定値に応じて、それらの値を補正する。その補正を行う場合、画像用メモリ３０４を利用する。輝度値などの変更を行わない場合、画素値補正部３０２および画像用メモリ３０４は設ける必要がない。
【００５４】
直交変換部３０６は、ウェーブレット変換や離散コサイン変換などを施す。後述する品質設定部３１８により解像度が指定される場合、それに応じて、例えば、ウェーブレット変換の回数を調整する。量子化部３０８は、直交変換部３０６から出力されたウェーブレット変換係数などの所定の係数を所定の量子化幅で量子化する。後述する量子化スケール設定部３２０から量子化スケールが指定される場合、その量子化スケールに基づき、量子化する。可変長符号部３１０は、量子化部３０８から渡されたビット列をビットプレーン毎に符号化する。また、復号に必要な各種パラメータなどを符号化する。なお、ビット列をエントロピー符号化してもよい。
【００５５】
ストリーム生成部３１２は、可変長符号部３１０から入力される画像の符号化データを組み立てて、符号化ストリームを生成する。そして、生成した符号化ストリームをネットワークや記録媒体に出力する。後述する品質設定部３１８によりフレームレートや表示サイズが指定される場合、それに応じて、フレームレートや表示サイズを変更する。なお、ストリーム生成部３１２は、ストリーム用メモリ３１４を利用することができる。上記符号化ストリームを受信した復号装置は、通常通り、それを復号することができる。
【００５６】
品質管理部３１６は、時間経過とともに動画像の品質が変化するよう、画像提供者が設定した各種の品質を管理し、品質設定部３１８にそれを設定する。また、視聴者のコンテンツ購入などにより、品質管理を解除する場合も、品質設定部３１８にそれを設定する。
【００５７】
品質設定部３１８は、品質管理部３１６から指定された品質に基づき、品質を調整するためのパラメータを各部に設定する。まず、解像度を変化させる場合、直交変換部３０６にウェーブレット変換回数などを指定する。画質を変化させる場合、量子化スケール設定部３２０に量子化スケールを設定する。
【００５８】
また、表示領域を変化させる場合、品質設定部３１８は、量子化スケール設定部３２０にＲＯＩ情報を設定する。表示する画像サイズを変化させる場合、ストリーム生成部３１２に表示サイズを設定する。フレームレートを変化させる場合も、ストリーム生成部３１２にフレームレートを指定する。
【００５９】
また、表示画像の明るさを変化させる場合、品質設定部３１８は、画素値補正部３０２に輝度の補正値を設定する。表示画像の色を変化させる場合、画素値補正部３０２に色差の補正値を設定する。品質設定部３１８は、実施形態２で説明した品質設定部３６と同様に、各部にパラメータを設定し、各部も、同様に動画像の品質を変化させることができる。
【００６０】
以上説明したように本実施形態によれば、動画像の著作権保護と利用促進とを両立する画像復号化装置を実現することができる。また、符号化側で品質を劣化させた動画像データを生成する場合、符号化データの容量を低減することができる。よって、ネットワーク上のトラフィック量を軽減することができ、また、それを受信したユーザ端末のハードディスクなどの記録容量を節約することもできる。さらに、既存の復号装置でも復号することができ、汎用性が高い符号化データを生成することができる。
【００６１】
以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【００６２】
上記実施形態にて、画像符号化装置１００、３００とは別個のサーバで、ユーザの課金状況を管理して、ユーザが料金を支払った場合に、画像符号化装置１００、３００に通知して、品質管理を解除してもよい。この場合、既存の課金システムを利用することができる。
【００６３】
上記実施形態１、２にて、品質情報を符号化ストリームに付加して、復号側に送信する例を説明した。この点、復号側で品質情報を別途にダウンロードするようにしてもよい。この情報がなければ、再生を開始できないように設定すれば、ユーザが自発的にダウンロードすることが期待される。この場合、符号側で符号化ストリームに品質情報を付加する必要がなくなり、符号化装置の構成を簡素化することができる。
【図面の簡単な説明】
【００６４】
【図１】実施形態１に係る画像符号化装置の構成図である。
【図２】実施形態２に係る画像復号装置の構成図である。
【図３】時間経過とともに解像度を低下させる例を示す図である。
【図４】時間経過とともに画質を低下させる例を示す図である。
【図５】時間経過とともに表示領域を狭める例を示す図である。
【図６】時間経過とともに画像を縮小する例を示す図である。
【図７】時間経過とともにフレームレートを低下させる例を示す図である。
【図８】実施形態３に係る画像符号化装置の構成図である。
【符号の説明】
【００６５】
１０  直交変換部、  １２  量子化部、  １４  エントロピー符号化部、  １６  符号化ストリーム生成部、  １８  品質情報付加部、  ２０  ストリーム取得部、  ２２  ストリーム用メモリ、  ２４  可変長復号部、  ２６  逆量子化部、  ２８  直交逆変換部、  ３０  画素値計算部、  ３２  フレーム再構成部、  ３４  品質管理部、  ３６  品質設定部、  ３８  量子化スケール設定部、  ４０  参照データ指定部、  ４２  画像用メモリ、  １００  画像符号化装置、  ２００  画像復号装置。
【図１】
2006229661.tif 000003
【図２】
2006229661.tif 000004
【図３】
2006229661.tif 000005
【図４】
2006229661.tif 000006
【図５】
2006229661.tif 000007
【図６】
2006229661.tif 000008
【図７】
2006229661.tif 000009
【図８】
2006229661.tif 000010