(57)【要約】【課題】本発明は、ユーザの特徴の違いに応じたユーザ主観品質を推定できるようにする画像主観品質推定技術の提供と、これに基づく映像伝送制御技術の提供を目的とする。【解決手段】符号化や復号のパラメータを変えて複数の原画像を符号化し復号することで復号画像を生成して、それらの復号画像に対して示される被験者の主観品質値を収集するとともに、被験者のプロフィール情報を収集しダミー変数化して、収集した主観品質値とダミー変数値及びパラメータとの間の関係式である主観品質推定式を導出する。そして、処理対象のユーザのプロフィール情報を取得して、そのプロフィール情報を表現するダミー変数値を特定するとともに、そのユーザの要求する主観品質値を取得して、その導出した主観品質推定式と特定したダミー変数値と取得したユーザ要求の主観品質値とに基づいて、ユーザの要求する主観品質値を実現する符号化や復号のパラメータを決定する。【選択図】図１
2008147797.tif 000002
【特許請求の範囲】
【請求項１】
画像に対してのユーザの主観品質の推定に用いられる主観品質推定式を導出する主観品質推定式導出方法であって、
複数の原画像を処理対象として、符号化及び／又は復号のパラメータを変えて処理対象の原画像を符号化し復号することで復号画像を生成する過程と、
前記復号画像を被験者に提示し、それに対して示される主観品質値を入力することで、前記復号画像に対しての被験者の主観品質値を収集する過程と、
被験者のプロフィール情報を取得してダミー変数化する過程と、
前記収集した主観品質値と前記ダミー変数の値及び前記パラメータとの間の関係式を導出することで、前記主観品質推定式を導出する過程とを備えることを、
特徴とする主観品質推定式導出方法。
【請求項２】
請求項１に記載の主観品質推定式導出方法において、
前記符号化のパラメータとして、階層符号化方式を用いる場合には基本レイヤの量子化パラメータ値を用いることを、
特徴とする主観品質推定式導出方法。
【請求項３】
請求項１に記載の主観品質推定式導出方法において、
前記復号のパラメータとして、階層符号化方式を用いる場合には拡張レイヤのプレーン数を用いることを、
特徴とする主観品質推定式導出方法。
【請求項４】
ユーザに適した映像伝送を実現する符号化及び／又は復号のパラメータを決定する映像パラメータ決定方法であって、
前記パラメータを変えて複数の原画像を符号化し復号することで復号画像を生成して、それらの復号画像に対して示される被験者の主観品質値を収集するとともに、被験者のプロフィール情報を収集しダミー変数化して、それらの情報に基づいて、収集した主観品質値とダミー変数の値及び前記パラメータとの間の関係式として導出された主観品質推定式を、それを記憶する記憶手段から読み出す過程と、
処理対象となるユーザのプロフィール情報を取得して、そのプロフィール情報を表現するダミー変数値を特定する過程と、
処理対象となるユーザの要求する主観品質値を取得する過程と、
前記読み出した主観品質推定式と、前記特定したダミー変数値と、前記取得したユーザ要求の主観品質値とに基づいて、そのユーザ要求の主観品質値を実現する前記パラメータを決定する過程とを備えることを、
特徴とする映像パラメータ決定方法。
【請求項５】
画像に対してのユーザの主観品質の推定に用いられる主観品質推定式を導出する主観品質推定式導出装置であって、
複数の原画像を処理対象として、符号化及び／又は復号のパラメータを変えて処理対象の原画像を符号化し復号することで復号画像を生成する手段と、
前記復号画像を被験者に提示し、それに対して示される主観品質値を入力することで、前記復号画像に対しての被験者の主観品質値を収集する手段と、
被験者のプロフィール情報を取得してダミー変数化する手段と、
前記収集した主観品質値と前記ダミー変数の値及び前記パラメータとの間の関係式を導出することで、前記主観品質推定式を導出する手段とを備えることを、
特徴とする主観品質推定式導出装置。
【請求項６】
ユーザに適した映像伝送を実現する符号化及び／又は復号のパラメータを決定する映像パラメータ決定装置であって、
前記パラメータを変えて複数の原画像を符号化し復号することで復号画像を生成して、それらの復号画像に対して示される被験者の主観品質値を収集するとともに、被験者のプロフィール情報を収集しダミー変数化して、それらの情報に基づいて、収集した主観品質値とダミー変数の値及び前記パラメータとの間の関係式として導出された主観品質推定式を、それを記憶する記憶手段から読み出す手段と、
処理対象となるユーザのプロフィール情報を取得して、そのプロフィール情報を表現するダミー変数値を特定する手段と、
処理対象となるユーザの要求する主観品質値を取得する手段と、
前記読み出した主観品質推定式と、前記特定したダミー変数値と、前記取得したユーザ要求の主観品質値とに基づいて、そのユーザ要求の主観品質値を実現する前記パラメータを決定する手段とを備えることを、
特徴とする映像パラメータ決定装置。
【請求項７】
請求項１ないし３のいずれか１項に記載の主観品質推定式導出方法の実現に用いられる処理をコンピュータに実行させるための主観品質推定式導出プログラム。
【請求項８】
請求項１ないし３のいずれか１項に記載の主観品質推定式導出方法の実現に用いられる処理をコンピュータに実行させるための主観品質推定式導出プログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項９】
請求項４に記載の映像パラメータ決定方法の実現に用いられる処理をコンピュータに実行させるための映像パラメータ決定プログラム。
【請求項１０】
請求項４に記載の映像パラメータ決定方法の実現に用いられる処理をコンピュータに実行させるための映像パラメータ決定プログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像に対してのユーザの主観品質の推定に用いられる主観品質推定式を導出する主観品質推定式導出方法及びその装置と、その主観品質推定式導出方法により導出された主観品質推定式を用いて、ユーザに適した映像伝送を実現する符号化パラメータや復号パラメータ決定する映像パラメータ決定方法及びその装置と、その主観品質推定式導出方法の実現に用いられる主観品質推定式導出プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体と、その映像パラメータ決定方法の実現に用いられる映像パラメータ決定プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体とに関する。
【背景技術】
【０００２】
映像メディアを用いた通信サービスの品質を高めていくためには、画像に対してのユーザの主観品質を推定する技術を構築していく必要がある。
【０００３】
このようなことを背景にして、従来技術では、ビットレートと画像特徴量とを用いて「主観値の平均（ＭＯＳ：Mean Opinion Score）」を推定する方法が検討されている（例えば、非特許文献１参照）。
【０００４】
この非特許文献１には、多くの主観評価実験による平均オピニオン評点（ＭＯＳ）を少数のパラメータを含む関数で近似して、原画像から得られる特徴量を用いて関数のパラメータを推定し、この推定した関数に対して指定されたビットレートを与えて、その最大点を求めることによって最適フレームレートを得るようにするという発明が記載されている。
【０００５】
このように、従来技術では、画像の特徴量に応じて画像の品質を推定するようにしているのである。
【０００６】
なお、以下では、全ユーザの主観品質値の平均を示すＭＯＳとの違いを明らかにするために、各ユーザにおける画像に対しての主観品質をユーザ主観品質と表現する。
【非特許文献１】稲積, 吉田, 酒井, 堀田, 「ビットレート制限下における動画像通信のための最適フレームレート推定」, 信学論（Ｂ), vol.J85-B, no.7, pp.1130-1142, Jul.2002
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来技術では、ユーザの特徴の違いに応じた画像に対してのユーザ主観品質を推定することができないという問題があった。
【０００８】
すなわち、従来技術では、画像の特徴量に応じて画像の品質を推定するようにしており、ユーザの特徴の違いに応じた画像に対してのユーザ主観品質を推定することはできない。
【０００９】
しかも、従来技術では、画像に対してのユーザ主観品質の推定技術を映像伝送装置の制御に応用しておらず、これから、ユーザに適応した映像伝送制御を行うことは実現されていない。
【００１０】
前述した非特許文献１でも、その最終頁の「むすび」の欄で、今後の課題として、各ユーザごとの好みに応じて係数を調節するシステムを構築することが必要であると記載しているように、従来技術では、各ユーザの好みの違いに応じた画像に対してのユーザ主観品質を推定することができないのである。しかも、従来技術では、各ユーザに適応した映像伝送を実現することができないのである。
【００１１】
画像品質の良し悪しを判断するのは最終的には各ユーザであり、映像通信サービスを利用する実際のユーザは、必ずしも平均的なユーザとは限らないことから、「ユーザ主観値の平均（ＭＯＳ）」の推定ではユーザ主観品質の推定が十分に当たらないのである。
【００１２】
例えば、高齢者、成人、子供のいる家族の場合を考えてみると、高齢者は画像品質に対してコダワリがないが、子供は画像品質に対して異常なコダワリを持っているケースが考えられる。このようなケースの場合、各ユーザを平均すれば、平均的なユーザとして同一にサービス提供されてしまうが、それでは高齢者、子供の各ユーザにとっては不満のある映像伝送サービス形態となってしまう。
【００１３】
また、ＴＶ電話などの利用でみるならば、送受信される画像は人物画像が大部分となり、画像内容の違いによる主観値の差より、むしろユーザの違いによる主観値の差の方が大きい。
【００１４】
このことから分かるように、ユーザの違いを考慮した画像に対してのユーザ主観値の推定が必要であり、これに基づく映像伝送制御が必要なのである。
【００１５】
本発明はかかる事情に鑑みてなされたものであって、画像に対してのユーザの主観品質を推定するときに、ユーザの特徴の違いに応じたユーザ主観品質を推定できるようにする新たな画像主観品質推定技術の提供と、これに基づく新たな映像伝送制御技術の提供とを目的とする。
【課題を解決するための手段】
【００１６】
〔１〕本発明の主観品質推定式導出装置
前記の目的を達成するために、本発明の主観品質推定式導出装置は、画像に対してのユーザの主観品質の推定に用いられる主観品質推定式を導出する処理を行うものであって、（イ）複数の原画像を処理対象として、符号化及び／又は復号のパラメータを変えて処理対象の原画像を符号化し復号することで復号画像を生成する生成手段と、（ロ）生成手段の生成した復号画像を被験者に提示し、それに対して示される主観品質値を入力することで、それらの復号画像に対しての被験者の主観品質値を収集する収集手段と、（ハ）被験者のプロフィール情報を取得してダミー変数化する変換手段と、（ニ）収集手段の収集した主観品質値とダミー変数の値及びパラメータとの間の関係式を導出することで、主観品質推定式を導出する導出手段とを備えるように構成する。
【００１７】
ここで、以上の各処理手段はコンピュータプログラムでも実現できるものであり、このコンピュータプログラムは、適当なコンピュータ読み取り可能な記録媒体に記録して提供されたり、ネットワークを介して提供され、本発明を実施する際にインストールされてＣＰＵなどの制御手段上で動作することにより本発明を実現することになる。
【００１８】
このように構成される本発明の主観品質推定式導出装置では、複数の原画像を処理対象として、符号化のパラメータや復号のパラメータを変えて処理対象の原画像を符号化し復号することで復号画像を生成して、それらの復号画像を被験者に提示し、それに対して示される主観品質値を入力することで、それらの復号画像に対しての被験者の主観品質値を収集する。
【００１９】
例えば、ＭＰＥＧ４のＦＧＳのような階層符号化方式を用いる場合には、画像品質を大きく変えることができることから、基本レイヤの量子化パラメータ値を変えて処理対象の原画像を符号化し、拡張レイヤのプレーン数を変えて復号することで復号画像を生成して、それらの復号画像を被験者に提示し、それに対して示される主観品質値を入力することで、それらの復号画像に対しての被験者の主観品質値を収集するのである。
【００２０】
一方、この主観品質値の収集とは別に、被験者から被験者のプロフィール情報を取得してダミー変数化することで、被験者のプロフィール情報を０又は１で示されるダミー変数で表現する。
【００２１】
これから、続いて、収集した主観品質値と、被験者のプロフィール情報のダミー変数値と、復号画像の生成に用いた符号化及び／又は復号のパラメータとに基づいて、主観品質値とダミー変数値及びパラメータとの間の関係式として定義される主観品質推定式を導出する。
【００２２】
例えば、主観品質値を目的変数とし、ダミー変数値及びパラメータを説明変数とする線形又は非線形の多重回帰分析を行うことで、主観品質値とダミー変数値及びパラメータとの間の関係式として定義される主観品質推定式を導出するのである。
【００２３】
このようにして導出される主観品質推定式は、ユーザのプロフィール情報に基づいて、そのユーザの画像に対しての主観品質値を推定することができるようになっており、これから、この主観品質推定式を用いることで、ユーザの特徴の違いに応じた画像に対してのユーザ主観品質を推定することができるようになる。
【００２４】
このようにして、本発明の主観品質推定式導出装置によれば、ユーザの特徴の違いに応じた画像に対してのユーザ主観品質の推定を可能とする主観品質推定式を導出することができるようになる。
【００２５】
〔２〕本発明の映像パラメータ決定装置
前記の目的を達成するために、本発明の映像パラメータ決定装置は、ユーザに適した映像伝送を実現する符号化及び／又は復号のパラメータを決定する処理を行うものであって、（イ）パラメータを変えて複数の原画像を符号化し復号することで復号画像を生成して、それらの復号画像に対して示される被験者の主観品質値を収集するとともに、被験者のプロフィール情報を収集しダミー変数化して、それらの情報に基づいて、収集した主観品質値とダミー変数の値及びパラメータとの間の関係式として導出された主観品質推定式を、それを記憶する記憶手段から読み出す読出手段と、（ロ）処理対象となるユーザのプロフィール情報を取得して、そのプロフィール情報を表現するダミー変数値を特定する特定手段と、（ハ）処理対象となるユーザの要求する主観品質値を取得する取得手段と、（ニ）読出手段の読み出した主観品質推定式と、特定手段の特定したダミー変数値と、取得手段の取得したユーザ要求の主観品質値とに基づいて、そのユーザ要求の主観品質値を実現するパラメータを決定する決定手段とを備えるように構成する。
【００２６】
ここで、以上の各処理手段はコンピュータプログラムでも実現できるものであり、このコンピュータプログラムは、適当なコンピュータ読み取り可能な記録媒体に記録して提供されたり、ネットワークを介して提供され、本発明を実施する際にインストールされてＣＰＵなどの制御手段上で動作することにより本発明を実現することになる。
【００２７】
このように構成される本発明の映像パラメータ決定装置では、処理対象となるユーザに適した映像伝送を実現する符号化パラメータや復号パラメータを決定する必要があると、そのユーザのプロフィール情報を取得して、そのプロフィール情報を表現するダミー変数値を特定するとともに、そのユーザの要求する主観品質値を取得する。
【００２８】
ここで、これらの処理については同時に行う必要はなく、例えば、前もって、処理対象となるユーザのプロフィール情報を表現するダミー変数値を特定しておくようにしてもよい。
【００２９】
続いて、本発明の主観品質推定式導出装置により導出された主観品質推定式を記憶手段から読み出すことで取得して、その読み出した主観品質推定式と、特定したダミー変数値と、取得したユーザ要求の主観品質値とに基づいて、処理対象となるユーザの要求する主観品質値を実現するパラメータを決定する。
【００３０】
例えば、画像符号化方式としてＭＰＥＧ４のＦＧＳのような階層符号化方式を用いる場合には、本発明の主観品質推定式導出装置により導出された主観品質推定式に従って、基本レイヤの量子化パラメータ値を決定したり、拡張レイヤのプレーン数を決定することで、ユーザの要求する主観品質値を実現する符号化パラメータや復号パラメータを決定するのである。
【００３１】
このようにして、本発明の映像パラメータ決定装置によれば、ユーザに適した映像伝送を実現する符号化パラメータや復号パラメータを決定することができるようになる。
【発明の効果】
【００３２】
本発明によれば、映像通信サービスで用いられる画像を被験者に主観評価してもらうことで、各ユーザの違いを考慮した画像に対してのユーザ主観品質を推定可能とする主観品質推定式を導出することができるようになる。
【００３３】
そして、本発明によれば、ユーザの要求する主観品質を実現する映像伝送の符号化パラメータや復号パラメータを決定することができるようになることで、各ユーザに適した映像伝送を実現することができるようになる。
【発明を実施するための最良の形態】
【００３４】
以下、実施の形態に従って本発明を詳細に説明する。
【００３５】
以下では、ＭＰＥＧ４のＦＧＳ符号化・復号器を具体例にしてデータ及び図面を用いて本発明の実施の形態について説明する。ここで、ＭＰＥＧ４のＦＧＳ符号化・復号器については、下記の文献で紹介されている。
【００３６】
〔文献〕：W. Li, "Overview of Fine Granularity Scalability in MPEG-4 Video S              tandard," IEEE Trans. Circuits Syst. Video Technol., vol.11, no.3,              pp.301-317, Mar.2001. 
図１に、画像に対してのユーザの主観品質の推定に用いられる主観品質推定式を導出する処理を行う本発明の主観品質推定式導出装置１の装置構成の一実施形態例を図示する。
【００３７】
この図に示すように、本発明の主観品質推定式導出装置１は、オペレータとの間のインタフェースとなる入出力装置２を備えるとともに、原画像データベース１００と、復号画像生成部１０１と、パラメータ変更情報記憶部１０２と、復号画像データベース１０３と、主観品質評価実験実行部１０４と、評価実験結果データベース１０５と、アンケート実施部１０６と、アンケート情報データベース１０７と、プロフィール情報生成部１０８と、プロフィール情報データベース１０９と、主観品質推定式導出部１１０と、主観品質推定式記憶部１１１と、パラメータ決定部１１２とを備える。
【００３８】
ここで、図中に示す３-i（ｉ＝１〜ｎ）は被験者の操作する端末装置で、４-i（ｉ＝１〜ｍ）は被験者以外のユーザの操作する端末装置であり、ネットワークなどを介して本発明の主観品質推定式導出装置１に接続されることになる。
【００３９】
原画像データベース１００は、処理対象となる複数の原画像を格納する。この実施形態例では、Ａ、Ｂ、Ｃという３枚の原画像を格納していることを想定している。
【００４０】
復号画像生成部１０１は、ＭＰＥＧ４のＦＧＳの画像符号化方式で規定されるＢase レイヤ（基本レイヤ）の量子化パラメータ値とＦＧＳレイヤ（拡張レイヤ）のＦＧＳプレーン数とを変えて、原画像データベース１００に格納される原画像を符号化し復号することで復号画像を生成して、復号画像データベース１０３に格納する。
【００４１】
ここで、ＦＧＳプレーン数とは、動画像の各フレームにおけるＦＧＳレイヤ符号化対象のＤＣＴ係数を２進数で表現したときの最上位プレーンから数えた復号対象のプレーン数である。例えば、１というＦＧＳプレーン数は動画像の各フレームの最上位プレーンのみを復号することを意味する。また、ＦＧＳプレーン数が４と設定された場合に、該当の復号対象フレームにおいて復号対象プレーンが３プレーンまでしか存在しない場合には３プレーンまでが復号対象となる。
【００４２】
パラメータ変更情報記憶部１０２は、復号画像生成部１０１で変更することになるＢase レイヤの量子化パラメータ値及びＦＧＳレイヤのＦＧＳプレーン数がどのような値であるのかということについて記憶する。復号画像生成部１０１は、このパラメータ変更情報記憶部１０２の記憶する値に従って、Ｂase レイヤの量子化パラメータ値とＦＧＳレイヤのＦＧＳプレーン数とを変えて、原画像データベース１００に格納される原画像を符号化し復号することで復号画像を生成することになる。
【００４３】
主観品質評価実験実行部１０４は、復号画像データベース１０３に格納される復号画像を各被験者に提示し、それに対して示されるユーザ主観品質値を入力することで、それらの復号画像に対しての被験者のユーザ主観品質値を入力して、評価実験結果データベース１０５に格納する。
【００４４】
アンケート実施部１０６は、各被験者に対してプロフィールに関しての質問表を提示し、それに対する回答を得ることでアンケートを実施して、その回答結果をアンケート情報データベース１０７に格納する。
【００４５】
プロフィール情報生成部１０８は、下記の文献に記載される手法などを使って、アンケート情報データベース１０７に格納されるアンケートの回答結果を、０又は１で示されるダミー変数で表現することでプロフィール情報を生成して、プロフィール情報データベース１０９に格納する。
【００４６】
〔文献〕：長谷川勝也，“ゼロからはじめてよくわかる多変量解析”，技術評論社,               2004. 
主観品質推定式導出部１１０は、主観品質評価実験実行部１０４の取得したユーザ主観品質値と復号画像生成部１０１の変更した符号化・復号パラメータとユーザのプロフィール情報を表現するダミー変数値との間の関係式として定義される主観品質推定式（ユーザの主観品質評価特性を示すもの）を導出して、その主観品質推定式の情報を主観品質推定式記憶部１１１に格納する。
【００４７】
パラメータ決定部１１２は、被験者以外のユーザの要求するユーザ主観品質値を実現する符号化・復号パラメータの決定要求があると、そのユーザの要求するユーザ主観品質値と、そのユーザのプロフィール情報と、主観品質推定式記憶部１１１に格納される主観品質推定式とに基づいて、そのユーザの要求するユーザ主観品質値を実現する符号化・復号パラメータ（Ｂase レイヤの量子化パラメータ値，ＦＧＳレイヤのＦＧＳプレーン数）を決定する。
【００４８】
図２に、復号画像生成部１０１の実行するフローチャートの一例を図示し、図３に、主観品質評価実験実行部１０４の実行するフローチャートの一例を図示し、図４に、アンケート実施部１０６の実行するフローチャートの一例を図示し、図５に、プロフィール情報生成部１０８の実行するフローチャートの一例を図示し、図６に、主観品質推定式導出部１１０の実行するフローチャートの一例を図示し、図７に、パラメータ決定部１１２の実行するフローチャートの一例を図示する。
【００４９】
次に、これらのフローチャートに従って、このように構成される本発明の主観品質推定式導出装置１の実行する処理について説明する。先ず最初に、図２のフローチャートに従って、復号画像生成部１０１の実行する処理について説明する。
【００５０】
復号画像生成部１０１は、復号画像の生成要求があると、図２のフローチャートに示すように、先ず最初に、ステップＳ１００で、原画像データベース１００に格納されている原画像の中から、未処理の原画像を１つ選択して読み込む。
【００５１】
続いて、ステップＳ１０１で、パラメータ変更情報記憶部１０２の記憶情報に従って定義されている符号化・復号パラメータ値（Ｂase レイヤの量子化パラメータ値，ＦＧＳレイヤのＦＧＳプレーン数）の中から未処理のものを１つ選択することで、使用する符号化・復号パラメータ値を設定する。
【００５２】
続いて、ステップＳ１０２で、選択した原画像を設定した符号化・復号パラメータ値に従って符号化し復号することで復号画像を生成して、復号画像データベース１０３に格納し、続くステップＳ１０３で、全ての符号化・復号パラメータ値を設定したのか否かを判断する。
【００５３】
このステップＳ１０３の判断処理に従って、全ての符号化・復号パラメータ値を設定していないことを判断するときには、ステップＳ１０１の処理に戻り、一方、全ての符号化・復号パラメータ値を設定したことを判断するときには、ステップＳ１０４に進んで、全ての原画像を選択したのか否かを判断する。
【００５４】
そして、このステップＳ１０４の判断処理に従って、全ての原画像を選択していないことを判断するときには、ステップＳ１００の処理に戻り、一方、全ての原画像を選択したことを判断するときには、処理を終了する。
【００５５】
このようにして、復号画像生成部１０１の処理に従って、復号画像データベース１０３には、図８に示すように、原画像Ａについて、Ｂase レイヤの量子化パラメータ値とＦＧＳレイヤのＦＧＳプレーン数とを変えることで生成された複数の復号画像と、原画像Ｂについて、Ｂase レイヤの量子化パラメータ値とＦＧＳレイヤのＦＧＳプレーン数とを変えることで生成された複数の復号画像と、原画像Ｃについて、Ｂase レイヤの量子化パラメータ値とＦＧＳレイヤのＦＧＳプレーン数とを変えることで生成された複数の復号画像とが格納されることになる。
【００５６】
次に、図３のフローチャートに従って、主観品質評価実験実行部１０４の実行する処理について説明する。
【００５７】
主観品質評価実験実行部１０４は、主観品質評価実験の実行要求があると、図３のフローチャートに示すように、先ず最初に、ステップＳ２００で、予め選ばれている被験者の中から、主観品質評価実験を行っていない被験者を一人選択する。
【００５８】
続いて、ステップＳ２０１で、復号画像データベース１０３に格納されている復号画像の中から、未処理の復号画像を１つ選択して読み込む。
【００５９】
続いて、ステップＳ２０２で、選択した復号画像を、端末装置３-iを介して選択した被験者に提示して、その復号画像に対してのユーザ主観品質値を取得する。例えば５段階評価の値で示されるユーザ主観品質値を取得するのである。
【００６０】
続いて、ステップＳ２０３で、取得したユーザ主観品質値を評価実験結果データベース１０５に格納し、続くステップＳ２０４で、全ての復号画像を選択したのか否かを判断する。
【００６１】
このステップＳ２０４の判断処理に従って、全ての復号画像を選択していないことを判断するときには、ステップＳ２０１の処理に戻り、一方、全ての復号画像を選択したことを判断するときには、ステップＳ２０５に進んで、全ての被験者を選択したのか否かを判断する。
【００６２】
そして、このステップＳ２０５の判断処理に従って、全ての被験者を選択していないことを判断するときには、ステップＳ２００の処理に戻り、一方、全ての被験者を選択したことを判断するときには、処理を終了する。
【００６３】
このようにして、主観品質評価実験実行部１０４の処理に従って、評価実験結果データベース１０５には、図９に示すように、各被験者が各復号画像に対してどのようなユーザ主観品質値を示したのかという情報が格納されることになる。
【００６４】
次に、図４のフローチャートに従って、アンケート実施部１０６の実行する処理について説明する。
【００６５】
アンケート実施部１０６は、アンケートの実施要求があると、図４のフローチャートに示すように、先ず最初に、ステップＳ３００で、各被験者に対して、図１０に示すようなプロフィールに関しての質問表を提示し、それに対する回答を得ることでアンケートを実施し、続いて、ステップＳ３０１で、その回答結果をアンケート情報データベース１０７に格納して、処理を終了する。
【００６６】
このようにして、アンケート実施部１０６の処理に従って、アンケート情報データベース１０７には、図１１に示すように、各被験者のプロフィールに関しての回答結果の情報が格納されることになる。
【００６７】
次に、図５のフローチャートに従って、プロフィール情報生成部１０８の実行する処理について説明する。
【００６８】
プロフィール情報生成部１０８は、各被験者のプロフィール情報の生成要求があると、図５のフローチャートに示すように、先ず最初に、ステップＳ４００で、アンケート情報データベース１０７に格納されるアンケートの回答結果を、０又は１で示されるダミー変数で表現することで各被験者のプロフィール情報を生成し、続いて、ステップＳ４０１で、その生成したプロフィール情報をプロフィール情報データベース１０９に格納して、処理を終了する。
【００６９】
このようにして、プロフィール情報生成部１０８の処理に従って、例えば、図１１に示すようなアンケートの回答結果に基づいて、（イ）Ｇender に対してダミー変数ｇを付与して、男性の場合にはｇ＝１、女性の場合にはｇ＝０を定義し、（ロ）Ａgeに対してダミー変数ａを付与して、２０代の場合にはａ＝１、３０代及びその他の年代の場合にはａ＝０を定義し、（ハ）Ｉmageryに対してダミー変数ｓ1,ｓ2,ｓ3 を付与して、ＴＶの場合にはｓ１＝１（ｓ２＝ｓ３＝０）、ＭＯＶＩＥの場合にはｓ２＝１（ｓ１＝ｓ３＝０）、ＤＶＤの場合にはｓ３＝１（ｓ１＝ｓ２＝０）、その他の場合にはｓ１＝ｓ２＝ｓ３＝０を定義し、（ニ）Ｉnterest に対してダミー変数ｋを付与して、yes の場合にはｋ＝１、noの場合にはｋ＝０を定義することで、図１２に示すようなプロフィール情報がプロフィール情報データベース１０９に格納されることになる。
【００７０】
なお、アンケートの実施とダミー変数化によるプロフィール情報の生成とは連続して行う必要はなく、アンケートの実施の後の適当な時期に、プロフィール情報を生成するようにしてもよい。
【００７１】
次に、図６のフローチャートに従って、主観品質推定式導出部１１０の実行する処理について説明する。
【００７２】
主観品質推定式導出部１１０は、主観品質推定式の導出要求があると、図６のフローチャートに示すように、先ず最初に、ステップＳ５００で、プロフィール情報の生成の際に定義されたダミー変数（ｇ，ａ，ｓ１，ｓ２，ｓ３，ｋ）の値と、復号画像生成時の符号化・復号パラメータ（Ｂase レイヤの量子化パラメータ値，ＦＧＳレイヤのＦＧＳプレーン数）とを説明変数とし、主観品質評価実験で得られたユーザ主観品質値を目的変数とする線形または非線形の多重回帰分析を行うことで、ユーザ主観品質値を推定する主観品質推定式を導出し、続くステップＳ５０１で、その導出した主観品質推定式の情報を主観品質推定式記憶部１１１に格納して、処理を終了する。
【００７３】
この主観品質推定式導出部１１０の処理に従って、ＧＰをユーザ主観品質値、ＱＰをＢase レイヤの量子化パラメータ値、ＦＰをＦＧＳレイヤのＦＧＳプレーン数と表すならば、例えば、
ＧＰ＝３．８５６−０．１０６ＱＰ＋０．４９２ＦＰ
＋０．０９５ｇ−０．１２７ａ＋０．０２０ｓ１
＋０．２１７ｓ２＋０．０５８ｓ３−０．２３９ｋ        ・・・式（１）
というような主観品質推定式が導出されることになる。
【００７４】
この式（１）は、ユーザのプロフィール情報となるダミー変数（ｇ，ａ，ｓ１，ｓ２，ｓ３，ｋ）の値と、システムで用いている符号化・復号パラメータ（ＱＰ，ＦＰ）の値とが分かれば、そのユーザがそのシステムで用いられている画像に対して感ずる主観品質値ＧＰを推定することができることを意味している。
【００７５】
一方、この式（１）は、Ｂase レイヤにおけるユーザ主観品質値ＢＧＰと、ＦＧＳレイヤにおけるユーザ主観品質値ＦＧＰを定義することで、
ＧＰ＝ＢＧＰ＋ＦＧＰ                                        ・・・式（２）
ＢＧＰ＝３．８５６−０．１０６ＱＰ                          ・・・式（３）
ＦＧＰ＝０．４９２ＦＰ＋０．０９５ｇ−０．１２７ａ＋０．０２０ｓ１
＋０．２１７ｓ２＋０．０５８ｓ３−０．２３９ｋ      ・・・式（４）
というように変形することができる。
【００７６】
さらに、この式（３）と式（４）は、それぞれ、
ＱＰ＝（ＢＧＰ−３．８５６）／（−０．１０６）              ・・・式（５）
ＦＰ＝（ＦＧＰ−（０．０９５ｇ−０．１２７ａ＋０．０２０ｓ１
＋０．２１７ｓ２＋０．０５８ｓ３−０．２３９ｋ））／０．４９２
・・・式（６）
というように変形することができる。
【００７７】
この式（５）は、ユーザによるＢase レイヤの主観品質値要求が分かれば、Ｂase レイヤの量子化パラメータ値ＱＰを決定することができることを意味している。
【００７８】
そして、この式（６）は、ユーザによるＦＧＳレイヤの主観品質値要求とプロフィール情報とが分かれば、ＦＧＳレイヤのＦＧＳプレーン数ＦＰを決定することができることを示している。
【００７９】
これらのことは、ユーザの主観品質値要求とプロフィール情報とにより、ＱＰ値及びＦＰを制御できることを示している。つまり、ユーザの主観品質値要求が同一でも、ユーザのプロフィール情報が異なる場合には、異なるＦＰを決定でき、これにより、よりユーザに適した映像伝送が実現可能になることを意味している。
【００８０】
従来のＭＰＥＧ４＿ＦＧＳの映像品質調整では、変動する回線帯域へ対処するためＦＰの調整を実施していたが、式（５）及び式（６）を用いることで、サービス提供可能な最低映像品質と各ユーザが要求するＦＧＳレイヤの主観品質を指定するだけで、各ユーザに適応したＱＰ値とＦＰを決定することができる。
【００８１】
例えば、２０代男性、Ｉmagery＝ＴＶ、Ｉnterest ＝ｙｅｓのユーザが、Ｂase レイヤの主観品質値要求（＝最低映像品質要求）として主観品質値３を指定した場合には、式（５）より、
ＱＰ＝（３−３．８５６）／（−０．１０６）＝８．１
となる。ここでＱＰ値は整数値であるので、品質が良くなる方向に切捨てを行い、ＱＰ＝８．０とする。つまり、最低映像品質を満たすためには、ＱＰ値＝８．０で符号化を行う必要がある。
【００８２】
さらに、このユーザのＦＧＳレイヤの主観品質値要求として主観品質値２を指定した場合、すなわち、Ｂase レイヤとのトータルな主観品質値として主観品質値５を指定した場合には、式（６）に、上記のＱＰ値とダミー変数（ａ＝１，ｇ＝１，ｓ１＝１，ｓ２＝０，ｓ３＝０，ｋ＝１）とを代入すると
ＦＰ＝（２−（０．０９５−０．１２７＋０．０２０−０．２３９））
／０．４９２＝４．６
となり、この値を切り上げて、ＦＰ＝５とする。つまり、ＦＧＳプレーンを５プレーン伝送すれば、このユーザの主観品質値要求（トータル主観品質値５）を満たす映像伝送ができることが分かる。
【００８３】
パラメータ決定部１１２は、このユーザに適した映像伝送を実現する符号化・復号パラメータ（ＱＰ，ＦＰ）の決定処理を実行するものである。
【００８４】
次に、図７のフローチャートに従って、パラメータ決定部１１２の実行する処理について説明する。
【００８５】
パラメータ決定部１１２は、ユーザを指定して、そのユーザに適した映像伝送を実現する符号化・復号パラメータの決定要求があると、図７のフローチャートに示すように、先ず最初に、ステップＳ６００で、その映像伝送の対象となるユーザに対して、図１０に示すようなプロフィールに関しての質問表を提示し、それに対する回答を得る。
【００８６】
続いて、ステップＳ６０１で、その回答結果に基づいて、映像伝送の対象となるユーザのプロフィール情報のダミー変数値を特定する。
【００８７】
続いて、ステップＳ６０２で、映像伝送の対象となるユーザの要求するユーザ主観品質値を取得する。上述したように、Ｂase レイヤの主観品質についての要求値とＦＧＳレイヤの主観品質についての要求値とを取得するのである。
【００８８】
続いて、ステップＳ６０３で、主観品質推定式記憶部１１１から主観品質推定式を読み出し、その主観品質推定式に対して、ステップＳ６０１で特定したダミー変数値と、ステップＳ６０２で取得したユーザ主観品質値とを代入することで、映像伝送の対象となるユーザの要求するユーザ主観品質値を実現する符号化・復号パラメータ（Ｂase レイヤの量子化パラメータ値，ＦＧＳレイヤのＦＧＳプレーン数）を決定して、処理を終了する。
【００８９】
このようにして、例えば、２０代男性、Ｉmagery＝ＴＶ、Ｉnterest ＝ｙｅｓのユーザが、Ｂase レイヤの主観品質値要求として主観品質値３を指定し、ＦＧＳレイヤの主観品質値要求として主観品質値２を指定した場合には、ＱＰ値＝８．０で符号化を行い、ＦＧＳプレーンを５プレーン伝送するということを決定することで、そのユーザに適した映像伝送を実現する符号化・復号パラメータを決定するのである。
【００９０】
図示実施形態例に従って本発明を説明したが、本発明はこれに限定されるものではない。
【００９１】
例えば、図７のフローチャートでは、映像伝送の対象となるユーザの要求するユーザ主観品質値を取得する際に、その時点で、そのユーザのプロフィール情報のダミー変数値を特定するようにするという構成を採っているが、前もって、映像伝送の対象となる各ユーザのプロフィール情報のダミー変数値を特定して記憶装置に保存しておいて、そこから読み出すようにしてもよい。
【００９２】
また、実施形態例では、復号画像データベース１０３に格納される全ての復号画像についてのユーザ主観品質値を使用して主観品質推定式を導出するようにしたが、標準偏差などを使ってユーザ主観品質値の評価の割れている復号画像を選択して、その選択した復号画像についてのユーザ主観品質値を使用して主観品質推定式を導出するようにしてもよい。そのような復号画像を用いて主観品質推定式を導出するようにすると、ユーザの主観品質評価特性を明瞭な形で導出することができるようになる。
【図面の簡単な説明】
【００９３】
【図１】本発明の主観品質推定式導出装置の装置構成の一実施形態例である。
【図２】復号画像生成部の実行するフローチャートである。
【図３】主観品質評価実験実行部の実行するフローチャートである。
【図４】アンケート実施部の実行するフローチャートである。
【図５】プロフィール情報生成部の実行するフローチャートである。
【図６】主観品質推定式導出部の実行するフローチャートである。
【図７】パラメータ決定部の実行するフローチャートである。
【図８】復号画像データベースに格納される復号画像の説明図である。
【図９】評価実験結果データベースに格納される評価実験結果データの説明図である。
【図１０】質問表の説明図である。
【図１１】質問表に対する回答結果の説明図である。
【図１２】プロフィール情報データベースに格納されるプロフィール情報の説明図である。
【符号の説明】
【００９４】
１      主観品質推定式導出装置
２      入出力装置
３      端末装置
４      端末装置
１００  原画像データベース
１０１  復号画像生成部
１０２  パラメータ変更情報記憶部
１０３  復号画像データベース
１０４  主観品質評価実験実行部
１０５  評価実験結果データベース
１０６  アンケート実施部
１０７  アンケート情報データベース
１０８  プロフィール情報生成部
１０９  プロフィール情報データベース
１１０  主観品質推定式導出部
１１１  主観品質推定式記憶部
１１２  パラメータ決定部
【図１】
2008147797.tif 000003
【図２】
2008147797.tif 000004
【図３】
2008147797.tif 000005
【図４】
2008147797.tif 000006
【図５】
2008147797.tif 000007
【図６】
2008147797.tif 000008
【図７】
2008147797.tif 000009
【図８】
2008147797.tif 000010
【図９】
2008147797.tif 000011
【図１０】
2008147797.tif 000012
【図１１】
2008147797.tif 000013
【図１２】
2008147797.tif 000014