(57)【特許請求の範囲】
【請求項１】
圧縮符号化する前の画像信号を処理して圧縮符号化処理装置に出力する圧縮符号化前置処理装置であって、
入力した画像信号に係る画像から動きのある動領域を予め定めた方式で検出する動領域検出手段と、
検出した前記動領域から動オブジェクトを抽出し、抽出した前記動オブジェクトのオプティカルフロー情報を取得するオプティカルフロー情報取得手段と、
前記画像が表示される画面の外側から前記画面内に出現する出現オブジェクト又は前記画面上に表示された画像に隠れた状態から出現する前景出現オブジェクトを前記オプティカルフロー情報に基づいて検出し、検出した前記出現オブジェクト又は前記前景出現オブジェクトの位置を示すオブジェクト領域指示信号を出力する出現オブジェクト検出部と、
前記画面の大きさ及び前記画面を観視する観視者から前記画面までの距離を示す観視距離に対して跳躍性眼球運動を発生させる移動速度閾値以上の動き速度を有するオブジェクトを前記オプティカルフロー情報に基づいて検出したとき、検出した前記オブジェクトの位置を示す跳躍性眼球運動領域信号を出力する跳躍性眼球運動領域検出部と、
前記オブジェクト領域指示信号又は前記跳躍性眼球運動領域信号が出力されている期間において前記画像信号の動領域の空間周波数帯域を制限して前記圧縮符号化処理装置に出力する信号帯域制限手段とを備えたことを特徴とする圧縮符号化前置処理装置。
【請求項２】
前記圧縮符号化前置処理装置は、前記オブジェクト領域指示信号及び前記跳躍性眼球運動領域信号を入力する画像信号指示手段をさらに備え、
該画像信号指示手段は、前記圧縮符号化処理装置が出力する画像信号として、フレーム内符号化により符号化されるフレーム内符号化画像信号、再生時に先に再生されるフレーム画像信号を用いて符号化する順方向予測符号化により符号化されるフレーム間順方向予測符号化画像信号、又は再生時に先に再生されるフレーム画像信号と後に再生されるフレーム画像信号とを用いて符号化する双方向予測符号化により符号化される双方向予測符号化画像信号のいずれにするかを前記圧縮符号化処理装置に指示することを特徴とする請求項１に記載の圧縮符号化前置処理装置。
【請求項３】
圧縮符号化する前の画像信号を処理して圧縮符号化処理装置に出力する圧縮符号化前置処理装置としてコンピュータを機能させる圧縮符号化前置処理プログラムであって、
前記コンピュータを、
入力した画像信号に係る画像から動きのある動領域を予め定めた方式で検出する動領域検出手段と、
検出した前記動領域から動オブジェクトを抽出し、抽出した前記動オブジェクトのオプティカルフロー情報を取得するオプティカルフロー情報取得手段と、
前記画像が表示される画面の外側から前記画面内に出現する出現オブジェクト又は前記画面上に表示された画像に隠れた状態から出現する前景出現オブジェクトを前記オプティカルフロー情報に基づいて検出し、検出した前記出現オブジェクト又は前記前景出現オブジェクトの位置を示すオブジェクト領域指示信号を出力する出現オブジェクト検出手段と、
前記画面の大きさ及び前記画面を観視する観視者から前記画面までの距離を示す観視距離に対して跳躍性眼球運動を発生させる移動速度閾値以上の動き速度を有するオブジェクトを前記オプティカルフロー情報に基づいて検出したとき、検出した前記オブジェクトの位置を示す跳躍性眼球運動領域信号を出力する跳躍性眼球運動領域検出手段と、
前記オブジェクト領域指示信号又は前記跳躍性眼球運動領域信号が出力されている期間において前記画像信号の動領域の空間周波数帯域を制限して前記圧縮符号化処理装置に出力する信号帯域制限手段として機能させることを特徴とする圧縮符号化前置処理プログラム。
【請求項４】
前記圧縮符号化前置処理装置は、前記オブジェクト領域指示信号及び前記跳躍性眼球運動領域信号を入力する画像信号指示手段をさらに備え、
前記圧縮符号化前置処理プログラムは、前記コンピュータを、
さらに、前記圧縮符号化処理装置が出力する画像信号として、フレーム内符号化により符号化されるフレーム内符号化画像信号、再生時に先に再生されるフレーム画像信号を用いて符号化する順方向予測符号化により符号化されるフレーム間順方向予測符号化画像信号、又は再生時に先に再生されるフレーム画像信号と後に再生されるフレーム画像信号とを用いて符号化する双方向予測符号化により符号化される双方向予測符号化画像信号のいずれにするかを前記圧縮符号化処理装置に指示する画像信号指示手段として機能させることを特徴とする請求項３に記載の圧縮符号化前置処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、圧縮符号化する前の画像信号を処理する圧縮符号化前置処理装置及び圧縮符号化前置処理プログラムに関する。
【背景技術】
【０００２】
従来、観視者の視点の動きに着目して画像信号を処理する装置としては、観視者の眼球運動を検出する手段を備え、画面に表示された画像における視点位置近傍の領域に係る画像信号に割り当てる符号量を、他の領域に係る画像信号に割り当てる符号量よりも多くすることによって、復号時に利用者の感じる画質劣化を抑えるものが知られている（例えば、特許文献１及び２参照）。
【特許文献１】特開平７−４４１１０号公報
【特許文献２】特許第３９２４７９４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来のものは、頭部を固定した状態で観視者に動画像を観視させるものであり、観視者が頭部を動かした際の注視点の位置を自動測定する処理が困難な実現性の低いものであった。また、従来のものでは、対象画像における観視者の視覚特性に依存した汎用性の低い圧縮符号が得られるおそれがあった。
【０００４】
本発明は、従来の課題を解決するためになされたものであり、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる圧縮符号化前置処理装置及び圧縮符号化前置処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
本発明の圧縮符号化前置処理装置は、圧縮符号化する前の画像信号を処理して圧縮符号化処理装置に出力する圧縮符号化前置処理装置であって、入力した画像信号に係る画像から動きのある動領域を予め定めた方式で検出する動領域検出手段と、検出した前記動領域から動オブジェクトを抽出し、抽出した前記動オブジェクトのオプティカルフロー情報を取得するオプティカルフロー情報取得手段と、前記画像が表示される画面の外側から前記画面内に出現する出現オブジェクト又は前記画面上に表示された画像に隠れた状態から出現する前景出現オブジェクトを前記オプティカルフロー情報に基づいて検出し、検出した前記出現オブジェクト又は前記前景出現オブジェクトの位置を示すオブジェクト領域指示信号を出力する出現オブジェクト検出部と、前記画面の大きさ及び前記画面を観視する観視者から前記画面までの距離を示す観視距離に対して跳躍性眼球運動を発生させる移動速度閾値以上の動き速度を有するオブジェクトを前記オプティカルフロー情報に基づいて検出したとき、検出した前記オブジェクトの位置を示す跳躍性眼球運動領域信号を出力する跳躍性眼球運動領域検出部と、前記オブジェクト領域指示信号又は前記跳躍性眼球運動領域信号が出力されている期間において前記画像信号の動領域の空間周波数帯域を制限して前記圧縮符号化処理装置に出力する信号帯域制限手段とを備えた構成を有している。
【０００６】
この構成により、本発明の圧縮符号化前置処理装置は、オプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、跳躍性眼球運動により動オブジェクトに対する観視者の視覚が低下する期間において動オブジェクトを含む動領域の信号帯域を制限するので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００１１】
さらに、本発明の圧縮符号化前置処理装置は、前記オブジェクト領域指示信号及び前記跳躍性眼球運動領域信号を入力する画像信号指示手段をさらに備え、該画像信号指示手段は、前記圧縮符号化処理装置が出力する画像信号として、フレーム内符号化により符号化されるフレーム内符号化画像信号、再生時に先に再生されるフレーム画像信号を用いて符号化する順方向予測符号化により符号化されるフレーム間順方向予測符号化画像信号、又は再生時に先に再生されるフレーム画像信号と後に再生されるフレーム画像信号とを用いて符号化する双方向予測符号化により符号化される双方向予測符号化画像信号のいずれにするかを前記圧縮符号化処理装置に指示する構成を有している。
【００１２】
この構成により、本発明の圧縮符号化前置処理装置は、オプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、フレーム内符号化画像信号、フレーム間順方向予測符号化画像信号及び双方向予測符号化画像信号のいずれかを圧縮符号化時の画像信号として圧縮符号化処理装置に指示するので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００１３】
本発明の圧縮符号化前置処理プログラムは、圧縮符号化する前の画像信号を処理して圧縮符号化処理装置に出力する圧縮符号化前置処理装置としてコンピュータを機能させる圧縮符号化前置処理プログラムであって、前記コンピュータを、入力した画像信号に係る画像から動きのある動領域を予め定めた方式で検出する動領域検出手段と、検出した前記動領域から動オブジェクトを抽出し、抽出した前記動オブジェクトのオプティカルフロー情報を取得するオプティカルフロー情報取得手段と、前記画像が表示される画面の外側から前記画面内に出現する出現オブジェクト又は前記画面上に表示された画像に隠れた状態から出現する前景出現オブジェクトを前記オプティカルフロー情報に基づいて検出し、検出した前記出現オブジェクト又は前記前景出現オブジェクトの位置を示すオブジェクト領域指示信号を出力する出現オブジェクト検出手段と、前記画面の大きさ及び前記画面を観視する観視者から前記画面までの距離を示す観視距離に対して跳躍性眼球運動を発生させる移動速度閾値以上の動き速度を有するオブジェクトを前記オプティカルフロー情報に基づいて検出したとき、検出した前記オブジェクトの位置を示す跳躍性眼球運動領域信号を出力する跳躍性眼球運動領域検出手段と、前記オブジェクト領域指示信号又は前記跳躍性眼球運動領域信号が出力されている期間において前記画像信号の動領域の空間周波数帯域を制限して前記圧縮符号化処理装置に出力する信号帯域制限手段として機能させる構成を有している。
【００１４】
この構成により、本発明の圧縮符号化前置処理プログラムは、オプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、跳躍性眼球運動により動オブジェクトに対する観視者の視覚が低下する期間において動オブジェクトを含む動領域の信号帯域を制限するので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００１９】
さらに、本発明の圧縮符号化前置処理プログラムは、前記圧縮符号化前置処理装置は、前記オブジェクト領域指示信号及び前記跳躍性眼球運動領域信号を入力する画像信号指示手段をさらに備え、前記圧縮符号化前置処理プログラムは、前記コンピュータを、さらに、前記圧縮符号化処理装置が出力する画像信号として、フレーム内符号化により符号化されるフレーム内符号化画像信号、再生時に先に再生されるフレーム画像信号を用いて符号化する順方向予測符号化により符号化されるフレーム間順方向予測符号化画像信号、又は再生時に先に再生されるフレーム画像信号と後に再生されるフレーム画像信号とを用いて符号化する双方向予測符号化により符号化される双方向予測符号化画像信号のいずれにするかを前記圧縮符号化処理装置に指示する画像信号指示手段として機能させる構成を有している。
【００２０】
この構成により、本発明の圧縮符号化前置処理プログラムは、オプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、フレーム内符号化画像信号、フレーム間順方向予測符号化画像信号及び双方向予測符号化画像信号のいずれかを圧縮符号化時の画像信号として圧縮符号化処理装置に指示するので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【発明の効果】
【００２１】
本発明は、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができるという効果を有する圧縮符号化前置処理装置及び圧縮符号化前置処理プログラムを提供することができるものである。
【発明を実施するための最良の形態】
【００２２】
本発明の実施の形態について説明する前に、人間の視覚特性について説明する。
【００２３】
（１）中心視及び周辺視の説明
視覚には、中心視と周辺視とがある。中心視では、視力が高く、形や空間的な構造の詳細に関する感度が高いので、視標のテクスチャ、形態、色に関する情報が主に処理される。周辺視では、中心視よりも視力が低いが、空間座標の知覚や変動知覚の感度が高いので、視標の位置や運動に関する情報が処理される。
【００２４】
（２）滑動性追跡眼球運動及び跳躍性眼球運動の説明
動画像内の動物体の動きは、眼球運動による追随視により捉えられる。眼球運動による追随視としては、主に、滑動性追跡眼球運動（Smooth Pursuit）と、跳躍性眼球運動（Saccade）とが知られている。滑動性追跡眼球運動は、動視標に追随して眼球を動かす運動であり、視角が数度／秒以下の遅い視標動き速度に対して機能する。跳躍性眼球運動は、目標の位置に素早く眼球を動かす跳躍運動であり、滑動性追跡眼球運動で追随視できない速い視標動きに対して機能する。
【００２５】
（３）跳躍性眼球運動による追随視の説明
網膜の中心窩で捉えた視標が高速に動き、眼球が視標を中心窩で捉えられなくなると跳躍性眼球運動を生じる。以下、図１を用いて説明する。図１は、動き視標に対する跳躍性眼球運動時の眼球の応答を示す概念図である。初期状態として、観視者は、図１に示した時刻ｔ１において網膜の中心窩で視標を捉えているものとする。時刻ｔ１から時間が進むに従って視標が移動することにより視標が中心窩から外れ、視力の低下が生じる。そして、視標は中心窩から十分に外れた位置まで移動する。
【００２６】
このとき、跳躍性眼球運動を生じる時刻ｔ３は、眼球が視標を中心窩で捉えられなくなった時刻（十分に速い動きでは、≒ｔ１）から約１５０ｍｓｅｃ〜２００ｍｓｅｃ後となる。また、跳躍性眼球運動が起こる５０ｍｓｅｃ前から跳躍性眼球運動が起こる瞬間（時刻ｔ３）までは、視覚信号は抑制されており、動き指標は見えなくなる。この視標が見えなくなる時刻をｔ２とする。続いて、時刻ｔ３からｔ４までの約５０ｍｓｅｃ〜１００ｍｓｅｃの期間は、眼球が物体の動きに応答する立ち上がり期間であり、観視者の視力はかなり低下している。したがって、図１に示した時刻ｔ２からｔ４までの期間は、跳躍性眼球運動によりほとんど動き視標が見えない期間であると考えられる。
【００２７】
（４）注視の説明
図２は、高速動き視標に対する跳躍性眼球運動時の眼球運動を示す概念図である。図中の実線は時間変位に対する視標位置を示し、図中の破線は時間変位に対する視線位置を示す。図２に示すように、高速動き視標を追随視する際には、跳躍性眼球運動により眼球を跳躍させながら視標の追随を行う。そして視標位置と視線位置とが一瞬一致した際、観視者は、動き視標を高い視力で捉えることができる。
【００２８】
動画像フレーム内で視標が移動する場合、眼球運動によって動画像を注視する運動は、下記のような運動の繰り返しによるものと考えられる。
【００２９】
（Ａ）初期状態において注視点を中心視で捉えている場合、（ａ）視標が高速で動くときは、目が視標を中心窩で捉えられなくなると、跳躍性眼球運動を生じて動き視標を中心視で捉えようとし、（ｂ）視標が低速で動くときは、滑動性追跡眼球運動により、動き視標を中心視で捉えようとする。また、（Ｂ）初期状態において注視点を周辺視で捉えた場合、周辺視で注視すべき対象に気づき、跳躍性眼球運動で中心視野を対象に合わせてから、中心視で対象の詳細を把握する。
【００３０】
以上より、圧縮符号化における跳躍性眼球運動を生じるような動き部位について、跳躍性眼球運動を起こす約５０ｍｓｅｃから跳躍性眼球運動後約１００ｍｓｅｃの期間は、大きな帯域制限や精度・確度の低い動き補償を施しても、劣化（原画像に対してぼけやブロック歪等）が目立ちにくいといえる。逆にそれ以後の期間は、観視者は跳躍性眼球運動しながら速い動きを追随視し、眼球運動速度と動画像内動き速度が一致した任意箇所で劣化を認識する可能性があるため、動き部位だからといって安易に撮像・表示蓄積ボケ等により高周波成分が失われた分以上の帯域制限を施したり、精度や確度の低い動き補償を行ったりしないのが好ましいことが分かる。
【００３１】
次に、本発明に係る圧縮符号化前置処理装置の一実施の形態における構成について説明する。本実施の形態における圧縮符号化前置処理装置は、予め定めた大きさの画面に動画像を表示するための動画像信号を出力する画像信号出力装置と、所定の画像圧縮符号化方式で動画像信号を圧縮符号化する圧縮符号化処理装置との間に設けられるものである。
【００３２】
なお、以下の説明において、圧縮符号化処理装置は、ＭＰＥＧ（Moving Picture Coding Experts Group）−２方式に基づいて動画像信号を圧縮符号化するものとするが、これに限定されるものではなく、ＭＰＥＧ−４やＨ．２６４等の動画像圧縮規格を用いるものにも適用できる。また、時刻ｔにおける動画像フレームを動画像フレームＦ（ｔ）、動画像フレームＦ（ｔ）の画素位置（ｉ，ｊ）における画素値をＦｉ,ｊ（ｔ）と記す。
【００３３】
図３に示すように、本実施の形態における圧縮符号化前置処理装置１０は、画像信号を記憶するフレームメモリ１１と、クロック信号を発生するクロック信号発生器１２と、シーンチェンジを検出するシーンチェンジ検出部１３と、動画像が含まれる動領域を検出して動領域画像信号２０を出力する動領域検出部１４とを備えている。
【００３４】
また、圧縮符号化前置処理装置１０は、動領域画像信号２０に基づいて動ベクトルを検出する動ベクトル検出部１５と、画面上に出現する出現オブジェクトを検出する出現オブジェクト検出部１６と、跳躍性眼球運動領域を検出する跳躍性眼球運動領域検出部１７と、信号帯域を制限する信号帯域制限部１８と、ピクチャを切り替えるピクチャ切替部１９とを備えている。なお、圧縮符号化前置処理装置１０は、例えばコンピュータで構成され、所定のプログラムに基づいて動作するものである。
【００３５】
フレームメモリ１１は、フレームメモリ１１ａ〜１１ｄを含み、クロック信号発生器１２が発生するクロック信号に基づいて、図示しない画像信号出力装置から入力した動画像信号をフレーム毎に記憶するようになっている。なお、フレームメモリ１１ｃに記憶された画像信号を、時刻ｔにおける符号化対象フレームの画像信号として以下説明する。
【００３６】
クロック信号発生器１２は、予め定めた周波数のクロック信号（ＣＬＫ信号と図示）を発生するようになっており、このクロック信号に基づいてフレームメモリ１１に記憶された画像信号がシフトされる。
【００３７】
シーンチェンジ検出部１３は、時刻ｔにおける符号化対象フレームの前後フレームの差分情報に基づき、シーンチェンジ（場面変化）を検出するようになっている。具体的には、シーンチェンジ検出部１３は、フレームメモリ１１ｃに記憶された画像信号と、フレームメモリ１１ｂに記憶された画像信号とを比較して両者間の差分情報を取得し、両者間に差がある場合はシーンチェンジがあったものと判定して、フレームメモリ１１に記憶した画像信号をシフトするためのクロック制御信号（ＣＬＫ制御信号と図示）をクロック信号発生器１２に出力するようになっている。
【００３８】
動領域検出部１４は、シーンチェンジがない場合、シーンチェンジ検出部１３から画像信号を入力し、入力した画像信号において動きのある領域を示す動領域を検出するようになっている。具体的には、動領域検出部１４は、例えば、フレームＦの時間軸上の位置をｔとすると、その前後ｔ±ｑフレームを含む入力画像フレーム列Ｆ（ｔ）；−ｑ≦ｔ≦ｑに対して、時間軸方向に１階１次元離散ウェーブレット分解を行い、その高周波成分を得ることで原画像フレーム列から動領域画像フレーム列の画像信号を抜き出すようになっている。
【００３９】
また、動領域検出部１４は、抜き出した動領域画像フレーム列の画像信号を示す動領域信号２０を動ベクトル検出部１５に出力するようになっている。図１においては、シーンチェンジがない場合の、フレームメモリ１１ａ〜１１ｄにそれぞれ記憶された動領域画像信号２０を動領域画像信号２０ａ〜２０ｄとして示している。なお、動領域検出部１４は、本発明に係る動領域検出手段を構成する。
【００４０】
動ベクトル検出部１５は、動ベクトル検出部１５ａ〜１５ｃを備え、動領域画像信号２０から動きのあるオブジェクト（動オブジェクト）の信号を抽出し、オブジェクトの動きを示す動ベクトルを検出するようになっている。具体的には、例えば、動ベクトル検出部１５ａは、動領域画像信号２０ａと動領域画像信号２０ｂとに対して空間方向にｎ階２次元離散ウェーブレット分解を行い、各ｎ階における低周波成分と、水平・垂直・対角方向の高周波成分とを求め、動領域画像信号２０ａと動領域画像信号２０ｂとの間におけるオブジェクトの動ベクトルの検出を階層的に行うものである。
【００４１】
また、動ベクトル検出部１５は、検出したフレーム間の動ベクトルを用いてオブジェクトの抽出及び追跡を行い、画面上におけるオブジェクトの各点の動き場情報であるオプティカルフロー情報を含む信号を出現オブジェクト検出部１６及び跳躍性眼球運動領域検出部１７に出力するようになっている。なお、動ベクトル検出部１５は、本発明に係る動オブジェクト抽出手段及びオプティカルフロー情報取得手段を構成する。
【００４２】
出現オブジェクト検出部１６は、オプティカルフロー情報に基づき、出現オブジェクトの位置を検出し、出現オブジェクトの位置を示す信号をＯＢＪ（OBJect）領域指示信号として信号帯域制限部１８及びピクチャ切替部１９に出力するようになっている。ここで、出現オブジェクトとは、画面外から画面内に出現（フレームイン）するオブジェクト（出現オブジェクト）や、画面上に表示された障害物の画像に隠れた（オクルージョン）状態から現れたオブジェクト（前景出現オブジェクト）を総称したものをいう。なお、出現オブジェクト検出部１６は、本発明に係る動オブジェクト抽出手段を構成する。
【００４３】
跳躍性眼球運動領域検出部１７は、オプティカルフロー情報に基づき、跳躍性眼球運動を生じさせるような動き速度を持ったオブジェクトの動き位置を検出し、該当するオブジェクトの位置を示す信号をＳ（Saccade）領域指示信号として信号帯域制限部１８及びピクチャ切替部１９に出力するようになっている。ここで、跳躍性眼球運動領域検出部１７は、オプティカルフロー情報で示されるオブジェクトの移動速度と、画像を表示する画面の大きさ及び標準観視距離に基づいて予め定めた移動速度閾値とを比較し、オブジェクトの移動速度が移動速度閾値よりも大きいとき、当該オブジェクトが跳躍性眼球運動を行っていると判断するようになっている。なお、標準観視距離とは、視力１．０の観視者により画素構造が知覚されない視角１分に対して１画素となる視距離をいう。
【００４４】
以下、画像を表示する画面の大きさ及び標準観視距離と、跳躍性眼球運動との関係について図４を用いて説明する。
【００４５】
人間の視覚特性についての説明において述べたように、滑動性追跡眼球運動は視角が数度／秒以下の遅い視標動き速度に対して機能するものであるので、以下の説明では１０度／秒以上の動きで跳躍性眼球運動が発生するものとする。
【００４６】
図４は、ＳＨＶ（Super Hi-Vision）、ＨＤＴＶ（Hi-Vision TV）、ＮＴＳＣ（National Television Standards Committee）の各映像方式において、各画面を構成する画素数と、標準観視距離と、標準観視距離での画角とを示したものである。
【００４７】
各映像方式において、撮影画角が同じになるようカメラで被写体を撮影し、その動画像を標準観視距離で観視する場合、跳躍性眼球運動が発生するフレーム間の動き速度は以下のようになる。
（１）ＳＨＶの場合：１００［度］／１０［度／秒］＝１０［秒］
（２）ＨＤＴＶの場合：３０［度］／１０［度／秒］＝３［秒］
（３）ＮＴＳＣの場合：１０［度］／１０［度／秒］＝１［秒］
【００４８】
すなわち、各映像方式において上記の秒数以下で画面を横断する速い動きにおいて、跳躍性眼球運動が発生するといえる。カメラで同じ画角で被写体を撮影した場合、視距離の関係上、ＳＨＶではＨＤＴＶの約３．３倍、ＮＴＳＣの約１０倍の動き速度となり、より跳躍性眼球運動が発生しやすいことが分かる。
【００４９】
以下、ＨＤＴＶで現在標準的に用いられている、社団法人テレビジョン学会が作成した「ハイビジョン・システム評価用標準動画像（以下、ＩＴＥ標準動画像）」と、同法人が発行する「ハイビジョン・システム評価用標準動画像  統計量測定解説書（以下、解説書）」を参考にする。
【００５０】
上記解説書では、ＩＴＥ標準動画像の６０シーケンスの各動画像シーケンスのフレーム間動きベクトル値が示されている。同書によると、テレビジョン画像では一般に最も速い動きが、画面を１秒間で横切るような動きであり、平均的な動きは画面を数秒間で横切るような動きと言われている。例えば、ＨＤＴＶにおいて、最も速い動きとしては１フィールド間で１９２０［画素］／（６０×１）［フィールド（１秒）］＝３２［画素／フィールド］の動き速度である。また、ＨＤＴＶでの平均的な動きとしては画面を５秒で横切るとすると、１９２０［画素］／（６０×５）［フィールド］＝６．４［画素／フィールド］である。
【００５１】
前述のように跳躍性眼球運動が発生する動き速度を１０［度／秒］とすると、ＨＤＴＶにおいて画面を横切る時間は３秒なので、そのときの動き速度は、１９２０［画素］／（６０×３）［フィールド（３秒）］＝１０．７［画素／フィールド］である。
【００５２】
一方、ＳＨＶカメラで同じ画角で被写体を撮影したとすると、画面を数秒間（例えば５秒間）で横切るような平均的な動きでは、１フレーム間で７６８０［画素］／（６０×５）［フレーム（５秒）］＝２５．６［画素／フレーム］となる。また、跳躍性眼球運動が発生する動き速度を１０［度／秒］とすると、ＳＨＶにおいて画面を横切る時間は１０秒なので、そのときの動き速度は、７６８０［画素］／（６０×１０）［フレーム（１０秒）］＝１２．８［画素／フレーム］となる。
【００５３】
前述のように、映像方式によって画面の大きさが異なるので、予め定めた画面の大きさ及び観視距離に対して、跳躍性眼球運動による注視点移動が起こると考えられるような動き速度を移動速度閾値として定めておく。例えば、ＳＨＶにおける移動速度閾値として前述の１２．８［画素／フレーム］を用いる。跳躍性眼球運動領域検出部１７は、この移動速度閾値以上の動き速度を有するオブジェクトが検出された場合、当該オブジェクトが跳躍性眼球運動を行っていると判断し、当該オブジェクトに関するＳ領域指示信号を出力するようになっている。ここで、Ｓ領域指示信号が示すＳ領域は、オブジェクトが表示される領域としてもよいが、オブジェクトが表示される領域に所定数の画素数の広がりを加えたオブジェクト周辺の領域を含むものとしてもよい。
【００５４】
図３に戻り、構成の説明を続ける。信号帯域制限部１８は、ＯＢＪ領域指示信号及びＳ領域指示信号に基づいて、画像信号の空間周波数帯域を制限し、当該画像信号から予め定めた周波数以上の高域成分を除去するようになっている。また、信号帯域制限部１８は、制限した空間周波数帯域の信号成分を含む画像信号を圧縮符号化処理装置に出力するようになっている。なお、信号帯域制限部１８は、本発明に係る信号帯域制限手段を構成する。
【００５５】
具体的には、信号帯域制限部１８は、以下に示すように動作するものである。
まず、信号帯域制限部１８は、跳躍性眼球運動領域検出部１７からＳ領域指示信号が出力されている期間、すなわち、観視者の視力が跳躍性眼球運動により低下する期間において、Ｓ領域内における画像信号の空間周波数帯域を制限するようになっている。なお、跳躍性眼球運動が単調なパターンで繰り返される場合は、観視者が跳躍性眼球運動しながら速い動きを追随視できる可能性があるので、信号帯域制限部１８は、例えば初回の空間周波数帯域のみを行うよう構成するのが好ましい。
【００５６】
また、信号帯域制限部１８は、出現オブジェクト検出部１６からＯＢＪ領域指示信号が出力されている期間であって、画面外から画面内にフレームインするオブジェクト領域を周辺視で観視すると想定される時から跳躍性眼球運動により当該オブジェクト領域に中心視野を移動すると想定される時までの期間において、フレームインするオブジェクト領域近傍における画像信号の空間周波数帯域を制限するようになっている。
【００５７】
同様に、信号帯域制限部１８は、出現オブジェクト検出部１６からＯＢＪ領域指示信号が出力されている期間であって、背景から前景に出現するオブジェクト領域を周辺視で観視すると想定される時から跳躍性眼球運動により当該オブジェクト領域に中心視野を移動すると想定される時までの期間において、当該オブジェクト領域近傍における画像信号の空間周波数帯域を制限するようになっている。
【００５８】
さらに、信号帯域制限部１８は、ＯＢＪ領域指示信号及びＳ領域指示信号を入力しない場合は、画像信号の空間周波数帯域を制限せず、フレームメモリ１１から入力した画像信号をそのまま圧縮符号化処理装置に出力するようになっている。
【００５９】
ピクチャ切替部１９は、ＯＢＪ領域指示信号及びＳ領域指示信号に基づき、圧縮符号化処理装置が使用するピクチャタイプを切り替えるためのピクチャ切替制御信号を圧縮符号化処理装置に出力するようになっている。すなわち、本実施の形態では、圧縮符号化処理装置がＭＰＥＧ−２方式を用いるものとしているので、ピクチャ切替部１９は、現在符号化を行いたいフレームの画像信号をＩピクチャ（フレーム内符号化画像信号）、Ｐピクチャ（フレーム間順方向予測符号化画像信号）、Ｂピクチャ（双方向予測符号化画像信号）のいずれにするかを指定する信号を出力するようになっている。
【００６０】
具体的には、ピクチャ切替部１９は、跳躍性眼球運動による注視点移動が起こると考えられるような場合、例えば大きなオブジェクトが画面上を動く場合や、画面全体でパンニングが実行される場合は、跳躍性眼球運動が生じ視覚情報が抑制・視力低下していると考えられる期間、Ｂピクチャ等の圧縮効率の高い圧縮符号化を用いるよう指示するピクチャ切替制御信号を圧縮符号化処理装置に出力するようになっている。
【００６１】
一方、ピクチャ切替部１９は、滑動性追跡眼球運動に近い動きや、高速動きでも跳躍性眼球運動を繰り返すことで中心視により動物体を追随視する可能性がある長時間動きの場合は、フレーム間相関が高く動ベクトルの検出確度が高いＰピクチャや、Ｉピクチャを用いるよう指示するピクチャ切替制御信号を圧縮符号化処理装置に出力するようになっている。なお、ピクチャ切替部１９は、本発明に係る画像信号指示手段を構成する。
【００６２】
次に、本実施の形態における圧縮符号化前置処理装置１０の動作について図３を用いて説明する。
【００６３】
図示しない画像信号出力装置から入力した画像信号は、クロック信号に基づいて、フレーム毎にフレームメモリ１１ａ〜１１ｄに記憶される。
【００６４】
シーンチェンジ検出部１３は、時刻ｔにおける符号化対象フレームの画像信号であるフレームメモリ１１ｃに記憶された画像信号と、フレームメモリ１１ｂに記憶された画像信号とを比較して両者間の差分情報を取得する。このとき、シーンチェンジ検出部１３は、両者間に差がある場合はシーンチェンジがあったものと判定し、クロック制御信号をクロック信号発生器１２に出力する。その結果、フレームメモリ１１に記憶された画像信号がシフトされる。一方、シーンチェンジ検出部１３は、両者間に差がない場合はシーンチェンジがないものと判定し、画像信号を動領域検出部１４に出力する。
【００６５】
動領域検出部１４は、シーンチェンジ検出部１３から画像信号を入力し、入力した画像信号における動領域を検出する。この動領域検出部１４による動領域の検出について図５を用いて具体的に説明する。なお、図５に示したＦ（ｔ＋３）を動領域の検出対象として説明する。
【００６６】
動領域検出部１４は、例えばDaubechiesの２次のウェーブレット（サポート長＝４）を用いて、図５（ａ）及び（ｂ）の模式図に示すようにＦ（ｔ）、Ｆ（ｔ＋１）、Ｆ（ｔ＋２）、Ｆ（ｔ＋３）からなる動画像フレーム列の時間軸方向の時系列データに対して１階１次元離散ウェーブレット分解を行い、その高周波成分であるＭＡ（ｔ）を算出する。すなわち、ＭＡ（ｔ）は、サポート長４フレーム分の時系列変化の成分を含むものである。
【００６７】
同様に、Ｆ（ｔ＋２）、Ｆ（ｔ＋３）、Ｆ（ｔ＋４）、Ｆ（ｔ＋５）からなる時間軸方向の時系列データからＭＡ（ｔ＋２）を算出する。
【００６８】
そして、ＭＡ（ｔ）とＭＡ（ｔ＋２）とのＡＮＤ計算を行うことによって、ＭＡ（ｅｖｅｎ）を算出する。
【００６９】
また、Ｆ（ｔ＋１）、Ｆ（ｔ＋２）、Ｆ（ｔ＋３）、Ｆ（ｔ＋４）からなる時間軸方向の時系列データから、同様にＭＡ（ｔ＋１）を算出する。
【００７０】
次に、Ｆ（ｔ＋３）、Ｆ（ｔ＋４）、Ｆ（ｔ＋５）、Ｆ（ｔ＋６）からなる時間軸方向の時系列データから、同様にＭＡ（ｔ＋３）を算出する。
【００７１】
そして、ＭＡ（ｔ＋１）とＭＡ（ｔ＋３）とのＡＮＤ計算を行うことによって、ＭＡ（ｏｄｄ）を算出する。
【００７２】
次に、ＭＡ（ｅｖｅｎ）とＭＡ（ｏｄｄ）とのＡＮＤ計算を行って２値化処理を行い、Ｍａ（ｔ）を算出し、Ｆ（ｔ＋３）とＭａ（ｔ）とのＡＮＤ計算を行うことによって、１フレーム分の動領域画像フレーム列Ｍ（ｔ）を算出する。
【００７３】
続いて、動ベクトル検出部１５は、図６に示すように、動領域画像フレーム列Ｍ（ｔ）の各フレームに対して空間方向にｎ階２次元離散ウェーブレット分解を行い、各ｎ階における低周波成分Ｍ＿ＬＬｎ（ｔ）と、水平・垂直・対角方向の高周波成分Ｍ＿ＬＨｎ（ｔ）・Ｍ＿ＨＬｎ（ｔ）・Ｍ＿ＨＨｎ（ｔ）とを得る。
【００７４】
また、動ベクトル検出部１５は、動領域画像フレーム列Ｍ（ｔ）の時刻ｔにおけるフレームＭ（ｔ）を基準フレームとし、時刻ｔ＋１におけるフレームＭ（ｔ＋１）を参照フレームとして、フレームＭ（ｔ）とＭ（ｔ＋１）との間で動ベクトルの検出を階層的に行う。ここで、動ベクトル検出部１５による動ベクトルの検出処理について図７を用いて詳細に説明する。図７は、動ベクトル検出部１５が実行する動ベクトルの検出処理を示すフローチャートである。なお、対象とする動画像フレームＦ（ｔ）が０≦ｔ≦Ｔの時間範囲にあるものとする。
【００７５】
まず、時刻ｔを"０"に初期化し（ステップＳ１０）、ウェーブレット分解の階層を示すインデックスｎを"１"に初期化する（ステップＳ１１）。
【００７６】
次に、低周波成分Ｍ＿ＬＬｎ（ｔ）と低周波成分Ｍ＿ＬＬｎ（ｔ＋１）との間でブロックマッチング法を用いて、低周波成分Ｍ＿ＬＬｎ（ｔ）の画素位置（ｉ，ｊ）に対応する動ベクトルＶｎｉ，ｊ（ｔ）の検出を行う（ステップＳ１２）。
【００７７】
次に、低周波成分Ｍ＿ＬＬｎ（ｔ）、水平高周波成分Ｍ＿ＬＨｎ（ｔ）、垂直高周波成分Ｍ＿ＨＬｎ（ｔ）及び対角高周波成分Ｍ＿ＨＨｎ（ｔ）の画素位置（ｉ，ｊ）における画素値Ｍ＿ＬＬｎｉ，ｊ（ｔ）、Ｍ＿ＬＨｎｉ，ｊ（ｔ）、Ｍ＿ＨＬｎｉ，ｊ（ｔ）、Ｍ＿ＨＨｎｉ，ｊ（ｔ）でＶｎｉ，ｊ（ｔ）ずれた画素位置における画素値を置換し、動き補正低周波成分Ｍ'＿ＬＬｎ（ｔ）、動き補正水平高周波成分Ｍ'＿ＬＨｎ（ｔ）、動き補正垂直高周波成分Ｍ'＿ＨＬｎ（ｔ）及び動き補正対角高周波成分Ｍ'＿ＨＨｎ（ｔ）を算出する（ステップＳ１３）。
【００７８】
次に、動き補正低周波成分Ｍ'＿ＬＬｎ（ｔ）、動き補正水平高周波成分Ｍ'＿ＬＨｎ（ｔ）、動き補正垂直高周波成分Ｍ'＿ＨＬｎ（ｔ）及び動き補正対角高周波成分Ｍ'＿ＨＨｎ（ｔ）を１階再構成して、動き補正低周波成分Ｍ'＿ＬＬｎ−１（ｔ）を算出する（ステップＳ１４）。
【００７９】
次に、低周波成分Ｍ＿ＬＬｎ−１（ｔ）を動き補正低周波成分Ｍ'＿ＬＬｎ−１（ｔ）で置換する（ステップＳ１５）。
【００８０】
次に、ウェーブレット分解の階層を示すインデックスｎが最大値Ｎに到達したか否かを判定し（ステップＳ１６）、否定判定した場合はインデックスｎをインクリメントして（ステップＳ１７）、ステップＳ１２の処理に戻る。
【００８１】
ステップＳ１６において、インデックスｎが最大値Ｎに到達したと判定した場合は、［数１］より、元の動領域画像Ｍ（ｔ）に対する動ベクトルＶ０ｉ，ｊ（ｔ）を算出する（ステップＳ１８）。
【００８２】
【数１】
0004891938.tif 000002
【００８３】
次に、時刻ｔが時刻Ｔに到達したか否かを判定し（ステップＳ１９）、否定判定したときは時刻ｔをインクリメントして（ステップＳ２０）、ステップＳ１１の処理に戻る。
【００８４】
ステップＳ１９において、時刻ｔが時刻Ｔに到達したと判定した場合は、動ベクトルの検出処理を終了する。
【００８５】
引き続き、動ベクトル検出部１５は、Ｆ（ｔ０）上の任意画素位置（ｋ，ｍ）において、フレーム間の動ベクトルＶ０ｉ，ｊ（ｔ）を用い、Ｆ（ｔ）；−ｑ≦ｔ≦ｑにおける動きを追跡する。この時系列のオプティカルフロー（画面上の各点の動き場）情報から、動ベクトル検出部１５は、オブジェクトの抽出・追跡を行う。
【００８６】
具体的には、動ベクトル検出部１５は、動ベクトルＶ０ｉ，ｊ（ｔ'）（１≦ｉ≦Ｉ、１≦ｊ≦Ｊ、ｔ０−ｑ≦ｔ'）を用いて、動画像フレームＦ（ｔ）の画素位置（ｉ，ｊ）の動きを時刻ｔ０からｔ０−ｑに渡って時間軸マイナス方向に追跡する。さらに、動ベクトルＶ０ｉ，ｊ（ｔ'）（１≦ｉ≦Ｉ、１≦ｊ≦Ｊ、ｔ'≦ｔ０＋ｑ）を用いて、動画像フレームＦ（ｔ）の画素位置（ｉ，ｊ）の動きを時刻ｔ０からｔ０＋ｑに渡って時間軸プラス方向に追跡する。
【００８７】
次に、動画像フレームＦ（ｔ）の画素位置（ｉ，ｊ）の追跡結果に基づいて、動ベクトルＶ０ｉ，ｊ（ｔ'）（ｔ０−ｑ≦ｔ'≦ｔ０＋ｑ）の絶対値が最小となる時刻ｔｓと、追跡位置（ｋ，ｍ）とを決定する。また、連続するフレーム間における同一オブジェクトの動き方向はほぼ連続していると考えられるので、動ベクトル検出部１５は、動ベクトルＶ０ｉ，ｊ（ｔ'）（ｔ０−ｑ≦ｔ'≦０）において動ベクトル値及びオブジェクト位置を追跡し、オブジェクトがフレームインする時刻を出現オブジェクト時刻ｔ＿ｉｎとして決定する。また、動ベクトル検出部１５は、動ベクトルＶ０ｉ，ｊ（ｔ）とＶ０ｉ，ｊ（ｔ−１）との内積を計算し、計算で求めた内積値と予め定めた閾値ｔｈとを比較する。この閾値ｔｈは、動ベクトルの動きの連続性を判定するためのものであり、内積値が閾値ｔｈより大きければ動ベクトルの動きの連続性が損なわれていることを示す。内積値が閾値ｔｈより大きい場合、オブジェクトが背景から前景に現れる等の動きがあったと推測されるため、動ベクトル検出部１５は、該当時刻を出現オブジェクト時刻ｔ＿ａｐｐｅａｒとして決定する。
【００８８】
図３に戻り、動作の説明を続ける。出現オブジェクト検出部１６は、動ベクトル検出部１５が出現オブジェクト時刻ｔ＿ｉｎやｔ＿ａｐｐｅａｒを決定した場合、出現オブジェクトが検出されたと判断し、出現オブジェクトの位置を示すＯＢＪ領域指示信号を信号帯域制限部１８及びピクチャ切替部１９に出力する。
【００８９】
並行して、跳躍性眼球運動領域検出部１７は、動ベクトル検出部１５が出力するオプティカルフロー情報及び移動速度閾値に基づき、跳躍性眼球運動を生じさせるような動き速度を持ったオブジェクトの動き位置を検出し、該当するオブジェクトを検出した場合はそのオブジェクトの位置を示すＳ領域指示信号を信号帯域制限部１８及びピクチャ切替部１９に出力する。
【００９０】
次に、信号帯域制限部１８は、出現オブジェクト検出部１６からのＯＢＪ領域指示信号、又は跳躍性眼球運動領域検出部１７からのＳ領域指示信号のいずれかを入力した場合は、検出されたオブジェクトの表示位置付近の画像の空間周波数帯域を制限し、所定の高周波成分を除去した画像信号を圧縮符号化処理装置に出力する。一方、信号帯域制限部１８は、ＯＢＪ領域指示信号及びＳ領域指示信号を入力しない場合は、画像信号の空間周波数帯域を制限せず、フレームメモリ１１から入力した画像信号をそのまま圧縮符号化処理装置に出力する。
【００９１】
並行して、ピクチャ切替部１９は、出現オブジェクト検出部１６からのＯＢＪ領域指示信号、又は跳躍性眼球運動領域検出部１７からのＳ領域指示信号のいずれかを入力した場合は、圧縮符号化処理装置の圧縮符号化において、現在符号化を行いたいフレームの画像信号をＩピクチャ、Ｐピクチャ、Ｂピクチャのいずれにするかを指定するためのピクチャ切替制御信号を出力する。一方、ピクチャ切替部１９は、ＯＢＪ領域指示信号及びＳ領域指示信号を入力しない場合は、ピクチャ切替制御信号を出力しない。
【００９２】
なお、動作説明において述べた各処理をプログラミングし、当該プログラムによってコンピュータを動作させることにより、当該プログラムは、コンピュータを圧縮符号化前置処理装置１０として機能させることができる。この場合、コンピュータは、図３に示した構成を有することとなる。
【００９３】
以上のように、本実施の形態における圧縮符号化前置処理装置１０によれば、オプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、跳躍性眼球運動により動オブジェクトに対する観視者の視覚が低下する期間において動オブジェクトを含む動領域の信号帯域を制限する構成としたので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００９４】
また、本実施の形態における圧縮符号化前置処理装置１０によれば、出現オブジェクトのオプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、観視者が出現オブジェクトの領域を周辺視で観視すると想定される時から跳躍性眼球運動により出現オブジェクトの領域に中心視野を移動すると想定される時までの期間において出現オブジェクトを含む動領域の信号帯域を制限する構成としたので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００９５】
また、本実施の形態における圧縮符号化前置処理装置１０によれば、前景出現オブジェクトのオプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、観視者が前景出現オブジェクトの領域を周辺視で観視すると想定される時から跳躍性眼球運動により前景出現オブジェクトの領域に中心視野を移動すると想定される時までの期間において前景出現オブジェクトを含む動領域の信号帯域を制限する構成としたので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００９６】
また、本実施の形態における圧縮符号化前置処理装置１０によれば、オプティカルフロー情報及び跳躍性眼球運動による注視点移動を考慮して、フレーム内符号化画像信号、フレーム間順方向予測符号化画像信号及び双方向予測符号化画像信号のいずれかを圧縮符号化時の画像信号として圧縮符号化処理装置に指示する構成としたので、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができる。
【００９７】
特に、圧縮符号化前置処理装置１０は、広視野映像システムにおいて大きな効果を得ることができる。具体的には、画面内の動きオブジェクトが動く時間は一般的に平均１秒程度であって、跳躍性眼球運動により画面上の動領域の帯域制限を行う期間は約１５０〜２５０ｍｓｅｃ程度であり、画面内の動領域（一般にフレーム内の約６割〜８割）の殆どはＳＨＶでは跳躍性眼球運動で追うこととなるので、広視野・超高精細映像であるＳＨＶでは本発明の効果が非常に高いと言える。
【産業上の利用可能性】
【００９８】
以上のように、本発明に係る圧縮符号化前置処理装置及び圧縮符号化前置処理プログラムは、観視者の視覚特性に依存しない汎用性の高い高圧縮符号を効率的に得ることができるという効果を有し、圧縮符号化する前の画像信号を処理する圧縮符号化前置処理装置及び圧縮符号化前置処理プログラム等として有用である。
【図面の簡単な説明】
【００９９】
【図１】動き視標に対する跳躍性眼球運動時の眼球の応答を示す概念図
【図２】跳躍性眼球運動時の高速動き視標に対する眼球運動を示す概念図
【図３】本発明に係る圧縮符号化前置処理装置の一実施の形態における構成を示すブロック図
【図４】ＳＨＶ、ＨＤＴＶ及びＮＴＳＣの各映像方式で画面を構成する画素数と、標準観視距離と、標準観視距離での画角とを示す図
【図５】本発明に係る圧縮符号化前置処理装置の一実施の形態において、動領域検出部による動領域の検出についての説明図
【図６】本発明に係る圧縮符号化前置処理装置の一実施の形態において、動ベクトル検出部が動領域画像フレーム列Ｍ（ｔ）に対して行うｎ階２次元離散ウェーブレット分解の模式図
【図７】本発明に係る圧縮符号化前置処理装置の一実施の形態において、動ベクトル検出部が実行する動ベクトルの検出処理を示すフローチャート
【符号の説明】
【０１００】
１０  圧縮符号化前置処理装置
１１（１１ａ〜１１ｄ）  フレームメモリ
１２  クロック信号発生器
１３  シーンチェンジ検出部
１４  動領域検出部（動領域検出手段）
１５（１５ａ〜１５ｃ）  動ベクトル検出部（動オブジェクト抽出手段、オプティカルフロー情報取得手段）
１６  出現オブジェクト検出部（動オブジェクト抽出手段）
１７  跳躍性眼球運動領域検出部
１８  信号帯域制限部（信号帯域制限手段）
１９  ピクチャ切替部（画像信号指示手段）
２０（２０ａ〜２０ｄ）  動領域画像信号
【図１】
0004891938.tif 000003
【図２】
0004891938.tif 000004
【図３】
0004891938.tif 000005
【図４】
0004891938.tif 000006
【図５】
0004891938.tif 000007
【図６】
0004891938.tif 000008
【図７】
0004891938.tif 000009