(57)【特許請求の範囲】
【請求項１】
三次元ＣＧデータまたは画像オブジェクトで構成された映像の動きを調整する映像調整装置であって、
鑑賞条件情報及び鑑賞者操作情報の両方、若しくはいずれか１を入力する入力手段と、
映像の動きの特徴成分を特定する特定手段と、
前記特定手段により特定した映像の動きの特徴成分を調整する調整手段と、を有し、
前記映像の動きの特徴成分が、映像の動きのデータの基本波の極値部分であり、
前記調整手段による調整は、前記極値部分の波形を変化させて映像の動きの速度変化パターンを変えることであることを特徴とする映像調整装置。
【請求項２】
三次元ＣＧデータまたは画像オブジェクトで構成された映像の動きを調整する映像調整装置であって、
鑑賞条件情報及び鑑賞者操作情報の両方、若しくはいずれか１を入力する入力手段と、
映像の動きの特徴成分を特定する特定手段と、
前記特定手段により特定した映像の動きの特徴成分を調整する調整手段と、を有し、
前記映像の動きの特徴成分が、映像の動きのデータの波形の基本波の周波数よりも高い周波数部分であり、
前記調整手段による調整は、前記周波数部分の振幅を調整することであることを特徴とする映像調整装置。
【請求項３】
前記鑑賞条件情報の入力手段は、映像の動きのデータ作成時の画面サイズを入力する基準画面サイズ入力手段と、映像を映し出す表示画面サイズを入力する表示画面サイズ入力手段と、を有することを特徴とする請求項１〜２のいずれかに記載の映像調整装置。
【請求項４】
前記鑑賞者操作情報の入力手段は、調整モードの選択を鑑賞者に促してモード選択を受け付ける調整モード選択受付手段を有することを特徴とする請求項１〜２のいずれかに記載の映像調整装置。
【請求項５】
前記調整手段は、鑑賞条件情報と映像表示条件調整テーブルとから決定された調整係数を、前記特定手段により特定された映像の動きの特徴成分に演算させることにより調整することを特徴とする請求項３記載の映像調整装置。
【請求項６】
前記調整手段は、前記調整モード選択受付手段により受け付けたモードと映像表示モード調整テーブルとから決定した調整強度を、前記特定手段により特定された映像の動きの特徴成分に演算することにより調整することを特徴とする請求項４記載の映像調整装置。
【請求項７】
三次元ＣＧデータまたは画像オブジェクトで構成された映像の動きを調整する映像調整方法であって、
鑑賞条件情報及び鑑賞者操作情報の両方、若しくはいずれか１を入力する入力ステップと、
映像の動きの特徴成分を特定する特定ステップと、
前記特定手段により特定した映像の動きの特徴成分を調整する調整ステップと、を有し、
前記映像の動きの特徴成分が、映像の動きのデータの基本波の極値部分であり、
前記調整ステップによる調整は、前記極値部分の波形を変化させて映像の動きの速度変化パターンを変えることであることを特徴とする映像調整方法。
【請求項８】
三次元ＣＧデータまたは画像オブジェクトで構成された映像の動きを調整する映像調整方法であって、
鑑賞条件情報及び鑑賞者操作情報の両方、若しくはいずれか１を入力する入力ステップと、
映像の動きの特徴成分を特定する特定ステップと、
前記特定手段により特定した映像の動きの特徴成分を調整する調整ステップと、を有し、
前記映像の動きの特徴成分が、映像の動きのデータの波形の基本波の周波数よりも高い周波数部分であり、
前記調整ステップによる調整は、前記周波数部分の振幅を調整することであることを特徴とする映像調整方法。
【請求項９】
前記鑑賞条件情報の入力ステップは、映像データ作成時の画面サイズを入力する基準画面サイズ入力ステップと、映像を映し出す表示画面サイズを入力する表示画面サイズ入力ステップと、を有することを特徴とする請求項７〜８のいずれかに記載の映像調整方法。
【請求項１０】
前記鑑賞者操作情報の入力ステップは、調整モードの選択を鑑賞者に促してモード選択を受け付ける調整モード選択受付ステップを有することを特徴とする請求項７〜８のいずれかに記載の映像調整方法。
【請求項１１】
前記調整ステップは、鑑賞条件情報と映像表示条件調整テーブルとから決定された調整係数を、前記特定ステップにより特定された映像の動きの特徴成分に演算させることにより調整することを特徴とする請求項９記載の映像調整方法。
【請求項１２】
前記調整ステップは、前記調整モード選択受付ステップにより受け付けたモードと映像表示モード調整テーブルとから決定した調整強度を、前記特定ステップにより特定された映像の動きの特徴成分に演算することにより調整することを特徴とする請求項１０記載の映像調整方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像コンテンツ製作において鑑賞条件及び鑑賞者操作情報に伴う映像の動きの特徴成分のデフォルメ効果調整を行う映像調整装置に関する。
【背景技術】
【０００２】
映像コンテンツがデジタル化されて、同一の映像コンテンツが劇場型大型スクリーンや小型携帯端末の小型ディスプレイといった、様々な鑑賞条件下で鑑賞される可能性が増えてきている。しかし、全く同一の映像コンテンツであっても、異なる鑑賞条件、例えば、大型スクリーンを用いた場合と、パソコンや携帯端末等の小型ディスプレイを用いた場合とでは、躍動感等の見え方が異なって感じられることが知られている。
【０００３】
そこで、鑑賞条件が異なる場合においてそれぞれに最適な映像の提供を行うには、各鑑賞条件に最適化された理想的な映像コンテンツをそれぞれ個別に製作する必要がある。例えば、映画館等の大型スクリーン用に作成された映像コンテンツとは別に家庭用ＴＶなどの小型ディスプレイ向けに映像コンテンツを作成するなど、同一の内容であっても複数の映像コンテンツを製作する必要がある。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、鑑賞条件の組合せは多岐に亘ることから、各鑑賞条件に最適化された理想的な映像コンテンツをそれぞれ個別に製作するには、映像製作者は多大な時間及び労力をかける必要があり、映像コンテンツの製造費及び流通費が上昇するという問題がある。
また、鑑賞者は、最適な映像コンテンツを鑑賞するために、鑑賞条件に合わせた映像コンテンツを鑑賞条件毎に所有する必要があり、入手費用が上昇するという問題がある。
従って、上記のごとき映像コンテンツの個別の作り分けを現実に実施することは、困難である。
【０００５】
かかる事情を鑑みて、本発明では、鑑賞条件毎に映像コンテンツの個別作り分けをせずに、鑑賞条件若しくは鑑賞者操作情報に伴い調整された最適な映像コンテンツを提供することを課題とする。
【課題を解決するための手段】
【０００６】
鑑賞条件、例えば、表示画面サイズの変化による映像の違和感と、映像コンテンツ内の映像の動きの特徴成分との相関関係に着目し、例えば大型スクリーン、家庭用ＴＶ、携帯端末等の大きさに対応する３種類の表示画面サイズを用意し、基準とする画面サイズの映像と各表示画面サイズの映像との動きに対する印象を比較し、各表示画面サイズの映像の動きに対する印象が、基準画面サイズの映像と一致するように調整する実験を行った。
【０００７】
具体的には、相対的な画面サイズが０．１５、０．３０、１．０の３種類を用いた。０．１５の画面サイズを基準として、０．１５、０．３０、１．０のそれぞれの大きさに拡大した映像を基準の映像と比較し、映像の動きに対する印象が異なる場合は映像の動きの特徴成分を、調整パラメータを用いて調整する第1の実験、０．３０及び１．０の画面サイズを基準として同様の第２及び第３の実験を行った。
なお、上記各実験は、３回の予備試行に続けて本試行を２回実施し、印象の調整には、０．０から１．０の範囲の調整パラメータを用い、コントローラ操作により調整を行った。
【０００８】
上記の第１乃至第３の実験の結果、基準画面サイズに対するそれぞれの対象画面サイズの映像に対する平均調整パラメータの値は表１のようになった。表１の結果をグラフに表したのが図１である。
【表１】
0005186988.tif 000002
【０００９】
表１より、基準画面サイズに対して大きな画面（横軸右側）に映像を表示した時には小さな調整パラメータを、基準画面サイズに対して小さな画面（横軸左側）に映像を表示した時には大きな調整パラメータを使用する、という結果が得られた。
【００１０】
これにより、画面サイズの変化と映像の印象調整の相関関係が明らかとなり、表示画面サイズに応じて映像の動きの特徴成分に対する調整を行うことにより、自動的に表示画面サイズに応じた最適な映像を提供することができることが明らかとなった。
また、本実験では、鑑賞条件として画面サイズに注目したが、その他の鑑賞条件としては、視距離、視野角、及び表示画面のアスペクト比等が挙げられる。
【００１１】
そこで、本発明による映像調整装置は、三次元ＣＧデータまたは画像オブジェクトで構成された映像の動きを調整する映像調整装置であって、鑑賞条件情報及び鑑賞者操作情報の両方、若しくはいずれか１を入力する入力手段と、映像の動きの特徴成分を特定する特定手段と、前記特定手段により特定した映像の動きの特徴成分を調整する調整手段とを有することを特徴とする。
【００１２】
また、本発明による映像調整装置の前記調整手段は、鑑賞条件情報と映像表示条件調整テーブルとから決定された調整係数を、前記特定手段により特定された映像の動きの特徴成分に演算することにより調整することを特徴としてもよく、調整モード選択受付手段により受け付けた調整モードと映像表示モード調整テーブルとから決定した調整強度を、前記特定手段により特定された映像の動きの特徴成分に演算することにより調整することを特徴としてもよい。
【００１３】
さらに、当該映像の動きの特徴成分は、映像の動きのデータの基本波の極値部分であるか、若しくは、映像の動きのデータの波形の高周波数部分である。
【００１４】
基本波とは、例えば、歩行時の脚の動きであれば、片脚の１周期を１波長とする波形のことを言う。
当該映像の動きのデータの基本波の極値部分を、映像の動きの特徴成分として調整する場合は、該当する部分の波形を変化させて映像の動きの速度変化パターンを変えることにより、映像調整を行う。
【００１５】
映像の動きのデータの波形の高周波数部分とは、当該映像の動きのデータの波形の基本波の周波数よりも高い周波数部分のことを言う。
当該映像の動きのデータの高周波数部分を映像の動きの特徴成分として調整する場合は、当該高周波数部分の振幅を調整することにより、映像調整を行う。
【００１６】
本発明による映像調整方法は、三次元ＣＧデータまたは画像オブジェクトで構成された映像の動きを調整する映像調整方法であって、鑑賞条件情報及び鑑賞者操作情報の両方、若しくはいずれか１を入力する入力ステップと、映像の動きの特徴成分を特定する特定ステップと、前記特定ステップにより特定した映像の動きの特徴成分を調整する調整ステップとを有することを特徴とする。
【００１７】
また、本発明による映像調整方法の前記調整ステップは、鑑賞条件情報と映像表示条件調整テーブルとから決定された調整係数を、前記特定ステップにより特定された映像の動きの特徴成分に演算することにより調整することを特徴としてもよく、調整モード選択受付ステップにより受け付けた調整モードと映像表示モード調整テーブルとから決定した調整強度を、前記特定ステップにより特定された映像の動きの特徴成分に演算することにより調整することを特徴としてもよい。
【発明の効果】
【００１８】
本発明の映像調整装置及び映像調整方法においては、三次元ＣＧデータまたは画像オブジェクトで構成された映像を鑑賞する際、当該映像を表示する鑑賞条件及び鑑賞者操作情報に伴って映像の動きを調整することができる。
【００１９】
かかる構成は、映像コンテンツ内の映像の動きの特徴成分を調整することで鑑賞条件、例えば、表示画面サイズの変化に対応できるという点に初めて着目することにより達成することができたものであり、かかる構成によれば、鑑賞環境に対応した個別の映像コンテンツを予め複数作成しておく必要がない故、映像製作者による製作作業負担を軽減させることができる。
【発明を実施するための最良の形態】
【００２０】
本発明の映像調整装置及び映像調整方法の実施例について、図面を参照しつつ詳細に説明する。なお、鑑賞条件は画面サイズに限らないが、ここでは鑑賞条件を画面サイズとした例を説明する。
【００２１】
図２に示す如く、映像調整装置１は、映像データベース２と接続しており、映像データベース２は、ＨＤＤ、ＤＶＤ−ＲＯＭ等の大容量の記録媒体上に構築されている。映像データベース２は、基準画面サイズファイル３、表示画面サイズファイル４、及び、映像を構成する三次元ＣＧデータまたは画像オブジェクトを記憶する映像データファイル５を含む。
【００２２】
映像調整装置１は、鑑賞条件情報入力手段６、映像表示条件調整テーブル９、映像の動きの特徴成分特定手段１０、モード選択受付手段１１、映像表示モード調整テーブル１２、映像調整手段１３、及び映像データ送出手段１４を含む。
【００２３】
鑑賞条件情報入力手段６は、基準画面サイズ入力手段７及び表示画面サイズ入力手段８を含む。
【００２４】
映像調整手段１３で映像の動きの特徴成分を調整する手法としては、いくつかあるが、ここでは、映像表示条件調整テーブル９を参照して画面サイズ比から求めた調整係数を、映像の動きの特徴成分特定手段１０によって特定された映像データに演算する手法と、映像表示モード調整テーブルを参照して画面サイズ比から求めた調整強度に基づいて、映像の動きの特徴成分を強調した強調映像データ若しくは映像の動きの特徴成分を抑制した抑制映像データを合成する手法の２つを説明する。もちろん、ここには説明しない他の手法を用いて映像の動きの特徴成分を調整するのでも構わない。
【００２５】
映像表示条件調整テーブル９は、表２に示すように、基準画面サイズ（基準）に対する表示画面サイズ（対象）の画面サイズ比と、当該画面サイズ比毎に定められる調整係数ｇと、が一対一対応するように設定されている。
【表２】
0005186988.tif 000003
【００２６】
調整係数ｇは、画面サイズ比が１のときに１となる係数であり、例えば図３で表されるグラフの値に基づいて映像表示条件調整テーブル９に定められ、映像の動きの特徴成分に部分的に施すことにより、その部分の映像の動きに対する印象を強調若しくは抑制することができる。
【００２７】
映像表示モード調整テーブル１０は、表３に示すように、調整モード選択受付手段で受け付けた調整モードと、当該調整モード毎に定められる調整強度と、が一対一対応するように設定されている。当該調整モードには、「標準」のときに調整強度０となるようにして、例えば、「強」から「弱」まで数段階を予め設定しておく。
【表３】
0005186988.tif 000004
【００２８】
当該調整強度に基づいて映像の動きのデータを調整する手法では、強調映像データ及び抑制映像データとして、例えば、映像の動きのデータの高周波数部分の振幅を小さくすることにより作成した抑制映像データｆ１と、映像の動きのデータの高周波数部分の振幅を大きくすることにより作成した強調映像データｆ２とを作成する。
【００２９】
調整強度は、例えば、−１から＋１で設定しておき、調整強度０（調整無し）用の映像データｆ０、調整強度−１用の抑制映像データｆ１、調整強度＋１用の強調映像データｆ２が設定された状態で、調整強度ｘに応じて抑制映像データ及び強調映像データを用いて映像データを補間する。
【００３０】
調整強度ｘが−１から０の間であるときの映像データｆは、数１で示されるように、基準の映像データｆ０及び抑制映像データｆ１を用いて補間する。
【数１】
0005186988.tif 000005
【００３１】
調整強度ｘが０から＋１の間であるときの映像データｆは、数２に示されるように、基準の映像データｆ０及び抑制映像データｆ２を用いて補間する。
【数２】
0005186988.tif 000006
【００３２】
抑制映像データｆ１及び強調映像データｆ２の設定の手法もいくつかあるが、例えば数３に示すようなオープニング処理及びクロージング処理を用いても良い。
【数３】
0005186988.tif 000007
【００３３】
上記の如き構成の映像調整装置１によれば、映像の動きのデータから特定した映像の動きの特徴成分を、鑑賞条件及び調整モードに応じて、調整係数若しくは強調映像データ及び抑制映像データによる補間を用いて調整することにより、各鑑賞条件及び鑑賞者操作情報に適応した映像データを容易に作成することができる。
【００３４】
映像調整装置１における映像調整は、図示しない映像処理制御部に映像再生信号が入力されることを契機として開始される。
【００３５】
鑑賞条件に基づいて映像調整を行う場合は、図４（ａ）に示す如く、映像処理装置１は、図示しない映像処理制御部に再生信号が入力されると、基準画面サイズ入力手段７及び表示画面サイズ入力手段８に画面サイズ読み取り信号を送信して、基準画面サイズ及び表示画面サイズを入力する（Ｓ１）。続いて映像調整装置１は、Ｓ１で入力された基準画面サイズ及び表示画面サイズから画面サイズ比を演算する（Ｓ２）。
【００３６】
続いて映像調整装置１は、Ｓ２で求めた画面サイズ比から映像表示条件調整テーブル９を参照して調整係数ｇを決定し、入力する（Ｓ３）。そして、映像調整装置１は、Ｓ３で入力された調整係数ｇと、映像の動きの特徴成分特定手段１０により特定された映像の動きの特徴成分データと、を映像調整手段１３へ送信して映像の動きのデータを調整する（Ｓ４）。
【００３７】
Ｓ４で映像の動きのデータを調整して映像調整データを作成した後、映像調整装置１は、当該映像調整データを映像データ送出手段１４に送出し、さらに映像データ送出手段１４は当該映像調整データを映像として表示器１５に送出する（Ｓ５）。
【００３８】
一方、鑑賞者操作情報に基づいて映像調整を行う場合は、図４（ｂ）に示す如く、映像調整装置１は、図示しない映像処理制御部に再生信号が入力されると、調整モード選択受付手段１１に、鑑賞者からのモード選択を受け付ける受付信号を送信して、調整モードの選択を受け付ける（Ｓ６）。続いて映像調整装置１は、Ｓ６で受け付けた調整モードから映像表示モード調整テーブル１２を参照して調整強度ｘを決定し、入力する（Ｓ７）。そして、映像調整装置１は、Ｓ７で入力された調整強度ｘと、映像の動きの特徴成分特定手段１０により特定された映像の動きの特徴成分データと、を映像調整手段１３へ送信して映像の動きのデータを調整する（Ｓ８）。
【００３９】
Ｓ８で映像の動きのデータを調整して映像調整データを作成した後、映像調整装置１は、当該映像調整データを映像データ送出手段１４に送出し、さらに映像データ送出手段１４は当該映像調整データを映像として表示器１５に送出する（Ｓ９）。
【００４０】
鑑賞条件情報に基づく映像調整と鑑賞者操作情報に基づく映像調整とは、どちらか１つを行うのでも良いし、鑑賞条件情報に基づいて映像調整を行った後にさらに、鑑賞者操作情報に基づく映像調整を行うのでも良い。
【００４１】
上記した映像調整方法によれば、映像の動きのデータから特定した映像の動きの特徴成分を、鑑賞条件及び調整モードに応じて、調整係数若しくは強調映像データ及び抑制映像データによる補間を用いて調整することにより、各鑑賞条件及び鑑賞者操作情報に適応した映像データを容易に作成することができる。
【図面の簡単な説明】
【００４２】
【図１】本発明に至る実験結果を表すグラフである。
【図２】本発明の映像調整装置の概略構成を示すブロック図である。
【図３】本発明の調整係数算出の一例に用いるグラフである。
【図４】（ａ）本発明による鑑賞条件情報に基づく映像調整方法を説明するフローチャートである。            （ｂ）本発明による鑑賞者操作情報に基づく映像調整方法を説明するフローチャートである。
【符号の説明】
【００４３】
１    映像調整装置
２    映像データベース
３    基準画面サイズファイル
４    表示画面サイズファイル
５    映像データファイル
６    鑑賞条件情報入力手段
７    基準画面サイズ入力手段
８    表示画面サイズ入力手段
９    映像表示条件調整テーブル
１０  映像の動きの特徴成分特定手段
１１  調整モード選択受付手段
１２  映像表示モード調整テーブル
１３  映像調整手段
１４  映像データ送出手段
１５  表示器
【図１】
0005186988.tif 000008
【図２】
0005186988.tif 000009
【図３】
0005186988.tif 000010
【図４】
0005186988.tif 000011