(57)【特許請求の範囲】
【請求項１】
線形補間によりフレーム内挿し、フレームレートが２４フレーム／秒以上の映像をよりフレームレートが高い映像に変換する際の被内挿フレームの内挿比を決定する内挿比決定装置であって、
フレームレート変換前の元フレームから、内挿フレームの生成に用いられる被内挿フレームを選択する被内挿フレーム選択部と、
前記被内挿フレームの内挿比を決定する内挿比決定部と、を備え、
前記被内挿フレーム選択部は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間である０．１秒以内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、
前記内挿比決定部は、内挿フレーム位置から各被内挿フレームの位置までの距離の逆数を正規化した値を、各被内挿フレームの内挿比として決定することを特徴とする内挿比決定装置。
【請求項２】
線形補間によりフレーム内挿し、フレームレートが２４フレーム／秒以上の映像をよりフレームレートが高い映像に変換する際の被内挿フレームの内挿比を決定する内挿比決定装置であって、
フレームレート変換前の元フレームから、内挿フレームの生成に用いられる被内挿フレームを選択する被内挿フレーム選択部と、
前記被内挿フレームの内挿比を決定する内挿比決定部と、を備え、
前記被内挿フレーム選択部は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から過去の視覚的感覚記憶の保持時間である０．１秒以内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、
前記内挿比決定部は、内挿フレーム位置から各被内挿フレームの位置までの距離に、前記保持時間内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値を、各被内挿フレームの内挿比として決定することを特徴とする内挿比決定装置。
【請求項３】
線形補間によりフレーム内挿し、フレームレートが２４フレーム／秒以上の映像をよりフレームレートが高い映像に変換する際の被内挿フレームの内挿比を決定する内挿比決定装置であって、
フレームレート変換前の元フレームから、内挿フレームの生成に用いられる被内挿フレームを選択する被内挿フレーム選択部と、
前記被内挿フレームの内挿比を決定する内挿比決定部と、を備え、
前記被内挿フレーム選択部は、シャッタ開口率が閾値以下である場合には、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間である０．１秒以内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、前記シャッタ開口率が前記閾値を超える場合には、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から前記保持時間内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、
前記内挿比決定部は、前記シャッタ開口率が前記閾値以下である場合には、内挿フレーム位置から各被内挿フレームの位置までの距離の逆数を正規化した値を、各被内挿フレームの内挿比として決定し、前記シャッタ開口率が前記閾値を超える場合には、内挿フレーム位置から各被内挿フレームの位置までの距離に、前記保持時間内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値を、各被内挿フレームの内挿比として決定することを特徴とする内挿比決定装置。
【請求項４】
シャッタ開口率が閾値を超えるか否かを判定する処理選択部を更に備えることを特徴とする、請求項３に記載の内挿比決定装置。
【請求項５】
シャッタ開口率が不明な場合には、前記シャッタ開口率を１００％とみなすことを特徴とする、請求項２から４のいずれか一項に記載の内挿比決定装置。
【請求項６】
コンピュータを、請求項１から５のいずれか一項に記載の内挿比決定装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、線形補間によりフレーム内挿する際の被内挿フレームの内挿比（重み係数）を決定する内挿比決定装置及びプログラムに関する。
【背景技術】
【０００２】
従来、フレームレートを変換する一般的な手法として、線形補間によるフレーム内挿法が知られている（例えば、非特許文献１参照）。この内挿法では、時間方向の内挿フレーム位置に対して、前後に位置する入力映像のフレームに、距離に応じた重み（内挿比）を乗じて加算する線形フィルタ処理により、内挿フレームを生成する。
【０００３】
線形補間によるフレーム内挿法を用いたフレームレート拡大例としては、テレビで映像の動きを滑らかに見せるための６０フィールド／秒から１２０又は２４０フレーム／秒へのフレーム変換が挙げられる。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】「ハイビジョン技術」、日本放送出版協会、1988年11月
【発明の概要】
【発明が解決しようとする課題】
【０００５】
従来の線形補間によるフレーム内挿法では、内挿フレーム位置からその前後フレームの位置までの距離の割合の逆数を正規化したものを内挿比として内挿フレームを生成する。しかし、視覚の積分効果を考慮していないため、動領域が多重像に見えるアーティファクトが発生するおそれがあった。この実例として、映画館で映画を見る場合が挙げられる。映画館では、特に周辺視におけるフリッカ防止のために、２４フレーム／秒の映像を０次ホールドして複数回照射する。しかし、特に映画のエンドロールで字幕が下から上にスクロールする際（コントラストのはっきりしたオブジェクトが追随視可能な速度で動く場合）に、文字が多重像に見えるアーティファクトが発生する。これは視覚の積分効果を考慮しておらず、視覚感覚記憶の保持時間内にオブジェクト位置が異なる複数のフレーム画像を照射するために発生する。
【０００６】
かかる事情に鑑みてなされた本発明の目的は、視覚の積分効果を考慮することにより、アーティファクトを抑制することが可能な内挿比決定装置及びプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決するため、本発明に係る内挿比決定装置は、線形補間によりフレーム内挿し、フレームレートが２４フレーム／秒以上の映像をよりフレームレートが高い映像に変換する際の被内挿フレームの内挿比を決定する内挿比決定装置であって、フレームレート変換前の元フレームから、内挿フレームの生成に用いられる被内挿フレームを選択する被内挿フレーム選択部と、前記被内挿フレームの内挿比を決定する内挿比決定部と、を備え、前記被内挿フレーム選択部は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間である０．１秒以内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、前記内挿比決定部は、内挿フレーム位置から各被内挿フレームの位置までの距離の逆数を正規化した値を、各被内挿フレームの内挿比として決定することを特徴とする。
【０００８】
また、本発明に係る内挿比決定装置は、線形補間によりフレーム内挿し、フレームレートが２４フレーム／秒以上の映像をよりフレームレートが高い映像に変換する際の被内挿フレームの内挿比を決定する内挿比決定装置であって、フレームレート変換前の元フレームから、内挿フレームの生成に用いられる被内挿フレームを選択する被内挿フレーム選択部と、前記被内挿フレームの内挿比を決定する内挿比決定部と、を備え、前記被内挿フレーム選択部は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から過去の視覚的感覚記憶の保持時間である０．１秒以内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、前記内挿比決定部は、内挿フレーム位置から各被内挿フレームの位置までの距離に、前記保持時間内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値を、各被内挿フレームの内挿比として決定することを特徴とする。
【０００９】
また、本発明に係る内挿比決定装置は、線形補間によりフレーム内挿し、フレームレートが２４フレーム／秒以上の映像をよりフレームレートが高い映像に変換する際の被内挿フレームの内挿比を決定する内挿比決定装置であって、フレームレート変換前の元フレームから、内挿フレームの生成に用いられる被内挿フレームを選択する被内挿フレーム選択部と、前記被内挿フレームの内挿比を決定する内挿比決定部と、を備え、前記被内挿フレーム選択部は、シャッタ開口率が閾値以下である場合には、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間である０．１秒以内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、前記シャッタ開口率が前記閾値を超える場合には、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から前記保持時間内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択し、前記内挿比決定部は、前記シャッタ開口率が前記閾値以下である場合には、内挿フレーム位置から各被内挿フレームの位置までの距離の逆数を正規化した値を、各被内挿フレームの内挿比として決定し、前記シャッタ開口率が前記閾値を超える場合には、内挿フレーム位置から各被内挿フレームの位置までの距離に、前記保持時間内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値を、各被内挿フレームの内挿比として決定することを特徴とする。
【００１０】
また、本発明に係る内挿比決定装置は、シャッタ開口率が閾値を超えるか否かを判定する処理選択部を更に備えることを特徴とする。
【００１１】
また、本発明に係る内挿比決定装置は、シャッタ開口率が不明な場合には、前記シャッタ開口率を１００％とみなすことを特徴とする。
【００１２】
また、本発明に係るプログラムは、コンピュータを、上記内挿比決定装置として機能させることを特徴とする。
【発明の効果】
【００１３】
本発明によれば、視覚の積分効果を考慮することにより、アーティファクトを抑制し、フレームレート変換時の主観画質を向上させることができるようになる。
【図面の簡単な説明】
【００１４】
【図１】本発明の第１の実施形態に係る内挿比決定装置の構成例を示すブロック図である。
【図２】本発明の第１の実施形態に係る内挿比決定装置の処理を説明する図である。
【図３】本発明の第２の実施形態に係る内挿比決定装置の構成例を示すブロック図である。
【図４】本発明の第２の実施形態に係る内挿比決定装置の処理を説明する図である。
【図５】本発明の第３の実施形態に係る内挿比決定装置の構成例を示すブロック図である。
【発明を実施するための形態】
【００１５】
以下、本発明の実施形態について、図面を参照して詳細に説明する。
【００１６】
（第１の実施形態）
まず、本発明の第１の実施形態について説明する。図１に本発明の第１の実施形態に係る内挿比決定装置の構成例を示す。図１に示す内挿比決定装置１は、被内挿フレーム選択部１１と、内挿比決定部１２とを備える。内挿比決定装置１は、線形補間によりフレーム内挿するフレームレート変換において、フレームレート変換情報に基づき、視覚の積分効果を考慮して被内挿フレームを選択し、選択した被内挿フレームの内挿比（重み係数）を決定する装置である。
【００１７】
フレームレート変換情報とは、フレームレート変換前後のフレームレートを示す情報である。
【００１８】
被内挿フレームとは、フレームレート変換前のフレーム（元フレーム）のうち、内挿フレームの生成に用いられるフレームのことをいう。
【００１９】
視覚の積分効果とは、アイコニックメモリと呼ばれるもので、EriksenとCollinsは２枚の画像を任意時間間隔で提示する実験により、視覚的感覚記憶の保持時間Ｔが約０．１秒であることを示している。詳細については、C. W. Eriksen, J. F. Collins, "Some temporal characteristics of visual pattern perception", Journal of Experimental Psychology, Vol. 74. Issue 4, pp. 476-484, Aug. 1967を参照されたい。
【００２０】
被内挿フレーム選択部１１は、フレームレート変換情報から、フレームレートを変換するために内挿される内挿フレームの位置を決定し、内挿フレーム位置を示す内挿フレーム位置情報を内挿比決定部１２に出力する。なお、内挿フレーム位置情報は外部から入力するようにしてもよいが、以下の実施形態では被内挿フレーム選択部１１が生成するものとする。
【００２１】
また、被内挿フレーム選択部１１は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間Ｔ内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。そして、被内挿フレームを示す被内挿フレーム情報を内挿比決定部１２に出力する。
【００２２】
内挿比決定部１２は、被内挿フレーム選択部１１から入力された内挿フレーム位置情報及び被内挿フレーム情報に基づき、各被内挿フレームの内挿比を決定し、各被内挿フレームの内挿比を示す内挿比情報を内挿比決定装置１の外部に出力する。各被内挿フレームの内挿比は、内挿フレームの位置から各被内挿フレームの位置までの時間的距離の逆数を正規化した値とする。
【００２３】
具体例として、２４フレーム／秒の映像を１２０フレーム／秒にフレームレート変換する場合の処理について、図２を参照して説明する。
【００２４】
図２のＦ1〜Ｆ5はフレームレート変換前の２４フレーム／秒の映像の各フレーム（元フレーム）の位置（標本位置）を示している。この２４フレーム／秒の映像を１２０フレーム／秒に変換する場合、各元フレームの間に４枚の内挿フレームを内挿することになる。すなわち、図２では各目盛りの位置にフレームが内挿されることになるが、内挿フレームは代表してＦIのみ示し、この内挿フレームＦIに対する被内挿フレームの選択処理及び内挿比決定処理について説明する。
【００２５】
被内挿フレーム選択部１１は、図２に示すように内挿フレームＦIの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間Ｔ内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。基準フレームは内挿フレームＦIの時間方向として未来に位置する元フレームであればよいが、ここでは内挿フレームＦIの時間方向として最近傍の未来に位置する元フレームＦ4を基準フレームとする。また、図２ではＴ＝０．１秒とする。元フレームＦ4の位置から過去の保持時間Ｔに含まれる元フレームはＦ2，Ｆ3であるため、元フレームＦ2，Ｆ3，Ｆ4を被内挿フレームとして選択する。
【００２６】
そして、内挿比決定部１２は、内挿フレームＦIの位置から各被内挿フレームＦ2，Ｆ3，Ｆ4の位置までの時間的距離の逆数を正規化した値を、各被内挿フレームの内挿比に決定する。フレームレート変換後のフレーム間の時間的距離（１／１２０秒間）を１とすると、内挿フレームＦIの位置から各被内挿フレームＦ2，Ｆ3，Ｆ4の位置までの時間的距離はそれぞれ７，２，３となる。内挿比決定部１２は、それらの逆数である１／７，１／２，１／３を合計が１になるように正規化して、被内挿フレームのＦ2，Ｆ3，Ｆ4の内挿比をＦ2：Ｆ3：Ｆ4＝０．１４６：０．３４２：０．５１２に決定する。
【００２７】
上述したように、内挿比決定装置１は、従来法のように内挿フレームに隣接する前後の元フレームを被内挿フレームとするわけではなく、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間内に含まれる元フレーム、及び該基準フレームを被内挿フレームとする。そのため、視覚の積分効果を考慮することができ、アーティファクトを抑制し、フレームレート変換時の主観画質を向上させることができるようになる。
【００２８】
（第２の実施形態）
つぎに、本発明の第２の実施形態について説明する。図３に本発明の第２の実施形態に係る内挿比決定装置の構成例を示す。図３に示す内挿比決定装置２は、被内挿フレーム選択部１１と、内挿比決定部１２とを備える。内挿比決定装置２は、線形補間によりフレーム内挿するフレームレート変換において、フレームレート変換情報及びシャッタ開口率情報に基づき、視覚の積分効果を考慮して被内挿フレームを選択し、選択した被内挿フレームの内挿比を決定する装置である。
【００２９】
被内挿フレーム選択部１１は、フレームレート変換情報から、フレームレートを変換するために内挿される内挿フレームの位置を決定する。そして、シャッタ開口率情報に基づき、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から過去の視覚的感覚記憶の保持時間Ｔ内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。
【００３０】
ここで、シャッタ開口率情報とは、フレームレート変換前の映像の撮影時のシャッタ開口率を示す情報である。また、シャッタ開口率範囲とは、元フレームの位置から、次の元フレームまでの時間的距離にシャッタ開口率を乗じた位置までのことをいう。
【００３１】
内挿比決定部１２は、被内挿フレーム選択部１１から入力された内挿フレーム位置情報及び被内挿フレーム情報と、外部から入力されたシャッタ開口率情報とに基づき、各被内挿フレームの内挿比を決定し、各被内挿フレームの内挿比を示す内挿比情報を内挿比決定装置２の外部に出力する。内挿比は、内挿フレームの位置から各被内挿フレームの位置までの距離に、視覚的感覚記憶の保持時間Ｔ内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値とする。
【００３２】
なお、シャッタ開口率は５０％以上であることが多いため、シャッタ開口率情報が入力されない場合、又はシャッタ開口率が不明な場合には、内挿比決定装置２は、シャッタ開口率を１００％とみなして処理を行うようにしてもよい。この場合、被内挿フレーム選択部１１は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの１００％開口率範囲を経た位置から過去の視覚的感覚記憶の保持時間Ｔ内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。内挿比決定部１２は、内挿フレームの位置から各被内挿フレームの位置までの距離に、視覚的感覚記憶の保持時間Ｔ内に含まれる１００％開口率範囲の重みをかけた値の逆数を正規化した値を、各被内挿フレームの内挿比に決定する。
【００３３】
具体例として、２４フレーム／秒の映像を１２０フレーム／秒に変換する場合の処理について、図４を参照して説明する。図４（ａ）はシャッタ開口率が１００％である場合を示しており、図４（ｂ）はシャッタ開口率が５０％である場合を示している。
【００３４】
図４のＦ1〜Ｆ5はフレームレート変換前の２４フレーム／秒の映像の各フレーム（元フレーム）の位置（標本位置）を示している。この２４フレーム／秒の映像を１２０フレーム／秒に変換する場合、各元フレームの間に４枚の内挿フレームを内挿することになる。すなわち、図４では各目盛りの位置にフレームが内挿されることになるが、内挿フレームは代表してＦIのみ示し、この内挿フレームＦIに対する被内挿フレームの選択処理及び内挿比決定処理について説明する。
【００３５】
被内挿フレーム選択部１１は、図４に示すように内挿フレームＦIの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から過去の視覚的感覚記憶の保持時間Ｔ内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。基準フレームは内挿フレームＦIの時間方向として未来に位置する元フレームであればよいが、ここでは内挿フレームＦIの時間方向として最近傍の未来に位置する元フレームＦ4を基準フレームとする。また、図４ではＴ＝０．１秒とする。図４（ａ）（ｂ）ともに、元フレームＦ4の位置から過去の保持時間Ｔに含まれる元フレームはＦ2，Ｆ3であるため、元フレームＦ2，Ｆ3，Ｆ4を被内挿フレームとして選択する。
【００３６】
そして、内挿比決定部１２は、内挿フレームＦIの位置から各被内挿フレームＦ2，Ｆ3，Ｆ4の位置までの距離に、視覚的感覚記憶の保持時間Ｔ内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値を、各被内挿フレームの内挿比に決定する。
【００３７】
図４（ａ）の場合、内挿フレームＦIの位置から各被内挿フレームＦ2，Ｆ3，Ｆ4の位置までの時間的距離はそれぞれ７，２，３であり、基準フレームＦ4のシャッタ開口率範囲を経た位置から過去の０．１秒間に含まれる、被内挿フレームＦ2，Ｆ3，Ｆ4のシャッタ開口率範囲はそれぞれ４０％，１００％，１００％である。よって、積分効果影響範囲の重みはその逆数の２．５，１，１となる。内挿比決定部１２は、１／（７×２．５），１／（２×１），１／（３×１）を合計が１になるように正規化して、被内挿フレームのＦ2，Ｆ3，Ｆ4の内挿比をＦ2：Ｆ3：Ｆ4＝０．０６４：０．５６２：０．３７４に決定する。
【００３８】
図４（ｂ）の場合、内挿フレームＦIの位置から各被内挿フレームＦ2，Ｆ3，Ｆ4の位置までの時間的距離はそれぞれ７，２，３であり、基準フレームＦ4のシャッタ開口率範囲を経た位置から過去の０．１秒間に含まれる、被内挿フレームＦ2，Ｆ3，Ｆ4のシャッタ開口率範囲はそれぞれ４０％，５０％，５０％である。よって、積分効果影響範囲の重みはその逆数の２．５，２，２となる。内挿比決定部１２は、１／（７×２．５），１／（２×２），１／（３×２）を合計が１になるように正規化して、被内挿フレームのＦ2，Ｆ3，Ｆ4の内挿比をＦ2：Ｆ3：Ｆ4＝０．１２０：０．５２８：０．３５２に決定する。
【００３９】
上述したように、内挿比決定装置２は、視覚の積分効果に加えてフレームレート変換前の映像のシャッタ開口率を考慮して被内挿フレームの選択及び内挿比の決定を行う。そのため、内挿比決定装置２は、更に主観画質を向上させることができるようになる。
【００４０】
（第３の実施形態）
つぎに、本発明の第３の実施形態について説明する。図５に本発明の第３の実施形態に係る内挿比決定装置の構成例を示す。図５に示す内挿比決定装置３は、被内挿フレーム選択部１１と、内挿比決定部１２と、処理選択部１３とを備える。内挿比決定装置３は、線形補間によりフレーム内挿するフレームレート変換において、フレームレート変換情報及びシャッタ開口率情報に基づき、視覚の積分効果を考慮して被内挿フレームを選択し、選択した被内挿フレームの内挿比を決定する装置である。
【００４１】
処理選択部１３は、シャッタ開口率情報を入力して、シャッタ開口率が閾値を超えるか否かを判定し、判定結果を示す判定情報を被内挿フレーム選択部１１に出力する。
【００４２】
シャッタ開口率が閾値以下である場合には、被内挿フレームの動領域に含まれる空間高周波成分のパワーが高い場合が多く、動領域のエッジが多重像に見えるアーティファクトが発生する可能性が高いため、平滑化効果の高い方法を選択することが望ましい。そこで、シャッタ開口率が閾値以下である場合には、第１の実施形態と同一の処理を行うようにする。
【００４３】
すなわち、シャッタ開口率が閾値以下である場合には、被内挿フレーム選択部１１は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームの位置から過去の視覚的感覚記憶の保持時間Ｔ内に含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。そして内挿比決定部１２は、内挿フレームの位置から各被内挿フレームの位置までの時間的距離の逆数を正規化した値を各被内挿フレームの内挿比として決定する。
【００４４】
一方、シャッタ開口率が閾値を超える場合には、被内挿フレームの動領域に含まれる空間高周波成分のパワーが低い場合が多く、動領域がぼやけて見えるため、平滑化効果の低い方法を選択することが望ましい。そこで、シャッタ開口率が閾値以下である場合には、第２の実施形態と同一の処理を行うようにする。
【００４５】
すなわち、シャッタ開口率が閾値を超える場合には、被内挿フレーム選択部１１は、内挿フレームの時間方向として未来に位置する元フレームを基準フレームとし、該基準フレームのシャッタ開口率範囲を経た位置から過去の視覚的感覚記憶の保持時間Ｔ内にシャッタ開口率範囲の少なくとも一部が含まれる元フレーム、及び該基準フレームを被内挿フレームとして選択する。そして内挿比決定部１２は、内挿フレームの位置から各被内挿フレームの位置までの距離に、視覚的感覚記憶の保持時間Ｔ内に含まれるシャッタ開口率範囲の重みをかけた値の逆数を正規化した値を各被内挿フレームの内挿比として決定する。
【００４６】
上述したように、内挿比決定装置３は、視覚の積分効果を考慮しつつ、シャッタ開口率が低い（閾値以下である）場合には、平滑化効果が高くなるように内挿比を決定し、シャッタ開口率が高い（閾値を超える）場合には、平滑化効果が高くならないように内挿比を決定する。そのため、内挿比決定装置３は、内挿比決定装置１，２よりも更に主観画質を向上させることができるようになる。
【００４７】
なお、上述した内挿比決定装置１，２，３として機能させるためにコンピュータを好適に用いることができ、そのようなコンピュータは、内挿比決定装置１，２，３の各機能を実現する処理内容を記述したプログラムを該コンピュータの記憶部に格納しておき、該コンピュータのＣＰＵによってこのプログラムを読み出して実行させることで実現することができる。なお、このプログラムは、コンピュータ読取り可能な記録媒体に記録可能である。
【００４８】
上述の実施形態は代表的な例として説明したが、本発明の趣旨及び範囲内で、多くの変更及び置換ができることは当業者に明らかである。したがって、本発明は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。例えば、実施形態に記載の複数の構成ブロックを１つに組み合わせたり、あるいは１つの構成ブロックを分割したりすることが可能である。
【符号の説明】
【００４９】
１，２，３  内挿比決定装置
１１        被内挿フレーム選択部
１２        内挿比決定部
１３        処理選択部
【図１】
0006604828.tif 000002
【図２】
0006604828.tif 000003
【図３】
0006604828.tif 000004
【図４】
0006604828.tif 000005
【図５】
0006604828.tif 000006