(57)【要約】【課題】  従来技術では、記録映像情報を元に生成した動きベクトルを元に、補間フレームを生成するため、記録時のパン情報、傾き情報、ズーム情報を正確に再現することは難しい。また、加速度情報に関しては記録映像情報からは推測することができない。従って、上記動き補償ベクトルを用いて補間フレームを生成した場合、実際の動作とのずれが発生する。【解決手段】  撮影部において、映像信号を符号化し、符号化された映像情報と共にカメラ情報を記録し、記録された映像信号とカメラ情報を再生部の入力とし、再生部において、記録された映像情報を復号化し、復号化された映像信号の画像フレーム間に、カメラ情報、例えばズーム情報またはパン情報または加速度情報または傾き情報を用いてN枚の補間フレームを生成して出力することで、記録時の状態に合わせたフレーム補間を実現する。【選択図】  図８
2009200985.tif 000002
【特許請求の範囲】
【請求項１】
撮像して映像信号を得、該映像信号を符号化し、符号化された映像信号を記録するとともに、該撮像に関するカメラ情報を記録する撮像部と、
前記符号化された映像信号を復号化し、復号化された映像信号の画像フレーム間に、補間フレームを生成して補間して出力する再生部と、
を備え、
前記再生部は、前記カメラ情報を用いて、補間フレームが補間される前後の画像フレームを、補間フレームの時間的位置に対応するように補正し、該補正された画像フレームを用いて前記補間フレームを生成すること、
を特徴とする映像処理装置。
【請求項２】
請求項１において、
前記再生部が、前記符号化された映像信号を復号化することを特徴とする復号化部と、前記復号化された映像信号と前記カメラ情報を元に、前記復号化された映像信号の連続する画像フレームAと画像フレームBの間に1枚または複数枚の補間フレームCを生成し、前記画像フレームAと画像フレームBの間に、前記補間フレームCを挿入して出力するフレーム補間部と、で構成されること
を特徴とする映像処理装置。
【請求項３】
請求項２において、
前記フレーム補間部が、
連続する画像フレームAと画像フレームBの間に、時間的に等間隔な位置にN枚の補間フレームを生成し、
画像フレームAとカメラ情報を用いて、N枚の補正フレームA[n]（n＝0,1,…,N-1）を生成する補間フレーム生成部Aと、画像フレームBとカメラ情報を用いて、N枚の補正フレームB[n]（n＝0,1,…,N-1）を生成する補間フレーム生成部Bと、
補正フレームA[n]と補正フレームB[n]を用いて、N枚の補間フレームC[n](n=0,1,…,N-1)を生成する補間フレーム生成部Cと、を有すること
を特徴とする映像処理装置。
【請求項４】
請求項１ないし４のいずれかにおいて、
前記カメラ情報に応じて、補間フレームの枚数を変えること、
を特徴とする映像処理装置。
【請求項５】
請求項３において、
前記カメラ情報は、パン情報または傾き情報またはズーム情報を含み、
前記補間フレーム生成部Aが、前記カメラ情報に含まれるパン情報または傾き情報またはズーム情報を用いて、線形補間を用いて、画像フレームAを補正すること、
を特徴とする映像処理装置。
【請求項６】
請求項３において、
前記カメラ情報は、加速度情報を含み、
前記補間フレーム生成部Aが、前記カメラ情報に含まれる加速度情報を用いた非線形補間を用いて、画像フレームAを補正すること、
を特徴とする映像処理装置。
【請求項７】
請求項１ないし６のいずれかにおいて、
前記カメラ情報が、フレームレートより高いレートで記録されること
を特徴とする映像処理装置。
【請求項８】
請求項３において、
前記補間フレーム生成部Cが、
補正フレームA[n]と補正フレームB[n]の間で動いている領域を検出し、動き補償ベクトルを生成する動き検出部と、
該動き補償ベクトルを用いて、補正フレームA[n]と補正フレームB[n]の間に、時間的に等間隔な位置にN枚の補間フレームC[n]を生成するフレーム補間コア部とを有すること
を特徴とする映像処理装置。
【請求項９】
請求項８において、
前記フレーム補間コア部が、線形補間を用いて補間フレームC[n]を生成すること、
を特徴とする映像処理装置。
【請求項１０】
請求項８において、
前記フレーム補間コア部が、加速度情報を用いた非線形補間を用いて補間フレームC[n]を生成すること
を特徴とする映像処理装置。
【請求項１１】
請求項８ないし１０のいずれかにおいて、
前記動き検出部が、補正フレームA[n]及び補正フレームB[n]を構成する画像ブロックの動き補償ベクトルを生成すること、
を特徴とする映像処理装置。
【請求項１２】
請求項８ないし１１のいずれかにおいて、
前記動き検出部が、パン情報及び傾き情報を用いて、動き補償ベクトル検出を行なう探索範囲の補正を行うこと
を特徴とする映像処理装置。
【請求項１３】
請求項１ないし１２のいずれかにおいて、
前記撮像部が、接続された前記再生部のフレーム補間機能の有無を確認する手段を有し、
フレーム補間機能がある場合には符号化された映像信号と共に、カメラ情報を供給し、フレーム補間機能がない場合には符号化された映像信号を供給し、カメラ情報を供給しない切替手段を有すること、
を特徴とする映像処理装置。
【請求項１４】
映像信号とカメラ情報とが記録された記録媒体から映像信号とカメラ情報とを読み出す読み出し手段と、
該読み出した映像信号に含まれる連続する２枚の画像フレームについて、該読み出したカメラ情報を用いて、該連続する２枚の画像フレームの間の時間的位置に対応するように補正するフレーム補正手段と、
該補正された補正フレームについて、動き補償を用いて、該連続する２枚の画像フレームの間に補間する補間フレームを生成するフレーム補間手段と、
該読み出した映像信号と該生成された補間フレームとを合成して出力する出力手段と、
を備えることを特徴とする映像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像処理装置に関する。例えば、ビデオカメラで映像を撮影し、モニタで再生する映像撮影及び再生装置において、映像撮影時に、カメラ情報、例えばズーム情報またはパン情報または加速度情報または傾き情報を記録し、再生時にカメラ情報を利用して、記録された映像の画像フレーム間に、補間フレームを生成、挿入することで、記録したフレームレート以上のレートで再生することを可能とするシステム、方法及び機器に関する。
【背景技術】
【０００２】
本技術分野の背景技術として、例えば、特開２００５-６２７５号公報（特許文献１）がある。該公報には、課題として「補間フレーム作成の精度をさらに向上させる成装置と方法および補間フレーム作成プログラムを提供し、装置への実装に適した方法およびプログラムを提供する。さらに本技術を実装した補間フレーム作成装置を提供する。」と記載され、解決手段として「補間フレーム作成装置２０１は、動き補償符号化された符号化画像信号２１０を復号化して得られた画像フレームを補間するための補間フレームを作成する装置であって、動きベクトル導出部２０３と、補間フレーム作成部２０４とを備えている。動きベクトル導出部２０３は、符号化画像信号２１０を構成する符号化ブロックの動き補償ベクトルを取得する。補間フレーム作成部２０４は、画像フレームを構成する画像ブロックの動きベクトルに基づいて、補間フレームを作成する手段であって、画像ブロックの動きベクトルとして、符号化ブロックの動き補償ベクトルを用いる。」と記載されている（要約参照）。
【０００３】
また、本技術分野の他の背景技術として、例えば、特開平５-１４７７６号公報（特許文献２）がある。該公報には、目的として「カメラ撮影の記録が行われた後、そのカメラ映像と共に、カメラ操作情報を利用すること。」と記載され、構成として「テレビカメラ１で撮影した際のパン角度，チルト角度，ズーム量，フォーカス量，カメラ位置の情報をカメラ情報検出器２で検出し、ディジタル符号器３で符号化した後、カメラ１からの映像信号の垂直ブランキングに重畳し、ＶＴＲ５によってテープに記録する。」と記載されている（要約参照）。
【０００４】
また、本技術分野の他の背景技術として、例えば、特開２００６−２６２１３５号公報（特許文献３）がある。該公報には、課題として「動画撮影時に取得される装置に作用する加速度を利用した動画の記録再生を可能とする。」と記載され、解決手段として「カメラ装置１は、動画撮影モードにおいて、複数のフレーム画像からなる動画を撮影する。動画撮影時には加速度検出部４６により加速度を取得し、この取得された加速度に応じてフレーム画像を間引き／補間することで撮影された動画のフレーム数を調整し、このフレーム数が調整された動画をメモリカード３２あるいは内蔵メモリ３３に記録する。」と記載されている（要約参照）。
【０００５】
また、本技術分野の他の背景技術として、例えば、特開平１０−２３３９９６号公報（特許文献４）がある。該公報には、課題として「間欠的に記録された映像信号を再生する際に、画像の平行移動を検出したときに違和感の少ない画像を再生する映像信号再生装置および映像信号再生方法を提供する。」と記載され、解決手段として「入力信号処理部２には、監視ビデオ、テレビジョン電話等からの間欠画像の映像信号が入力される。システムコントロール部８は、付加情報処理部４又は動きベクトル検出部５からの情報に基づき間欠画像が平行移動したことを検出する。システムコントロール部８は、平行移動をしたことを検出すると、付加情報処理部４で検出した間欠画像の間欠間隔から内挿する補間フレームの挿入枚数等を決定して、内挿処理部６の制御を行う。内挿処理部６は、間欠画像から補間フレームを生成し、この補間フレームをこの間欠画像に合成する。」と記載されている（要約参照）。
【特許文献１】特開２００５-６２７５公報（第１頁、図１）
【特許文献２】特開平５-１４７７６公報（第１頁、図２）
【特許文献３】特開２００６−２６２１３５号公報（段落５２〜８２）
【特許文献４】特開平１０−２３３９９６号公報（段落１３〜２１、図１４、１６）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上記特許文献１に記載の技術では、記録映像情報を元に生成した動きベクトルを元に、補間フレームを生成するため、記録時のパン情報、傾き情報、ズーム情報を正確に再現することは難しい。また、加速度情報に関しては記録映像情報からは推測することができない。従って、上記動き補償ベクトルを用いて補間フレームを生成した場合、実際の動作とのずれが発生する。
【０００７】
また、特許文献２に記載の技術では、テレビカメラ１で撮影した際のパン角度，チルト角度，ズーム量，フォーカス量，カメラ位置の情報を記録するが、これを補間フレームの生成に用いる記載はない。
【０００８】
また、特許文献３に記載の技術では、動画撮影時には加速度検出部４６により加速度を取得し、この取得された加速度に応じてフレーム画像を間引き／補間することで撮影された動画のフレーム数を調整するが、補間フレームを生成する際に、枚数以外の点で、当該加速度を用いるものではない。
【０００９】
また、特許文献４に記載の技術では、映像信号や音声信号の他に付加情報が記録され、付加情報にはカメラワーク情報（パンニング、ズームアップ等）が含まれる（段落００１８参照）。そして、画像が平行移動を検出した場合は、現フレーム（または前フレーム）を補間フレームの位置まで平行移動し、そこに静止画像を合成する等して、補間フレームを生成する（図１４，１６、段落５２，５８参照）。しかし、当該技術は、画像の平行移動のみを対象とし、静止画像部分以外は、現フレーム（または前フレーム）を補間フレームの位置まで平行移動するだけであり、より複雑な動きがある場合に対応できない。
【００１０】
そこで、本発明のある一面は、上記の課題を改善し、高画質な映像処理装置を提供することを目的としている。
【課題を解決するための手段】
【００１１】
上記目的を達成するため、本発明のある一面は、特許請求の範囲に記載の構成を採用する。一例として、映像信号に含まれる連続する２枚の画像フレームについて、カメラ情報を用いて、該２枚の画像フレームの間の時間的位置に対応するように補正し、補正された補正フレームについて、動き補償を用いて、該２枚の画像フレームの間に補間する補間フレームを生成するようにする。例えば、撮影部において、映像信号を符号化し、符号化された映像情報と共にカメラ情報を記録し、記録された映像信号とカメラ情報を再生部の入力とし、再生部において、記録された映像情報を復号化し、復号化された映像信号の画像フレーム間に、カメラ情報、例えばズーム情報またはパン情報または加速度情報または傾き情報を用いてN枚の補間フレームを生成して出力することで、記録時の状態に合わせたフレーム補間を実現する。
【発明の効果】
【００１２】
本発明のある一面によれば、高画質な映像処理装置が提供できる。例えば、記録時の状態に合わせたフレーム補間を実現するシステム、方法及び機器の提供が可能である。
【００１３】
上記以外の課題、構成および効果は、以下の実施形態の説明により明らかにされる。
【発明を実施するための最良の形態】
【００１４】
以下、本発明の実施の形態を、図面を用いて説明する。
【００１５】
図１は、本実施例を具体化するシステムの一例である。
【００１６】
本実施の形態は、撮影部１において、映像信号を符号化し、符号化された映像情報と共にカメラ情報を記録し、記録された映像信号とカメラ情報を再生部２の入力とし、再生部２において、記録された映像情報を復号化し、復号化された映像信号の画像フレーム間に、カメラ情報、例えばズーム情報またはパン情報または加速度情報または傾き情報を用いてN枚の補間フレームを生成して出力することで、記録時の状態に合わせたフレーム補間を実現するシステムに関するものである。
【００１７】
図２は、図１における再生部２の詳細な一例である。再生部２は、撮影部１で符号化された映像信号を復号化することを特徴とする復号化部と、復号化された映像信号と撮影部１から取得したカメラ情報を元に、復号化された映像信号の画像フレームAと画像フレームBの間に1枚または複数枚の補間フレームCを生成し、前記画像フレームAと画像フレームBの間に、前記補間フレームCを挿入して出力するフレーム補間部とで構成される。
【００１８】
図３は、図２におけるフレーム補間部４の詳細な一例である。フレーム補間部４は、画像フレームAと画像フレームBの間に、時間的に等間隔な位置にN枚の補間フレームを生成することを特徴とし、画像フレームAとカメラ情報を元に、N枚の補間フレームA[n]（n＝0,1,…,N-1）を生成する補間フレーム生成部Aと、画像フレームBとカメラ情報を元に、N枚の補間フレームB[n]（n＝0,1,…,N-1）を生成する補間フレーム生成部Bと、補間フレームA[n]と補間フレームB[n]を元に、N枚の補間フレームC[n](n=0,1,…,N-1)を生成する補間フレーム生成部Cとで構成される。
【００１９】
図４は、図３における補間フレーム生成部Ｃ７の詳細な一例である。補間フレーム生成部Ｃ７は、補間フレームA[n]及び補間フレームB[n]を構成する画像ブロックの動き補償ベクトルを生成する動き検出部と、動き補償ベクトルを用いて、補間フレームA[n]と補間フレームB[n]の間に、時間的に等間隔な位置にN枚の補間フレームC[n]を生成するフレーム補間コア部とで構成される。
【００２０】
図５は、画像フレーム間に１枚の補間フレームを生成した場合の一例を示した図である。画像フレームＡと画像フレームＢの時刻的間隔T0に対して、時刻的に中央位置、すなわち画像フレームＡと画像フレームＢから共にT0/2の位置に補間フレームを生成している。
【００２１】
図６は、画像フレーム間にＮ枚の補間フレームを生成した場合の一例を示した図である。画像フレームＡと画像フレームＢの時刻的間隔T0に対して、Ｎ枚の補間フレームを時刻的に等間隔で配置、すなわち画像フレームＡと補間フレーム、補間フレーム間、及び補間フレームと画像フレームＢの間隔をそれぞれT0/(N+1)としている。
【００２２】
図７は、画像フレーム間にＮ枚の補間フレームを生成した場合の別の一例を示した図である。期間２１０、期間２１１、期間２１２にはカメラ情報を元に分類された期間である。例えば連続した画像フレームに相関性が高い順に、期間２１２、期間２１１、期間２１０とする。この例では相関性に応じて、画像フレーム間に挿入する補間フレーム数を変更している。期間２１２は画像フレーム間の相関性が高いと判断して、3枚の補間フレームを挿入している。同様に期間２１１では、1枚の補間フレームを挿入している。期間２１０では、画像フレーム間の相関性が低いと判断し、フレーム補間を行なっていない。
【００２３】
相関性は撮影部１から取得するカメラ情報や、動き補償ベクトル情報を元に決定する。例えば、パン情報、ズーム情報、傾き情報が共に所定の閾値以内に収まっている場合には、画像フレーム間の相関性は高いと判断する。また、画像フレーム内の各画像ブロックに対する動き補償ベクトルの乱れ度合いで相関性を判断することにより、撮影時、カメラ自体は静止しているが、撮影しているオブジェクトが激しく動作している場合の画像フレーム間の相関性も判断しても良い。
【００２４】
動き補償ベクトルの乱れ度合いは、周辺の画像ブロックに対する動き補償ベクトルの相関性で判断しても良いし、画面全体の平均と各画像ブロックに対する動き補償ベクトルの相関性で判断しても良い。
【００２５】
図８は、本実施例を具体化するフレーム補間手順の一例である。
本実施の形態は、時刻的にＴ０離れている２枚の画像フレーム、すなわち画像フレーム３０と画像フレーム３１の時刻的中間位置に、補間フレーム３３を生成する手順に関するものである。画像フレーム３０の時刻を(T)、画像フレーム３１の時刻を(T+T0)とする。この場合、補間フレーム挿入位置は(T+T0/2)となる。画像フレーム３０は、背景画３００と移動するオブジェクト３１０とで構成される。画像フレーム３１はパン情報４０が示す分、画像フレーム３０からパンした状態であり、更に移動するオブジェクト３１０が左上に向かって移動した構成となっている。
【００２６】
中間画像フレーム３２は、画像フレーム３０と画像フレーム３１に対して、画像フレームを構成する画像ブロックの動き補償ベクトルの一例を示した図である。移動するオブジェクトを構成する画像ブロック５０及び５１から移動するオブジェクトに対する動き補償ベクトル４４を生成する。また、背景画を構成する画像ブロック５２及び５３から、背景画に対する動き補償ベクトル４２を生成する。同様に背景画を構成する画像ブロック５４及び５５から、背景画に対する動き補償ベクトル４３を生成する。
【００２７】
動き補償ベクトルの中間位置に、画像フレーム３０と画像フレーム３１を元に補間フレーム３３を生成する。
【００２８】
中間画像フレーム３２の例で示すように、画像ブロック毎に動き補償ベクトルが発生する。動き補償ベクトル生成の一例として、画像フレーム内の所定範囲で画像ブロックのマッチング探索により、類似性の高い画像ブロックを検出し、動き補償ベクトルとする方式がある。本例では、パン情報４０と等価なパラメータとして、動き補償ベクトル４２及び４３が生成されるが、再生された画像フレームより生成するため、実際のパンの動きと完全に一致はしない。また、動き補償ベクトルの誤検出発生確率も高くなる。誤った動き補償ベクトルを元に補間フレームを生成した場合、誤った位置に画像ブロックを補間してしまい、補間フレーム品質の低下を招く。
【００２９】
パン情報４０から、時刻画像フレーム３０と補間フレーム３３のパン情報４１aと、時刻画像フレーム３１と補間フレーム３３のパン情報４１ｂを生成する。パン情報４０を(+X,+Y)とすると、パン情報４１aは(-X/2,-Y/2)、パン情報４１ｂは(+X/2,+Y/2)となる。
【００３０】
補正画像フレーム３０aは、パン情報４０aを用いて、画像フレーム３０を補正した図である。
補正画像フレーム３１aは、パン情報４０ｂを用いて、画像フレーム３１を補正した図である。
補正画像フレーム３０aと３１aはパン情報を元に、それぞれ画像フレーム３０と３１から生成した補間フレームである。
【００３１】
補正画像フレーム３０aと３１aから生成される中間画像フレーム３２aは、補正画像フレーム３０aと補正画像フレーム３１aに対して、補正画像フレームを構成する画像ブロックの動き補償ベクトルの一例を示した図である。移動するオブジェクトを構成する画像ブロック５６及び５７から移動するオブジェクトに対する動き補償ベクトル４２aを生成する。動き補償ベクトル４２aは、動き補償ベクトル４４からパン情報４０を取り除いた動き補償ベクトルとなっている。また、背景画を構成する画像ブロックに対しては、パン情報４０を取り除いたことにより、動き補償ベクトルはほぼ0値になっている。
【００３２】
実際のパン情報４０を用いて、一旦補正フレームに返還した後に、動き補償ベクトルを生成することで、動き補償ベクトルの誤検出発生確率を低く抑え、結果として正しい位置に画像ブロックを補間することを可能とし、補間フレーム品質の向上を図ることができる。
【００３３】
図９は、２枚の画像フレーム４００と４０１の間に１枚の補間フレームを生成する際に、線形補間を用いた場合の一例を示した図である。画像フレーム４００及び４０１は、背景画１０１で構成されており、右下から左上に向かってパンしている。画像フレーム４００と補間フレーム４０２、補間フレーム４０２と画像フレーム４０１のパン情報は共に等しいものとし、補間フレーム４０２を生成する。また、画像フレームの倍速のレートでカメラ情報を記録し、再生時に使用する場合、線形補間ではなく、直接、２枚の画像フレームの中間位置フレームに相当するパン情報を用いることで、更なる補間フレームの品質向上を図ることができる。
【００３４】
図１０、１１、１２は、カメラ情報としてパン情報、傾き情報、ズーム情報がそれぞれ付加された場合の補間フレーム生成の一例を示した図である。補間フレーム生成手順は、図８で示したとおりである。
【００３５】
図１０は、２枚の画像フレーム４００と４０１の間に１枚の補間フレームを生成する際に、非線形補間を用いた場合の一例を示した図である。画像フレーム４００及び４０１は、背景画１０１で構成されており、右下から左上に向かってパンしている。加速度情報により、画像フレーム４００と補間フレーム４０２の間隔Ａと、補間フレーム４０２と画像フレーム４０１の間隔Ｂの比率が、１：３であるとすると、その比率に応じてパン情報も、１：３の比率となる。画像フレーム４００と４０１のパン情報を(+X,+Y)とすると、画像フレーム４００と補間フレーム４０２のパン情報は(+3X/4, +3X/4)、補間フレーム４０２と画像フレーム４０１のパン情報は(+X/4,+Y/4)となる。また、画像フレームの倍速のレートでカメラ情報を記録し、再生時に使用する場合、非線形補間ではなく、直接、２枚の画像フレームの所定位置フレームに相当するパン情報を用いることで、更なる補間フレームの品質向上を図ることができる。
【００３６】
図１１は、カメラ情報として傾き情報が付加されている場合、２枚の画像フレーム４０６と４０７の間に１枚の補間フレーム４０８を生成する一例を示した図である。画像フレーム４００及び４０１は、背景画１０１で構成されており、時計回りに角度θ分傾いている。画像フレーム４０６を時計回りに角度θ/2分回転して生成した補正画像フレームと、画像フレーム４０７を時計回りに角度-θ/2分回転して生成した補正画像フレームとを用いて、補間フレーム４０８を生成する。
【００３７】
図１２は、カメラ情報としてズーム情報、すなわちズーム中心座標(Xz,Yz)とズーム倍率Zが付加されている場合、２枚の画像フレーム４０９と４１０の間に１枚の補間フレーム４１１を生成する一例を示した図である。画像フレーム４０９及び４１０は、背景画４１２で構成されており、座標(Xz,Yz)を中心に、Ｚ倍されている。画像フレーム４０９を座標(Xz,Yz)を中心に√Ｚ倍することで生成した補正画像フレームと、画像フレーム４１０を座標(Xz,Yz)を中心に１/√Ｚ倍することで生成した補正画像フレームとを用いて、補間フレーム４１１を生成する。
図１３は、カメラ情報としてパン情報が付加されている場合、２枚の画像フレーム４０９と４１０から動き補償ベクトル生成時の探索範囲補正を行う一例である。通常定められた探索範囲領域から、パン情報分ずらした位置を探索範囲とすることで、より効果的な探索を行なうことができ、類似性からのみ決定される誤った動き補償ベクトル生成を改善することができる。これにより、補間フレームの品質向上を図ることができる。
【００３８】
図１４は、本実施例を具体化するシステムの別の一例である。撮影部１が、接続された再生部２のフレーム補間機能の有無を確認する手段を有し、フレーム補間機能がある場合には符号化された映像信号と共に、カメラ情報を供給し、フレーム補間機能がない場合には符号化された映像信号を供給し、カメラ情報を供給しない切替手段を有する。
【００３９】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。
【００４０】
また、上記の各構成は、それらの一部又は全部が、ハードウェアで構成されても、プロセッサでプログラムが実行されることにより実現されるように構成されてもよい。また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
【図面の簡単な説明】
【００４１】
【図１】本実施例を具体化するシステムの一例である
【図２】図１に示すフレーム補間システムにおける再生部２の一例である
【図３】図２に示す再生部におけるフレーム補間部４の一例である
【図４】図３に示すにおけるフレーム補間部４における補間フレーム生成部Ｃ７の一例である
【図５】画像フレーム間に１枚の補間フレームを挿入した場合の一例である
【図６】画像フレーム間にＮ枚の補間フレームを挿入した場合の一例である
【図７】カメラ情報により、画像フレーム間に生成する補間フレーム数を変更した場合の一例である
【図８】本実施例を具体化する補間フレーム生成手順の一例である
【図９】本実施例を具体化する補間フレーム生成手順の別の一例である
【図１０】本実施例を具体化する補間フレーム生成手順の別の一例である
【図１１】本実施例を具体化する補間フレーム生成手順の別の一例である
【図１２】本実施例を具体化する補間フレーム生成手順の別の一例である
【図１３】本実施例を具体化する補間フレーム生成手順の別の一例である
【図１４】本実施例を具体化するシステムの別の一例である
【符号の説明】
【００４２】
１    撮影部
２    再生部
１００    入力映像
１０１    映像情報及びカメラ情報
１０２    補間フレームを含む画像フレーム
【図１】
2009200985.tif 000003
【図２】
2009200985.tif 000004
【図３】
2009200985.tif 000005
【図４】
2009200985.tif 000006
【図５】
2009200985.tif 000007
【図６】
2009200985.tif 000008
【図７】
2009200985.tif 000009
【図８】
2009200985.tif 000010
【図９】
2009200985.tif 000011
【図１０】
2009200985.tif 000012
【図１１】
2009200985.tif 000013
【図１２】
2009200985.tif 000014
【図１３】
2009200985.tif 000015
【図１４】
2009200985.tif 000016