(57)【要約】【課題】動きの滑らかな立体映像をユーザに提供することを可能とする映像処理装置、映像表示システム、及び映像表示方法を提供する【解決手段】同時に撮像した、視差を有する左目用画像と右目用画像を受信し、画像生成部３３はこの右目用画像の連続する画像フレームを用いて、それらの画像フレームを撮像した時刻の中間時刻の中間画像を生成する。この中間画像を右目用画像の代わりに左目用画像を交互に表示部３７より表示する。この表示のタイミングと同期させて、左目用画像が左目のみに見えるように、また右目用画像が右目のみに見えるようにシャッターメガネ３のシャッターを制御する。こうすることで同時に撮像した画像フレームを異なった時刻に表示する場合よりも、動きの滑らかな立体表示をユーザに提供することが可能となる。【選択図】図３
2011066574.tif 000002
【特許請求の範囲】
【請求項１】
動画像として撮像対象を撮像した第１の画像フレーム群と、前記第１の画像フレーム群が撮像された同じタイミングで撮像対象を撮像した第２の画像フレーム群とを入力する入力手段と、
前記第１の画像フレーム群のうちの連続する前後の画像フレームを用いて、前記前後の画像フレームの中間画像を生成する中間画像生成手段と、
前記中間画像生成手段によって生成された前記中間画像と、前記第２の画像フレーム群とが順次交互に表示されるように表示を制御する表示制御手段と、
前記表示制御手段によって制御される表示と同期して、前記中間画像を表示中は一方の箇所に見えるように、前記第２の画像フレーム群を表示中は他方の箇所に見えるように制御する制御手段と
を具備することを特徴とする映像処理装置。
【請求項２】
前記中間画像生成手段は、連続する前記前後の画像フレーム内の動きベクトルを求め、求めた前記動きベクトルに基づいて前記中間画像を生成すること
を特徴とする請求項１記載の映像処理装置。
【請求項３】
前記映像処理装置はさらに、ユーザが装着したときに右眼及び左眼に入射する映像をそれぞれ遮ることができるシャッターを有するシャッターメガネに信号送信可能に接続されており、
前記制御手段は、
前記シャッターメガネに対して、前記表示制御手段によって前記中間画像が表示されているとき一方の眼に対応付けられた一方のシャッターを閉じ、
前記第２のフレーム群が表示されているときに、他方の眼に対応付けられた他方のシャッターを閉じるように開閉信号を送信する信号送信手段を有する
ことを特徴とする請求項１記載の映像処理装置。
【請求項４】
動画像として撮像対象を撮像した第１の画像フレーム群と、前記第１の画像フレーム群が撮像された同じタイミングで撮像対象を撮像した第２の画像フレーム群とを入力する入力手段と、
前記第１の画像フレーム群のうちの連続する前後の画像フレームを用いて、前記前後の画像フレームの中間画像を生成する中間画像生成手段と、
前記中間画像生成手段によって生成された前記中間画像と、前記第２の画像フレーム群とを順次交互に表示する表示手段と、
表示手段によって表示される前記中間画像を一方の箇所に見えるように、前記第２の画像フレーム群を他方の箇所に見えるように出力する出力手段と
を具備することを特徴とする映像表示システム。
【請求項５】
前記中間画像生成手段は、連続する前記前後の画像フレーム内の動きベクトルを求め、求めた前記動きベクトルに基づいて前記中間画像を生成すること
を特徴とする請求項４記載の映像表示システム。
【請求項６】
前記出力手段は、
前記表示手段が前記中間画像を表示しているときに一方の眼に対応付けられたシャッターを閉じ、
前記第２のフレーム群を表示しているときに、他方の目に対応付けられたシャッターを閉じるシャッターメガネであること
を特徴とする請求項４記載の映像表示システム。
【請求項７】
動画像として撮像対象を撮像した第１の画像フレーム群と、前記第１の画像フレーム群が撮像されたと同じタイミングで撮像対象を撮像した第２の画像フレーム群とを入力し、
前記第１の画像フレーム群のうちの連続する前後の画像フレームを用いて、前記前後の連続する画像フレームの中間画像を生成し、
生成された前記中間画像と、前記第２の画像フレーム群とを順次交互に表示し、
表示される前記中間画像を一方の箇所に見えるように、前記第２の画像フレーム群を他方の箇所に見えるように出力する
ことを特徴とする映像表示方法。
【請求項８】
前記中間画像を生成するとき、連続する前記前記画像フレーム内の動きベクトルを求め、求めた前記動きベクトルに基づいて前記中間画像を生成すること
を特徴とする請求項７記載の映像表示方法。
【請求項９】
前記中間画像を表示しているときに、ユーザが装着したときに右眼及び左眼に入射する映像をそれぞれ遮ることができるシャッターを有するシャッターメガネの一方の眼に対応付けられたシャッターを閉じ、
前記第２のフレーム群を表示しているときに、前記シャッターメガネの他方の眼に対応付けられたシャッターを閉じることで、表示される前記中間画像を前記他方の眼に、前記第２の画像フレーム群を前記一方の眼に出力すること
を特徴とする請求項７記載の映像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は映像処理装置、映像表示システム、及び映像処理方法に関するものであって、特に動きの滑らかな立体映像をユーザに提供することが可能な映像処理装置、映像表示システム、及び映像表示方法に関する。
【背景技術】
【０００２】
近年、映像表示技術の発達により、ユーザに立体映像を表示することが可能な立体映像表示システムが提案されている。この立体映像表示システムのなかには、ユーザに立体映像を認識させる方式の一つとして、シャッターメガネを用いた立体映像表示方式がある。
【０００３】
シャッターメガネを用いる立体映像表示方式では、一つの表示装置に互いに視差を有する左目用画像と右目用画像とを異なったタイミングで表示して、シャッターメガネのシャッターの開閉を制御することによって、左目用画像をユーザに左目のみに見せ、右目用画像を右目のみに見せることで、ユーザに表示装置に表示されている映像を立体として認識させている。
【０００４】
また、２次元（平面）映像の画像フレームにディレイ処理を施し、上述のような左目用画像と右目用画像の３次元（立体）映像を生成して、２次元映像を３次元映像に変換する装置が提案されている（特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平１１−９８５３５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
立体映像を撮影するときに、２台の撮像装置を用いて左目用画像と右目用画像とをそれぞれ同時に撮像する場合がある。このとき、２台の撮像装置が同時刻に画像フレームを撮像し、これらを交互にユーザに表示しようとすると、それぞれの画像フレームは同じタイミングで撮像された画像であるにも関わらず、ユーザに表示するときには右目用と左目用とでは時間差が生じてしまう。このため、表示される左目用画像と右目用画像とでは撮影した実時間とは異なるタイミングで映像が表示され、特に撮像対象が動いている場合、ユーザにはぎこちない立体映像として映ってしまう。
【０００７】
本発明は上記問題に鑑みてなされたものであって、動きの滑らかな立体映像をユーザに提供することを可能とする映像処理装置、映像表示システム、及び映像表示方法を提供する
【課題を解決するための手段】
【０００８】
本発明にかかる映像処理装置は、動画像として撮像対象を撮像した第１の画像フレーム群と、前記第１の画像フレーム群が撮像された同じタイミングで撮像対象を撮像した第２の画像フレーム群とを入力する入力手段と、前記第１の画像フレーム群のうちの連続する前後の画像フレームを用いて、前記前後の画像フレームの中間画像を生成する中間画像生成手段と、前記中間画像生成手段によって生成された前記中間画像と、前記第２の画像フレーム群とが順次交互に表示されるように表示を制御する表示制御手段と、前記表示制御手段によって制御される表示と同期して、前記中間画像を表示中は一方の箇所に見えるように、前記第２の画像フレーム群を表示中は他方の箇所に見えるように制御する制御手段とを具備することを特徴としている。
【０００９】
また、本発明にかかる映像表示システムは、動画像として撮像対象を撮像した第１の画像フレーム群と、前記第１の画像フレーム群が撮像された同じタイミングで撮像対象を撮像した第２の画像フレーム群とを入力する入力手段と、前記第１の画像フレーム群のうちの連続する前後の画像フレームを用いて、前記前後の画像フレームの中間画像を生成する中間画像生成手段と、前記中間画像生成手段によって生成された前記中間画像と、前記第２の画像フレーム群とを順次交互に表示する表示手段と、表示手段によって表示される前記中間画像を一方の箇所に見えるように、前記第２の画像フレーム群を他方の箇所に見えるように出力する出力手段とを具備することを特徴としている。
【００１０】
更に、本発明にかかる映像表示方法は、動画像として撮像対象を撮像した第１の画像フレーム群と、前記第１の画像フレーム群が撮像されたと同じタイミングで撮像対象を撮像した第２の画像フレーム群とを入力し、前記第１の画像フレーム群のうちの連続する前後の画像フレームを用いて、前記前後の連続する画像フレームの中間画像を生成し、生成された前記中間画像と、前記第２の画像フレーム群とを順次交互に表示し、表示される前記中間画像を一方の箇所に見えるように、前記第２の画像フレーム群を他方の箇所に見えるように出力することを特徴としている。
【発明の効果】
【００１１】
本発明にかかる映像処理装置、立体映像表示システム、及び映像処理方法は、右眼用画像（あるいは左眼用画像）がユーザに届く、時系列的にずれたタイミングに存在するべき画像フレームを生成し、そのずれたタイミングで表示することによって、動きの滑らかな立体映像をユーザに提供する映像処理装置、映像表示システム、及び映像表示方法を実現することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の一実施形態における立体映像表示システムの概観の一例を示す図。
【図２】本発明の一実施形態における左目用画像と右目用画像との撮影システムの一例を示す図。
【図３】本発明の一実施形態における立体映像表示システムの内部構成の一例を示すブロック図。
【図４】本発明の一実施形態における映像表示装置に表示される画像フレームとシャッターメガネのシャッターの開閉周期の一例を示す図。
【図５】本発明の一実施形態における画像生成部によって画像生成処理を行わなかった場合のユーザの視認する画像フレームの一例を示す図。
【図６】本発明の一実施形態における画像生成部による画像生成処理の一例を示す図。
【図７】本発明の一実施形態における画像生成部によって画像生成処理を行なった場合のユーザの視認する画像フレームの一例を示す図。
【図８】本発明の一実施形態における映像表示装置の行う処理の処理フローの一例を示す図。
【発明を実施するための形態】
【００１３】
以下、本発明の実施の一形態を図面を用いて説明する。
【００１４】
図１は本実施形態における立体映像表示システム１の概観の一例を示す図である。図１には立体映像表示システム１、映像表示装置２、およびシャッターメガネ３が示されている。
【００１５】
立体映像表示システム１は映像表示装置２及びシャッターメガネ３によって構成される。ユーザはシャッターメガネ３を装着して、映像表示装置２に表示されている映像を見ることで、この映像を立体映像として認識することができる。
【００１６】
人間は通常、物体を位置の異なる左目と右目とのそれぞれで見ており、この左目と右目とで見る像にはそれぞれ視差が存在する。この視差の存在する左目で見る像と右目で見る像とを脳内で合成することによって人間は見ている物体を立体として認識することができる。よって、視差を有する左目用の画像と右目用の画像をそれぞれの目で見ることによって、ユーザはそれらの画像を脳内で合成し、立体として捉えることが可能となる。
【００１７】
映像表示装置２は例えばデジタルテレビであって、互いに視差を有する左目用画像と右目用画像を交互に表示することによって、シャッターメガネ３を装着したユーザに立体映像を表示することが可能である。また、映像表示装置２は受信する立体映像表示用の画像信号に基づいて新たな画像フレームを生成する機能も有している。
【００１８】
シャッターメガネ３は左目用レンズ４および右目用レンズ５を有している。この左目用レンズ４及び右目用レンズ５にはそれぞれ遮光可能なシャッターが設けられており、映像表示装置２から受信するシャッターの開閉信号にもとづいて、それぞれのシャッターを異なるタイミングで開閉してユーザに立体映像を提供する。例えば、表示装置２に左目用画像が表示されているときには、シャッターメガネ３は表示装置２からの開閉信号に基づいて右目用レンズ５のシャッターを閉状態とし、ユーザの左目（一方の箇所）のみに左目用画像を見せる。また右目用画像が表示されているときには左目用レンズ４のシャッターを閉状態とし、ユーザの右目のみ（他方の箇所）に右目用画像を見せる。
【００１９】
図２は本実施形態における左目用画像と右目用画像との撮影システムの一例を示す図である。図２には物体２１、左目用撮像装置２２、右目用撮像装置２３、多重化装置２４、送信装置２５、及び画像フレーム２０１〜２０４が示されている。
【００２０】
物体２１は左目用撮像装置２２および右目用撮像装置２３の撮像対象であり、図２中矢印方向（右方向）に移動する移動体である。
【００２１】
左目用撮像装置２２および右目用撮像装置２３は物体２１を撮像する撮像装置であり、これらはそれぞれ左目用画像と右目用画像を撮像する。また、左目用撮像装置２２および右目用撮像装置２３の画像の撮影時刻は同タイミングである（同時刻に画像の撮像を行う）。
【００２２】
画像フレーム２０１〜２０４は左目用撮像装置２２および右目用撮像装置２３によって撮像される画像フレームである。画像フレーム（L１）２０１、画像フレーム（R１）２０２は時刻T１において左目用撮像装置２２、右目用撮像装置２３がそれぞれ撮像した画像フレームであり、画像フレーム（L２）２０３、画像フレーム（R２）２０３は時刻T２において左目用撮像装置２２、右目用撮像装置２３がそれぞれ撮像した画像フレームである。左目用撮像装置２２および右目用撮像装置２３によって撮像されたこれらの画像フレーム２０１〜２０４はそれぞれ多重化装置２４に送信される。
【００２３】
多重化装置２４は左目用撮像装置２２および右目用撮像装置２３よりパラレルに受信する左目用の画像フレームと右目用の画像フレームを連続したシリアルなデータに多重化して、送信装置２５に対して送信する機能を有している。本実施形態において多重化装置２４は先に撮像した画像フレームより時系列的に順に送信するように画像フレームの多重化を行うが、同時刻に撮像された画像フレームは左目用の画像フレームを先、右目用の画像フレームを後となるように並べて多重化し、送信装置２５に対して送信する。
【００２４】
送信装置２５は受信した画像フレームのデジタルデータをエンコードし、放送信号として受信装置に対して送信する。
【００２５】
図３は本実施形態における立体映像表示システム１の内部構成の一例を示すブロック図である。
【００２６】
図３に示されるように、映像表示装置２はチューナ３１、L/R振分部３２、画像生成部３３、L/R多重化部３４、表示制御部３５、L/R開閉信号送信部３６、及び表示部３７を有しており、前記送信装置２５が送信した放送信号を受信し、ユーザに立体映像を提供することができる。
【００２７】
チューナ３１は、アンテナによって受信した図２に示す送信装置２５より送信される放送信号をデコード処理し、映像表示装置２で表示可能な画像信号へ変換して映像表示装置２内に画像信号を入力する入力手段としての機能を有している。
【００２８】
L/R振分部３２はチューナ３１によって映像表示装置２で表示可能な形式へ変換された、映像信号を左目用画像と右目用画像へと振り分ける機能を有している。L/R振分部３２は受信する映像信号より左目用画像と右目用画像とを分離し、左目用画像はL/R多重化部３４へ、右目用画像は画像生成部３３へと送信する。
【００２９】
画像生成部３３はL/R振分部３２より右目用画像を受信し、受信した右目用画像の連続する画像フレームに基づいて、それぞれの画像フレームが撮像された時刻の中間時刻の新たな右目用画像を生成する。この画像生成処理に関しては図６を用いて後述する。画像生成部３３は新たに右目用画像を生成し、L/R振分部３２より受信した右目用画像に代えてL/R多重化部３４に送信する機能を有している。
【００３０】
L/R多重化部３４はL/R振分部３２より受信する左目用画像と、画像生成部３３より受信する新たに生成された右目用画像とを並べて多重化する機能を有している。また、L/R多重化部３４多重化した画像データを表示制御部３５に送信する。
【００３１】
表示制御部３５はL/R多重化部３４より受信する画像データを表示部３７に表示させる機能を有している。このとき、表示制御部３５は画像データ中の画像フレームの表示時間の制御を行う。一つの画像フレームを表示する時間は、左目用撮像装置２２および右目用撮像装置２３においてそれぞれの画像フレームの撮像を行った周期の半分の時間となる。例えば、左目用撮像装置２２および右目用撮像装置２３がそれぞれ６０分の１秒周期で連続して撮像していとすると、映像表示装置２は１２０分の１秒毎に表示している画像フレームを切り替えることとなる。また、表示制御部３５はこの画像フレームの切り替えに同期してシャッターメガネ３がシャッターを開閉するように、シャッターメガネ３の開閉に関する信号をL/R開閉信号送信部３６に対して送信する。
【００３２】
L/R開閉信号送信部３６は上記のシャッターメガネ３の開閉に関する信号を表示制御部３５より受信すると、シャッターメガネ３に対して赤外線によってシャッターへの開閉を指示する開閉信号を送信する信号送信手段としての機能を有している。本実施形態では赤外線によって開閉信号を送信すると例示するが、これに限定されず、開閉信号を送信できれば他の無線送信であってもよい。また、映像表示装置２とシャッターメガネ３が信号の送受信可能な有線ケーブルによって接続されていてもよい。
【００３３】
シャッターメガネ３はL/R開閉信号送信部３６より受信する開閉信号に基づいてシャッターの開閉を行う。
【００３４】
ここでの表示部３７に表示される表示の切り替え、シャッターメガネ３シャッターの開閉の周期に関しては図４を用いて説明する。
【００３５】
図４は本実施形態における映像表示装置２に表示される画像フレームとシャッターメガネ３のシャッターの開閉周期の一例を示す図である。
【００３６】
本実施形態においては画像データ中のそれぞれの画像フレームを１２０分の１秒毎に切り替える（それぞれの画像フレームを１２０分の１秒ずつ表示する）。
【００３７】
本実施形態ではシャッターメガネ３の左右それぞれのレンズに設けられたシャッターは開閉信号１を受信すると開き、開閉信号０を受信すると閉じるものとする。L/R開閉信号送信部３６は赤外線によってこれらの開閉信号を送信し、シャッターメガネ３の左右のレンズのシャッターの開閉状態を制御する制御手段として機能する。上述のように映像表示装置２は表示部３７に表示する画像フレームの切り替えに同期させて、L/R開閉信号送信部３６よりシャッターメガネ３に開閉信号を送信する。映像表示装置２は表示部３７に左目用画像が表示されているときは左目用レンズ４のシャッターの開閉信号を１、右目用レンズ５のシャッターの開閉信号を０として、ユーザの左目のみに左目用画像を視認させるようにする。また、右目用画像が表示されているときは図４に示すように映像表示装置２はこれらの開閉信号の値を逆として出力し、ユーザの右目のみに右目用画像を視認させるようにする。
【００３８】
図５は本実施形態における画像生成部３３によって画像生成処理を行わなかった場合のユーザの視認する画像フレームの一例を示す図である。
【００３９】
図５には左目用レンズ４からユーザが視認できる画像、右目用レンズ５からユーザが視認できる画像、およびこれらを合わせてユーザが視認できる画像が左より順に縦方向に時系列に示す。図５に示す図は上が古く、下が新しい。また、斜線で示される枠はシャッターが閉じている状態でユーザは何も視認することができない状態である。
【００４０】
左目用画像と右目用画像が交互に映像表示装置２の表示部３７に表示され、ユーザはこの左目用画像を左目で視認し右目用画像を右目で視認する。これらの左目用画像と右目用画像とをあわせて、最終的にユーザが認識する画像は図５右のユーザが視認できる画像となる。これらの左目用画像と右目用画像とは視差を有するため、ユーザは映像を立体として認識することができる。しかし、図５中のユーザが視認できる画像における破線で囲まれた枠内の画像フレームは同時刻に撮像されたものとなっており、ユーザは同時間に撮像した画像フレームを異なる時間に視認することとなる。そのため、ユーザは撮像周期の半分の時間分ずつ遅れた右目用画像を見ることとなり、このズレが動画の動きに不自然さを与え、動画は滑らかでなく、ぎこちないものとなってしまう。
【００４１】
図６は本実施形態における画像生成部３３による画像生成処理の一例を示す図である。
【００４２】
本実施形態において画像生成部３３は受信した右目用画像に画像生成処理を行う。ここでの画像生成処理とは２枚の画像フレームを比較して、画像フレーム内の動きベクトルを求め、求めた動きベクトルに基づいてこの２枚の画像フレームの撮像時刻の中間の時点における画像フレームを生成する処理である。この画像生成処理（フレーム補完処理）に関しては、例えば公開特許２００８−０６７２２２号公報に詳細な説明がある。
【００４３】
画像生成部３３は時刻T１に撮像した画像フレーム（R１）２０２と、時刻T２に撮像した画像フレーム（R２）２０４を用いて画像生成処理を行い、中間画像である画像フレーム（R１’）６１を生成する。また同様に画像生成部３３は時刻T２に撮像した画像フレーム（R２）２０４と、時刻T３に撮像した画像フレーム（R３）２０６を用いて画像生成処理を行い、中間画像である画像フレーム（R２’）６２を生成する。このように画像生成部３３は入力される連続する画像フレームを用いて中間画像の画像フレームを生成する機能を有している。この中間画像の画像フレームは、参照された２枚の画像フレームの間の時間に撮像された画像とほぼ同様になっていることが期待される。よって、画像フレーム（R１’）６１を時刻T１と時刻T２の中間の時刻に右目用撮像装置２３によって撮像された画像フレームとして扱う。
【００４４】
つまり画像生成部３３は生成した画像フレーム（R１’）６１を画像フレーム（R１）２０２の代わりに映像制御部３４に対して送信する。画像生成部３３は受信する右目用画像の画像フレームに対して順次同様の処理を行って、映像制御部３４に対して送信する。
【００４５】
このように画像生成部３３による画像フレームの差し替えが行われた後に、ユーザが視認する画像を図７を用いて後述する。
【００４６】
図７は本実施形態における画像生成部３３によって画像生成処理を行なった場合のユーザの視認する画像フレームの一例を示す図である。
【００４７】
図７に示すように左目用レンズ４より視認できる画像は変化していないが、右目用レンズ５より視認できる画像は画像生成部３３によって差し替えられている。
【００４８】
画像生成部３３によって画像生成処理（および生成された画像の送信）が行われた後は、例えばユーザは時刻T１に撮像された画像フレーム（L１）２０１と時刻T２に撮像された画像フレーム（L２）２０２との間で、画像生成部３３によって生成された、時刻T１と時刻T２の中間時刻に撮像される画像フレームとほぼ同様となっていることの期待される画像フレーム（R１’）６１を見ることとなる。そのため画像生成部３３による画像生成処理が行われなかった場合の様に同時刻に撮影された、画像を異なる時刻に見ることがなくなり、更に、表示される時刻に対応する時系列の画像とほぼ同様であると期待される画像を表示することができるため、画像生成処理を行わなかった場合よりもユーザは動きの滑らかな立体映像を見ることができる。
【００４９】
図８は本実施形態における映像表示装置２の行う処理の処理フローの一例を示す図である。
【００５０】
まず、映像表示装置２はアンテナによって右目用画像及び左目用画像の画像フレームが含まれる放送波を受信する（S８１）。
【００５１】
次に、映像表示装置２はチューナ３によって受信した放送波をデコードして、デコードした受信信号より画像フレームの画像信号を抽出する。L/R振分部３２は抽出された画像フレームを受信して、画像フレームを左目用の画像フレームと右目用の画像フレームとに振り分ける（S８２）。
【００５２】
L/R振分部３２は振り分けた画像フレームのうち、左目用の画像フレームを多重化部に送信し、右目用の画像フレームを画像生成部３３に送信する。画像生成部３３は受信した右目用の画像フレームを用いて画像生成処理を行い、ある時点の右目用画像と、その右目用画像と連続した右目用画像との中間時点での中間画像を生成し、生成した画像フレームを受信した右目用画像に代えてL/R多重化部３４に送信する（S８３）。
【００５３】
L/R多重化部３４はL/R振分部３２より受信する左目用の画像フレームと、画像生成部３３によって生成された画像フレームとを多重化し（S８４）、表示制御部３５に多重化した画像データを送信する。
【００５４】
表示制御部３５は受信した画像データを順に表示部３７に表示させる（S８５）。またこのときL/R開閉信号送信部３６は表示部３７の左目用画像と右目用画像の表示に同期するように、シャッターメガネ３に開閉信号を送信する。するとユーザはシャッターメガネ３の左右のレンズのシャッターの開閉によって、左目用画像を左目のみで、画像生成部３３で生成された右目用画像を右目のみで見ることができ、動きの滑らかな立体映像を視聴することが可能となる。
【００５５】
以上で一連の処理フローは終了となる。
【００５６】
本実施形態においては、映像の映像表示装置２への入力は放送波によって行われるものを例に挙げて説明しているがこれに限定されず、例えばDVD（Digital Versatile Disc）等の記憶媒体によって映像を入力するとしてもよい。
【００５７】
また、本実施形態においては右目用画像に画像生成処理を行うように例示したが、これに限定されず、右目用画像と左目用画像とに逆の処理を行ったとしてもよく、その場合も動きの滑らかな立体映像を視聴することが可能となる。
【００５８】
本実施形態における立体映像表示システムは、表示する映像の画像フレームのうちの時系列的に不自然な箇所の画像フレームを、自然な画像フレームに置き換えて表示することによって、ユーザに動きの滑らかな立体映像を提供することが可能となる。
【００５９】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具現化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【符号の説明】
【００６０】
１…立体映像表示システム、２…映像表示装置、３…シャッターメガネ、４…左目用レンズ、５…右目用レンズ、２１…物体、２２…左目用撮像装置、２３…右目用撮像装置、２４…多重化装置、２５…送信装置、２０１〜２０６…画像フレーム、３１…チューナ、３２…L/R振分部、３３…画像生成部、３４…L/R多重化部、３５…表示制御部、３６…L/R開閉信号送信部、３７…表示部、６１、６２…画像フレーム
【図１】
2011066574.tif 000003
【図２】
2011066574.tif 000004
【図３】
2011066574.tif 000005
【図４】
2011066574.tif 000006
【図５】
2011066574.tif 000007
【図６】
2011066574.tif 000008
【図７】
2011066574.tif 000009
【図８】
2011066574.tif 000010
【手続補正書】
【提出日】平成22年11月4日(2010.11.4)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
映像として画像捕捉目標が捕捉した第１の画像フレーム群と、前記第１の画像フレーム群と同じタイミングで第２の画像フレーム群とを取りこむために構成された入力手段と、
前記第１の画像フレーム群のうちの連続する前の画像フレームと現在の画像フレームを用いて、前記連続する前の画像フレームと現在の画像フレームの中間画像を生成するために構成された中間画像生成手段と、
前記生成された前記中間画像と、前記第２の画像フレーム群とが順次交互に表示されるように表示を制御するために構成された表示制御手段と、
前記表示制御手段によって制御される表示と同期して、前記中間画像を表示中は第１の領域に前記中間画像が見えるように、前記第２の画像フレーム群を表示中は第２の領域に前記第２の画像フレーム群が見えるように制御するために構成された制御手段と
を具備することを特徴とする映像処理装置。
【請求項２】
前記中間画像生成手段は、前記連続する画像フレーム内の動きベクトルを求め、前記動きベクトルに基づいて前記中間画像を生成するために構成されたこと
を特徴とする請求項１記載の映像処理装置。
【請求項３】
前記映像処理装置は、ユーザが装着したときに右目及び左目に対応する映像をそれぞれ遮るために構成されたシャッターを含むシャッターメガネに信号送信可能に接続されるために構成されており、
前記制御手段は、
前記表示制御手段によって前記中間画像が表示されているとき一方の目に対応付けられた一方のシャッターを閉じ、前記第２の画像フレーム群が表示されているときに、他方の眼に対応付けられた他方のシャッターを閉じるように開閉信号を前記シャッターメガネに送信するために構成された送信器を含む
ことを特徴とする請求項１記載の映像処理装置。
【請求項４】
映像として画像捕捉目標が捕捉した第１の画像フレーム群と、前記第１の画像フレーム群と同じタイミングで前記画像捕捉目標が捕捉した第２の画像フレーム群とを取りこむために構成された入力手段と、
前記第１の画像フレーム群のうちの連続する前の画像フレームと現在の画像フレームを用いて、前記第１の画像フレーム群のうちの連続する画像フレームの中間画像を生成するために構成された中間画像生成手段と、
前記中間画像生成手段によって生成された前記中間画像と、前記第２の画像フレーム群とを順次交互に表示するために構成された表示手段と、
前記中間画像を第１の領域に、前記第２の画像フレーム群を第２の領域に出力するために構成された出力手段と
を具備することを特徴とする映像表示システム。
【請求項５】
前記中間画像生成手段は、前記連続する画像フレーム内の動きベクトルを求め、求めた前記動きベクトルに基づいて前記中間画像を生成するために構成されたこと
を特徴とする請求項４記載の映像表示システム。
【請求項６】
前記出力手段は、
前記表示手段が前記中間画像を表示しているときに一方の目に対応付けられたシャッターを閉じ、前記表示手段が前記第２のフレーム群を表示しているときに、他方の目に対応付けられたシャッターを閉じるために構成されたシャッターメガネであること
を特徴とする請求項４記載の映像表示システム。
【請求項７】
映像として画像捕捉目標が捕捉した第１の画像フレーム群と、前記第１の画像フレーム群と同じタイミングで前記画像捕捉目標が捕捉した第２の画像フレーム群とを入力し、
前記第１の画像フレーム群のうちの連続する前の画像フレームと現在の画像フレームを用いて、前記第１の画像フレーム群のうちの連続する画像フレームの中間画像を生成し、
前記生成された中間画像と、前記第２の画像フレーム群とを順次交互に表示し、
第１の領域内の前記中間画像と、第２の領域内の前記第２の画像フレーム群を出力するを含む
ことを特徴とする映像表示方法。
【請求項８】
前記連続する画像フレーム内の動きベクトルを求め、前記動きベクトルに基づいて前記中間画像を生成するをさらに含むこと
を特徴とする請求項７記載の映像表示方法。
【請求項９】
前記第２の画像フレームが第１の目に表示され、前記中間画像が第２の目に表示されており、
ユーザが装着したときに、前記ユーザの左目又は右目に対応した画像を遮るように構成されたシャッターで、
前記中間画像が表示されたときに、いずれか一方の目に対応する第１のシャッターが閉じ、
前記第２の画像フレーム群が表示されたときに、他方の目に対応する第２のシャッターが閉じるを含む
を特徴とする請求項７記載の映像表示方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明にかかる映像処理装置は、映像として画像捕捉目標が捕捉した第１の画像フレーム群と、前記第１の画像フレーム群と同じタイミングで第２の画像フレーム群とを取りこむために構成された入力手段と、前記第１の画像フレーム群のうちの連続する前の画像フレームと現在の画像フレームを用いて、前記連続する前の画像フレームと現在の画像フレームの中間画像を生成するために構成された中間画像生成手段と、前記生成された前記中間画像と、前記第２の画像フレーム群とが順次交互に表示されるように表示を制御するために構成された表示制御手段と、前記表示制御手段によって制御される表示と同期して、前記中間画像を表示中は第１の領域に前記中間画像が見えるように、前記第２の画像フレーム群を表示中は第２の領域に前記第２の画像フレーム群が見えるように制御するために構成された制御手段とを具備することを特徴としている。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明にかかる映像表示システムは、映像として画像捕捉目標が捕捉した第１の画像フレーム群と、前記第１の画像フレーム群と同じタイミングで前記画像捕捉目標が捕捉した第２の画像フレーム群とを取りこむために構成された入力手段と、前記第１の画像フレーム群のうちの連続する前の画像フレームと現在の画像フレームを用いて、前記第１の画像フレーム群のうちの連続する画像フレームの中間画像を生成するために構成された中間画像生成手段と、前記中間画像生成手段によって生成された前記中間画像と、前記第２の画像フレーム群とを順次交互に表示するために構成された表示手段と、前記中間画像を第１の領域に、前記第２の画像フレーム群を第２の領域に出力するために構成された出力手段とを具備することを特徴としている。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明にかかる映像表示方法は、映像として画像捕捉目標が捕捉した第１の画像フレーム群と、前記第１の画像フレーム群と同じタイミングで前記画像捕捉目標が捕捉した第２の画像フレーム群とを入力し、前記第１の画像フレーム群のうちの連続する前の画像フレームと現在の画像フレームを用いて、前記第１の画像フレーム群のうちの連続する画像フレームの中間画像を生成し、前記生成された中間画像と、前記第２の画像フレーム群とを順次交互に表示し、第１の領域内の前記中間画像と、第２の領域内の前記第２の画像フレーム群を出力するを含むことを特徴としている。