(57)【要約】【課題】視聴者に対して違和感や目の負担を与えることなく、３Ｄ映像を切り替える。【解決手段】図９は、視差調整区間パラメータの第３の例をグラフ化して示している。同図の場合、第１および第２の映像ソースの視差に基づく奥行きが、その中間値で一致させるように、第１および第２の映像ソースの視差を調整する。すなわち、中間値を求めた後、フェーダ値０％から２０％までの区間で第１および第２の映像ソースの視差を徐々に中間値に近づけて両者を一致させる。そして、フェーダ値２０％から７０％までの区間でワイプを実行して第２の映像ソースに切り替える。この後、フェーダ値７０％から１００％までの区間で第２の映像ソースの視差を徐々に元の値まで戻す。本発明は、３Ｄ映像の編集装置に適用できる。【選択図】図９
2011223183.tif 000002
【特許請求の範囲】
【請求項１】
３Ｄ(dimensional)映像を編集する画像処理装置において、
選択された切替方法に従い、編集結果として採用する映像を、第１の３Ｄ映像から第２の３Ｄ映像に切り替える切替手段と、
前記第１および第２の３Ｄ映像における視差を計測し、計測した視差に基づいて得られる奥行きを算出する視差計測手段と、
前記第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値を取得する取得手段と、
取得された前記フェーダ値に対応して前記第１および第２の３Ｄ映像の視差を調整する視差調整手段と
を含み、
前記切替手段は、前記切替方法にワイプが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える
画像処理装置。
【請求項２】
前記フェーダ値により、前記一連の処理を構成するための第１調整区間、切り替え区間、および第２調整区間の区切りを示している前記視差調整区間パラメータを保持する保持手段を
さらに含み、
前記切替手段は、前記切り替え区間において、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える
請求項１に記載の画像処理装置。
【請求項３】
前記視差調整手段は、取得された前記フェーダ値の進行に対応し、
前記第１調整区間においては、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように、前記第１または第２の３Ｄ映像の少なくとも一方の視差を調整し、
前記第２調整区間においては、前記第２の３Ｄ映像の視差を元の値に戻すように調整する
請求項２に記載の画像処理装置。
【請求項４】
前記視差調整手段は、取得された前記フェーダ値の進行に対応し、
前記第１調整区間においては、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きの幅が圧縮されて一致するように、前記第１または第２の３Ｄ映像の少なくとも一方の視差を調整し、
前記第２調整区間においては、前記第２の３Ｄ映像の視差を元の値に戻すように調整する
請求項３に記載の画像処理装置。
【請求項５】
前記切替手段は、前記切替方法にミックスが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが近づくように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をミックスによって切り替える
請求項２に記載の画像処理装置。
【請求項６】
前記フェーダ値をユーザが制御するための操作入力手段を
さらに含む請求項２に記載の画像処理装置。
【請求項７】
３Ｄ(dimensional)映像を編集する画像処理装置の画像処理方法において、
前記画像処理装置による、
第１および第２の３Ｄ映像における視差を計測し、計測した視差に基づいて得られる奥行きを算出する視差計測ステップと、
前記第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値を取得する取得ステップと、
取得された前記フェーダ値に対応して前記第１および第２の３Ｄ映像の視差を調整する視差調整ステップと、
切替方法にワイプが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える切替ステップと
を含む画像処理方法。
【請求項８】
コンピュータを、
選択された切替方法に従い、編集結果として採用する映像を、第１の３Ｄ映像から第２の３Ｄ映像に切り替える切替手段と、
前記第１および第２の３Ｄ映像における視差を計測し、計測した視差に基づいて得られる奥行きを算出する視差計測手段と、
前記第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値を取得する取得手段と、
取得された前記フェーダ値に対応して前記第１および第２の３Ｄ映像の視差を調整する視差調整手段と
して機能させ、
前記切替手段は、前記切替方法にワイプが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、およびプログラムに関し、特に、立体視可能な３次元動画像を切り替える場合に用いて好適な画像処理装置、画像処理方法、およびプログラムに関する。
【背景技術】
【０００２】
立体視可能な３次元動画像（以下、３Ｄ(dimensional)映像と称する）を表示できるテレビジョン受像機の出現により、３Ｄ映像は映画などの特定のジャンルのコンテンツのみならず、例えばテレビジョン番組などの多様なジャンルのコンテンツに採用されることが見込まれている。
【０００３】
ところで、テレビジョン番組などの作成過程では、映像Ａから、映像Ａとは異なる映像Ｂに切り替える（スイッチングする）などの編集作業が多用される。３Ｄ映像によるコンテンツの作成過程においても同様であり、立体画像の切り替えに適したスイッチャ（編集指示装置）なども提案されている（例えば、特許文献１参照）。
【０００４】
図１は、映像Ａから映像Ｂに切り替える３種類の方法を示している。すなわち、同図Ａは、映像Ａから映像Ｂに瞬時に切り替える方法（瞬時切替）、同図Ｂは、映像Ａの端から順に映像Ｂに切り替える方法（ワイプ）、同図Ｃは、映像Ａの輝度を徐々に下げつつ、映像Ｂの輝度を徐々に上げる切替方法（ミックス、またはフェードイン・フェードアウト）を示している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平８−３２１９９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
３Ｄ映像を切り替える場合にも、図１Ａ乃至図１Ｃに示された方法を用いることができる。しかしながら、２Ｄ映像では起こり得ず、３Ｄ映像であるための問題が発生し得る。
【０００７】
具体的には、図１Ｂに示されたワイプによって３Ｄ映像Ａから３Ｄ映像Ｂに切り替える場合において、切り替え途中の映像が図１Ｂの中央の映像のように、３Ｄ映像Ａの領域と３Ｄ映像Ｂの領域が混在しているときに発生し得る。
【０００８】
図２は、切り替え途中の映像をその画面の縦軸の延長線上から見た状態を示している。なお、同図において、画面上の五角形どうしの距離が３Ｄ映像Ａの視差であり、画面上の三角形どうしの距離が３Ｄ映像Ｂの視差である。例えば図２に示されるように、同図の右側を占める３Ｄ映像Ａの視差によって得られる奥行きが画面より手前に設定され、同図の左側を占める３Ｄ映像Ｂの視差によって得られる奥行きが画面の奥に設定されていることにより、画面上に存在する被写体の奥行きに差が大きくなることがある。このような場合、この画面を見ている視聴者に対して違和感を与えてしまうだけでなく、視聴者の目にかかる負担も大きくなり、結果的に見辛い映像となってしまう。
【０００９】
なお、図１Ａに示された瞬時切り替え、および図１Ｃに示されたミックスによる切り替えは、図１Ｂに示されたワイプに比較して、視聴者にとって見辛い映像とはならないことが知られている。
【００１０】
本発明はこのような状況に鑑みてなされたものであり、視聴者に映像に対する違和感や目の負担などを与えてしまうことなく、３Ｄ映像の切り替えを可能にするものである。
【課題を解決するための手段】
【００１１】
本発明の一側面である画像処理装置は、３Ｄ映像を編集する画像処理装置において、選択された切替方法に従い、編集結果として採用する映像を、第１の３Ｄ映像から第２の３Ｄ映像に切り替える切替手段と、前記第１および第２の３Ｄ映像における視差を計測し、計測した視差に基づいて得られる奥行きを算出する視差計測手段と、前記第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値を取得する取得手段と、取得された前記フェーダ値に対応して前記第１および第２の３Ｄ映像の視差を調整する視差調整手段とを含み、前記切替手段は、前記切替方法にワイプが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える。
【００１２】
本発明の一側面である画像処理装置は、前記フェーダ値により、前記一連の処理を構成するための第１調整区間、切り替え区間、および第２調整区間の区切りを示している前記視差調整区間パラメータを保持する保持手段をさらに含むことができ、前記切替手段は、前記切り替え区間において、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替えるようにすることができる。
【００１３】
前記視差調整手段は、取得された前記フェーダ値の進行に対応し、前記第１調整区間においては、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように、前記第１または第２の３Ｄ映像の少なくとも一方の視差を調整し、前記第２調整区間においては、前記第２の３Ｄ映像の視差を元の値に戻すように調整するようにすることができる。
【００１４】
前記視差調整手段は、取得された前記フェーダ値の進行に対応し、前記第１調整区間においては、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きの幅が圧縮されて一致するように、前記第１または第２の３Ｄ映像の少なくとも一方の視差を調整し、前記第２調整区間においては、前記第２の３Ｄ映像の視差を元の値に戻すように調整するようにすることができる。
【００１５】
前記切替手段は、前記切替方法にミックスが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが近づくように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をミックスによって切り替えるようにすることができる。
【００１６】
本発明の一側面である画像処理装置は、前記フェーダ値をユーザが制御するための操作入力手段をさらに含むことができる。
【００１７】
本発明の一側面である画像処理方法は、３Ｄ映像を編集する画像処理装置の画像処理方法において、前記画像処理装置による、第１および第２の３Ｄ映像における視差を計測し、計測した視差に基づいて得られる奥行きを算出する視差計測ステップと、前記第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値を取得する取得ステップと、取得された前記フェーダ値に対応して前記第１および第２の３Ｄ映像の視差を調整する視差調整ステップと、切替方法にワイプが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える切替ステップとを含む。
【００１８】
本発明の一側面であるプログラムは、コンピュータを、選択された切替方法に従い、編集結果として採用する映像を、第１の３Ｄ映像から第２の３Ｄ映像に切り替える切替手段と、前記第１および第２の３Ｄ映像における視差を計測し、計測した視差に基づいて得られる奥行きを算出する視差計測手段と、前記第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値を取得する取得手段と、取得された前記フェーダ値に対応して前記第１および第２の３Ｄ映像の視差を調整する視差調整手段として機能させ、前記切替手段は、前記切替方法にワイプが選択された場合、前記第１の３Ｄ映像と前記第２の３Ｄ映像の前記奥行きが一致するように前記視差が調整された状態の前記第１の３Ｄ映像と前記第２の３Ｄ映像をワイプによって切り替える。
【００１９】
本発明の一側面においては、第１および第２の３Ｄ映像における視差が計測され、計測された視差に基づいて得られる奥行きが算出される。また、第１の３Ｄ映像から前記第２の３Ｄ映像に切り替える一連の処理の進行の程度を示すフェーダ値が取得される。さらに、取得されたフェーダ値に対応して第１および第２の３Ｄ映像の視差が調整され、切替方法にワイプが選択された場合、第１の３Ｄ映像と第２の３Ｄ映像の奥行きが一致するように視差が調整された状態の第１の３Ｄ映像と第２の３Ｄ映像がワイプによって切り替えられる。
【発明の効果】
【００２０】
本発明の一側面によれば、視聴者に対して違和感や目の負担を与えてしまうことなく、３Ｄ映像を切り替えることができる。
【図面の簡単な説明】
【００２１】
【図１】映像を切り替える３種類の方法を説明する図である。
【図２】３Ｄ映像をワイプにより切り替えている過程を示した図である。
【図３】本発明を適用した３Ｄ映像編集装置の構成例を示すブロック図である。
【図４】図３の操作入力部の構成例を示す外観図である。
【図５】図３のスイッチャの構成例を示すブロック図である。
【図６】図３の３Ｄ映像処理部の構成例を示すブロック図である。
【図７】視差調整区間パラメータの第１の例に対応する図である。
【図８】視差調整区間パラメータの第２の例に対応する図である。
【図９】視差調整区間パラメータの第３の例に対応する図である。
【図１０】視差調整区間パラメータの第４の例に対応する図である。
【図１１】視差調整区間パラメータの第４の例に対応する図である。
【図１２】視差調整区間パラメータの第６の例に対応する図である。
【図１３】視差調整区間パラメータの第７の例に対応する図である。
【図１４】切り替え処理を説明するフローチャートである。
【図１５】奥行き幅の圧縮を行わない場合に対応する図である。
【図１６】奥行き幅の圧縮を行った場合に対応する図である。
【図１７】ミックスにより切り替えに対応する図である。
【図１８】コンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２２】
以下、発明を実施するための最良の形態（以下、実施の形態と称する）について、図面を参照しながら詳細に説明する。
【００２３】
＜１．実施の形態＞
［３Ｄ映像編集装置の構成例］
図３は、本発明の一実施の形態である３Ｄ映像編集装置の構成例を示している。この３Ｄ映像編集装置１０は、操作入力部１１、制御部１２、スイッチャ１３Ｌおよび１３Ｒ、並びに３Ｄ映像処理部１４から構成される。
【００２４】
操作入力部１１は、ユーザの操作に応じた操作信号を発生して制御部１２に出力する。制御部１２は、入力される操作信号に基づいて制御信号を出力することにより、３Ｄ映像編集装置１０の各部を制御する。
【００２５】
スイッチャ１３Ｌおよび１３Ｒは、ユーザの選択操作に基づく制御部１２からの制御信号に従い、入力される複数Ｍ（例えば、９）種類の映像ソース（３Ｄ映像ソースのみならず、２Ｄ映像が含まれていてもよい）のうちの最大２種類の映像ソースを選択して３Ｄ映像処理部１４に出力する。また、スイッチャ１３Ｌおよび１３Ｒは、入力される複数Ｍの映像ソースの中から１種類を選択したり、複数種類を選択して合成したり、選択を切り替えたりすることにより、編集済みのコンテンツとして後段に出力する。なお、スイッチャ１３Ｌには、映像ソースの左目用の映像が入力され、スイッチャ１３Ｒには、スイッチャ１３Ｌに入力された左目用の映像に対応する右目用の映像が入力される。
【００２６】
３Ｄ映像処理部１４は、スイッチャ１３Ｌから入力される左目用の映像と、それに対応する、スイッチャ１３Ｒから入力される右目用の映像との視差を計測したり、計測結果に基づいて左目用の映像と右目用の映像との視差を調整したりする。処理後の映像をそれぞれスイッチャ１３Ｌまたは１３Ｒに入力するための映像ソースとして出力する。
【００２７】
図４は、操作入力部１１の外観の構成例を示している。操作入力部１１には、マトリクススイッチ２１、切替方法選択スイッチ２２、フェーダレバー２３、およびオートフェードスイッチ２４が設けられている。
【００２８】
マトリクススイッチ２１は、行列状に配置された横Ｍ×縦Ｎ個のスイッチから構成される。同図の例の場合、Ｍ＝９、Ｎ＝５であって４５個のスイッチから構成される。
【００２９】
マトリクススイッチ２１の横方向は、スイッチャ１３Ｌおよび１３Ｒに入力されるＭ種類の映像ソースに対応付けられている。同図の場合、左から順に、VTR1の映像ソース、VTR2の映像ソース、CAM１の映像ソース、CAM2の映像ソース、Mainの映像ソース、Subの映像ソース、Figの映像ソース、3DBOX1の映像ソース、3DBOX2の映像ソースに対応付けられている。
【００３０】
マトリクススイッチ２１の縦方向は、Ｎ種類の画像選択に対応付けられている。同図の場合、上から順に、key1としての選択、Key2としての選択、Out1としての選択、Out2としての選択、Out3としての選択に対応付けられている。以下、コンテンツにおける切り替え前の映像（第１の映像）がOut1であり、切り替え後の映像（第２の映像）がOut2であるものとして説明する。
【００３１】
なお、各行（横方向）のＭ個のスイッチは、同時に１つのみをオンとすることができる。例えば、最上段の行で左から２番目のスイッチがオンとされると、第１のキー映像（Key1）としてVTR2の映像ソースが選択される。また例えば、上から３段目の行で左から３番目のスイッチがオンとされると、第１の出力映像（Out1）としてCAM1の映像ソースが選択される。さらに例えば、上から４段目の行で左から４番目のスイッチがオンとされると、第２の出力映像（Out2）としてCAM2の映像ソースが選択される。
【００３２】
切替方法選択スイッチ２２は、例えば、表示中の第１の出力映像を第２の出力映像に切り替えるときの切替方法を選択するためのものであり、例えば、押下される毎に切替方法の設定が、瞬時切替、ワイプ、ミックス、瞬時切替、・・・の順に変更される。なお、切替方法選択スイッチ２２を３つのスイッチから構成し、それぞれを瞬時切替、ワイプ、またはミックスに対応付けるようにしてもよい。さらに、ワイプのバリエーション（デジタル特殊効果ワイプなど）を複数設けるようにしてもよい。またワイプなどの詳細設定は、別に選択スイッチなど既知の操作手段を設けてよい。
【００３３】
なお、ワイプには、デジタル特殊効果による拡大縮小処理が加わる場合なども含め、画面上で二つの映像が分かれて同時に存在する状態がある処理を示すものとする。
【００３４】
フェーダレバー２３は、表示中の第１の出力映像を第２の出力映像に切り替えるときの切替タイミングを制御するものであり、上下方向にスライドできるようになされている。フェーダレバー２３が、例えば最も上側に位置する状態が切替開始時（フェーダ値＝０％）、最も下側に位置する状態が切替終了時（フェーダ値＝１００％）となる。フェーダレバー２３をユーザが任意の速度でスライドさせることにより、切り替えの速度を任意に制御することができる。
【００３５】
オートフェードスイッチ２４は、フェーダレバー２３による制御を自動的に所定の速度でスライドさせるためのものである。オートフェードスイッチ２４をオンとすることにより、ユーザがフェーダレバー２３を操作しなくても、所定の速度で表示中の第１の出力映像を第２の映像出力に切り替えることができる。
【００３６】
図５は、スイッチャ１３Ｌの構成例を示している。スイッチャ１３Ｌは、補助出力部３１、および入力選択部３２から構成される。なお、スイッチャ１３Ｒも、スイッチャ１３Ｌと同様に構成されるので、その説明は省略する。
【００３７】
補助出力部３１は、Ｍ（以下、Ｍ＝９として説明する）種類のSDI入力ライン４１−１乃至４１−９、補助出力選択バス４２−１および４２−２、並びにビデオ加工部(V Proc)４３−１および４３−２から構成される。
【００３８】
SDI入力ライン４１−１乃至４１−９にはそれぞれ、例えば、図４に示されたVTR1、VTR2、CAM１、CAM2、Main、Sub、Fig、3DBOX1、または3DBOX2の映像ソースが入力される。ただし、SDI入力ライン４１−８および４１−９については、SDI入力ライン４１−１乃至４１−７に入力された映像ソースのうちの２種類が３Ｄ映像処理部１４にて視差調整されたものが入力される。
【００３９】
補助出力選択バス４２−１は、制御部１２からの制御に従い、SDI入力ライン４１−１乃至４１−７に入力される７種類の（左目用の）映像ソースのうちの１つをビデオ加工部４３−１に出力する。補助出力選択バス４２−２は、制御部１２からの制御に従い、SDI入力ライン４１−１乃至４１−７に入力される７種類の映像ソースのうちの１つをビデオ加工部４３−２に出力する。ビデオ加工部４３−１は、補助出力選択バス４２−１からの映像ソースに所定のビデオ加工処理を行って３Ｄ映像処理部１４に出力する。ビデオ加工部４３−２は、補助出力選択バス４２−２からの映像ソースに所定の加工処理を行って３Ｄ映像処理部１４に出力する。
【００４０】
入力選択部３２は、加工用バス４４−１および４４−２、入力バス４５−１および４５−２、予備入力バス４６、キー画像加工部４７、ビデオ加工部４８−１乃至４８−３、並びに合成部４９から構成される。
【００４１】
加工用バス４４−１および４４−２は、制御部１２からの制御に従い、SDI入力ライン４１−１乃至４１−９に入力される９種類の映像ソースのうちの１つをキー画像加工部４７に出力する。入力バス４５−１は、３Ｄ映像編集装置１０が編集結果として出力するコンテンツの切替前の第１の映像として、SDI入力ライン４１−１乃至４１−９に入力される９種類の映像ソースのうちの１つをビデオ加工部４８−１に出力する。入力バス４５−２は、３Ｄ映像編集装置１０が編集結果として出力するコンテンツの切替後の第２の映像として、SDI入力ライン４１−１乃至４１−９に入力される９種類の映像ソースのうちの１つをビデオ加工部４８−２に出力する。予備入力バス４６は、予備とする第３の映像として、SDI入力ライン４１−１乃至４１−９に入力される９種類の映像ソースのうちの１つをビデオ加工部４８−３に出力する。
【００４２】
キー画像加工部４７は、加工用バス４４−１および４４−２から入力される映像ソースをキー画像とする所定の加工処理を行い、処理結果の映像を補助出力選択バス４２−１および４２−２、並びに合成部４９に出力する。
【００４３】
ビデオ加工部４８−１乃至４８−３は、入力される映像ソースに所定のビデオ加工処理を行って合成部４９に出力する。
【００４４】
合成部４９は、制御部１２からの制御に従い、キー画像加工部４７、ビデオ加工部４４−１乃至４４−３から入力される映像を選択したり、合成したりすることにより、編集結果として出力ラインから出力するコンテンツの映像を生成する。また合成部４９は、編集結果として出力ラインから出力するコンテンツの映像として、ビデオ加工部４４−１から入力される第１の映像から、ビデオ加工部４４−２から入力される第２の映像に切り替える切り替え処理を実行する。この切り替え処理の詳細については、図１１を参照して後述する。
【００４５】
図６は、３Ｄ映像処理部１４の構成例を示している。３Ｄ映像処理部１４は、視差計測部５１、視差調整部５２、およびメモリ５３から構成される。
【００４６】
視差計測部５１は、入力ラインINL1を介してスイッチャ１３Ｌから入力される左目用の映像ソース（第１の映像ソース）と、それに対応する、入力ラインINR1を介してスイッチャ１３Ｒから入力される右目用の映像ソース（第１の映像ソース）との視差を計測する。さらに、視差計測部５１は、その視差により得られる奥行き（第１の奥行き）を算出して視差調整部５２に出力する。なお、奥行きが画面の手前側にある場合と奥側にある場合とを区別するため、例えば、手前側を負の値、奥側を正の値とするようにする。また、画面上における視差と奥行きは、当然ながら画面全体で均一ではないので、例えば、最大値、平均値、または最頻値を採用するようにする。
【００４７】
また、視差計測部５１は、入力ラインINL2を介してスイッチャ１３Ｌから入力される左目用の映像ソース（第２の映像ソース）と、それに対応する、入力ラインINR2を介してスイッチャ１３Ｒから入力される右目用の映像ソース（第２の映像ソース）との視差を計測する。さらに、視差計測部５１は、その視差により得られる奥行き（第２の奥行き）を算出して視差調整部５２に出力する。なお、視差の計測、および奥行きの算出には、既存の手法を適用すればよい。
【００４８】
さらに、視差計測部５１は、視差計測済みの第１および第２の映像ソースを視差調整部５２に出力する。
【００４９】
視差調整部５２は、メモリ５３に保持されている視差調整区間パラメータに基づき、視差計測部５１から入力される第１の映像ソース、または第２の映像ソースの少なくとも一方の視差を調整し、それぞれを出力ラインOUTL1またはOUTR1を介してスイッチャ１３Ｌまたは１３Ｒに出力する。
【００５０】
メモリ５３には、第１および第２の映像ソースの視差調整タイミングと、フェーダ値の関係を示す視差調整区間パラメータが保持されている。なお、メモリ５３には、後述する図７乃至図１３に示す視差調整区間パラメータのうち、少なくとも１つが保持されていればよい。
【００５１】
［動作説明］
次に、３Ｄ映像編集装置１０の動作について、例えば、３Ｄ映像編集装置１０に入力される映像ソースのうち、出力するコンテンツの映像にCAM1の映像ソースを採用し、その後にCAM2の映像ソースにワイプにより切り替える場合について説明する。
【００５２】
初めに、CAM1の映像ソースを切り替え前の映像（第１の映像）とするために、ユーザは操作入力部１１のマトリクススイッチ２１の上から３段目、左から３番目のスイッチをオンとする。また、CAM2の映像ソースを切り替え後の映像（第２の映像）として指定しておくために、マトリクススイッチ２１の上から４段目、左から４番目のスイッチをオンとする。また、ユーザは操作入力部１１の切替方法選択スイッチ２２により切替方法としてワイプを選択する。
【００５３】
マトリクススイッチ２１に対する操作に応じた制御部１２からの制御に従い、スイッチャ１３Ｌの入力バス４５−１では、SDI入力ライン４１−３に入力されているCAM1の左目用の映像ソースが選択され、ビデオ加工部４８−１を介して合成部４９に入力される。また、入力バス４５−２では、SDI入力ライン４１−４に入力されているCAM2の左目用の映像ソースが選択され、ビデオ加工部４８−２を介して合成部４９に入力される。そして、現在は映像の切替前なので、合成部４９からは、CAM1の左目用の映像ソースが出力される。スイッチャ１３Ｒでも同様に、出力ラインからCAM1の右目用の映像ソースが出力される。
【００５４】
また、マトリクススイッチ２１に対する操作に応じた制御部１２からの制御に従い、スイッチャ１３Ｌの補助出力バス４２−１では、SDI入力ライン４１−３に入力されているCAM1の左目用の映像ソースが選択されて、入力ラインINL1を介して３Ｄ映像処理部１４の視差計測部５１に入力される。また、スイッチャ１３Ｌの補助出力バス４２−２では、SDI入力ライン４１−４に入力されているCAM2の左目用の映像ソースが選択されて、入力ラインINL2を介して３Ｄ映像処理部１４の視差計測部５１に入力される。
【００５５】
一方、スイッチャ１３Ｒでも同様に、CAM1の右目用の映像ソースが選択されて、入力ラインINR1を介して３Ｄ映像処理部１４の視差計測部５１に入力され、CAM2の右目用の映像ソースが選択されて、入力ラインINR2を介して３Ｄ映像処理部１４の視差計測部５１に入力される。
【００５６】
視差計測部５１では、CAM１の映像ソースの視差に基づく第１の奥行きと、CAM2の映像ソースの視差に基づく第２の奥行きが算出されて視差調整部５２に出力される。視差調整部５２は、メモリ５３に保持されている視差調整区間パラメータに基づき、フェーダ値に対応して、CAM１の映像ソース、またはCAM2の映像ソースの少なくとも一方の視差を調整し、出力ラインOUTL1乃至OUTR2を介して後段のスイッチャ１３Ｌおよび１３Ｒに出力する。
【００５７】
切り替えの期間（フェーダ値が０％から１００％の期間）は、スイッチャ１３Ｌの入力バス４５−１では、SDI入力ライン４１−８に入力されている、３Ｄ映像処理部１４にて視差調整済みのCAM1の左目用の映像ソースが選択され、入力バス４５−２では、SDI入力ライン４１−９に入力されている、３Ｄ映像処理部１４にて視差調整済みのCAM2の左目用の映像ソースが選択される。スイッチャ１３Ｒにおいても同様である。これにより、切り替えの期間には、３Ｄ映像処理部１４にて視差調整済みの映像が用いられることになる。
【００５８】
[視差調整の具体例]
次に、ワイプにより第１の映像から第２の映像に切り替えるときの視差調整について具体的に説明する。
【００５９】
図７は、メモリ５３に保持されている視差調整区間パラメータの第１の例をグラフ化して示している。図７において、横軸はフェーダ値、縦軸は視差に基づく奥行きを示しており、実線は第１の映像ソースに、破線は第２の映像ソースに対応する。太線は実際にワイプが行われている期間を示している。また、右上の数値は、視差調整区間パラメータの例であってフェーダ値を示している。以降の図においても同様とする。
【００６０】
同図の場合、第２の映像ソースについては視差を調整せず、第１の映像ソースの視差に基づく奥行きが、第２の映像ソースの視差に基づく奥行きに近づくように、第１の映像ソースの視差を調整する。すなわち、フェーダ値０％から４５％までの区間（第１調整区間）で第１の映像ソースの視差を徐々に第２の映像ソースの視差に一致させる。この区間では、第１の映像ソースのみを表示させる。そして、フェーダ値４５％から１００％までの区間（ワイプ区間）でワイプを実行して第２の映像ソースに切り替える。
【００６１】
なお、「一致させる」とは、完全に同一とする場合の他、その差異を所定の閾値以下とする場合を含むものとする。
【００６２】
図８は、メモリ５３に保持されている視差調整区間パラメータの第２の例をグラフ化して示している。同図の場合、第１の映像ソースについては視差を調整せず、第２の映像ソースの視差に基づく奥行きを第１の映像ソースの視差に基づく奥行きに一致させるように、第２の映像ソースの視差を調整する。すなわち、フェーダ値０％の段階で、直ちに第２の映像ソースの視差を第１の映像ソースの視差に一致させる。そして、フェーダ値０％から７０％までの区間（ワイプ区間）でワイプを実行し、第２の映像ソースのみに切り替えた後、フェーダ値７０％から１００％までの区間（第２調整区間）で第２の映像ソースの視差を徐々に元の値まで戻す。
【００６３】
図９は、メモリ５３に保持されている視差調整区間パラメータの第３の例をグラフ化して示している。同図の場合、第１および第２の映像ソースの視差に基づく奥行きが、その中間値で一致させるように、第１および第２の映像ソースの視差を調整する。すなわち、中間値を求めた後、フェーダ値０％から２０％までの区間（第１調整区間）で第１および第２の映像ソースの視差を徐々に中間値に近づけて両者を一致させる。この区間では、第１の映像ソースのみを表示させる。そして、フェーダ値２０％から７０％までの区間（ワイプ区間）でワイプを実行して第２の映像ソースに切り替える。この後、フェーダ値７０％から１００％までの区間（第２調整区間）で第２の映像ソースの視差を徐々に元の（入力そのままの）値まで戻す。
【００６４】
図１０は、メモリ５３に保持されている視差調整区間パラメータの第４の例をグラフ化して示している。同図の場合、第１および第２の映像ソースの奥行きの方向が一致している状態から、第１および第２の映像ソースの視差に基づく奥行きを０で一致させるように、第１および第２の映像ソースの視差を調整する。これまでの例と異なり、奥行きの絶対値を加味している。すなわち、フェーダ値０％から３０％までの区間（第１調整区間）で第１および第２の映像ソースの視差を徐々に０に近づけて両者を一致させる。この区間では、第１の映像ソースのみを表示させる。そして、フェーダ値３０％から７０％までの区間（ワイプ区間）でワイプを実行して第２の映像ソースに切り替える。この後、フェーダ値７０％から１００％までの区間（第２調整区間）で第２の映像ソースの視差を徐々に元の値まで戻す。
【００６５】
図１１は、メモリ５３に保持されている視差調整区間パラメータの第５の例をグラフ化して示している。同図の場合、第１および第２の映像ソースの奥行きの方向が一致していない状態から、第１および第２の映像ソースの視差に基づく奥行きを０で一致させるように、第１および第２の映像ソースの視差を調整する。すなわち、フェーダ値０％から３０％までの区間（第１調整区間）で第１および第２の映像ソースの視差を徐々に０に近づけて両者を一致させる。この区間では、第１の映像ソースのみを表示させる。そして、フェーダ値３０％から７０％までの区間（ワイプ区間）でワイプを実行して第２の映像ソースに切り替える。この後、フェーダ値７０％から１００％までの区間（第２調整区間）で第２の映像ソースの視差を徐々に元の値まで戻す。
【００６６】
図１２は、メモリ５３に保持されている視差調整区間パラメータの第６の例をグラフ化して示している。同図の場合、第１および第２の映像ソースの奥行きの方向が一致している状態から、第１および第２の映像ソースの視差に基づく奥行きを０で一致させるように、第１および第２の映像ソースの視差を調整する。また、この場合、第１および第２調整区間は、第１の映像ソースの奥行きと第２の映像ソースの奥行きとの比に基づいて決定される。例えば、当該比が１：４である場合、第１調整区間と第２調整区間も１：４とする。すなわち、フェーダ値０％から４０％までの区間（第１調整区間）で第１および第２の映像ソースの視差を徐々に０に近づけて両者を一致させる。そして、フェーダ値４０％から９０％までの区間（ワイプ区間）でワイプを実行して第２の映像ソースに切り替える。この後、フェーダ値９０％から１００％までの区間（第２調整区間）で第２の映像ソースの視差を徐々に元の値まで戻す。
【００６７】
図１３は、メモリ５３に保持されている視差調整区間パラメータの第７の例をグラフ化して示している。同図の場合、第１および第２の映像ソースの視差に基づく奥行きを徐々に近づけて一致させた後、ワイプを行いながら視差が直線的に変化するように、第１および第２の映像ソースの視差を調整する。すなわち、フェーダ値０％から３０％までの区間（第１調整区間）で第１および第２の映像ソースの視差を徐々に近づけて両者を一致させる。この区間では、第１の映像ソースのみを表示させる。そして、フェーダ値３０％から７０％までの区間（ワイプ区間、且つ、第２調整区間）で、第１および第２の映像ソースの視差を一致させたまま調整を継続しつつワイプを実行し、フェーダ値７０％から１００％までの区間（第２調整区間）で第２の映像ソースの視差を元の値まで戻す。
【００６８】
ワイプにより第１の映像から第２の映像に切り替える場合、図７乃至図１３のいずれかに示されたように、視差調整を実行するものとする。
【００６９】
[視差調整を伴う切り替え処理]
次に、視差調整を伴う切り替え処理について説明する。図１４は、切り替え処理を説明するフローチャートである。なお、この切り替え処理の前提として、第１および第２の映像ソースは、既にユーザの操作によって選択されているものとする。図１４の処理が、毎フレームあるいは毎フィールド行われるようにされている。
【００７０】
ステップＳ１において、制御部１２は、操作入力部１１のフェーダレバー２３の位置に対応するフェーダ値の取得を開始する。ステップＳ２において、制御部１２は、操作入力部１１の切替方法選択スイッチ２２を用いてユーザの選択した切替方法が瞬時切り替え、ワイプ、またはミックスのいずれであるのかを取得する。ステップＳ３において、制御部１２は、選択された切替方法がワイプであるか否かを判定する。選択された切替方法がワイプであると判定された場合、処理はステップＳ４に進められる。
【００７１】
ステップＳ４において、３Ｄ映像処理部１４の視差計測部５１は、第１の映像ソースの視差を計測し、視差に基づく第１の奥行きを算出して視差調整部５２に出力する。また、視差計測部５１は、第２の映像ソースの視差を計測し、視差に基づく第２の奥行きを算出して視差調整部５２に出力する。視差調整部５２は、メモリ５３に保持されている視差調整区間パラメータを読み出して制御部１２に通知する。
【００７２】
ステップＳ５において、制御部１２は、現在のフェーダ値と視差調整区間パラメータとに基づいて、現在が第１調整区間または第２調整区間であるかを判定する。現在が第１調整区間または第２調整区間であると判定された場合、処理はステップＳ６に進められる。なお、現在が第１調整区間または第２調整区間ではない、すなわち、ワイプ区間であると判定された場合、ステップＳ６乃至Ｓ９はスキップされて処理はステップＳ１０に進められる。
【００７３】
ステップＳ６において、制御部１２は、現在のフェーダ値と視差調整区間パラメータとに基づいて、現在、第１の映像ソースの視差を調整するか否かを判定する。第１の映像ソースの視差を調整すると判定された場合、処理はステップＳ７に進められる。ステップＳ７において、制御部１２は、現在のフェーダ値と視差調整区間パラメータとに基づいて、第１の映像ソースの視差の調整量を示す視差調整値を算出して視差調整部５２に通知する。
【００７４】
なお、ステップＳ６において、第１の映像ソースの視差を調整しないと判定された場合、ステップＳ７はスキップされて処理はステップＳ８に進められる。
【００７５】
ステップＳ８において、制御部１２は、現在のフェーダ値と視差調整区間パラメータとに基づいて、現在、第２の映像ソースの視差を調整するか否かを判定する。第２の映像ソースの視差を調整すると判定された場合、処理はステップＳ９に進められる。ステップＳ９において、制御部１２は、現在のフェーダ値と視差調整区間パラメータとに基づいて、第２の映像ソースの視差の調整量を示す視差調整値を算出して視差調整部５２に通知する。
【００７６】
なお、ステップＳ８において、第２の映像ソースの視差を調整しないと判定された場合、ステップＳ９はスキップされて処理はステップＳ１０に進められる。
【００７７】
ステップＳ１０において、視差調整部５２は、制御部１２から通知された視差調整量に従い、第１の映像ソースの視差を調整して後段に出力する。また、視差調整部５２は、制御部１２から通知された視差調整量に従い、第２の映像ソースの視差を調整して後段に出力する。なお、ステップＳ６およびステップＳ８を経て、視差調整量が通知されていない場合には視差を調整しない。ステップＳ５からステップＳ１０に遷移した場合、すなわち、現在がワイプ期間である場合には、その直前まで通知されていた視差調整量を維持して視差を調整する。
【００７８】
ステップＳ１１において、制御部１２は、視差調整区間パラメータから求められるワープ区間と、現在のフェーダ値とに基づき、第１の映像ソースと第２の映像ソースの現在の表示比（画面を占める割合）を算出して、スイッチャ１３Ｌおよび１３Ｒのそれぞれの合成部４９に通知する。ステップＳ１２において、合成部４９は、通知された表示比に従い、第１の映像ソースと第２の映像ソースを合成し、その結果得られた映像を後段に出力する。
【００７９】
ステップＳ１３において、制御部１２は、現在のフェード値に基づき、切り替えが終了したか（フェード値＝１００％であるか）否かを判定する。切り替えが終了していないと判定された場合、処理はステップＳ１に戻されて、それ以降が繰り返される。そして、ステップＳ１３において、切り替えが終了したと判定された場合、当該切り替え処理が終了される。
【００８０】
なお、ステップＳ３において、選択された切替方法がワイプではない、すなわち、瞬時切り替え、またはミックスであると判定された場合、処理はステップＳ１４に進められる。この場合、第１および第２の映像ソースの視差調整は行わない。
【００８１】
ステップＳ１４において、制御部１２は、現在のフェーダ値に基づき、第１の映像ソースと第２の映像ソースの現在の混合比を算出して、スイッチャ１３Ｌおよび１３Ｒのそれぞれの合成部４９に通知する。合成部４９は、通知された混合比に従い、第１の映像ソースと第２の映像ソースを合成し、その結果得られた映像を後段に出力する。
【００８２】
ステップＳ１５において、制御部１２は、現在のフェード値に基づき、切り替えが終了したか（フェード値＝１００％であるか）否かを判定する。そして、切り替えが終了したと判定されるまで、ステップＳ１の処理が繰り返される。切り替えが終了したと判定された場合、当該切り替え処理が終了される。
【００８３】
以上に説明した切り替え処理によれば、ワイプにより第１の映像ソースから第２の映像ソースに切り替える場合、第１の映像と第２の映像が同時に画面上に存在するワイプ期間における、第１の映像の視差と第２の映像の視差を一致させるようにした。これにより、切り替え中の映像を見た視聴者に対して違和感や目の負担を与えてしまうことを軽減できる。
【００８４】
また、第１および第２の映像ソースの視差の調整を、ユーザが制御可能なフェード値に対応付けて実行するようにしたので、ユーザの意図に合致した切り替えを行うことができる。
【００８５】
[変形例１]
第１および第２の映像は、それぞれの画面上に様々な物体が存在し得るので、その奥行きにはそれぞれ異なる幅が存在する。すなわち、上述したように視差調整を行っても、実際には、図１５に示すように、ワイプ区間においても視差に基づく奥行きに差が生じ得る。
【００８６】
そこで、図１６に示すように、第１および第２の映像ソースの視差を調整する際、奥行きの幅がワイプ区間で一致するように、第１または第２の映像ソースの少なくとも一方の奥行きの幅を圧縮するように調整するようにしてもよい。これにより、切り替え中の映像をより違和感のないものにすることができる。
【００８７】
[変形例２]
上述した切り替え処理においては、ワイプによる切り替えの場合にのみ、視差調整を行うようにしたが、ミックスによる切り替え時にも視差調整を行うようにしてもよい。
【００８８】
図１７は、第１の映像ソースから第２の映像ソースにミックスによって切り替える時の視差調整の例を示している。
【００８９】
ミックスの場合、図７乃至図１３に示されたワイプの場合のように、第１の映像ソースの奥行きと、第２の映像ソースの奥行きとを一致させる必要はない。すなわち、図１７に示すように、フェーダ値の序盤では、第２の映像ソースの奥行きを一定に維持し、第１の映像ソースの奥行きを第２の映像ソースの奥行きに徐々に近づけ、フェーダ値の終盤で、第２の映像ソースの奥行きを元の値に徐々に戻すようにする。
【００９０】
ミックスの場合においても、このような視差調整を行うことにより、より滑らかに第１の映像ソースから第２の映像ソースに切り替えることができる。
【００９１】
なお、本発明は、カメラで撮影した映像を直ちに生放送する放送局のシステムに適用でき、またＶＴＲなどに保存された映像を編集し、番組としての完成品をＶＴＲなどに格納する編集システムにも適用できる。
【００９２】
ところで、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【００９３】
図１８は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
【００９４】
このコンピュータ１００において、CPU（Central Processing Unit）１０１，ROM（Read Only Memory）１０２，RAM（Random Access Memory）１０３は、バス１０４により相互に接続されている。
【００９５】
バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、キーボード、マウス、マイクロホンなどよりなる入力部１０６、ディスプレイ、スピーカなどよりなる出力部１０７、ハードディスクや不揮発性のメモリなどよりなる記憶部１０８、ネットワークインタフェースなどよりなる通信部１０９、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア１１１を駆動するドライブ１１０が接続されている。
【００９６】
以上のように構成されるコンピュータ１００では、CPU１０１が、例えば、記憶部１０８に記憶されているプログラムを、入出力インタフェース１０５およびバス１０４を介して、RAM１０３にロードして実行することにより、上述した一連の処理が行われる。
【００９７】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであってもよいし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであってもよい。
【００９８】
また、プログラムは、１台のコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。
【００９９】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０１００】
１０  ３Ｄ映像編集装置，  １１  操作入力部，  １２  制御部，  １３  スイッチャ，  １４  ３Ｄ映像処理部，  ２１  マトリクススイッチ，  ２２  切替方法選択スイッチ，  ２３  フェーダレバー，  ２４  オートフェーダスイッチ，  ３１  補助出力部，  ３２  入力選択部，  ４１  SDI入力ライン,  ４２  補助出力ライン,  ４３  ビデオ加工部,  ４４  加工用バス,  ４５  入力バス，  ４６  予備入力バス，  ４７  キー画像加工部，  ４８  ビデオ加工部，  ４９  合成部，  ５１  視差計測部，  ５２  視差調整部，  ５３  メモリ，  １００  コンピュータ，  １０１  CPU
【図１】
2011223183.tif 000003
【図２】
2011223183.tif 000004
【図３】
2011223183.tif 000005
【図４】
2011223183.tif 000006
【図５】
2011223183.tif 000007
【図６】
2011223183.tif 000008
【図７】
2011223183.tif 000009
【図８】
2011223183.tif 000010
【図９】
2011223183.tif 000011
【図１０】
2011223183.tif 000012
【図１１】
2011223183.tif 000013
【図１２】
2011223183.tif 000014
【図１３】
2011223183.tif 000015
【図１４】
2011223183.tif 000016
【図１５】
2011223183.tif 000017
【図１６】
2011223183.tif 000018
【図１７】
2011223183.tif 000019
【図１８】
2011223183.tif 000020