(57)【要約】【課題】奥行きの矛盾が生じないようにオブジェクトの奥行きを変更することが出来る映像処理装置を提供する。【解決手段】三次元映像に含まれるオブジェクトの奥行きを変更する映像処理装置に、三次元映像取得部１１と、オブジェクトの奥行きを示したデプスマップ情報を取得する奥行き情報取得部１２と、オブジェクトの奥行きを変更させるための奥行き変更情報を取得する奥行き変更情報取得部１３と、オブジェクトの手前側及び奥側に位置する他のオブジェクトとの距離を示した奥行き特徴量を特定する奥行き特徴量特定部１４と、前記奥行き特徴量及び前記奥行き変更情報に基づいて、各オブジェクトの前後関係が入れ替わらない範囲で、デプスマップ情報を変更する奥行き情報変更部１５と、変更されたデプスマップ情報及び三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成部１６とを備える。【選択図】図１
2013171539.tif 000002
【特許請求の範囲】
【請求項１】
三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理装置であって、
三次元映像を取得する三次元映像取得手段と、
前記三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を取得する奥行き情報取得手段と、
前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得する奥行き変更情報取得部手段と、
奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、
前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、
該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段と
を備えることを特徴とする映像処理装置。
【請求項２】
三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理装置であって、
三次元映像を取得する三次元映像取得手段と、
該三次元映像取得手段にて取得した三次元映像に基づいて、該三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を生成する奥行き情報生成手段と、
前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得する奥行き変更情報取得部手段と、
奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、
前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、
該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段と
を備えることを特徴とする映像処理装置。
【請求項３】
前記奥行き距離情報特定手段は、
奥行き変更対象の物体映像に対して、奥行き方向から見て該変更対象の輪郭から所定距離の領域内にある他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するようにしてあり、
前記奥行き情報変更手段は、
前記奥行き変更対象の物体映像と、前記他の物体映像との前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する
ことを特徴とする請求項１又は請求項２に記載の映像処理装置。
【請求項４】
前記奥行き距離情報特定手段は、
奥行き変更対象の物体映像に対して、奥行き方向から見て一部が重畳している他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するようにしてあり、
前記奥行き情報変更手段は、
前記奥行き変更対象の物体映像と、前記他の物体映像との前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する
ことを特徴とする請求項１から請求項３のいずれか一つに記載の映像処理装置。
【請求項５】
三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理方法であって、
三次元映像を取得するステップと、
前記三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を取得するステップと、
前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得するステップと、
奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するステップと、
前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更するステップと、
変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成するステップと
を備えることを特徴とする映像処理方法。
【請求項６】
三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理方法であって、
三次元映像を取得するステップと、
取得した三次元映像に基づいて、該三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を生成するステップと、
前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得するステップと、
奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するステップと、
前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更するステップと、
変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成するステップと
を備えることを特徴とする映像処理方法。
【請求項７】
コンピュータに、三次元映像に含まれる複数の物体映像の奥行きを変更させるコンピュータプログラムにおいて、
コンピュータを、
奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、
前記三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報及び物体映像の奥行き方向の距離を変更させるための奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、
該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段と
して機能させることを特徴とするコンピュータプログラム。
【請求項８】
コンピュータに、三次元映像に含まれる複数の物体映像の奥行きを変更させるコンピュータプログラムにおいて、
コンピュータを、
取得した三次元映像に基づいて、該三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を生成する奥行き情報生成手段と、
奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、
前記奥行き距離情報及び前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、
該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段と
して機能させることを特徴とするコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、三次元映像の奥行きを変更する映像処理装置、映像処理方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
三次元映像を表示可能なテレビ、ディスプレイ、プロジェクタ、携帯電話などの普及により、映像を３Ｄで楽しむことが一般的となっている。三次元映像は専用のステレオカメラで撮影する他、二次元の映像から三次元映像へ変換する２Ｄ−３Ｄ変換技術を用いることで取得することが出来る（例えば、特許文献１）。
【０００３】
ところで、ステレオカメラ、又は２Ｄ−３Ｄ変換技術によって作成された三次元映像がユーザの意図にそぐわず、この映像を編集することがある。例えば、三次元映像を視聴したユーザが、三次元映像中のある特定のオブジェクトに対してもっと飛び出し感を強調するために編集を行うことがある。この時、三次元映像から得られる又は三次元映像に付随するデプスマップ情報を変更して、強調すべきオブジェクトに新たな奥行きを与え、変更されたデプスマップ情報に基づいて三次元映像の生成を行う事で所望の奥行きを有した三次元映像を得る事が出来る。
【０００４】
特許文献２には、濃淡画像として表現されたデプスマップ情報を任意に修正、即ちユーザが任意のオブジェクトに対し任意の奥行きを設定する事で、所望の奥行きの三次元映像を得る技術が示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平１１−２７５６０４号公報
【特許文献２】特開２００８−９０７５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、前記のような編集を行う際、オブジェクトの適切な奥行きをユーザが決定する事は困難であるという問題があった。
図１３は、三次元映像及びデプスマップを概念的に示した説明図、図１４は、従来技術の問題点を示した説明図である。図１３Ａは三次元映像４を示している。ここでは、図１３Ｂに示すように、三次元映像４に対応するデプスマップ情報５があるものとする。三次元映像４は、人オブジェクト４１と、缶オブジェクト４２とを含み、各オブジェクトにはそれぞれ奥行き５１、５２が与えられている。ここで示すデプスマップ情報５は、白色に近いほど手前、黒色に近いほど奥側というように、奥行き方向の相対位置を示している。以下、デプスマップ情報５は、特に断りが無い限り、同様の表現がなされているものとする。即ち、デプスマップ情報５から分かる通り、缶オブジェクト４２の奥行きは人オブジェクト４１より手前に存在しているものであり、これは三次元映像４に示される缶オブジェクト４２と人オブジェクト４１の重なりから判断される前後関係とも一致するものであり、矛盾の無い自然な三次元映像が示されていると言える。
このとき、ユーザが缶オブジェクト４２に新たな奥行きを与えることとする。図１４Ａのデプスマップ情報１０５に示すように、人オブジェクト４１に対する奥行き１５１より缶オブジェクト４２に対する奥行き１５２が手前になるように再設定される場合、これは、先に述べた三次元映像４中の重なりに基づく前後関係とも矛盾が生じず、自然な三次元映像となる。即ち与えた奥行き値は適切だったと言える。
【０００７】
一方で、図１４Ｂのデプスマップ情報２０５が示すように、人オブジェクト４１に対する奥行き２５１より缶オブジェクト４２に対する奥行き２５２が奥になるように再設定される場合、これは三次元映像４中の重なりに基づいて判断される前後関係と矛盾が生じ、非常に違和感のある三次元映像が生成されることになる。このような矛盾のある三次元映像は、視聴者に混乱を与え、映像本来の立体感を損ねる結果となる。
【０００８】
このように、矛盾の無いデプスマップ情報となるようにユーザが奥行きを決定することは非常に困難である。特に三次元動画像において、各シーン乃至各フレームにおける奥行きは適時変化するものであり、人オブジェクト４１の奥行きがフレーム毎に異なっている場合に、缶オブジェクト４２に対する最適な奥行きを決定することは更に困難な問題である。
【０００９】
本発明は斯かる事情に鑑みてなされたものであり、ユーザが三次元映像中の任意のオブジェクトに対し、奥行きを変更する際、奥行きの矛盾に起因した映像本来の立体感の欠如が発生しないような奥行きを決定することが出来る映像処理装置、映像処理方法及びコンピュータプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明に係る映像処理装置は、三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理装置であって、三次元映像を取得する三次元映像取得手段と、前記三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を取得する奥行き情報取得手段と、前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得する奥行き変更情報取得部手段と、奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段とを備えることを特徴とする。
【００１１】
本発明に係る映像処理装置は、三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理装置であって、三次元映像を取得する三次元映像取得手段と、該三次元映像取得手段にて取得した三次元映像に基づいて、該三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を生成する奥行き情報生成手段と、前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得する奥行き変更情報取得部手段と、奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段とを備えることを特徴とする。
【００１２】
本発明に係る映像処理装置は、前記奥行き距離情報特定手段は、奥行き変更対象の物体映像に対して、奥行き方向から見て該変更対象の輪郭から所定距離の領域内にある他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するようにしてあり、前記奥行き情報変更手段は、前記奥行き変更対象の物体映像と、前記他の物体映像との前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更することを特徴とする。
【００１３】
本発明に係る映像処理装置は、前記奥行き距離情報特定手段は、奥行き変更対象の物体映像に対して、奥行き方向から見て一部が重畳している他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するようにしてあり、前記奥行き情報変更手段は、前記奥行き変更対象の物体映像と、前記他の物体映像との前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更することを特徴とする。
【００１４】
本発明に係る映像処理方法は、三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理方法であって、三次元映像を取得するステップと、前記三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を取得するステップと、前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得するステップと、奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するステップと、前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更するステップと、変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成するステップとを備えることを特徴とする。
【００１５】
本発明に係る映像処理方法は、三次元映像に含まれる複数の物体映像の奥行きを変更する映像処理方法であって、三次元映像を取得するステップと、取得した三次元映像に基づいて、該三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を生成するステップと、前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報を取得するステップと、奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定するステップと、前記奥行き距離情報及び前記奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更するステップと、変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成するステップとを備えることを特徴とする。
【００１６】
本発明に係るコンピュータプログラムは、コンピュータに、三次元映像に含まれる複数の物体映像の奥行きを変更させるコンピュータプログラムにおいて、コンピュータを、奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、前記三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報及び物体映像の奥行き方向の距離を変更させるための奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段として機能させることを特徴とする。
【００１７】
本発明に係るコンピュータプログラムは、コンピュータに、三次元映像に含まれる複数の物体映像の奥行きを変更させるコンピュータプログラムにおいて、コンピュータを、取得した三次元映像に基づいて、該三次元映像に含まれる複数の物体映像夫々の奥行き方向の距離を示した奥行き情報を生成する奥行き情報生成手段と、奥行き変更対象である前記物体映像の手前側及び奥側に位置する他の物体映像と、前記奥行き変更対象の物体映像との距離を示した奥行き距離情報を特定する奥行き距離情報特定手段と、前記奥行き距離情報及び前記物体映像の奥行き方向の距離を変更させるための奥行き変更情報に基づいて、複数の前記物体映像の前後関係が入れ替わらない範囲で、前記奥行き情報が示す前記物体映像の奥行きを変更する奥行き情報変更手段と、該奥行き情報変更手段にて変更された奥行き情報及び前記三次元映像に基づいて、奥行きが変更された三次元映像を生成する三次元映像生成手段として機能させることを特徴とする。
【００１８】
本発明にあっては、三次元映像に含まれる物体映像の奥行きを変更する映像変更を行っても、前記物体映像及び他の物体映像の前後関係が入れ替わることは無い。
なお、奥行き距離情報が示す物体映像間の距離は、必ずしも絶対的な距離である必要は無く、複数の物体映像の前後関係を表すことが可能な情報であれば、その形態は問わない。例えばオブジェクト毎の、奥行きに応じた左右方向の映像のずれ、即ち視差を奥行き距離情報として用いても良い。
【００１９】
本発明にあっては、変更対象の物体映像及びその周辺に位置する他の物体映像の前後関係、つまり、前後関係が入れ替わることで違和感が生じる物体映像の前後関係を特定し、これらの物体映像が入れ替わることを防止する。
【００２０】
本発明にあっては、奥行き方向に一部が重畳している物体映像の前後関係が入れ替わることを防止する。
【発明の効果】
【００２１】
本発明によれば、ユーザが三次元映像中の任意のオブジェクトに対し、奥行きを変更する際、奥行きの矛盾に起因した映像本来の立体感の欠如が発生しないような奥行きを決定することが出来る。
【図面の簡単な説明】
【００２２】
【図１】実施の形態１に係る映像処理システムの一構成例を示すブロック図である。
【図２】三次元映像の一例を概念的に示した説明図である。
【図３】デプスマップ情報の一例を概念的に示した説明図である。
【図４】処理対象オブジェクト指定情報を概念的に示した説明図である。
【図５】奥行き特徴量の特定方法の一例を概念的に示した説明図である。
【図６】奥行き変更後の変更後デプスマップの一例を概念的に示した説明図である。
【図７】三次元映像の生成方法の一例を概念的に示した説明図である。
【図８】実施の形態２に係る映像処理システムの一構成例を示すブロック図である。
【図９】実施の形態３に係る映像処理システムの一構成例を示すブロック図である。
【図１０】本実施の形態４に係る映像処理装置の一構成例を示すブロック図である。
【図１１】本実施の形態４に係る映像処理方法の一構成例を示すフローチャートである。
【図１２】本実施の形態５に係る映像処理方法の一構成例を示すフローチャートである。
【図１３】三次元映像及びデプスマップを概念的に示した説明図である。
【図１４】従来技術の問題点を示した説明図である。
【発明を実施するための形態】
【００２３】
（実施の形態１）
以下、本発明をその実施の形態を示す図面に基づいて詳述する。
図１は、本発明の実施の形態１に係る映像処理システムの一構成例を示すブロック図である。本実施の形態１に係る映像処理システムは、映像処理装置１、蓄積部２及び出力部３を備える。
蓄積部２は、例えば、ハードディスク、光ディスク、光磁気ディスク、半導体メモリなどで構成されており、映像処理装置１に必要な後述する三次元映像４、デプスマップ情報５（奥行き情報）、及び奥行き変更情報を記憶する。奥行き変更情報の詳細は後述する。なお、これら情報の格納方法については特に言及しないが、例えば、ＸＭＬ（Extensible Markup Language）のような構造化されたフォーマットで紐付けられて格納されているものとしてもよい。
映像処理装置１は、蓄積部２から三次元映像４を取得する三次元映像取得部１１と、蓄積部２から前記三次元映像４に対応するデプスマップ情報５を取得する奥行き情報取得部１２と、蓄積部２から「どのオブジェクト（物体映像）の奥行きをどのように変更すべきか」といった奥行き変更情報を取得する奥行き変更情報取得部１３と、前記デプスマップ情報５及び奥行き変更情報から奥行き方向におけるオブジェクト間の距離を特定する奥行き特徴量特定部１４と、デプスマップ情報５、奥行き情報、奥行き特徴量及び奥行き変更情報に基づいて、該奥行き情報を変更する奥行き情報変更部１５と、奥行き情報変更部１５にて変更された奥行き情報及び三次元映像取得部１１で得られた三次元映像４に基づき、新たな三次元映像４を生成する三次元映像生成部１６とを備える。
【００２４】
＜三次元映像取得部＞
三次元映像取得部１１は、蓄積部２が記憶している三次元映像４を取得し、取得した三次元映像４を三次元映像生成部１６に与える。三次元映像４は、複数のオブジェクトを含む時系列順の複数のフレーム画像で構成されており、各オブジェクトの奥行き感を表現するための視差に関する情報を有する。
図２は、三次元映像４の一例を概念的に示した説明図である。三次元映像４には、人オブジェクト４１、及び該人オブジェクト４１よりも奥行き方向、手前側に位置する缶オブジェクト４２を含む。三次元映像４は、例えばサイドバイサイドの三次元フォーマットで表現されており、左眼用映像及び右眼用映像から構成されている。左眼用画像及び右眼用画像は、オブジェクトの奥行きに応じた視差、つまり左右方向の映像のずれを有する。該視差によって、奥行き感の程度が変化し、映像のずれ方向によってオブジェクト奥行き方向又は手前方向にあるように見える。
具体的には、交互に表示された右眼用画像及び左眼用画像夫々を選択的に透過させる右眼用シャッタ及び左眼用シャッタを有する３Ｄ眼鏡を用いる場合を想定すると、該３Ｄ眼鏡は、右眼用画像が表示されている場合、右眼用シャッタのみを開くことによって、右眼に右眼用画像を結像させ、左眼用画像が表示されている場合、左眼用シャッタのみを開くことによって、左眼に左眼用画像を結像させる。このようにして、視聴者の右眼には、右眼用画像が、左眼には左眼用画像が映り、右眼用画像及び左眼用画像のずれによる両眼視差を利用して、視聴者に三次元映像４を視認させることが出来る。
【００２５】
なお、取得した三次元映像４が符号化されている場合、三次元映像取得部１１は、これをＲＧＢ形式又はＹＵＶ形式などの映像に復号する処理を行ったのち、左眼用画像、右眼用画像各々に分割し保持する。また、三次元映像４がサイドバイサイド又はトップアンドボトムなど任意の三次元フォーマットで表現されている場合は、各々のフォーマットに応じて伸長し、本来の解像度の左眼用画像、右眼用画像に直しておく。以下、本実施の形態１では、復号後の三次元映像４について処理を行うものとする。また、本実施の形態１では蓄積部２から取得する三次元映像４はユーザの指示などにより一意に決定されているものとする。
【００２６】
＜奥行き情報取得部＞
奥行き情報取得部１２は、蓄積部２に蓄積されているデプスマップ情報５を取得し、取得したデプスマップ情報５を奥行き特徴量特定部１４並びに奥行き情報変更部１５に与える。デプスマップ情報５は、三次元映像取得部１１で取得される三次元映像４を構成する各フレーム画像に対応する情報を有し、各フレーム画像に含まれるオブジェクトの奥行き方向の相対的な距離を示した情報を含む。
図３は、デプスマップ情報５の一例を概念的に示した説明図である。デプスマップ情報５は、例えば、フレーム画像の各画素に対応する映像部分の奥行き方向の相対的な距離を０〜２５５の２５６階調で表現した情報であり、図３においては、該距離をグレースケール画像で表現している。つまり、黒色部分は、最も奥側に存在することを意味している。グレー部分は色が薄い程、より手前側に映像部分が存在していることを示している。白色部分は、最も手前に存在する映像部分を示している。
図３に示したデプスマップ情報５は、図２に示した三次元映像４に対応しており、グレー部分５１は人オブジェクト４１の奥行き方向の距離を示し、グレー部分５２は缶オブジェクト４２の奥行き方向の距離を示している。図３から分かるように、缶オブジェクト４２に対応するグレー部分５２の方が、人オブジェクト４１に対応するグレー部分４１よりも薄いため、缶オブジェクト４１の方が手前側にあることが分かる。
なお、デプスマップ情報５は、中央視点映像、即ち、左眼用画像の視点と右眼用画像の視点の間の視点の画像におけるオブジェクトの奥行きを表現したものであっても良いし、左眼用画像及び右眼用画像、又はいずれか一方の画像におけるオブジェクトの奥行きを表現したものであっても良い。ここでは、デプスマップ情報５は、中央視点映像におけるオブジェクトの奥行きを表現したものとして説明する。
【００２７】
なお、上述の説明では、映像部分の奥行きを２５５階調で表現する例を示したが、デプスマップ情報５を表現する階調はこれに限定されない。即ち、デプスマップ情報５は０〜１５の１６階調で表わされても良いし、０〜１０２３の１０２４階調で表わされても良い事は言うまでも無い。
また、取得したデプスマップ情報５が符号化されている場合、三次元映像取得部１１で示したように、適時復号される。以下、本実施の形態１では、復号後のデプスマップ情報５について処理を行うものとする。
【００２８】
＜奥行き変更情報取得部＞
奥行き変更情報取得部１３では、蓄積部２に蓄積されている、ユーザによって作成された奥行き変更情報を取得する。奥行き変更情報には、奥行きの変更処理を行う複数のフレーム画像を示した「処理区間情報」と、前記処理区間での処理対象オブジェクトを指定する「処理対象オブジェクト指定情報」と、処理対象のオブジェクトに対しどの様な奥行きの変化を与えるかを示す「奥行き調整指示情報」とを含む。
【００２９】
「処理区間情報」としては、例えば処理対象とするフレーム画像の開始点Ｅｓ及び終了点Ｅｅを取得する。
【００３０】
図４は、処理対象オブジェクト指定情報を概念的に示した説明図である。「処理対象オブジェクト指定情報」としては、図４に示すような処理対象のオブジェクトを白色、それ以外を黒色とする二値で表現されるマスク画像６として得る。
なお、処理対象オブジェクト指定情報に関しては、処理区間情報として指定された区間Ｅｓ〜Ｅｅの全フレーム画像に対しての情報が必要となる。本実施の形態１ではユーザに入力させるなどして、既に該区間全てのフレームに対する処理対象オブジェクト指定情報が予め蓄積部２に記録されており、これを読み出すものとする。また、指定区間内の任意の１フレーム画像に対応する処理対象オブジェクト指定情報のみをユーザに入力させ、これに基づいて該区間内のその他のフレーム画像に関する処理対象オブジェクト指定情報を自動生成するようにしても良い。例えば、ユーザが指定した任意の１フレーム画像に対応する処理対象オブジェクト指定情報で指定される領域を入力として、既知のオブジェクト追跡手法などを用いて、他のフレームでの位置を検出することで、全フレームの処理対象オブジェクト指定情報を生成するものとしても良い。
【００３１】
更に、「奥行き調整指示情報」として、対象オブジェクトをどの様に飛び出させるかを指定する情報を得る。具体的にはユーザに対し、「飛び出し強調（強）」、「飛び出し強調（弱）」、「奥行き強調（弱）」、「奥行き強調（強）」の４段階を提示し、これらから一つを選択させることによって、対象オブジェクトをどの様に飛び出させるかを指定させるものとする。
【００３２】
＜奥行き特徴量特定部＞
奥行き特徴量特定部１４では、奥行き情報取得部１２で得られたデプスマップ情報５と、奥行き変更情報取得部１３で得られた奥行き変更情報に基づいて、奥行き特徴量を特定する。ここで、奥行き特徴量とは、奥行き変更情報にて指示される処理対象のオブジェクト周辺での奥行きの最大値並びに最小値情報である。
【００３３】
図５は、奥行き特徴量の特定方法の一例を概念的に示した説明図である。拡大画像５３は、デプスマップ情報５の一部を拡大したものである。処理対象オブジェクト指定情報で指定された領域に含まれる画素を白色画素、該領域に含まれない画素をハッチングを付した画素で表わしている。太枠で囲まれた画素は、処理対象の注目画素５３ａを示している。ここでは、図３で示したデプスマップ情報５に対して、処理対象のオブジェクトが図４のマスク画像６で指定されたものとする。即ち、今回の例では処理対象オブジェクトとして缶オブジェクト４２が指定されている。このとき、まず、変数ｍｉｎ及び変数ｍａｘを各々０、２５５で初期化する。次にデプスマップ情報５の内、処理対象オブジェクト指定情報で指定される領域の各画素において、注目画素５３ａの８近傍の画素をチェックし、周辺に処理対象オブジェクト指定情報で指定される領域に含まれない近傍画素５３ｂがあり、該近傍画素５３ｂの値が、処理対象オブジェクトで指定される領域の画素の値より小さく、かつ、変数ｍｉｎより大きい場合、変数ｍｉｎの値を、前記近傍画素５３ｂの値で更新する。また、近傍画素５３ｂの値が、処理対象オブジェクトで指定される領域の画素の値より大きく、かつ、変数ｍａｘより小さい場合、変数ｍａｘの値を、前記近傍画素５３ｂの値で更新する。この処理を、処理対象オブジェクト指定情報で指定された全ての領域で行う。全てのチェックを完了した時点で、この変数ｍａｘ及び変数ｍｉｎを処理対象オブジェクト周辺での奥行きの最大値並びに最小値情報とする。更には、奥行き変更情報に含まれる処理区間情報で指示される全フレームに対して前記処理を行い、各フレーム画像における処理対象のオブジェクト周辺での奥行きの最大値並びに最小値情報を奥行き特徴量として、奥行き情報変更部１５に与える。
【００３４】
＜奥行き情報変更部＞
奥行き情報変更部１５は、奥行き特徴量特定部１４で得られた奥行き特徴、奥行き変更情報取得部１３で得られた奥行き変更情報に基づき、奥行き情報取得部１２で得られたデプスマップ情報５を変更する。
まず、奥行き変更情報取得部１３から奥行き調整指示情報を取得する。先に述べたように、奥行き調整指示情報は、「飛び出し強調（強）」、「飛び出し強調（弱）」、「奥行き強調（弱）」、「奥行き強調（強）」の４段階で奥行き調整量が指定されている。この情報に基づき、奥行き調整に使用する係数αを決定する。映像処理装置１は、予め前記４段階に対応する係数α１、α２、α３、α４を記憶しているものとし、「飛び出し強調（強）」が選択された場合には係数αにα１が設定され、「飛び出し強調（弱）」選択時にはα２、「奥行き強調（弱）」選択時にはα３、「奥行き強調（強）」選択時はα４が設定されるものとする。但し、α１＞α２＞１．０＞α３＞α４≧０．０を満たすものとする。
次に、処理対象オブジェクト指定情報と決定された係数αに基づいて、デプスマップ情報５を変更する。奥行き特徴量特定部１４で示した例と同様に、図３で示したデプスマップ情報５に対して、奥行き変更対象のオブジェクトが図４の処理対象オブジェクト指定情報で指定されたものとして詳細を説明する。この時、奥行き変更対象のデプスマップ情報５をＤｓｒｃ（ｘ，ｙ）、奥行き変更後のデプスマップ情報１０５ａ，１０５ｂ（図６参照）をＤｄｓｔ（ｘ，ｙ）とするとき、処理対象オブジェクト指定情報で指定された領域の各画素に対応するデプスマップ情報５を下記式に基づき変更する。
【数１】
2013171539.tif 000003
ここで、ｍａｘ、ｍｉｎは、奥行き特徴量特定部１４で求めた奥行き特徴である。上記式で分かる通り、Ｄｄｓｔ（ｘ，ｙ）は奥行き変更前の奥行値Ｄｓｒｃ（ｘ，ｙ）に先に求めた係数を掛け合わせた値となっている。更に、ｍａｘ、ｍｉｎ、即ち、奥行き変更対象としているオブジェクトの周辺に存在するオブジェクトの奥行き値を上限並びに下限として設け、α＊Ｄｓｒｃ（ｘ，ｙ）の値がｍａｘを超える場合はこれをｍａｘに丸め、ｍｉｎを下回る場合は、これをｍｉｎに丸める。以上の処理を行う事で、元々のデプスマップ情報５で示されたオブジェクトの前後関係を崩すことなく、奥行きの変更を行う事が出来る。
また、デプスマップ情報５を変換する式は上記式（１）に限定するものではない。例えば、下式で求めるものとしても良い。
【数２】
2013171539.tif 000004
ここで、Ｄｄｓｔ（ｘ，ｙ）、Ｄｓｒｃ（ｘ，ｙ）、ｍａｘ、ｍｉｎは、上記式（１）の説明で前述したものと同様である。βは奥行き変更情報取得部１３から取得した奥行指示情報であり、「飛び出し強調（強）」、「飛び出し強調（弱）」、「奥行き強調（弱）」、「奥行き強調（強）」に対応した値、β１、β２、β３、β４、のいずれかが設定されているものとする。但し、β１＞β２＞０．０＞β３＞β４であるものとする。
【００３５】
図６は、奥行き変更後の変更後デプスマップの一例を概念的に示した説明図である。図６Ａは、図３に示したデプスマップ情報５について、缶オブジェクト４２に対する飛び出し強調を行った場合に得られるデプスマップ情報１０５ａを示している。図６Ａに示すように、缶オブジェクト４２に対する奥行き１５２ａは、人オブジェクト４１に対する奥行き１５１ａより、手前になるように変更されるため、三次元映像４中の重なりに基づく前後関係とも矛盾が生じず、自然な三次元映像４となる。
図６Ｂは、図３に示したデプスマップ情報５について、缶オブジェクト４２に対する奥行き強調を行った場合に得られるデプスマップ情報１０５ｂを示している。図６Ｂに示すように、缶オブジェクト４２に対する奥行き１５２ｂは、奥行き強調後も人オブジェクト４１に対する奥行き１５１ｂより、手前になるように変更されるため、三次元映像４中の重なりに基づく前後関係とも矛盾が生じず、自然な三次元映像４となる。デプスマップ情報５の変更は、上記式（１）、又（２）を満たすように行われるため、図１４Ｂに示すように、人オブジェクト４１と、缶オブジェクト４２との前後関係が入れ替わり、三次元映像４中の重なりに基づく前後関係とも矛盾が生じることは無い。
【００３６】
＜三次元映像生成部＞
三次元映像生成部１６は、奥行き情報取得部１２で得られた奥行き変更前のデプスマップ情報５と、奥行き情報変更部１５で得られる奥行き変更後のデプスマップ情報１０５ａ，１０５ｂと、三次元映像取得部１１で取得された三次元映像４とを取得する。そして、三次元映像生成部１６は、奥行き変更されたデプスマップ情報１０５ａ，１０５ｂに基づいて三次元映像４を編集、即ちユーザの指示する新たな奥行きに基づいた三次元映像４を生成する。
【００３７】
図７は、三次元映像４の生成方法の一例を概念的に示した説明図である。三次元映像生成手段としては、例えば特開２００３−２８４０９７に示されるような技術を用いて、左眼用画像４Ｌ、右眼用画像４Ｒ、及びデプスマップ情報５から、一旦中央視点映像１０４、即ち、左眼用画像４Ｌの視点と右眼用画像４Ｒの視点の間の視点の画像を生成した後に、前記奥行き情報変更部１５で変更したデプスマップ情報１０５ａ，１０５ｂを用いて、新たな左眼用画像１０４Ｌ及び右眼用画像１０４Ｒを生成する。
【００３８】
なお、生成された左眼用画像１０４Ｌ、右眼用画像１０４Ｒは出力部３が要求するフォーマットに応じて、サイドバイサイド形式や、トップアンドボトム形式、フレームパッキング形式などに代表される任意の三次元映像４フォーマットに変換するように構成しても良い。出力部３は、例えば液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイであり、三次元映像生成部１６から与えられた映像を表示する。
【００３９】
実施の形態１によれば、本来の三次元映像の奥行き感や飛び出し感を阻害することなく、自然な映像の奥行き編集を、ユーザの手を煩わせる事無く行うことが出来る。
【００４０】
（実施の形態２）
図８は、実施の形態２に係る映像処理システムの一構成例を示すブロック図である。本実施例に係る映像処理システムは、映像処理装置２０１、蓄積部２及び出力部３を備える。本実施例では、実施の形態１にて奥行き変更情報を蓄積部２から取得するように構成されているところを、実施の形態２に係る映像処理装置２０１は、別途用意されたＧＵＩ（グラフィカル・ユーザ・インタフェース）を用いて、奥行き変更情報をユーザの操作にて取得するように構成されている。具体的には、奥行き変更情報取得部１３に代えて設けられた奥行き変更情報受付部２１３の構成が異なり、他の処理部の動作については図１を用いて説明した実施の形態１と同等の為、説明を割愛する。
【００４１】
奥行き変更情報受付部２１３は、例えば、三次元映像取得部１１にて蓄積部２から取得した三次元映像４、又は該三次元映像４のサムネイル映像を表示し、奥行き変更処理を行う処理区間を受け付ける。処理区間は、三次元映像４を構成するフレーム画像の内、処理対象とするフレーム画像の開始点Ｅｓ及び終了点Ｅｅを示したスライダ操作によって受け付けると良い。また、処理対象とするフレーム画像の開始点Ｅｓ及び終了点Ｅｅを示した再生時間の入力操作等によって受け付けても良い。
【００４２】
そして、奥行き変更情報受付部２１３は、奥行き変更処理対象のオブジェクトを受け付ける。例えば、奥行き変更情報受付部２１３は、デプスマップ情報５に基づいて、奥行きが略同一で、かつ互いに画素が連結している映像部分を特定し、特定された映像部分をオブジェクト候補として表示し、奥行き変更対象であるオブジェクトの選択を受け付ける。また、三次元映像４に基づいて動き検出を行い、動きのある映像部分をオブジェクト候補として表示するように構成しても良い。更に、ユーザからオブジェクトの選択を受け付ける際、オブジェクトの形状修正を画像編集のような態様で受け付けると良い。
奥行き変更対象のオブジェクトは、例えば、処理区間内の任意のフレーム画像１枚から受け付け、奥行き変更情報受付部２１３は、受け付けたオブジェクトに基づいて、処理区間にある他のフレーム画像のオブジェクトを自動生成すると良い。例えば、１枚のフレーム画像で指定されたオブジェクトと略同形の映像部分を、他のフレーム画像から公知のオブジェクト追跡処理、パターンマッチング処理等の画像処理によって検索し、検索されたオブジェクト部分を白色、他の部分を黒色としたマスク画像６を生成する。
なお、もちろんのこと、奥行き変更対象のオブジェクトを、処理区間における各フレーム画像毎に受け付けるように構成しても良い。
【００４３】
次いで、奥行き変更情報受付部２１３は、変更処理対象のオブジェクト毎に、対象オブジェクトをどの様に飛び出させるかを受け付ける。例えば、奥行き変更情報受付部２１３は、「飛び出し強調（強）」、「飛び出し強調（弱）」、「奥行き強調（弱）」、「奥行き強調（強）」の４段階を、選択メニュー又は操作ボタンとして提示し、これらから一つを選択させることによって、対象オブジェクトをどの様に飛び出させるかを示した奥行き調整指示情報を受け付ける。なお、ここでは奥行き変更の程度を４段階で受け付ける例を説明したが、より多段又は無段階で奥行き変更を受け付けるように構成しても良い。
【００４４】
実施の形態２によれば、ユーザは、奥行き変更対象のオブジェクトの指定、奥行き変更の程度をインタラクティブに受け付け、三次元映像４に含まれるオブジェクトの奥行きに矛盾が生じないように、オブジェクトの奥行き変更処理を行うことが出来る。
【００４５】
（実施の形態３）
図９は、実施の形態３に係る映像処理システムの一構成例を示すブロック図である。本実施例に係る映像処理システムは、映像処理装置３０１、蓄積部２及び出力部３を備える。本実施の形態３では、実施の形態１にてデプスマップ情報５を蓄積部２から取得するように構成されているところを、実施の形態３に係る映像処理装置３０１は、三次元映像取得部３１１にて取得した三次元映像４から各種演算によってデプスマップ情報５を取得するように構成されている。具体的には、奥行き情報取得部１２に代えて設けられた奥行き情報生成部３１２の構成が異なるため、以下では主に上記相異点について説明する。
【００４６】
＜奥行き情報生成部＞
奥行き情報生成部３１２は、三次元映像取得部３１１から三次元映像４を取得し、取得した三次元映像４を用いて、デプスマップ情報５を作成し、作成したデプスマップ情報５を奥行き特徴量特定部１４及び奥行き情報変更部１５に与える。奥行き情報生成部３１２は、例えば、左眼用画像を複数の映像部分に分割し、該映像部分と略同一の特徴量を有する映像部分を右眼用画像から検索し、右眼用画像に含まれる該映像部分の位置を特定する。特徴量は、例えば映像部分に含まれるエッジ、輝度、明度、彩度、二値化処理の結果などである。そして、奥行き情報生成部３１２は、左眼用画像に含まれる該映像部分の位置と、右眼用画像に含まれる該映像部分の位置との、左右方向におけるずれ量から前記映像部分の奥行きを求める。
三次元映像４からデプスマップ情報５を生成するより詳細な方法としては、下記参考文献１及び参考文献２に示されるような、既知のデプスマップ情報５生成方法を用いると良い。また、生成したデプスマップ情報５も、実施の形態１と同様０〜２５５の２５６階調の情報であるが、デプスマップ情報５を表現する階調は特に限定されない。
（参考文献１）A Multiple-Baseline Stereo (IEEE Transactions on pattern analyis and machine intelligence, vol 15, NO, 4, APRIL 1993)
（参考文献２）Kalman Filter-based Algorithm for Estimating Depth from Image Sewuence(International Jounal of Computer Vision, 3, 209-236(1989))
【００４７】
実施の形態３によれば、三次元映像４のデプスマップ情報５を準備すること無く、上述の実施の形態と同様、本来の三次元映像の奥行き感や飛び出し感を阻害することなく、自然な映像の奥行き編集を、ユーザの手を煩わせる事無く行うことが出来る。
【００４８】
（実施の形態４）
図１０は、本実施の形態４に係る映像処理装置の一構成例を示すブロック図である。実施の形態４に係る映像処理装置は、本発明に係るコンピュータプログラム４７１をコンピュータ４０１に実行させることによって実現される。
コンピュータ４０１は、装置全体を制御するＣＰＵ（Central Processing Unit）４１１を備える。ＣＰＵ４１１は、ＲＯＭ（Read Only Memory）４１２と、演算に伴って発生する一時的な情報を記憶するＲＡＭ（Random Access Memory）４１３と、本発明の実施の形態４に係るコンピュータプログラム４７１を記録した記録媒体４０７、例えばＣＤ−ＲＯＭからコンピュータプログラム４７１を読み取る外部記憶装置４１４と、外部記憶装置４１４により読み取ったコンピュータプログラム４７１を記録するハードディスク等の内部記憶装置４１５と、入力部４１６と、出力部４１７とが接続されている。内部記憶装置４１５は、実施の形態１乃至実施の形態３で蓄積部２が記憶していた三次元映像４、デプスマップ情報５及び奥行き変更情報を記憶している。ＣＰＵ４１１は、内部記憶装置４１５からコンピュータプログラム４７１をＲＡＭ４１３に読み出して各種演算処理を実行することによって、本発明に係る映像処理方法を実施する。ＣＰＵ４１１の処理手順は、上述の実施の形態１乃至実施の形態３に示す通りであり、コンピュータプログラム４７１の各処理ブロックは各構成部の処理内容と同様である。
【００４９】
図１１は、本実施の形態４に係る映像処理方法の一構成例を示すフローチャートである。ＣＰＵ４１１は、三次元映像取得部１１、奥行き情報取得部１２、及び奥行き変更情報取得部１３として機能し、三次元映像４を内部記憶装置４１５から取得し（ステップＳ４１１）、奥行き情報、つまりデプスマップ情報５を取得し（ステップＳ４１２）、更に奥行き変更情報を取得する（ステップＳ４１３）。なお、ＣＰＵ４１１は、奥行き変更情報を、入力部にて受け付けても良い。
【００５０】
次いで、ＣＰＵ４１１は、奥行き特徴量特定部１４として機能し、ステップＳ４１２で取得したデプスマップ情報５と、ステップＳ４１３で取得した奥行き変更情報に基づいて、奥行き特徴量を特定する（ステップＳ４１４）。
【００５１】
そして、ＣＰＵ４１１は、奥行き情報変更部１５として機能し、ステップＳ４１４で特定した奥行き特徴、ステップＳ４１３で取得した奥行き変更情報に基づき、奥行き情報取得部１２で得られたデプスマップ情報５を変更する（ステップＳ４１５）。
【００５２】
そして、ＣＰＵ４１１は、三次元映像生成部１６として機能し、三次元映像生成部１６は、奥行き変更されたデプスマップ情報１０５ａ，１０５ｂに基づいて三次元映像４を編集、即ちユーザの指示する新たな奥行きに基づいた三次元映像４を生成し（ステップＳ４１６）、処理を終える。
【００５３】
実施の形態４に係るコンピュータ４０１及びコンピュータプログラム４７１にあっては、コンピュータ４０１を本実施の形態１に係る映像処理装置１として機能させ、また前述の実施の形態に係る映像処理方法を実施させることができ、実施の形態１と同様の効果を奏する。実施の形態２についてもコンピュータ４０１によって映像処理装置２０１として機能させることによって、各々の実施の形態と同様の効果を得る。
【００５４】
（実施の形態５）
実施の形態５に係る映像処理装置は、実施の形態４と同様、本発明に係るコンピュータプログラムをコンピュータに実行させることによって実現しており、実施の形態４のステップＳ４１２のみが実施の形態４と異なる。
図１２は、本実施の形態５に係る映像処理方法の一構成例を示すフローチャートである。ＣＰＵ４１１は、三次元映像取得部３１１、奥行き情報生成部３１２、及び奥行き変更情報取得部１３として機能し、三次元映像４を内部記憶装置４１５から取得し（ステップＳ５１１）、実施の形態３で説明したように、奥行き情報、つまりデプスマップ情報５を三次元映像４に基づいて生成し（ステップＳ５１２）、更に奥行き変更情報を取得する（ステップＳ５１３）。以下、ステップＳ５１４〜５１６の処理は、ステップＳ４１４〜４１６と同様であるため、詳細な説明を省略する。
【００５５】
実施の形態５に係るコンピュータ及びコンピュータプログラムにあっては、コンピュータを本実施の形態３に係る映像処理装置３０１として機能させ、また前述の実施の形態に係る映像処理方法を実施させることができ、実施の形態３と同様の効果を奏する。
【符号の説明】
【００５６】
１  映像処理装置
２  蓄積部
３  出力部
４  三次元映像
５  デプスマップ情報
６  マスク画像
１１  三次元映像取得部
１２  奥行き情報取得部
１３  奥行き変更情報取得部
１４  奥行き特徴量特定部
１５  奥行き情報変更部
１６  三次元映像生成部
２１３  奥行き変更情報受付部
３１２  奥行き情報生成部
【図１】
2013171539.tif 000005
【図２】
2013171539.tif 000006
【図４】
2013171539.tif 000007
【図８】
2013171539.tif 000008
【図９】
2013171539.tif 000009
【図１０】
2013171539.tif 000010
【図１１】
2013171539.tif 000011
【図１２】
2013171539.tif 000012
【図３】
2013171539.tif 000013
【図５】
2013171539.tif 000014
【図６】
2013171539.tif 000015
【図７】
2013171539.tif 000016
【図１３】
2013171539.tif 000017
【図１４】
2013171539.tif 000018