(57)【要約】【課題】ソース機器からシンク機器に立体視映像表示用の情報伝送を行なう場合に、シンク機器で誤ったDepth情報が生成されることを防止して、ユーザにとって見易い多視差方式による立体視映像表示を行なうことができるようにした立体視映像伝送装置、立体視映像伝送方法及び立体視映像処理装置を提供すること。【解決手段】実施の形態によれば、立体視映像伝送装置は、生成手段と送信手段とを備える。生成手段は、相互に視差を有する立体視映像表示用の第１及び第２の映像信号からDepth情報を生成する。送信手段は、第１及び第２の映像信号と生成手段で生成されたDepth情報とを、第１及び第２の映像信号からDepth情報を生成して多視差方式による立体視映像表示を行なう外部機器に無線送信する。【選択図】    図３
2014022947.tif 000002
【特許請求の範囲】
【請求項１】
相互に視差を有する立体視映像表示用の第１及び第２の映像信号からDepth情報を生成する生成手段と、
前記第１及び第２の映像信号と前記生成手段で生成されたDepth情報とを、前記第１及び第２の映像信号からDepth情報を生成して多視差方式による立体視映像表示を行なう外部機器に無線送信する送信手段とを具備する立体視映像伝送装置。
【請求項２】
前記外部機器に関する機器情報を取得する取得手段を更に備え、
前記送信手段は、前記取得手段が前記機器情報を取得した後、当該機器情報が示す外部機器がDepth情報の生成に対応している場合、前記第１及び第２の映像信号と前記生成手段で生成されたDepth情報とを送信する請求項１記載の立体視映像伝送装置。
【請求項３】
前記外部機器は、前記立体視映像伝送装置からの前記Depth情報の低周波成分を抽出する機能を備える請求項２記載の立体視映像伝送装置。
【請求項４】
前記送信手段は、前記外部機器に対してDepth情報の生成を停止させる指示を送信する請求項１記載の立体視映像伝送装置。
【請求項５】
前記生成手段は、前記第１の映像信号に対する第１のDepth情報と、前記第２の映像信号に対する第２のDepth情報との少なくとも一方を生成し、
前記送信手段は、前記第１及び第２の映像信号とともに、前記第１及び第２のDepth情報の少なくとも一方を前記外部機器に送信する請求項１記載の立体視映像伝送装置。
【請求項６】
前記送信手段は、伝送路の伝送品質に応じて、前記第１及び第２のDepth情報を共に送信するか、前記第１及び第２のDepth情報のうちのどちらを送信するかを設定する請求項５記載の立体視映像伝送装置。
【請求項７】
前記外部機器と機器情報を交換する情報交換手段を備え、前記情報交換手段で前記外部機器から取得した機器情報により、前記外部機器が多視差方式による立体視映像表示を行なう機能を有していない場合、前記送信手段は、前記Depth情報を送信せず、前記第１及び第２の映像信号を送信する請求項１記載の立体視映像伝送装置。
【請求項８】
前記外部機器に関する機器情報を取得する取得手段を更に備え、
前記生成手段は、前記機器情報に基づき、前記外部機器に応じたDepth情報を生成する請求項１記載の立体視映像伝送装置。
【請求項９】
立体視情報を読み込む読み込み手段を更に備え、
前記生成手段は、読み込まれた前記立体視情報からDepth情報を生成する請求項１記載の立体視映像伝送装置。
【請求項１０】
生成手段により、相互に視差を有する立体視映像表示用の第１及び第２の映像信号からDepth情報を生成し、
送信手段により、前記第１及び第２の映像信号と前記生成手段で生成されたDepth情報とを、前記第１及び第２の映像信号からDepth情報を生成して多視差方式による立体視映像表示を行なう外部機器に無線送信する立体視映像伝送方法。
【請求項１１】
相互に視差を有する立体視映像表示用の第１及び第２の映像信号と、当該第１及び第２の映像信号に関する第１のDepth情報とを受信する受信手段と、
前記第１及び第２の映像信号とから第２のDepth情報を生成する生成手段と、
前記第１及び第２の映像信号と前記第１のDepth情報とを情報端末から受信している場合に、前記第１のDepth情報に基づいて、多視差方式による立体視映像表示に用いられる多視差信号を生成する多視差信号生成手段とを備える立体視映像処理装置。
【請求項１２】
前記受信手段により受信された前記第１及び第２の映像信号と前記第１のDepth情報とのうち、前記第１のDepth情報に低周波情報を抽出するローパスフィルタ処理を施し、前記第１及び第２の映像信号に前記ローパスフィルタ処理を施さない処理手段を更に備え、
前記多視差信号生成手段は、前記ローパスフィルタ処理の施された前記第１のDepth情報に基づいて前記多視差信号を生成する請求項１１記載の立体視映像処理装置。
【請求項１３】
前記生成手段は、前記第１のDepth情報を情報端末から受信している場合に、前記第２のDepth情報の生成を停止する請求項１２記載の立体視映像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明の実施の形態は、立体視映像表示用の情報伝送を行なう立体視映像伝送装置、立体視映像伝送方法及び立体視映像処理装置に関する。
【背景技術】
【０００２】
周知のように、従来より、平面的な映像表示画面を用いてユーザに立体感のある映像を認識させる技術の開発が進められている。この技術は、相互に人間の両目の間隔に対応した視差を有する２種類の映像を用意し、右目用映像をユーザの右目に視認させ、左目用映像をユーザの左目に視認させることにより立体視を行なうものである。
【０００３】
具体的には、右目用映像と左目用映像とを同一の映像表示画面に交互に表示させ、ユーザの装着した立体視用眼鏡に対して、右目用映像が表示されているとき左目のシャッタを閉じ、左目用映像が表示されているとき右目のシャッタを閉じるように制御することにより、ユーザに立体視映像を認識させる技術が存在している。
【０００４】
また、映像表示画面上に視点の異なる多数の視差映像を表示させて、該画面を覆うレンズやバリア等の光線制御素子により当該視差映像からの光線の出射方向を制御することにより、上記した立体視用眼鏡を使用することなくユーザが立体視映像を認識することができるようにした、いわゆる、多視差方式による裸眼型の立体視映像表示技術も実用化されている。
【０００５】
この多視差方式による立体視映像表示技術は、右目用映像と左目用映像とから、両映像の相互間における同一対象物の位置ずれに対応した奥行き情報（Depth情報）を生成し、右目用及び左目用映像のいずれか一方とDepth情報とに基づいて、画面の広範囲に亘って視差を作るための視点の異なる多数の映像を生成し表示させるものである。
【０００６】
一方、近年では、携帯情報端末の高性能化が可及的に進められており、この携帯情報端末をソース機器として利用する場合を考えると、シンク機器との情報伝送手段としては、有線より無線を利用する方がユーザにとっての利便性を高める上で有用であることは言うまでもないことである。
【０００７】
このことから、ソース機器である携帯情報端末から立体視映像表示用の右目用映像と左目用映像とを無線送信し、その右目用映像と左目用映像とをシンク機器で受信してDepth情報を生成することにより、上記した多視差方式による裸眼型の立体視映像表示をシンク機器で実現するといった使用形態も考えられている。
【０００８】
ところで、情報伝送手段を無線にすると、伝送路の信頼性が低下してパケットエラーの発生率が高くなる。また、映像や音声等のＡＶ（audio／visual）ストリームでは、連続的にデータが送られてくる。このため、シンク機器としては、エラー部分を完全に訂正できないままの映像信号を用いて、映像表示を行なわざるを得ないケースが多く発生する。
【０００９】
これにより、シンク機器では、エラー部分を完全に訂正できないままの右目用及び左目用映像からDepth情報を生成することになる。この場合、誤ったDepth情報が生成されてしまうと、シンク機器で多視差方式により立体視表示される映像は、例えば奥行き方向が逆転して表示される等、ユーザにとって非常に見づらいものとなる。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】特開２０１０−０２８２６１号公報
【発明の概要】
【発明が解決しようとする課題】
【００１１】
ソース機器からシンク機器に立体視映像表示用の情報伝送を行なう場合に、シンク機器で誤ったDepth情報が生成されることを防止して、ユーザにとって見易い多視差方式による立体視映像表示を行なうことができるようにした立体視映像伝送装置、立体視映像伝送方法及び立体視映像処理装置を提供することを目的とする。
【課題を解決するための手段】
【００１２】
実施の形態によれば、立体視映像伝送装置は、生成手段と送信手段とを備えている。生成手段は、相互に視差を有する立体視映像表示用の第１及び第２の映像信号からDepth情報を生成する。送信手段は、第１及び第２の映像信号と生成手段で生成されたDepth情報とを、第１及び第２の映像信号からDepth情報を生成して多視差方式による立体視映像表示を行なう外部機器に無線送信する。
【図面の簡単な説明】
【００１３】
【図１】実施の形態としての伝送システムの一例を概略的に説明するために示すブロック構成図。
【図２】同実施の形態における伝送システムを構成するデジタルテレビジョン放送受信装置の信号処理系の一例を概略的に説明するために示すブロック構成図。
【図３】同実施の形態における伝送システムを構成する携帯情報端末の信号処理系の一例を概略的に説明するために示すブロック構成図。
【図４】同実施の形態における伝送システムを構成する携帯情報端末が行なう主要な処理動作の一例を説明するために示すフローチャート。
【発明を実施するための形態】
【００１４】
以下、実施の形態について図面を参照して詳細に説明する。図１は、この実施の形態で説明する伝送システムの一例を概略的に示している。すなわち、この伝送システムは、シンク機器の一例としてのデジタルテレビジョン放送受信装置１１と、ソース機器の一例としての携帯情報端末１２とを、所定の無線伝送規格に準拠した方式での情報伝送が可能となるように設定したものである。
【００１５】
このうち、デジタルテレビジョン放送受信装置１１は、デジタルテレビジョン放送信号を受信し、所望のチャンネルの映像信号及び音声信号を復元して、映像表示や音声再生を行なうことができる。また、このデジタルテレビジョン放送受信装置１１は、携帯情報端末１２から無線送信される映像信号及び音声信号を受信して、映像表示や音声再生を行なうことができる。
【００１６】
この場合、デジタルテレビジョン放送受信装置１１は、多視差方式による裸眼型の立体視映像表示を行なう機能を備えており、デジタルテレビジョン放送信号から復元した映像信号、または、携帯情報端末１２から取得した映像信号が、立体視表示用の映像信号、つまり、Side-by-Side、Top-and-Bottom及びFrame-Packing方式等における右目用映像信号と左目用映像信号とである場合には、両方の映像信号からDepth情報を生成し、右目用及び左目用映像信号のいずれか一方とDepth情報とに基づいて、多視差信号を生成して映像表示に供させることにより、多視差方式による立体視映像表示を行なうことができる。
【００１７】
言い換えると、デジタルテレビジョン放送受信装置１１は、視差映像を解析してDepth情報を生成し、当該Depth情報を用いて視差映像の視差数を増やす処理を行ない、この処理により得られる多視差映像を用いて裸眼型の立体視映像表示を行なっている。
【００１８】
なお、デジタルテレビジョン放送信号から復元した映像信号、または、携帯情報端末１２から取得した映像信号が、通常の平面視表示用の映像信号である場合には、デジタルテレビジョン放送受信装置１１は、その映像信号に基づいて通常の平面視映像表示を行なうことになる。
【００１９】
一方、上記携帯情報端末１２は、電話機能、電子メール機能、カメラ機能、放送信号の受信機能、ネットワーク上のサーバへのアクセス機能等を備え、各種の機能で取得した映像信号や音声信号を用いて映像表示や音声再生を行なうことができる。また、この携帯情報端末１２は、取得した映像信号や音声信号を、デジタルテレビジョン放送受信装置１１に無線送信し、デジタルテレビジョン放送受信装置１１での映像表示や音声再生に供させることができる。
【００２０】
さらに、上記携帯情報端末１２は、取得した映像信号が立体視表示用の右目用映像信号と左目用映像信号とである場合、これら両方の映像信号からDepth情報を生成する機能を有している。そして、この携帯情報端末１２は、立体視用の映像信号をデジタルテレビジョン放送受信装置１１に送信することが要求された場合に、右目用映像信号と左目用映像信号と自己の生成したDepth情報とを無線送信するとともに、デジタルテレビジョン放送受信装置１１にDepth情報の生成を停止させる指示信号を無線送信する。
【００２１】
すると、携帯情報端末１２から、右目用映像信号と左目用映像信号とDepth情報とその生成を停止させる指示信号とを受信したデジタルテレビジョン放送受信装置１１は、自己のDepth情報の生成を停止し、携帯情報端末１２から受信した右目用及び左目用映像信号のいずれか一方とDepth情報とに基づいて多視差信号を生成して映像表示に供させることにより、多視差方式による立体視映像表示を行なうことができる。
【００２２】
すなわち、ソース機器である携帯情報端末１２が、右目用映像信号と左目用映像信号とからDepth情報を生成して無線送信し、シンク機器であるデジタルテレビジョン放送受信装置１１は、携帯情報端末１２から送られてきたDepth情報を利用して多視差方式による立体視映像表示を行ない、自らはDepth情報を生成しないようにしている。
【００２３】
このように、デジタルテレビジョン放送受信装置１１でDepth情報を生成せずに、携帯情報端末１２でDepth情報を生成してデジタルテレビジョン放送受信装置１１に送るようにすることにより、デジタルテレビジョン放送受信装置１１が携帯情報端末１２から受信した右目用及び左目用映像信号に基づいてDepth情報を生成する場合に比べて、デジタルテレビジョン放送受信装置１１が利用するDepth情報の信頼性を高くすることが可能となる。
【００２４】
要するに、Depth情報は、例えば縞模様等のように、僅かな範囲内に大きなコントラストの変化が多数存在するといった高周波成分を持たない、通常、低周波成分からなる信号であるため、無線伝送を行なうことによって高周波ノイズが重畳されたとしても、受信側でローパスフィルタ処理することによって容易にノイズを除去することができ、品質を維持し易いという利点を有している。
【００２５】
これに対し、映像信号は、通常、高周波成分を有しているため、無線伝送を行なうことによって高周波ノイズが重畳された場合、受信側でローパスフィルタによる単純な平滑処理を行なうことによるノイズ除去はできず、前述したように無線伝送時のエラー発生率が高くなる。
【００２６】
このため、デジタルテレビジョン放送受信装置１１が携帯情報端末１２から受信した右目用及び左目用映像信号には、エラー部分が多く含まれることになり、その右目用及び左目用映像信号に基づいて生成したDepth情報の信頼性は非常に低いものとなる。そして、デジタルテレビジョン放送受信装置１１で誤ったDepth情報が生成された場合、その誤ったDepth情報に基づいて多視差方式により立体視表示される映像は、例えば奥行き方向が逆転して表示される等、ユーザにとって非常に見づらいものとなる。
【００２７】
上記した実施の形態では、ソース機器である携帯情報端末１２がDepth情報を生成して無線送信し、シンク機器であるデジタルテレビジョン放送受信装置１１が、携帯情報端末１２から受信しノイズの除去された信頼性の高いDepth情報を利用して多視差方式による立体視映像表示を行なうため、ユーザにとって見易い立体視映像表示を行なうことができるようになる。
【００２８】
また、多視差方式による裸眼型の立体視映像表示を行なう機能を備えたデジタルテレビジョン放送受信装置１１は、元々、携帯情報端末１２から右目用映像信号及び左目用映像信号を受信してDepth情報を生成する機能を備えている。このため、上記した実施の形態では、携帯情報端末１２が、デジタルテレビジョン放送受信装置１１にDepth情報の生成を停止させる指示信号を送るようにして、デジタルテレビジョン放送受信装置１１にDepth情報の生成を行なわせないようにしていることも効果的である。
【００２９】
図２は、上記デジタルテレビジョン放送受信装置１１の信号処理系の一例を概略的に示している。このデジタルテレビジョン放送受信装置１１は、先に述べたように、通常の平面視表示用の映像信号に基づく映像表示を行なうだけでなく、多視差方式による裸眼型の立体視映像表示を行なう機能を備えている。
【００３０】
すなわち、アンテナ１３で受信したデジタルテレビジョン放送信号は、入力端子１４を介してチューナ部１５に供給されることにより、所望のチャンネルの放送信号が選局される。このチューナ部１５で選局された放送信号は、復調復号部１６に供給されてデジタルの映像信号及び音声信号等に復元された後、信号処理部１７に出力される。
【００３１】
この信号処理部１７は、復調復号部１６から供給されたデジタルの映像信号及び音声信号に対してそれぞれ所定のデジタル信号処理を施している。この信号処理部１７が行なう所定のデジタル信号処理には、通常の平面視表示用の映像信号を多視差方式による立体視表示用の映像信号に変換する処理や、立体視表示用の右目用及び左目用映像信号を平面視表示用の映像信号に変換する処理等も含まれている。
【００３２】
そして、この信号処理部１７は、デジタルの映像信号を合成処理部１８に出力し、デジタルの音声信号を音声処理部１９に出力している。このうち、合成処理部１８は、信号処理部１７から供給されるデジタルの映像信号に、ＯＳＤ（on screen display）信号を重畳して出力している。そして、合成処理部１８から出力されたデジタルの映像信号は、映像処理部２０に供給される。
【００３３】
この映像処理部２０は、入力されたデジタルの映像信号を、後段の、例えば液晶表示パネル等を有する平面型の映像表示部２１で表示可能なフォーマットに変換している。そして、この映像処理部２０から出力された映像信号が、映像表示部２１に供給されて映像表示に供される。
【００３４】
また、上記音声処理部１９は、入力されたデジタルの音声信号を、後段のスピーカ２２で再生可能なフォーマットのアナログ音声信号に変換している。そして、この音声処理部１９から出力されたアナログ音声信号が、上記スピーカ２２に供給されることにより音声再生に供される。
【００３５】
ここで、このデジタルテレビジョン放送受信装置１１は、上記した各種の受信動作を含む種々の動作を制御部２３によって統括的に制御されている。この制御部２３は、ＣＰＵ（central processing unit）２３ａを内蔵しており、デジタルテレビジョン放送受信装置１１の本体に設けられた操作部２４からの操作情報、または、リモートコントローラ２５から送信され受信部２６で受信された操作情報を受けることによって、その操作内容が反映されるように各部をそれぞれ制御している。
【００３６】
この場合、制御部２３は、メモリ部２３ｂを利用している。このメモリ部２３ｂは、主として、ＣＰＵ２３ａが実行する制御プログラムを格納したＲＯＭ（read only memory）と、該ＣＰＵ２３ａに作業エリアを提供するためのＲＡＭ（random access memory）と、各種の設定情報及び制御情報等が格納される不揮発性メモリとを有している。
【００３７】
また、この制御部２３には、ＨＤＤ（hard disk drive）２７が接続されている。この制御部２３は、ユーザによる操作部２４やリモートコントローラ２５の操作に基づいて、上記信号処理部１７から得られるデジタルの映像信号及び音声信号をＨＤＤ２７に供給し、そのハードディスク２７ａに記録させるように制御することができる。
【００３８】
さらに、この制御部２３は、ユーザによる操作部２４やリモートコントローラ２５の操作に基づいて、ＨＤＤ２７よりハードディスク２７ａからデジタルの映像信号及び音声信号を読み出させ、信号処理部１７に供給することによって、以後、上記した映像表示及び音声再生に供させるように制御することができる。
【００３９】
また、この制御部２３には、無線伝送用インターフェース２８が接続されている。この無線伝送用インターフェース２８は、ソース機器である上記した外部の携帯情報端末１２との相互間で、所定の無線伝送規格に準拠した方式での情報伝送を行なう機能を備えている。これにより、制御部２３は、無線通信用インターフェース２８を介して携帯情報端末１２と無線による情報伝送を行なうことができ、例えば携帯情報端末１２から右目用映像信号と左目用映像信号とDepth情報とDepth情報の生成を停止させる指示信号等を受信することができる。
【００４０】
さらに、上記制御部２３には、Depth情報生成部２３ｃが設けられている。このDepth情報生成部２３ｃは、デジタルテレビジョン放送信号から復元した映像信号、または、携帯情報端末１２から取得した映像信号が、立体視表示用の右目用映像信号と左目用映像信号とである場合に、両方の映像信号からDepth情報を生成するように機能する。なお、このDepth情報生成部２３ｃは、携帯情報端末１２からDepth情報の生成を停止させる指示信号が受信された場合、Depth情報の生成を停止する。
【００４１】
また、上記制御部２３には、多視差立体視映像生成部２３ｄが設けられている。この多視差立体視映像生成部２３ｄは、右目用及び左目用映像信号のいずれか一方とDepth情報とに基づいて多視差信号を生成するように機能するもので、生成した映像信号を映像表示部２１による映像表示に供させることにより、多視差方式による立体視映像表示を行なうことができる。
【００４２】
この場合、多視差立体視映像生成部２３ｄは、携帯情報端末１２から右目用映像信号と左目用映像信号とDepth情報とが受信されるとともに、Depth情報の生成を停止させる指示信号が受信されると、受信した右目用及び左目用映像信号のいずれか一方あるいは両方の映像信号と受信したDepth情報とに基づいて多視差信号を生成するように機能する。
【００４３】
また、多視差立体視映像生成部２３ｄは、携帯情報端末１２から受信したDepth情報に対してローパスフィルタ処理を行ない、当該処理後のDepth情報を用いて多視差信号を生成している。ローパスフィルタ処理を行なうことにより、高周波ノイズがDepth情報に重畳してから到達するような伝送路環境下でも、低周波情報からなるDepth情報を取り出すことができる。なお、デジタルテレビジョン放送受信装置１１は、Depth情報にはローパスフィルタ処理を行なうが、多視差信号の生成に用いる映像信号にはローパスフィルタ処理を行なわなくとも良い。
【００４４】
すなわち、このデジタルテレビジョン放送受信装置１１は、デジタルテレビジョン放送信号から復元した映像信号、または、携帯情報端末１２から取得した映像信号が、立体視表示用の右目用映像信号と左目用映像信号とである場合に、Depth情報生成部２３ｃにより両映像信号からDepth情報を生成する。そして、多視差立体視映像生成部２３ｄによって、右目用及び左目用映像信号のいずれか一方とDepth情報生成部２３ｃで生成したDepth情報とに基づいて多視差信号を生成し、多視差方式による立体視映像表示を行なうように機能する。
【００４５】
また、このデジタルテレビジョン放送受信装置１１は、携帯情報端末１２から右目用映像信号と左目用映像信号とDepth情報とが受信されるとともに、Depth情報の生成を停止させる指示信号が受信された場合、Depth情報生成部２３ｃによるDepth情報の生成を停止する。そして、多視差立体視映像生成部２３ｄにより、受信した右目用及び左目用映像信号のいずれか一方と受信したDepth情報とに基づいて多視差信号を生成し、多視差方式による立体視映像表示を行なうように機能する。
【００４６】
図３は、上記携帯情報端末１２の信号処理系の一例を概略的に示している。すなわち、この携帯情報端末１２は、その全ての動作を総括的に制御する制御部２９を備えている。この制御部２９は、例えばＣＰＵ２９ａを内蔵しており、操作部３０からの操作情報を受けて、その操作内容が反映されるように各部をそれぞれ制御している。
【００４７】
この場合、制御部２９は、メモリ部２９ｂを利用している。このメモリ部２９ｂは、主として、そのＣＰＵ２９ａが実行する制御プログラムを格納したＲＯＭと、該ＣＰＵ２９ａに作業エリアを提供するためのＲＡＭと、各種の設定情報及び制御情報等が格納される不揮発性メモリとを有している。
【００４８】
ここで、上記制御部２９には、無線通信部３１及び音声処理部３２が接続されている。また、音声処理部３２には、マイクロホン３３及びスピーカ３４が接続されている。そして、制御部２９は、マイクロホン３３で採集され音声処理部３２を介して供給された音声信号を、無線通信部３１を介してアンテナ３５から送信させる。また、制御部２９は、アンテナ３５で受信し無線通信部３１を介して供給された信号を、音声処理部３２を介してスピーカ３４に供給し音声信号として再生させる。これにより、制御部２９は、電話機能を実現させている。
【００４９】
さらに、上記制御部２９は、無線通信部３１及びアンテナ３５を介して電子メールの送受信を制御している。この場合、制御部２９は、送受信するメールの文面を表示部３６に表示させている。
【００５０】
また、上記制御部２９は、無線通信部３１及びアンテナ３５を介して、例えばインターネット等のネットワーク回線網に接続されたサーバ（図示せず）にアクセスし、そこから必要な情報を無線通信により取得することができる。
【００５１】
さらに、上記制御部２９には、放送受信部３７が接続されていても良い。この放送受信部３７は、アンテナ３５を介して受信した放送信号から、所望のチャンネルの放送信号を選局して復調し、映像信号及び音声信号を生成して制御部２９に供給している。このため、制御部２９は、映像信号に基づいて表示部３６に映像表示を行なわせ、音声信号に基づいてスピーカ３４で音声再生させることにより、放送受信機能を実現させている。
【００５２】
また、上記制御部２９には、撮像部３８が接続されている。この撮像部３８は、撮像レンズ（図示せず）を介して入射された被写体の光学像に対応した映像信号を生成し、制御部２９に供給している。そして、制御部２９は、撮像部３８から供給された映像信号を記憶部３９に記憶させることにより、カメラ機能を実現させている。
【００５３】
また、上記制御部２９は、携帯情報端末１２に対して着脱可能な外部記憶装置（図示せず）に記憶された著作権保護コンテンツの映像信号や音声信号を読み出す機能も有している。
【００５４】
なお、この制御部２９は、上記した電話機能、電子メール機能、放送受信機能、カメラ機能、ネットワークアクセス機能等で送受信した各種の映像信号や音声信号を、記憶部３９に記憶させることができる。
【００５５】
また、上記制御部２９には、Depth情報生成部２９ｃが設けられている。このDepth情報生成部２９ｃは、携帯情報端末１２が上記した各種の機能で取得した映像信号が、立体視表示用の右目用映像信号と左目用映像信号とである場合に、両方の映像信号からDepth情報を生成するように機能している。
【００５６】
あるいは、上記制御部２９が、例えばゲームソフト等の情報を記憶部３９、可搬メディア及びサーバ等から読み込んでいる場合、３次元のポリゴンデータ等により構成された立体視情報を取得し、当該立体視情報からDepth情報を生成しても良い。
【００５７】
さらに、上記制御部２９には、無線伝送用インターフェース４０が接続されている。この無線伝送用インターフェース４０は、シンク機器である上記した外部のデジタルテレビジョン放送受信装置１１との相互間で、所定の無線伝送規格に準拠した方式での情報伝送を行なう機能を備えている。これにより、制御部２９は、無線通信用インターフェース４０を介してデジタルテレビジョン放送受信装置１１と無線による情報伝送を行なうことができ、例えばデジタルテレビジョン放送受信装置１１に右目用映像信号と左目用映像信号とDepth情報とDepth情報の生成を停止させる指示信号等を送信することができる。
【００５８】
なお、無線伝送用インターフェース４０と、無線通信部３１及びアンテナ３５とは、兼用、すなわち、ソース受信無線HWと、ソース機器からシンク機器への無線伝送HWとが、時分割による兼用であっても良いことはもちろんである。これにより、例えばソースコンテンツがWeb上の動画であり、ソース機器で無線受信しながら、シンク機器へ無線伝送をするというような利用形態が考えられる。
【００５９】
図４は、携帯情報端末１２からデジタルテレビジョン放送受信装置１１に立体視表示用の映像信号を無線送信する場合に、携帯情報端末１２の制御部２９が行なう主要な処理動作の一例をまとめたフローチャートを示している。
【００６０】
すなわち、処理が開始（ステップＳ１１）されると、制御部２９は、ステップＳ１２で、デジタルテレビジョン放送受信装置１１との相互間で機器情報（capability）の交換を実行する。この場合、交換される機器情報としては、その機器の機種を示す情報、映像信号や音声信号のコーデック（圧縮方式）を示す情報、対応可能な画素数を示す情報、立体視映像表示方式を示す情報等がある。
【００６１】
その後、制御部２９は、ステップＳ１３で、取得した機器情報に基づいてデジタルテレビジョン放送受信装置１１が多視差方式による立体視映像表示に対応しているか否かを判別する。そして、対応していないと判断された場合（ＮＯ）、制御部２９は、デジタルテレビジョン放送受信装置１１が立体視用眼鏡を使用する方式の立体視映像表示に対応していると判断し、ステップＳ１４で、デジタルテレビジョン放送受信装置１１に右目用映像信号と左目用映像信号とを送信する。
【００６２】
また、上記ステップＳ１３でデジタルテレビジョン放送受信装置１１が多視差方式による立体視映像表示に対応していると判断された場合（ＹＥＳ）、制御部２９は、ステップＳ１５で、デジタルテレビジョン放送受信装置１１に対して、そのDepth情報生成部２３ｃによるDepth情報の生成を停止させる指示信号を送信する。
【００６３】
そして、制御部２９は、ステップＳ１６で、自己のDepth情報生成部２９ｃを用いて、デジタルテレビジョン放送受信装置１１に送信する右目用映像信号と左目用映像信号とからDepth情報を生成する。
【００６４】
その後、制御部２９は、ステップＳ１７で、右目用映像信号と左目用映像信号とDepth情報生成部２９ｃで生成したDepth情報とをデジタルテレビジョン放送受信装置１１に送信する。すなわち、制御部２９は、多視差方式による立体視映像表示に対応している機器、つまり、Depth情報の生成に対応している機器に対して右目用映像信号と左目用映像信号とDepth情報とを送信する。そして、デジタルテレビジョン放送受信装置１１では、受信した右目用及び左目用映像信号のいずれか一方と、受信したDepth情報とに基づいて、多視差信号を生成し、多視差方式による立体視映像表示を実行する。
【００６５】
そして、上記ステップＳ１４の後、または、上記ステップＳ１７の後、制御部２９は、ステップＳ１８で、映像信号の伝送が完了したか否かを判別し、完了していないと判断された場合（ＮＯ）、上記ステップＳ１３の処理に戻され、映像信号の伝送が完了したと判断された場合（ＹＥＳ）、処理を終了（ステップＳ１９）する。
【００６６】
なお、図４に示したフローチャートにおいて、携帯情報端末１２は、送信相手に応じたDepth情報を生成して送信しても良い。すなわち、デジタルテレビジョン放送受信装置１１が、例えば一般的な機器によるDepth情報の生成により得られるDepth情報よりも映像の立体感を強調するようなDepth情報を生成する実装になっている場合、携帯情報端末１２は、機器情報の交換時において、デジタルテレビジョン放送受信装置１１のDepth情報の生成に関する情報（例えばDepth情報の強調の度合いを示す情報）を取得し、この情報に基づいたDepth情報の生成を行なっても良い。
【００６７】
また、携帯情報端末１２は、デジタルテレビジョン放送受信装置１１が多視差方式で映像表示する際の視差数と画面解像度とに関する機器情報を取得して、当該視差数及び画面解像度に応じて解像度を間引いたDepth情報を生成しても良い。
【００６８】
上記した実施の形態によれば、デジタルテレビジョン放送受信装置１１が多視差方式による立体視映像表示に対応している場合、携帯情報端末１２が、右目用映像信号と左目用映像信号と自己が生成したDepth情報とをデジタルテレビジョン放送受信装置１１に送信するとともに、デジタルテレビジョン放送受信装置１１にDepth情報の生成を停止させる指示信号を送信するようにしている。
【００６９】
そして、デジタルテレビジョン放送受信装置１１では、自己のDepth情報の生成を停止し、携帯情報端末１２から受信した右目用及び左目用映像信号のいずれか一方とDepth情報とに基づいて多視差信号を生成し、多視差方式による立体視映像表示を行なうようにしている。
【００７０】
すなわち、シンク機器であるデジタルテレビジョン放送受信装置１１が、無線伝送により信頼性の低くなった右目用映像信号と左目用映像信号とからDepth情報を生成することをせず、携帯情報端末１２から受信した信頼性の高いDepth情報を利用して多視差方式による立体視映像表示を行なうため、ユーザにとって見易い立体視映像表示を行なうことができるようになる。
【００７１】
また、デジタルテレビジョン放送受信装置１１がDepth情報を生成しなくて済むようにしているため、その分の処理遅延がなくなり、映像処理に要する時間を短くすることができる。このため、例えば携帯情報端末１２で行なうゲームの映像をデジタルテレビジョン放送受信装置１１に表示させるようにしても、処理遅延による違和感のない映像表示を行なうことができる。なお、送信するDepth情報の水平方向または垂直方向の画素数は、表示画面の全画素数を生成する視差数で除算した値となる。
【００７２】
さらに、多視差方式による立体視映像表示機能を有するデジタルテレビジョン放送受信装置１１は、元々、右目用及び左目用映像信号を受信し、両映像信号からDepth情報を生成するようにしているため、携帯情報端末１２がDepth情報の生成を停止させる指示信号を送信して、デジタルテレビジョン放送受信装置１１にDepth情報の生成を行なわせないようにすることは有用である。
【００７３】
なお、デジタルテレビジョン放送受信装置１１のDepth情報生成部２３ｃは、携帯情報端末１２から受信したストリームのヘッダ情報等を解析することにより、右目用及び左目用映像信号とともにDepth情報が含まれていることを判別して、自動的に自己のDepth情報の生成を停止する機能を搭載していても良い。これにより、携帯情報端末１２からDepth情報の生成を停止させる明示的な指示信号を送信する必要はなくなる。
【００７４】
つまり、デジタルテレビジョン放送受信装置１１は、例えばメディアに記憶された右目用及び左目用映像信号を読み込んで多視差映像を表示する場合、自己のDepth情報生成機能を用いてDepth情報を生成し、読み込んだ右目用及び左目用映像信号と生成したDepth情報とを用いて多視差信号を生成する。
【００７５】
一方、デジタルテレビジョン放送受信装置１１は、携帯情報端末１２から映像信号とDepth情報とが送信されている場合、自己で生成するDepth情報ではなく、受信したDepth情報を用いて多視差信号を生成する。そして、このとき、デジタルテレビジョン放送受信装置１１は、受信したDepth情報に対して低周波情報を抽出するローパスフィルタ処理を施し、受信した映像信号に対してはローパスフィルタ処理を施さない。
【００７６】
また、上記した実施の形態では、携帯情報端末１２からデジタルテレビジョン放送受信装置１１に、右目用映像信号と左目用映像信号とDepth情報とを送信するようにしたが、これに限らず、例えば右目用映像信号と、左目用映像信号と、右目用映像信号に対する右目映像用Depth情報と、左目用映像信号に対する左目映像用Depth情報とを共に送信するようにしても良いものである。
【００７７】
さらに、右目用映像信号及び左目用映像信号に加えて、右目映像用Depth情報と左目映像用Depth情報とのいずれか一方を送信するようにしても良いものである。この場合、２つのDepth情報を共に送信するか、いずれか一方のDepth情報を送信する場合にはどちらのDepth情報を送信するかは、無線伝送路の伝送品質に合わせて適宜選定することができる。また、一方のDepth情報を送信する場合には、そのDepth情報のみを生成すれば良いものである。
【００７８】
さらに、携帯情報端末１２は、右目用映像信号と左目用映像信号とからDepth情報を生成し、右目用映像信号と左目用映像信号とのうちの一方とDepth情報とを送信しても良い。あるいは、右目用映像信号と左目用映像信号とに基づいて、視差の無い１枚の映像である中心映像を生成し、この中心映像とDepth情報とを送信しても良い。この場合、デジタルテレビジョン放送受信装置１１の多視差立体視映像生成部２３ｄは、携帯情報端末１２から受信した中心映像とDepth情報とに基づいて多視差信号を生成する。
【００７９】
また、携帯情報端末１２のDepth情報生成部２９ｃは、右目用映像信号と左目用映像信号とからDepth情報を生成するだけでなく、いわゆる、２Ｄ−３Ｄ変換により平面視用（２Ｄ表示用）の映像信号からDepth情報を生成しても良い。そして、この場合、携帯情報端末１２は、平面視用の映像信号とDepth情報とをデジタルテレビジョン放送受信装置１１に送信しても良い。
【００８０】
また、上記した実施の形態では、シンク機器の一例としてデジタルテレビジョン放送受信装置１１を用い、ソース機器の一例として携帯情報端末１２を用いた場合について説明したが、例えば、逆の組み合わせの例として、ソース機器としてデジタルテレビジョン放送受信装置を用い、シンク機器として携帯情報端末を用いる等、シンク機器やソース機器としては、これに限らず、種々の機器を想定することが可能である。
【００８１】
なお、この発明は上記した実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を種々変形して具体化することができる。また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。さらに、異なる実施の形態に係る構成要素を適宜組み合わせても良いものである。
【符号の説明】
【００８２】
１１…デジタルテレビジョン放送受信装置、１２…携帯情報端末、１３…アンテナ、１４…入力端子、１５…チューナ部、１６…復調復号部、１７…信号処理部、１８…合成処理部、１９…音声処理部、２０…映像処理部、２１…映像表示部、２２…スピーカ、２３…制御部、２３ａ…ＣＰＵ、２３ｂ…メモリ部、２３ｃ…Depth情報生成部、２３ｄ…多視差立体視映像生成部、２４…操作部、２５…リモートコントローラ、２６…受信部、２７…ＨＤＤ、２７ａ…ハードディスク、２８…無線伝送用インターフェース、２９…制御部、２９ａ…ＣＰＵ、２９ｂ…メモリ部、２９ｃ…Depth情報生成部、３０…操作部、３１…無線通信部、３２…音声処理部、３３…マイクロホン、３４…スピーカ、３５…アンテナ、３６…表示部、３７…放送受信部、３８…撮像部、３９…記憶部、４０…無線伝送用インターフェース。
【図１】
2014022947.tif 000003
【図２】
2014022947.tif 000004
【図３】
2014022947.tif 000005
【図４】
2014022947.tif 000006