(57)【要約】【課題】主画像と直接的に重畳して表示することが禁止されていたり、好ましくない種類の画像でも、主画像と同時に表示することができる画像処理装置および方法を提供すること。【解決手段】実施形態の画像処理装置は、画像生成部と、画像合成部とを備える。画像生成部は、入力される主画像の一部の領域を折り返しためくり部分の画像であって、めくり部分において主画像を透過させるめくり画像を生成する。画像合成部は、主画像の一部の領域に副画像を配置し、主画像と、めくり画像と、副画像とを合成する。【選択図】図２
2014107753.tif 000002
【特許請求の範囲】
【請求項１】
入力される主画像の一部の領域を折り返しためくり部分の画像であって、前記めくり部分において前記主画像を透過させるめくり画像を生成する画像生成部と、
前記主画像の一部の領域に副画像を配置し、前記主画像と、前記めくり画像と、前記副画像とを合成する画像合成部と、
を備えた画像処理装置。
【請求項２】
前記主画像に対するめくり位置の入力を受け付ける入力受付け部をさらに備え、
前記画像生成部は、前記めくり位置に応じて異なる前記副画像を生成する、
請求項１に記載の画像処理装置。
【請求項３】
前記主画像に対するめくり量の入力を受け付ける入力受付け部と、
制御対象のチャンネルを切替える切替え制御部と、
前記主画像に対応する音声と前記副画像に対応する音声の音量を制御し、前記めくり量が増加するに従って、前記副画像に対応する音声の音量を増加させる音量制御部と、をさらに備え、
前記切替え制御部は、前記めくり量が所定の閾値以上となった場合に、前記制御対象のチャンネルを、前記主画像のチャンネルから、前記副画像のチャンネルに切り替える、
請求項１に記載の画像処理装置。
【請求項４】
前記主画像に対するめくり量の入力を受け付ける入力受付け部と、
制御対象のチャンネルを切替える切替え制御部と、
前記主画像に対応する音声と前記副画像に対応する音声の音量を制御する音量制御部と、をさらに備え、
前記切替え制御部は、前記めくり量が所定の閾値以上となった場合に、前記制御対象のチャンネルを、前記主画像のチャンネルから、前記副画像のチャンネルに切り替え、
前記音量制御部は、前記めくり量が前記閾値未満の場合には、前記副画像のチャンネルの音声を出力せず、前記めくり量が前記閾値以上となった場合に、前記副画像のチャンネルの音声を出力する、
請求項１に記載の画像処理装置。
【請求項５】
前記画像生成部は、前記主画像に関連するコンテンツの有無を判断し、前記関連するコンテンツがある場合には、前記主画像の前記一部の領域を振動させた画像を生成する、
請求項１に記載の画像処理装置。
【請求項６】
前記画像生成部は、前記副画像として表示する情報量に応じたサイズのめくり量で、前記めくり画像を生成する、
請求項１に記載の画像処理装置。
【請求項７】
前記画像生成部は、ユーザに対して前記副画像を注目させる画像処理を前記副画像に施す、
請求項１に記載の画像処理装置。
【請求項８】
前記主画像と、前記主画像に対するめくり部分とを立体画像に変換する３次元処理部、
をさらに備えた、請求項１に記載の画像処理装置。
【請求項９】
前記主画像と、前記副画像と、前記めくり画像とが合成された画像を表示する表示部、
をさらに備えた請求項１に記載の画像処理装置。
【請求項１０】
入力される主画像の一部の領域を折り返しためくり部分の画像であって、前記めくり部分において前記主画像を透過させるめくり画像を生成する画像生成ステップと、
前記主画像の一部の領域に副画像を配置し、前記主画像と、前記めくり画像と、前記副画像とを合成する画像合成ステップと、
を含む画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、画像処理装置および方法に関する。
【背景技術】
【０００２】
従来から、表示装置等において、一つの画面に主画像と副画像とを同時に重畳して表示する技術が知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−１６９５３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、画像の中には、主画像と直接的に重畳して表示することが禁止されていたり、好ましくない種類の画像が存在し、従来技術では、このような画像も副画像として主画像と重畳して表示されてしまう。
【０００５】
本発明は、上記に鑑みてなされたものであって、主画像と直接的に重畳して表示することが禁止されていたり、好ましくない種類の画像でも、主画像と同時に表示することができる画像処理装置および方法を提供することを主な目的とする。
【課題を解決するための手段】
【０００６】
実施形態の画像処理装置は、画像生成部と、画像合成部とを備える。画像生成部は、入力される主画像の一部の領域を折り返しためくり部分の画像であって、めくり部分において主画像を透過させるめくり画像を生成する。画像合成部は、主画像の一部の領域に副画像を配置し、主画像と、めくり画像と、副画像とを合成する。
【図面の簡単な説明】
【０００７】
【図１】図１は、実施の形態１にかかるデジタルテレビ１の構成を示すブロック図である。
【図２】図２は、実施の形態１の映像処理部５の機能的構成を示すブロック図である。
【図３】図３は、実施の形態１で生成され表示される合成画像の一例を示す図である。
【図４】図４は、実施の形態１の映像処理の手順を示すフローチャートである。
【図５】図５は、実施の形態２の副画像の生成処理の手順を示すフローチャートである。
【図６】図６は、めくり位置に応じて異なる種類の副画像Ａ〜Ｄが表示された例を示す図である。
【図７】図７は、実施の形態３の映像処理部６０５の機能的構成を示すブロック図である。
【図８】図８は、実施の形態３の音声処理部６０８の機能的構成を示すブロック図である。
【図９】図９は、実施の形態３の映像処理の手順を示すフローチャートである。
【図１０】図１０は、実施の形態３の音声処理の手順を示すフローチャートである。
【図１１】図１１は、実施の形態３のめくり量とチャンネル切替えの関係を説明するための図である。
【図１２】図１２は、実施の形態４の音声処理の手順を示すフローチャートである。
【図１３】図１３は、変形例１の画面表示例を示す図である。
【図１４】図１４は、変形例２の画面表示例を示す図である。
【図１５】図１５は、変形例５の表示例を示す図である。
【図１６】図１６は、変形例６の表示例を示す図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して実施形態の画像処理装置及び方法を詳細に説明する。なお、以下の実施の形態では画像処理装置として、デジタル放送の受信用チューナを搭載するデジタルテレビを例にあげて説明する。ただし、実施の形態では画像処理装置としては、デジタルテレビに限定されるものではなく、放送波を受信するチューナを備え、映像を処理して外部接続された表示装置に出力するハードディスクレコーダやセットトップボックス等の機器であってもよいし、あるいはチューナを備えず、外部チューナから映像や音声が入力されるモニター等であっても良い。
【０００９】
（実施の形態１）
図１に示すように、本実施の形態のデジタルテレビ１は、アンテナ２と、デジタル放送の受信用のチューナ３と、信号処理部４と、映像処理部５と、表示処理部６と、表示部７と、音声処理部８と、スピーカー９と、制御部１０と、通信ライン１１と、ＲＡＭ１２（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）と、ＲＯＭ１３（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）と、操作部１４と、受光部１５と、入出力部１６と、通信部１７とを主に備えている。
【００１０】
アンテナ２は、ＢＳ、ＣＳ、地上波等のデジタル放送を受信する。チューナ３は、ユーザが指示した視聴用のチャンネルを選局する。信号処理部４は、制御部１０の制御のもと、チューナ３で復調された信号や入出力部１６より入力された信号を様々なデジタル信号として取り出し処理する。また、信号処理部４では、入力された信号を映像信号と音声信号とに分離し、映像信号を映像処理部５へ、音声信号を音声処理部８へ出力する。
【００１１】
映像処理部５は、信号処理部４から入力した映像信号に対して、後述する主画像、副画像、めくり画像等の生成や合成、３次元処理等を行う。ここで、本実施の形態では、信号処理部４から入力される映像信号が主画像の映像信号となる。なお、これらの処理の詳細については後述する。
【００１２】
また、映像処理部５は、信号処理部４から入力した映像信号を正しい画面サイズに調整する処理や、映像についての画質を改善する画質処理として、映像信号に含まれるノイズを除去する処理等を行う。
【００１３】
表示処理部６は、映像処理部５から出力される主画像、副画像、めくり画像を合成した映像信号を表示部７に表示する処理を行う。また、表示処理部６は、映像処理部５から出力される映像信号に対して、さらに文字情報等のＯＳＤ（Ｏｎ−Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ）表示を重ねる。表示部７は、映像信号を画面に表示する。そして、ユーザは表示部７の画面を見ることにより、テレビ映像を見る。
【００１４】
音声処理部８は、音声信号を音響処理するとともに増幅する。スピーカー９は、音声信号を音声として出力する。そして、ユーザはスピーカー９からの音声を聴くことにより、テレビ音声を聴く。
【００１５】
制御部１０は、デジタルテレビ１の各部を制御する。制御部１０は、シーケンス処理が可能なプロセッシングユニットであり、ＲＯＭ１３に記憶されたプログラムをＲＡＭ１２に展開して順次実行することで、デジタルテレビ１の各部に制御信号を出力して、デジタルテレビ１の動作を中央制御する。
【００１６】
通信ライン１１は、チューナ３、信号処理部４、映像処理部５、表示処理部６、音声処理部８、および、制御部１０を互いに接続し、制御部１０と、チューナ３、信号処理部４、映像処理部５、表示処理部６及び音声処理部８の間で、データの受け渡しを行う。通信ライン１１は、具体的にはＩＩＣ−ＢＵＳなどであってよい。ＲＡＭ１２およびＲＯＭ１３は、様々なデータを記憶しており、制御部１０との間で、これらのデータの受け渡しが行われる。
【００１７】
操作部１４は、ユーザの操作指示を受け付けるスイッチである。受光部１５は、ユーザの操作指示を受け付けたリモートコントローラ４０（以下、単に「リモコン４０」と称する。）が発信する信号を受信する。ユーザは、リモコン４０の各種ボタンを操作することで、デジタルテレビ１及びデジタルテレビ１と接続する各機器を操作することができる。
【００１８】
本実施の形態では、ユーザが操作部１４やリモコン４０により、主画像のめくり指示、主画像上におけるめくり位置、めくり量等の入力を行い、制御部１０がこれらの入力指示を受け付ける。操作部１４およびリモコン４０、受光部１５、制御部１０が、入力受付部として機能する。
【００１９】
通信部１７は、インターネット等のネットワークを介して接続されたサーバと通信する機能を有し、該サーバに対して情報を要求するとともに、サーバから送信された情報を受信する。
【００２０】
次に、映像処理部５の詳細について図２を用いて説明する。なお、図２では、説明の都合上、映像処理部５が有する機能のうち、主画像、副画像、めくり画像等の生成や合成、３次元処理等の機能を行う処理部を示し、他の機能に関する処理部を省略している。
【００２１】
映像処理部５は、図２に示すように、画像生成部５１と、画像合成部５３と、３次元処理部５２とを主に備えている。
【００２２】
画像生成部５１は、映像処理部５に信号処理部４から入力される映像信号、すなわち主画像から、めくり画像を生成する。めくり画像は、主画像の一部の領域である角部を折り返しためくり部分の画像であって、当該めくり部分において主画像を透過させる半透明な画像である。本実施の形態では、画像生成部５１は、制御部１０が操作部１４やリモコン４０によりユーザからめくり指示、角部の指定を示すめくり位置、めくり量の入力を受け付けた場合に、めくり画像を生成する。
【００２３】
すなわち、画像生成部５１は、めくり指示があった場合に、主画像において、めくり指示とともに指定されためくり位置が指示された角部を、指定されためくり量だけ、折り返して、折り返すことによって生じるめくり部分を半透明にしためくり画像を生成する。言い換えると、めくり画像は、めくり指示の前に表示されていた主画像を裏返した画像となる。ここで、めくり画像の生成手法については公知の手法を用いる。
【００２４】
３次元処理部５２は、めくり画像を立体画像に変換する３次元処理を行う。ここで、３次元処理については、公知の手法を用いる。また、主画像や副画像に３次元処理を施して立体的に表示するように３次元処理部５２を構成してもよい。
【００２５】
画像合成部５３は、主画像のめくられた領域、すなわち上記一部の領域である角部の領域に副画像を配置し、主画像と、画像生成部５１で生成され、３次元処理部５２で３次元化されためくり画像と、副画像とを合成する。なお、画像合成部５３は、めくり画像が主画像に重なるよう合成する。この結果、立体的な主画像の角部が立体的にめくられて、めくり部分で主画像が透過した立体的なめくり画像、副画像が得られ、これらの合成画像が表示されることにより、ユーザは、半透明のめくり画像の向こう側に主画像があるような画像を視認する。
【００２６】
ここで、副画像は、任意の映像とすることができる。また、画像生成部５１が、主画像に基づいて副画像を生成することができる。例えば、画像生成部５１が主画像に付随するメタデータ等から副画像を生成する。この他、例えば、画像生成部５１が、主画像のチャンネルと異なる他のチャンネルの映像信号を副画像として取得してもよい。また、ユーザにより操作部１４やリモコン４０からユーザが副画像の指定を行うように構成してもよい。
【００２７】
図３に示すように、合成画像は、主画像３０１の右下の角部が折り返されてめくり画像３０３が生成され、主画像３０１のめくられた領域に副画像３０２が表示される。なお、図３の例では、合成画像は平面画像として示しているが実際には、３次元処理部５２により立体的に表示される。ここでの立体表示の態様としては、例えば主画像３０１を視差の無い２次元画像として表示し、めくり画像３０３をめくられたシートのような立体感で立体表示する等が考えられるが、主画像３０１を立体表示しても良い。
【００２８】
次に、以上のように構成された本実施の形態の映像処理について図４を用いて説明する。まず、制御部１０が操作部１４やリモコン４０から、めくり指示、めくり位置、めくり量の入力を受ける（ステップＳ１１）。
【００２９】
映像処理部５は、信号処理部４から主画像の映像信号を入力する（ステップＳ１２）。そして、画像生成部５１は、上述したとおりに、副画像を生成する（ステップＳ１３）。次に、画像生成部５１は、入力されためくり量から副画像の領域を算出する（ステップＳ１４）。そして、画像生成部５１は、主画像の指定されためくり位置の角部を、指定されためくり量（すなわち、副画像の領域のサイズ分）でめくり画像を生成する（ステップＳ１５）。
【００３０】
そして、３次元処理部５２は、ステップＳ１５で生成されためくり画像を立体画像に変換する３次元処理を施す（ステップＳ１６）。ここで、めくり画像に３次元処理を行う場合、めくり量に応じためくり画像の出っ張り量から視差を算出する。なおステップＳ１６では、前述の通り、主画像や副画像を立体画像に変換しても良い。次に、画像合成部５３はここまでのステップで処理された主画像、めくり画像、副画像を合成する（ステップＳ１７）。合成画像は、映像処理部５から表示処理部６に出力される。表示処理部６は、合成画像を表示部７に表示する表示処理を行う（ステップＳ１８）。
【００３１】
このように本実施の形態では、主画像の角部の領域を折り返し、主画像の角部を折り返して、折り返すことによって生じるめくり部分を半透明にしためくり画像を生成し、主画像のめくられた領域（角部の領域）に副画像を配置し、主画像と、めくり画像と、副画像とを合成して表示部７に表示する。
【００３２】
（実施の形態２）
実施の形態１では副画像を任意の映像としていたが、この実施の形態２では、めくり位置に応じて主画像の角部に配置する副画像の種類を変えている。
【００３３】
本実施の形態のデジタルテレビ１の構成、映像処理部５の機能的構成は、実施の形態１と同様である。本実施の形態では、画像生成部５１は、制御部１０でユーザから入力を受け付けためくり位置に応じて異なる副画像を生成する。
【００３４】
ここで、異なる種類の副画像としては、例えば、主画像の番組の登場人物の情報に関する画像、主画像の番組で扱われた商品と関連する商品の広告画像、主画像に関連するお勧めのコンテンツの画像、等があげられるが、これに限定されるものではない。また、どのめくり位置にどの種類の副画像を配置するかも、任意に定めることができる。
【００３５】
なお、デジタルテレビ１は、これらの異なる種類の副画像を表示する場合、例えば、通信部１７から外部サーバに対して主画像に関する情報の要求を送信し、該要求に対して応答送信された情報に基づいて副画像を表示する。
【００３６】
本実施の形態の映像処理の全体的流れは、図４を用いて説明した実施の形態１と同様である。実施の形態２では、この映像処理において、ステップＳ１３の副画像の生成の処理が実施の形態１と異なっている。実施の形態２の副画像の生成処理について図５を用いて説明する。なお、以下の説明において、副画像Ａ、副画像Ｂ、副画像Ｃ、副画像Ｄはそれぞれ種類の異なる副画像であるものとする。
【００３７】
まず、画像生成部５１は、入力されためくり位置が主画像の右下か否かを判断する（ステップＳ２１）。そして、入力されためくり位置が主画像の右下である場合には（ステップＳ２１：Ｙｅｓ）、画像生成部５１は、副画像Ａを生成する（ステップＳ２２）。そして、画像生成部５１は、副画像生成処理を終了する。
【００３８】
一方、ステップＳ２１において、入力されためくり位置が主画像の右下でない場合には（ステップＳ２１：Ｎｏ）、画像生成部５１は、入力されためくり位置が主画像の左下か否かを判断する（ステップＳ２３）。そして、入力されためくり位置が主画像の左下である場合には（ステップＳ２３：Ｙｅｓ）、画像生成部５１は、副画像Ｂを生成する（ステップＳ２４）。そして、画像生成部５１は、副画像生成処理を終了する。
【００３９】
一方、ステップＳ２３において、入力されためくり位置が主画像の左下でない場合には（ステップＳ２３：Ｎｏ）、画像生成部５１は、入力されためくり位置が主画像の左上か否かを判断する（ステップＳ２５）。そして、入力されためくり位置が主画像の左上である場合には（ステップＳ２５：Ｙｅｓ）、画像生成部５１は、副画像Ｃを生成する（ステップＳ２６）。そして、画像生成部５１は、副画像生成処理を終了する。
【００４０】
一方、ステップＳ２５において、入力されためくり位置が主画像の左上でない場合には（ステップＳ２５：Ｎｏ）、画像生成部５１は、入力されためくり位置が主画像の右上か否かを判断する（ステップＳ２７）。そして、入力されためくり位置が主画像の右上である場合には（ステップＳ２７：Ｙｅｓ）、画像生成部５１は、副画像Ｄを生成する（ステップＳ２８）。
【００４１】
一方、ステップＳ２７において、入力されためくり位置が主画像の右上でない場合には（ステップＳ２７：Ｎｏ）、画像生成部５１は副画像生成処理を終了する。
【００４２】
以上のような処理により、図６に示すように、めくり位置に応じて異なる種類の副画像Ａ〜Ｄが表示される。これにより、めくり位置に応じて異なる種類の副画像と主画像とを同時に表示することができる。
【００４３】
（実施の形態３）
実施の形態１では、副画像は任意の映像としていたが、この実施の形態３では、副画像として、主画像と異なるチャンネルの映像を用い、めくりによりチャンネルの切替えも行っている。
【００４４】
本実施の形態のデジタルテレビ１の構成は、実施の形態１と同様である。本実施の形態では、映像処理部６０５、音声処理部６０８の構成が実施の形態１と異なっている。
【００４５】
実施の形態３の映像処理部６０５は、図７に示すように、画像生成部５１と、画像合成部５３と、３次元処理部５２と、チャンネル切替え制御部６０１とを主に備えている。ここで、画像生成部５１、画像合成部５３、３次元処理部５２の機能については実施の形態１と同様である。
【００４６】
チャンネル切替え制御部６０１は、操作制御の対象となるチャンネルを切り替える。より具体的には、チャンネル切替え制御部６０１は、めくり量が所定の閾値以上となった場合に、操作制御の対象となるチャンネルを副画像のチャンネル（副チャンネル）に切り替える。ここで操作制御とは、リモートコントローラ等の操作入力装置からの操作入力に応じた制御であり、例えば“音量変更”、“ＣＨ変更”、“録画”“番組情報表示”及び“お気に入り登録”等の操作入力に応じた制御である。そしてデジタルテレビ１は、これらの操作入力を受けた場合、操作制御の対象となっているチャンネルに対して制御を行う。
また、本実施の形態では、所定の閾値として、主画像の面積の１／２の量としている。
【００４７】
実施の形態３の音声処理部６０８は、図８に示すように、音量制御部８０２を主に備えている。音量制御部８０２は、主画像のチャンネルの音声と副画像のチャンネルの音声の音量を制御する。本実施の形態では、音量制御部８０２は、めくり量が増加するに従って、副画像のチャンネルの音声の音量を増加させる。
【００４８】
次に、以上のように構成された本実施の形態の映像処理について図９を用いて説明する。まず、制御部１０が操作部１４やリモコン４０から、めくり指示、めくり位置、めくり量、主画像として表示するチャンネル（主チャンネル）、副画像として表示するチャンネル（副チャンネル）の入力を受ける（ステップＳ４１）。
【００４９】
次に、映像処理部６０５は、信号処理部４から主チャンネルの映像信号（主画像）を入力し（ステップＳ４２）、信号処理部４から副チャンネルの映像信号（副画像）を入力する（ステップＳ４３）。
【００５０】
そして、チャンネル切替え制御部６０１は、入力されためくり量が所定の閾値である主画像の面積の１／２以上であるか否かを判断する（ステップＳ４４）。そして、入力されためくり量が主画像の面積の１／２以上である場合には（ステップＳ４４：Ｙｅｓ）、チャンネル切替え制御部６０１は、操作制御の対象となるチャンネルを副画像のチャンネル（副チャンネル）に切り替える。（ステップＳ４５）。
【００５１】
一方、ステップＳ４４で、入力されためくり量が主画像の面積の１／２未満である場合には（ステップＳ４４：Ｎｏ）、ステップＳ４５における操作制御の対象となるチャンネルの切替えは行われない。
【００５２】
次に、画像生成部５１は、めくり量に応じて副画像の領域のサイズを算出する（ステップＳ４６）。そして、以降は、実施の形態１と同様に、画像生成部５１は、主画像の指定されためくり位置の角部を、指定されためくり量でめくり画像を生成する（ステップＳ４７）。
【００５３】
そして、３次元処理部５２は、実施の形態１と同様に、ステップＳ４７で生成されためくり画像を立体画像に変換する３次元処理を施す（ステップＳ４８）。次に、画像合成部５３は、ここまでのステップで処理された主画像、めくり画像、副画像を合成する（ステップＳ４９）。合成画像は、映像処理部５から表示処理部６に出力される。表示処理部６は、３次元処理が施された合成画像を表示部７に表示する表示処理を行う（ステップＳ５０）。
【００５４】
次に、実施の形態３の音声処理について図１０を用いて説明する。制御部１０が操作部１４やリモコン４０から、めくり指示、めくり位置、めくり量、主チャンネル、副チャンネルの入力を受け付けると（ステップＳ６１）、音声処理部６０８は、信号処理部４から主チャンネルの音声信号（主音声）を入力し（ステップＳ６２）、信号処理部４から副チャンネルの音声信号（副音声）を入力する（ステップＳ６３）。
【００５５】
次に、音量制御部８０２は、めくり量に応じて副音声の音量を決定する（ステップＳ６４）。具体的には、音量制御部８０２は、めくり量が増加するに従って副音声の音量を増大させるように決定する。そして、音声処理部６０８は、決定された音量で、主音声、副音声のスピーカー９への出力処理を行う（ステップＳ６５）。
【００５６】
図１１（ａ）に示すように、めくり量が閾値未満である場合には、主画像３０１としてＣｈ１０１の映像が表示され、主画像３０１のめくられた領域に副画像３０２としてＣｈ１１０の映像が表示される。ここで、操作制御の対象のチャンネルは主画像３０１として表示されているＣｈ１０１である。そして、このとき、めくり量が増加するに従って、副音声の音量が増加する。
【００５７】
そして、図１１（ｂ）に示すように、めくり量が閾値である主画像の面積の１／２以上となった場合、操作制御の対象のチャンネルが副画像３０２のチャンネルＣｈ１１０に切り替えられる。なお、切替え後は、操作制御の対象のチャンネルでなくなったＣｈ１０１の音声を出力しないように音声処理部６０８を構成してもよい。
【００５８】
このように本実施の形態では、副画像として、主画像と異なるチャンネルの映像を用いているので、副画像と主画像と同時に表示することができる。また、本実施の形態では、めくり量の増加に従って副チャンネルの音量が増加し、めくり量が所定の閾値以上となった場合に、操作制御の対象のチャンネルを副画像のチャンネルに切り替えるので、チャンネル切替えを簡易に行うことができ、ユーザにとって利便性を向上させることができる。
【００５９】
（実施の形態４）
実施の形態３では、めくり量の増加に従って副チャンネルの音量を増加させていたが、この実施の形態４では、めくり量が所定の閾値以上となって、チャンネルが切り替わった段階で、副画像のチャンネルの音声を主画像の音声に代えて出力している。
【００６０】
本実施の形態のデジタルテレビ１の構成は、実施の形態３と同様である。また、本実施の形態の映像処理部６０５、音声処理部６０８の機能的構成は実施の形態３と同様である。
【００６１】
本実施の形態の音声処理部６０８の音量制御部８０２は、主画像の音声の音量と副画像の音声の音量を制御する。本実施の形態の音量制御部８０２は、めくり量が所定の閾値未満であれば、めくり量が増加しても副画像のチャンネルの音声の音量を増加させない。そして、音量制御部８０２は、めくり量が所定の閾値以上となって、操作制御の対象のチャンネルが副画像のチャンネルに切り替わった段階で、主画像のチャンネルの音声に代えて、操作制御の対象となった副画像のチャンネルの音声を出力する。
【００６２】
本実施の形態の映像処理の手順は実施の形態３と同様である。次に、実施の形態４の音声処理について図１２を用いて説明する。
【００６３】
めくり指示、めくり位置、めくり量、主チャンネル、副チャンネルの入力受付けから副チャンネルの音声の入力までの処理（ステップＳ６１〜Ｓ６３）は実施の形態３と同様に行われる。
【００６４】
次に、音声処理部６０８の音量制御部８０２は、めくり量が所定の閾値である主画像の面積の１／２以上となったか否かを判断する（ステップＳ７４）。そして、めくり量が主画像の面積の１／２未満である場合には（ステップＳ７４：Ｎｏ）、音量制御部８０２は、主画像のチャンネルの音声を出力し（ステップＳ７６）、副画像のチャンネルの音声は出力しない。
【００６５】
一方、ステップＳ７４で、めくり量が主画像の面積の１／２以上である場合には（ステップＳ７４：Ｙｅｓ）、音量制御部８０２は、副画像のチャンネルの音声を出力し（ステップＳ７５）、主画像のチャンネルの音声は出力しない。
【００６６】
これにより、図１１（ａ）に示すようなめくり量が閾値未満の場合には、副画像３０２のチャンネルの音声は、めくり量の大小にかかわらず、出力されず、主画像３０１のチャンネルの音声が出力される。一方、めくり量が増加して、図１１（ｂ）に示すように、閾値以上となった場合には、操作制御の対象のチャンネルが副画像のチャンネルに切り替わり、副画像３０２のチャンネルの音声が出力され、主画像３０１のチャンネルの音声は出力されない。
【００６７】
このように本実施の形態では、めくり量が所定の閾値以上となって、操作制御の対象のチャンネルが副画像のチャンネルに切り替わった段階で、副画像の音声を主画像の音声に代えて出力しているので、主画像のチャンネルの音声と副画像のチャンネルの音声が混在することを回避して、ユーザによりよい視聴環境を提供することが可能となる。
【００６８】
なお、主画像のチャンネルの音声と副画像のチャンネルの音声が混在することを回避するためには上記の処理が望ましいものの、ステップＳ７５において音量制御部８０２は、副画像のチャンネルと主画像のチャンネルの音声を出力してもよい。ここで音量制御部８０２は、めくり量に応じて副画像のチャンネルの音量と主画像のチャンネルの音量とを変化させる制御を行う。具体的には、めくり量が大きくなるほど、副画像のチャンネルの音量が大きくなり、主画像のチャンネルの音量が小さくなるよう制御する。そしてめくり量が一定面積以上になると、音量制御部８０２は、それまで音声出力されていた主画像のチャンネルの音声出力を停止する。
【００６９】
なお、実施の形態３，４では、所定の閾値として、主画像の面積の１／２を用いていたが、これに限定されるものではなく、任意の値をチャンネル切替えのための所定の閾値として用いることができる。
【００７０】
上記実施の形態１から４には種々の変形を加えることができる。以下、このような変形例について説明する。
【００７１】
（変形例１）
主画像に関連するコンテンツの有無を、主画像のメタデータ等により判断し、関連するコンテンツがある場合には、ユーザからのめくり指示を受けずに、めくり画像を生成するように画像生成部５１を構成してもよい。
【００７２】
また、主画像に関連するコンテンツの有無を、主画像のメタデータ等により判断し、関連するコンテンツがある場合には、主画像の一部の領域である角部を振動させた画像を生成するように画像生成部５１を構成してもよい。
【００７３】
図１３に示すように、本変形例では、主画像の角部１３０２が振動するように表示している。これにより、ユーザは、角部１３０２が振動した状態となっていることにより、主画像に対する副画像が存在することがわかり、角部１３０２のめくり指示を行うことで、副画像を表示することができる。
【００７４】
（変形例２）
ユーザからめくり量の指定を受けずに、副画像として表示する情報量、例えば項目の数に応じたサイズのめくり量で、めくり画像を生成するように画像生成部５１を構成してもよい。
【００７５】
図１４（ａ）は、副画像として表示する項目数が２個の場合の表示例であり、図１４（ｂ）は、副画像として表示する項目数が５個の場合の表示例である。図１４（ａ）、（ｂ）に示すように、項目数が多くなるほど、めくり量が増加する。
【００７６】
（変形例３）
ユーザに対して副画像を注目させる画像処理を副画像に施すように画像生成部５１を構成してもよい。
【００７７】
例えば、画像生成部５１は、ユーザに対して副画像を注目させる画像処理として、副画像の輝度を主画像の輝度に対して増加させることができる。また、画像生成部５１は、副画像を注目させる画像処理として、副画像の画質を主画像の画質に対して向上させることができる。さらに、画像生成部５１は、副画像を注目させる画像処理として、副画像の表示モードを、主画像の表示モードに対して明るいモードに設定することができる。例えば、主画像の表示モードを映画モードとし、副画像の表示モードを映画モードより明るいモードに設定すればよい。
【００７８】
（変形例４）
めくり形状に応じた情報を副画像として生成するように画像生成部５１を構成してもよい。例えば、主画像の角部をめくる場合には、めくり形状が三角形となるため、三角形に合致する画像を副画像として表示するように表示処理部６を構成することができる。
【００７９】
（変形例５）
上記実施の形態１〜４、変形例では、めくり画像は一つの例を示していたが、これに限定されず、複数のめくり画像を生成するように画像生成部５１を構成し、複数の副画像を表示するようにしてもよい。図１５では、画像生成部５１が二つのめくり画像を生成して、主画像３０１と２つの副画像３０２を表示した例を示している。
【００８０】
（変形例６）
上記実施の形態１〜４、変形例では、主画像の角部をめくっためくり画像を生成する例をあげて説明したが、主画像の一部の領域であれば角部をめくることに限定されるものではない。例えば、主画像の辺部を含む領域をめくっためくり画像を生成するように画像生成部５１を構成してもよい。図１６では、主画像３０１の右辺の領域を折り返してめくり、めくられた領域に副画像３０２を表示する例を示している。
【００８１】
なお、実施の形態１〜４、変形例１〜６のデジタルテレビ１の映像処理部５，６０５，音声処理部６０８は、ハードウェアで実現してもソフトウェアで実現してもいずれでもよい。
【００８２】
実施の形態１〜４、変形例１〜６のデジタルテレビ１の映像処理部５，６０５，音声処理部８，６０８をソフトウェアで実現する場合には、実施の形態１〜４、変形例１〜６の映像処理部５，６０５で実行される映像処理プログラム，音声処理部６０８で実行される音声処理プログラムは、ＲＯＭ１３等に予め組み込まれて提供される。
【００８３】
実施の形態１〜４、変形例１〜６の映像処理部５，６０５で実行される映像処理プログラム，音声処理部６０８で実行される音声処理プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【００８４】
さらに、実施の形態１〜４、変形例１〜６の映像処理部５，６０５で実行される映像処理プログラム，音声処理部６０８で実行される音声処理プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、実施の形態１〜４、変形例１〜６の映像処理部５，６０５で実行される映像処理プログラム，音声処理部６０８で実行される音声処理プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【００８５】
実施の形態１〜４、変形例１〜６の映像処理部５，６０５で実行される映像処理プログラムは、上述した各部（画像生成部５１、３次元処理部５２、画像合成部５３、チャンネル切替え制御部６０１）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭ１３から映像処理プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、画像生成部５１、３次元処理部５２、画像合成部５３、チャンネル切替え制御部６０１が主記憶装置上に生成されるようになっている。
【００８６】
実施の形態１〜４、変形例１〜６の音声処理部８，６０８で実行される音声処理プログラムは、上述した各部（音量制御部８０２）を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵが上記ＲＯＭ１３から音声処理プログラムを読み出して実行することにより上記各部がＲＡＭ１２にロードされ、チャンネル切替え制御部８０１、音量制御部８０２がＲＡＭ１２に生成されるようになっている。
【００８７】
なお、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。
【符号の説明】
【００８８】
５，６０５  映像処理部
６  表示処理部
７  表示部
８，６０８  音声処理部
１０  制御部
１４  操作部
４０  リモコン
５１  画像生成部
５２  ３次元処理部
５３  画像合成部
６０１，８０１  チャンネル切替え制御部
８０２  音量制御部
【図１】
2014107753.tif 000003
【図２】
2014107753.tif 000004
【図３】
2014107753.tif 000005
【図４】
2014107753.tif 000006
【図５】
2014107753.tif 000007
【図６】
2014107753.tif 000008
【図７】
2014107753.tif 000009
【図８】
2014107753.tif 000010
【図９】
2014107753.tif 000011
【図１０】
2014107753.tif 000012
【図１１】
2014107753.tif 000013
【図１２】
2014107753.tif 000014
【図１３】
2014107753.tif 000015
【図１４】
2014107753.tif 000016
【図１５】
2014107753.tif 000017
【図１６】
2014107753.tif 000018