(57)【要約】      （修正有）【課題】処理能力が小さい機器などで、ハイビジョン映像などの高精細なデータに対して、表示を行いながら録画するときに、録画に係る処理に支障が出ない映像表示方法を提供する。【解決手段】映像を記録する際に、受信中の映像をデータ蓄積部２７には劣化のない状態でＴＳストリームを保存しつつ、記録中の映像を簡略化した負荷の軽いデコードをデコーダ部１５において行なって、小さく表示させるためのデコード処理制御部１１を有する。これにより、処理負荷を増大させる事なく視聴及び現在の記録状態を確認することができる。【選択図】図１
2011250358.tif 000002
【特許請求の範囲】
【請求項１】
受信される映像信号を記録する映像処理装置において、映像信号の復号処理を行うデコーダ部と、前記デコーダ部で復号された映像に基づく第１の画面表示を、表示装置の少なくとも一部に、作業中の第２の画面表示と共に画像表示するための合成を行う出力合成部と、全体を制御する制御部と、を有する映像処理装置であって、
前記第１の画面表示を行うための映像信号の前記デコーダ部における処理負荷を調整するデコード処理制御部を有することを特徴とする映像処理装置。
【請求項２】
前記デコード処理制御部は、ピクチャタイプ単位でデコード処理を行うか否かを決定する出力フレーム決定部を有することを特徴とする請求項１に記載の映像処理装置。
【請求項３】
さらに、
前記制御部の負荷に基づいて、前記第１の画面表示のピクチャタイプを前記負荷が低くなる方向に調整する指令を前記出力フレーム決定部に送る画面構成決定部を有することを特徴とする請求項２に記載の映像処理装置。
【請求項４】
前記デコード処理制御部は、前記第１の画面表示の出力サイズ又は映像解像度に応じて、映像縮小又は映像解像度の低下に伴うデコード処理量の低減を行う出力サイズ決定部を有することを特徴とする請求項１又は２に記載の映像処理装置。
【請求項５】
前記画像解像度の縮小に伴う処理負荷の低減は、低周波成分の逆DCT処理による画像解像度の縮小に伴う処理負荷の低減であることを特徴とする請求項４に記載の映像処理装置。
【請求項６】
前記表示装置の解像度に応じて前記画像解像度の縮小に伴う処理負荷の低減を行うことを特徴とする請求項４に記載の映像処理装置。
【請求項７】
さらに、
前記制御部の負荷に基づいて、前記負荷が低くなる方向に前記第１の画面表示の表示サイズを調整する指令を前記出力サイズ決定部に送る画面構成決定部を有することを特徴とする請求項４に記載の映像処理装置。
【請求項８】
前記デコーダ部による復号前の映像信号を記録するデータ蓄積部と、取得中の映像信号と前記データ蓄積部に蓄積されている映像信号とのいずれかを選択的に前記デコード部に出力するスイッチと、を有することを特徴とする請求項１から７までのいずれか１項に記載の映像処理装置。
【請求項９】
受信された信号を、指定された方法で符号量の削減を行ってから前記蓄積部に記録することを特徴とする請求項８に記載の映像処理装置。
【請求項１０】
前記第１の画面表示のための処理負荷の低減された復号処理は、受信したデータの内の一部の動画像データのみを復号する事で処理負荷の低減を行うことであることを特徴とする請求項１に記載の映像処理装置。
【請求項１１】
前記受信したデータの一部は、フレーム内で情報圧縮された２次元圧縮映像データである第一のフレームと、時間的に前方向のフレーム内で情報圧縮された第一のフレームによる動き補償を加えて情報圧縮された３次元圧縮映像データである第二のフレームと、時間的に前後方向の第一のフレームまたは第二のフレームによる動き補償を加えて情報圧縮された３次元圧縮映像データである第三のフレームとを混在して含む符号化データであり、その内の一部の動画像データのみを復号する事で処理負荷の低減を行うことを特徴とする請求項８に記載の映像処理装置。
【請求項１２】
前記第１の画面表示を、録画中のコンテンツの情報を文字として表示装置の少なくとも一部に行うか、画像表示を表示装置の少なくとも一部に行うかを、制御部における処理負荷に応じて決定することを特徴とする請求項１から１１までのいずれか１項に記載の映像処理装置。
【請求項１３】
前記第１の画像表示を、前記表示装置の少なくとも一部に行う際に、指定されるサイズに対応する解像度の表示を行うことを特徴とする請求項１２に記載の映像処理装置。
【請求項１４】
複数のチューナ部を備え、
複数の信号に対して記録を行うとともに、前記第１の画面表示を複数に分割して前記表示装置の少なくとも一部に行うことを特徴とする請求項１から１３までのいずれか１項に記載の映像処理装置。
【請求項１５】
前記第２の画面表示用に、少なくとも一つのハードウェアデコード回路を備えていることを特徴とする請求項１４に記載の映像処理装置。
【請求項１６】
受信される映像信号の復号処理を行うステップと、
復号処理された映像に基づく第１の画面表示を、表示装置の少なくとも一部に、作業中の第２の画面表示と共に画像表示するための合成を行うステップと、を有し、
前記第１の画面表示を行うための映像信号の前記復号処理の負荷を調整するデコード処理制御ステップと、を有することを特徴とする映像記録方法。
【請求項１７】
コンピュータに請求項１６に記載の方法を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタル放送等の受信される映像コンテンツの映像処理技術に関する。
【背景技術】
【０００２】
近年、テレビジョン放送受信装置を備えた映像記録装置は、専用のテレビジョン放送受信装置に留まらず、携帯電話や汎用的なパソコン等、様々な機器に搭載されている。この様な、映像の録画や視聴以外のさまざまな用途で用いられる機器においては、動作するアプリケーションや、映像の録画時の圧縮率向上のための動画変換に係る映像信号処理など、ＣＰＵにおいて必要とされる処理能力が増加している。
【０００３】
ところで、テレビジョン放送や録画機器等では、ＭＰＥＧ（Moving Picture coding Experts Group）方式の動画像符号化が用いられている。ＭＰＥＧで符号化された画像データを復号する装置においては、入力された符号化データをバッファに順次格納し、その入力データを順次読み出し、多重化分離器によって必要な情報を分離する。次に、可変長復号、逆量子化器、逆ＤＣＴ（Inverse Discrete Cosine Transform）、前もしくは後ろのフレームを用いた動き予測による動き補償の各処理を行い、フレームバッファに格納し、このフレームバッファからピクチャ並び替えによってピクチャの順序を整え、表示すべき順に読み出して画面上に出力している。
【０００４】
さらに、このＭＰＥＧ方式によって符号化される動画像データは、フレーム間予測方法に基づく３種類の画像(ピクチャ)タイプ、即ち、画像内独立符号化される画像であるＩピクチャ、片側方向フレーム間予測符号化される画像であるＰピクチャ、双方向フレーム間予測符号化される画像であるＢピクチャを持っている。
【０００５】
ここで、デコード時の処理を削減する事で、低処理量、低負荷で、簡易的に映像を再生する方法が提案されている。
【０００６】
例えば、下記特許文献１に記載の動画像復号化装置および動画像復号化方法では、ＭＰＥＧデコード時の逆離散コサイン変換処理を施す際に、直交変換係数のうち水平周波数の高域部分を除去する事で、復号に必要な処理を削減したり、ＭＰＥＧ方式によって符号化された動画像データの再生において、Ｉピクチャのみをビデオ復号部に供給することで、復号時の処理負荷を削減したりする事が可能である。
【０００７】
さらに、下記特許文献２においては、テレビジョン放送の録画時において、一旦デコード処理を行い、予め設定された変換規則に基づいて、エンコーダ部が、各ＧＯＰについて、所定のＩピクチャをＰピクチャに、所定のＰピクチャをＢピクチャに変換するＴＳ変換処理を行い、データ量を低減させるように再符号化処理を行う方法が開示されている。
【０００８】
一方、デコード処理のために必要な専用のハードウェアを設ける事によって、ＣＰＵ負荷を増加させる事無くデコード処理を行う事は可能である。例えば、複数の映像を同時に画面上に表示する等、複数のストリームに対して、同時にデコードを行う必要がある事がある。しかしながら、この際、必要な数のデコーダを用意する事は、専用のハードウェアによって回路規模が増大し、コストの増加や、消費電力量の増加につながるという欠点がある。
【０００９】
また、そのようなハードウェアデコーダを搭載せず、且つ、ＣＰＵの処理能力が十分でないテレビジョン放送受信装置を備えた映像記録装置においても、録画中の映像を確認したいという要求は存在する。これは、例えばテレビチューナを備えたＣＰＵの処理能力が小さいＰＣや、携帯電話などのモバイル端末において、ユーザーが他の作業をしながら現在録画している映像コンテンツを確認したいという要求や、放送の録画中であっても、複数の映像を視聴したいという要求がある。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】特開２００２−１１２１９５号
【特許文献２】特開２００５−１２３８２９号
【発明の概要】
【発明が解決しようとする課題】
【００１１】
映像信号に対して、映像の品質を劣化させる事無く録画するためには、ＴＳストリームを保存すればよいため、デコード処理を行う必要はないが、録画中の映像を視聴するためにはデコード処理を行わなければならない。
【００１２】
さらに、前述したようなＴＳ変換処理を伴う場合、表示の有無に関らず、デコード処理を行う必要があり、処理量は増加する。
【００１３】
しかしながら、デジタル放送におけるハイビジョン放送等の規格においては、１０８０×１９２０画素といった高精細な映像信号をデコードする必要があり、デコード処理には大きなＣＰＵリソースを消費する。
【００１４】
このため、ＣＰＵの処理能力が小さい機器などで、ハイビジョン映像などの高精細なデータに対して、表示を行いながら録画する事は、ＣＰＵリソースを使いきってしまうばかりでなく、録画に係る処理に支障が出るという問題がある。
【００１５】
本発明は、上記事情を鑑みてなされたものであり、映像の記録を行いながら、処理負荷を増大させる事無く、且つ、余分なハードウェアを追加する事無く、記録中の映像の確認及び、複数コンテンツの再生ができる映像処理装置を提供することを目的とする。
【課題を解決するための手段】
【００１６】
本発明の一観点によれば、受信される映像信号を記録する映像処理装置において、映像信号の復号処理を行うデコーダ部と、前記デコーダ部で復号された映像に基づく第１の画面表示を、表示装置の少なくとも一部に、作業中の第２の画面表示と共に画像表示するための合成を行う出力合成部と、全体を制御する制御部と、を有する映像処理装置であって、前記第１の画面表示を行うための映像信号の前記デコーダ部における処理負荷を調整するデコード処理制御部を有することを特徴とする映像処理装置が提供される。
【００１７】
前記デコード処理制御部は、ピクチャタイプ単位でデコード処理を行うか否かを決定する出力フレーム決定部を有するようにしても良い。例えば、Ｂピクチャを処理しない事、或いはＰ、Ｂピクチャを処理しない事によって処理負荷を削減する事が出来る。
【００１８】
さらに、前記制御部の負荷に基づいて、前記負荷が低くなる方向に前記第１の画面表示のピクチャタイプを調整する指令を前記出力フレーム決定部に送る画面構成決定部を有することが好ましい。
【００１９】
また、前記デコード処理制御部は、前記第１の画面表示の出力サイズ又は映像解像度に応じて、映像縮小又は映像解像度の低下に伴うデコード処理量の低減を行う出力サイズ決定部を有するようにしても良い。前記画像解像度の縮小に伴う処理負荷の低減は、低周波成分の逆DCT処理による画像解像度の縮小に伴う処理負荷の低減である。
【００２０】
また、前記表示装置の解像度に応じて前記画像解像度の縮小に伴う処理負荷の低減を行うようにしても良い。
【００２１】
さらに、前記制御部の負荷に基づいて、前記負荷が低くなる方向に前記第１の画面表示の表示サイズを調整する指令を前記出力サイズ決定部に送る画面構成決定部を有することが好ましい。
【００２２】
これにより、録画処理を行いながら、小さな処理負荷で録画済み映像の再生及び確認ができるため、ハードウェアの規模を増大させる事が無く、また、処理に係る消費電力の削減が可能である。
【００２３】
上記において、前記デコーダ部による復号前の映像信号を記録するデータ蓄積部と、取得中の映像信号と前記データ蓄積部に蓄積されている映像信号とのいずれかを選択的に前記デコード部に出力するスイッチと、を有するようにすると良い。これにより、記録済みの映像と現在取得中の映像とのいずれかを前記第２の画面表示とすることができる。また、受信された信号を画質の劣化及び解像度の変更を伴う事なく記録を行うことができる。
【００２４】
また、受信された信号を、指定された方法で符号量の削減を行ってから前記蓄積部に記録するようにしても良い。前記第１の画面表示のための処理負荷の低減された復号処理は、受信したデータの内の一部の動画像データのみを復号する事で処理負荷の低減を行うことであることが好ましい。
【００２５】
前記受信したデータの一部は、フレーム内で情報圧縮された２次元圧縮映像データである第一のフレームと、時間的に前方向のフレーム内で情報圧縮された第一のフレームによる動き補償を加えて情報圧縮された３次元圧縮映像データである第二のフレームと、時間的に前後方向の第一のフレームまたは第二のフレームによる動き補償を加えて情報圧縮された３次元圧縮映像データである第三のフレームとを混在して含む符号化データであり、その内一部の動画像データのみを復号する事で処理負荷の低減を行うことが好ましい。  
【００２６】
前記第１の画面表示を、録画中のコンテンツの情報を文字として表示装置の少なくとも一部に行うか、画像表示を表示装置の少なくとも一部に行うかを制御部における処理負荷に応じて決定すると便利である。前記第１の画像表示を、前記表示装置の少なくとも一部に行う際に、指定されるサイズに対応する解像度の表示を行うようにしても良い。
【００２７】
また、複数のチューナ部を備え、複数の信号に対して記録を行うとともに、前記第１の表示を複数に分割して前記表示装置の少なくとも一部に行うようにしても良い。前記第２の画面表示用に、少なくとも一つのハードウェアデコード回路を備えているようにしても良い。これにより、ハードウェアデコード回路でデコードされた画像は、前記縮小された複数の画像よりも大きなサイズで表示することができる。
【００２８】
本発明の他の観点によれば、受信される映像信号の復号処理を行うステップと、復号処理された映像に基づく第１の画面表示を、表示装置の少なくとも一部に、作業中の第２の画面表示と共に画像表示するための合成を行うステップと、を有し、前記第１の画面表示を行うための映像信号の前記復号処理の負荷を調整するデコード処理制御ステップと、を有することを特徴とする映像記録方法が提供される。また、本発明は、コンピュータに上記に記載の方法を実行させるためのプログラムであっても良いし、該プログラムを記録するコンピュータ読み取り可能な記録媒体であっても良い。
【発明の効果】
【００２９】
本発明に係る映像処理装置によれば、録画を行いながら、小さな処理負荷で録画映像の確認及び、複数コンテンツの再生ができる。従って、ハードウェアの規模を増大させる事が無く、また、処理に係る消費電力の削減が可能である。
【図面の簡単な説明】
【００３０】
【図１】本発明の第１の実施の形態に係る映像処理装置の一構成例を、映像記録装置として示した機能ブロック図である。
【図２】図１のデコーダ部の処理詳細構成を示す機能ブロック図である。
【図３】本実施の形態に係るデコード処理制御を示すブロック図である。
【図４】デコード処理部に係る動作を説明するためのフローチャート図である。
【図５】本実施の形態に係る全体の詳細処理構成を示す機能ブロック図である。
【図６】本実施の形態に係る画面構成決定部で決定される表示サイズ、配置の例を示す図ある。
【図７】本発明の第２の実施の形態に係る映像処理装置の一構成例を示す図である。
【図８】本実施の形態に係る画面構成決定部で決定される表示サイズ、配置の例を示す図である。
【図９】本実施の形態に係るハードウェアデコード回路を備えた映像処理装置の一構成例を示す機能ブロック図である。
【発明を実施するための形態】
【００３１】
（第１の実施の形態）
以下、図面を参照して本発明に係るマルチ画面表示装置の好適な実施形態について説明する。本発明の第１の実施の形態では、受信したデジタル放送を録画する機能と低負荷で表示する機能を有し、且つ、両機能を同時に利用する事を目的とする映像処理装置についての実施の形態を説明する。
【００３２】
図１は、本発明に係る映像処理装置（映像記録装置及び映像表示装置）の一構成例を示す図である。チューナ部３は、例えば、ＢＳ／ＣＳデジタルチューナ、地上波デジタルチューナ等であり、アンテナ１で受信した地上波デジタル、ＢＳ／ＣＳ等の放送信号を増幅し、制御部２１から与えられた選局信号に基づいて特定周波数チャンネルの放送信号を選局、受信する。受信する放送信号の選択は、例えばリモコンやマウス、タッチパネルなどの画面操作に有効な、一般的な操作器２３によって、ユーザーから与えられる。
【００３３】
受信信号は、Ａ／Ｄ（ A n a l o g / D i g i t a l） コンバータ５によってアナログ／デジタル変換され、選局されたチャンネルのデジタル信号を復調部７において復調し、映像データを得る。例えば、地上波デジタルの放送信号は、ＯＦＤＭ（Orthogonal Frequency Division Multiplexing）方式で変調されており、復調部７は、この放送信号を、ＭＰＥＧ２ＴＳ（Transport Stream）形式の映像データに復調する事が出来る。
【００３４】
設定されたビデオデータやオーディオデータ等の各ＰＩＤ（Packet Identification）に従って必要なビデオデータ、オーディオデータを分離するＴＳ デマルチプレクサ(Transport Stream Demultiplexer)９によって、必要なＴＳストリームを得る。
【００３５】
ここで、受信中の放送を時間的に後の段階で視聴したい場合には、得られたＴＳストリームを、データ蓄積部２７に記録する。記録するデータは、復調部７による復調後に得られるＴＳストリーム全体でも良いし、ＴＳデマルチプレクサ９によって再生に必要なデータのみを抽出したＴＳストリームを記録する事も可能である。
【００３６】
また、記録するデータは、解像度変更を伴わない適切な符号量削減を行ってから、データ蓄積部２７に記録しても良い。例えば、より高い圧縮効率を実現する事が可能な、H.264/AVC等に変換する事で実現できる。
【００３７】
データ蓄積部２７は、映像データを蓄積する不揮発性の記憶媒体、例えばハードディスクドライブ、ＳＳＤ（Solid State Drive）、SDカード等の記録メディア、ＤＶＤ、ブルーレイディスク等の光学ディスク等であり、得られたＴＳストリームを、随時書き込む必要がある。
【００３８】
ＴＳストリームを記録しながら、記録中の映像を視聴／確認するためには、得られた受信データを、デコード処理制御部１１により制御されるデコーダ部１５で復号する必要がある。復調部７からの出力とＴＳデマルチプレクサ９からの出力とのいずれをデータ蓄積部２７に入力させるかを切り替えるスイッチ１０ｂ、ＴＳデマルチプレクサ９からの出力と、データ蓄積部２７からの出力のいずれをデコーダ部１５に出力するかを切り替えるスイッチ１０ａが設けられている。その他、後述する出力合成部１７、画面構成決定部２５、を有している。
【００３９】
ここで、デコーダ部１５の処理の詳細について図２を参照しながら説明する。
図２は、本実施の形態に係るデコーダ部１５の一構成例を示す機能ブロック図である。図２において、多重化分離器３１、可変長復号部３３、逆量子化部３５、逆ＤＣＴ部３７、デコード処理制御部３９、ピクチャ並び替え部４１、動き予測部４５及びピクチャ蓄積部４３を含んで構成されている。
【００４０】
多重化分離器３１は、符号化データを可変長復号部３３に、動きベクトルの場合には、その動きベクトルおよび符号化モードを動き予測部４５に供給する。
【００４１】
可変長復号部３３は、供給された符号から可変長符号を検出して、固定長の符号に戻し、逆量子化部３５に供給する。
【００４２】
逆量子化部３５は、符号化側において量子化された変換係数の符号を元の変換係数に逆変換するものであり、多重化分離器３１からの量子化ステップサイズにより逆量子化し、逆ＤＣＴ部３７に供給する。
【００４３】
逆ＤＣＴ部３７は、逆量子化部３５からの変換係数を元の画素値に逆変換するものであり、符号化側によりＤＣＴ（discrete cosine transform）変換されたそれぞれのマクロブロック毎の映像信号を再生する。再生された映像信号は、加算器４７を介してピクチャ並び替え部４１に供給され、またはピクチャ蓄積部４３に一時蓄積される。
【００４４】
動き予測部４５は、ピクチャ蓄積部４３からの前フレームの映像信号を動きベクトルにて動き補償した現フレームの映像信号を生成する。動き補正した映像信号は、加算器４７において逆ＤＣＴ部３７からの映像信号と加算されてフレームバッファ４０に格納される。
【００４５】
ピクチャ並び替え部４１は、このフレームバッファ４０からの映像信号のピクチャの順序を整え、表示すべき順に読み出した映像信号を出力する。
【００４６】
また、本実施形態におけるデコード部１５は、ＣＰＵの処理負荷状態に応じてデコード処理負荷を削減するデコード処理制御部３９を備える。デコード処理制御部３９は、逆量子化時及び逆ＤＣＴ時に負荷の低いデコード処理を与えるパラメータを提供することができる。
【００４７】
ここで、図３で後述するように、デコード処理制御部３９は、出力フレーム決定部と、出力サイズ決定部とを備える。
【００４８】
図３は、本実施形態に係るデコード処理制御を示す機能ブロック図である。但し、デコーダ部１５での処理図は簡略化している。
【００４９】
デコーダ部１５の前段のデコード処理制御部３９において、出力フレーム決定部３９ａでは、フレーム内で情報圧縮された２次元圧縮映像データである第一のフレームと、時間的に前方向のフレーム内で情報圧縮された第一のフレームによる動き補償を加えて情報圧縮された３次元圧縮映像データである第二のフレームと、時間的に前後方向の第一のフレームまたは第二のフレームによる動き補償を加えて情報圧縮された３次元圧縮映像データである第三のフレームとを混在して含む符号化データに対して、その内の一部の動画像データのみを復号処理する事で処理負荷の低減を行うことが出来る。
【００５０】
例えば、ＭＰＥＧ２においては、Ｉ，Ｐ，Ｂの各ピクチャタイプに対し（ピクチャタイプ単位で）、デコード処理を行うか否かを決定する。例えば、Ｂピクチャを処理しない事、或いはＰ、Ｂピクチャを処理しない事によって処理負荷を削減する事が出来る。
【００５１】
また、受信中の映像を記録媒体には劣化のない状態でＴＳストリームを保存しつつ、記録中の映像を簡略化した負荷の軽いデコードを行なって、小さく表示させることで、録画処理を行いながら完全なデコード処理及び表示処理を行うのに十分な処理性能を持たないＰＣやモバイル端末においても、後述するように、例えば、図８に示すような表示を、録画中の１つの映像に加えて複数のローカルコンテンツ映像として行った際に、処理の簡略化によってこの表示手法が低負荷で実現でき、後には保存されたＴＳストリームを使うことにより、全画面表示をしても高精細に表示できるという利点がある。
【００５２】
さらに、出力サイズ決定部３９ｂは、決定された出力サイズに応じて、画像縮小に伴うデコード処理量の低減を行う。例えば、１６×１６のＤＣＴ係数のうち水平周波数の高域部分を除去し、８×８、４×４、２×２、といった係数を用いて逆ＤＣＴ処理を行う事で、処理量を削減しつつ、解像度を下げる事が出来る。あるいは、表示装置の解像度に応じて画像解像度の縮小に伴う処理負荷の低減を行うようにしても良い。
【００５３】
デコード処理制御部３９における各パラメータ値は、ＣＰＵの処理負荷状態及び画面構成決定部（２５：図１）によって決定される。
【００５４】
ここで、デコード処理制御部３９における処理の流れを図４に示す。まず、指定された出力サイズを検出する。出力サイズ決定部（図３：３９ｂ）は、指定されるサイズ以下であり、かつ、ＤＣＴ係数の高域除去によって得られる出力サイズで最大のものを選択する（Ｓ１０２）。ここで、得られた指定サイズでデコード処理を行う事が可能か否かを判定する（Ｓ１０３）。この判定は、例えば、制御部から得られるＣＰＵ負荷状況を得る事で判定することができる。現在の負荷が高いほど、小さいサイズのデコード処理が適していることになる。一定以下の負荷である場合（ＹＥＳ）は、出力フレーム決定部（図３：３９ａ）で所定のピクチャタイプの処理を行うよう決定する（Ｓ１０４）。一定以上の処理負荷があり、ＣＰＵ負荷状況が所定の値を超える場合（ＮＯ）は、デコードピクチャの変更を出力フレーム決定部で決定する（Ｓ１０５）。尚、Ｉピクチャのみのデコード処理を行った場合でもＣＰＵ負荷状況が所定の値を超える場合は、出力フレーム決定部（図３：３９ａ）ではデコード処理を行わない事を決定する。
【００５５】
図５は、本実施形態に係る全体の詳細な構成例を示す図５である。画面構成決定部２５では、ユーザーからリモコンやマウス、タッチパネル等の操作器２３で与えられる操作情報と、制御部２１から得られるＣＰＵの負荷情報等に基づいて、出力すべきサイズ、配置を決定する。
【００５６】
ここで、画面構成決定部２５で決定され、表示画面１９に表示されるサイズ、配置の構成例を図６（ａ）に示す。画面構成決定部２５で決定された出力サイズに従って、配置を行う。ここで、作業中の画面に対して録画コンテンツ映像を出力する場合、録画コンテンツは負荷軽減を伴って縮小表示され、例えば、出力画面上の端に表示される。図６に示す構成例は、画面の右端上部に録画コンテンツ１９ａを配置した例であるが、録画コンテンツ１９ａの配置は四隅の何れの場所でも良いし、四辺上の何れの場所であっても良い。配置される場所は、予め決められた配置方法の中から、ユーザーによって選択することができる。
【００５７】
また、図６（ｂ）に示すように、ユーザーの指示によって録画中のコンテンツのサイズを指定する事（１９ｂ参照）、矢印のように表示領域を変更することも可能である。ユーザーは、リモコン操作、或いはマウスやタッチパネル上でのドラッグ操作可能な操作器２３によって、録画コンテンツの表示１９ａのサイズの変更を指示する。この時、画面構成決定部２５で新たな画像サイズを選択する。例えば、１６×１６のＤＣＴ係数のうち水平周波数の高域部分を除去し、８×８、４×４、２×２、といった係数を用いて逆ＤＣＴ処理を行う事で、処理量を削減した、解像度変換を行う。
【００５８】
また、図６（ｃ）に示す様に、Ｉピクチャのみのデコード処理を行った場合でもＣＰＵ負荷状況が所定の値を超える場合は、文字番組情報１９ｃのみを表示し、デコードを行わない。
【００５９】
その他、制御部から得られる負荷情報以外に、制御部から得られる考慮すべきものとしては、画面の解像度とコンテンツの表示解像度の関係も挙げられる。例えば、表示装置の画面解像度に対して、解像度変換後の縦横いずれかの辺の解像度(ピクセル)が表示装置の１／８を下回る場合は、文字番組情報１９ｃ（図６（ｃ））の表示を行うなどの方法が考えられる。
【００６０】
画面構成決定部２５での配置情報に基づき、出力合成部１７で画面上の一部に録画中のコンテンツをデコード時の負荷軽減をしながら出力を合成し、作業中の画面と共に出力を行う事で、作業中（例えば録画処理）の画面表示を妨げることなく、また、ＣＰＵの負荷を増大させる事なく、現在録画中の映像を確認する事が出来る。
【００６１】
従って、録画処理を行いながら、小さな処理負荷で録画済み映像の再生及び確認ができるため、ハードウェアの規模を増大させる事が無く、また、処理に係る消費電力の削減が可能である。
【００６２】
また、ＴＳストリームを保存しているので、後に視聴する際には画質を損なう事なく表示可能である。
【００６３】
（第２の実施の形態）
図７は、本発明の第２の実施の形態を表すブロック図であり、映像処理装置の一構成例を示す機能ブロック図である。また、図８は、表示画面１９に表示される例であって、本実施の形態における画面構成決定部で決定されるサイズ、配置の一構成例を示す図である。
【００６４】
第１の実施の形態が１つのチューナ部のみを持つのに対し、本実施の形態においては、複数のチューナ部３ａから３ｎまでを持ち、複数番組（地デジ、ＢＳ、ＣＳなどを含む、同じ地デジでも複数チューナ部を持っている場合を含む。）を受信する事が可能な構成を持つものとする。
【００６５】
この時、制御部２１から与えられた選局信号に基づいて特定周波数チャンネルの放送信号を選局する。受信するそれぞれの放送信号の選択は、例えばリモコンやマウス、タッチパネルなどの画面操作に有効な、一般的な操作器２３によって、ユーザーから与えられる。
【００６６】
得られた各チャンネルの信号を処理する過程は、上記の実施の形態１をそれぞれ並列に処理するものであり、同一の処理に関しては、その説明を省略する。
【００６７】
ここで、画面構成決定部２５で決定されるサイズ、配置の構成例を図８（ａ）に示す。画面構成決定部２５で決定された出力サイズに従って、画面上に配置を行う。ここで、作業中の画面に対して録画コンテンツ映像を出力する場合、録画コンテンツは負荷軽減を伴って縮小表示され、出力画面上の端に表示する。図８（ａ）に示す構成例は、右端部に録画コンテンツを縦に複数配置した例である（１９ｄ）。同様に、図８（ｂ）に示す構成例は、下端部に録画コンテンツを横に複数配置した例である（１９ｅ）。さらに、図８（ｃ）の様に、縦横各辺に複数配置を行っても良い（１９ｆ）。さらに、配置は四隅の何れの場所でも良いし、四辺上の何れの場所に配置されても良い。これは、予め決められた配置方法の中から、ユーザーによって選択される。
【００６８】
また、図８（ｄ）に示すように、ユーザーの指示によって、録画中のコンテンツのサイズを指定（変更）する事を可能とする（１９ｇは縮小した様子を示している）。ユーザーはリモコン操作、或いはマウスやタッチパネル上でのドラッグ操作可能な操作器２３によって、サイズの変更を指示する。この時、画面構成決定部２５で新たな画像サイズを選択する。例えば、１６×１６のＤＣＴ係数のうち水平周波数の高域部分を除去し、８×８、４×４、２×２、といった係数を用いて逆ＤＣＴ処理を行う事で、処理量を削減した、解像度変換を行う。
【００６９】
また、デコードするピクチャ処理は、第１の実施の形態と同様に、図４の処理に従って行われる。すなわち、図８で示した様な各配置の構成例で表示させた場合においても、上記の実施の形態１と同様、Ｉピクチャのみのデコード処理を行った場合でもＣＰＵ負荷状況が所定の値を超える場合は、図８（ｃ）に示すように文字番組情報のみを表示し、デコードを行わないようにすることができる。
【００７０】
以上により、画面構成決定部２５での配置情報に基づき、出力合成部１７で画面上の一部に録画中のコンテンツをデコード時の負荷軽減をしながら出力を合成し、作業中の画面と共に出力を行う事で、作業中の画面表示を妨げることなく、また、ＣＰＵの負荷を増大させる事なく、現在録画中の映像を確認する事が出来る。
【００７１】
さらに図９に示すように、１ストリームをデコード可能なハードウェアデコード回路５１をＴＳデマルチプレクサ９と出力合成部１７との間に配置することで、出力合成部１７で図８の作業中の画面に出力可能であり、ＣＰＵに負荷をかけることなく、視聴したいコンテンツと録画中のコンテンツとを、全て視聴する事が出来る。
【００７２】
従って、本実施の形態によれば、録画を行いながら、小さな処理負荷で録画映像の再生及び確認ができるため、ハードウェアの規模を増大させる事が無く、また、処理に係る消費電力の削減が可能である。
また、上記の実施の形態において、添付図面に図示されている構成等については、これらに限定されるものではなく、本発明の効果を発揮する範囲内で適宜変更することが可能である。その他、本発明の目的の範囲を逸脱しない限りにおいて適宜変更して実施することが可能である。
【００７３】
また、本実施の形態で説明した機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。尚、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００７４】
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
【００７５】
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また前記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【産業上の利用可能性】
【００７６】
本発明は、地上デジタル放送、BSデジタル放送、或いはCS放送などのテレビジョン放送を受信可能なチューナを備えた映像記録装置（映像処理装置）へ適用可能である。映像記録装置を備えた映像表示装置には、例えばデジタルテレビ、ハイビジョンレコーダ、テレビチューナを備えたパソコンや、携帯電話などの携帯端末に利用可能である。
【符号の説明】
【００７７】
Ａ…映像処理示装置、１…アンテナ、３…チューナ部、５…Ａ／Ｄコンバータ、７…復調部、９…ＴＳデマルチプレクサ、１１…デコード処理制御部、１５…デコーダ部、１７…出力合成部、２１…制御部、２３…操作器、２５…画面構成決定部、２７…データ蓄積部、３１…多重化分離器、３３…可変長復号部、３５…逆ＤＣＴ部、３９…デコード処理制御部、３９ａ…出力フレーム決定部、３９ｂ…出力サイズ決定部、４１…ピクチャ並び替え部、４３…ピクチャ蓄積部、４５…動き予測部、４７…加算器。
【図１】
2011250358.tif 000003
【図２】
2011250358.tif 000004
【図３】
2011250358.tif 000005
【図４】
2011250358.tif 000006
【図５】
2011250358.tif 000007
【図６】
2011250358.tif 000008
【図７】
2011250358.tif 000009
【図８】
2011250358.tif 000010
【図９】
2011250358.tif 000011