(57)【要約】【課題】低解像度または標準解像度の動画像を高解像度の動画像に変換して拡大表示する場合における画質改善の強度を再生状態に応じて適正化することを実現した情報処理装置を提供する。【解決手段】拡大・鮮鋭化処理部２０４は、低解像度または標準解像度の画像を超解像技術を用いて高解像度の画像に変換（アップコンバート）する機能を備えたモジュールである。通常再生を指示された場合、表示処理制御部２０２は、拡大・鮮鋭化処理部２０４に通常の動画像用のパラメータを設定する。一方、スロー再生や巻き戻し再生等の特殊再生を指示された場合には、表示処理制御部２０２は、拡大・鮮鋭化処理部２０４に（動画像用のパラメータよりも画質改善効果を高めてアップコンバートを行わせるように調整された）静止画像用のパラメータを設定する。【選択図】      図２
2010118772.tif 000002
【特許請求の範囲】
【請求項１】
第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバート手段と、
動画像データを標準のフレームレートで表示する通常再生が指示された場合、動画像データの解像度を変換する際に実行される、被写体像の鮮鋭度を高めるための画質改善処理の強度が第１の強度に設定されるように前記アップコンバート手段を制御し、動画像データを標準のフレームレートとは異なるフレームレートで表示する特殊再生が指示された場合、前記画質改善処理の強度が前記第１の強度よりも改善効果の高い第２の強度に設定されるように前記アップコンバート手段を制御する制御手段と、
を具備することを特徴とする情報処理装置。
【請求項２】
前記特殊再生は、動画像データを標準のフレームレートよりも低いフレームレートで表示するスロー再生であることを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記特殊再生は、動画像データ中の各フレームを、時間的に遡り、かつ、予め定められた割合で間引きしながら表示する巻き戻し再生であることを特徴とする請求項１記載の情報処理装置。
【請求項４】
前記制御手段は、動画像データ中の任意のフレームを静止画像として表示する一時停止再生が指示された場合、前記画質改善処理の強度が前記第１の強度に設定されるように前記アップコンバート手段を制御することを特徴とする請求項１記載の情報処理装置。
【請求項５】
前記制御手段は、動画像データの解像度を高めるための超解像処理用に前記アップコンバート手段に与えるパラメータであって、画質改善効果に関わるパラメータを調整することによって、前記アップコンバート手段に設定される前記画質改善処理の強度を制御することを特徴とする請求項１記載の情報処理装置。
【請求項６】
前記アップコンバート手段は、第１のアルゴリズムを用いて、動画像データの解像度を高めるための超解像処理を実行する第１の動作モードと、前記第１のアルゴリズムよりも画質改善効果の高い第２のアルゴリズムを用いて、前記超解像処理を実行する第２の動作モードとを有し、
前記制御手段は、前記第１の動作モードおよび前記第２の動作モードのいずれを適用するのかを指示することによって、前記アップコンバート手段に設定される前記画質改善処理の強度を制御することを特徴とする請求項１記載の情報処理装置。
【請求項７】
動画像データを拡大して表示する機能を有する表示制御手段をさらに具備し、
前記制御手段は、前記特殊再生として、動画像データを標準のフレームレートよりも高いフレームレートで表示する早送り再生または早戻し再生が指示された場合、前記アップコンバート手段による前記動画像データの解像度の変換を行わずに、前記第１の解像度の動画像データの拡大表示を前記表示制御手段に実行させることを特徴とする請求項１記載の情報処理装置。
【請求項８】
第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバート手段と、
動画像データを拡大表示する機能を有する表示制御手段と、
動画像データを標準のフレームレートで表示する通常再生、動画像データを標準のフレームレートよりも低いフレームレートで表示するスロー再生または動画像データ中の任意のフレームを静止画像として表示する一時停止再生が指示された場合、前記動画像データの解像度の変換を前記アップコンバート手段に実行させ、動画像データを標準のフレームレートよりも高いフレームレートで表示する早送り再生または早戻し再生が指示された場合、前記第１の解像度の動画像データの拡大表示を前記表示制御手段に実行させる制御手段と、
を具備することを特徴とする情報処理装置。
【請求項９】
第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバート手段を具備する情報処理装置における動画像データのアップコンバート制御方法であって、
動画像データを標準のフレームレートで表示する通常再生が指示された場合、動画像データの解像度を変換する際に実行される、被写体像の鮮鋭度を高めるための画質改善処理の強度が第１の強度に設定されるように前記アップコンバート手段を制御し、動画像データを標準のフレームレートとは異なるフレームレートで表示する特殊再生が指示された場合、前記画質改善処理の強度が前記第１の強度よりも改善効果の高い第２の強度に設定されるように前記アップコンバート手段を制御する、
ことを特徴とする動画像データのアップコンバート制御方法。
【請求項１０】
前記特殊再生は、動画像データを標準のフレームレートよりも低いフレームレートで表示するスロー再生であることを特徴とする請求項９記載の動画像データのアップコンバート制御方法。
【請求項１１】
前記特殊再生は、動画像データ中の各フレームを、時間的に遡り、かつ、予め定められた割合で間引きしながら表示する巻き戻し再生であることを特徴とする請求項９記載の動画像データのアップコンバート制御方法。
【請求項１２】
前記動画像データ中の任意のフレームを静止画像として表示する一時停止再生が指示された場合、前記画質改善処理の強度が前記第１の強度に設定されるように前記アップコンバート手段を制御することを特徴とする請求項９記載の動画像データのアップコンバート制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えばＤＶＤ（Digital Versatile Disc）やＨＤＤ（Hard Disk Drive）等の記憶メディアに格納されたＳＤ（Standard Definition）画像をＨＤ（High Definition）画像に変換することで拡大表示する再生機能を有するパーソナルコンピュータ等に適用して好適な動画像データのアップコンバート制御技術に関する。
【背景技術】
【０００２】
近年、ノートＰＣなどと称される、バッテリ駆動可能で持ち運びが容易なパーソナルコンピュータが広く普及している。この種のパーソナルコンピュータは、通常、例えばＤＶＤ等の記憶メディアに格納された動画像データを再生するＡＶ（Audio and Visual）機能を備えており、ディジタル放送番組データを視聴、録画、再生するテレビジョン機能を搭載するモデルも増えてきている。
【０００３】
また、デジタルハイビジョン放送の普及などに伴って、画像の画質に対するユーザの関心が高まっており、上記ＡＶ機能によってＤＶＤに格納された動画像データを再生する場合や上記テレビジョン機能によってＨＤＤに録画した動画像データを再生する場合における画像の画質改善のための提案が、これまでも種々なされるに至っている（例えば特許文献１等参照）。
【特許文献１】特開２００１−３５９０４８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
前述したように、ノートＰＣは、持ち運びが容易であるという利点があるが、上記テレビジョン機能を搭載するモデルのノートＰＣにおいては、ＬＣＤ（Liquid Crystal Display）の大画面化の傾向が強い。これに伴い、低解像度または標準解像度の画像を拡大表示した場合に発生する画質劣化の改善要求が高まっている。このようなことから、最近では、低解像度または標準解像度の画像を高解像度の画像に変換（アップコンバート）するための超解像技術が注目を集めている。
【０００５】
ところで、このアップコンバート時に画質改善を強くかけると、被写体像の輪郭部（エッジ）が強調されすぎ、例えば移動する人物の周りにちらつきが発生したり、画面全体がぎらぎらした状態となる等により、ユーザにとっては却って見づらい画像となってしまうことがある。このため、動画再生においては、エッジが強調され過ぎないように、画質改善の強度を抑えぎみにアップコンバートを行うのが一般的である。即ち、画像の鮮鋭感をあえて抑制することとなってしまっていた。そして、前述の特許文献１を含むこれまで提案されてきた画質改善のための仕組みにおいては、例えば動画像データの再生状態に応じて、このアップコンバート時に施される画質改善の適正化を図るといった考慮はなされていなかった。
【０００６】
この発明は、このような事情を考慮してなされたものであり、低解像度または標準解像度の動画像を高解像度の動画像に変換して拡大表示する場合における画質改善の強度を再生状態に応じて適正化することを実現した情報処理装置およびアップコンバート制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前述の目的を達成するために、この発明の情報処理装置は、第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバート手段と、動画像データを標準のフレームレートで表示する通常再生が指示された場合、動画像データの解像度を変換する際に実行される、被写体像の鮮鋭度を高めるための画質改善処理の強度が第１の強度に設定されるように前記アップコンバート手段を制御し、動画像データを標準のフレームレートとは異なるフレームレートで表示する特殊再生が指示された場合、前記画質改善処理の強度が前記第１の強度よりも改善効果の高い第２の強度に設定されるように前記アップコンバート手段を制御する制御手段と、を具備することを特徴とする。
【発明の効果】
【０００８】
この発明によれば、低解像度または標準解像度の動画像を高解像度の動画像に変換して拡大表示する場合における画質改善の強度を再生状態に応じて適正化することが実現される。
【発明を実施するための最良の形態】
【０００９】
以下、図面を参照して、この発明の実施形態を説明する。
【００１０】
（第１実施形態）
図１は、本発明の第１実施形態に係る情報処理装置１のシステム構成を示す図である。本情報処理装置１は、例えばノートブックタイプのパーソナルコンピュータ（ＰＣ）１として実現される。本コンピュータ１は、デジタル放送番組データを視聴、録画、再生するためのテレビジョン機能を有している。このテレビジョン機能は、本コンピュータ１に予めインストールされている動画再生ソフトウェア２００によって実現されている。動画再生ソフトウェア２００は、ＤＶＤ等の記憶メディアに格納された動画像データを再生するＡＶ機能も実現する。
【００１１】
本コンピュータ１は、図１に示すように、ＣＰＵ１１、ノースブリッジ１２、主メモリ１３、表示コントローラ１４、ビデオメモリ（ＶＲＡＭ）１４Ａ、ＬＣＤ１５、サウスブリッジ１６、サウンドコントローラ１７、スピーカ１８、ＢＩＯＳ−ＲＯＭ１９、ＬＡＮコントローラ２０、ＨＤＤ２１、ＯＤＤ２２、無線ＬＡＮコントローラ２３、ＵＳＢコントローラ２４、ＴＶチューナ２５、エンベデッドコントローラ／キーボードコントローラ（ＥＣ／ＫＢＣ）２６、キーボード（ＫＢ）２７、ポインティングデバイス２８等を備えている。
【００１２】
ＣＰＵ１１は、本コンピュータ１の動作を制御するプロセッサであり、ＨＤＤ２１から主メモリ１３にロードされる、オペレーティングシステム（ＯＳ）１００や、このＯＳ１００配下で動作する動画再生ソフトウェア２００などの各種アプリケーションプログラムを実行する。また、ＣＰＵ１１は、ＢＩＯＳ−ＲＯＭ１９に格納されたＢＩＯＳ（Basic Input/Output System）も実行する。ＢＩＯＳは、ハードウェア制御のためのプログラムである。
【００１３】
ノースブリッジ１２は、ＣＰＵ１１のローカルバスとサウスブリッジ１６との間を接続するブリッジデバイスである。ノースブリッジ１２には、主メモリ１３をアクセス制御するメモリコントローラも内蔵されている。また、ノースブリッジ１２は、表示コントローラ１４との通信を実行する機能も有している。
【００１４】
表示コントローラ１４は、本コンピュータ１のディスプレイモニタとして使用されるＬＣＤ１５を制御するデバイスである。この表示コントローラ１４によって表示信号が生成されてＬＣＤ１５に送られる。
【００１５】
サウスブリッジ１６は、ＰＣＩ（Peripheral Component Interconnect）バス上およびＬＰＣ（Low Pin Count）バス上の各デバイスを制御する。また、サウスブリッジ１６は、ＨＤＤ２１およびＯＤＤ２２を制御するためのＩＤＥ（Integrated Drive Electronics）コントローラおよびＢＩＯＳ−ＲＯＭ１９をアクセス制御するメモリコントローラが内蔵されている。さらに、サウスブリッジ１６は、サウンドコントローラ１７およびＬＡＮコントローラ２０との通信を実行する機能も有している。
【００１６】
サウンドコントローラ１７は音源デバイスであり、再生対象のオーディオデータをスピーカ１８に出力する。
【００１７】
ＬＡＮコントローラ２０は、例えばEthernet（登録商標）規格の有線通信を実行する有線通信デバイスであり、無線ＬＡＮコントローラ２３は、例えばIEEE 802.11規格の無線通信を実行する無線通信デバイスである。また、ＵＳＢコントローラ２４は、例えばUSB2.0規格のケーブルを介した外部機器との通信を実行する。
【００１８】
ＴＶチューナ２５はテレビジョン放送信号によって搬送されるデジタル放送番組データを受信する受信装置である。
【００１９】
ＥＣ／ＫＢＣ２６は、電力管理を行うためのエンベデッドコントローラと、キーボード（ＫＢ）２７およびポインティングデバイス２８を制御するためのキーボードコントローラとが集積された１チップマイクロコンピュータである。このＥＣ／ＫＢＣ２６は、ユーザの操作に応じて本コンピュータ１をパワーオン／パワーオフする機能を有している。
【００２０】
図２は、以上のような構成をもつ本コンピュータ１上で動作する、上記テレビジョン機能およびＡＶ機能を実現する動画再生ソフトウェア２００の機能ブロック図である。
【００２１】
動画再生ソフトウェア２００は、図２に示すように、ユーザ操作処理部２０１、表示処理制御部２０２、ビデオデコード処理部２０３、拡大・鮮鋭化処理部２０４および表示処理実行部２０５を有している。また、動画再生ソフトウェア２００は、ビデオストリームバッファ２１１用、フレームバッファ（１）２１２ａ用、フレームバッファ（２）２１２ｂ用の各領域を主メモリ１３上に確保する。
【００２２】
ユーザ操作処理部２０１は、ＫＢ２７やポインティングデバイス２８を用いて行われるユーザ操作を受け付けるモジュールである。このユーザ操作処理部２０１によって、動画像データの再生を開始したり、スロー再生や巻き戻し、あるいは一時停止を行ったりするためのユーザ操作が受け付けられると、そのユーザ操作に対応する再生指示がユーザ操作処理部２０１から表示処理制御部２０２に通知される。
【００２３】
表示処理制御部２０２は、ビデオデコード処理部２０３、拡大・鮮鋭化処理部２０４および表示処理実行部２０５の動作制御を司るモジュールであり、ユーザ操作処理部２０１からの再生指示に応じて、上記各部に対するモード設定やパラメータ設定を実行する。動画再生ソフトウェア２００は、動画像データを通常のフレームレートで表示する通常再生モードと、動画像データを通常のフレームレートとは異なるフレームレートで表示する特殊再生モードとを有しており、例えば動画像データの再生を開始するための操作がユーザによって行われると、表示処理制御部２０２に対して、まず、ユーザ操作処理部２０１から通常再生指示が通知される。また、動画再生ソフトウェア２００は、動画像中の任意のフレームを静止画像として表示する一時停止再生を行うことも可能である。
【００２４】
この通常再生を指示された場合、表示処理制御部２０２は、ビデオデコード処理部２０３および表示処理実行部２０５を通常再生モードに設定し、拡大・鮮鋭化処理部２０４に動画像用のパラメータを設定する。この拡大・鮮鋭化処理部２０４のパラメータ設定については後述する。
【００２５】
また、動画像データの再生を開始した後、スロー再生または巻き戻し再生を行うための操作がユーザによって行われ、ユーザ操作処理部２０１から表示処理制御部２０２に対してスロー再生または巻き戻し再生指示が通知されると、表示処理制御部２０２は、ビデオデコード処理部２０３および表示処理実行部２０５を特殊再生モードに設定し、拡大・鮮鋭化処理部２０４に静止画像用のパラメータを設定する。一時停止を行うための操作がユーザによって行われ、ユーザ操作処理部２０１から表示処理制御部２０２に対して一時停止再生指示が通知された場合には、表示処理制御部２０２は、ビデオデコード処理部２０３および表示処理実行部２０５の動作を一時停止再生に設定し、拡大・鮮鋭化処理部２０４に静止画像用のパラメータが設定される。
【００２６】
なお、ここでは、ＤＶＤに格納された低解像度または標準解像度の動画像データをＯＤＤ２２によって読み出し、高解像度の動画像データに変換してＬＣＤ１５に拡大表示する場合を想定する。
【００２７】
通常再生モード時、ビデオデコード処理部２０３は、すべてのビデオ画像を復号して出力し、また、表示処理実行部２０５も連続してビデオ画像の表示を行う。
【００２８】
ＯＤＤ２２によってＤＶＤから読み出された、例えばＭＰＥＧ（Moving Picture Experts Group）規格に準拠して符号化された動画像データは、図示しないデミキサ（Demuxer）によって、ビデオストリームが分離されて特定のデータサイズにパケット化されてビデオストリームバッファ２１１に格納される。ビデオデコード処理部２０３は、これらのバケットデータをビデオストリームバッファ２１１から順次読み出し、１画面（フレーム）単位のビデオ画像に復号してフレームバッファ（１）２１２ａに格納する。このフレームバッファ（１）２１２ａに格納されるビデオ画像は、低解像度または標準解像度のままである。
【００２９】
拡大・鮮鋭化処理部２０４は、低解像度または標準解像度の画像を、超解像技術を用いて高解像度の画像に変換（アップコンバート）する機能を備えたモジュールであり、表示処理制御部２０２によって設定されるパラメータに従い拡大処理を実行する。この拡大・鮮鋭化処理部２０４によって、フレームバッファ（１）２１２ａ上の低解像度または標準解像度のビデオ画像は高解像度のビデオ画像に変換され、フレームバッファ（２）２１２ｂに格納される。表示処理実行部２０５は、このフレームバッファ（２）２１２ｂからビデオ画像を取り出して、高解像度での画面表示を実行する。
【００３０】
超解像技術を用いた画像のアップコンバート時には、画質改善のための補正処理が施されるが、前述したように、この画質改善を強くかけると、エッジが強調されすぎ、ちらつきが発生したり、画面全体がぎらぎらした状態となったりする問題がある。通常再生時において、表示処理制御部２０２が拡大・鮮鋭化処理部２０４について設定する動画像用のパラメータは、エッジが強調され過ぎないように、画質改善の強度を抑えぎみにアップコンバートを行わせるための、動画再生における一般的なパラメータである。
【００３１】
一方、例えばスロー再生では、表示処理実行部２０５は、フレームバッファ（２）２１２ｂに格納されたビデオ画像を１枚ずつある程度の静止時間を取って画面表示する。よって、表示画像は完全には滑らかな動きとはならずコマ送りのような状態となる。
【００３２】
また、例えば巻き戻し再生では、表示処理実行部２０５は、フレームバッファ（２）２１２ｂに格納されたビデオ画像のすべてを表示するのではなく、一部のフレームを数枚飛ばしで画面表示する。よって、巻き戻し再生の表示画面も断続的なものとなる。
【００３３】
そこで、本コンピュータ１の動画再生ソフトウェア２００では、このスロー再生や巻き戻し再生等の特殊再生において、表示処理制御部２０２が、拡大・鮮鋭化処理部２０４に静止画像用のパラメータを設定するようにした。この静止画像用のパラメータは、動画像用のパラメータよりも画質改善効果を高めてアップコンバートを行わせるように調整されたパラメータである。
【００３４】
上記のような特殊再生では、人物等の被写体像の動きが断続的となってちらつき感が緩和されるため、通常再生時よりも強い画質改善を施すことが可能である。また、コマ送りとなることで１枚ごとの画像が視認されやすくなることに対して、画像改善効果の高いパラメータを適用することにより、より鮮鋭感の高い超解像画像を提示することが併せて実現される。
【００３５】
同様の理由で、本コンピュータ１の動画再生ソフトウェア２００では、一時停止が指示された場合、表示処理制御部２０２が、拡大・鮮鋭化処理部２０４に静止画像用のパラメータを設定する。この一時停止再生時、ビデオデコード処理部２０３は、即座にデコード処理を中断し、新たにビデオ画像をフレームバッファ（１）２１２ａに格納しないようにする。また、拡大・鮮鋭化処理部２０４は、静止画像用パラメータへの変更後、フレームバッファ（１）２１２ａに残っているビデオ画像が無くなるまで処理を続け、ビデオデコード処理部２０３がデコード処理を中断した時点までのビデオ画像を高解像度変換してフレームバッファ（２）２１２ｂに格納する。そして、表示処理実行部２０５は、フレームバッファ（２）２１２ｂに格納されている最後のビデオ画像を画面表示した時点で、画面更新を停止する。よって、画面上には、静止画像用パラメータによってアップコンバートが行われた高解像度ビデオ画像が表示された状態となる。
【００３６】
つまり、本コンピュータ１の動画再生ソフトウェア２００は、これまでのように、ＤＶＤ等に格納された低解像度または標準解像度の動画像データを高解像度の動画像データに変換して拡大表示する場合に、エッジが強調され過ぎないように、画質改善の強度を抑えぎみにアップコンバートを行わせるためのパラメータを一律に適用するのではなく、図３に示すように、その再生状態に応じて、画質改善の強度を適正化すべくパラメータ調整を実行する。
【００３７】
具体的には、図３に示すように、ユーザ操作処理部２０１から表示処理制御部２０２に対する再生指示（ａ１）が通常再生であれば、表示処理制御部２０２は、これまでと同じように、ビデオデコード処理部２０３および表示処理実行部２０５に対する再生モード設定（ａ２）を通常再生モードで行い、また、拡大・鮮鋭化処理部２０４に対するパラメータ設定（ａ３）を動画像用パラメータで行う。これに対して、スロー再生または巻き戻し再生の場合、表示処理制御部２０２は、ビデオデコード処理部２０３および表示処理実行部２０５を特殊再生モードに設定すると共に、拡大・鮮鋭化処理部２０４に（動画像データの再生ではあるが）静止画像用のパラメータを設定する。さらに、一時停止の場合においても、表示処理制御部２０２は、ビデオデコード処理部２０３および表示処理実行部２０５に一時停止再生を指示すると共に、拡大・鮮鋭化処理部２０４に静止画像用のパラメータを設定する。
【００３８】
図４は、本コンピュータ１が低解像度または標準解像度の動画像を高解像度の動画像に変換して拡大表示する場合の動作手順を示すフローチャートである。
【００３９】
ユーザによって通常再生指示が行われると（ステップＡ１のＹＥＳ）、本コンピュータ１は、動画像データの再生モードを通常再生モードに設定し（ステップＡ２）、画像の解像度を高めるためのアップコンバートに適用するパラメータとして動画像用のパラメータを設定する（ステップＡ３）。
【００４０】
一方、スロー再生または巻き戻し再生が指示されると（ステップＡ１のＮＯ，ステップＡ４のＹＥＳ）、本コンピュータ１は、動画像データの再生モードを特殊再生モードに設定し（ステップＡ５）、アップコンバートに適用するパラメータとして静止画像用のパラメータを設定する（ステップＡ６）。また、一時停止が指示された場合も（ステップＡ４のＮＯ，ステップＡ７のＹＥＳ）、本コンピュータ１は、動画像データの再生を一時停止再生に設定した際に（ステップＡ８）、静止画像用のパラメータをアップコンバートに適用するパラメータとして設定する（ステップＡ９）。
【００４１】
このように、本コンピュータ１は、低解像度または標準解像度の動画像を高解像度の動画像に変換して拡大表示する場合における画質改善の強度を再生状態に応じて適正化することを実現する。
【００４２】
ところで、以上では、拡大・鮮鋭化処理部２０４に設定するパラメータを調整することにより、再生状態に応じて、アップコンバート時に施される画質改善の強度を適正化することを実現する例を説明したが、このパラメータの調整に代えて、超解像処理のアルゴリズムを変更することで実現することも可能である。この変形例について図５および図６を参照しながら説明する。
【００４３】
超解像処理では、より高性能なアルゴリズムを適用することで、画質をより向上させることができる。その一方で、演算量が増加して１画面あたりの処理時間が長くなり、場合によっては、画面表示のフレームレートを維持できなくなる。例えば、２９．９７フレーム／秒（ｆｐｓ）といったフレームレートを維持するためには、１画面に対する超解像処理は約３３ミリ秒（ｍｓ）以内に完了しなければならない。このため、通常再生時においてリアルタイム表示を維持するために、アルゴリズムを省略／簡略化させることが必要となるのが一般的である。即ち、適用可能な超解像技術に制約が生じていた。
【００４４】
これに対して、前述したスロー再生や巻き戻し再生等の特殊再生においては、ビデオストリーム内で定義されるフレームレートを維持する必要がなく、１画面の表示時間や１秒あたりの表示フレーム数は、例えば動画再生ソフトウェア２００の製品仕様に基づき決定することができる。即ち、１画面あたりの処理時間の制約は緩和され、処理時間のかかる高度な超解像アルゴリズムを適用することも可能となる。
【００４５】
そこで、本コンピュータ１では、図２に機能ブロックを示した動画再生ソフトウェア２００の変形例として、図５に示すように、これまでと同様の省略／簡略化を図ったアルゴリズム（Ａ）２０４ａに加えて、高性能な超解像処理を実行するアルゴリズム（Ｂ）２０４ｂを拡大・鮮鋭化処理部２０４に併せて搭載する。そして、図６に示すように、ユーザ操作処理部２０１から表示処理制御部２０２に対する再生指示（ｂ１）がスロー再生または巻き戻し再生であった場合、表示処理制御部２０２は、ビデオデコード処理部２０３および表示処理実行部２０５に対する再生モード設定（ｂ２）を特殊再生モードで行い、その際に、これまでのアルゴリズム（Ａ）２０４ａに代えてアルゴリズム（Ｂ）２０４ｂを適用させるように、拡大・鮮鋭化処理部２０４に対する画質モード設定（ｂ３）を高画質モードとする（通常再生の場合は、これまでのアルゴリズム（Ａ）２０４ａを適用させる標準画質モード）。同様に、一時停止の場合においても、表示処理制御部２０２は、拡大・鮮鋭化処理部２０４に高画質モードを設定する。
【００４６】
これにより、再生状態に応じて、より高画質な画像表示を行うことがさらに実現されることになる。
【００４７】
（第２実施形態）
図７は、本発明の第２実施形態に係る情報処理装置（コンピュータ）１上で動作する動画再生ソフトウェア２００の機能ブロック図である。
【００４８】
いま、ユーザが、早送り再生を行うための操作を行ったものと想定する。この操作が行われると、ユーザ操作処理部２０１から表示処理制御部２０２に対して、早送り再生指示が通知される。
【００４９】
早送り再生においては、画像は断続的となるが次々と遷移するため、ユーザは、１画面毎の画像をあまり視認せず、超解像処理の効果は認識されにくい。そもそも、このような早送り再生時、ユーザは、１画面毎の画像を詳細に見ることを目的とはしていない。そこで、本実施形態のコンピュータ１上で動作する動画再生ソフトウェア２００では、この早送り再生および早戻し再生時、拡大・鮮鋭化処理部２０４によるアップコンバートを行わず、表示処理実行部２０５に、低解像度または標準解像度の動画像を拡大表示させるようにした。
【００５０】
早送り再生指示の通知を受けた表示処理制御部２０２は、ビデオデコード処理部２０３に早送りでの特殊再生を設定する。また、この時、表示処理制御部２０２は、拡大・鮮鋭化処理部２０４に対しては超解像処理の停止を指示する。さらに、この時、表示処理制御部２０２は、表示処理実行部２０５に通常拡大での特殊再生を設定する。
【００５１】
表示処理実行部２０５は、標準機能として、画像表示領域のサイズに合わせた大きさに拡大して画像を表示する機能を有しているのが一般的であり、この機能を活用して、フレームバッファ（１）２１２ａに格納された低解像度または標準解像度のビデオ画像の拡大表示を実行させる。
【００５２】
このように、早送り再生または早戻し再生においては、拡大・鮮鋭化処理部２０４によるアップコンバートを経ないで画像表示を行うことによって、ユーザに違和感等を与えることのない適宜なタイミングで、超解像処理によるハードウェア負担を減少させることができ、また、電力消費量を低減させることも実現する。
【００５３】
なお、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【００５４】
【図１】本発明の第１実施形態に係る情報処理装置（パーソナルコンピュータ）のシステム構成を示す図
【図２】同第１実施形態のコンピュータ上で動作する、テレビジョン機能およびＡＶ機能を実現する動画再生ソフトウェアの機能ブロック図
【図３】同第１実施形態のコンピュータ上で動作する動画再生ソフトウェアが再生状態に応じて画質改善の強度を適正化すべくパラメータ調整を実行する例を説明するための図
【図４】同第１実施形態のコンピュータが低解像度または標準解像度の動画像を高解像度の動画像に変換して拡大表示する場合の動作手順を示すフローチャート
【図５】同第１実施形態のコンピュータ上で動作する動画再生ソフトウェアの変形例を説明するための機能ブロック図
【図６】同第１実施形態のコンピュータ上で動作する変形例に係る動画再生ソフトウェアが再生状態に応じて画質改善の強度を適正化すべくアルゴリズム選択を実行する例を説明するための図
【図７】同第２実施形態のコンピュータ上で動作する動画再生ソフトウェアの機能ブロック図
【符号の説明】
【００５５】
１…情報処理装置（パーソナルコンピュータ）、１１…ＣＰＵ、１２…ノースブリッジ、１３…主メモリ、１４…表示コントローラ、１４Ａ…ビデオメモリ、１５…ＬＣＤ、１６…サウスブリッジ、１７…サウンドコントローラ、１８…スピーカ、１９…ＢＩＯＳ−ＲＯＭ、２０…ＬＡＮコントローラ、２１…ＨＤＤ、２２…ＯＤＤ、２３…ＬＡＮコントローラ、２４…ＵＳＢコントローラ、２５…ＴＶチューナ、２６…エンベデッドコントローラ／キーボードコントローラ（ＥＣ／ＫＢＣ）、２７…キーボード、２８…ポインティングデバイス、１００…オペレーティングシステム、２００…動画再生ソフトウェア、２０１…ユーザ操作処理部、２０２…表示処理制御部、２０３…ビデオデコード処理部、２０４…拡大・鮮鋭化処理部、２０５…表示処理実行部、２１１…ビデオストリームバッファ、２１２ａ，２１２ｂ…フレームバッファ。
【図１】
2010118772.tif 000003
【図２】
2010118772.tif 000004
【図３】
2010118772.tif 000005
【図４】
2010118772.tif 000006
【図５】
2010118772.tif 000007
【図６】
2010118772.tif 000008
【図７】
2010118772.tif 000009
【手続補正書】
【提出日】平成21年9月9日(2009.9.9)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバータと、
動画像データを標準のフレームレートで表示する通常再生モード時、動画像データの解像度を変換する際に鮮鋭度を高めるために、被写体像の鮮鋭度が第１の鮮鋭度に設定されるように前記アップコンバータを制御し、動画像データを標準のフレームレートとは異なるフレームレートで表示する特殊再生モード時、前記鮮鋭度が前記第１の鮮鋭度よりも効果の高い第２の鮮鋭度に設定されるように前記アップコンバータを制御する制御手段と、
を具備することを特徴とする情報処理装置。
【請求項２】
前記特殊再生モードは、動画像データを標準のフレームレートよりも遅いフレームレートで再生することを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記特殊再生モードは、動画像データ中の各フレームを、時間的に遡り、かつ、予め定められた割合で間引きしながら巻き戻し再生することを特徴とする請求項１記載の情報処理装置。
【請求項４】
前記制御手段は、動画像データ中の任意のフレームを静止画像として表示する一時停止モードが選択された場合、前記鮮鋭度が前記第１の鮮鋭度に設定されるように前記アップコンバータを制御することを特徴とする請求項１記載の情報処理装置。
【請求項５】
前記制御手段は、動画像データの解像度を高めるためであって鮮鋭度に関係する前記アップコンバータに与えられるパラメータを調整することによって、前記アップコンバータに設定される前記解像度を制御することを特徴とする請求項１記載の情報処理装置。
【請求項６】
前記アップコンバータは、第１のアルゴリズムを用いて、動画像データの解像度を高める第１の動作モードと、前記第１のアルゴリズムよりも鮮鋭度を高める効果の高い第２のアルゴリズムを用いて、動画像データの解像度を高める第２の動作モードとを有し、
前記制御手段は、前記第１の動作モードおよび前記第２の動作モードのいずれを適用するのかを選択することによって、前記アップコンバータに設定される前記鮮鋭度を制御することを特徴とする請求項１記載の情報処理装置。
【請求項７】
動画像データを拡大して表示する機能を有する表示コントローラをさらに具備し、
前記制御手段は、動画像データを標準のフレームレートよりも高いフレームレートで表示する早送り再生モードまたは早戻し再生モードのいずれかが選択された場合、前記アップコンバータによる前記動画像データの解像度の変換を行わずに、前記第１の解像度の動画像データの拡大表示を前記表示コントローラに実行させることを特徴とする請求項１記載の情報処理装置。
【請求項８】
第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバータと、
動画像データを拡大表示する機能を有する表示コントローラと、
動画像データが標準のフレームレートまたは標準のフレームレートよりも低いフレームレートで表示され、または、動画像データが静止画像として表示される場合、前記動画像データの解像度の変換を前記アップコンバータに実行させ、動画像データを標準のフレームレートよりも高いフレームレートで表示する早送り再生モードまたは早戻し再生モードのいずれかが選択された場合、前記第１の解像度での動画像データの拡大表示を前記表示コントローラに実行させる制御手段と、
を具備することを特徴とする情報処理装置。
【請求項９】
第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバータを具備する情報処理装置における動画像データのアップコンバート制御方法であって、
動画像データを標準のフレームレートで表示する通常再生モード時、動画像データの解像度を変換する際に被写体像の鮮鋭度が第１の鮮鋭度に設定されるように前記アップコンバータを制御し、
動画像データの解像度の変換時に鮮鋭度を高め、
動画像データを標準のフレームレートとは異なるフレームレートで表示する特殊再生モード時、前記鮮鋭度が前記第１の鮮鋭度よりも効果の高い第２の鮮鋭度に設定されるように前記アップコンバータを制御する、
ことを特徴とする動画像データのアップコンバート制御方法。
【請求項１０】
前記特殊再生モードは、動画像データを標準のフレームレートよりも遅いフレームレートで再生することを特徴とする請求項９記載の動画像データのアップコンバート制御方法。
【請求項１１】
前記特殊再生モードは、動画像データ中の各フレームを、時間的に遡り、かつ、予め定められた割合で間引きしながら表示する巻き戻し再生することを特徴とする請求項９記載の動画像データのアップコンバート制御方法。
【請求項１２】
さらに、
前記動画像データ中の任意のフレームを静止画像として表示する一時停止モードが選択された場合、前記鮮鋭度が前記第１の鮮鋭度に設定されるように前記アップコンバータを制御する、
ことを特徴とする請求項９記載の動画像データのアップコンバート制御方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
前述の目的を達成するために、この発明の情報処理装置は、第１の解像度の動画像データを前記第１の解像度よりも解像度の高い第２の解像度の動画像データに変換するアップコンバータと、動画像データを標準のフレームレートで表示する通常再生モード時、動画像データの解像度を変換する際に鮮鋭度を高めるために、被写体像の鮮鋭度が第１の鮮鋭度に設定されるように前記アップコンバータを制御し、動画像データを標準のフレームレートとは異なるフレームレートで表示する特殊再生モード時、前記鮮鋭度が前記第１の鮮鋭度よりも効果の高い第２の鮮鋭度に設定されるように前記アップコンバータを制御する制御手段と、を具備することを特徴とする。