(57)【要約】  【課題】符号化画像を復号して表示する場合に、画質優先と速度優先とを切り替えることを可能とする。  【解決手段】ユーザが画質優先モードと速度優先モードの一方を選択し、選択画像の画素数が付加情報から取得される（Ｓ２）。画質優先モードを選択した場合には、第１の展開領域が設定され、速度優先モードを選択した場合には、第１の展開領域より小さいサイズの第２の展開領域が設定される。設定された展開領域の画素数と、（画素数×縮小率）の値、すなわち、得られる復号画像の画素数との大小関係が比較され（Ｓ７）、縮小率が確定され（Ｓ９）、等倍復号または縮小復号の復号処理が実行され（Ｓ１０）、選択画像が表示される（Ｓ１２）。選択画像を表示する場合、画像表示部５の画面サイズに合うように、復号画像のサイズ変換処理がなされる。【選択図】図２
2008193326.tif 000002
【特許請求の範囲】
【請求項１】
圧縮符号化された画像を表示部に表示する画像再生表示装置において、
入力符号化画像データを蓄積する第１のメモリと、
上記第１のメモリに蓄積された上記入力符号化画像データを復号する復号部と、
表示画像の表示領域より大きなサイズの第１の展開領域と、上記第１の展開領域より小さいサイズの第２の展開領域との一方が設定可能とされ、上記復号部で復号された画像を蓄積する第２のメモリと、
上記第２のメモリに展開された画像を表示する表示部と、
画質優先モードと速度優先モードとの一方のモードに応じて、上記復号部および上記第２のメモリを制御する制御部とを備え、
上記画質優先モードの場合に、上記制御部は、上記入力符号化画像データの画像サイズが上記第１の展開領域より小であれば、等倍復号を行い、上記入力符号化画像データの画像サイズが上記第１の展開領域より大であれば、縮小復号を行うように、上記復号部を制御し、復号された画像を上記表示部に表示可能なサイズにサイズ変換処理し、
上記速度優先モードの場合に、上記制御部は、上記第２の展開領域を設定し、上記入力符号化画像データの画像サイズが上記第２の展開領域より小であれば、等倍復号を行い、上記入力符号化画像データの画像サイズが上記第２の展開領域より大であれば、縮小復号を行うように、上記復号部を制御し、復号された画像を上記表示部により表示可能なサイズにサイズ変換処理するようにした画像再生表示装置。
【請求項２】
画質優先モードと速度優先モードとの一方を指定する指示部が設けられ、
上記制御部に対して、上記指定部のモード指定入力が供給される請求項１記載の画像再生表示装置。
【請求項３】
上記入力符号化画像データの画像サイズに代えて、上記入力符号化画像データのファイルサイズに応じて上記画質優先モードと上記速度優先モードとが切り替えられる請求項１記載の画像再生表示装置。
【請求項４】
上記第２の展開領域は、上記表示部の表示領域より小さいサイズとされた請求項１記載の画像再生表示装置。
【請求項５】
上記制御部が入力符号化画像データの付加情報に基づいて、上記入力符号化画像データの画像サイズを取得する請求項１記載の画像再生表示装置。
【請求項６】
上記復号部は、１／２、１／４、および１／８の何れかの比率でサイズを縮小する縮小復号を行う請求項１記載の画像再生表示装置。
【請求項７】
圧縮符号化された画像を表示部に表示する画像再生表示方法において、
上記画質優先モードの場合に第１の展開領域を設定し、上記速度優先モードの場合に、上記第１の展開領域より小さいサイズの第２の展開領域を設定するステップと、
設定された第１および第２の展開領域の一方と、上記入力符号化画像データの画像サイズとを比較することによって、設定された展開領域以下の画像サイズとなるように、復号部の縮小率を設定し、設定された縮小率でもって復号する復号ステップと、
上記復号ステップにより復号された画像を表示部に表示するステップと
からなる画像再生表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えばメモリカード等の記憶媒体に記憶されている画像をテレビジョン受像機の画面に表示するのに使用される画像再生表示装置および方法に関する。
【背景技術】
【０００２】
例えばテレビジョン受像機にメモリカードの装着用のスロットを設け、デジタルスチルカメラで撮影した画像が記憶されているメモリカードをスロットに装着し、テレビジョン受像機の大画面で撮影画像を見ることが行われている。テレビジョン受像機の表示画面は、例えばＨＤ(High Definition) に対応して1920×1080画素の仕様とされている。最近では、デジタルスチルカメラの解像度が高くなる傾向があり、1000万画素を超える製品も登場している。
【０００３】
このような画素数が極めて多い撮影画像を表示する場合には、メモリの容量の関係から圧縮符号化例えばＪＰＥＧ（Joint Photographic Experts Group) を復号する場合に縮小復号を行うようにしている。例えば下記の特許文献１には、サムネイル画像を作成する場合に縮小復号を行うことが記載されている。
【０００４】
【特許文献１】特開２００５−２３５０２９号公報
【０００５】
縮小復号は、８×８のＤＣＴ(Discrete Cosine Transform：離散コサイン変換) ブロック単位で符号化されている例えばＪＰＥＧ画像に関して、ＤＣ（直流）成分および低域側のＡＣ（交流）成分の係数のみを抽出して復号する方法である。ＤＣ成分および低域側のＡＣ成分からなる４×４のブロックを構成して復号することによって、４×４の復号画像が得られる。この場合、１／２に縮小された復号画像が得られる。さらに、２×２のブロックを構成して復号すると、１／４に縮小された復号画像が得られ、ＤＣのみを使用すると、１／８に縮小された復号画像が得られる。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
縮小復号は、縮小の割合が大きいと画質の劣化が大きくなる。この問題を回避するためには、復号画像が蓄積されるメモリの容量を大きくし、展開領域を大きくすることが必要とされる。メモリの容量の増加は、コストの上昇をもたらす。一方、メモリの容量を大きくして画質を改善する場合、コストの上昇のみならず、画像の画素数が多いために、符号化データを取り込むのに要する時間が長くなると共に、復号時間が長くなる問題が生じ、ユーザが所望の画像を選択してから、選択した画像を画面に表示するまでの待ち時間が長くなる。
【０００７】
したがって、この発明の目的は、ユーザが画質優先モードと速度優先モードとの一方を設定することを可能とし、表示されるまでの時間がかかる問題、または表示画像の劣化が気にならないようにする画像再生表示装置および方法を提供することにある。
【課題を解決するための手段】
【０００８】
上述した課題を解決するために、この発明は、圧縮符号化された画像を表示部に表示する画像再生表示装置において、
入力符号化画像データを蓄積する第１のメモリと、
第１のメモリに蓄積された入力符号化画像データを復号する復号部と、
表示画像の表示領域より大きなサイズの第１の展開領域と、第１の展開領域より小さいサイズの第２の展開領域との一方が設定可能とされ、復号部で復号された画像を蓄積する第２のメモリと、
第２のメモリに展開された画像を表示する表示部と、
画質優先モードと速度優先モードとの一方のモードに応じて、復号部および第２のメモリを制御する制御部とを備え、
画質優先モードの場合に、制御部は、入力符号化画像データの画像サイズが第１の展開領域より小であれば、等倍復号を行い、入力符号化画像データの画像サイズが第１の展開領域より大であれば、縮小復号を行うように、復号部を制御し、復号された画像を表示部に表示可能なサイズにサイズ変換処理し、
速度優先モードの場合に、制御部は、第２の展開領域を設定し、入力符号化画像データの画像サイズが第２の展開領域より小であれば、等倍復号を行い、入力符号化画像データの画像サイズが第２の展開領域より大であれば、縮小復号を行うように、復号部を制御し、復号された画像を表示部により表示可能なサイズにサイズ変換処理するようにした画像再生表示装置である。
【０００９】
この発明は、圧縮符号化された画像を表示部に表示する画像再生表示方法において、
画質優先モードの場合に第１の展開領域を設定し、速度優先モードの場合に、第１の展開領域より小さいサイズの第２の展開領域を設定するステップと、
設定された第１および第２の展開領域の一方と、入力符号化画像データの画像サイズとを比較することによって、設定された展開領域以下の画像サイズとなるように、復号部の縮小率を設定し、設定された縮小率でもって復号する復号ステップと、
復号ステップにより復号された画像を表示部に表示するステップと
からなる画像再生表示方法である。
【発明の効果】
【００１０】
この発明は、再生画質および復号時間の一方を優先基準として画像を再生表示する構成とし、ユーザが画質優先と速度優先との一方を設定可能としているので、画質優先の場合に復号時間が長くなった場合においても、ユーザが選択した結果と認識できるので、復号時間が長いことを疑問に思うことを少なくできる。同様に、再生画像の画質が劣化したものであっても、速度優先を選択した結果と認識できるので、ユーザが許容することができる。
【発明を実施するための最良の形態】
【００１１】
以下、この発明の一実施の形態について説明する。図１は、一実施の形態における画像再生表示装置１の構成を示す。例えばデジタルテレビジョン受像機の一部の機能として画像再生表示装置１が実現される。
【００１２】
画像データ入力部２を介して入力符号化画像データが第１のメモリとしてのメモリ３のバッファ領域３ａに取り込まれる。入力符号化画像データは、ＪＰＥＧにより圧縮された画像データであり、以下、単にＪＰＥＧ画像（データ）と称する。バッファ領域３ａおよび第２のメモリとしての展開領域３ｂが一つのメモリ３の領域を分割することによって構成されている。但し、バッファ用および展開用のそれぞれで別々のメモリを使用しても良い。
【００１３】
画像データ入力部２は、例えばメモリカードの装着用のスロットである。他の例としては、有線または無線インターフェースを使用できる。有線インターフェースの例は、有線ＬＡＮ（Local Area Network）、ＩＥＥＥ(Institute of Electrical and Electronics Engineers) １３９４等であり、無線インターフェースの例は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＬＡＮ、ＵＷＢ（Ultra Wide Band ）等である。インターフェースを介してコンテンツデータの転送（ストリーミング）や、コンテンツ管理データの転送がなされる。
【００１４】
バッファ領域３ａに蓄積されたＪＰＥＧ画像が画像復号部４によって復号される。画像復号部４は、等倍復号および縮小復号の一方によりＪＰＥＧ画像を復号する。画像復号部４は、ハードウェアまたはソフトウェアの構成とされる。画像復号部４によって復号された画像（復号画像と称する）がメモリ３の展開領域３ｂに蓄積される。展開領域３ｂから出力される画像（表示画像と称する）が画像表示部５によって表示される。画像表示部５は、ＬＣＤ（Liquid Crystal Display) 、ＰＤＰ(Plasma Display Panel)等のＦＰＤ(Flat Panel Display)であり、テレビジョン受像機に付属しているものである。
【００１５】
画像再生表示装置１の全体が制御部６によって制御される。制御部６は、ＣＰＵ(Central Processing Unit) 、ＲＯＭ(Read Only Memory)およびＲＡＭ（Random Access Memory）などからなる。ＲＯＭは、ＣＰＵ上で動作されるプログラムや動作のために必要なデータが予め記憶される。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに記憶されたプログラムやデータを必要に応じて読み出し、ＲＡＭをワークメモリとして用いながら、画像再生表示装置１の各部を制御する。
【００１６】
制御部６に対して操作部７が接続されている。操作部７は、ユーザが操作するキー、リモートコントロール等であり、例えばテレビジョン受像機の画面表示を利用したＧＵＩの構成とされている。操作部７には、画質優先モードと速度優先モードとの一方を設定するための設定手段が設けられている。
【００１７】
上述した画像再生表示装置１の制御部６によりなされる制御動作について、図２のフローチャートを参照して説明する。画像データ入力部２に対して例えばメモリカードが装着され、メモリカード上のＪＰＥＧファイルが取得され、メモリ３のバッファ領域３ａに対して蓄積される。デジタルカメラで撮影されたＪＰＥＧファイルは、通常、サムネイル画像や撮影情報等を付加したＥｘｉｆ(Exchangeable image file format for digital still camera) 形式のファイルとして生成され、制御部６は、これらの情報を取得する。
【００１８】
図３に示すように、例えばテレビジョン受像機の表示画面（画像表示部５）に画像表示設定メニュー画面Ｐ１を表示させる。ユーザがリモートコントロールのコマンダの上下キーを操作して、画質優先モードと速度優先モードの一方を選択する。画像表示設定を行うと、ＪＰＥＧファイルに含まれるサムネイル画像が画面上に分割画面Ｐ２として表示される。
【００１９】
ユーザは、リモートコマンダの方向キーを操作して表示させたい画像を選択する。例えば選択される画像が他の画像と識別できる色の枠、ハイライトの枠等で示される。分割画面において、所望の画像が選択されると、リモートコマンダの決定ボタンが操作され、選択されたサムネイルに対応する画像Ｐ３が画面上に表示される。
【００２０】
画像表示設定メニュー画面Ｐ１には、サムネイル画像の分割画面Ｐ２が表示される状態、または選択された画像Ｐ３が表示される状態の何れからもリモートコマンダのキー操作等によって遷移することが可能とされている。
【００２１】
図２に示すフローチャートにおいて、ステップＳ１は、上述したように、分割画面Ｐ２において、所望の画像を選択する処理を示している。ステップＳ２において、選択された画像の画素数がＪＰＥＧ画像データから取得される。なお、画素数とサイズとは対応しており、画素数が多いほど画像のサイズが大きくなる。また、画像表示部５は、アスペクト比が（１６：９）の画像を表示可能とされている。デジタルカメラの画像のアスペクト比は、多くの場合（４：３）である。
【００２２】
選択された画像の画素数が処理できないほど多い場合には、ステップＳ４において、再生不可通知がユーザに対してなされる。例えば正常に再生ができない旨のメッセージが表示される。表示以外に音声を発生しても良い。
【００２３】
ステップＳ３において、再生可能な画素数であると判定されると、再生条件からメモリ３の展開領域３ｂが画素数（サイズ）が異なる第１の展開領域および第２の展開領域の一方に設定される。再生条件は、上述したように、画像表示設定メニュー画面Ｐ１において、設定されたモードを意味する。すなわち、画質優先モードを選択した場合には、第１の展開領域が設定され、速度優先モードを選択した場合には、第１の展開領域より小さいサイズの第２の展開領域が設定される。
【００２４】
ステップＳ６において、画像復号部４における縮小率が１、すなわち、等倍に初期設定される。ステップＳ７において、ステップＳ５において設定された展開領域の画素数と、（画素数×縮小率）の値、すなわち、得られる復号画像の画素数との大小関係が比較される。展開領域の画素数が復号画像の画素数以上であると判定されると、処理がステップＳ９に移る。ステップＳ９は、縮小率を確定する処理である。
【００２５】
縮小率が確定されると、ステップＳ１０において、ＪＰＥＧ画像の復号処理が実行される。ステップＳ１１において、復号が正常終了したか否かが判定される。復号が正常終了したと判定されると、ステップＳ１２において、選択画像が表示される。選択画像を表示する場合、画像表示部５の画面サイズに合うように、復号画像のサイズ変換処理がなされる。なお、アスペクト比は、維持したまま復号画像が表示される。
【００２６】
ステップＳ７において、展開領域が（画素数×縮小率）の値より小であれば、ステップＳ８において、縮小率を１／２倍とした場合の画素数が算出される。そして、ステップＳ７において、再度、展開領域と（画素数×縮小率）の値と比較される。未だ展開領域が（画素数×縮小率）の値より小であれば、ステップＳ８において、さらに縮小率を１／２倍した場合の画素数が算出される。そして、ステップＳ７において、再度、展開領域と（画素数×縮小率）の値と比較される。まだ、展開領域が（画素数×縮小率）の値より小であれば、ステップＳ８において、縮小率を１／２倍した場合の画素数が算出される。そして、ステップＳ７において、再度、展開領域と（画素数×縮小率）の値と比較される。
【００２７】
ＪＰＥＧの場合では、縮小率を例えば１／２、１／４、１／８と変化させる縮小復号が可能とされている。ＪＰＥＧの場合には、（８×８）のＤＣＴ係数（１つのＤＣ成分と６３個のＡＣ成分）によりＪＰＥＧ画像が構成されている。高域側のＡＣ係数を除去して（４×４）の係数のブロックとして復号を行うと、復号画像のサイズが１／２に縮小され、（２×２）の係数のブロックとして復号を行うと、復号画像のサイズが１／４に縮小され、ＤＣ成分のみを復号すると、復号画像のサイズが１／８に縮小される。縮小率が高いほど、復号に要する時間が短くなる。
【００２８】
なお、図２のフローチャート中のステップＳ１１において、復号が正常終了しないと判定された場合には、ステップＳ４の再生不可通知の処理がなされる。
【００２９】
図４は、画質優先モードの画像処理の流れを示す。Ｍ１がステップＳ５において設定された第１の展開領域であり、Ｄが画像表示部５の表示領域を示す。例えば表示領域がＨＤに対応して1920×1080画素とされている。画質優先モードでは、メモリ３の展開領域３ｂに設定される第１の展開領域Ｍ１の画素数が表示領域Ｄの縦および横方向で２倍(3840 ×2160画素) 以上（２倍よりやや大）とされている。
【００３０】
図５は、速度優先モードの画像処理の流れを示す。Ｍ２がステップＳ５において設定された展開領域であり、Ｄが画像表示部５の表示領域を示す。例えば表示領域が1920×1080画素とされている。速度優先モードでは、メモリ３の展開領域３ｂに設定される第２の展開領域Ｍ２の画素数が第１の展開領域Ｍ１に比して小とされる。例えば表示領域Ｄの画素数よりも少ないものとされる。
【００３１】
図４に示す画像優先モードの処理の例では、選択画像Ｐ１１の画素数（サイズ）が展開領域Ｍ１より小であるので、ステップＳ９において、縮小率が１（等倍）に設定され、復号がなされ、復号画像Ｐ１２が得られる。復号画像Ｐ１２が展開領域Ｍ１内に展開される。復号画像Ｐ１２が表示画面のサイズに合うように、縮小された表示画像Ｐ１３が表示領域Ｄに表示される。復号画像Ｐ１２を画素数の少ない表示画像Ｐ１３に縮小する処理は、縮小率がそれほど高くない場合には、拡大処理に比して画質劣化が殆ど生じない利点がある。
【００３２】
画質優先モードにおいて、図４の例と異なり、選択画像Ｐ１１の画素数（サイズ）が第１の展開領域Ｍ１より大きい場合もありうる。その場合には、縮小復号がなされる。但し、展開領域Ｍ１が十分な画素数とされているので、高い縮小率でもって縮小復号が行われる可能性を低くすることができ、表示画像Ｐ１３の劣化を小とすることができる。
【００３３】
図５に示す速度優先モードの処理の例では、選択画像Ｐ２１の画素数（サイズ）が展開領域Ｍ１より大であるので、ステップＳ９において、縮小率が１／２、１／４、または１／８に設定され、復号がなされ、復号画像Ｐ２２が得られる。復号画像Ｐ２２が展開領域Ｍ２内に展開される。復号画像Ｐ２２が表示画面のサイズに合うように、拡大された表示画像Ｐ２３が表示領域Ｄに表示される。
【００３４】
復号画像Ｐ２２を画素数の多い表示画像Ｐ２３に拡大する処理は、画質劣化が生じ、表示画像Ｐ２３がボケた画像となる。但し、縮小復号に要する時間は、等倍復号に要する時間より短いために、表示する画像を選択してから表示画像Ｐ２３が表示されるまでの時間を短縮することができる。このように、速度優先モードにおいては、展開領域を少ない画素数（小さなサイズ）に設定することによって、縮小復号が行われ、選択から表示までにかかる時間を短縮化できる。
【００３５】
以上、この発明の一実施の形態について説明したが、この発明は、一実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲内で様々な変形や応用が可能である。例えば上述した一実施の形態では、ユーザのマニュアル（リモートコントロールのコマンダ）の操作によって、画質優先モードと速度優先モードとの一方を設定している。しかしながら、モードの設定後に、モードを自動的に切り替えるようしても良い。例えば速度優先モードを選択した場合にも、画像サイズ、ファイルサイズ、データの転送速度等の点から復号時間が長くならないと予想できる場合には、画質優先モードに切り替えて画質を良好にしても良い。また、速度優先モードにおいて、画質の劣化が著しいと予想される場合には、展開領域のサイズをやや大きくしても良い。
【００３６】
また、この発明は、静止画像を表示するのにスライドショーによって表示するようにしても良い。スライドショーを適用するにあたって、通常の表示と優先基準を共通にしても良いし、スライドショー専用の優先基準を設けても良い。
【００３７】
さらに、この発明は、テレビジョン受像機に限らず、メモリカードに蓄えられている画像を表示するためのビュウワーに対しても適用できる。また、ＪＰＥＧに限らず、縮小復号が可能で、その場合に復号に要する時間が短縮化できる圧縮符号化方式を使用することができる。
【図面の簡単な説明】
【００３８】
【図１】この発明の一実施の形態による画像再生表示装置の構成を示すブロック図である。
【図２】この発明の一実施の形態による画像再生表示装置の動作の流れを説明するためのフローチャートである。
【図３】この発明の一実施の形態におけるモード設定方法の説明に使用する画面表示の一例を示す略線図である。
【図４】この発明の一実施の形態における画質優先モードの処理の流れを概略的に示す略線図である。
【図５】この発明の一実施の形態における速度優先モードの処理の流れを概略的に示す略線図である。
【符号の説明】
【００３９】
１  画像再生表示装置
２  画像データ入力部
３  メモリ
３ａ  バッファ領域
３ｂ  展開領域
４  画像復号部
５  画像表示部
６  制御部
７  操作部
【図１】
2008193326.tif 000003
【図２】
2008193326.tif 000004
【図３】
2008193326.tif 000005
【図４】
2008193326.tif 000006
【図５】
2008193326.tif 000007