(57)【要約】【課題】  回路規模の削減と複数機能の実現を両立させる。【解決手段】  撮像装置１２は、画像を撮像して画像データとして出力する。画像加工部１８は、撮像装置１２から出力された画像データに所定の処理を施して、ＬＣＤ２８などの表示装置の仕様に合わせた画像データに加工する。フレームバッファ２０は、加工後の画像データを一時記憶する。ＬＣＤ２８は、フレームバッファ２０内の画像データを表示する。ＭＰＥＧコーデック部４８は、外部から入力された符号化画像データを復号する。セレクタ１６は、撮像装置１２から出力された画像データと、符号化画像データを復号して得られた画像データのいずれかを選択して画像加工部１８に入力させる。【選択図】  図４
2006339768.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置から出力された画像データを表示装置に表示するために加工する画像加工部を備える画像処理回路において、
前記画像加工部は、符号化画像データを復号して得られた画像データを加工する回路と共通化されていることを特徴とする画像処理回路。
【請求項２】
画像データを表示装置に表示するために加工する画像加工部と、
撮像装置から出力された画像データと符号化画像データを復号して得られた画像データとのいずれかを選択して前記画像加工部に入力させるセレクタと、
を備えることを特徴とする画像処理回路。
【請求項３】
外部の撮像装置から出力された画像データに所定の処理を施して外部の表示装置の仕様に合わせた画像データに加工する画像加工部と、
前記表示装置に表示させるために加工後の画像データを一時記憶するフレームバッファと、
外部から入力された符号化画像データを復号する復号部と、
前記撮像装置から出力された画像データに代えて、前記復号部により復号された画像データを前記画像加工部に入力させるセレクタと、
を備えることを特徴とする画像処理回路。
【請求項４】
前記符号化画像データは動画像に由来するデータであり、前記復号部において復号された画像データがフレームを単位として前記画像加工部に入力されることを特徴とする請求項３に記載の画像処理回路。
【請求項５】
前記画像加工部による処理済みの画像データを符号化する符号化部をさらに備えることを特徴とする請求項３または４に記載の画像処理回路。
【請求項６】
前記復号部は、
符号化動画像データを復号する動画像データ復号処理部と
符号化静止画像データを復号する静止画像データ復号処理部とを含み、
前記セレクタは外部信号に応じて前記符号化動画像データと前記符号化静止画像データのいずれか一方を切替可能に選択することを特徴とする請求項３に記載の画像処理回路。
【請求項７】
同一半導体基板上に集積化されたことを特徴とする請求項３から６のいずれかに記載の画像処理回路。
【請求項８】
無線通信により符号化画像データを取得するデータ通信部と、
請求項３ないし７のいずれかに記載の画像処理回路と、
を備えることを特徴とする電子機器。
【請求項９】
画像を撮像して画像データとして出力する撮像装置と、
フレームバッファ内の画像データを表示する表示装置と、
をさらに備えることを特徴とする請求項８に記載の電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像撮影機能と表示機能を備えた画像処理回路、およびそれを搭載した電子機器に関する。
【背景技術】
【０００２】
一般に、ＬＣＤ付きディジタルカメラのような撮像装置と表示装置を有する電子機器に搭載される画像処理回路では、撮像装置から出力された画像データを表示装置に表示するための画像処理が施される。そのため、画像データを一時記憶するフレームバッファの前段に、画像加工用の回路が実装されている（例えば、特許文献１参照）。
【０００３】
また、有線または無線通信を介して得られた符号化画像データを閲覧するための電子機器に搭載される画像処理回路においても、符号化画像データを表示装置に表示させるためには、データ復号部において復号された画像データをフレームバッファに一時記憶させる必要がある。
【特許文献１】特開２００４−３５６８４４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
近年では、上述したようなカメラ機能や通信機能、画像閲覧機能などの複数の機能を併せ持つ携帯型の電子機器が多数市場に出回るようになっている。携帯性を重視する機器では、回路規模の削減と複数機能の実現を両立させることが開発の目標のひとつとなっている。
【０００５】
本発明はこうした状況に鑑みてなされたものであり、その目的は、画像撮影機能と表示機能を備えた画像処理回路において、回路規模を削減する技術を提供することにある。
【課題を解決するための手段】
【０００６】
本発明のある態様は、撮像装置から出力された画像データを表示装置に表示するために加工する画像加工部を備える画像処理回路であって、画像加工部は、符号化画像データを復号して得られた画像データを加工する回路と共通化されている。
【０００７】
この態様によると、撮像装置から出力された画像データと、符号化画像データを復号して得られた画像データを共通の画像加工部で処理するようにしたので、複数の画像加工部を備える必要がなくなり回路規模を削減することができる。
【０００８】
本発明の別の態様もまた、画像処理回路である。この画像処理回路は、画像データを表示装置に表示するために加工する画像加工部と、撮像装置から出力された画像データと符号化画像データを復号して得られた画像データとのいずれかを選択して画像加工部に入力させるセレクタと、を備える。
【０００９】
この態様によると、撮像手段から出力された画像データと符号化画像データを復号して得られた画像データとのいずれかを、セレクタにより選択的に画像加工部に入力するようにしたので、復号後の画像データについても所定の加工を施したうえで表示装置に表示させることができる。
【００１０】
本発明のさらに別の態様もまた、画像処理回路である。この画像処理回路は、外部の撮像装置から出力された画像データに所定の処理を施して外部の表示装置の仕様に合わせた画像データに加工する画像加工部と、前記表示装置に表示させるために加工後の画像データを一時記憶するフレームバッファと、外部から入力された符号化画像データを復号する復号部と、撮像装置から出力された画像データに代えて、復号部により復号された画像データを画像加工部に入力させるセレクタと、を備える。
【００１１】
この態様によると、復号された画像データをセレクタを介して画像加工部に入力させることで、復号された画像データについても表示装置に表示させる前に所定の加工を施すことができる。また、撮像部から出力された画像データと復号後の画像データのいずれをも共通の画像加工部に入力させるので、画像加工用の回路を複数持つ必要がなく、画像処理回路の規模を削減することができる。
【００１２】
本発明のさらに別の態様は、電子機器である。この電子機器は、無線通信により符号化画像データを取得するデータ通信部と、上述したいずれかの画像処理回路と、を備える。
【００１３】
この態様によると、通信機能と撮像機能の両方を備えた電子機器において、無線通信により得られた符号化画像データについても復号後の画像データに所定の加工を施したうえで表示装置に表示することができる。なお、電子機器は、画像を撮像して画像データとして出力する撮像装置と、フレームバッファ内の画像データを表示する表示装置のいずれか一方または両方を備えていてもよい。
【００１４】
なお、以上の構成要素の任意の組合せ、本発明の表現を装置、方法、システムなどの間で変換したものもまた、本発明の態様として有効である。
【発明の効果】
【００１５】
本発明によれば、画像処理回路の規模を削減することができる。
【発明を実施するための最良の形態】
【００１６】
図１は、本発明の一実施形態における画像処理回路１００の構成を示す。画像処理回路１００の構成は、主に、ハードウエア的要素およびソフトウエア的要素の連携によって実現される機能ブロックで描いている。この機能ブロックは、ハードウエア的には任意のアナログフロントエンドプロセッサやＤＳＰ（Digital Signal Processor）などのマイクロプロセッサ、メモリ、およびオペアンプや容量などのアナログ回路素子などで実現でき、ソフトウエア的にはメモリにロードされたプログラムなどによって実現される。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者に理解されるところである。
【００１７】
画像処理回路１００は、インタフェース（Ｉ／Ｆ）部１４、セレクタ１６、画像加工部１８、フレームバッファ２０、ＬＣＤインタフェース部２４、およびＭＰＥＧデコード部４６から構成される。
【００１８】
インタフェース部１４には、図示しない撮像装置により撮像された、符号化されていない画像データが入力される。入力された画像データは、セレクタ１６を介して画像加工部１８に転送される。
【００１９】
画像加工部１８は、インタフェース部１４およびセレクタ１６を介して転送された非圧縮の画像データに所定の処理を施して、画像処理回路１００に接続される表示装置（図示せず）の仕様に合わせた画像データに変換する。より具体的には、画像加工部１８は、記憶領域１８ａを作業領域として、転送されてきた非圧縮の画像データに対して、表示装置の仕様に合わせた拡大、縮小、回転、または一部の画像領域の切り取りなどの加工を施す。例えば、撮像装置により撮像される画像データのサイズが画素数８００×６００であり、表示装置の画素数が４８０×３６０であるときは、画像データの縮小処理を実行する。撮像装置により撮像された画像データが横長画像であり、表示装置の画面が縦長である場合には、画像データを縦表示になるように回転させる。あるいは、画像加工部１８は、転送されてきた非圧縮の画像データに対して、輪郭協調やぼかしといったフィルタリングなどの加工を施すようにしてもよい。加工後の画像データは、フレームバッファ２０に送られる。
【００２０】
フレームバッファ２０は、ＳＲＡＭ、ＤＲＡＭ等の半導体メモリから構成され、画像加工部１８から転送されてきた画像データを一時的に記憶する。
【００２１】
ＬＣＤインタフェース部２４は、フレームバッファ２０内の画像データを、画像処理回路１００に接続される表示装置に対して転送する。後述するように、画像データが動画像由来のデータの場合には、フレームバッファ２０からフレーム単位で読み出されて、表示装置において所定のフレームレートで表示される。
【００２２】
ＭＰＥＧデコード部４６は、ＭＰＥＧ（Moving Picture Expert Group）規格にしたがって符号化された符号化動画像データを復号する機能を備える。ＭＰＥＧデコード部４６は、符号化された画像データを図示しないデータ通信部を介して外部から受信するか、または図示しない記憶装置から読み出して取得する。
【００２３】
ＭＰＥＧデコード部４６は、作業領域として記憶領域４６ａを備えるほか、復号のために、図示しないエントロピー復号部、逆量子化部、逆ＤＣＴ部、動き予測部を有する。符号化動画像データは、１フレームずつＭＰＥＧ方式の規格によって定められた複数のマクロブロックに分割され、各マクロブロック毎に復号処理が実行される。符号化動画像データは、エントロピー復号化され、この復号された画像データを逆量子化して、ＤＣＴ係数を生成する。ＤＣＴ係数に対して逆ＤＣＴを行い、さらに、復号された画像データに対して動き補償を実施することで、動画像データが１フレームずつ生成される。復号された動画像データは、フレームを単位としてセレクタ１６に転送される。
なお、ＭＰＥＧデコード部４６は、実施の形態における復号部の一例である。
【００２４】
セレクタ１６は、図示しない制御部から提供される制御信号にしたがって、撮像装置により撮像された画像データ、または、ＭＰＥＧデコード部４６から出力される復号後の動画像データのいずれかを、画像加工部１８に送る。セレクタ１６は、制御信号がない場合には、撮像装置により撮像された画像データを選択するように構成されていてもよい。
【００２５】
復号された動画像データは、セレクタ１６を介して画像加工部１８に転送される。画像加工部１８は、撮像装置により撮像された画像データに対する上述の処理を、復号された動画像データの各フレームに対して実行する。加工後のフレームは、フレームバッファ２０に記憶される。画像加工部１８は、動画像データの作成時のフレームレートが、表示装置におけるフレームレートよりも大きい場合には、一部のフレームを削除してフレームバッファ２０に転送しないようにしてもよい。
【００２６】
このように、ＭＰＥＧデコード部４６による復号後の動画像データを画像加工部１８に通すことで、画像処理回路１００に接続された表示装置の仕様に合わせた加工を施すことができる。
【００２７】
以上説明したように本実施形態によれば、撮像手段から出力された画像データと、符号化動画像データを復号して得られた画像データを共通の画像加工部で加工するようにしたので、回路規模を削減することができる。また、撮像手段から出力された画像データと、符号化画像データを復号して得られた画像データをセレクタにより選択的に画像加工部に入力するようにしたので、復号後の画像データについても所定の加工を施したうえで表示装置に表示させることができる。
また、復号後の画像データの加工をソフトウエア的に実行する代わりに、画像加工部に実行するようにしたので、コーデック部に過度の負荷がかかることがない。さらに、画像加工部として専用のハードウエアを設けることによって、画像データの加工を高速に実行することができる。
【００２８】
図２は、本発明の別の実施形態に係る画像処理回路２００を示す。画像処理回路２００は、図１で説明した各機能ブロックに加えて、セレクタ２２と入出力インタフェース部２６が備える。また、ＭＰＥＧデコード部の代わりに、ＭＰＥＧコーデック部４８を備える。
【００２９】
ＭＰＥＧコーデック部４８は、ＭＰＥＧ画像データの復号機能に加えて、ＭＰＥＧ規格にしたがった動画像データの符号化機能も有する。ＭＰＥＧコーデック部４８は、作業領域として記憶領域４８ａを備えるほか、符号化のために、図示しないＤＣＴ部、量子化部、エントロピー符号化部、動き予測部を備える。なお、ＭＰＥＧコーデック部４８は、特許請求の範囲における動画像データ復号処理部の一例である。
【００３０】
セレクタ２２は、図示しない制御部からの信号にしたがって、フレームバッファ２０内の画像データを、ＬＣＤインタフェース部２４、入出力インタフェース部２６、またはＭＰＥＧコーデック部４８のいずれかに渡す。
【００３１】
入出力インタフェース部２６は、セレクタ２２を介して転送される画像データを、画像処理回路１００に接続される図示しない外部記憶装置へ出力する。また、入出力インタフェース部２６は、外部記憶装置に記憶されている符号化画像データを読み出してＭＰＥＧコーデック部４８に転送する。
【００３２】
図２に示した構成によると、撮像装置により撮像され、セレクタ１６、画像加工部１８、フレームバッファ２０を介して転送される画像データを、ＬＣＤインタフェース部２４に出力する代わりに、ＭＰＥＧコーデック部４８に出力することができる。これは、例えば、撮像装置において連写された画像を連続的に再生して、擬似的な動画像として表示装置に表示させる場合などに、画像データを符号化して保存するときに使用される。
【００３３】
図３は、本発明のさらに別の実施形態に係る画像処理回路３００を示す。画像処理回路３００は、図２で説明した画像処理回路２００に備えられている各機能ブロックのほかに、ＪＰＥＧ（Joint Photographic Coding Expert Group）規格にしたがって静止画像の符号化処理、復号処理を実行するＪＰＥＧコーデック部５０をさらに備える。
【００３４】
ＪＰＥＧコーデック部５０は、非圧縮の静止画像データに対してＤＣＴ符号化、量子化、エントロピー符号化を実行して、画像データを圧縮符号化する。また、ＪＰＥＧコーデック部５０は、符号化された静止画像データに対して、エントロピー復号化、逆量子化、逆ＤＣＴを実行して、静止画像データを復号する。ＪＰＥＧコーデック部５０は、ＭＰＥＧコーデック部４８とＤＣＴ部などの回路の一部を共用していることが好ましいが、それぞれ別の構成であってもよい。また、記憶領域４８ａと記憶領域５０ａとを共用していてもよい。
なお、ＪＰＥＧコーデック部５０は、特許請求の範囲における静止画像データ復号処理部の一例である。
【００３５】
セレクタ１６は、図示しない制御部から供給される制御信号にしたがって、ＭＰＥＧコーデック部４８から転送される復号後の動画像データ、ＪＰＥＧコーデック部５０から転送される復号後の静止画像データ、またはインタフェース部１４から転送される撮像された画像データのいずれかを選択的に画像加工部１８に供給する。選択された画像データは、画像加工部１８において上述の処理を施されて、フレームバッファ２０に記憶される。
【００３６】
図３の構成によれば、復号後の動画像データのみならず、静止画像データについても、画像加工部において所定の処理を施したうえで表示装置に表示することができる。
【００３７】
図４は、上記実施形態にて説明した画像処理回路２００を備える電子機器１０の構成を示す。電子機器１０は、画像処理回路２００のほか、撮像装置１２、ＬＣＤ２８、外部記憶装置３０、アンテナ４２、データ通信部４４を備える。
【００３８】
撮像装置１２は、電子機器１０外部の対象を撮影し、ディジタル画像データとして出力する。撮像装置１２は、例えばＣＣＤ（charge-coupled device）カメラであり、撮影対象からの光信号がレンズを介してＣＣＤ等の撮像素子に入力され、電気信号に変換される。このアナログ信号に対して、Ａ／Ｄ変換等の処理が施され、ディジタル画像データに変換される。変換された画像データは、インタフェース部１４を介して画像処理回路２００に入力される。
【００３９】
ＬＣＤ２８は、フレームバッファ２０からセレクタ２２、ＬＣＤインタフェース部２４を介して転送されてきた画像データから画像信号を生成し、画面上に表示する。
【００４０】
外部記憶装置３０は、入出力インタフェース部２６を介して画像処理回路２００と接続されている。外部記憶装置３０には、撮像装置１２で撮像され、所定の加工を受けた画像データを記憶させるほか、ＭＰＥＧコーデック部４８における復号または符号化された後の動画像データを記憶してもよい。外部記憶装置３０としては、ハードディスクドライブやフラッシュメモリなどの任意の形態の記憶装置を用いることができる。
【００４１】
データ通信部４４は、アンテナ４２を介して符号化動画像データを受信し、ＭＰＥＧコーデック部４８に供給する。
【００４２】
この実施の形態では、撮像装置とＬＣＤ等の表示装置を備える電子機器において通常備えられている画像加工部を、復号後の動画像データを表示装置に表示させるための加工をするためにも共用するようにした。これによって、画像加工部のためのハードウエアを重複して持つ必要がなくなるため、画像処理回路１００の回路規模を削減することができる。したがって、電子機器１０の小型化も可能になる。
【００４３】
以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【００４４】
電子機器１０において受信するのは符号化された画像データに限られず、非圧縮の画像データを受信してもよい。この場合、データ通信部４４は、符号化画像データを受信したときにはそのデータをＭＰＥＧコーデック部４８に転送し、非圧縮の画像データを受信したときにはそのデータをインタフェース部１４に転送する。インタフェース部１４に転送された非圧縮の画像データは、セレクタ１６を介してフレーム単位で画像加工部１８に転送される。この構成により、非圧縮の画像データに対しても、ＬＣＤ２８の表示仕様に合わせた加工を施すことができる。
【００４５】
実施の形態に係る画像処理回路は、ディジタルカメラ、カメラ撮影機能付きの携帯電話機などの、撮像装置と表示装置を備える携帯型の電子機器に搭載されることを想定している。しかしながら、これに限定されるものではなく、画像処理回路はパーソナルコンピュータなどの据え置き型の電子機器に搭載されてもよい。
【図面の簡単な説明】
【００４６】
【図１】本発明の一実施形態における画像処理回路の構成を示す図である。
【図２】本発明の別の実施形態における画像処理回路の構成を示す図である。
【図３】本発明のさらに別の実施形態による画像処理回路の構成を示す図である。
【図４】画像処理回路を搭載した電子機器の構成を示す図である。
【符号の説明】
【００４７】
１０  電子機器、  １２  撮像装置、  １６  セレクタ、  １８  画像加工部、  ２０  フレームバッファ、  ２２  セレクタ、  ２８  ＬＣＤ、  ３０  外部記憶装置、  ４２  アンテナ、  ４４  データ通信部、  ４６  ＭＰＥＧデコード部、  ４８  ＭＰＥＧコーデック部、  ５０  ＪＰＥＧコーデック部、  １００、２００、３００  画像処理回路。
【図１】
2006339768.tif 000003
【図２】
2006339768.tif 000004
【図３】
2006339768.tif 000005
【図４】
2006339768.tif 000006