(57)【要約】【課題】メモリを用いた画像処理で処理する画像の画素数が少なくなったときに電力消費を低減することができる画像処理装置を提供する。【解決手段】画像を入力する画像入力部１２０と、画像入力部１２０より入力された画像を格納する複数のＳＤＲＡＭ１２４、１２５と、ＳＤＲＡＭ１２４、１２５に格納された画像を読み出し画像処理を行うリサイズ部１２２とを備える。また、画像入力部１２０とＳＤＲＡＭ１２４、１２５とを制御するＣＰＵ１０１を備える。  ＳＤＲＡＭ１２４、１２５は、個別に動作状態と省電力状態とを切り替え可能である。ＣＰＵ１０１は、ＳＤＲＡＭ１２４、１２５に格納される画像の画素数とリサイズ部１２２が読み出す画像の画素数のいずれかまたは両方に応じて、以下の制御を行う。即ち、ＣＰＵ１０１は、ＤＲＡＭ１２４、１２５のなかから、画像入力部１２０が格納するＳＤＲＡＭと、リサイズ部１２２が読み出すＳＤＲＡＭとを選択し、利用しないＳＤＲＡＭを省電力状態とする。【選択図】図１
2010147775.tif 000002
【特許請求の範囲】
【請求項１】
画像を入力する入力手段と、
前記入力手段より入力された画像を格納する複数の記憶手段と、
前記記憶手段に格納された画像を読み出し画像処理を行う画像処理手段と、
前記入力手段と前記記憶手段と前記画像処理手段とを制御する制御手段とを備え、
前記記憶手段は、個別に動作状態と省電力状態とを切り替え可能であって、
前記制御手段は、前記記憶手段に格納される画像の画素数と前記画像処理手段が読み出す画像の画素数のいずれかまたは両方に応じて、前記複数の記憶手段のなかから、前記入力手段が格納する記憶手段と、前記画像処理手段が読み出す記憶手段とを選択し、利用しない前記記憶手段を省電力状態とすることを特徴とする画像処理装置。
【請求項２】
ズーム倍率を指示する指示手段を備え、
前記制御手段は、前記指示手段より指示されたズーム倍率に応じて前記画像処理手段を制御し、
前記画像処理手段は、前記記憶手段から読み出した画像を前記ズーム倍率に応じて拡大縮小することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記記憶手段は、個別に単位時間当たりの読み書き可能データ量に上限があって、
前記制御手段は、前記画像処理手段が前記記憶手段から読み出す画像の画素数から、前記記憶手段に対して単位時間当たりに読み書きするデータ量を算出し、利用する前記記憶手段の単位時間当たりの読み書き可能データ量の和を超えないように、前記入力手段が格納する記憶手段と、前記画像処理手段が読み出す記憶手段とを選択することを特徴とする請求項１または２記載の画像処理装置。
【請求項４】
前記記憶手段は、省電力状態から動作状態に切り替えるまでに所定の時間が必要であって、
前記指示手段は、ズーム倍率を変化させる速度に上限があって、
前記制御手段は、前記指示手段によってズーム倍率を上限の速度で変化させた際に、前記記憶手段が省電力状態から動作状態に切り替わるまでに必要な所定の時間内で、前記記憶手段に対する単位時間当たりの読み書きデータ量が、利用している前記記憶手段の単位時間当たりの読み書き可能データ量の和を超えるズーム倍率に達する場合、読み書き可能データ量の和を超える前記ズーム倍率に達した際の、前記記憶手段に対する読み書きデータ量を算出し、利用する前記記憶手段の単位時間当たりの読み書き可能データ量の和を超えないように、前記記憶手段を選択することを特徴とする請求項３記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオカメラやデジタルカメラなどの画像処理装置に関し、より具体的には、画像を拡大縮小して電子ズーム処理を行う画像処理装置に関する。
【背景技術】
【０００２】
ビデオカメラやデジタルカメラは近年多画素化が進み、撮影した画像を処理するための中間バッファとして用いるメモリは、より大きな容量と帯域幅が求められている。こうしたメモリには、容量に対して比較的安価なＳＤＲＡＭ（Ｓｙｎｒｏｎｏｕｓ  Ｄｙｎａｍｉｃ  ＲＡＭ）が利用されることが多く、容量と帯域幅を確保するため、複数のＳＤＲＡＭを搭載するものが多い。
【０００３】
こうしたビデオカメラやデジタルカメラの多くは、ズームレンズによって光学的に撮影画像をズームする手段（以下、光学ズーム）を備えている。また、光学ズームに加えて、センサから取り込んだ画像に対する信号処理で拡大縮小を行うことにより、電子的に撮影画像をズームする手段（以下、電子ズーム）を備えている。
【０００４】
電子ズームは、センサから取り込んだ画像を一度メモリに格納してから、その画像を読み出しながらフィルタ処理を行うことで実現される。
【０００５】
また、近年のビデオカメラやデジタルカメラでは、バッテリー駆動時の連続動作時間の確保や、装置本体の小型化のために熱発生を最小限に抑えるためにも、省電力化が非常に重要になっている。
【０００６】
特許文献１では、電子ズームを利用しないときはメモリを利用しないことで電力消費を低減するカメラについて記述されている。
【０００７】
また、特許文献２では、２系統のメモリを持ち、スプールする印刷ジョブのデータ量が一方のメモリの容量で確保可能であれば、もう一方のメモリを省電力状態とする印刷装置について記述されている。
【特許文献１】特開平０５−３０４６３２号公報
【特許文献２】特開２００７−１５２５５６号
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、近年の多画素化によってセンサの画素数は、出力画像の画素数より多くなっていることが多く、特定倍率を除いて常に電子ズームを利用する必要があり、単にメモリを利用しない方法では、電力消費を低減できない問題があった。
【０００９】
また、リアルタイム処理が必要なビデオカメラなどでは、処理するデータ量が一方のメモリの容量で確保可能であっても、単位時間当たりのデータ量がメモリ帯域幅を超えてしまい、正常に信号処理を行えなくなる問題があった。
【００１０】
本発明の目的は、メモリを用いた画像処理で処理する画像の画素数が少なくなったときに電力消費を低減することができる画像処理装置を提供することにある。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、請求項１記載の画像処理装置は、画像を入力する入力手段と、前記入力手段より入力された画像を格納する複数の記憶手段と、前記記憶手段に格納された画像を読み出し画像処理を行う画像処理手段と、前記入力手段と前記記憶手段と前記画像処理手段とを制御する制御手段とを備え、前記記憶手段は、個別に動作状態と省電力状態とを切り替え可能であって、前記制御手段は、前記記憶手段に格納される画像の画素数と前記画像処理手段が読み出す画像の画素数のいずれかまたは両方に応じて、前記複数の記憶手段のなかから、前記入力手段が格納する記憶手段と、前記画像処理手段が読み出す記憶手段とを選択し、利用しない前記記憶手段を省電力状態とすることを特徴とする。
【発明の効果】
【００１２】
本発明の画像処理装置によれば、メモリを用いた画像処理で処理する画像の画素数が少なくなったときに電力消費を低減することができる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明を図面を参照しながら詳細に説明する。
【００１４】
（第１の実施の形態）
図１は、本発明の実施の形態に係る画像処理装置としてのビデオカメラのブロック図である。
【００１５】
初めに、ディスク型の記録媒体に動画像を記録するビデオカメラ１００の構成を動作と併せて説明する。
【００１６】
ビデオカメラ１００は、図中の符号１０１〜１０５に示す制御系ブロックを備える。
【００１７】
ＣＰＵ１０１は、内部バス１０５を介して、ＲＡＭ１０２、ＲＯＭ１０３及びその他の各ブロックに接続され、ＲＯＭ１０３に格納された制御プログラムを元に、各ブロックの制御を行う。
【００１８】
ＣＰＵ１０１は、動作時の一時的なデータの格納場所としてＲＡＭ１０２を用いる。また、ＣＰＵ１０１に接続された操作部１０４は、ズームレバーやボタンなどに対するユーザー操作の入力内容をＣＰＵ１０１に伝え、ＣＰＵ１０１は、ユーザーの指示に応じて、各種処理を行う。
【００１９】
また、ビデオカメラ１００は、図中の符号１１０〜１１４に示すカメラ系ブロックを備える。
【００２０】
レンズユニット１１０を通過した光は、ＣＭＯＳイメージセンサ（撮像センサ）１１３の撮像（撮影）面上に結像し、撮像面の光学像が電気信号に変換される。レンズドライバ１１２は、ＣＰＵ１０１の制御により、レンズユニット１１０を構成するズームレンズとフォーカスレンズを駆動して、光学ズームとフォーカスの調整を行う。
【００２１】
また、レンズドライバ１１２は、絞り１１１を駆動して、絞り量の調整を行う。ＣＭＯＳイメージセンサ１１３は、ＣＰＵ１０１に指示されたシャッター速度に応じた期間、電荷の蓄積を行う。
【００２２】
ＡＦＥ（アナログフロントエンド）１１４は、ＣＭＯＳイメージセンサ１１３を駆動して画像信号を読み出し、画像信号のサンプル・ホールドと増幅、デジタル信号への変換を行う。
【００２３】
また、ビデオカメラ１００は、図中の符号１２０〜１２５に示す画像処理系ブロックを備える。
【００２４】
ＣＰＵ１０１の制御により、画像入力部１２０は、ＡＦＥ１１４から入力された画像信号に対して色変換処理を行い、変換後のＹＣＣ（４：２：２）画像データを、メモリコントローラ１２１を介してＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に格納する。
【００２５】
また、リサイズ部１２２は、ＣＰＵ１０１から指示される電子ズームの倍率に従って、メモリコントローラ１２１を介してＳＤＲＡＭ１２４とＳＤＲＡＭ１２５からＹＣＣ画像データの有効領域を切り出して読み出し、リサイズを行って出力部１２３へ出力する。
【００２６】
ここで、画像に入力部１２０は、画像を入力する入力手段として機能する。また、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５は、入力手段より入力された画像を格納する複数の記憶手段として機能する。
【００２７】
また、リサイズ部１２２は、記憶手段に格納された画像を読み出し画像処理を行う画像処理手段として機能する。また、ＣＰＵ１０１は、入力手段と記憶手段と画像処理手段とを制御する制御手段として機能する。また、操作部１０４は、ズーム倍率を指示する指示手段として機能する。
【００２８】
そして、記憶手段は、個別に動作状態と省電力状態とを切り替え可能である。また、記憶手段は、個別に単位時間当たりの読み書き可能データ量に上限がある。
【００２９】
また、制御手段は、記憶手段に格納される画像の画素数と画像処理手段が読み出す画像の画素数のいずれかまたは両方に応じて、複数の記憶手段のなかから、入力手段が格納する記憶手段と、画像処理手段が読み出す記憶手段とを選択する。そして、制御手段は、利用しない記憶手段を省電力状態とする。
【００３０】
また、制御手段は、画像処理手段が前記記憶手段から読み出す画像の画素数から、記憶手段に対して単位時間当たりに読み書きするデータ量を算出し、以下の制御を行う。即ち、制御手段は、利用する記憶手段の単位時間当たりの読み書き可能データ量の和を超えないように、入力手段が格納する記憶手段と、画像処理手段が読み出す記憶手段とを選択する。
【００３１】
また、制御手段は、指示手段によってズーム倍率を上限の速度で変化させた際に、記憶手段が省電力状態から動作状態に切り替わるまでに必要な所定の時間内で、以下の場合であるか否か認識する。即ち、記憶手段に対する単位時間当たりの読み書きデータ量が、利用している記憶手段の単位時間当たりの読み書き可能データ量の和を超えるズーム倍率に達する場合か否かである。
【００３２】
上記ズーム倍率に達する場合、制御手段は、読み書き可能データ量の和を超えるズーム倍率に達した際の、記憶手段に対する読み書きデータ量を算出し、利用する記憶手段の単位時間当たりの読み書き可能データ量の和を超えないように、記憶手段を選択する。
【００３３】
上記の内容は、以降順次説明する。
【００３４】
次に、ＣＭＯＳイメージセンサ１１３の持つ２つの読み出しモードについて説明する。
【００３５】
図２は、図１におけるＣＭＯＳイメージセンサ１１３の読み出し範囲を示す概略図である。
【００３６】
第１の読み出しモードでは、ＣＭＯＳイメージセンサ１１３の全領域２０１に格子状に配置された水平３８４０画素×垂直２１６０画素の全てがプログレッシブスキャンで読み出される。一般的に、動画は、６０または５０フィールド／秒で撮影されることが多く、ＣＭＯＳセンサ１１３からは、６０または５０フレーム／秒で画像を読み出す必要がある。
【００３７】
しかし、全画素をそのままＡＦＥ１１４を介して画像入力部１２０に伝送すると、１フレームが約８３０万画素にも達するため、１画素を１４ビットにＡＤ変換した場合、約７Ｇｂｐｓもの高周波信号となってしまう。
【００３８】
そのため、第１の読み出しモードでは、ＣＭＯＳイメージセンサ１１３内部で垂直方向に隣り合う同色２画素と、水平方向に隣り合う同色２画素の計４画素を加算（以下、水平垂直画素加算）する。そして、水平１９２０画素×垂直１０８０画素の画像信号として、画像入力部１２０に伝送される。
【００３９】
このため、１画素を１４ビットにＡＤ変換した場合でも、信号量は、約１．７Ｇｂｐｓ（６０フレーム／秒の場合）となり、これを８チャネルに分けて約２２０Ｍｂｐｓ／チャネルで画像入力部１２０に伝送する。
【００４０】
図３は、図１におけるＣＭＯＳイメージセンサ１１３による水平垂直画素加算の概略図である。
【００４１】
ＣＭＯＳイメージセンサ１１３の受光面には、ベイヤー配列のＲＧＢカラーフィルタが取り付けられており、水平４画素×垂直４画素の領域３０１を切り出すと、図のようにＲ、Ｇ、Ｂの画素が配置されている。
【００４２】
図中で、Ｒ、Ｇ、Ｂに続く２桁の数字は、水平方向と垂直方向の位置をそれぞれ示しており、水平垂直画素加算によって水平２画素×垂直２画素の画像信号３０２となる。例えば、Ｇ００＋Ｇ０２＋Ｇ２０＋Ｇ２２は、Ｇ００とＧ０２とＧ２０とＧ２２との加算を示す。
【００４３】
図２に戻り、第２の読み出しモードでは、ＣＭＯＳイメージセンサ１１３の中央部分２０２の水平１９２０画素×垂直１０８０画素だけがプログレッシブスキャンで読み出される。第２の読み出しモードでは、画素加算が行われず、画像入力部１２０へ伝送される信号量は第１の読み出しモードと同じとなる。
【００４４】
図４は、図１におけるＣＭＯＳイメージセンサ１１３から２つの読み出しモードで読み出した画像の概略図である。
【００４５】
図４（ｂ）に示すように、第２の読み出しモードで得られる画像４０２は、（ａ）に示す第１の読み出しモードで画像入力部１２０に伝送される画像４０１と画素数は同じながら、ＣＭＯＳイメージセンサ１１３の中央部分のみ読み出す。そのため、倍率２倍のズームがかかった状態となる。
【００４６】
次に、ビデオカメラ１００において撮影画像のズーム倍率を変更する際の制御方法について説明する。
【００４７】
ＣＰＵ１０１は、操作部１０４のズームレバーに対するユーザー操作に従って、レンズユニット１１０のズームレンズによる光学ズームと、リサイズ部１２２による電子ズームと、ＣＭＯＳイメージセンサ１１３の読み出しモードを制御する。そして、それらの組み合わせにより全体のズーム倍率（以下、全体ズーム倍率）を変更する。
【００４８】
図５は、図１のビデオカメラ１００における全体ズーム倍率と、光学ズーム倍率及び電子ズーム倍率の関係を示す図である。また、図６は、図１のビデオカメラ１００における全体ズーム倍率と、ＣＭＯＳイメージセンサ１１３の読み出しモードの関係を示す図である。
【００４９】
ビデオカメラ１００は、１〜２００倍までの全体ズーム倍率に対応している。また、光学ズーム倍率は１〜１０倍、電子ズーム倍率は１〜１０倍、ＣＭＯＳイメージセンサ１１３の読み出しモードによって変化するズーム倍率は上記の通り１倍または２倍にそれぞれ対応している。
【００５０】
図５に示すように、全体ズーム倍率１〜１０倍の範囲は、光学ズームによって倍率が変化し、全体ズーム倍率が１０倍以上になると光学ズーム倍率は１０倍で固定となる。また、全体ズーム倍率１〜２０倍の範囲は、電子ズームによって倍率が変化する。
【００５１】
図６に示すように、全体ズーム倍率２０倍を境に、ＣＭＯＳイメージセンサ１１３の読み出しモードは、第１の読み出しモードと第２の読み出しモードが切り替わる。全体ズーム倍率２０〜２００倍の範囲は、再び電子ズームによって倍率が変化する。例えば、全体ズーム倍率２００倍は、光学ズーム１０倍×電子ズーム１０倍×読み出しモードによるズーム倍率２倍が掛け合わさった状態となる。
【００５２】
次に、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対して読み書きされるデータ量について説明する。
【００５３】
これらのメモリに対しては、画像入力部１２０がＹＣＣ画像データの書き込み、リサイズ部１２２がＹＣＣ画像データの有効領域の読み出しを行う。リサイズ部１２２の読み出すデータ量は、電子ズーム倍率の２乗に反比例し、例えば、電子ズーム倍率が２倍になると読み出しデータ量は１／４となる。
【００５４】
図７は、図１のビデオカメラ１００における全体ズーム倍率と、リサイズ部１２２がメモリから読み出すデータ量の関係を示す図である。
【００５５】
全体ズーム倍率１〜１０倍の範囲では、電子ズームが１倍であるため、読み出しデータ量は常に１００％である。
【００５６】
図７において、１００％とは、水平１９２０画素×垂直１０８０画素のＹＣＣ画像データの全領域を読み出した場合を指す。ＹＣＣ画像データが１画素１６ビットの場合、１フレーム当たり約４．１５ＭＢ、約１．９９１Ｇｂｐｓ（６０フレーム／秒の場合）のデータ量となる。
【００５７】
次に、全体ズーム倍率１０〜２０倍の範囲では、電子ズームが１〜２倍に変化するため、読み出しデータ量は１００％〜２５％に変化する。また、全体ズーム倍率２０〜２００倍の範囲では、電子ズームが１〜１０倍に変化するため、読み出しデータ量は１００〜１％に変化する。
【００５８】
一方、画像入力部１２０が書き込むデータ量は、リサイズ部１２２がＹＣＣ画像データの全領域を読み出した場合のデータ量に等しく、常に１フレーム当たり約４．１５ＭＢ、約１．９９１Ｇｂｐｓ（６０フレーム／秒の場合）である。
【００５９】
また、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５は、それぞれ３．２Ｇｂｐｓの帯域幅を持ち、メモリコントローラ１２１は２つのメモリにアクセスを振り分けることで、最大６．４Ｇｂｐｓの帯域幅を確保することができる。
【００６０】
図８は、図１のビデオカメラ１００における全体ズーム倍率と、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対して読み書きされるデータ量の関係を示す図である（１）。
【００６１】
尚、図８では、１つのＳＤＲＡＭの帯域幅を１００％としており、２つのＳＤＲＡＭを使えば最大２００％の帯域幅まで利用可能である。全体ズーム倍率１〜１０倍の範囲では、読み書きされるデータ量が常に１２４．４％（＝１．９９１×２÷３．２）である。
【００６２】
次に、全体ズーム倍率１０〜２０倍の範囲では、読み書きされるデータ量は１２４．４〜７７．８％に変化する。また、全体ズーム倍率２０〜２００倍の範囲では、読み書きされるデータ量は１２４．４〜６２．２％に変化する。
【００６３】
図８において、全体ズーム倍率１２．８３〜２０倍の範囲と、２５．６６〜２００倍の範囲では、読み書きされるデータ量が１００％以下となっている。この範囲内では、１つのＳＤＲＡＭの帯域幅だけで読み書きされるデータ量に対応できるため、ＳＤＲＡＭを省電力状態とする。
【００６４】
ここで、ＳＤＲＡＭの省電力状態について説明する。
【００６５】
ＳＤＲＡＭは、記憶内容の保持のため、所定時間毎に記憶セルに蓄えられた電荷を補充するリフレッシュ操作が必要であり、このリフレッシュ操作を停止することで記憶内容は失われる代わりに電力消費を低減することができる。
【００６６】
即ち、メモリコントローラ１２１が通常時、ＳＤＲＡＭに対して行っているリフレッシュ操作を、ＣＰＵ１０１の制御によって停止することで、ＳＤＲＡＭを省電力状態とすることができる。
【００６７】
図９は、図１におけるメモリコントローラ１２１のＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対する読み書きデータの割り振りを示す概略図である。
【００６８】
カウント１〜Ｎ＋９は、各ブロックが１フレーム分の画像を処理する時間１／６０秒（６０フレーム／秒の場合）毎にカウントアップされる値であり、図９では、カウントアップ毎に全体ズーム倍率を０．１ずつ上げた場合を示している。
【００６９】
カウント１〜３の範囲での全体ズーム倍率Ｚは、Ｚ＜１２．８３倍であり、図８に示した通り、読み書きされるデータ量が１つのＳＤＲＡＭの帯域幅１００％を上回る。そのため、メモリコントローラ１２１は、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５の両方に読み書きデータを振り分けた２バンク構成としてメモリを使用する。
【００７０】
例えば、カウント２において、画像入力部１２０が書き込んだＹＣＣ画像データ９０２は、ＳＤＲＡＭ１２５に格納され、リサイズ部１２２はカウント１で画像入力部１２０が書き込んだＹＣＣ画像データ９０１の有効領域をＳＤＲＡＭ１２４より読み出す。
【００７１】
次に、カウント４〜Ｎ＋７の範囲での全体ズーム倍率Ｚは、１２．８３＜Ｚ＜２０．０倍であり、図８に示した通り、読み書きされるデータ量が１つのＳＤＲＡＭの帯域幅１００％を下回る。そのため、メモリコントローラ１２１は、ＳＤＲＡＭ１２５を省電力状態とし、ＳＤＲＡＭ１２４だけに読み書きデータを配置した２バンク構成でメモリを使用する。
【００７２】
例えば、カウント５において、画像入力部１２０が書き込んだＹＣＣ画像データ９０５は、ＳＤＲＡＭ１２４に格納され、リサイズ部１２２は、カウント４で画像入力部１２０が書き込んだＹＣＣ画像データ９０４の有効領域を同じＳＤＲＡＭ１２４より読み出す。
【００７３】
また、カウントＮ＋８〜Ｎ＋９の範囲での全体ズーム倍率Ｚは２０．０≦Ｚ＜２５．６６倍であり、図８に示した通り、読み書きされるデータ量が１つのＳＤＲＡＭの帯域幅１００％を上回る。そのため、メモリコントローラ１２１は、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５の両方に読み書きデータを振り分けた２バンク構成としてメモリを使用する。
【００７４】
同様に、全体ズーム倍率ＺがＺ＞２５．６６倍になると、読み書きされるデータ量が１つのＳＤＲＡＭの帯域幅１００％を下回る。従って、メモリコントローラ１２１は、ＳＤＲＡＭ１２５を省電力状態とし、ＳＤＲＡＭ１２４だけに読み書きデータを配置した２バンク構成でメモリを使用する。
【００７５】
（第２の実施の形態）
次に、第２の実施の形態のビデオカメラについて説明する。このビデオカメラは、第１の実施の形態のビデオカメラに対して、画像入力部１２０が電子ズーム倍率に応じてメモリに書き込むＹＣＣ画像データの領域を変化させる点が異なる。また、第２の実施の形態のビデオカメラは、ＣＰＵ１０１がユーザー操作によるズーム倍率の変化の速度を考慮して、ＳＤＲＡＭを省電力状態とする点で第１の実施の形態のビデオカメラと異なる。
【００７６】
まず、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対して読み書きされるデータ量について説明する。
【００７７】
本実施の形態においては、画像入力部１２０がメモリに書き込むデータ量は、図７に示したリサイズ部１２２がメモリから読み出すデータ量に等しい。そのため、画像入力部１２０とリサイズ部１２２が読み書きするデータ量の和が電子ズーム倍率の２乗に反比例し、例えば、電子ズーム倍率が２倍になると読み書きするデータ量は１／４となる。
【００７８】
図１０は、図１のビデオカメラ１００における全体ズーム倍率と、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対して読み書きされるデータ量の関係を示す図である（２）。
【００７９】
尚、図１０では、１つのＳＤＲＡＭの帯域幅を１００％としており、２つのＳＤＲＡＭを使えば最大２００％の帯域幅まで利用可能である。全体ズーム倍率１〜１０倍の範囲では、読み書きされるデータ量が常に１２４．４％である。
【００８０】
次に、全体ズーム倍率１０〜２０倍の範囲では、読み書きされるデータ量は１２４．４〜３１．１％に変化する。また、全体ズーム倍率２０〜２００倍の範囲では、読み書きされるデータ量は１２４．４〜１．２４４％に変化する。
【００８１】
図１０において、全体ズーム倍率１１．１６〜２０倍の範囲と、２２．３２〜２００倍の範囲では、読み書きされるデータ量が１００％以下となっており、この範囲内では、１つのＳＤＲＡＭの帯域幅だけで読み書きされるデータ量に対応できる。
【００８２】
ここで、ＳＤＲＡＭの省電力状態について説明する。
【００８３】
本実施の形態では、ＳＤＲＡＭに対するリフレッシュ操作を停止するだけではなく、ＳＤＲＡＭに対するクロック供給と、メモリコントローラ１２１のＳＤＲＡＭとの接続部分に対するクロック供給を停止する。
【００８４】
これによって、第１の実施の形態に比べてより電力消費を低減することができる。但し、再びＳＤＲＡＭを通常状態に復帰させるためには、回路の初期化のために８０ｍｓ程度の時間が必要になる。
【００８５】
次に、ユーザー操作によるズーム倍率の変化の速度について説明する。
【００８６】
操作部１０４のズームレバーは、レバーが倒された量によってズーム倍率の変化速度が決まり、本実施の形態では、あるズーム倍率から、その１０倍または０．１倍になるまでに最短で４秒かかるようＣＰＵ１０１が制御を行うよう構成されている。
【００８７】
次に、ＳＤＲＡＭを省電力状態にできる全体ズーム倍率について説明する。
【００８８】
図１０において、全体ズーム倍率が、読み書きされるデータ量が１００％以下となる範囲であっても、最大の変化速度でズーム倍率が変化したときに、ＳＤＲＡＭを省電力状態から通常状態に復帰させるために必要な時間を確保する必要がある。
【００８９】
ＳＤＲＡＭの復帰時間に余裕を持たせて１００ｍｓと考えると、１００ｍｓで変化させられるズーム倍率の範囲は、４秒で変化させられるズーム倍率の１／４０乗の範囲であって、１．０５９倍または０．９４４倍となる。
【００９０】
そのため、１１．８２（＝１１．１６×１．０５９）〜１８．８８（＝２０．００×０．９４４）倍の範囲と、２３．６４（＝２２．３２×１．０５９）〜２００倍の範囲が、一方のＳＤＲＡＭを省電力状態にすることができる範囲となる。
【００９１】
実際には、第１実施の形態の図９に示すように、画像入力部１２０がＹＣＣ画像データを書き込む期間と、その画像データをリサイズ部１２２が読み出す期間には１カウントの遅延があるため、全体ズーム倍率に対するデータ量の変化は別々となる。
【００９２】
しかし、１カウントで変化するズーム倍率は、１．０１０倍または０．９９０倍（６０フレーム／秒の場合）であって、ＳＤＲＡＭの復帰時間に余裕を持たせた部分で誤差は十分吸収できる。
【００９３】
尚、実際には、ハードウェア構成によって、ＳＤＲＡＭへの定期的なリフレッシュや、読み書きのアクセス競合によって、帯域幅を１００％利用できない場合には、それらの要素も考慮してデータ量または帯域幅を見積もり考慮する。これにより、本発明の目的は達成される。また、ＳＤＲＡＭに他のデータを格納している場合も、そのデータに対する読み書きのデータ量を見積もり考慮することで、本発明の目的は達成される。
【００９４】
また、これらの実施の形態では、画像１フレームを単位として、ＳＤＲＡＭへの読み書きデータを振り分けているが、例えば、輝度と色差を振り分けたり、一定量の画素やライン毎に振り分けたりしても、本発明の目的は達成される。
【００９５】
また、これらの実施の形態では、２つのＳＤＲＡＭに読み書きデータを振り分けている。しかし、３つ以上の複数のＳＤＲＡＭに読み書きデータを振り分け、読み書きデータ量に応じて利用するＳＤＲＡＭの数と、省電力状態とするＳＤＲＡＭの数を制御しても、本発明の目的は達成される。
【００９６】
また、これらの実施の形態では、画像入力部１２０に転送される画像が１９２０×１０８０画素であって、出力部１２３から出力される画像が１９２０×１０８０画素である場合には、リサイズ部１２２では拡大処理のみを行う構成となる。
【００９７】
しかし、画像入力部１２０に転送される画像がより大きい解像度であったり、出力部１２３から出力される画像がより小さい解像度である場合、即ち、リサイズ部１２２が縮小処理を行う構成であっても、本発明の目的は達成される。
【図面の簡単な説明】
【００９８】
【図１】本発明の実施の形態に係る画像処理装置としてのビデオカメラのブロック図である。
【図２】本発明の実施の形態に係る画像処理装置としてのビデオカメラのブロック図である。
【図３】図１におけるＣＭＯＳイメージセンサ１１３による水平垂直画素加算の概略図である。
【図４】図１におけるＣＭＯＳイメージセンサ１１３から２つの読み出しモードで読み出した画像の概略図である。
【図５】図１のビデオカメラ１００における全体ズーム倍率と、光学ズーム倍率及び電子ズーム倍率の関係を示す図である。
【図６】図１のビデオカメラ１００における全体ズーム倍率と、ＣＭＯＳイメージセンサ１１３の読み出しモードの関係を示す図である。
【図７】図１のビデオカメラ１００における全体ズーム倍率と、リサイズ部１２２がメモリから読み出すデータ量の関係を示す図である。
【図８】図１のビデオカメラ１００における全体ズーム倍率と、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対して読み書きされるデータ量の関係を示す図である（１）。
【図９】図１におけるメモリコントローラ１２１のＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対する読み書きデータの割り振りを示す概略図である。
【図１０】図１のビデオカメラ１００における全体ズーム倍率と、ＳＤＲＡＭ１２４とＳＤＲＡＭ１２５に対して読み書きされるデータ量の関係を示す図である（２）。
【符号の説明】
【００９９】
１００  ビデオカメラ
１０１  ＣＰＵ
１０２  ＲＡＭ
１０３  ＲＯＭ
１０４  操作部
１１０  レンズユニット
１１３  ＣＭＯＳイメージセンサ
１１４  ＡＦＥ
１２０  画像入力部
１２１  メモリコントローラ
１２２  リサイズ部
１２３  画像出力部
１２４  ＳＤＲＡＭ
１２５  ＳＤＲＡＭ
【図１】
2010147775.tif 000003
【図２】
2010147775.tif 000004
【図３】
2010147775.tif 000005
【図４】
2010147775.tif 000006
【図５】
2010147775.tif 000007
【図６】
2010147775.tif 000008
【図７】
2010147775.tif 000009
【図８】
2010147775.tif 000010
【図９】
2010147775.tif 000011
【図１０】
2010147775.tif 000012