【手続補正書】
【提出日】平成25年7月31日(2013.7.31)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
さらに、本発明の撮像装置の一実施態様において、前記制御部は、前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、４つのメモリアドレスを順次利用して長時間露光画像（高感度画像）と短時間露光画像（低感度画像）を順次メモリへ書き込み、書き込みアドレス以外のアドレスを利用して、長時間露光画像（高感度画像）と短時間露光画像（低感度画像）をメモリから並列に読み出す処理を実行させる制御を行う。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
さらに、本発明の撮像装置の一実施態様において、前記制御部は、切り替え後モードが広ダイナミックレンジ画像生成処理モードである場合、前記遷移期間を広ダイナミックレンジ画像の生成に必要な長時間露光画像（高感度画像）と短時間露光画像（低感度画像）の格納が終了するまでの期間とし、切り替え後モードが通常画像生成処理モードである場合、前記遷移期間を通常画像の生成に必要な画像の格納が終了するまでの期間とする制御を行う。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
これらの構成により、例えば、通常画像生成モードではＹＣｂＣｒ信号、広ダイナミックレンジ画像生成モードではＹＲＧＢ信号をメモリに格納する設定として、それぞれのフォーマットを定義して格納データを設定することで限られたメモリ容量を利用した効率的なメモリ利用構成が実現される。
また、通常画像生成モードと広ダイナミックレンジ画像生成モードとの切り替え時にメモリ入力データを先行して切り替えることで、出力画像を途切れさせることのないスムーズなモード遷移が実現される。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００９４
【補正方法】変更
【補正の内容】
【００９４】
このスイッチ設定に従い、メモリ１３０には第２信号処理部１２５の処理結果が格納される。
図８（３）に示すように、２つのメモリアドレス（ＡＤ１）、（ＡＤ２）を交互に使用して、第２信号処理部１２５の処理結果としてのデータ（ｆ１＿１）、（ｆ１＿２）、（ｆ１＿３）・・・、が順次格納される。
なお、ｆ１は、
メモリ格納フォーマット＝フォーマット１
に従ってメモリに格納されることを意味する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０１１０
【補正方法】変更
【補正の内容】
【０１１０】
このスイッチ設定に従い、メモリ１３０には、第１信号処理部１２２の処理結果が格納される。
図９（３）に示すように、４つのメモリアドレス（ＡＤ１）、（ＡＤ２）、（ＡＤ３）、（ＡＤ４）を順番に繰り返し使用して、第１信号処理部１２２の処理結果としてのデータ（ｆ２＿Ｌ１）、（ｆ２＿Ｈ１）、（ｆ２＿Ｌ２）、（ｆ２＿Ｈ２）・・・、が順次格納される。
すなわち、短時間露光画像（低感度画像（Ｌｎ））と、長時間露光画像（高感度画像（Ｈｎ））が順次格納される。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１１６
【補正方法】変更
【補正の内容】
【０１１６】
図９の（３）メモリ書き込みにおいては、ｔ０〜ｔ１でメモリに格納したアドレス（ＡＤ１）とは異なるアドレス（ＡＤ２）のメモリ位置にデータ（ｆ２＿Ｈ１）が書き込まれる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０１４８
【補正方法】変更
【補正の内容】
【０１４８】
インターレース出力では、垂直周期毎に撮像素子の奇数ライン出力と撮像素子の偶数ライン出力を読み取ることによって、（６）に示す撮像装置出力をＯＤＤ、ＥＶＥＮフィールド出力ＶＯ１ｏ，ＶＯ１ｅ，ＶＯ２ｏ，ＶＯ２ｅ，ＶＯ３ｏ，ＶＯ３ｅ・・・の順に出力する。すなわち、インターレース出力を実現している。この出力により、出力信号をＯＤＤ＋ＥＶＥＮの組合せで合成するとインターレースブレのない画像を得ることができる。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０１７４
【補正方法】変更
【補正の内容】
【０１７４】
このスイッチ設定に従い、メモリ１３０には、第１信号処理部１２２の処理結果が格納される。
図１３（３）に示すように、４つのメモリアドレス（ＡＤ１）、（ＡＤ２）、（ＡＤ３）、（ＡＤ４）を順番に繰り返し使用して、第１信号処理部１２２の処理結果としてのデータ（ｆ２＿Ｌ１）、（ｆ２＿Ｈ１）、（ｆ２＿Ｌ２）、（ｆ２＿Ｈ２）・・・、が順次格納される。
すなわち、短時間露光画像（低感度画像（Ｌｎ））と、長時間露光画像（高感度画像（Ｈｎ））が順次格納される。
フォーマット２（ｆ２）は、先に図７（２）を参照して説明したフォーマットに対応し、図７（２）の第２フォーマットで第１信号処理部１２２の処理結果であるＹＲＧＢ信号を格納する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１７８
【補正方法】変更
【補正の内容】
【０１７８】
図１３の（３）メモリ書き込みにおいては、ｔ０〜ｔ１でメモリに格納したアドレス（ＡＤ１）とは異なるアドレス（ＡＤ２）のメモリ位置にデータ（ｆ２＿Ｈ１）が書き込まれる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０１９９
【補正方法】変更
【補正の内容】
【０１９９】
さらに、垂直周期毎にアドレス（ＡＤ１）〜（ＡＤ４）の奇数ライン出力と偶数ライン出力をメモリ１３０から読み取り、画像合成、補正処理、信号処理を行い、撮像装置出力をＯＤＤ、ＥＶＥＮフィールド個別に出力する。この処理により、図１３（６）に示すように、ＷＶ１１ｏ，ＷＶ１１ｅ，ＷＶ２２ｏ，ＷＶ２２ｅ・・・として、出力信号をＯＤＤ＋ＥＶＥＮの組合せで合成してインターレース出力が実行される。本処理例ではインターレースブレの少ない広ダイナミックレンジ画像の出力が実現される。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】０２１１
【補正方法】変更
【補正の内容】
【０２１１】
例えば図１３に示すシーケンスでは、
時間ｔ２〜ｔ３において、
（４ａ）データ（ｆ２＿Ｌ１ｏ）のアドレス（ＡＤ１ｏ）からの読み出しと、
（４ｂ）データ（ｆ２＿Ｈ１ｏ）のアドレス（ＡＤ２ｏ）からの読み出し、
これらを実行し、さらに、時間ｔ３〜ｔ４において、
（４ａ）データ（ｆ２＿Ｌ１ｅ）のアドレス（ＡＤ１ｅ）からの読み出しと、
（４ｂ）データ（ｆ２＿Ｈ１ｅ）のアドレス（ＡＤ２ｅ）からの読み出し、
これらを実行している。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】０２１２
【補正方法】変更
【補正の内容】
【０２１２】
一方、図１５に示すシーケンスでは、
時間ｔ１〜ｔ２において、
（４ａ）データ（ｆ２＿Ｌ１ｅ）のアドレス（ＡＤ１ｅ）からの読み出しを実行し、
時間ｔ２〜ｔ３において、
（４ａ）データ（ｆ２＿Ｌ１ｏ）のアドレス（ＡＤ１ｏ）からの読み出しと、
（４ｂ）データ（ｆ２＿Ｈ１ｏ）のアドレス（ＡＤ２ｏ）からの読み出し、
これらを実行し、
次の、時間ｔ３〜ｔ４においては、
（４ａ）データ（ｆ２＿Ｌ２ｅ）のアドレス（ＡＤ３ｅ）からの読み出しと、
（４ｂ）データ（ｆ２＿Ｈ１ｅ）のアドレス（ＡＤ２ｅ）からの読み出し、
これらを実行している。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】０２２０
【補正方法】変更
【補正の内容】
【０２２０】
第３信号処理部１２６は、メモリ１３０からの読み出し信号に対する最終的な信号処理を実行して撮像装置から出力する広ダイナミックレンジ画像を生成して出力する。
この最終出力が図１３（６）撮像装置出力（ＷＶ１１ｏ）に相当する。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】０２３０
【補正方法】変更
【補正の内容】
【０２３０】
さらに、垂直周期毎にアドレス（ＡＤ１）〜（ＡＤ４）の奇数ライン出力と偶数ライン出力をメモリ１３０から読み取り、画像合成、補正処理、信号処理を行い、撮像装置出力をＯＤＤ、ＥＶＥＮフィールド個別に出力する。この処理に際してメモリからの読み取り画像を最新のデータとする設定としている。
この処理により、図１５（６）に示すように、ＷＶ１１ｏ，ＷＶ１２ｅ，ＷＶ２２ｏ，ＷＶ２３ｅ・・・として、インターレース出力が実行される。このように本処理例では、広ダイナミックレンジ化処理に適用する低感度画像と高感度各画像の組合せを、より新しい撮影画像に基づいて生成することを可能としたものである。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】０２３７
【補正方法】変更
【補正の内容】
【０２３７】
一方、図１６に示す例では、出力順が、
ＷＶ１１ｅ，ＷＶ１２ｏ，ＷＶ２２ｅ，ＷＶ２３ｏ・・・
であり、偶数（ＥＶＥＮ）フィールド、奇数（ＯＤＤ）フィールドの順で出力する構成である。
この出力順の変更に伴い、（４）メモリ読み出しの順番も変更される。すなわち、偶数（ＥＶＥＮ）フィールドデータと奇数（ＯＤＤ）フィールドデータの読み出し順が図１５と図１６では入れ替わっている。
その他の点は、先に図１５を参照して説明した処理と同様である。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】０２６３
【補正方法】変更
【補正の内容】
【０２６３】
具体的には、マイコン（制御部）１０５は、切り替え後モードが広ダイナミックレンジ画像生成処理モードである場合、遷移期間を広ダイナミックレンジ画像の生成に必要な長時間露光画像（高感度画像）と短時間露光画像（低感度画像）の格納が終了するまでの期間とし、切り替え後モードが通常画像生成処理モードである場合、遷移期間を通常画像の生成に必要な画像の格納が終了するまでの期間とする制御を行う。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】０２７０
【補正方法】変更
【補正の内容】
【０２７０】
なお、例えば、メモリの格納データに対して垂直反転等の処理を行うことが可能であるが、このような処理を実行する場合は、メモリ１３０の入力部のスイッチｃ，１５１ｃのみが切り替わっているときのメモリの書き込み（Ｗｒｉｔｅ）アドレスを垂直反転に対応させるか、残りのスイッチａ，１５１ａ、スイッチｂ，１５１ｂ，スイッチｄ，１５１ｄを切換えた直後のメモリの読み出し（Ｒｅａｄ）アドレスを、一定期間垂直反転をしない対応とするといった制御を行ってメモリ１３０に対する読み出し書き込み（Ｒｅａｄ／Ｗｒｉｔｅ）を実行すればよい。
すなわちマイコン（制御部）１０５は、エラーのないアドレスとデータとの対応付けを維持するようにメモリへのデータ書き込み、読み出しを制御する。
【手続補正１８】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像信号を格納するメモリと、
メモリに格納された画像信号を入力して画像合成処理を実行して広ダイナミックレンジ画像を生成する画像合成部と、
γ補正処理による信号変換処理を実行する画像補正部と、
メモリに対する入出力経路の切り替えを伴う信号経路制御を実行する制御部を有し、
前記制御部は、
前記画像合成部における画像合成処理を実行しない通常画像生成時には、前記画像補正部による補正後の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行し、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、前記画像補正部による補正前の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行する撮像装置。
【請求項２】
前記撮像装置は、
撮像素子からの出力信号に対する信号処理を実行する第１信号処理部を有し、
前記第１信号処理部は、
輝度信号（Ｙ）９ビット、
色信号（Ｒ，Ｇ，Ｂ）について、（Ｇ）１０ビット、（Ｒ），（Ｂ）各々９ビット、
上記設定とした輝度（Ｙ）４に対して色信号（Ｒ，Ｇ，Ｂ）各１の比率を持つフォーマット（ｆ２）に従った信号を出力し、
前記制御部は、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時に、前記フォーマット（ｆ２）に従った信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行する請求項１に記載の撮像装置。
【請求項３】
前記撮像装置は、
前記画像補正部の出力信号を入力して信号処理を実行する第２信号処理部を有し、
前記第２信号処理部は、
輝度信号（Ｙ）８ビット、
色差信号（Ｃｂ，Ｃｒ）について、（Ｃｂ），（Ｃｒ）各々８ビット、
上記設定とした輝度（Ｙ）４に対して色差信号（Ｃｂ，Ｃｒ）各２の比率、または、輝度（Ｙ）４に対して色差信号（Ｃｂ，Ｃｒ）各１の比率を持つフォーマット（ｆ１）に従った信号を出力し、
前記制御部は、
前記画像合成部における画像合成処理を実行しない通常画像生成時に、前記フォーマット（ｆ１）に従った信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行する請求項１または２に記載の撮像装置。
【請求項４】
前記制御部は、
前記画像合成部における画像合成処理を実行しない通常画像生成時には、
撮像素子の出力信号を、前記第１信号処理部から前記画像補正部、さらに前記第２信号処理部と、前記メモリを経由して、撮像装置出力を生成する第３信号処理部へ入力する信号経路を設定する制御を行う請求項３に記載の撮像装置。
【請求項５】
前記制御部は、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、
撮像素子の出力信号を、前記第１信号処理部から前記メモリ、さらに、メモリ読み出し信号を前記画像合成部に入力し、さらに、前記画像補正部と、前記第２信号処理部を経由して、撮像装置出力を生成する第３信号処理部へ入力する信号経路を設定する制御を行う請求項３または４に記載の撮像装置。
【請求項６】
前記制御部は、
前記画像合成部における画像合成処理を実行しない通常画像生成時には、
２つのメモリアドレスを交互に利用して通常画像を順次メモリへ書き込み、書き込みアドレス以外のアドレスを利用して書き込みデータをメモリから読み出す処理を実行させる制御を行う請求項１〜５いずれかに記載の撮像装置。
【請求項７】
前記制御部は、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、
４つのメモリアドレスを順次利用して長時間露光画像（高感度画像）と短時間露光画像（低感度画像）を順次メモリへ書き込み、書き込みアドレス以外のアドレスを利用して、長時間露光画像（高感度画像）と短時間露光画像（低感度画像）をメモリから並列に読み出す処理を実行させる制御を行う請求項１〜６いずれかに記載の撮像装置。
【請求項８】
前記制御部は、
通常画像生成処理モードと広ダイナミックレンジ画像生成処理モードとの切り替え処理時に、
前記メモリに対する入力データを切り替え後のモードに対応するデータを入力し、
前記メモリからの出力データを切り替え前のモードに対応するデータを出力する設定とした遷移期間を設けて、該遷移期間の経過後、前記メモリからの出力データを切り替え後のモードに対応するデータを出力する設定とする制御を行う請求項１〜７いずれかに記載の撮像装置。
【請求項９】
前記制御部は、
切り替え後モードが広ダイナミックレンジ画像生成処理モードである場合、前記遷移期間を広ダイナミックレンジ画像の生成に必要な長時間露光画像（高感度画像）と短時間露光画像（低感度画像）の格納が終了するまでの期間とし、
切り替え後モードが通常画像生成処理モードである場合、前記遷移期間を通常画像の生成に必要な画像の格納が終了するまでの期間とする制御を行う請求項８に記載の撮像装置。
【請求項１０】
前記制御部は、
メモリ格納データの垂直反転処理に対応したアドレス設定処理を実行する場合、
通常画像生成処理モードと広ダイナミックレンジ画像生成処理モードとの切り替え処理時に、アドレスとデータとの対応関係を維持したアドレス設定制御を行う請求項８または９に記載の撮像装置。
【請求項１１】
撮像信号を格納するメモリと、
メモリに格納された画像信号を入力して画像合成処理を実行して広ダイナミックレンジ画像を生成する画像合成部と、
γ補正処理による信号変換処理を実行する画像補正部と、
メモリに対する入出力経路の切り替えを伴う信号経路制御を実行する制御部を有し、
前記制御部は、
前記画像合成部における画像合成処理を実行しない通常画像生成時には、前記画像補正部による補正後の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行し、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、前記画像補正部による補正前の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行する画像処理装置。
【請求項１２】
画像処理装置において実行する信号処理方法であり、
前記画像処理装置は、
メモリに格納された画像信号を入力して画像合成処理を実行して広ダイナミックレンジ画像を生成する画像合成部と、
γ補正処理による信号変換処理を実行する画像補正部と、
メモリに対する入出力経路の切り替えを伴う信号経路制御を実行する制御部を有し、
前記制御部は、
前記画像合成部における画像合成処理を実行しない通常画像生成時には、前記画像補正部による補正後の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行し、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、前記画像補正部による補正前の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行する信号処理方法。
【請求項１３】
画像処理装置において信号処理制御を実行させるプログラムであり、
前記画像処理装置は、
メモリに格納された画像信号を入力して画像合成処理を実行して広ダイナミックレンジ画像を生成する画像合成部と、
γ補正処理による信号変換処理を実行する画像補正部と、
メモリに対する入出力経路の切り替えを伴う信号経路制御を実行する制御部を有し、
前記プログラムは、前記制御部に、
前記画像合成部における画像合成処理を実行しない通常画像生成時には、前記画像補正部による補正後の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行させ、
前記画像合成部における画像合成処理を実行する広ダイナミックレンジ画像生成時には、前記画像補正部による補正前の信号を前記メモリに対する書き込み読み出し信号として設定する信号経路制御を実行させるプログラム。