(57)【要約】      （修正有）【課題】表示対象の画像を一時記憶するためのメモリの帯域の圧迫を抑制しつつ、互いに異なる解像度を持つ複数の表示装置に対してＯＳＤ合成した画像を出力可能にする。【解決手段】複数の表示装置に、それぞれの表示解像度に応じた画像データを出力する画像処理システムであって、表示対象の画像データと、当該画像データが表す画像に重畳表示することになるＯＳＤデータとを、異なる端子から同期して出力する第１の画像処理装置１００と、第１の画像処理装置の端子に接続され、複数の表示装置を接続可能な第２の画像処理装置１３０とを有する。ここで、第２の画像処理装置は、前記画像データ及び前記ＯＳＤデータとを合成する合成部と、合成部で得られた合成画像データを、接続された表示装置それぞれの表示解像度に合わせて解像度変換する変換部と、この変換部で得られた各解像度の合成画像データをそれぞれの表示装置に出力する出力部とを有する。【選択図】図１
2018157335.tif 000002
【特許請求の範囲】
【請求項１】
複数の表示装置に、それぞれの表示解像度に応じた画像データを出力する画像処理システムであって、
表示対象の画像データと、当該画像データが表す画像に重畳表示することになるＯＳＤデータとを、異なる端子から出力する第１の画像処理装置と、
前記第１の画像処理装置の前記端子に接続され、複数の表示装置を接続可能な第２の画像処理装置とを有し、
前記第２の画像処理装置は、
前記画像データと前記ＯＳＤデータとを合成する合成手段と、
該合成手段で得られた合成画像データを、接続された表示装置それぞれの表示解像度に合わせて解像度変換する変換手段と、
該変換手段で得られた各解像度の合成画像データをそれぞれの表示装置に出力する出力手段と、
を有することを特徴とする画像処理システム。
【請求項２】
前記第１の画像処理装置は、
表示装置ごとに、ＯＳＤを合成するか否かについてユーザからの指示入力を受け付ける手段と、
前記指示入力に応じたＯＳＤ設定情報を前記第２の画像処理装置に供給する手段とを含み、
前記第２の画像処理装置は、
接続可能な表示装置の数ぶんの前記合成手段と、
前記第１の画像処理装置から供給された前記ＯＳＤ設定情報に基づき、合成手段それぞれの合成処理を行うか否かを制御する制御手段と
を含むことを特徴とする請求項１に記載の画像処理システム。
【請求項３】
前記第１の画像処理装置は、
撮像する撮像手段と、
撮像した撮像画像データを複数の領域に分け、領域それぞれの現像処理を並列に行うための複数の現像手段と、
前記複数の現像手段で得た現像後の画像データそれぞれを記憶する複数の記憶手段と、
前記複数の記憶手段に記憶された各領域の現像後の画像データから、１枚の現像後の画像データとして読み出して前記第２の画像処理装置に出力する出力手段と
を含むことを特徴とする請求項１又は２に記載の画像処理システム。
【請求項４】
前記第１の画像処理装置は、複数の集積回路チップとして撮像装置に実装され、
前記複数の集積回路チップのそれぞれは、１つの現像手段、１つの記憶手段を含む
ことを特徴とする請求項３に記載の画像処理システム。
【請求項５】
前記第１の画像処理装置及び前記第２の画像処理装置それぞれは、集積回路チップとして撮像装置に実装されることを特徴とする請求項１乃至４のいずれか１項に記載の画像処理システム。
【請求項６】
表示装置に表示対象の画像データを出力する画像処理システムであって、
表示対象の画像データと、当該画像データが表す画像に重畳表示することになるＯＳＤデータとを、異なる端子から出力する第１の画像処理装置と、
前記第１の画像処理装置の前記端子に接続され、表示装置を接続可能な第２の画像処理装置とを有し、
前記第２の画像処理装置は、
前記第１の画像処理装置から供給された画像データから、当該画像データをアシストするためのアシスト画像データを生成する生成手段と、
前記第１の画像処理装置から供給された画像データ、前記アシスト画像データ、及び、前記ＯＳＤデータを合成する合成手段と、
該合成手段で得られた合成画像データを、接続された表示装置に出力する出力手段と、
を有することを特徴とする画像処理システム。
【請求項７】
前記生成手段は、前記画像データからウェーブフォームモニター、又は、ベクトルスコープ用の画像データを生成することを特徴とする請求項６に記載の画像処理システム。
【請求項８】
前記第１の画像処理装置及び前記第２の画像処理装置それぞれは、集積回路チップとして撮像装置に実装されることを特徴とする請求項６又は７に記載の画像処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理、特に複数の画像表示装置に画像を出力をする技術に関するものである。
【背景技術】
【０００２】
近年、デジタルビデオカメラやデジタルカメラなどの撮像装置は、接眼部に配置される電子ビューファインダ、背面や側面に配置される液晶パネル、テレビやディスプレーに接続されるＨＤＭＩなどの出力端子等、複数の画像出力に係る構成を有している。デジタルビデオカメラにおいては、電子ビューファインダ、液晶パネル、ＨＤＭＩなどの映像出力端子から同時に画像出力できる仕様が一般的である。また、デジタルカメラにおいても、特に動画を撮影する場合、外部機器によるモニタリングや外部記録に対応するために、液晶パネルとＨＤＭＩなどの映像出力端子から、同時に画像出力が可能な機種が発売されるようになった。このような状況の中、画像処理装置内でそれぞれの出力に応じて生成された画像データを一旦ＤＲＡＭなどのバッファメモリに保持し、それぞれの出力先の要求に応じて同時に画像出力を行う画像処理装置が提案されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１６５８７６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
最近の撮像装置に搭載される電子ビューファインダや液晶パネルの表示画素数が増大している。また、ＨＤＭＩ等の画像出力端子も４Ｋ出力などが可能になってきている。処理すべき画素数が増えるということは、装置内で使用されるメモリの帯域の使用率が増加することを意味する。よって、１つの画像処理装置が、これまでよりも高い解像度で複数の画像出力を行おうとすると、メモリの帯域を使い切ってしまい、正常な出力が行えなくなる可能性が出てくる。
【０００５】
本発明は上記の問題点に鑑み、表示対象の画像を一時記憶するためのメモリの帯域の圧迫を抑制しつつ、互いに異なる解像度を持つ複数の表示装置に対してＯＳＤ合成した画像を出力することを可能にする技術を提供しようとするものである。
【課題を解決するための手段】
【０００６】
この課題を解決するため、例えば本発明の画像処理システムは以下の構成を備える。すなわち、
複数の表示装置に、それぞれの表示解像度に応じた画像データを出力する画像処理システムであって、
表示対象の画像データと、当該画像データが表す画像に重畳表示することになるＯＳＤデータとを、異なる端子から出力する第１の画像処理装置と、
前記第１の画像処理装置の前記端子に接続され、複数の表示装置を接続可能な第２の画像処理装置とを有し、
前記第２の画像処理装置は、
前記画像データと前記ＯＳＤデータとを合成する合成手段と、
該合成手段で得られた合成画像データを、接続された表示装置それぞれの表示解像度に合わせて解像度変換する変換手段と、
該変換手段で得られた各解像度の合成画像データをそれぞれの表示装置に出力する出力手段とを有することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、表示対象の画像を一時記憶するためのメモリの帯域の圧迫を抑制しつつ、互いに異なる解像度を持つ複数の表示装置に対してＯＳＤ合成した画像を出力することが可能になる。
【図面の簡単な説明】
【０００８】
【図１】第１の実施形態における画像処理システムのブロック構成図。
【図２】画像データとＯＳＤデータのデータ構造を示す図。
【図３】第２の実施形態における画像処理システムのブロック構成図。
【図４】第３の実施形態における画像処理システムのブロック構成図。
【図５】第４の実施形態における画像処理システムのブロック構成図。
【発明を実施するための形態】
【０００９】
以下、添付図面に従って本発明に係る実施形態を詳細に説明する。ビデオカメラ（撮像装置）に適用した例を説明するが、画像を複数の表示装置への出力する機能を有する装置であれば良いので、特にビデオカメラに限定されるものではなない。
【００１０】
［第１の実施形態］
図１は、本発明の実施形態に係るビデオカメラが有する画像処理システムのブロック図である。本システムは、２つの画像処理装置１００、１３０を有する。
【００１１】
画像処理装置１００は、被写体を撮像、現像処理をし、画像情報を外部に出力する機能を持つ。画像処理装置１００における制御部１２１は、ＣＰＵと、当該ＣＰＵが実行する制御プログラムを格納するメモリを含み、画像処理装置１００の全体の処理を制御する。操作部１２０は、ユーザが画像処理装置１００に対して指示を与えるために用いるキーやボタン、タッチパネルなどの入力デバイスを含む。操作部１２０からの操作信号は、制御部１２１によって検出され、操作に応じた動作が実行されるよう制御部１２１によって制御される。
【００１２】
操作部１２０によって撮影動作の開始が指示されると、撮像対象となる被写体の光学像が、撮像光学部１０１を介して入力され、撮像センサー部１０２上に結像する。撮像センサー部１０２によって変換された電気信号は、センサー信号処理部１０３に供給される。センサー信号処理部１０３は、入力した電気信号をデジタルデータに変換し、画素の修復処理を施す。修復処理には、撮像センサー部１０２における欠落画素や信頼性の低い画素の値に対し、周辺画素値を用いて修復対象の画素を補間したり、所定のオフセット値を減算したりする処理が含まれる。現像処理部１０４は、センサー信号処理部１０３により出力されたデータを受け、輝度と色差から成る色空間への変換、各データに含まれるノイズを除去、光学的な歪の補正等の画像を適正化するなどの所謂現像処理を行う。また、現像処理部１０４は、現像処理後の画像データを記憶部１０８に一旦格納する。記憶部１０８の代表的な形態の１つにＤＲＡＭが上げられる。出力処理部１１０は、同期制御部１０６の指示に従い、定められたタイミングで記憶部１０８から画像データを読み出し出力端子１１２を通して画像処理装置１００の外部に出力する。ＯＳＤ描画部１０７は、ユーザからの操作部１２０を介した指示入力に従い、表示対象の画像（撮像画像）に重畳表示するメニューや、撮影補助の為の罫線、タイムコード等を描画する。ＯＳＤ描画部１０７で描画されたＯＳＤデータは、記憶部１０９で一旦保持される。記憶部１０９の代表的な形態の１つにＤＲＡＭが上げられる。出力処理部１１１は、同期制御部１０６の指示に従い、定められたタイミングで記憶部１０９からＯＳＤデータを読み出し出力端子１１３を通して画像処理装置１００の外部に出力する。
【００１３】
なお、出力端子１１２、１１３のいずれからも画素を単位とするデータが出力される。以降、この２つを区別するため、出力端子１１２から出力される画像データを撮像画像データ、出力端子１１３から出力されるＯＳＤデータをＯＳＤ画像データと言う。
【００１４】
また、画像処理装置１００が画像処理装置１３０に向けて出力することになる撮像画像データ及びＯＳＤ画像データの解像度が同じ場合には、同期制御部１０６はそれぞれの画素を同期させて出力するためのタイミング信号を発生させればよい。ただし、一般に、ＯＳＤ画像を構成する文字等のシンボルはそれが区別できれば良く、撮像画像データほどの解像度は必要としない場合が多い。例えば、撮像画像データが水平方向Ｗ画素、垂直方向Ｈ画素で構成され、ＯＳＤ画像データの水平方向の画素数がＷ／４、垂直方向画素数がＨ／４の場合の場合を考察する。この場合、同期制御部１０６は撮像画像データが水平方向の４画素出力する度に、ＯＳＤ画像データの水平の１画素を出力するタイミング信号を出力部１１１に供給する。また、同期制御部１０６は撮像画像データが垂直方向の４ライン分出力するたびに、ＯＳＤ画像データの垂直方向の１ラインを出力するタイミング信号を出力処理部１１１すれば良い。画像処理装置１３０は、画像処理装置１００から撮像画像データの１画素を入力するタイミングでＯＳＤ画像データも受信する。結果的に、画像処理装置１３０は、撮像画像データの４×４画素データに対して、同じ画素値及び係数値で構成される４×４個のＯＳＤ画素データを入力することになる。
【００１５】
次に、他方の画像処理装置１３０について説明する。この画像処理装置１３０は、集積回路チップ、例えばＳＰＧＡ（System Programable Gate Array）としてビデオカメラに実装されるものである。ＦＰＧＡ（Field Programable Gate Array）としてビデオカメラに実装されてもよい。
【００１６】
画像処理装置１３０は、上記の画像処理装置１００から出力された撮像画像データ及びＯＳＤ画像データを受信し、合成画像データの生成、及び、表示装置１４０と表示装置１４１への合成画像データの出力を行う。なお、実施形態における表示装置１４０、１４１は、互いに異なる解像度の表示装置であるものとして説明する。
【００１７】
入力端子１３１は、画像処理装置１００の出力端子１１２から出力される撮像画像データを受け取る。入力端子１３２は、画像処理装置１００の出力端子１１３から出力されたＯＳＤ画像データを受け取る。画像合成部１３３は、撮像画像データとＯＳＤ画像データを、ＯＳＤ画像データに含まれる合成比率を表す係数データ（詳細後述）に従って合成する。撮像画像データとＯＳＤ画像データの合成の為の待ち合わせ時間が最少で済むように、同期制御部１０６で、タイミング制御を行うことも可能である。リサイズ部１３５は、画像合成部１３３で生成されたＯＳＤ合成後の撮像画像データを、表示装置１４０の要求に応じた画角（解像度）にリサイズ（解像度変換）し、出力端子１３７を通して、その表示装置１４０に出力する。同様に、リサイズ部１３６は、画像合成部１３３で生成されたＯＳＤ合成後の撮像画像データを、表示装置１４１の要求に応じた画角にリサイズし、出力端子１３８を通して、その表示装置１４１に出力する。
【００１８】
表示装置１４０は、例えば撮像装置の接眼部に配置される電子ビューファインダーであり、表示装置１４１は、例えば背面や側面に配置される液晶パネルである。出力端子１３７，１３８は、映像データと音声データを伝送可能な業務用のＳＤＩ、または、双方向通信可能で表示装置から解像度を取得可能なＨＤＭＩやＤＶＩ等のインターフェースが挙げられる。
【００１９】
上記の説明のように、記憶部１０８は撮像画像データのみ、記憶部１０９はＯＳＤ画像データのみを記憶する。そして、複数（実施形態では２つ）の表示装置が接続されていたとしても、撮像画像の１フレームにつき、それぞれの記憶部から撮像画像データ、ＯＳＤ画像データの読出しは１回であり、記憶部１０８及び記憶部１０９へのアクセス帯域を抑えることが可能になる。
【００２０】
次に、出力端子１１２、１１３から出力される画像データについて説明する。撮像画像データの１画素が、例えばＲ，Ｇ，Ｂの３成分で構成される場合、出力端子１１２からは図２（ａ）に示すように、画素単位の｛Ｒ，Ｇ，Ｂ｝の順に出力される。
【００２１】
一方、ＯＳＤ画像データは、文字や記号、線等のＯＳＤを表す画像データに、合成を表す係数（合成比率を示す値）が付加されたデータである。それ故、図２（ｂ）に示すように、Ｒ，Ｇ，Ｂの成分データに後続して、合成係数Ａが出力される。つまり、ＯＳＤデータの場合、水平方向の画素数をＲ、Ｇ、Ｂそれぞれを１つと数えた場合、ＲＧＢＡのＯＳＤデータの水平方向の画素数は、ＲＧＢの画像データの３分の４倍になる。先に説明した画像合成部１３３は、撮像画像データの画素のＲＧＢの各値と、ＯＳＤ画像データが示す画素のＲＧＢの各値とを、ＯＳＤ画像データに付加された係数Ａに従って合成する。各成分が仮に８ビット（最大値が２５５）で表され、撮像画像データをＩ1、ＯＳＤ画像データをＩ2としたとき、画像合成部１３３は次式に従って合成後の画像Ｉ3を生成する。
Ｉ3(x,y,C)＝｛A×Ｉ1(x,y,C)＋（255−A）×Ｉ2(x,y,C)｝／255
ここで、xは画像の水平方向の座標、yは同垂直方向の座標、Ｃは｛Ｒ，Ｇ，Ｂ｝のいずれかの色成分を表す。なお、ＯＳＤ画像データにおけるＲ，Ｇ，Ｂ及び係数Ａの値は、ユーザが操作部１２０から設定されるものとする。
【００２２】
また、撮像画像データが図２（ｃ）に示すようにＹＣＣである場合、ＯＳＤ画像データは合成係数をＡとすると、同図（ｄ）に示すようにＹＣＣＡで表すことができる。図２（ｄ）に示したＹＣＣの例は、ＹＣＣ４２２であり、ＡデータはＹと同じ数になっている。水平方向の画素数をＹＣＣ４２２の慣例に従い、Ｙで数えるとＯＳＤデータＹＣＣＡの水平方向の画像数は、ＹＣＣ４２２の画像データの２分の３倍になっている。図２では、代表的なＯＳＤ画像データの形式を上げて説明したが、例示以外の形式でも本実施形態が適用可能である。
【００２３】
図１の同期制御部１０６は、出力端子１１２から出力される画像データと、出力端子１１３から出力されるＯＳＤデータの水平方向の転送開始タイミングと転送時間を合わせることにより、画像処理装置１３０で行われる画像合成処理を容易にすることができる。
【００２４】
以上説明したように本第１の実施形態によれば、撮像画像データは記憶部１０８に、ＯＳＤ画像データは記憶部１０９に一旦格納される。しかし、互いに異なる複数の表示装置にＯＳＤ合成後の画像データを表示するものとしても、各記憶部からの画像データの読出回数は動画像の１フレームにつき１回となり、記憶部のメモリ帯域が圧迫することを抑制できる。
【００２５】
なお、上記実施形態では、画像処理装置１３０には２つの表示装置が接続可能な例を説明したが、それ以上の表示装置が接続可能としても良い。この場合、画像処理装置１３０は、接続可能な数ぶんのリサイズ部を含むことになる。
【００２６】
［第２の実施形態］
上記第１の実施形態では、複数の表示装置に、それぞれの解像度のＯＳＤを合成した撮像画像データを出力するものであった。本第２の実施形態では、表示装置ゴトに、個別にＯＳＤを合成するか否かを設定できるようにする例を説明する。
【００２７】
図３は、本第２の実施形態におけるシステム構成図である。図１との相違は、画像処理装置に出力端子１１４が付加された点と、画像処理装置１３０に入力端子１３９、制御部１２２が付加され、且つ、画像合成部１３４が追加された点である。これ以外は第１の実施形態と同じである。よって、以下では、第１の実施形態と異なる点について説明する。
【００２８】
ユーザは操作部１２０を操作して、表示装置１４０、１４１それぞれに対してＯＳＤを重畳させるか否かを個別に設定できる。制御部１２１は係るユーザからの設定された情報（ＯＳＤ設定情報）を、出力端子１１４を介して画像処理装置１３０に通知する。画像処理装置１３０における制御部１２２は、入力端子１３９を介して、このＯＳＤ設定情報を受信する。そして、制御部１２２は、画像合成部１３３、１３４それぞれに対して独立して、合成処理のＯＮ／ＯＦＦの制御信号を出力する。
【００２９】
画像合成部１３３は、合成処理のＯＮとする信号を受信した場合には入力端子１３２を介して受信したＯＳＤ画像データの係数Ａが示す合成比率で、ＯＳＤ画像データと撮像画像データとを合成し、その結果をリサイズ部１３５に出力する。また、画像合成部１３３は、合成処理のＯＦＦとする信号を受信した場合には、入力端子１３１から入力した撮像画像データをそのままリサイズ部１３５に出力する。
【００３０】
画像合成部１３４は、画像合成部１３３とほぼ同じである。すなわち、画像合成部１３４は、合成処理のＯＮとする信号を受信した場合には入力端子１３２を介して受信したＯＳＤ画像データの係数Ａが示す合成比率で、ＯＳＤ画像データと撮像画像データとを合成し、その結果をリサイズ部１３６に出力する。また、画像合成部１３４は、合成処理のＯＦＦとする信号を受信した場合には、入力端子１３１から入力した撮像画像データをそのままリサイズ部１３６に出力する。
【００３１】
上記の結果、本第２の実施形態によれば、先に説明した第１の実施形態の作用効果に加えて、表示装置それぞれに対してＯＳＤを重畳するか否かを設定できるようになる。
【００３２】
［第３の実施形態］
図４は、第３の実施形態に係る画像処理システムの構成例を示すブロック図である。本第３の実施形態でもビデオカメラに適用する例を説明する。図４は、第３の実施形態におけるシステム構成図であり、画像処理装置２００ａ、２００ｂ、２３０を有する。これらは、それぞれＳＰＧＡとして実装することができる。
【００３３】
図４に示す画像処理装置２００ａ、画像処理装置２００ｂは、１枚の被写体の撮像画像データを２つの領域に分割し、それぞれが担当する領域の現像処理を並列して行う。例えば画像処理装置２００ａは撮像画像データを上下分割して得られた上半分の現像処理を、画像処理装置２００ｂは撮像画像データの下半分の現像処理を行う。この結果、２つ（複数）の画像処理装置に処理量が分担されるので、これまでよりも更に高い解像度の撮像画像の現像処理が可能になる。ただし、撮像画像データを左右分割して２つの画像処理装置で処理を分担してもよいし、奇数ラインのデータと偶数ラインのデータとを２つの画像処理装置で処理を分担してもよい。
【００３４】
なお、図４では、各構成要素については２００番台の参照符号を付しているが、その下２桁は、図３の構成の下２桁に合わせている。現像処理を行う画像処理装置２００ａ、２００ｂがそれぞれ分担して行う構成要素については、添え字ａ，ｂを付して区別させている。よって、各構成要素についての説明は省略する。
【００３５】
図４において、制御部２２１は、ＣＰＵと、当該ＣＰＵが実行する制御プログラムを格納するメモリを含み、画像処理装置２００ａ、２００ｂの全体の処理を制御する。操作部２２０は、ユーザが画像処理装置２００ａ、２００ｂに対して指示を与えるために用いるキーやボタン、タッチパネルなどの入力デバイスを含む。操作部２２０からの操作信号は、制御部２２１によって検出され、操作に応じた動作が実行されるよう制御部２２１によって制御される。また、制御部２２１は、操作部２２０から設定された表示装置２４０、２４１に対するＯＳＤを合成するか否かを示す信号を、出力端子２２４を介して、画像処理装置２３０も供給する。
【００３６】
操作部２２０によって撮影動作の開始が指示されると、撮像対象となる被写体の光学像が、撮像光学部２０１を介して入力され、撮像センサー部２０２上に結像する。撮像センサー部２０２によって変換された電気信号は、センサー信号処理部２０３ａ及びセンサー信号処理部２０３ｂに供給され、それぞれにて画素の修復処理が施される。修復処理には、撮像センサー部２０２における欠落画素や信頼性の低い画素の値に対し、周辺画素値を用いて修復対象の画素を補間したり、所定のオフセット値を減算したりする処理が含まれる。センサー信号処理部２０３ａ、２０３ｂにより出力されたデータは、現像処理部２０４ａ、２０４ｂにて、輝度と色差から成る信号に変換して、各信号に含まれるノイズを除去、光学的な歪を補正し、画像を適正化するなどの所謂現像処理を行う。現像後の撮像画像データは、記憶部２０８ａ，２０８ｂに一旦保持される。記憶部２０８ｂに保持された撮像画像データは、画像処理装置２００ａ内の記憶部２１５に転送される。記憶部２０８ａ，２０８ｂ，２１５の代表的な形態の１つにＤＲＡＭが上げられる。出力処理部２１０は、同期制御部２０６ａの制御下にて、予め定められたタイミングに従って記憶部２０８ａ、２１５から画像データを読み出し、出力端子２１２を通して画像処理装置２３０に出力する。実施形態では画像処理装置２００ａが上半分を、画像処理装置２００ｂが下半分を現像処理するものとしている。従って、出力制御部２１０は上半分か下半分かに従って、読み出し先の記憶部２０８ａ、２１５を切り換えることになる。
【００３７】
ＯＳＤ描画部２０７は、操作部２２０の指示に従いメニュー表示や、撮影補助の為の罫線、タイムコード等を描画する。ＯＳＤ描画部２０７で描画されたＯＳＤ画像データは、記憶部２０９で一旦保持される。記憶部２０９の代表的な形態の１つにＤＲＡＭが上げられる。出力処理部２１１は、同期制御部２０６ｂから同期タイキング信号に従い、記憶部２０９からＯＳＤ画像データを読み出し、出力端子２１３を通して画像処理装置２３０に出力する。同期制御部２０６ａと２０６ｂはお互いに同期することができる。
【００３８】
次に画像処理装置２３０について説明する。この画像処理装置２３０は、画像処理装置２００ａからの撮像画像データ、及び、画像処理装置２００ｂからのＯＳＤ画像データを入力し、合成処理する。そして、画像処理装置２３０は、合成後の撮像画像データを、表示装置２４０、２４１にそれぞれの解像度に併せてリサイズし、出力する。また、制御部２２２は、画像処理装置２００ａからのＯＳＤのＯＮ／ＯＦＦに係る信号を入力端子２３９を介して入力し、第２の実施形態と同様に、画像合成部２３３、２３４を制御する。
【００３９】
入力端子２３１は、画像処理装置２００ａの出力端子２１２から出力される撮像画像データを受け取る。入力端子２３２は、画像処理装置２００ｂの出力端子２１３から出力されるＯＳＤ画像データを受け取る。画像合成部２３３、並びに画像合成部２３４は、撮像画像データとＯＳＤ画像データとを合成する。撮像画像データとＯＳＤ画像データの合成の為の待ち合わせ時間が最少で済むように、同期制御部２０６ａ、２０６ｂで、タイミング制御を行うことも可能である。リサイズ部２３５は、画像合成部２３３からの出力を表示装置２４０の要求に応じた画角（解像度）にリサイズし、出力端子２３７を通して、その表示装置２４０に出力する。同様に、リサイズ部２３６は、画像合成部２３４からの出力を表示装置２４１の要求に応じた画角にリサイズし、出力端子２３８を通して、その表示装置２４１に出力する。
【００４０】
上記の構成によって、記憶部２０７ａ，２０８ｂ，２１５は撮像画像データのみ、記憶部２０９はＯＳＤ画像データのみを記憶する。それて、これら記憶部は、表示装置の数に依存せず、撮像した１フレームの表示期間にて、１回の読出しのためのアクセスのみとなり、それら記憶部のアクセス帯域が圧迫されることを抑制できる。
【００４１】
［第４の実施形態］
第４の実施形態を説明する。本第４の実施形態でも、デジタルビデオカメラに適用した例を説明する。図５は、第４の実施形態に係る画像処理システムの構成例を示すブロック図であり、画像処理装置３００、３３０はＳＰＧＡとしてビデオカメラに実装可能である。
【００４２】
本第４の実施形態では、画像処理装置３００に搭載されておらず、かつ、ＯＳＤを合成した画像データからでは生成できない撮影アシスト機能（アシスト画像データやベクトルスコープ用の画像データの付与）を、もう１つの画像処理装置３３０を使用して実現するものである。
【００４３】
画像処理装置３００における制御部３２１は、ＣＰＵと、当該ＣＰＵが実行する制御プログラムを格納するメモリを含み、画像処理装置３００の全体の処理を制御する。操作部３２０は、ユーザが画像処理装置３００に対して指示を与えるために用いるキーやボタン、タッチパネルなどの入力デバイスを含む。操作部３２０からの操作信号は、制御部３２１によって検出され、操作に応じた動作が実行されるよう制御部３２１によって制御される。
【００４４】
操作部３２０によって撮影動作の開始が指示されると、撮像対象となる被写体の光学像が、撮像光学部３０１を介して入力され、撮像センサー部３０２上に結像する。撮像センサー部３０２によって変換された電気信号は、センサー信号処理部３０３に供給されえる。センサー信号処理部３０３は、入力した電気信号をデジタルデータに変換し、画素の修復処理を施す。修復処理には、撮像センサー部３０２における欠落画素や信頼性の低い画素の値に対し、周辺画素値を用いて修復対象の画素を補間したり、所定のオフセット値を減算したりする処理が含まれる。現像処理部３０４は、センサー信号処理部３０３により出力されたデータを受け、輝度と色差から成る信号に変換して、各信号に含まれるノイズを除去、光学的な歪を補正し、画像を適正化するなどの所謂現像処理を行う。現像で得られた撮像画像データは、リサイズ部３０５に供給される。リサイズ部３０５は、入力した撮像画像データを、外部出力装置に応じた画角（解像度）にリサイズし、リサイズ後の撮像画像データを記憶部３０８に一旦記憶させる。記憶部３０８の代表的な形態の１つにＤＲＡＭが上げられる。出力処理部３１０は、同期制御部３０６の指示に従い、定められたタイミングで記憶部３０８から撮像画像データを読み出し、出力端子３１２を通して画像処理装置３３０に出力する。
【００４５】
ＯＳＤ描画部３０７は、操作部３２０の指示に従いメニュー表示や、撮影補助の為の罫線、タイムコード等を描画する。ＯＳＤ描画部３０７で描画されたＯＳＤ画像データは、記憶部３０９に一旦記憶される。記憶部３０９の代表的な形態の１つにＤＲＡＭが上げられる。出力処理部３１１は、同期制御部３０６の指示に従い、定められたタイミングで記憶部３０９からＯＳＤ画像データを読み出し、出力端子３１３を通して画像処理装置３００に出力する。
【００４６】
画像処理装置３３０は、画像処理装置３００から出力された撮像画像データ、ＯＳＤ画像データを処理し、撮影アシストデータを付加して表示装置３４０に画像を出力する。
【００４７】
入力端子３３１は、出力端子３１２から出力される撮像画像データを受け取る。入力端子３３２は、出力端子３１３から出力されたＯＳＤ画像データを受け取る。撮影アシスト部３３３は、撮像画像データから撮影アシストに必要なデータ、例えばウェーブフォームモニター機能やベクトルスコープ機能等を実現するデータを生成する。画像合成部３３４は、撮像画像データ、ＯＳＤ画像データ、及び、撮影アシストデータを合成する。画像データとＯＳＤデータの合成の為の待ち合わせ時間が最少で済むように、同期制御部３０６で、タイミング制御を行うことも可能である。画像合成部３３４で合成された画像データは、出力端子３３５を通して表示装置３４０に出力される。
【００４８】
以上説明したように本第４の実施形態によれば、画像処理装置３００に搭載されておらず、かつ、ＯＳＤを合成した画像データからでは生成できない撮影アシストの機能を、画像処理装置３３０を使用して実現することができる。
【符号の説明】
【００４９】
１００、１３０…画像処理装置、１０１…撮像光学部、１０２…撮像センサー部、１０３…センサー信号処理部、１０４…現像部、１０６…同期制御部、１０７…ＯＳＤ描画部、１０８、１０９…記憶部、１１０、１１１…出力処理部、１１２、１１３、１３７、１３８…出力端子、１３１、１３２…入力端子、１３３、１３４…画像合成部、１３５、１３６…リサイズ部
【図１】
2018157335.tif 000003
【図２】
2018157335.tif 000004
【図３】
2018157335.tif 000005
【図４】
2018157335.tif 000006
【図５】
2018157335.tif 000007