(57)【要約】【課題】解像度を確保しつつ、遅延を抑えたライブビュー画像の表示を行うことができる。【解決手段】画像処理部２０４は、無線通信部２０３で無線通信するリモートカメラ１００に対して撮像指示を行う。画像処理部２０４は、撮像部２０１で撮像された撮像データを表示部２０６で表示させる画像に画像処理するとともに、撮像指示に基づいてリモートカメラ１００でなされた撮像に対応する撮像データが無線通信部２０３で無線受信された場合、無線受信された撮像データを表示部２０６で表示させる画像に画像処理する。表示制御部２０５は、撮像指示が行われた後であって、撮像指示に基づいてリモートカメラ１００でなされた撮像に対応する撮像データに対する画像処理が画像処理部で終了するまでの間、撮像部２０１でされた撮像データに対応する画像を表示部２０６に表示させる。【選択図】図１
2014175723.tif 000002
【特許請求の範囲】
【請求項１】
無線通信部と、
撮像部と、
表示部と、
前記無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示部と、
前記撮像部で撮像された撮像データを前記表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理部と、
前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理部で終了するまでの間、前記撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御部と、
を備えることを特徴とする撮像画像表示装置。
【請求項２】
前記表示制御部は、前記撮像指示が行われたときに前記撮像部で撮像された撮像データに対応する画像を、前記表示部に所定時間表示させる
ことを特徴とする請求項１に記載の撮像画像表示装置。
【請求項３】
前記撮像指示部は、４色以上の色フィルタを有するマルチスペクトル方式の撮像素子を有する前記リモートカメラに対して前記撮像指示を行う
ことを特徴とする請求項１に記載の撮像画像表示装置。
【請求項４】
前記撮像指示部は、マイクロレンズアレイを有するライトフィールド方式の撮像素子を有する前記リモートカメラに対して前記撮像指示を行う
ことを特徴とする請求項１に記載の撮像画像表示装置。
【請求項５】
第１の無線通信部と、
第１の撮像部と、
表示部と、
前記第１の無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示部と、
前記第１の撮像部で撮像された撮像データを前記表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記第１の無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理部と、
前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理部で終了するまでの間、前記第１の撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御部と、
を備える撮像画像表示装置と、
第２の無線通信部と、
第２の撮像部と、
前記第２の無線通信部で無線通信する前記撮像画像表示装置から受信した前記撮像指示に基づいて前記第２の撮像部に撮像データを撮像させ、前記第２の撮像部が撮像した前記撮像データを前記撮像画像表示装置に対して前記第２の無線通信部に送信させる制御部と、
を備える前記リモートカメラと、
を含むことを特徴とする撮像システム。
【請求項６】
無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示ステップと、
撮像部で撮像された撮像データを表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理ステップと、
前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理ステップで終了するまでの間、前記撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御ステップと、
を含むことを特徴とする撮像画像表示方法。
【請求項７】
無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示ステップと、
撮像部で撮像された撮像データを表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理ステップと、
前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理ステップで終了するまでの間、前記撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御ステップと、
をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像画像表示装置、撮像システム、撮像画像表示方法およびプログラムに関する。
【背景技術】
【０００２】
従来より、撮像装置で撮像した撮像画像を、ネットワークを介して撮影画像表示装置に送信し、送信された撮影画像を撮影画像表示装置で表示する撮像システムが知られている。この場合、撮影画像のデータ容量が大きいと送受信に時間がかかり、撮影画像の送受信が完了するまで撮影画像表示装置が撮影画像を表示できないという問題がある。そこで、撮影装置からライブビュー画像を受信しておき、撮像装置からレリーズ通知が受信された場合、ライブビュー画像を表示部に表示し、撮像装置から撮影画像の受信が完了した場合、撮影画像を表示部に表示する撮影画像表示装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−２４０４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載の技術では、ライブビュー画像とはいえ、データ容量が増えると無線送信に時間がかかる。そのため、ライブビュー画像の撮影タイミングよりも撮影画像表示装置がライブビュー画像を表示するタイミングが遅延するという問題がある。また、ライブビュー画像のデータ容量を抑えると、ライブビュー画像の解像度が落ちるという問題がある。
【０００５】
本発明は、上記課題を解決するためになされたものであり、解像度を確保しつつ、遅延を抑えたライブビュー画像の表示を行うことができる撮像画像表示装置、撮像システム、撮像画像表示方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、無線通信部と、撮像部と、表示部と、前記無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示部と、前記撮像部で撮像された撮像データを前記表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理部と、前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理部で終了するまでの間、前記撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御部と、を備えることを特徴とする撮像画像表示装置である。
【０００７】
また、本発明は、第１の無線通信部と、第１の撮像部と、表示部と、前記第１の無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示部と、前記第１の撮像部で撮像された撮像データを前記表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記第１の無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理部と、前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理部で終了するまでの間、前記第１の撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御部と、を備える撮像画像表示装置と、第２の無線通信部と、第２の撮像部と、前記第２の無線通信部で無線通信する前記撮像画像表示装置から受信した前記撮像指示に基づいて前記第２の撮像部に撮像データを撮像させ、前記第２の撮像部が撮像した前記撮像データを前記撮像画像表示装置に対して前記第２の無線通信部に送信させる制御部と、を備える前記リモートカメラと、を含むことを特徴とする撮像システムである。
【０００８】
また、本発明は、無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示ステップと、撮像部で撮像された撮像データを表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理ステップと、前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理ステップで終了するまでの間、前記撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御ステップと、を含むことを特徴とする撮像画像表示方法である。
【０００９】
また、本発明は、無線通信部で無線通信するリモートカメラに対して撮像指示を行う撮像指示ステップと、撮像部で撮像された撮像データを表示部で表示させる画像に画像処理するとともに、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データが前記無線通信部で無線受信された場合、前記無線受信された撮像データを前記表示部で表示させる画像に画像処理する画像処理ステップと、前記撮像指示が行われた後であって、前記撮像指示に基づいて前記リモートカメラでなされた撮像に対応する撮像データに対する前記画像処理が前記画像処理ステップで終了するまでの間、前記撮像部でされた撮像データに対応する画像を前記表示部に表示させる表示制御ステップと、をコンピュータに実行させるためのプログラムである。
【発明の効果】
【００１０】
本発明によれば、撮像指示部は、無線通信部で無線通信するリモートカメラに対して撮像指示を行う。また、画像処理部は、撮像部で撮像された撮像データを表示部で表示させる画像に画像処理するとともに、撮像指示に基づいてリモートカメラでなされた撮像に対応する撮像データが無線通信部で無線受信された場合、無線受信された撮像データを表示部で表示させる画像に画像処理する。また、表示制御部は、撮像指示が行われた後であって、撮像指示に基づいてリモートカメラでなされた撮像に対応する撮像データに対する画像処理が画像処理部で終了するまでの間、撮像部でされた撮像データに対応する画像を表示部に表示させる。これにより、解像度を確保しつつ、遅延を抑えたライブビュー画像の表示を行うことができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１の実施形態における撮像システムの構成を示したブロック図である。
【図２】本発明の第１の実施形態におけるＬＦ構成の撮像部の構成例を示したブロック図である。
【図３】本発明の第１の実施形態におけるＬＦ構成の撮像部の断面を示した断面図である。
【図４】本発明の第１の実施形態におけるＬＦ構成の撮像部が出力する撮像信号の表示例を示した概略図である。
【図５】本発明の第１の実施形態におけるＭＳ構成の撮像部の構成例を示したブロック図である。
【図６】本発明の第１の実施形態において、一般的な撮像部が備えるベイヤ配列のカラーフィルタの透過率と、ＭＳ構成の撮像部が備えるカラーフィルタの透過率との例を示したグラフである。
【図７】本発明の第１の実施形態におけるＭＳ構成の撮像部が出力する撮像信号を、ＲＧＢ画像に変換する画像処理を行わずに表示した例を示した画像である。
【図８】本発明の第１の実施形態における撮影操作端末の撮影時の動作手順を示したフローチャートである。
【図９】本発明の第１の実施形態における撮影操作端末の撮影時の動作手順を示したフローチャートである。
【図１０】本発明の第１の実施形態における撮影操作端末の撮影時の動作手順を示したフローチャートである。
【図１１】本発明の第２の実施形態における撮像システムの構成を示したブロック図である。
【図１２】本発明の第２の実施形態における撮影操作端末の撮影時の動作手順を示したフローチャートである。
【発明を実施するための形態】
【００１２】
（第１の実施形態）
以下、本発明の第１の実施形態について図面を参照して説明する。図１は、本実施形態における撮像システム１の構成を示したブロック図である。図示する例では、撮像システム１は、リモートカメラ１００と、撮影操作端末２００（撮影画像表示装置）とを含んでいる。
【００１３】
リモートカメラ１００は、撮像部１０１（第２の撮像部、制御部）と、無線通信部１０２（第２の無線通信部）とを備えている。撮像部１０１は、被写体を撮影してＲＡＷ撮像信号を生成する。また、撮像部１０１は、撮影操作端末２００から送信された撮影指示メッセージを、無線通信部１０２を介して受信した場合、画像を撮影してＲＡＷ撮像信号を生成する。そして、撮像部１０１は、生成したＲＡＷ撮像信号を、無線通信部１０２を介して撮影操作端末２００に対して送信する。撮像部１０１の構成例については後述する。無線通信部１０２は、撮影操作端末２００と無線通信を行う。
【００１４】
撮影操作端末２００は、撮像部２０１（第１の撮像部）と、撮像指示部２０２と、無線通信部２０３（第１の無線通信部）と、画像処理部２０４と、表示制御部２０５と、表示部２０６とを備えている。撮像部２０１は、ベイヤ配列のカラーフィルタと光センサとを備えた撮像部であり、被写体を撮影して撮像信号を生成する。
【００１５】
撮像指示部２０２は、シャッターボタンを備え、撮影者（ユーザ）から撮像指示の入力を受け付ける。また、撮像指示部２０２は、撮像指示の入力を受け付けた場合、無線通信部２０３を介して、リモートカメラ１００に対して撮像を指示する撮影指示メッセージを送信する。無線通信部２０３は、リモートカメラ１００と無線通信を行う。
【００１６】
画像処理部２０４は、撮像部２０１が生成した撮像信号に対して、表示部２０６に表示することができる形式に変換する画像処理を行い、表示画像データを生成する。また、画像処理部２０４は、撮像部１０１が生成したＲＡＷ画像信号に対して、表示部２０６に表示することができる形式に変換する画像処理を行い、表示画像データを生成する。なお、本実施形態では、画像処理部２０４による画像処理をソフトウェアによって行う。表示制御部２０５は、表示部２０６を制御し、表示部２０６に表示させる画像を切り替える。表示部２０６は、例えば液晶ディスプレイであり、画像を表示する。
【００１７】
次に、リモートカメラ１００が備える撮像部１０１の構成例を説明する。以下、撮像部１０１の構成例として、ＬＦ（ライトフィールド）構成と、ＭＳ（マルチスペクトル）構成とについて説明する。初めに、ＬＦ構成の撮像部１０１の構成例について説明する。図２は、本実施形態におけるＬＦ構成の撮像部１０１の構成例を示したブロック図である。図３は、本実施形態におけるＬＦ構成の撮像部１０１の断面を示した断面図である。図示する例では、撮像部１０１は、マイクロレンズアレイ１０１１と、カラーフィルタアレイ１０１２と、光センサ１０１３とを備えている。
【００１８】
メインレンズ１０１０（光学系）が集光した光はマイクロレンズアレイ１０１１に入射される。また、マイクロレンズアレイ１０１１が集光した光はカラーフィルタアレイ１０１２を透過して光センサ１０１３に入射される。これにより、ＬＦ構成の撮像部１０１は、輝度情報と光線方向情報との４次元の光物理量を含んだＲＡＷ撮像信号を生成することができる。従って、ＬＦ構成の撮像部１０１が生成するＲＡＷ撮像信号を用いた場合、フォーカス位置を変更したり、奥行き情報を取得したりすることができる。なお、一般的な撮像部（例えば、ベイヤ配列のカラーフィルタと光センサとを備えた撮像部）が生成するＲＡＷ撮像信号は、二次元の輝度情報のみを取得可能である。
【００１９】
一方、ＬＦ構成の撮像部１０１が出力するＲＡＷ画像信号は、ＲＧＢ画像に変換する画像処理を行わずに表示した場合、被写体を確認することが難しい。図４は、本実施形態におけるＬＦ構成の撮像部１０１が出力する撮像信号の表示例を示した概略図である。図４（Ａ）は、被写体の例を示した画像である。図４（Ｂ）は、ＬＦ構成の撮像部１０１が図４（Ａ）に示した被写体を撮像した撮像信号を、ＲＧＢ画像に変換する画像処理を行わずに表示した例を示した画像である。図示する通り、ＬＦ構成の撮像部１０１が図４（Ａ）に示した被写体を撮像した撮像信号を、ＲＧＢ画像に変換する画像処理を行わずに表示した場合、格子状の線が表示されるため、被写体を確認することが難しい。
【００２０】
また、ＬＦ構成の撮像部１０１が出力する撮像信号の容量は大きいため、リアルタイムで無線伝送するのは困難である。そのため、ＬＦ構成の撮像部１０１が出力する撮像信号を、撮影操作端末２００に対して無線送信し、撮影操作端末２００の画像処理部２０４が画像処理を行って表示部２０６にライブビュー画像として表示する場合、撮影タイミングよりも表示タイミングが遅延するという問題がある。
【００２１】
次に、ＭＳ構成の撮像部１０１の構成例について説明する。図５は、本実施形態におけるＭＳ構成の撮像部１０１の構成例を示したブロック図である。図示する例では、撮像部１０１は、４色以上のカラーフィルタを有するマルチスペクトルカラーフィルタアレイ１０１４と、光センサ１０１３とを備えている。
【００２２】
光学系が集光した光はマルチスペクトルカラーフィルタアレイ１０１４を透過して光センサ１０１３に入射される。これにより、ＭＳ構成の撮像部１０１は、より多くの色情報（４色以上）を含んだ撮像信号を生成することができる。従って、ＭＳ構成の撮像部１０１が生成する撮像信号を用いた場合、より正確な被写体の色を測定することができる。例えば、微妙な色の違いで判別したり、処理したりする必要があるアプリケーションでは、ＭＳ構成の撮像部１０１を備えたリモートカメラ１００（マルチスペクトルカメラ）が望まれる。なお、一般的な撮像部（例えば、ベイヤ配列のカラーフィルタと光センサとを備えた撮像部）は、３色の色情報のみを取得可能である。
【００２３】
図６は、一般的な撮像部が備えるベイヤ配列のカラーフィルタの透過率と、ＭＳ構成の撮像部１０１が備えるカラーフィルタの透過率との例を示したグラフである。図６（Ａ）は、一般的な撮像部が備えるベイヤ配列のカラーフィルタの透過率を示している。曲線６０１〜６０３が示すように、ベイヤ配列のカラーフィルタは３色の光を透過する。従って、一般的なベイヤ配列のカラーフィルタと光センサとを備えた撮像部は、３色の色情報のみを取得可能である。図６（Ｂ）は、ＭＳ構成の撮像部１０１が備えるカラーフィルタの透過率を示している。曲線６０４〜６０９が示すように、図示する例では、ＭＳ構成の撮像部１０１が備えるカラーフィルタは６色の光を透過する。従って、ＭＳ構成の撮像部１０１は、より多くの色情報（図６（Ｂ）に示した例では６種類の色情報）を含んだ撮像信号を生成することができる。
【００２４】
一方、ＭＳ構成の撮像部１０１が出力する撮像信号（ＲＡＷ画像）は、ＲＧＢ画像に変換する画像処理を行わずに表示した場合、画素配列が特殊なため、通常のカラー画像として表示することができず、ユーザは被写体の色を確認することができない。図７は、本実施形態におけるＭＳ構成の撮像部１０１が出力する撮像信号を、ＲＧＢ画像に変換する画像処理を行わずに表示した例を示した画像である。ＭＳ構成の撮像部１０１が出力する撮像信号をＲＧＢ画像に変換する画像処理を行わずに表示した場合、モノクロ画像となり、図示する通り被写体や撮影状態を認識しにくい。
【００２５】
また、ＭＳ構成の撮像部１０１が出力する撮像信号の容量は大きいため、リアルタイムで無線伝送するのは困難である。そのため、ＭＳ構成の撮像部１０１が出力する撮像信号を、撮影操作端末２００に対して無線送信し、撮影操作端末２００の画像処理部２０４が画像処理を行って表示部２０６にライブビュー画像として表示する場合、撮影タイミングよりも表示タイミングが遅延するという問題がある。
【００２６】
次に、撮影操作端末２００の撮影時の動作について説明する。図８は、本実施形態における撮影操作端末２００の撮影時の動作手順を示したフローチャートである。
（ステップＳ１０１）撮影操作端末２００の撮像部２０１は、画像を撮影し、撮像信号を生成する。その後、ステップＳ１０２の処理に進む。
（ステップＳ１０２）画像処理部２０４は、ステップＳ１０１の処理で撮像部２０１が生成した撮像信号に対して画像処理を行い、表示画像データを生成する。続いて、表示制御部２０５は、画像処理部２０４が生成した表示画像データをライブビュー画像として表示部２０６に表示させる。その後、ステップＳ１０３の処理に進む。
【００２７】
（ステップＳ１０３）ユーザは、静止画像を撮像したい場合、撮影操作端末２００の撮像指示部２０２が備えるシャッターを押下する。撮像指示部２０２は、シャッターが押下されたか否かを判定する。シャッターが押下されたと撮像指示部２０２が判定した場合にはステップＳ１０４の処理に進み、それ以外の場合にはステップＳ１０１の処理に戻る。
【００２８】
（ステップＳ１０４）撮像指示部２０２は、無線通信部２０３を介して、リモートカメラ１００に対して撮影を指示する撮影指示メッセージを送信する。その後、ステップＳ１０５の処理に進む。なお、リモートカメラ１００の撮像部１０１は、撮像指示部２０２から送信された撮影指示メッセージを、無線通信部１０２を介して受信した場合、画像を撮影してＲＡＷ撮像信号を生成する。そして、撮像部１０１は、生成したＲＡＷ撮像信号を、無線通信部１０２を介して撮影操作端末２００に対して送信する。
【００２９】
（ステップＳ１０５）無線通信部２０３は、ステップＳ１０４の処理で送信した撮影指示メッセージに基づいてリモートカメラ１００の撮像部１０１が送信したＲＡＷ撮像信号を受信する。その後、ステップＳ１０６の処理に進む。
（ステップＳ１０６）画像処理部２０４は、ステップＳ１０５の処理で無線通信部２０３が受信したＲＡＷ画像信号に対して、表示部２０６に表示することができる形式に変換する画像処理を行い、表示画像データを生成する。その後、ステップＳ１０７の処理に進む。
【００３０】
（ステップＳ１０７）表示制御部２０５は、画像処理部２０４がステップＳ１０６の処理で生成した表示画像データを表示部２０６に表示させる。すなわち、表示制御部２０５は、リモートカメラ１００の撮像部１０１が撮影して生成したＲＡＷ画像信号に基づいた表示画像を表示部２０６に表示させる。その後、処理を終了する。なお、連続して撮影できるように、ステップＳ１０７の処理の後、ステップＳ１０１の処理に戻るようにしてもよい。
【００３１】
上述したとおり、本実施形態によれば、撮影操作端末２００は、撮像部２０１を備えている。そして、撮影操作端末２００は、シャッターが押下されるまでは、撮像部２０１が撮影して生成した画像信号に基づいた画像をライブビュー画像として表示部２０６に表示させる。これにより、撮影操作端末２００は、リモートカメラ１００の撮像部１０１から送信されるＲＡＷ画像信号を受信することなくライブビュー画像を表示することができる。従って、撮影操作端末２００は、解像度を確保しつつ、遅延を抑えたライブビュー画像の表示を行うことができる。
【００３２】
また、リモートカメラ１００の撮像部１０１の構成が例えばＬＦ構成やＭＳ構成である場合、撮像部１０１が生成するＲＡＷ画像信号を表示部２０６に表示することができる形式に変換する画像処理を、ハードウェアで行う場合にはコストがかかる。しかしながら、本実施形態では、撮像部１０１が生成するＲＡＷ画像信号を表示部２０６に表示することができる形式に変換する画像処理を、撮影操作端末２００のソフトウェアによって行うため、低コストで実現することができる。
【００３３】
また、撮像部１０１が生成するＲＡＷ画像信号を表示部２０６に表示することができる形式に変換する画像処理を、撮影操作端末２００のソフトウェアによって行うため、リモートカメラ１００の撮像部１０１の構成が従来のベイヤパターンのＲＧＢセンサではなく、新しい構成になった場合でも、より迅速に実装することができる。
【００３４】
次に、図８に示した撮影操作端末２００の撮影時の動作手順とは異なる動作手順について説明する。図９は、本実施形態における撮影操作端末２００の撮影時の動作手順を示したフローチャートである。ステップＳ２０１〜ステップＳ２０４の処理は、図８に示したステップＳ１０１〜ステップＳ１０４の処理と同様である。
【００３５】
（ステップＳ２０５）撮影操作端末２００の撮像部２０１は、画像を撮影し、撮像信号を生成する。その後、ステップＳ２０６の処理に進む。
（ステップＳ２０６）画像処理部２０４は、ステップＳ２０５の処理で撮像部２０１が生成した撮像信号に対して画像処理を行い、表示画像データを生成する。続いて、表示制御部２０５は、画像処理部２０４が生成した表示画像データをライブビュー画像として表示部２０６に表示させる。その後、ステップＳ２０７の処理に進む。
【００３６】
（ステップＳ２０７）無線通信部２０３は、ステップＳ２０４の処理で送信した撮影指示メッセージに基づいてリモートカメラ１００の撮像部１０１が送信したＲＡＷ撮像信号を受信する。その後、ステップＳ２０８の処理に進む。
（ステップＳ２０８）無線通信部２０３は、リモートカメラ１００の撮像部１０１が送信したＲＡＷ撮像信号の受信を完了したか否かを判定する。ＲＡＷ画像信号の受信を完了したと無線通信部２０３が判定した場合にはステップＳ２０９の処理に進み、それ以外の場合にはステップＳ２０５の処理に戻る。
【００３７】
ステップＳ２０９〜ステップＳ２１０の処理は、図８に示したステップＳ１０６〜ステップＳ１０７の処理と同様である。なお、連続して撮影できるように、ステップＳ２１０の処理の後、ステップＳ２０１の処理に戻るようにしてもよい。
【００３８】
上述したとおり、図９に示した動作例によれば、撮影操作端末２００は、シャッターが押下された後であっても、リモートカメラ１００の撮像部１０１が撮像して生成したＲＡＷ画像信号を受信し、画像処理を行って表示部２０６に表示できるまで、撮像部２０１が撮像して生成した画像信号に基づいた画像をライブビュー画像として表示部２０６に表示させる。これにより、撮影指示後（シャッター押下後）も、次の撮影指示のために、解像度を確保しつつ、遅延を抑えたライブビュー画像の表示を行うことができる。
【００３９】
次に、図８および図９に示した撮影操作端末２００の撮影時の動作手順とは異なる動作手順について説明する。図１０は、本実施形態における撮影操作端末２００の撮影時の動作手順を示したフローチャートである。ステップＳ３０１〜ステップＳ３０４の処理は、図９に示したステップＳ２０１〜ステップＳ２０４の処理と同様である。
【００４０】
（ステップＳ３０５）表示制御部２０５は、ステップＳ３０２の処理で表示部２０６に表示している画像を、ｔ秒間（所定時間）静止画像として表示させる。その後、ステップＳ３０６の処理に進む。なお、ｔ秒間は予め決められていても良く、任意に設定できるようにしてもよい。
ステップＳ３０６〜ステップＳ３１１は、図９に示したステップＳ２０５〜ステップＳ２１０の処理と同様である。なお、連続して撮影できるように、ステップＳ３１１の処理の後、ステップＳ３０１の処理に戻るようにしてもよい。
【００４１】
上述したとおり、図１０に示した動作例によれば、撮影操作端末２００は、シャッターが押下された後、シャッターが押下される直前に撮像部２０１が撮影して生成した画像信号に基づいた画像を、所定時間静止画像として表示させる。これにより、撮影者は、何を撮影したか確認することができる。
【００４２】
（第２の実施形態）
次に、本発明の第２の実施形態について説明する。本実施形態と第１の実施形態とで異なる点は、リモートカメラが画像処理部を備えており、リモートカメラの撮像部が生成したＲＡＷ画像信号の画像処理を、リモートカメラが備えている画像処理部が行う点である。なお、その他の構成および動作については、第１の実施形態と同様である。
【００４３】
図１１は、本実施形態における撮像システム２の構成を示したブロック図である。図示する例では、撮像システム２は、リモートカメラ３００と、撮影操作端末２００（撮影画像表示装置）とを含んでいる。撮影操作端末２００の構成は、第１の実施形態における撮影操作端末２００の構成と同様である。
【００４４】
リモートカメラ３００は、撮像部１０１と、無線通信部１０２と、画像処理部３０１とを備えている。撮像部１０１と無線通信部１０２とは、第１の実施形態における各部と同様である。画像処理部３０１は、撮像部１０１が生成したＲＡＷ画像信号に対して、表示部２０６に表示することができる形式に変換する画像処理を行い、表示画像データを生成する。なお、本実施形態では、画像処理部３０１による画像処理をハードウェアによって行う。
【００４５】
次に、撮影操作端末２００の撮影時の動作について説明する。図１２は、本実施形態における撮影操作端末２００の撮影時の動作手順を示したフローチャートである。ステップＳ４０１〜ステップＳ４０３の処理は、図８に示したステップＳ１０１〜ステップＳ１０３の処理と同様である。
【００４６】
（ステップＳ４０４）撮像指示部２０２は、無線通信部２０３を介して、リモートカメラ３００に対して撮影を指示する撮影指示メッセージを送信する。その後、ステップＳ４０５の処理に進む。なお、リモートカメラ３００の撮像部１０１は、撮像指示部２０２から送信された撮影指示メッセージを、無線通信部１０２を介して受信した場合、画像を撮影してＲＡＷ撮像信号を生成する。そして、リモートカメラ３００の画像処理部３０１は、撮像部１０１が生成したＲＡＷ画像信号に対して、表示部２０６に表示することができる形式に変換する画像処理を行い、表示画像データを生成する。その後、無線通信部１０２は、画像処理部３０１が生成した表示画像データを撮影操作端末２００に対して送信する。
【００４７】
（ステップＳ４０５）無線通信部２０３は、ステップＳ１０４の処理で送信した撮影指示メッセージに基づいてリモートカメラ３００の撮像部１０１が送信した表示画像データを受信する。その後、ステップＳ４０６の処理に進む。
（ステップＳ４０６）表示制御部２０５は、ステップＳ１０６の処理で無線通信部２０３が受信した表示画像データを表示部２０６に表示させる。すなわち、表示制御部２０５は、リモートカメラ３００の撮像部１０１が撮影して生成したＲＡＷ画像信号に基づいた表示画像を表示部２０６に表示させる。その後、処理を終了する。なお、連続して撮影できるように、ステップＳ４０６の処理の後、ステップＳ４０１の処理に戻るようにしてもよい。
【００４８】
上述したとおり、本実施形態によれば、撮影操作端末２００は、撮像部２０１を備えている。また、リモートカメラ３００は、画像処理部３０１を備えており、リモートカメラ３００の撮像部１０１が撮像して生成したＲＡＷ画像信号に対して表示部２０６に表示することができる形式に変換する画像処理を行い、表示画像データを生成する。そして、撮影操作端末２００は、シャッターが押下されるまでは、撮像部２０１が撮影して生成した画像信号に基づいた画像をライブビュー画像として表示部２０６に表示させる。これにより、撮影操作端末２００は、リモートカメラ３００の撮像部１０１が生成したＲＡＷ画像信号に基づいた表示画像データを受信することなくライブビュー画像を表示することができる。従って、撮影操作端末２００は、解像度を確保しつつ、遅延を抑えたライブビュー画像の表示を行うことができる。
【００４９】
また、リモートカメラ３００の画像処理部３０１が、リモートカメラ３００の撮像部１０１が撮像して生成したＲＡＷ画像信号に対して表示部２０６に表示することができる形式に変換する画像処理を行うため、リモートカメラ３００から撮影操作端末２００に対して送信するデータをより少なくすることができる。従って、撮像指示部２０２が撮影指示の入力を受け付けてから、より短時間で、リモートカメラ３００の撮像部１０１が生成したＲＡＷ画像信号に基づいた画像を表示部２０６に表示させることができる。
【００５０】
以上、この発明の第１の実施形態および第２の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えは、上述した実施形態では、撮像部１０１が撮影して生成したＲＡＷ画像信号や、画像処理部２０４が画像処理を行って生成した表示画像データを記憶していないが、撮影操作端末２００に記憶部を備えて記憶するようにしてもよい。また、ハードウェアの画像処理部３０１は表示部２０６に表示することができる形式に変換するとしたが、画像処理の一部を担って撮影操作端末２００側へ無線伝送し、残った画像処理を撮影操作端末２００側の画像処理部２０４で行ってもかまわない。
【００５１】
なお、上述した実施形態におけるリモートカメラ１００，３００および撮影操作端末２００が備える各部の機能全体あるいはその一部は、これらの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現しても良い。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００５２】
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶部のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時刻の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時刻プログラムを保持しているものも含んでも良い。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【符号の説明】
【００５３】
１，２・・・撮像システム、１００，３００・・・リモートカメラ、１０１，２０１・・・撮像部、１０２，２０３・・・無線通信部、２００・・・撮影操作端末、２０２・・・撮像指示部、２０４，３０１・・・画像処理部、２０５・・・表示制御部、２０６・・・表示部、１０１０・・・メインレンズ、１０１１・・・マイクロレンズアレイ、１０１２・・・カラーフィルタアレイ、１０１３・・・光センサ、１０１４・・・マルチスペクトルカラーフィルタアレイ
【図１】
2014175723.tif 000003
【図２】
2014175723.tif 000004
【図３】
2014175723.tif 000005
【図５】
2014175723.tif 000006
【図６】
2014175723.tif 000007
【図８】
2014175723.tif 000008
【図９】
2014175723.tif 000009
【図１０】
2014175723.tif 000010
【図１１】
2014175723.tif 000011
【図１２】
2014175723.tif 000012
【図４】
2014175723.tif 000013
【図７】
2014175723.tif 000014