(57)【特許請求の範囲】
【請求項１】
所定の撮像方向を向いた撮像装置の撮像処理により生成された画像データと、前記所定の撮像方向を示す撮像方向情報と、を受信する受信手段と、
ユーザの操作に応じて、前記撮像装置の撮像方向を指示する方向指示情報を生成する操作手段と、
前記画像データの所定領域を切り出す画像切り出し手段と、
前記所定領域の画像データに基づいて、画像を表示する表示手段と、
前記撮像方向情報及び前記方向指示情報に基づいて、前記画像データにおける前記所定領域の位置を調整する領域位置調整手段と、
前記ユーザが前記撮像装置の撮像方向を指示する操作を開始することを検知する操作開始検知手段と、
前記撮像装置に対して、前記撮像装置が送信する前記画像データの画像サイズを、第１のサイズから当該第１のサイズよりも大きい第２のサイズに変更することを指示するサイズ変更指示情報を生成するサイズ変更指示手段と、
前記サイズ変更指示情報を前記撮像装置に送信する送信手段と、を備え、
前記サイズ変更指示手段は、前記操作開始検知手段により前記ユーザが操作を開始することが検知された場合、前記サイズ変更指示情報を生成し、前記送信手段を介して、前記撮像装置に前記サイズ変更指示情報を送信する通信装置。
【請求項２】
前記操作開始検知手段は、前記操作手段にユーザの手が接近したことを検知する接近検知手段を含み、
前記サイズ変更指示手段は、前記接近検知手段により前記ユーザの手の接近が検知された場合、前記サイズ変更指示情報を生成し、前記送信手段を介して、前記撮像装置に前記サイズ変更指示情報を送信する請求項１に記載の通信装置。
【請求項３】
前記画像切り出し手段は、前記受信手段が受信した画像データが、前記第１のサイズの画像である場合、前記所定領域の画像データの切り出しを行わず、
前記表示手段は、前記受信手段が受信した前記画像データに基づいて、画像を表示する請求項２に記載の通信装置。
【請求項４】
撮像装置と、当該撮像装置を操作する通信装置と、を備え、前記撮像装置と前記通信装置とは、通信路を介して接続されている撮像システムであって、
前記撮像装置は、
撮像処理により画像データを生成する撮像手段と、
前記撮像手段により撮像処理が行われた撮像方向を検出する撮像方向検出手段と、
前記画像データと、前記撮像方向検出手段により検出された撮像方向を示す撮像方向情報と、を前記通信装置に送信する送信手段と、を備え、
前記通信装置は、
前記画像データと、前記撮像方向情報と、を受信する受信手段と、
ユーザの操作に応じて、前記撮像装置の撮像方向を指示する方向指示情報を生成する操作手段と、
前記画像データの所定領域を切り出す画像切り出し手段と、
前記所定領域の画像データに基づいて、画像を表示する表示手段と、
前記撮像方向情報及び前記方向指示情報に基づいて、前記画像データにおける前記所定領域の位置を調整する領域位置調整手段と、
前記ユーザが前記撮像装置の撮像方向を指示する操作を開始することを検知する操作開始検知手段と、
前記撮像装置に対して、前記撮像装置が送信する前記画像データの画像サイズを、第１のサイズから当該第１のサイズよりも大きい第２のサイズに変更することを指示するサイズ変更指示情報を生成するサイズ変更指示手段と、
前記サイズ変更指示情報を前記撮像装置に送信する送信手段と、を備え、
前記サイズ変更指示手段は、前記操作開始検知手段により前記ユーザが操作を開始することが検知された場合、前記サイズ変更指示情報を生成し、前記送信手段を介して、前記撮像装置に前記サイズ変更指示情報を送信する撮像システム。
【請求項５】
コンピュータに、
所定の撮像方向を向いた撮像装置の撮像処理により生成された画像データと、前記所定の撮像方向を示す撮像方向情報と、を受信させるステップと、
ユーザの操作に応じて、前記撮像装置の撮像方向を指示する方向指示情報を生成させるステップと、
前記画像データの所定領域を切り出させるステップと、
前記所定領域の画像データに基づいて、画像を表示させるステップと、
前記撮像方向情報及び前記方向指示情報に基づいて、前記画像データにおける前記所定領域の位置を調整させるステップと、
前記ユーザが前記撮像装置の撮像方向を指示する操作を開始することを検知する操作開始検知ステップと、
前記撮像装置に対して、前記撮像装置が送信する前記画像データの画像サイズを、第１のサイズから当該第１のサイズよりも大きい第２のサイズに変更することを指示するサイズ変更指示情報を生成するサイズ変更指示ステップと、
前記サイズ変更指示情報を前記撮像装置に送信する送信ステップと、を備え、
前記サイズ変更指示ステップは、前記操作開始検知ステップにより前記ユーザが操作を開始することが検知された場合、前記サイズ変更指示情報を生成し、前記送信ステップを介して、前記撮像装置に前記サイズ変更指示情報を送信するプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は通信装置、撮像装置、撮像システム及びプログラムに関する。
【背景技術】
【０００２】
スマートフォンやタブレット端末等の無線通信端末を用いて操作可能なビデオカメラが知られている。このようなビデオカメラは、Ｗｉ−Ｆｉ等の無線通信路を介して、無線通信端末から送られてくる操作信号を受信し、操作信号に応じた動作（録画開始、録画停止、パン動作、チルト動作、ズーム等）を実行する。
【０００３】
例えば、特許文献１には、ビデオカメラが撮像した全体領域映像に含まれる一部の切り出し領域（部分領域）の映像を操作端末に配信し、当該部分領域の映像を操作端末に表示する映像配信方法が開示されている。全体領域における部分領域の位置は、操作端末から送信される移動要求に応じて移動可能である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平９−２６１５２２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、部分領域の位置を移動可能とし、かつ、パンチルト動作によりビデオカメラの撮像方向も変更可能（全体領域の位置も変更可能）な撮像装置を考えた場合、所望の被写体を撮像するために、部分領域の位置及びビデオカメラの撮像方向の両方を調整する必要が生じる。また、撮像方向の変更操作の信号は通信路を介してビデオカメラに送られるため、パンチルトの操作を行ってから、当該操作が反映した映像が表示されるまでに、一定時間のタイムラグ（遅延）が生じる。したがって、ユーザの意図した被写体を撮像することが難しいという問題がある。なお、特許文献１には、ビデオカメラの撮像方向を変更することについては何ら記載されていない。
【０００６】
本発明はこのような問題を解決するためになされたものであり、所望の被写体を容易に撮像することができる通信装置、撮像装置、撮像システム及びプログラムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
本発明の一態様に係る通信装置（２０）は、所定の撮像方向を向いた撮像装置（１）の撮像処理により生成された画像データと、前記所定の撮像方向を示す撮像方向情報と、を受信する受信手段（通信部２８）と、ユーザの操作に応じて、前記撮像装置（１）の撮像方向を指示する方向指示情報を生成する操作手段（２２）と、前記画像データの所定領域を切り出す画像切り出し手段（２４）と、前記所定領域の画像データに基づいて、画像を表示する表示手段（２１）と、前記撮像方向情報及び前記方向指示情報に基づいて、前記画像データにおける前記所定領域の位置を調整する領域位置調整手段（２５）と、前記ユーザが前記撮像装置（１）の撮像方向を指示する操作を開始することを検知する操作開始検知手段と、前記撮像装置（１）に対して、前記撮像装置（１）が送信する前記画像データの画像サイズを、第１のサイズから当該第１のサイズよりも大きい第２のサイズに変更することを指示するサイズ変更指示情報を生成するサイズ変更指示手段（２６）と、前記サイズ変更指示情報を前記撮像装置（１）に送信する送信手段（２８）と、をさらに備え、前記サイズ変更指示手段（２６）は、前記操作開始検知手段により前記ユーザが操作を開始することが検知された場合、前記サイズ変更指示情報を生成し、前記送信手段（２８）を介して、前記撮像装置（１）に前記サイズ変更指示情報を送信するものである。このような構成により、撮像装置の撮像方向の変化によって、操作端末において切り出される所定領域の位置も変化する。このため、生成される画像データにおける被写体の位置が変化しても、切り出し領域と被写体との相対的な位置は変化しない。その結果、表示部に表示される被写体の位置も変化しない。したがって、表示部は安定した画像を表示することができる。
上記通信装置（２０）において、前記操作開始検知手段は、前記操作手段（２２）にユーザの手が接近したことを検知する接近検知手段（２７）を含み、前記サイズ変更指示手段（２６）は、前記接近検知手段（２７）により前記ユーザの手の接近が検知された場合、前記サイズ変更指示情報を生成し、前記送信手段（２８）を介して、前記撮像装置（１）に前記サイズ変更指示情報を送信してもよい。
上記通信装置（２０）において、前記画像切り出し手段（２４）は、前記受信手段（２８）が受信した画像データが、前記第１のサイズの画像である場合、前記所定領域の画像データの切り出しを行わず、前記表示手段（２１）は、前記受信手段（２８）が受信した前記画像データに基づいて、画像を表示してもよい。
本発明の一態様に係る撮像システムは、撮像装置（１）と、当該撮像装置（１）を操作する通信装置（２０）と、を備え、前記撮像装置（１）と前記通信装置（２０）とは、通信路を介して接続されている撮像システムであって、前記撮像装置（１）は、撮像処理により画像データを生成する撮像手段（１００）と、前記撮像手段（１００）により撮像処理が行われた撮像方向を検出する撮像方向検出手段（ジャイロセンサ２０８）と、前記画像データと、前記撮像方向検出手段（２０８）により検出された撮像方向を示す撮像方向情報と、を前記通信装置（２０）に送信する送信手段（無線モジュール３０８）と、を備え、前記通信装置（２０）は、前記画像データと、前記撮像方向情報と、を受信する受信手段（通信部２８）と、ユーザの操作に応じて、前記撮像装置（１）の撮像方向を指示する方向指示情報を生成する操作手段（２２）と、前記画像データの所定領域を切り出す画像切り出し手段（２４）と、前記所定領域の画像データに基づいて、画像を表示する表示手段（２１）と、前記撮像方向情報及び前記方向指示情報に基づいて、前記画像データにおける前記所定領域の位置を調整する領域位置調整手段（２５）と、前記ユーザが前記撮像装置（１）の撮像方向を指示する操作を開始することを検知する操作開始検知手段と、前記撮像装置（１）に対して、前記撮像装置（１）が送信する前記画像データの画像サイズを、第１のサイズから当該第１のサイズよりも大きい第２のサイズに変更することを指示するサイズ変更指示情報を生成するサイズ変更指示手段（２６）と、前記サイズ変更指示情報を前記撮像装置（１）に送信する送信手段（通２８）と、をさらに備え、前記サイズ変更指示手段（２６）は、前記操作開始検知手段により前記ユーザが操作を開始することが検知された場合、前記サイズ変更指示情報を生成し、前記送信手段（２８）を介して、前記撮像装置（１）に前記サイズ変更指示情報を送信するものである。このような構成により、撮像装置の撮像方向の変化によって、操作端末において切り出される所定領域の位置も変化する。このため、生成される画像データにおける被写体の位置が変化しても、切り出し領域と被写体との相対的な位置は変化しない。その結果、表示部に表示される被写体の位置も変化しない。したがって、表示部は安定した画像を表示することができる。
本発明の一態様に係るプログラムは、コンピュータに、所定の撮像方向を向いた撮像装置（１）の撮像処理により生成された画像データと、前記所定の撮像方向を示す撮像方向情報と、を受信させるステップと、ユーザの操作に応じて、前記撮像装置（１）の撮像方向を指示する方向指示情報を生成させるステップと、前記画像データの所定領域を切り出させるステップと、前記所定領域の画像データに基づいて、画像を表示させるステップと、前記撮像方向情報及び前記方向指示情報に基づいて、前記画像データにおける前記所定領域の位置を調整させるステップと、前記ユーザが前記撮像装置の撮像方向を指示する操作を開始することを検知する操作開始検知ステップと、前記撮像装置に対して、前記撮像装置が送信する前記画像データの画像サイズを、第１のサイズから当該第１のサイズよりも大きい第２のサイズに変更することを指示するサイズ変更指示情報を生成するサイズ変更指示ステップと、前記サイズ変更指示情報を前記撮像装置に送信する送信ステップと、を備え、前記サイズ変更指示ステップは、前記操作開始検知ステップにより前記ユーザが操作を開始することが検知された場合、前記サイズ変更指示情報を生成し、前記送信ステップを介して、前記撮像装置に前記サイズ変更指示情報を送信するものである。
【発明の効果】
【０００８】
本発明により、安定した画像を表示することができる通信装置、撮像装置、撮像システム及びプログラムを提供することができる。
【図面の簡単な説明】
【０００９】
【図１】実施の形態にかかる撮像装置の外観図である。
【図２】実施の形態にかかる撮像装置のブロック図である。
【図３】実施の形態にかかる操作端末のブロック図である。
【図４】実施の形態にかかる撮像装置の動作を示すフローチャートである。
【図５】実施の形態にかかる操作端末の動作を示すフローチャートである。
【図６】実施の形態にかかる操作端末の動作を示すフローチャートである。
【図７】実施の形態にかかる操作端末の動作を説明するための図である。
【図８】実施の形態にかかる撮像装置及び操作端末の動作を説明するための図である。
【発明を実施するための形態】
【００１０】
以下、図面を参照して本発明の実施の形態について説明する。本実施の形態にかかる撮像装置１は、動画像及び静止画像を撮像することができるデジタルカメラを有している。撮像装置１の外観斜視図を図１に示す。
【００１１】
図１示すように、撮像装置１は、本体部１１と、支持部１２と、アーム部１３と、回転台１４と、固定台１５と、を備える。
【００１２】
本体部１１は、複数のレンズを有するレンズユニットや、撮像素子、バッテリ、Ｗｉ−Ｆｉモジュール等を格納する筐体である。本体部１１の前側には、レンズ１６が取り付けられている。本体部１１は、後述する操作端末と無線通信を行い、操作端末から送信される指示信号に応じて動作する。
【００１３】
支持部１２は、本体部１１を支持する。また、支持部１２の左右方向の両端は、アーム部１３に対して回転可能に連結されている。このため、支持部１２は、左右方向を軸とするピッチ方向に回転することができる。アーム部１３の一端は、支持部１２に連結されている。また、アーム部１３の他端は、回転台１４の側面に固定されている。
【００１４】
回転台１４は、円盤形状であり、側面（周面）の対向する位置にアーム部１３が固定されている。回転台１４は、固定台１５に対して回転可能に連結されている。このため、回転台１４は、上下方向を軸とするヨー方向に回転することができる。このような構成により、本体部１１は、固定台１５の上方に位置するように支持され、パン動作（ヨー方向回転）及びチルト動作（ピッチ方向回転）を行うことができる。パンチルト動作は、図示しないモータを駆動させることにより実現される。つまり、支持部１２と、アーム部１３と、回転台１４と、固定台１５と、がパンチルト動作可能な雲台として機能する。
【００１５】
撮像装置１の本体部１１の内部構成について説明する。図２は、本実施の形態にかかる本体部１１のブロック図である。本体部１１は、ズームレンズ１０１、フォーカスレンズ１０２、絞り１０３、及び撮像素子１０４で構成される撮像部１００を有する。ズームレンズ１０１は図示しないズームアクチュエータによって光軸ＬＡに沿って移動する。同様に、フォーカスレンズ１０２は、図示しないフォーカスアクチュエータによって光軸ＬＡに沿って移動する。絞り１０３は、図示しない絞りアクチュエータに駆動されて動作する。撮像素子１０４は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等で構成される。
【００１６】
撮像装置１を用いた撮像は以下の手順で行われる。撮像素子１０４は、ズームレンズ１０１、フォーカスレンズ１０２、及び絞り１０３を通過した光を光電変換して、被写体のアナログ画像信号を生成する。アナログ画像信号処理部１０５が、このアナログ画像信号を増幅した後、画像Ａ／Ｄ変換部１０６が、その増幅された信号をデジタル画像データに変換する。画像入力コントローラ１０７は、画像Ａ／Ｄ変換部１０６から出力されたデジタル画像データを撮像データとして取り込んで、バス２００を介してメインメモリ２０６に格納する。
【００１７】
デジタル信号処理部１０８は、バス２００を介して中央制御部４００からの指令に基づき、メインメモリ２０６に格納された撮像データを取り込み、ＲＧＢ信号に対して、所定の信号処理を施して輝度信号と色差信号とからなるデータを生成する。デジタル信号処理部１０８はまた、オフセット処理、ホワイトバランス調整処理、ガンマ補正処理、ＲＧＢ補完処理、ノイズ低減処理、輪郭補正処理、色調補正処理、光源種別判定処理等の各種デジタル補正を行う。
【００１８】
マイク１０９は撮像時の周囲の音声を収音し、アナログ音声信号を生成する。アナログ音声信号処理部１１０がそのアナログ音声信号を増幅した後、音声Ａ／Ｄ変換部１１１が、その増幅された信号をデジタル音声データに変換する。音声入力コントローラ１１２は、音声Ａ／Ｄ変換部１１１から出力されたデジタル音声データを撮像データと併せてメインメモリ２０６に格納する。
【００１９】
多重化部１１３は、メインメモリ２０６に格納された撮像データ及びデジタル音声データを多重化しストリームデータを生成する。
【００２０】
圧縮・伸長処理部２０１は、バス２００を介して中央制御部４００からの指示に従い、メインメモリ２０６に格納されたストリームデータに所定の圧縮処理を施し、圧縮データを生成する。また、中央制御部４００からの指令に従い、カード型記録媒体３０２等に格納された圧縮データに所定形式の伸張処理を施し、非圧縮データを生成する。なお、本実施の形態の撮像装置１では、静止画像に対してはＪＰＥＧ規格に準拠した圧縮方式が、動画像に対してはＭＰＥＧ２規格やＡＶＣ／Ｈ．２６４規格に準拠した圧縮方式が採用される。
【００２１】
音声・画像処理部２０２は、バス２００を介して中央制御部４００の指示に従い、メインメモリ２０６から読み出したデジタルデータに所定の画像処理を施す。例えばメニュー画像やＯＳＤ画像等、各種処理のための画像データを生成し、その画像データをメインメモリ２０６から読み出されたオリジナルの撮像データに重畳させて液晶モニタ３０４に出力する。この出力によって、液晶モニタ３０４に表示される画像は各種画像データが合成されたものとなる。なお、液晶モニタ３０４の代わりに有機ＥＬ（Electro-Luminescence）モニタ等の他のモニタを用いることも可能である。
【００２２】
ＲＯＭ２０３は、バス２００を介して中央制御部４００に接続されており、中央制御部４００が実行する制御プログラム及び制御に必要な各種データ等を格納している。フラッシュＲＯＭ２０４は、ユーザの設定情報等、撮像装置１の動作に関する各種設定情報を格納している。例えば、撮像装置１は、様々な撮像のシチュエーションに応じて、いくつかの撮像モードと、各モードにあわせた撮像条件の設定を予めフラッシュＲＯＭ２０４に記憶している。そして、ユーザは撮像を開始する前に、各モードの中から最適なモードを選択することにより、最適な撮像条件で撮像を実施することができる。例えば、特定の人物の撮像に適した「ポートレートモード」、運動会等の撮像に適した「スポーツモード」、又は夜景等の暗い場所の撮像に適した「夜景モード」等である。ＶＲＡＭ２０５は、表示用の撮像データの一時記憶領域として使用される。
【００２３】
メインメモリ２０６は、撮像データ（動画像及び静止画）の一時記憶領域として使用される。メインメモリ２０６は、中央制御部４００の指令に応じて、保持している撮像データをカード型記録媒体３０２に格納する。
【００２４】
メディア制御部２０７は、中央制御部４００の指令に従い、カードＩ／Ｆ３０１を通じてカード型記録媒体３０２へのデータの書き込みやデータの読み出しを制御する。カード型記録媒体３０２はＳＤカードやコンパクトフラッシュ（登録商標）等の外部メモリであり、撮像装置１に対して脱着可能に設けられている。
【００２５】
ジャイロセンサ２０８（撮像方向検出手段）は、３軸の加速度及び角速度の変化を検出し、撮像装置１のパンチルト量や上下及び左右の手ぶれ量を検出する。なお、撮像方向検出手段は、ジャイロセンサに限られず、例えば、方位センサであってもよい。撮像装置１のパンチルト量に基づいて、撮像装置１の撮像方向を特定することができる。時計２０９は、撮像データの生成日時の情報を生成する。
【００２６】
液晶モニタ３０４、スピーカ３０５、操作部３０６及び入出力端子３０７は入出力Ｉ／Ｆ３０３に接続されている。液晶モニタ３０４は、例えばＶＲＡＭ２０５やメインメモリ２０６に一時記録された撮像データや各種メニュー画像データ等、各種画像データから生成された画像を表示する。スピーカ３０５は、例えばメインメモリ２０６に一時記録された音声を出力する。操作部３０６は、上記のように、レリーズ・スイッチや電源スイッチを含む操作キー、十字キー、ジョイスティック、又は液晶モニタ３０４上に重畳されたタッチパネル等から構成されており、ユーザの撮像装置１への操作入力を受け付ける。入出力端子３０７は、パンチルト動作が可能な雲台（図１参照）やテレビモニタ、ＰＣ（Personal  Computer）等に接続される。
【００２７】
無線モジュール３０９は、バス２００及び無線Ｉ／Ｆ３０８を介して、操作端末との間で信号の送受信を行う。具体的には、無線モジュール３０９は、Ｗｉ−Ｆｉ等の無線ＬＡＮ規格に準拠した通信処理を行う。これにより、操作端末との通信が可能になる。
【００２８】
中央制御部４００は、ＣＰＵ、各種プログラムが格納されたＲＯＭ、及びワークエリアとしてのＲＡＭ等を含む半導体集積回路により構成され、撮像、各種画像の表示、及び連携撮影に関する情報の送受信等の撮像装置１全体の処理を統括的に制御する。中央制御部４００は、画像切り出し部４０１と、サイズ変更部４０２と、パンチルト制御部４０３と、パンチルト量付加部４０４と、を備える。
【００２９】
画像切り出し部４０１は、撮像処理により生成された画像データから、操作端末に送信する画像データを切り出す。画像切り出し部４０１は、サイズ変更部４０２により指定された画像サイズ（画像の大きさ）の画像データを切り出す。画像切り出し部４０１は、切り出した画像データを無線モジュール３０９に出力する。無線モジュール３０９は、切り出された画像データを、無線通信路を介して、操作端末に送信する。
【００３０】
サイズ変更部４０２は、サイズ変更指示信号に基づいて、撮像装置１から操作端末に送信される画像データの画像サイズを変更する。具体的には、サイズ変更部４０２は、操作端末に送信される画像データの画像サイズを、通常画像サイズから拡大画像サイズに、または、拡大画像サイズから通常画像サイズに変更する。このとき、通常画像サイズとは、操作端末の表示部の画素数に対応する画素数の画像サイズである。また、拡大画像サイズとは、通常画像サイズよりも大きい画像サイズである。拡大画像サイズは、撮像部１００の撮像処理により生成された画像データそのものの画像サイズでもよいし、撮像処理により生成された画像データの画像サイズよりも小さく、通常画像サイズよりも大きい画像サイズであってもよい。サイズ変更指示信号とは、撮像装置１から送信される画像データの画像サイズを変更することを指示するための信号である。サイズ変更指示信号は、ユーザが操作端末の操作部に接近したか否かに基づいて、操作端末から撮像装置１に対して送信される。
【００３１】
サイズ変更部４０２は、拡大画像サイズに変更する旨のサイズ変更指示信号を受信した場合、画像切り出し部４０１により切り出される画像データの画像サイズを、通常画像サイズ（第１のサイズ。例えば、９６０画素×５４０画素）から拡大画像サイズ（第２のサイズ。例えば、１９２０画素×１０８０画素）に変更する。そして、サイズ変更部４０２は、操作端末から再度通常画像サイズに変更する旨のサイズ変更指示信号を受けるまでの間は、拡大画像サイズの画像データを送信させる。
【００３２】
一方、サイズ変更部４０２は、通常画像サイズに変更する旨のサイズ変更指示信号を受信した場合、操作端末に送信する画像データの画像サイズを、拡大画像サイズから通常画像サイズに変更する。そして、サイズ変更部４０２は、操作端末から再度拡大画像サイズに変更する旨のサイズ変更指示信号を受けるまでの間は、通常画像サイズの画像データを送信させる。
【００３３】
パンチルト制御部４０３は、操作端末から送信されたパン動作及びチルト動作の実行を指示する信号（方向指示情報）に基づいて、パン動作及びチルト動作を実行させるための制御信号を生成する。そして、生成した制御信号を図１に示す雲台のモータ（図示省略）に対して出力する。これにより、雲台に搭載された撮像装置１がパン方向及びチルト方向に回転する。なお、パン方向とは水平方向を意味し、チルト方向とは垂直方向を意味する。
【００３４】
パンチルト量付加部４０４は、所定の撮像方向を向いた撮像装置１の撮像処理により生成された画像データに対して、当該所定の撮像方向を示す情報（撮像方向情報）を付加する。具体的には、パンチルト量付加部４０４は、ジャイロセンサ２０８により検出されたパン量（パン角度）及びチルト量（チルト角度）を示す情報を、撮像方向情報として１画像データ毎（１フレーム毎）に付加する。これにより、操作端末は、撮像装置１が生成した画像データと、当該画像が撮像された撮像方向情報と、を受信する。
【００３５】
次に、撮像装置１を遠隔操作するための操作端末２０（通信装置）について説明する。図３は、本実施の形態に係る操作端末２０の構成例を示すブロック図である。操作端末２０は、表示部２１と、操作部２２と、制御部２３と、近接センサ２７と、通信部２８と、を備える。
【００３６】
表示部２１は、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬであり、撮像装置１から送られてくるフレーム毎の画像データに基づいて動画像を表示する。操作部２２は、パン動作ボタンや、チルト動作ボタン、録画開始ボタン、録画停止ボタン、望遠ボタン、広角ボタン等である。
【００３７】
操作部２２の各ボタンの押下が行われると、制御部２３が、当該ボタンに対応する制御信号を生成する。例えば、制御部２３は、パン動作ボタンが押下されると、撮像装置１に対してパン動作を指示するための制御信号（以下、パン動作信号と称す）を生成する。また、制御部２３は、チルト動作ボタンが押下されると、撮像装置１に対してチルト動作を指示するための制御信号（以下、チルト動作信号と称す）を生成する。パン動作信号及びチルト動作信号は、撮像装置１の撮像方向を指示する方向指示情報であり、パンチルト角度の目標値やパンチルト量等を含む信号である。
【００３８】
なお、操作部２２は、押下可能なボタンであってもよいし、タッチパネルであってもよい。例えば、スマートフォンに操作プログラムをダウンロードして操作端末２０として使用する場合には、表示部２１を操作部２２として使用することもできる。この場合、制御部２３は、表示部２１を指で上下左右にスワイプすることによりパンチルト動作の指示信号を生成するようにしてもよい。例えば、スワイプの速度や量に応じて、パン角度やチルト角度を決定してもよい。さらに、スマートフォンに加速度センサを設けて、スマートフォンの端末自体を上下左右に傾けることにより、パンチルト動作を指示可能としてもよい。勿論、操作端末２０は、スマートフォンやタブレット端末に限られず、例えば、ユーザの頭部に装着されるヘッドマウントディスプレイ装置であってもよい。ヘッドマウントディスプレイ装置の場合は、装置を装着したユーザが頭部を左右に振ることにより、撮像装置１に対してパン動作を指示できる。また、頭部を上下に振ることにより、撮像装置１にチルト動作を指示できる。
【００３９】
制御部２３は、ＣＰＵ、各種プログラムが格納されたＲＯＭ、及びワークエリアとしてのＲＡＭ等を含む半導体集積回路により構成され、各種画像の表示等の操作端末２０全体の処理を統括的に制御する。制御部２３は、画像切り出し部２４と、位置調整部２５と、サイズ変更指示部２６と、を備える。
【００４０】
画像切り出し部２４は、撮像装置１から送信された画像データから所定領域の画像データを切り出す。画像切り出し部２４は、切り出した所定領域の画像データを表示部２１に出力する。これにより、表示部２１には、所定領域の画像データに対応する画像が表示される。所定領域とは、初期状態（ユーザがパンチルト操作を行う前）においては、撮像装置１から送信された画像データの中央領域であり、その領域のサイズ（画素数）は、撮像装置１から送信された画像データよりも小さく、表示部２１の画像サイズ（画素数）に応じて適宜決定される。本実施の形態においては、所定領域の画像サイズは、通常画像サイズと同じサイズである。
【００４１】
位置調整部２５は、撮像装置１から受信した撮像方向情報に基づいて、受信した画像データにおける所定領域の位置を調整する。また、位置調整部２５は、操作部２２の操作に応じて、受信した画像データにおける所定領域の位置を調整する。言い換えると、位置調整部２５は、撮像方向情報及び操作部２２におけるパンチルト操作に基づいて、画像切り出し部２４に対して、切り出す所定領域の位置を指示する。
【００４２】
サイズ変更指示部２６は、撮像装置１に対して、撮像装置１が送信する画像データの画像サイズを、拡大画像サイズから通常画像サイズへ、または、通常画像サイズから拡大画像サイズへと変更することを指示する。サイズ変更指示部２６は、後述する近接センサ２７の検知結果に基づいて、撮像装置１が送信する画像データの画像サイズの変更を指示するためのサイズ変更指示信号を生成し、通信部２８を介して、撮像装置１に対して送信する。
【００４３】
近接センサ２７（接近検知手段）は、操作部２２にユーザの手が接近したことを検知する。具体的には、操作部２２がタッチパネルの場合、近接センサ２７は、タッチパネルにユーザの手が近づいたことを検知する。言い換えると、近接センサ２７は、ユーザが操作部２２の操作を開始することを検知する操作開始検知手段である。例えば、近接センサ２７は、赤外線を出力する発光部（図示省略）と、発光部から出力されて物体にて反射した赤外線を受光する受光部（図示省略）と、を有している。近接センサ２７は、物体にて反射した赤外線の受光量に応じた値を出力する。これにより、物体と近接センサ２７とが所定の距離まで接近したか否かを検出することができる。勿論、他の公知の手法を用いて、物体の接近を検知してもよい。近接センサ２７は、操作部２２にユーザの手が近づいたことを検知できる位置に配置されていればよく、操作部２２の近傍に配置されていることが好ましい。例えば、操作部２２がタッチパネルの場合、当該タッチパネルの外周近傍に配置されていればよい。
【００４４】
なお、ユーザがパンチルト操作を開始することが検知可能な操作開始検知手段は、近接センサ２７以外の検知手段であってもよい。スマートフォンを上下左右に傾けることにより、パンチルト操作が行われる構成においては、ユーザがスマートフォンを傾けるために、スマートフォンを把持したことが検知できればよい。例えば、スマートフォンの外縁部の左右双方に指が接触したことをトリガとして、ユーザがパンチルト操作を開始すると判定してもよい。この場合、左右の外縁部に設けられた接触センサが操作開始検知手段となる。また、ヘッドマウントディスプレイ装置においては、ユーザの視線の移動（黒目の移動）を検出し、視線が正面方向から所定の距離動いたことをトリガとして、ユーザがパンチルト操作を開始すると判定してもよい。この場合、視線移動検出センサが操作開始検知手段となる。
【００４５】
通信部２８は、Ｗｉ−Ｆｉ等の無線通信処理を行い、パンチルト動作信号や、サイズ変更指示信号、各種制御信号を撮像装置１に対して送信する。また、通信部２８は、撮像装置１から送信され、フレーム毎に撮像方向情報が付加された画像データを受信する。
【００４６】
続いて、本実施の形態にかかる撮像装置１の動作例について、図４〜図６に示すフローチャートを用いて説明する。図４は、撮像装置１の動作を示すフローチャートである。図５及び図６は、操作端末２０の動作を示すフローチャートである。
【００４７】
図４を参照して撮像装置１の動作例について説明する。まず、画像切り出し部４０１が、撮像処理により生成された画像データから、通常画像サイズの画像データを切り出す（ステップＳ１０１）。具体的には、画像切り出し部４０１は、生成された画像データの中央位置を中心にとした矩形領域の画像データを切り出す。そして、多重化部１１３は、切り出された画像データを用いて、映像ストリームを生成する。
【００４８】
パンチルト量付加部４０４は、生成された画像データの撮像時における撮像方向情報を、ジャイロセンサ２０８から取得する。パンチルト量付加部４０４は、生成された映像ストリームに撮像方向情報を付加する。そして、撮像方向情報が付加された映像ストリームは、無線モジュール３０８により、操作端末２０に送信される（ステップＳ１０２）。これにより、操作端末２０は、撮像方向情報が付された通常画像サイズの映像ストリームを受信する。
【００４９】
サイズ変更部４０２は、送信する画像データの画像サイズを広げる旨のサイズ変更指示信号を、操作端末２０から受信したか否かを判定する（ステップＳ１０３）。サイズの変更指示信号を受けていない場合（ステップＳ１０３：Ｎｏ）、サイズ変更部４０２は、画像切り出し部４０１に対して、通常画像サイズの画像データの切り出し処理を継続させる。
【００５０】
サイズ変更指示信号を受けた場合（ステップＳ１０３：Ｙｅｓ）、サイズ変更部４０２は、画像切り出し部４０１に対して、画像データの切り出しサイズを、通常画像サイズから拡大画像サイズに変更することを指示する。画像切り出し部４０１は、サイズ変更部４０２からの指示に応じて、矩形切り出し領域を広げ、拡大画像サイズの画像データを切り出す。そして、ステップＳ１０２と同様に、拡大画像サイズの画像データを用いて、多重化部１１３が映像ストリームを生成する。そして、パンチルト量付加部４０４が、当該映像ストリームに撮像方向情報を付加する。撮像方向情報が付加された映像ストリームは、無線モジュール３０８により、操作端末２０に送信される（ステップＳ１０４）。これにより、操作端末２０は、撮像方向情報が付された拡大画像サイズの映像ストリームを受信する。
【００５１】
パンチルト制御部４０３は、操作端末２０から方向指示情報を受信したか否かを判定する。つまり、パンチルト制御部４０３は、操作端末２０からパン動作信号またはチルト動作信号を（以下、パンチルト動作信号と称す）受信したか否かを判定する（ステップＳ１０５）。パンチルト動作信号を受信していない場合（ステップＳ１０５：Ｎｏ）、パンチルト制御部４０３は、現在の撮像方向を維持したまま、撮像処理を継続する。
【００５２】
パンチルト動作信号を受信した場合（ステップＳ１０５：Ｙｅｓ）、パンチルト制御部４０３は、パンチルト動作信号に応じたパン量またはチルト量を求め、雲台に設けられたモータを駆動させるための駆動制御信号を出力する。これにより、撮像装置１の撮像方向が、操作端末２０の指示に応じたパン角度及びチルト角度に変更される（ステップＳ１０６）。
【００５３】
サイズ変更部４０２は、操作端末２０に送信する画像データの画像サイズを通常画像サイズ（元の画像サイズ）に戻す旨のサイズ変更指示信号を受けたか否かを判定する（ステップＳ１０７）。操作端末２０からサイズ変更指示信号を受けていない場合（ステップＳ１０７：Ｎｏ）、サイズ変更部４０２は、画像データの切り出しサイズを拡大画像サイズから変更しない。
【００５４】
操作端末２０からサイズ変更指示信号を受けた場合（ステップＳ１０７：Ｙｅｓ）、サイズ変更部４０２は、画像切り出し部４０１に対して、画像データの切り出しサイズを、拡大画像サイズから通常画像サイズに変更することを指示する。画像切り出し部４０１は、サイズ変更部４０２からの指示に応じて、矩形切り出し領域を狭くして、通常画像サイズ（元の画像サイズ）の画像データを切り出す。そして、ステップＳ１０２と同様に、通常画像サイズの画像データを用いて、多重化部１１３が映像ストリームを生成する。そして、パンチルト量付加部４０４が、当該映像ストリームに撮像方向情報を付加する。撮像方向情報が付加された映像ストリームは、無線モジュール３０８により、操作端末２０に送信される（ステップＳ１０８）。
【００５５】
次に、図５及び図６を参照して、操作端末２０の動作例について説明する。まず、通信部２８が、無線通信路を介して、撮像装置１から送信された映像ストリームを受信する。なお、このとき受信する映像ストリームの画像データは、通常画像サイズの画像データである（図４のステップＳ１０２において撮像装置１が送信する映像ストリーム）。表示部２１は、受信した映像ストリームに基づいて、映像を表示する（ステップＳ２０１）。
【００５６】
近接センサ２７は、ユーザの手が操作部２２に接近したか否かを判定する（ステップＳ２０２）。ユーザの手が操作部２２に接近していない場合、つまり近接センサ２７が物体の接近を検知しない場合（ステップＳ２０２：Ｎｏ）、操作端末２０の表示部２１は、受信した映像ストリームの表示を続ける。
【００５７】
一方、ユーザの手が操作部２２に接近した場合、つまり、近接センサ２７が物体の接近を検知した場合（ステップＳ２０２：Ｙｅｓ）、サイズ変更指示部２６は、映像ストリームの画像サイズを大きくするための（拡大画像サイズに変更するための）サイズ変更指示信号を生成し、通信部２８に出力する。これにより、サイズ変更指示信号が撮像装置１に送信される(ステップＳ２０３)。
【００５８】
その後、通信部２８は、図４のステップＳ１０４において、撮像装置１から送信された拡大画像サイズの映像ストリームを受信する（ステップＳ２０４）。画像切り出し部２４は、拡大画像サイズの画像データを受信すると、当該画像データの中央部分から、通常画像サイズ（所定領域）の画像データを切り出し、表示部２１に出力する。表示部２１は、切り出された画像サイズの映像を表示する（ステップＳ２０５）。
【００５９】
その後、位置調整部２５は、ユーザが操作部２２を用いて、パンチルト動作の指示を行ったか否かを判定する（ステップＳ２０６）。ユーザによりパンチルト動作が指示されていない場合（ステップＳ２０６：Ｎｏ）、位置調整部２５は、画像切り出し部２４の切り出し領域を画像データの中央領域のまま変化させない。
【００６０】
ユーザによりパンチルト動作が指示された場合（ステップＳ２０６：Ｙｅｓ）、制御部２３は、操作に対応するパンチルト動作信号を生成する。そして、位置調整部２５は、拡大画像サイズの画像データにおける切り出し領域を、中央領域からパンチルト動作信号の指示に応じた方向に移動させる（ステップＳ２０７）。例えば、ユーザにより左方向へのパン操作が行われた場合、位置調整部２５は、切り出し領域を画像データの中央から左方向に移動させる。これにより、画像切り出し部２４は、拡大画像サイズの画像データの中央領域よりも左方向に移動した矩形領域を切り出す。そして、表示部２１は、画像切り出し部２４により切り出された矩形領域（画像データの中央から左方向にスライドした矩形領域）を表示する。
【００６１】
また、ユーザが操作部２２を用いてパンチルト操作を行うと、制御部２３は、生成したパンチルト動作信号を通信部２８に出力する。通信部２８は、パンチルト動作信号を撮像装置１に対して送信する（ステップＳ２０８）。
【００６２】
その後、制御部２３は、撮像装置１からパンチルト動作を反映した映像ストリームを受信したか否かを判定する（ステップＳ２０９）。つまり、操作端末２０の制御部２３は、撮像方向が変化した映像ストリームを受信したか否かを判定する。撮像方向が変化したか否かは、映像ストリームに付加されている撮像方向情報を参照することにより判定することができる。パンチルト動作が反映された映像ストリームを受信していない場合（ステップＳ２０９：Ｎｏ）、位置調整部２５は、ステップＳ２０７と同様に、パンチルト操作に応じて、切り出し領域の位置を変化させる。
【００６３】
一方、パンチルト動作が反映された映像ストリームを受信した場合（Ｓ２０９：Ｙｅｓ）、位置調整部２５は、表示部２１に表示されている画像が、意図したパンチルト角度以上動かないように、画像データに付加されている撮像方向情報を用いて、画像切り出し領域を画像データの中央に移動させる（ステップＳ２１０）。
【００６４】
ここで、図７を用いて、位置調整部２５の動作について詳細に説明する。図７は、撮像装置１のパン角度（撮像方向）及び操作端末２０における切り出し画像を時系列に並べた図である。
【００６５】
時刻ｔ１１においては、撮像装置１のパン角度が０°である（正面を向いている）とする。ユーザが、時刻ｔ１１において、操作部２２を用いて、右方向に３０°のパン動作を指示したとする。すると、位置調整部２５は、拡大画像サイズの画像データの領域Ｒ１１における切り出し領域Ｒ１２の位置を、３０°のパン動作に対応する位置まで移動させる。このため、時刻ｔ１２において、表示部２１には、パン角度３０°に対応する切り出し領域Ｒ１２（実線領域）の画像が表示される。また、操作端末２０は、操作部２２の操作に応じて、撮像装置１に対して、右方向に３０°のパン動作を指示するパン動作信号を送信する。
【００６６】
撮像装置１のパンチルト制御部４０１は、パン動作信号に基づいて、右方向のパン動作を雲台に対して命令する。時刻ｔ１３においては、撮像装置１のパン角度が１０°となったとする。これにより、撮像装置１から送信される画像データの領域Ｒ１１に含まれる被写体９０の位置も移動する。このとき、切り出し領域Ｒ１２の位置を調整せずに、時刻ｔ１２のまま状態とすると、表示部２１には、３０°（切り出し領域Ｒ１２の移動によるパン角度）＋１０°（実際に撮像装置１が動いたパン角度）＝４０°のパン角度に対応する画像（ｔ１３の破線領域）が表示されることになってしまう。つまり、表示部２１には、ユーザの意図するパン角度以上パンされた画像が表示されてしまう。
【００６７】
そのため、時刻ｔ１３において、位置調整部２５は、撮像装置１のパン動作（パン指示方向）と反対方向（左方向）に、切り出し領域Ｒ１２を移動させる。言い換えると、位置調整部２５は、領域Ｒ１１の中央方向に、撮像装置１が動作したパン角度に対応する量だけ、切り出し領域Ｒ１２を移動させる。図７の例では、位置調整部２５は、パン角度１０°に対応する量だけ、切り出し領域Ｒ１２の位置を中央方向に移動させる。なお、撮像装置１の実際のパン角度は、撮像方向情報としてフレーム毎に付加されているため、操作端末２０はパン角度を認識できる。
【００６８】
その後も、撮像装置１のパン角度に基づいて、位置調整部２５は、領域Ｒ１１における切り出し領域Ｒ１２の位置を領域Ｒ１１の中央に移動させる。撮像装置１のパン角度が３０°となると、つまり、撮像装置１のパン角度が、ユーザが指示した角度になると、切り出し領域Ｒ１２は、領域Ｒ１１の中央領域に戻る（時刻ｔ１４）。これにより、所望のパン角度の映像がぶれることなく表示部２１に表示される。
【００６９】
勿論、図７においては、説明の便宜のため、時刻ｔ１３において、位置調整部２５が、切り出し領域Ｒ１２をパン角度１０°分だけ一気に中央に移動させた。実際には、位置調整部２５は、画像データに付加されている撮像方向情報が変化する度に、当該撮像方向情報に基づいて、領域Ｒ１１における切り出し領域Ｒ１２の位置を変化させる。つまり、撮像装置１の撮像方向が変化する方向とは反対方向に切り出し領域Ｒ１２が移動する。このとき、より滑らかに切り出し領域Ｒ１２（表示領域）を表示させるために、画像補間処理を行ってもよい。
【００７０】
図６のフローチャートに戻り、制御部２３は、近接センサ２７の検知結果に基づいて、ユーザの手が操作部２２から一定の距離以上離れたか否かを判定する（ステップＳ２１１）。ユーザの手が操作部２２から一定の距離以上離れていない場合（ステップＳ２１１：Ｎｏ）、位置調整部２５は、操作部２２の操作に応じて、切り出し領域の位置を調整する。
【００７１】
一方、ユーザの手が操作部２２から一定の距離以上離れた場合（ステップＳ２１１：Ｙｅｓ）、サイズ変更指示部２６は、撮像装置１に対して、送信する画像データの画像サイズを元の画像サイズ（通常画像サイズ）に戻すように指示する（ステップＳ２１２）。これにより、撮像装置１は、通常画像サイズの画像データを用いて、映像ストリームを生成し、操作端末２０に送信する（図４のステップＳ１０８参照）。
【００７２】
そして、操作端末２０は、通常画像サイズの画像データを取得する（ステップＳ２１３）。このため、操作端末２０は、画像切り出し部２４による画像切り出し処理を終了する（ステップＳ２１４）。つまり、表示部２１は、通信部２８を介して受信した通常画像サイズの画像データを、サイズ変更することなく、そのまま表示する。言い換えると、通信部２８が通常画像サイズの画像データを受信した場合、画像切り出し部２４は、切り出し処理を行わない。そして、表示部２１は、切り出し処理が行われていない受信したままの画像データに基づいて、画像を表示する。
【００７３】
ここで、上述した撮像装置１及び操作端末２０の動作について、図８に示す具体例を用いて説明する。図８は、撮像装置１の撮像方向、撮像処理により生成された画像データ、撮像装置１の送信画像データ、操作端末２０の受信画像データ、及び、操作端末２０の表示画像の変化を時系列に並べた図である。図８の例においては、被写体９１が、向かって右方向に移動し、その後、移動を停止したものとする。
【００７４】
まず、時刻ｔ２１において、被写体９１が右方向への移動を開始する。このとき、撮像装置１においては、撮像処理により、領域Ｒ２１の画像データが生成される。そして、画像切り出し部４０１は、領域Ｒ２１の中央の矩形領域Ｒ２２の画像データ（通常画像サイズの画像データ）を切り出して、送信画像データを生成する。なお、時刻ｔ２１においては、被写体９１は、領域Ｒ２１の中央に位置するものとする。そのため、切り出し画像データ（領域Ｒ２２）にも、被写体９１が含まれている。切り出された矩形領域Ｒ２２の画像データは、操作端末２０に送信される。
【００７５】
なお、図８に示した例においては、撮像処理により生成された領域Ｒ２１の画像データから切り出した領域Ｒ２２の画像サイズは、操作端末２０側の表示部２１の表示画像の画像サイズ（通常画像サイズ）と同じサイズであるが、これに限られるものではない。例えば、領域Ｒ２１の画像データから操作端末２０側の表示画像の画像サイズ（通常画像サイズ）よりも大きいサイズの画像データを切り出す。そして、切り出した画像データの画像サイズをリサイズした画像（画素数を操作端末２０側の表示２１部の画素数に合わせた画像）を撮像装置１において生成して、操作端末２０に送信してもよい。一方、領域Ｒ２１の画像データから操作端末２０側の表示画像の画像サイズ（通常画像サイズ）よりも小さいサイズの画像データを切り出し、当該画像データの画像サイズを操作端末２０側の表示部２１の画素数に合わせてリサイズ（画素数を増加）してもよい。撮像装置１は、リサイズを行った場合、リサイズ前の画像データ（撮像処理により生成されたオリジナルの画像データ）の画素数に関する情報やリサイズの倍率に関する情報を送信画像データに付加してもよい。これにより、操作端末２０側では、リサイズ前の画素数に関する情報やリサイズの倍率に関する情報に基づいて、リサイズ前の画像を表示できる。
【００７６】
表示部２１は、受信した矩形領域Ｒ２２の画像をそのまま表示する。つまり、画像切り出し部２４により受信した画像データの切り出し処理が行われることなく、表示部２１は、受信した画像を表示する。したがって、操作端末２０の表示部２１には、右方向へ移動を開始した被写体９１が表示される。ここで、ユーザは、表示部２１から被写体９１が外れることを予測して、パン操作を行うために手を近づける。そのため、操作端末２０の近接センサ２７により、ユーザの手の接近が検知される。これにより、サイズ変更指示部２６は、操作端末２０から撮像装置１に対して、送信画像データの画像サイズを拡大する旨のサイズ変更指示信号を送る。
【００７７】
時刻ｔ２２において、被写体９１の位置が向かって右方向に移動したとする。このため、撮像装置１においては、領域Ｒ２１の中央から右方向にずれた位置に被写体９１が位置している画像データが生成される。
【００７８】
時刻ｔ２１において、送信画像データの画像サイズの拡大指示がされたため、撮像装置１のサイズ変更部４０２は、画像切り出し部４０１が切り出す画像サイズを拡大する。これにより、画像切り出し部４０１は、矩形領域Ｒ２２よりも大きいサイズ（拡大画像サイズ）の矩形領域Ｒ２３を、領域Ｒ２１から切り出す。切り出された矩形領域Ｒ２３の画像データは、操作端末２０に送信される。
【００７９】
操作端末２０の画像切り出し部２４は、受信した矩形領域Ｒ２３の中央領域Ｒ２４（所定領域）を切り出す。このとき、表示部２１の画像サイズと領域Ｒ２４の画像サイズとは、同じ画像サイズの画像データであるとする。そして、表示部２１は、画像切り出し部２４により切り出された画像を表示する。被写体９１は、領域Ｒ２１の中央から右方向に移動したため、表示部２１に表示される被写体９１の位置は、表示部２１の右端に寄っている。ユーザは、被写体９１が表示部２１から外れないように、操作部２２を用いて、右方向へのパン操作を行う。図８に示す例においては、操作端末２０がタッチパネルを備えるスマートフォンであるため、ユーザは、表示部２１を左方向に指でスワイプすることにより、右方向へのパン動作の指示を行う。これにより、パン動作信号が撮像装置１に送信される。
【００８０】
なお、切り出された画像データ（領域Ｒ２４）の画像サイズと表示部２１の画像サイズとは、必ずしも一致している必要はない。つまり、表示部２１の画素数よりも多い画素数の画像データを切り出した場合は、画素数を減らすリサイズを行い、リサイズ処理後の画像を表示してもよい。また、表示部２１の画素数よりも少ない画素数の画像データを切り出した場合は、画素数を増やすリサイズを行い、リサイズ処理後の画像を表示してもよい。
【００８１】
位置調整部２５は、パン動作信号に応じて、受信画像データ（矩形領域Ｒ２３の画像データ）における切り出し領域Ｒ２４の位置を調整する（時刻ｔ２３）。具体的には、切り出し領域Ｒ２４の位置を中央から右方向へ移動させる。これにより、切り出し領域の中央に被写体９１が位置するようになる。その結果、表示部２１に表示される画像の中央に、被写体９１が位置している。
【００８２】
このとき、時刻ｔ２２において操作端末２０から送信されたパン動作信号は、無線通信路にて生じる遅延の影響で、時刻ｔ２３においては、撮像装置１に到達していないものとする。そのため、時刻ｔ２３においても、撮像装置１の撮像方向は変化していない。本実施の形態においては、上記の通り、ユーザの手が操作部２２に接近したことをトリガとして、撮像装置１から拡大画像サイズの画像データが送られてくる。したがって、パン動作信号が実際に撮像装置１に到達していなくても、位置調整部２５が、受信した画像データの領域Ｒ２３における切り出し領域Ｒ２４の位置を移動させることにより、ユーザが移動させたい方向に表示画像を移動させることができる。言い換えると、撮像装置１のパン動作後に撮像された画像データが送られてくることを待つことなく、操作端末２０の表示部２１では、パン動作が行われた画像が表示される。その結果、パン操作を行ってから、表示画像が移動するまでの間にタイムラグ（通信路による遅延）がなく、表示部２１に表示された画像をスムーズに移動させることができる。つまり、ユーザに違和感を与えることなく、パンチルト操作に応じた画像を表示することができる。
【００８３】
なお、時刻ｔ２３において、被写体９１は右方向への移動を停止したものとする。そのため、時刻ｔ２３において、ユーザは、パン操作を停止したものとする。ただし、ユーザは、操作部２２に手を近づけている状態は維持している。
【００８４】
時刻ｔ２４において、右方向へのパン動作信号を受信した撮像装置１が、パン動作を開始する。これにより、被写体９１が画像データの中央へ移動する。そして、撮像装置１は、拡大画像サイズの画像データ（領域Ｒ２３）を送信する。このとき、パンチルト量付加部４０４は、ジャイロセンサ２０８が検出したパン角度（撮像方向情報）を、送信する画像データに付加する。
【００８５】
操作端末２０が画像データを受信すると、位置調整部２５は、画像データに付されたパン角度に基づいて、領域Ｒ２３の画像データにおける切り出し領域Ｒ２４の位置を調整する。具体的には、図７において説明したように、位置調整部２５は、撮像装置１のパン動作の方向とは反対方向（左方向）に、画像データに付されたパン角度に対応する量だけ領域Ｒ２４を移動させる。
【００８６】
つまり、撮像装置１のパン角度の変化に伴って、領域Ｒ２３の画像データにおける切り出し領域Ｒ２４の位置が変化する。言い換えると、撮像装置１のパン角度が変化した場合であっても、操作端末２０における切り出し領域と、被写体９１との相対的な位置は変化しない。その結果、撮像装置１の撮像方向が異なる時刻ｔ２３と時刻ｔ２４において、操作端末２０の表示部２１に表示された画像における被写体９１の位置は変化しない。
【００８７】
ここで、被写体９１が停止を続けていることから、ユーザは、パン操作は必要ないと考え、操作部２２から手を離す。これにより、ユーザの手が操作部２２から所定の距離以上離れる。そして、近接センサ２７は、ユーザの手が接近していなことを検知する。するとサイズ変更指示部２６は、近接センサ２７の検知結果に基づいて、撮像装置１に対して、通常画像サイズの画像データの送信を指示する。
【００８８】
撮像装置１は、時刻ｔ２５において、操作端末２０から送信されたサイズ変更指示信号を受信する。そして、サイズ変更部４０２は、切り出し画像の領域を元に戻す。つまり、サイズ変更部４０２は、時刻ｔ２１における切り出し領域Ｒ２２（通常画像サイズ）の画像データを切り出すことを、画像切り出し部４０１に指示する。
【００８９】
画像切り出し部４０１は、サイズ変更部４０２からの指示に基づいて、画像データから領域Ｒ２２を切り出す。そして、撮像装置１から操作端末２０に領域Ｒ２２の画像データが送信される。操作端末２０の制御部２３は、通常画像サイズの画像データを受信すると、画像切り出し部２４に切り出し処理を行わせることなく、表示部２１に受信した画像データを表示させる。その結果、受信した画像サイズが異なる時刻ｔ２４と時刻ｔ２５において、操作端末２０の表示部２１の表示画像は変化していない。つまり、送信される画像サイズを小さくすることにより、通信帯域を抑制することができる。言い換えると、本実施の形態にかかる撮像システムによれば、表示画像の画質を一定に保った場合、撮像装置を制御（パンチルト）しない期間は、通信帯域を抑えることができる。一方、通信帯域を一定に保った場合(通信帯域が制限されている場合)、撮像装置１は拡大画像サイズの画像データを圧縮して送信する必要がある。しかしながら、本実施の形態にかかる撮像システムによれば、画像データを圧縮する期間（表示部２１の画質が悪化する期間）を、撮像装置１を制御（パンチルト）する期間に限定することができる。
【００９０】
以上のように、本実施の形態にかかる操作端末２０の構成によれば、位置調整部２５が、撮像方向情報に基づいて、受信した拡大画像サイズの画像データにおける切り出し領域（所定領域）の位置を調整する。画像切り出し部２４は、調整された切り出し領域の画像データを切り出す。そして、切り出された画像データに基づいて、表示部２１が、画像を表示する。つまり、撮像装置１の撮像方向の変化によって、操作端末２０において切り出される領域の位置も変化する。このため、生成される画像データにおける被写体の位置が変化しても、切り出し領域と被写体との相対的な位置は変化しない。その結果、表示部２１に表示される被写体の位置も変化しない。したがって、表示部２１は安定した画像を表示することができる。
【００９１】
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更及び組み合わせをすることが可能である。例えば、上記の説明では、撮像装置１がパン動作を行う場合について説明したが、チルト動作についても同様に適用可能である。また、上記の実施の形態においては、雲台を回転させることによって撮像方向を変化させる機械式のパンチルト動作について説明したが、本発明は電子式のパンチルト動作にも適用可能である。
【００９２】
さらに、操作端末２０の画像切り出し部２４は、拡大画像サイズの画像データを受信した直後においては、当該画像データの中央領域を切り出していたが、これに限られるものではない。操作端末２０の画像切り出し部２４が切り出す領域の位置は、撮像装置１の画像切り出し部４０１が切り出す通常画像サイズの領域に対応する位置であればよい。操作端末２０の画像切り出し部２４が最初に切り出す領域位置を画像データの中央領域以外に設定する場合には、画像切り出し部４０１により切り出される画像の座標も、送信画像データに付加することにより、切り出し領域を特定できる。
【００９３】
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更及び組み合わせをすることが可能である。また、上記の撮像装置１及び操作端末２０の処理は、メインプロセッサのＲＯＭ等に格納されたコンピュータプログラムによって実行可能である。上述の例において、各処理をコンピュータ（プロセッサ）に行わせるための命令群を含むプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【符号の説明】
【００９４】
１  撮像装置
１１  本体部
１２  支持部
１３  アーム部
１４  回転台
１５  固定台
２０  操作端末
２１  表示部
２２  操作部
２３  制御部
２４  画像切り出し部
２５  位置調整部
２６  サイズ変更指示部
２７  近接センサ
２６  通信部
９０、９１  被写体
１００  撮像部
１０１  ズームレンズ
１０２  フォーカスレンズ
１０３  絞り
１０４  撮像素子
１０５  アナログ画像信号処理部
１０６  画像Ａ／Ｄ変換部
１０７  画像入力コントローラ
１０８  デジタル信号処理部
１０９  マイク
１１０  アナログ音声信号処理部
１１１  音声Ａ／Ｄ変換部
１１２  音声入力コントローラ
１１３  多重化部
２０１  圧縮・伸張処理部
２０２  音声・画像処理部
２０３  ＲＯＭ
２０４  フラッシュＲＯＭ
２０５  ＶＲＡＭ
２０６  メインメモリ
２０７  メディア制御部
２０８  ジャイロセンサ
３０１  カードＩ／Ｆ
３０２  カード型記録媒体
３０３  入出力Ｉ／Ｆ
３０４  液晶モニタ
３０５  スピーカ
３０６  操作部
３０７  入出力端子
３０８  無線Ｉ／Ｆ
３０９  無線モジュール
４００  中央制御部
４０１  画像切り出し部
４０２  サイズ変更部
４０３  パンチルト制御部
４０４  パンチルト量付加部
【図１】
0005880210.tif 000002
【図２】
0005880210.tif 000003
【図３】
0005880210.tif 000004
【図４】
0005880210.tif 000005
【図５】
0005880210.tif 000006
【図６】
0005880210.tif 000007
【図７】
0005880210.tif 000008
【図８】
0005880210.tif 000009