(57)【要約】      （修正有）【課題】ユーザの意図する構図に正確に合わせるようにズームを制御する遠隔制御システムを提供する。【解決手段】デジタルカメラからレンズ固有情報を受信する手段と、デジタルカメラからズーム倍率を表す情報を含む付帯情報がついているライブビュー画像を受信する手段と、ライブビュー画像を表示する手段と、ユーザからのズーム開始指示を検知する手段Ｓ１０４１と、ズーム開始指示を検知したら、レンズ固有情報を利用して次に表示するプレビュー画像を作成し表示する手段Ｓ１０４２と、ユーザからのズーム停止指示を検知する手段Ｓ１０４３と、ズーム停止指示を検知したら、ズーム倍率を決定する手段Ｓ１０４４と、デジタルカメラにズーム倍率でズーム指示を行うズーム指示手段Ｓ１０４５とを有する。【選択図】図１３
2017085437.tif 000002
【特許請求の範囲】
【請求項１】
デジタルカメラからレンズ固有情報を受信するレンズ固有情報受信手段と、（Ｓ１０９３、Ｓ１０９４）
デジタルカメラからズーム倍率を表す情報を含む付帯情報がついているライブビュー画像を受信するライブビュー画像受信手段と、（Ｓ１０３１）
ライブビュー画像を表示する表示手段と、（Ｓ１０３２）
ユーザからのズーム開始指示を検知するズーム開始指示検知手段と、（Ｓ１０４１）
ズーム開始指示を検知したら、前記レンズ固有情報を利用して次に表示するプレビュー画像を作成し表示するプレビュー画像表示手段と、（Ｓ１０４２）
ユーザからのズーム停止指示を検知するズーム停止指示検知手段と、（Ｓ１０４３）
ズーム停止指示を検知したら、ズーム倍率を決定するズーム倍率決定手段と、（Ｓ１０４４）
デジタルカメラに前記ズーム倍率でズーム指示を行うズーム指示手段（Ｓ１０４５）
を持つことを特徴とする遠隔操作装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像素子で得られる映像をライブビュー画像とする撮像装置と、前記撮像装置から前記ライブビュー画像を受信して表示する外部機器を備えた遠隔制御システム、外部機器、遠隔制御方法及びプログラムに関する。
【背景技術】
【０００２】
デジタルカメラのズームの方法として、コンパクトデジタルカメラでは、ボタン部材によってズームを制御したり、一眼カメラでは、パワーズーム用のレンズを装着することでレンズ側の操作部材を利用してズームを制御したりと、ズームを手動ではなく自動で行うことは一般的である。
【０００３】
その一方で、デジタルカメラのズームを遠隔操作端末で制御することは今まであまり実施されてこなかったが、遠隔操作端末でズーム制御をするとなると、通信にある程度時間がかかるためズーム停止操作を実施してから実際に停止するまでにタイムラグが発生してしまう。
【０００４】
特許文献１には、カメラが遠隔操作端末に基準画像を送信し、基準画像に対するズーム倍率等の情報を遠隔操作端末から受信し、指定されたズーム倍率となるようにレンズを駆動するという発明が開示されている。このように基本画像からのズーム倍率を指定したズーム制御をおこなえば、遠隔制御による通信タイムラグを気にすることなく制御を行うことが出来る。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１４-１５４９０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、遠隔操作端末でズーム制御をするとなると、頻繁に通信が発生することになるため、通信データを最小限に減らす必要があるので指定できるズーム倍率を離散的な値に限定することが容易に考えられる。また、レンズに応じてズーム倍率の上限と下限が存在する。このように、指定できないズーム倍率が存在することになる。しかし、上述の特許文献に開示された従来技術では、基本画像からのズーム倍率を指定することで遠隔制御によるずれは発生しないが、指定できないズーム倍率が存在することが考慮されておらず、遠隔操作端末にて指定したズーム倍率に制御できない可能性がある。
【０００７】
そこで、本発明の目的は、ユーザの意図する構図に正確に合わせられるようにズームを制御することを可能にした遠隔制御システムを提供することにある。
【課題を解決するための手段】
【０００８】
上記の目的を達成するために、本発明に係る遠隔操作装置は、
デジタルカメラからレンズ固有情報を受信するレンズ固有情報受信手段と、デジタルカメラからズーム倍率を表す情報を含む付帯情報がついているライブビュー画像を受信するライブビュー画像受信手段と、ライブビュー画像を表示する表示手段と、ユーザからのズーム開始指示を検知するズーム開始指示検知手段と、ズーム開始指示を検知したら、前記レンズ固有情報を利用して次に表示するプレビュー画像を作成し表示するプレビュー画像表示手段と、ユーザからのズーム停止指示を検知するズーム停止指示検知手段と、ズーム停止指示を検知したら、ズーム倍率を決定するズーム倍率決定手段と、デジタルカメラに前記ズーム倍率でズーム指示を行うズーム指示手段を持つことを特徴とする。
【発明の効果】
【０００９】
本発明に係る遠隔操作装置によれば、ユーザの意図する構図に正確に合わせられるような遠隔ズーム制御を提供することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の第1の実施例による、遠隔制御システムの構成例
【図２】本発明の第1の実施例による、レンズ装置１０２のハードウェア構成を示す図
【図３】本発明の第1の実施例による、デジタルカメラ１０１のハードウェア構成を示す図
【図４】本発明の第1の実施例による、デジタルカメラ１０１の背面側の外観図
【図５】本発明の第1の実施例による、パワーズームアダプター１０３のハードウェア構成を示す図
【図６】本発明の第1の実施例による、携帯端末１０６のハードウェア構成を示す図
【図７】本発明の第1の実施例による、携帯端末１０６を利用したリモートライブビュー表示アプリケーションの操作及び表示画面の例を示す図
【図８】本発明の第1の実施例による、携帯端末１０６を利用したリモートライブビュー表示アプリケーションでのズーム制御における構図ずれの例を示す図
【図９】本発明の第1の実施例による携帯端末１０６を利用したリモートライブビュー表示アプリケーションでの全体システムの例を示す図
【図１０】本発明の第1の実施例によるズーム倍率リストの例を示す図
【図１１】本発明の第1の実施例による起動時のズーム倍率リストの受け渡しにおけるシーケンス
【図１２】本発明の第1の実施例によるライブビュー画像表示におけるシーケンス
【図１３】本発明の第1の実施例によるズーム制御におけるシーケンス
【発明を実施するための形態】
【００１１】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。
【実施例１】
【００１２】
＜遠隔制御システムの構成＞
本実施形態では、撮像装置と携帯端末とを無線で接続し、携帯端末から撮像装置の撮影を制御する遠隔制御システムについて説明する。
【００１３】
以下、図１を参照して、本発明の第1の実施例による、遠隔制御システムの構成例について説明する。
【００１４】
１０１はレンズ交換式の撮像装置の例であるデジタル一眼レフカメラ（以下、デジタルカメラと称する）である。１０２はデジタルカメラ１０１に装着されているレンズ装置である。１０３はレンズ装置１０２に装着されているパワーズームアダプターである。パワーズームアダプター１０３はレンズ装置１０２のズーム制御をすることが可能である。１０６はスマートフォン等の携帯端末であり、デジタルカメラ１０１に対して外部機器として遠隔コントロールを行う。１０４はアクセスポイントであり、デジタルカメラ１０１と携帯端末１０６とは、アクセスポイント１０４を経由して接続を行うインフラストラクチャーモードにより画像データを含む各種信号の送受信が可能になっている。
【００１５】
なお、デジタルカメラ１０１と携帯端末１０６との接続方式は、アクセスポイントを利用せずに機器同士でネットワークを構築するアドホックモード等であってもよい。
【００１６】
遠隔コントロールとは、デジタルカメラ１０１で撮影される被写体１０５の被写体像を携帯端末１０６側で確認するとともに、携帯端末１０６側でズーム指示を行ったりする。携帯端末１０６側でズーム指示を行う場合はデジタルカメラ１０１に信号を送信し、レンズ装置１０２を介してパワーズームアダプター１０３にズーム指示を行う。パワーズームアダプター１０３はそのズーム指示に基づきレンズ装置を制御する。
【００１７】
＜レンズ装置のハードウェア構成＞
以下、図２を参照して、本発明の第1の実施例による、レンズ装置１０２のハードウェア構成を示す図について説明する。
【００１８】
１、３は撮影レンズであり、ここでは説明の便宜上２枚のレンズで図示するが、実際は更に多数枚のレンズから構成される。２は絞りであり、撮影レンズ１、３を通過した光量を調整する。１３は焦点調節回路であり、撮影レンズ１、３内に配置され、焦点調節を行う。１４は絞り駆動回路であり、撮影レンズ１、３内に配置され、絞り２を駆動する。３２はズーム回路であり、撮影レンズ１、３を制御してズーム倍率を変更する。３１はアダプター通信部であり、パワーズームアダプター１０３のレンズ通信部５０４と通信を行う。これにより、レンズ装置１０２とパワーズームアダプター１０３の間で制御コマンドを送受信することを可能としている。具体的には、携帯端末１０６からデジタルカメラ１０１を介して通知されたズーム制御指示を送信したり、パワーズームアダプター１０３の状態を受信したりする。
【００１９】
３５はＣＰＵであり、レンズ装置１０２の各部の制御を司る中央演算処理装置である。３３はＲＡＭであり、ＣＰＵ３５の作業領域として用いる。３４はＲＯＭであり、レンズ装置１０２を制御するための制御プログラム等を格納する。３６はカメラ通信部であり、デジタルカメラ１０１と通信を行う。これにより、レンズ装置１０２とデジタルカメラ１０１の間で制御コマンドを送受信することを可能としている。
【００２０】
＜デジタルカメラの構成＞
以下、図３を参照して、本発明の第1の実施例による、デジタルカメラ１０１のハードウェア構成を示す図について説明する。
【００２１】
４は主ミラーであり、ファインダ系による被写体像の観察状態に応じて撮影光路に対して傾斜状態或いは退避状態に設定される。５はサブミラーであり、主ミラー４を通過した光束をカメラ筐体の下方に位置する焦点検出用のレンズ系１１及びラインセンサ１２に向けて反射する。６はシャッタである。７は撮像素子であり、ＣＣＤ型撮像素子或いはＣＭＯＳ型撮像素子として構成される。８は液晶表示部であり、ファインダ内に内蔵され、撮影レンズ１、３の予定結像面に配置されたピント版及び測距枠のマーク等を表示する。
【００２２】
９はペンタプリズムであり、ファインダ光路変更用のプリズムである。２９はＡ／Ｄ変換回路であり、ファインダ光路系の上部に配置された測光回路の出力をＡ／Ｄ変換する。１０は接眼レンズであり、これを介して撮影者は被写体を観察することができる。１１は焦点検出用のレンズ系である。１２はラインセンサであり、焦点検出を行う。１５はミラー駆動回路であり、主ミラー４を駆動する。１６はラインセンサ駆動回路であり、ラインセンサ１２を駆動する。１７はシャッタ駆動回路であり、シャッタ６を駆動する。１８は撮像素子駆動回路であり、撮像素子７を駆動する。１９はＡ／Ｄ変換回路であり、撮像素子７から出力されるアナログ画像信号をデジタル画像信号に変換する。
【００２３】
２０は信号処理回路であり、デジタル画像信号に対して信号処理を施す。２１はＲＡＭであり、デジタル画像信号等を一時的に保存する。２２はＲＯＭであり、デジタルカメラ１０１を制御するための制御プログラム等を格納する。２３はコンパクトフラッシュ（登録商標）（ＣＦ）であり、デジタル画像信号を最終的に記録する記録媒体である。２４はＣＰＵであり、デジタルカメラ１０１の各部の制御を司る中央演算処理装置である。２５は背面液晶表示部（ＬＣＤ）であり、撮像したデジタル画像信号に対応する撮影画像の表示や撮影パラメータ変更等のメニュー表示、又はライブビュー画像の表示等を行う。
【００２４】
２６はスイッチ入力部であり、図３に示すシャッタボタン３７で操作されるレリーズスイッチ（レリーズＳＷ）、各種機能ボタン、図３に示す選択サブダイヤル３８、電源スイッチ等の各種ボタンの操作に連動する入力を行う。スイッチ入力部２６は、撮影者により該当ボタンが操作されると、対応する信号をＣＰＵ２４に送出する。レリーズＳＷは、少なくとも２つ以上の接点を有するスイッチから構成され、例えば押下される量に応じて状態が２段階に切り替わる構造となっている。レリーズＳＷを途中まで押下した場合には第１の接点（ＳＷ１）が選択され、最後まで押下した場合には第２の接点（ＳＷ２）が選択される。ＳＷ１が選択された場合にはＡＦ（自動焦点）やＡＥ（自動露出）等の撮影準備動作を行い、ＳＷ２が選択された場合には撮影動作及びデジタル画像信号の作成動作及び記録動作を行う。
【００２５】
２７は携帯端末通信部であり、ＬＡＮ（Local Area Network）やＵＳＢ（Universal Serial Bus）等のインタフェースを有し、携帯端末１０６のような外部機器と接続する。これにより、デジタルカメラ１０１で撮影した画像の送信や外部機器からデジタルカメラ１０１の遠隔制御を可能としている。２８はデジタルカメラ１０１の駆動源となる電源であり、一般的にはリチウムイオン電池等の充電型の電源が用いられる。
【００２６】
以下、図４を参照して、本発明の第1の実施例による、デジタルカメラ１０１の背面側の外観図を示す図について説明する。
【００２７】
デジタルカメラ１０１の筐体の上面部には、シャッタボタン３７が配設されている。また、筐体の背面部には、選択サブダイヤル３８、ライブビュー開始／終了ボタン４２、撮影画像の確認用及び機能メニュー表示用の背面液晶表示部２５が配設されている。各種スイッチやダイヤル等の操作情報はスイッチ入力部２６からＣＰＵ２４に送られ、状態や操作されたボタンの状況に応じてＣＰＵ２４がデジタルカメラ１０１を統括コントロールする。
【００２８】
＜パワーズームアダプターのハードウェア構成＞
以下、図５を参照して、本発明の第1の実施例による、パワーズームアダプター１０３のハードウェア構成を示す図について説明する。
【００２９】
パワーズームアダプター１０３は、ＣＰＵ５００、ギア駆動部５０３、ＲＯＭ５０１、ＲＡＭ５０２、レンズ通信部５０４を備える。ＣＰＵ５００は、パワーズームアダプター１０３で実行される処理を統括的に制御する。ギア駆動部５０３はモーターなどを利用してレンズのズームをメカ的に制御する。ＲＡＭ５０２は、ＣＰＵ５００の作業領域として用いる。ＲＯＭ５０１は、ＣＰＵ５００が実行する制御プログラムを記憶する。レンズ通信部５０４は、レンズ装置１０２のアダプター通信部３１と通信を行う。これにより、レンズ装置１０２とパワーズームアダプター１０３の間で制御コマンドを送受信することを可能としている。
【００３０】
＜携帯端末のハードウェア構成＞
以下、図６を参照して、本発明の第1の実施例による、携帯端末１０６のハードウェア構成を示す図について説明する。
【００３１】
携帯端末１０６としては、上述したスマーフォフォンやタブレット端末以外にも、携帯電話機、ＰＤＡ（PersonalDigital Assistant）、携帯型ＡＶプレイヤー、電子ブック、電子辞書等がある。携帯端末１０６は、ＣＰＵ６００、フラッシュメモリ６０１、ＲＡＭ６０２を備える。また、内蔵カメラ６０３、マイク６０４、スピーカ６０５、イヤホン６０６、タッチパネル６１０、液晶表示部６１１、スイッチ６１２、カメラ通信部６１３、外部インタフェース６１４、電源６１５を備える。さらに、ＧＰＳ（Global Positioning System）センサ６０７や電子コンパス６０８等を備えるものもある。その他に、通話用のアンテナや通話用の通信モジュール等を備えていてもよい。
【００３２】
ＣＰＵ６００は、携帯端末１０６で実行される処理を統括的に制御する。ＲＡＭ６０２は、ＣＰＵ６００の作業領域として用いられ、ＣＰＵ６００が処理するコンテンツ等の各種データや、各種アプリケーションのプログラムを一時的に格納する。フラッシュメモリ６０１は、内蔵カメラ６０３により撮像されたデジタル写真画像や動画像等の各種コンテンツ、ＣＰＵ６００が実行する各種制御プログラムや各種アプリケーションプログラムを記憶する。液晶表示部６１１は、例えばＴＦＴ（Thin Film Transistor）等のＬＣＤやＯＥＬＤ（Organic Electro-Luminescence Display）であり、アプリケーションＵＩ（User Interface）を表示する。また、液晶表示部６１１はタッチパネル６１０と一体的に設けられている。
【００３３】
タッチパネル６１０は、アプリケーションの実行により写真やＧＵＩ（Graphical User Interface）が表示された状態において、ユーザのタッチ操作を検出し、ＣＰＵ６００に伝える。タッチパネル６１０の動作方式としては、例えば抵抗被膜方式や静電容量方式が用いられるが、その他の方式が用いられてもよい。タッチパネル６１０は、例えば写真表示アプリケーションの実行中に、ユーザが写真を選択して全画面表示したり、ピンチインやピンチアウトにより画像を拡大、縮小したりすることも可能にしている。スイッチ６１２は、例えば電源スイッチ、起動ボタン等、タッチパネル６１０では入力できないユーザの操作等を受け付け、入力信号をＣＰＵ６００に伝える。
【００３４】
イヤホン６０６及びスピーカ６０５は、フラッシュメモリ６０１等に記録された、又はカメラ通信部６１３、外部インタフェース６１４等から入力された音声信号を出力する。カメラ通信部６１３は、インターネットやＬＡＮ等のネットワークを介して、デジタルカメラとの間で通信処理を行う。カメラ通信部６１３は、無線ＬＡＮモジュールを備えていてもよいし、ＷＷＡＮ（Wireless Wide Area Network）モジュールを備えていてもよい。外部インタフェース６１４は、例えばＵＳＢやＨＤＭＩ（登録商標）（High-Definition MultimediaInterface）等の各種規格に準じて、アプリケーションやコンテンツデータのやり取りを行う。電源６１５は、携帯端末１０６用の電源であり、一般的にはリチウムイオン電池等の充電型の電源が用いられる。
【００３５】
次に、本実施形態に係る遠隔制御システムによる動作について説明する。
【００３６】
＜ライブビュー表示＞
デジタルカメラ１０１では、構図を確認する方法として、従来通りフイルムカメラと同様にピント版に結像した画像をファインダで確認する方法の他に、撮像素子７に結像した画像をリアルタイムに背面液晶表示部２５に表示して確認する方法がある。この方法をライブビュー表示と呼ぶこととする。デジタルカメラ１０１でライブビュー表示を行う場合、ライブビュー開始／終了ボタン４２を押下することによりライブビュー表示モードに切り替わり、デジタルカメラ１０１は撮像素子７で結像した画像をリアルタイムに背面液晶表示部２５に表示する。これにより、撮影者は画像全体の構図等を見た状況に基づいてデジタルカメラ１０１を移動させたりズームをしたりすることで、アングル調整を行うことができる。このとき、撮像素子７に映像を投影させるため主ミラー４は退避状態に設定され、シャッタ６は開かれる。すなわち、ファインダ光路は遮断され、ファインダでの被写体確認はできなくなる。
【００３７】
＜携帯端末でのリモートライブビュー表示＞
ライブビュー表示は、上述したようにデジタルカメラ１０１単体で行うだけでなく、デジタルカメラ１０１に接続された外部機器と連携することで外部機器から遠隔操作するようにして行うことも可能である。例えば外部機器として携帯端末１０６で被写体を確認しながらの遠隔撮影操作を行うこともできる。この場合、デジタルカメラ１０１では、撮像素子７に結像した画像から外部装置出力用のライブビュー画像を生成し、逐次携帯端末１０６からの要求に応じてライブビュー画像を送信する。携帯端末１０６では、逐次受信したライブビュー画像をリアルタイムに液晶表示部６１１に表示する。この方法をリモートライブビュー表示と呼ぶこととする。リモートライブビュー表示の場合も、撮影者は表示されるライブビュー画像で構図を見てズームをしたりすることで、アングル調整を行うことができる。
【００３８】
＜リモートライブビュー表示アプリケーション＞
以下、図７を参照して、本発明の第1の実施例による、携帯端末１０６を利用したリモートライブビュー表示アプリケーションの操作及び表示画面の例を示す図について説明する。
【００３９】
図７の<a>において、起動されたアプリケーションは液晶表示部６１１に対してＧＵＩ表示をする。これにより、被写体の確認やズーム制御を行うことができる。携帯端末１０６においてリモート表示機能が実行されると、デジタルカメラ１０１では、リモートライブビュー表示アプリケーションからの指示によりライブビューが開始される。
【００４０】
７０１はリモートライブビュー画面であり、携帯端末１０６においてはファインダに相当する。デジタルカメラ１０１の撮像素子７に結像した画像をライブビュー画像として取得、表示を繰り返すことで、ライブビュー画像をリアルタイムで表示させることができる。これにより、撮影者は遠隔操作においてもカメラの操作と同様に被写体の確認を行うことができ、構図確認が可能となる。また、リモートライブビュー画面７０１で構図を確認し、ズーム制御をすることもできる。
【００４１】
７０２は遠隔ライブビュー開始／終了ボタンであり、カメラ背面のライブビュー開始／終了ボタン４２と同様にデジタルカメラ１０１のライブビュー機能を遠隔操作にてコントロールすることができる。７０３はズーム制御ボタンであり、このボタンを操作することでズームインやズームアウトが可能となる。７０４はズーム倍率表示バーであり、現在表示しているライブビュー画像に対するズーム倍率を表示している。
【００４２】
図７の<b>において、ズームアウトする際の操作を説明する。ズーム制御ボタン７０３を押下したまま左にずらすと、ズームアウトした場合のプレビュー画像がリモートライブビュー画面７０１に表示される。このプレビュー画像は携帯端末１０６にてライブビュー画像を縮小して作成する。ズーム制御ボタン７０３の押下状態が続いている間、プレビュー画像は段々縮小されていく。その際に、ズーム倍率表示バー７０４に表示されるズーム倍率も段々小さくなっていく。さらに、ズーム制御ボタン７０３を押下状態から離すと、ズーム倍率が決定され、デジタルカメラ１０１にズーム指示をする。
【００４３】
図７の<C>において、ズームインする際の操作を説明する。ズーム制御ボタン７０３を押下したまま右にずらすと、ズームインした場合のプレビュー画像がリモートライブビュー画面７０１に表示される。このプレビュー画像は携帯端末１０６にてライブビュー画像を拡大して作成する。ズーム制御ボタン７０３の押下状態が続いている間、プレビュー画像は段々拡大されていく。その際に、ズーム倍率表示バー７０４に表示されるズーム倍率も段々大きくなっていく。さらに、ズーム制御ボタン７０３を押下状態から離すと、ズーム倍率が決定され、デジタルカメラ１０１にズーム指示をする。
【００４４】
このようにして、リモートライブビュー表示アプリケーションにて、構図確認やズーム制御を行う。
【００４５】
＜ズーム制御における構図ずれの課題＞
以下、図８を参照して、本発明の第1の実施例による、携帯端末１０６を利用したリモートライブビュー表示アプリケーションでのズーム制御における構図ずれの例を示す図について説明する。
【００４６】
手動でレンズを操作しズーム倍率を変更するのではなく、携帯端末１０６を利用して遠隔ズーム制御を行う場合、頻繁に通信が発生することになるため、通信データを最小限に減らす必要があり指定できるズーム倍率を離散的な値に限定することが容易に考えられる。また、レンズに応じてズーム倍率の上限と下限が存在する。このように、指定できないズーム倍率が存在することになる。そのため、指定できないズーム倍率が存在することが考慮されていないと、遠隔操作端末にて指定したズーム倍率に制御できない可能性がある。
【００４７】
下記で図８を例に説明する。図８<a>において、ズーム制御ボタン７０３を押下したまま右にずらすプレビュー画像が拡大され、ズーム倍率がテレ側に移動する。また、リモートライブビュー画面７０１に表示される被写体は段々大きくなっていく。また、ズーム倍率表示バー７０４に表示されるズーム倍率も段々大きくなっていく。その後、撮影者が構図を確認しズーム制御ボタン７０３を押下状態から離してズーム倍率を決定すると、図８<b>に示した状態に遷移する。その時に、ズーム倍率表示バー７０４は撮影者が決定したズーム倍率が表示されている。ただし、この時、決定したズーム倍率で指定しても、前述したように移動できないズーム倍率があり、正確に撮影者の指定した構図に合わせられず、図８<c>に示した状態に遷移してしまう。図８<c>において、リモートライブビュー画面７０１に表示されている被写体はズーム倍率を決定したタイミングのものよりも大きくなってしまっている。また、ズーム倍率表示バー７０４に表示されているズーム倍率も停止指示のタイミングのものよりも大きくなってしまっている。
【００４８】
このように、携帯端末１０６を利用してズーム制御を行う場合、指定出来ないズーム倍率があり、意図した構図にならない可能性がある。
【００４９】
＜リモートライブビュー表示における全体システム＞
以下、図９を参照して、本発明の第1の実施例による携帯端末１０６を利用したリモートライブビュー表示アプリケーションでの全体システムの例を示す図について説明する。
【００５０】
まずは、図９<1>にて、リモートライブビュー表示アプリケーションが起動する際に、携帯端末１０６がデジタルカメラ１０１からズーム倍率リストを受け取る際のシステム構成を説明する。
【００５１】
ズーム倍率リストとは、前述した構図ずれの課題を解決するためのレンズ固有の情報である。詳細は以降の図１０の説明で紹介する。まずは、携帯端末１０６からデジタルカメラ１０１にズーム倍率リスト依頼をする。デジタルカメラ１０１は指示を受け流しレンズ１０２にズーム倍率リスト依頼をする。レンズ１０２も指示を受け流しパワーズームアダプター１０３にズーム倍率リスト依頼をする。パワーズームアダプター１０３はレンズ１０２に対してズーム倍率リストを通知する。レンズ１０２は通知を受け流しデジタルカメラ１０１にズーム倍率リストを通知する。デジタルカメラ１０１も通知を受け流し携帯端末１０６にズーム倍率リストを通知する。
【００５２】
次に、図９<2>にて、リモートライブビュー表示アプリケーションでライブビュー画像を表示する際のシステム構成を説明する。
【００５３】
デジタルカメラ１０１からレンズ１０２にズーム倍率取得の依頼をする。レンズ１０２はデジタルカメラ１０１にズーム倍率通知を行う。デジタルカメラ１０１は撮像素子７に結像した画像から外部装置出力用に生成されたライブビュー画像にズーム倍率を付帯させて通知する。この時にライブビュー画像に付帯させるズーム倍率はライブビュー画像がキャプチャーされたタイミングの値にする。ライブビュー画像とズーム倍率の同期の取り方は、画像とズーム倍率に取得した時刻がわかるような識別子を付けて管理する等の方法があるが特に方法は問わない。
【００５４】
次に、図９<3>にて、リモートライブビュー表示アプリケーションでズーム制御をする際のシステム構成を説明する。携帯端末１０６からデジタルカメラ１０１にズーム指示をする。デジタルカメラ１０１は指示を受け流しレンズ１０２にズーム指示をする。レンズ１０２も指示を受け流しパワーズームアダプター１０３にズーム指示をする。パワーズームアダプター１０３はレンズ１０２に対してメカ的な制御でレンズを制御する。
【００５５】
このように、携帯端末１０６、デジタルカメラ１０１、レンズ１０２、パワーズームアダプター１０３が連携してライブビュー画像の表示を行ったり、ズーム指示を行ったりする。
【００５６】
＜ズーム倍率リスト＞
以下、図１０を参照して、本発明の第1の実施例によるズーム倍率リストの例を示す図について説明する。
【００５７】
図１０に示したように、ズーム倍率リストとは、レンズ１０２に対してパワーズームアダプター１０３が指定できるズーム倍率のリストである。ズーム位置が最小の場合の画角の倍率を１とし、それに対する倍率で表現している。ここでは、ズーム倍率のリストを渡す想定で記述しているが、指定できるズーム倍率がわかるようなズーム位置などのレンズ固有の情報を渡してもよい。
【００５８】
＜ズーム制御方法＞
以下、図１１、図１２、図１３を参照して、本発明の第1の実施例による携帯端末１０６を利用したリモートライブビュー表示アプリケーションでのズーム制御シーケンスの例を示す図について説明する。
【００５９】
指定できないズーム倍率が存在する中で、ユーザの意図した構図でズームを制御するためのズーム制御方法である。
【００６０】
まずは、図１１にて、起動時のズーム倍率リストの受け渡しにおけるシーケンスを説明する。
【００６１】
アプリ側では、Ｓ１０８１にて、ユーザがリモートライブビュー表示アプリケーションを起動したかを判断する。起動した場合は、Ｓ１０８２にて、デジタルカメラ１０１にズーム倍率リストを依頼する。カメラ側では、Ｓ１０８３にて、携帯端末１０６からのズーム倍率リスト依頼を受け取ったかを判断する。受け取った場合は、Ｓ１０８４にて、レンズ１０２にズーム倍率リストを依頼する。レンズ側では、Ｓ１０８５にて、デジタルカメラ１０１からズーム倍率リスト依頼を受け取ったかを判断する。受け取った場合は、Ｓ１０８６にて、パワーズームアダプター１０３にズーム倍率リストを依頼する。パワーズームアダプター側では、Ｓ１０８７にて、レンズ１０２からズーム倍率リスト依頼を受け取ったかを判断する。受け取った場合は、Ｓ１０８８にて、レンズ１０２にズーム倍率リストを通知する。さらに、レンズ側で、Ｓ１０８９にて、パワーズームアダプター１０３からズーム倍率リスト通知を受け取ったかを判断する。受け取った場合は、Ｓ１０９０にて、デジタルカメラ１０１にズーム倍率リストを通知する。カメラ側では、Ｓ１０９１にて、レンズからのズーム倍率リスト通知を受け取ったかを判断する。受け取った場合は、Ｓ１０９２にて、携帯端末１０６にズーム倍率リストを通知する。アプリ側では、Ｓ１０９３にて、デジタルカメラ１０１からズーム倍率リスト通知を受け取ったかを判断する。受け取った場合は、Ｓ１０９４にて、ズーム倍率リストを保持する。このように、携帯端末１０６はデジタルカメラ１０１とレンズ１０２を介してパワーズームアダプター１０３からズーム倍率リストを取得する。
【００６２】
次に、図１２にて、ライブビュー画像表示におけるシーケンスを説明する。
【００６３】
カメラ側では、Ｓ１００１にて、レンズからレンズ情報を取得する。レンズ情報とは、ズーム倍率やパワーズームアダプター１０３の装着有無などの情報である。Ｓ１００２にて、レンズ情報を参照しパワーズームアダプター１０３の装着有無を確認する。Ｓ１００３にてパワーズームアダプター１０３が装着されているかを判断する。装着されていない場合は、Ｓ１００４を実施しない。装着されている場合はＳ１００４にてレンズからパワーズームアダプター情報を取得する。パワーズームアダプター情報とはパワーズームアダプター１０３の駆動状態（駆動中/停止中）や駆動方向などの情報である。
Ｓ１００５にてライブビュー画像に付帯情報を付けてアプリに送信する。付帯情報とは、レンズ情報とパワーズームアダプター情報である。Ｓ１００６にてある一定時間経過したことを確認する。経過したらＳ１００１に戻り繰り返す。一方、レンズ側では、Ｓ１０１１にてレンズ情報の取得要求またはパワーズームアダプター情報の取得要求がデジタルカメラ１０１から通知されたかを確認し、通知された場合はＳ１０１２にて、通知された取得要求がレンズ情報の取得要求であったかを確認する。レンズ情報の取得要求であった場合は、Ｓ１０１３にて、デジタルカメラ側にレンズ情報を通知する。レンズ情報の取得要求でなかった場合は、Ｓ１０１４にて、パワーズームアダプター情報の取得要求であったかを確認し、Ｓ１０１５にて、パワーズームアダプター１０３からパワーズームアダプター情報を取得する。そして、Ｓ１０１６にてカメラ側にパワーズームアダプター情報を通知する。
一方、パワーズームアダプター１０３側では、Ｓ１０２１にて、パワーズームアダプター情報の取得要求が通知されたかを確認する。通知された場合は、Ｓ１０２２にて、レンズ側にパワーズームアダプター情報を通知する。最後に、アプリ側では、Ｓ１０３１にてライブビュー画像/付帯情報を受信したかを確認する。受信した場合はＳ１０３２にて、ライブビュー画像の更新をする。Ｓ１０３３にて、付帯情報を参照しパワーズームアダプター１０３の装着有無を確認する。Ｓ１０３４にて、パワーズームアダプター１０３が装着されているかを確認し、パワーズームアダプター１０３が装着されていない場合は、Ｓ１０３５にてズーム操作ができないようなＵＩに変更する。例えば、ズーム制御ボタン７０３をグレーアウトする。パワーズームアダプター１０３が装着されている場合は、Ｓ１０３６にて、ズーム操作ができるＵＩに変更する。ここでは、パワーズームアダプター情報をやり取りし装着有無に応じてＵＩを変更する方法を説明しているが、パワーズームアダプター情報をやり取りせずＵＩを変更しなくてもよい。Ｓ１０３７にて、付帯情報を参照し、ズーム倍率表示バー７０４に表示しているズーム倍率を更新する。Ｓ１０３８にて、通知された付帯情報にある最新のズーム倍率を保持する。ここでは付帯情報が通知される毎にパワーズームアダプター１０３の装着有無を確認し、ＵＩを変更するような方法を説明したが、装着有無に変化があった時のみＵＩを変更するような方法でもよい。
【００６４】
次に、図１３にて、ズーム制御におけるシーケンスを説明する。
【００６５】
まず、アプリ側では、Ｓ１０４１にて、ユーザがズーム制御ボタン７０３を押下したまま右または左にずらしズーム開始指示を行ったかを確認する。ズーム開始指示を行った場合、ズーム倍率リストを利用してプレビュー画像を作成し表示する。具体的には、まず、今表示しているライブビュー画像のズーム倍率をＳ１０３８にて保持したズーム倍率で確認する。例えば、その倍率が図１０のズーム倍率リストにおけるインデックス番号２９の２．６０だったとする。その状態でズームイン指示がされた場合、次のズーム倍率はインデックス番号３０の２．６４である。この場合、表示しているリモートライブビュー画像を２．６４／２．６０倍で拡大し、ズーム倍率２．６４のプレビュー画像を作成する。Ｓ１０４３にて、ユーザがズーム停止指示を行ったか判断する。まだ停止指示がされていない場合は、Ｓ１０４４にてある一定時間経過するまで待機し、一定時間経過した場合は再度Ｓ１０４２に戻りさらにプレビュー画像を拡大縮小して作成し更新する。Ｓ１０４３にてユーザが停止指示を行った場合は、Ｓ１０４５にて、停止させたいズーム倍率を決定する。具体的には、停止指示時に表示していたプレビュー画像のズーム倍率となる。Ｓ１０４６にて、ズーム倍率を指定してズーム指示をカメラに送信する。次に、カメラ側では、Ｓ１０５１にて、携帯端末１０６からズーム指示を受け取ったかを判断する。受け取った場合は、Ｓ１０５２にて、レンズ１０２にズーム指示を通知する。レンズ側では、Ｓ１０６１にて、デジタルカメラ１０１からのズーム指示を受け取ったかを判断する。受け取った場合は、Ｓ１０６２にて、パワーズームアダプター１０３にズーム指示を通知する。パワーズームアダプター側では、Ｓ１０７１にて、レンズ１０２からズーム指示を受け取ったかを判断する。受け取った場合は、Ｓ１０７２にて、ズーム指示の通りにレンズをギア駆動部５０３によってレンズを制御する。
【００６６】
このように、ズーム倍率リストなどのレンズ固有の情報を利用し、実際に移動できるズーム倍率に応じたプレビュー画像を作成するようにすることで、ユーザが指定できないズーム倍率を選択してしまうことを防ぎ、ユーザの意図する構図に正確に合わせられるようにズームを制御することが可能になる。
【００６７】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００６８】
１０１  デジタルカメラ、１０２  レンズ、１０３  パワーズームアダプター、
１０６  携帯端末
【図１】
2017085437.tif 000003
【図２】
2017085437.tif 000004
【図３】
2017085437.tif 000005
【図４】
2017085437.tif 000006
【図５】
2017085437.tif 000007
【図６】
2017085437.tif 000008
【図７】
2017085437.tif 000009
【図８】
2017085437.tif 000010
【図９】
2017085437.tif 000011
【図１０】
2017085437.tif 000012
【図１１】
2017085437.tif 000013
【図１２】
2017085437.tif 000014
【図１３】
2017085437.tif 000015