(57)【要約】【課題】拡大表示されるべき画像領域の位置及び大きさを直感的な操作で指定する。【解決手段】タッチパネルを備えたモニタの表示画面上に再生対象画像の全体画像（４０１等）が表示されている状態において、操作者は、単一のタッチパネル操作にて切り出し枠（４１１等）の位置及び大きさを指定する。例えば、ユーザが表示画面の一点を押し続ければ、その押下点の位置が切り出し枠の中心位置に設定されると共に押下時間に応じて切り出し枠の大きさが設定される。また例えば、ユーザが表示画面の二点を同時に押すことで、押下位置から切り出し枠の位置及び大きさが設定される。タッチパネル操作後、表示制御部は、再生対象画像から切り出し枠内の画像を抽出してモニタ上に拡大表示する。【選択図】図１１
2011050038.tif 000002
【特許請求の範囲】
【請求項１】
表示画面を有し、操作体が前記表示画面に触れることによるタッチパネル操作を受け付けるタッチパネルモニタを備え、
入力画像の全画像領域の一部である抽出領域内の画像を前記入力画像から抽出することによって得た出力画像を、前記タッチパネルモニタ又は外部表示装置のモニタに表示させる画像再生装置において、
前記タッチパネルモニタは、前記入力画像の全体画像が前記表示画面上に表示されているときに、前記タッチパネル操作の１つとして、前記抽出領域の位置及び大きさを指定する領域指定操作を受け付け、
前記領域指定操作において、前記抽出領域の位置及び大きさは、
前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて指定される、或いは、
前記表示画面上における前記操作体の移動軌跡の始点及び終点に基づいて指定される、或いは、
前記操作体としての複数の操作体が前記表示画面に対して触れている複数の位置に基づいて指定される
ことを特徴とする画像再生装置。
【請求項２】
前記タッチパネル操作には、前記抽出領域の大きさの増大を指示する増大操作と前記抽出領域の大きさの減少を指示する減少操作が含まれる
ことを特徴とする請求項１に記載の画像再生装置。
【請求項３】
前記領域指定操作が成された際、前記領域指定操作による指定内容を前記タッチパネルモニタの表示内容に、即時又は段階的に反映させる
ことを特徴とする請求項１又は請求項２に記載の画像再生装置。
【請求項４】
前記入力画像及び前記出力画像は動画像であり、
前記出力画像としての動画像が前記タッチパネルモニタ又は前記外部表示装置のモニタに表示されることによって、前記出力画像としての動画像の再生が成され、
当該画像再生装置は、前記領域指定操作を受け付けている期間中、前記再生を一時停止する
ことを特徴とする請求項１〜請求項３の何れかに記載の画像再生装置。
【請求項５】
前記タッチパネル操作が前記増大操作と前記減少操作のどちらに対応するのかを通知する
ことを特徴とする請求項２に記載の画像再生装置。
【請求項６】
請求項１〜請求項５の何れかに記載の画像再生装置を備え、
前記画像再生装置に対する入力画像を撮影によって取得する
ことを特徴とする撮像装置。
【請求項７】
表示画面を有し、操作体が前記表示画面に触れることによるタッチパネル操作を受け付けるタッチパネルモニタと、
入射した被写体の光学像を表す画像信号を出力する撮像素子と、
前記撮像素子の有効画素領域の一部である抽出領域内の画像信号を抽出する抽出部と、を備えた撮像装置において、
前記タッチパネルモニタは、前記有効画素領域内の画像信号に基づく全体画像が前記表示画面上に表示されているときに、前記タッチパネル操作の１つとして、前記抽出領域の位置及び大きさを指定する領域指定操作を受け付け、
前記領域指定操作において、前記抽出領域の位置及び大きさは、
前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて指定される、或いは、
前記表示画面上における前記操作体の移動軌跡の始点及び終点に基づいて指定される、或いは、
前記操作体としての複数の操作体が前記表示画面に対して触れている複数の位置に基づいて指定される
ことを特徴とする撮像装置。
【請求項８】
前記タッチパネル操作には、前記抽出領域の大きさの増大を指示する増大操作と前記抽出領域の大きさの減少を指示する減少操作が含まれる
ことを特徴とする請求項７に記載の撮像装置。
【請求項９】
表示画面を有し、操作体が前記表示画面に触れることによるタッチパネル操作を受け付けるタッチパネルモニタと、
入射した被写体の光学像を表す画像信号を出力する撮像素子を有し、前記撮像素子の出力信号から撮影による画像を生成する撮像部と、
前記撮像部における撮影画角を調整する画角調整部と、
前記光学像の前記撮像素子への入射位置を調整する入射位置調整部と、を備えた撮像装置において、
前記タッチパネルモニタは、前記撮像部による撮影画像が前記表示画面上に表示されているときに、前記タッチパネル操作の１つとして、前記撮影画角及び前記入射位置を指定する画角／位置指定操作を受け付け、
前記画角／位置指定操作において、前記撮影画角及び前記入射位置は、
前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて指定される、或いは、
前記表示画面上における前記操作体の移動軌跡の始点及び終点に基づいて指定される、或いは、
前記操作体としての複数の操作体が前記表示画面に対して触れている複数の位置に基づいて指定される
ことを特徴とする撮像装置。
【請求項１０】
前記タッチパネル操作には、前記撮影画角の増大を指示する増大操作と前記撮影画角の減少を指示する減少操作が含まれる
ことを特徴とする請求項９に記載の撮像装置。
【請求項１１】
入射した被写体の光学像を表す画像信号を出力する撮像素子を有し、前記撮像素子の出力信号から撮影による画像を生成する撮像部と、
前記撮像部における撮影画角を調整する画角調整部と、
前記光学像の前記撮像素子への入射位置を調整する入射位置調整部と、を備えた撮像装置において、
前記撮影画角及び入射位置を指定する画角／位置指定操作を、単一の操作にて受け付ける
ことを特徴とする撮像装置。
【請求項１２】
表示画面を有するタッチパネルモニタを備え、
前記画角／位置指定操作は、前記画角／位置指定操作の実行前に得られた撮影画像が前記表示画面上に表示されているときに、操作体が前記表示画面に触れることによって成され、
前記操作体が前記表示画面から離れる工程を介することなく、前記画角／位置指定操作は行われる
ことを特徴とする請求項１１に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像の再生を行う画像再生装置、及び、撮影によって画像を取得する撮像装置に関する。
【背景技術】
【０００２】
従来の画像再生装置において、再生対象画像の一部を拡大して鑑賞しようとする場合、ユーザは、鑑賞対象となる画像の、再生対象画像上の位置及び大きさを指示する。この指示を受け、画像再生装置は、指示された位置及び大きさを有する画像を再生対象画像から切り出し、切り出し画像を拡大してモニタに出力する。このように、従来の画像再生装置において、再生対象画像の一部を切り出したものを拡大して鑑賞しようとする場合、ユーザは操作キー等を操作することによって、切り出されるべき領域の位置及び大きさを別個に設定する必要があるため、素早く且つ直感的に所望の画像を表示させることが難しい。
【０００３】
画像の撮影時においても同様のことが言える。即ち例えば、従来の撮像装置において、注目被写体が現れている、撮像素子の注目領域内の画像信号のみを記録媒体に記録させようとする場合においても、注目領域の位置及び大きさの設定を別個に行う必要がある。
【０００４】
尚、下記特許文献１及び２には、タッチパネルに対する操作に応じて電子ズーム又は光学ズームを行う方法が開示されている。しかしながら、タッチパネル操作の具体的方法は提案されておらず、直感的に行いうる操作方法の提案が望まれる。また、下記特許文献３には、画像のトリミングに関する技術説明において、“被写体を囲む円を入力する操作、被写体の周りをなぞる操作”に関する記載があるが（特許文献３の段落００７９参照）、ここにおいてもタッチパネル操作の具体的方法の提案は不十分であり、直感的に行いうる操作方法の提案が望まれる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−１６６４４７号公報
【特許文献２】特開２００７−３２９６８９号公報
【特許文献３】特開２０１０−０６２８５３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
そこで本発明は、所望の画角等を有する画像を容易に表示又は生成させることができる画像再生装置及び撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る画像再生装置は、表示画面を有し、操作体が前記表示画面に触れることによるタッチパネル操作を受け付けるタッチパネルモニタを備え、入力画像の全画像領域の一部である抽出領域内の画像を前記入力画像から抽出することによって得た出力画像を、前記タッチパネルモニタ又は外部表示装置のモニタに表示させる画像再生装置において、前記タッチパネルモニタは、前記入力画像の全体画像が前記表示画面上に表示されているときに、前記タッチパネル操作の１つとして、前記抽出領域の位置及び大きさを指定する領域指定操作を受け付け、前記領域指定操作において、前記抽出領域の位置及び大きさは、前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて指定される、或いは、前記表示画面上における前記操作体の移動軌跡の始点及び終点に基づいて指定される、或いは、前記操作体としての複数の操作体が前記表示画面に対して触れている複数の位置に基づいて指定されることを特徴とする。
【０００８】
これにより、操作者は素早く且つ容易に再生映像の画角等を所望のものに設定することが可能となる。
【０００９】
前記タッチパネル操作には、例えば、前記抽出領域の大きさの増大を指示する増大操作と前記抽出領域の大きさの減少を指示する減少操作が含まれる。
【００１０】
また例えば、前記領域指定操作が成された際、前記領域指定操作による指定内容を前記タッチパネルモニタの表示内容に、即時又は段階的に反映させるようにすると良い。
【００１１】
また例えば、前記入力画像及び前記出力画像は動画像であり、前記出力画像としての動画像が前記タッチパネルモニタ又は前記外部表示装置のモニタに表示されることによって、前記出力画像としての動画像の再生が成され、当該画像再生装置は、前記領域指定操作を受け付けている期間中、前記再生を一時停止する。
【００１２】
また例えば、前記タッチパネル操作が前記増大操作と前記減少操作のどちらに対応するのかを通知するようにしても良い。
【００１３】
そして例えば、前記画像再生装置を備えた撮像装置を形成するようにしても良い。前記画像再生装置に対する入力画像を、当該撮像装置の撮影によって取得することができる。
【００１４】
本発明に係る第１の撮像装置は、表示画面を有し、操作体が前記表示画面に触れることによるタッチパネル操作を受け付けるタッチパネルモニタと、入射した被写体の光学像を表す画像信号を出力する撮像素子と、前記撮像素子の有効画素領域の一部である抽出領域内の画像信号を抽出する抽出部と、を備えた撮像装置において、前記タッチパネルモニタは、前記有効画素領域内の画像信号に基づく全体画像が前記表示画面上に表示されているときに、前記タッチパネル操作の１つとして、前記抽出領域の位置及び大きさを指定する領域指定操作を受け付け、前記領域指定操作において、前記抽出領域の位置及び大きさは、前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて指定される、或いは、前記表示画面上における前記操作体の移動軌跡の始点及び終点に基づいて指定される、或いは、前記操作体としての複数の操作体が前記表示画面に対して触れている複数の位置に基づいて指定されることを特徴とする。
【００１５】
これにより、操作者は素早く且つ容易に抽出領域内の画像の画角等を所望のものに設定することが可能となる。
【００１６】
前記第１の撮像装置におけるタッチパネル操作には、例えば、前記抽出領域の大きさの増大を指示する増大操作と前記抽出領域の大きさの減少を指示する減少操作が含まれる。
【００１７】
本発明に係る第２の撮像装置は、表示画面を有し、操作体が前記表示画面に触れることによるタッチパネル操作を受け付けるタッチパネルモニタと、入射した被写体の光学像を表す画像信号を出力する撮像素子を有し、前記撮像素子の出力信号から撮影による画像を生成する撮像部と、前記撮像部における撮影画角を調整する画角調整部と、前記光学像の前記撮像素子への入射位置を調整する入射位置調整部と、を備えた撮像装置において、
前記タッチパネルモニタは、前記撮像部による撮影画像が前記表示画面上に表示されているときに、前記タッチパネル操作の１つとして、前記撮影画角及び前記入射位置を指定する画角／位置指定操作を受け付け、前記画角／位置指定操作において、前記撮影画角及び前記入射位置は、前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて指定される、或いは、前記表示画面上における前記操作体の移動軌跡の始点及び終点に基づいて指定される、或いは、前記操作体としての複数の操作体が前記表示画面に対して触れている複数の位置に基づいて指定されることを特徴とする。
【００１８】
これにより、操作者は素早く且つ容易に撮影画像の画角等を所望のものに設定することが可能となる。
【００１９】
前記第２の撮像装置における前記タッチパネル操作には、例えば、前記撮影画角の増大を指示する増大操作と前記撮影画角の減少を指示する減少操作が含まれる。
【００２０】
本発明に係る第３の撮像装置は、入射した被写体の光学像を表す画像信号を出力する撮像素子を有し、前記撮像素子の出力信号から撮影による画像を生成する撮像部と、前記撮像部における撮影画角を調整する画角調整部と、前記光学像の前記撮像素子への入射位置を調整する入射位置調整部と、を備えた撮像装置において、前記撮影画角及び入射位置を指定する画角／位置指定操作を、単一の操作にて受け付けることを特徴とする。
【００２１】
具体的には例えば、前記第３の撮像装置は、表示画面を有するタッチパネルモニタを備え、前記画角／位置指定操作は、前記画角／位置指定操作の実行前に得られた撮影画像が前記表示画面上に表示されているときに、操作体が前記表示画面に触れることによって成され、前記操作体が前記表示画面から離れる工程を介することなく、前記画角／位置指定操作は行われる。
【００２２】
これにより、操作者は素早く且つ容易に撮影画像の画角等を所望のものに設定することが可能となる。
【００２３】
直感的な操作によって撮影画角等の指定を実現するために、前記第３の撮像装置において、様々な具体的操作方法を採用することが可能である。
【００２４】
例えば、前記操作体が前記表示画面に対して触れている位置と、前記操作体が前記表示画面に触れている時間と、に基づいて前記撮影画角及び前記入射位置は指定される。
【００２５】
或いは例えば、前記操作体は複数の操作体から成り、前記複数の操作体が前記表示画面に対して触れている複数の位置に基づき、前記撮影画角及び前記入射位置は指定される。
【００２６】
更に或いは例えば、前記表示画面上における前記操作体の移動軌跡に基づき、前記撮影画角及び前記入射位置は指定される。
【００２７】
この際、例えば、前記移動軌跡の始点及び終点により前記撮影画角及び入射位置を指定するようにしても良い。
【発明の効果】
【００２８】
本発明によれば、所望の画角等を有する画像を容易に表示又は生成させることができる画像再生装置及び撮像装置を提供することが可能となる。
【００２９】
本発明の意義ないし効果は、以下に示す実施の形態の説明により更に明らかとなろう。ただし、以下の実施の形態は、あくまでも本発明の一つの実施形態であって、本発明ないし各構成要件の用語の意義は、以下の実施の形態に記載されたものに制限されるものではない。
【図面の簡単な説明】
【００３０】
【図１】本発明の第１実施形態に係るデジタルカメラの外観図である。
【図２】本発明の第１実施形態に係るデジタルカメラの機能ブロック図である。
【図３】図２の撮像部の内部構成図である。
【図４】図２の操作部の内部ブロック図である。
【図５】図２のカメラモニタに備えられたタッチパネルの概略分解図である。
【図６】表示画面とＸＹ座標面との関係を示す図（ａ）と、二次元画面とＸＹ座標面との関係を示す図（ｂ）である。
【図７】デジタルカメラ及び外部表示装置の概略外観図である。
【図８】再生対象画像と、該再生対象画像から抽出した切り出し画像と、を示す図である。
【図９】本発明の第１実施形態に係るデジタルカメラの一部ブロック図である。
【図１０】入力画像と切り出し枠との関係を示す図である。
【図１１】本発明の第１実施形態に係るタッチパネル操作の操作方法等を説明するための図である。
【図１２】本発明の第２実施形態に係り、追尾対象を追尾するように切り出し枠が移動せしめられる様子を示した図である。
【図１３】本発明の第２実施形態に係り、追尾対象の設定方法の例を説明するための図である。
【図１４】本発明の第３実施形態にて想定される入力フレーム画像列及び表示画像列を示す図である。
【図１５】本発明の第３実施形態に係り、デジタルカメラの撮影方向がパン操作によって変更される様子を示した図である。
【図１６】図１５の状況に対応する入力フレーム画像列と切り出し枠を示す図である。
【図１７】本発明の第５実施形態に係り、カメラモニタに表示可能な画像例を示す図である。
【図１８】図３の撮像素子上に有効画素領域が存在する様子を示した図である。
【図１９】有効画素領域とＸＹ座標面との関係を示す図である。
【図２０】本発明の第８実施形態に係り、タッチパネル操作時点において撮影及び表示されるフレーム画像（ａ）と、タッチパネル操作後に撮影及び表示されるフレーム画像（ｂ）と、を示す図である。
【図２１】本発明の第９実施形態に係り、切り出し枠の位置及び大きさを設定するためのタッチパネル操作方法の概要を示す図である。
【図２２】本発明の第９実施形態に係り、原入力画像と、原入力画像から抽出された切り出し画像と、それに対応する新たな入力画像と、新たな入力画像から抽出された切り出し画像との関係を示す図（ａ）、並びに、原入力画像に切り出し枠が設定される様子を示す図（ｂ）である。
【図２３】本発明の第９実施形態に係り、タッチパネル操作によって表示画像の画角が減少する様子及び他のタッチパネル操作によって表示画像の画角が増大する様子を示した図である。
【図２４】本発明の第９実施形態に係り、原入力画像に設定される切り出し枠の大きさが拡大される様子を示した図（ａ）と、原入力画像に設定される切り出し枠の大きさが縮小される様子を示した図（ｂ）である。
【図２５】本発明の第９実施形態に係り、切り出し枠の大きさの増減切り替え方法の概要を示す図である。
【図２６】本発明の第９実施形態に係り、切り出し枠の設定時における表示画面の変遷の様子を示す図（ａ）（ｂ）である。
【図２７】本発明の第９実施形態に係り、切り出し枠の大きさの減少及び増大に対応する表示アイコン例を示す図である。
【図２８】本発明の第９実施形態に係り、切り出し枠の大きさの変化率設定方法の概要を示す図である。
【図２９】本発明の第９実施形態に係り、切り出し枠の大きさの増減等に関する情報をユーザに通知する処理の概要を示す図である。
【図３０】本発明の第９実施形態に係り、切り出し枠の大きさ変更の取消指示に関するアイコンの例を示す図である。
【図３１】本発明の第９実施形態に係り、第１動作例における表示画面の様子等を示した図である。
【図３２】本発明の第９実施形態に係り、第２動作例における表示画面の様子等を示した図である。
【図３３】本発明の第９実施形態に係り、第３動作例における表示画面の様子等を示した図である。
【発明を実施するための形態】
【００３１】
以下、本発明の実施の形態につき、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。
【００３２】
＜＜第１実施形態＞＞
本発明の第１実施形態を説明する。図１に、本発明の第１実施形態に係る撮像装置としてのデジタルカメラ１の外観図を示す。デジタルカメラ１は、静止画像のみを撮影可能なデジタルスチルカメラ、又は、静止画像及び動画像を撮影可能なデジタルビデオカメラである。符号５は、デジタルカメラ１の撮影範囲内に位置している被写体を表している。
【００３３】
デジタルカメラ１は、丸みを帯びた直方体状の主筐体２と板状のモニタ筐体３とを連結部を介して接合して形成される。モニタ筐体３には、表示装置としてのカメラモニタ１７が備え付けられている。主筐体２に対してモニタ筐体３は自在に開閉可能なように取り付けらており、主筐体２に対するモニタ筐体３の相対位置は可変となっている。図１は、モニタ筐体３が開いている状態を示している。カメラモニタ１７の表示画面は、モニタ筐体３が開いている状態においてのみ、ユーザに視認可能となる。以下、常にモニタ筐体３は開いているものとする。図１において、軸３００は、デジタルカメラ１の光軸を表している。
【００３４】
図２は、デジタルカメラ１の機能ブロック図である。デジタルカメラ１は、符合１１〜２１によって参照される各部位を備える。
【００３５】
図３は、図２の撮像部１１の内部構成図である。撮像部１１は、光学系３５と、絞り３２と、撮像素子３３と、ドライバ３４を有している。光学系３５は、ズームレンズ３０、フォーカスレンズ３１及び補正レンズ３６を含む複数枚のレンズを備えて構成される。ズームレンズ３０及びフォーカスレンズ３１は光軸方向に移動可能であり、補正レンズ３６は光軸に対して傾きを持った方向に移動可能である。具体的には、補正レンズ３６は、光軸に直交する２次元平面上を移動可能なように光学系３５内に設置される。
【００３６】
被写体からの入射光は、光学系３５を構成する各レンズ及び絞り３２を介して、撮像素子３３に入射する。光学系３５を構成する各レンズは、被写体の光学像を撮像素子３３上に結像させる。撮像素子３３は、例えばＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等からなる。撮像素子３３は、光学系３５及び絞り３２を介して入射した被写体の光学像を光電変換し、該光電変換によって得られた電気信号を画像信号として出力する。
【００３７】
ドライバ３４は、撮影制御部１３からのレンズ制御信号に基づいて、ズームレンズ３０、フォーカスレンズ３１及び補正レンズ３６を移動させる。ズームレンズ３０の位置を変化させることによって、撮像部１１の焦点距離及び撮像部１１による撮影の画角（以下、単に撮影画角という）が変化すると同時に光学ズーム倍率が変化する。フォーカスレンズ３１の位置を変化させることによって、撮像部１１の焦点位置が調整される。補正レンズ３６の位置を変化させることによって、光軸がずらされ、撮像素子３３に対する光学像の入射位置が変化する。また、ドライバ３４は、撮影制御部１３からの絞り制御信号に基づいて、絞り３２の開口量（開口部の大きさ）を制御する。絞り３２の開口量が大きくなるに従って、撮像素子３３への単位時間当たりの入射光量は増大する。
【００３８】
図示されないＡＦＥ（Analog Front End）は、撮像素子３３より出力されたアナログの画像信号を増幅してからデジタル信号（デジタルの画像信号）に変換する。得られたデジタル信号は、被写体の画像の画像データとして、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）等にて形成される画像メモリ１２に記録される。撮影制御部１３は、その画像データ又はユーザの指示等に基づき、撮影画角及び焦点位置並びに撮像素子３３への入射光量を調整する。尚、画像データは、映像信号の一種であり、例えば輝度信号及び色差信号から形成される。
【００３９】
画像処理部１４は、画像メモリ１２に記録された被写体の画像の画像データに対して必要な画像処理（ノイズ低減処理、エッジ強調処理など）を施す。記録媒体１５は、磁気ディスクや半導体メモリ等から成る不揮発性メモリである。画像処理部１４による画像処理後の画像データ又は画像処理前の画像データ（所謂ＲＡＷデータ）を、記録媒体１５に記録することができる。
【００４０】
記録制御部１６は、記録媒体１５に各種のデータを記録させるために必要な記録制御を行う。カメラモニタ１７は、撮像部１１の撮影によって得られた画像や、記録媒体１５に記録されている画像などを表示する。操作部１８は、ユーザがデジタルカメラ１に対して各種操作を行うための部位である。図４に示す如く、操作部１８には、静止画像の撮影指示を行うためのシャッタボタン４１、動画像の撮影開始及び終了を指示するための録画ボタン４２、十字キー等を含む操作キー４３、及び、撮影画角の増大又は減少を指示するためのズームレバー４４が含まれる。主制御部１９は、操作部１８に対して成された操作内容に従いつつ、デジタルカメラ１内の各部位の動作を統括的に制御する。
【００４１】
表示制御部２０は、カメラモニタ１７又は外部表示装置のモニタ（後述のＴＶモニタ７：図７参照）の表示内容を制御する。画像メモリ１２又は記録媒体１５に記録された画像を、カメラモニタ１７又は外部表示装置のモニタに表示させることができる。カメラ運動判定部２１は、センサや画像処理を用いて、主筐体２の運動の内容を検出する。
【００４２】
デジタルカメラ１の動作モードには、画像（静止画像又は動画像）の撮影及び記録が可能な撮影モードと、記録媒体１５に記録された画像（静止画像又は動画像）をカメラモニタ１７又は外部表示装置のモニタにて再生表示する再生モードと、が含まれる。操作キー４３に対する操作に応じて、各モード間の遷移は実施される。
【００４３】
撮影モードでは、所定のフレーム周期にて周期的に被写体の撮影が行われ、撮像部１１から被写体の撮影画像列を表す画像信号が出力される。撮影画像列に代表される画像列とは、時系列で並ぶ画像の集まりを指す。１つのフレーム周期分の画像データによって１枚分の画像が表現される。１つのフレーム周期分の画像データによって表現される１枚分の画像を、フレーム画像とも呼ぶ。
【００４４】
カメラモニタ１７には、タッチパネルが備えられている。図５は、タッチパネルの概略分解図である。カメラモニタ１７におけるタッチパネルには、液晶ディスプレイ等から成る表示画面５１と、操作体が表示画面５１上に触れている位置（圧力を加えている位置）を検出するタッチ検出部５２と、が設けられている。操作体は、指やペンなどであるが、以下の説明では、操作体が指であるとする。
【００４５】
図６（ａ）に示す如く、表示画面５１上の位置は、二次元のＸＹ座標面上の位置として定義される。また更に、図６（ｂ）に示す如く、デジタルカメラ１において、任意の二次元画像もＸＹ座標面上の画像として取り扱われる。図６（ｂ）において、符号３００が付された矩形枠は、二次元画像の外形枠を表している。ＸＹ座標面は、表示画面５１及び二次元画像３００の水平方向に伸びるＸ軸と、表示画面５１及び二次元画像３００の垂直方向に伸びるＹ軸と、を座標軸として有する。本明細書において述べられる画像は、全て、特に記述なき限り二次元画像である。表示画面５１及び二次元画像３００上における或る注目点の位置を（ｘ，ｙ）にて表す。ｘは、該注目点のＸ軸座標値を表すと共に、表示画面５１及び二次元画像３００上における該注目点の水平位置を表す。ｙは、該注目点のＹ軸座標値を表すと共に、表示画面５１及び二次元画像３００上における該注目点の垂直位置を表す。
【００４６】
表示画面５１及び二次元画像３００において、注目点のＸ軸座標値であるｘの値が増加するにつれて該注目点の位置はＸ軸の正側である右側（ＸＹ座標面における右側）に移動し、注目点のＹ軸座標値であるｙの値が増加するにつれて該注目点の位置はＹ軸の正側である下側（ＸＹ座標面における下側）に移動するものとする。従って、表示画面５１及び二次元画像３００において、注目点のＸ軸座標値であるｘの値が減少するにつれて該注目点の位置は左側（ＸＹ座標面における左側）に移動し、注目点のＹ軸座標値であるｙの値が減少するにつれて該注目点の位置は上側（ＸＹ座標面における上側）に移動する。
【００４７】
二次元画像３００を表示画面５１にて表示する際（二次元画像３００を表示画面５１の全体を使って表示する際）、二次元画像３００上の位置（ｘ，ｙ）における画像は、表示画面５１上の位置（ｘ，ｙ）に表示される。
【００４８】
図５のタッチ検出部５２は、操作体が表示画面５１に触れている際、その触れている位置（ｘ，ｙ）を表すタッチ操作情報をリアルタイム出力する。操作体で表示画面５１を触れる操作を、以下、タッチパネル操作と呼ぶ。
【００４９】
デジタルカメラ１は、再生モードにおいて、タッチパネル操作に応じた特徴的な動作を行う。画像の再生時において、デジタルカメラ１は画像再生装置として機能する。デジタルカメラ１は、記録媒体１５に記録されている画像（静止画像又は動画像）を、テレビ受信機等の外部表示装置におけるモニタに表示させることもできる。図７に、本実施形態において想定される外部表示装置としてのテレビ受信機６を示す。テレビ受信機６には液晶ディスプレイ等から成るＴＶモニタ７が設けられている。有線又は無線にて、記録媒体１５の記録データに基づく映像信号をデジタルカメラ１からテレビ受信機６に送ることにより、記録媒体１５の記録データに基づく画像をＴＶモニタ７に表示させることができる。
【００５０】
第１実施形態では、以下、再生モードにおけるデジタルカメラ１の動作並びにカメラモニタ１７及びＴＶモニタ７の表示内容を説明する。再生モードにおいて、タッチパネル操作を含む操作をデジタルカメラ１に対して行う人物を操作者と呼び、ＴＶモニタ７を鑑賞する人物を鑑賞者と呼ぶ。操作者は、鑑賞者の一人でもあり得る。記録媒体１５に記録されている画像であって、再生の対象となる画像を再生対象画像と呼ぶ。再生対象画像をデジタルカメラ１の撮影によって得ることができる。再生対象画像は、静止画像又は動画像である。
【００５１】
図８（ａ）に、再生対象画像を示す。符号３１０が付された実線枠が再生対象画像の外枠である。図８（ａ）において、符号３１１が付された破線枠は、図２の表示制御部２０にて設定される切り出し枠である。切り出し枠内の領域を切り出し領域という。切り出し領域は、再生対象画像の全画像領域の一部である。切り出し枠の外形形状は長方形以外でも構わないが、以下の説明では、特に記述なき限り、切り出し枠の外形形状は長方形であるとする。表示制御部２０は、再生対象画像から切り出し枠内の画像を切り出す（換言すれば、再生対象画像から切り出し領域内の画像を抽出する）。切り出された画像を切り出し画像と呼ぶ。図８（ｂ）に、再生対象画像３１０から切り出し枠３１１内の画像を切り出すことで得られた切り出し画像３２０を示す。表示制御部２０は、再生対象画像又は切り出し画像をＴＶモニタ７及びカメラモニタ１７に表示させることができる。以下では、デジタルカメラ１の特徴的動作として、切り出し画像をＴＶモニタ７に表示させるときの動作を説明する。
【００５２】
ＴＶモニタ７又はカメラモニタ１７上で切り出し画像を表示する際、切り出し画像の解像度は、ＴＶモニタ７又はカメラモニタ１７の解像度に適した解像度に変換される。例えば、再生対象画像上の切り出し枠内の画像における水平及び垂直方向の画素数が夫々６４０及び３６０であって且つＴＶモニタ７の表示画面における水平及び垂直方向の画素数が夫々１９２０及び１０８０である場合、公知の画素補間等を用いた解像度変換によって、切り出し枠内の画像の画素数を水平及び垂直方向の夫々において３倍にしてからＴＶモニタ７に与える。
【００５３】
上述のような切り出し画像の生成及び表示動作を実現する部位のブロック図を、図９に示す。図９におけるカメラ運動判定部２１及びタッチ検出部５２は、図２及び図５に示されるそれらと同じものである。図９の切り出し設定部６１、切り出し処理部６２及び追尾処理部６３を、図２の画像処理部１４又は表示制御部２０に設けておくことができる。第１実施形態では、例えば、表示制御部２０内に切り出し設定部６１及び切り出し処理部６２が設けられ、画像処理部１４内に追尾処理部６３を設けられる。
【００５４】
切り出し設定部６１は、タッチ検出部５２からのタッチ操作情報、カメラ運動判定部２１からのカメラ運動情報及び追尾処理部６３からの追尾結果情報に基づき、再生対象画像である入力画像から切り出し画像を切り出すための切り出し情報を生成する。切り出し処理部６２は、切り出し情報に基づいて、実際に再生対象画像から切り出し枠内の画像を切り出すことで切り出し画像を生成する（換言すれば、再生対象画像から切り出し領域内の画像を抽出する）。生成された切り出し画像そのもの、又は、生成された切り出し画像に所定の加工を施した画像を出力画像としてＴＶモニタ７に表示することができる。この際、カメラモニタ１７には、再生対象画像の全体画像を表示するようにする。但し、ＴＶモニタ７の表示されている画像と同じ画像をカメラモニタ１７に表示させることも可能である。尚、表示制御部２０は、ＴＶモニタ７及びカメラモニタ１７上における映像再生のタイミング制御をも行う（詳細は他の実施形態にて後述）。
【００５５】
切り出し情報には、再生対象画像としての入力画像から出力画像としての切り出し画像を生成するための条件が規定されている。入力画像から出力画像を生成することができる限り、切り出し情報の形態は任意である。例えば、図１０（ａ）に示す如く、入力画像上における切り出し枠の中心位置並びに入力画像上における切り出し枠の幅及び高さを切り出し情報に含めておけば良い。尚、出力画像のアスペクト比が定まっているならば、切り出し枠の中心位置と、切り出し枠の幅及び高さの一方とを切り出し情報に含めておけば足る。切り出し枠の幅とは、水平方向（Ｘ軸方向）における切り出し枠の大きさを指し、切り出し枠の高さとは、垂直方向（Ｙ軸方向）における切り出し枠の大きさを指す。或いは例えば、図１０（ｂ）に示す如く、入力画像上における、切り出し枠の左上隅及び右下隅の位置を切り出し情報に含めておくようにしても良い。尚、切り出し枠の左上隅及び右下隅に位置する点を、夫々、開始点及び終了点とも呼ぶ。
【００５６】
入力画像の座標系から出力画像の座標系への変換は幾何学的変換（例えばアフィン変換）を用いて実現することができる。従って、入力画像から出力画像を生成するための幾何学的変換の変換パラメータを切り出し情報に含めておくようにしても良い。この場合、切り出し情報内の変換パラメータに従う幾何学的変換が切り出し処理部６２にて行われることにより、入力画像から出力画像が生成される。
【００５７】
カメラ運動情報及び追尾結果情報は、切り出し情報を設定するための付加的な情報であり、カメラ運動情報及び／又は追尾結果情報を、切り出し情報に全く反映させないことも可能である（この場合、カメラ運動判定部２１及び／又は追尾処理部６３は不要となる）。カメラ運動情報又は追尾結果情報をも利用する方法については他の実施形態において後述するものとし、本実施形態では、タッチ操作情報に基づく切り出し情報の設定方法を説明する。
【００５８】
操作者は、複数の操作方法によって切り出し枠の位置及び大きさを指定することができる。複数の操作方法として、以下に、第１〜第５操作方法を例示する。図１１に、第１〜第５操作方法に関する、イメージ図、操作内容の概要並びに指定される切り出し枠の位置及び大きさを、表として示す。図１１において、符号４０１〜４０５は、夫々、第１〜第５操作方法の適用時における表示画面５１を表し、各表示画面には再生対象画像の全体画像が表示されている。図１１において、矩形枠４１１〜４１５は、夫々、第１〜第５操作方法の適用時における表示画面５１上の切り出し枠である。再生対象画像の全体画像が表示画面５１にて表示されている状態において、操作者が第１〜第５操作方法の何れかにてタッチパネル操作を行うことで、該タッチパネル操作に従った切り出し情報の設定並びに切り出し画像の生成及び表示が成される。尚、以下の説明では、説明の便宜上、指で表示画面５１を触れることを、「押す」、「押し下げる」又は「押下」と表現することがある。また、特に記述なき限り、以下のタッチパネル操作の説明文における「指」とは、表示画面５１に触れるべき指を指す。
【００５９】
［第１操作方法］
第１操作方法を説明する。第１操作方法によるタッチパネル操作は、表示画面５１上の一点を指にて必要な時間だけ押し続ける操作である。タッチ検出部５２は、この操作によって押される一点の位置（ｘ1，ｙ1）を表すタッチ操作情報を、該一点が押されている時間だけ継続して切り出し設定部６１に出力する。切り出し設定部６１は、このタッチ操作情報に基づき、位置（ｘ1，ｙ1）が切り出し枠の中心位置となるように、且つ、切り出し枠の大きさが位置（ｘ1，ｙ1）における点の押下時間に応じた大きさになるように、切り出し情報を設定する。
【００６０】
第１操作方法においては、切り出し枠のアスペクト比は予め定まっているものとする。上記押下時間がゼロ又は略ゼロであるとき、切り出し枠の幅及び高さは入力画像のそれらと同じである。上記押下時間がゼロから増加するに従って、切り出し枠の幅及び高さは入力画像のそれらと同じ状態を起点として減少してゆく。第１操作方法によるタッチパネル操作中において、設定されるべき切り出し枠は、実際に表示画面５１（図１１においては、表示画面４０１）上に表示される。このため、上記押下時間が増加するに従ってカメラモニタ１７上の切り出し枠は小さくなってゆき、指を表示画面５１から離した時点で切り出し枠の大きさは決定する。尚、押下時間と切り出し枠の大きさとの増減関係を逆にしても構わない。即ち、上記押下時間がゼロから増加するに従って、切り出し枠の幅及び高さをゼロである状態を起点として増加させるようにしても良い。
【００６１】
切り出し情報の設定後、その切り出し情報に従う切り出し枠内の画像から出力画像が生成されてＴＶモニタ７に表示される（第２〜第５操作方法においても同様）。
【００６２】
［第２操作方法］
第２操作方法を説明する。第２操作方法によるタッチパネル操作は、表示画面５１上の二点を二本の指にて同時に押下する操作である。タッチ検出部５２は、この操作によって押される二点の位置（ｘ2A，ｙ2A）及び（ｘ2B，ｙ2B）を表すタッチ操作情報を切り出し設定部６１に出力する。表示画面５１及びＸＹ座標面上において、位置（ｘ2A，ｙ2A）が位置（ｘ2B，ｙ2B）よりも左上側に位置しているものとする（図６（ａ）参照）。従って、ｘ2A＜ｘ2B且つｙ2A＜ｙ2Bである。
【００６３】
単純には例えば、切り出し設定部６１は、タッチ操作情報に基づき、位置（ｘ2A，ｙ2A）が切り出し枠の開始点となるように且つ位置（ｘ2B，ｙ2B）が切り出し枠の終了点となるように切り出し情報を設定する（図１０（ｂ）参照）。但し、操作者によって指定された位置（ｘ2A，ｙ2A）及び（ｘ2B，ｙ2B）をそのまま切り出し枠の開始点及び終了点として用いて切り出し画像の生成を行うと、切り出し画像のアスペクト比が所望のアスペクト比（本例においてＴＶモニタ７のアスペクト比）と一致しないことがある。このような場合、両者のアスペクト比が一致するように切り出し枠内の画像を水平又は垂直方向に引き伸ばした画像をＴＶモニタ７に表示させるようにしても良い、或いは、位置（ｘ2A，ｙ2A）及び（ｘ2B，ｙ2B）を元にして所望のアスペクト比と一致する切り出し枠の開始点及び終了点を再設定するようにしても良い。
【００６４】
また例えば、｜ｘ2A−ｘ2B｜が切り出し枠の幅となるように且つ切り出し枠のアスペクト比が所望のアスペクト比と一致するように、切り出し情報を設定するようにしても良い。この際、切り出し枠の開始点の位置は（ｘ2A，ｙ2A）とされる、或いは、切り出し枠の終了点の位置は（ｘ2B，ｙ2B）とされる、或いは、切り出し枠の中心位置は（（ｘ2A＋ｘ2B）／２，（ｙ2A＋ｙ2B）／２）とされる。
【００６５】
また例えば、｜ｙ2A−ｙ2B｜が切り出し枠の高さとなるように且つ切り出し枠のアスペクト比が所望のアスペクト比と一致するように、切り出し情報を設定するようにしても良い。この際、切り出し枠の開始点の位置は（ｘ2A，ｙ2A）とされる、或いは、切り出し枠の終了点の位置は（ｘ2B，ｙ2B）とされる、或いは、切り出し枠の中心位置は（（ｘ2A＋ｘ2B）／２，（ｙ2A＋ｙ2B）／２）とされる。
【００６６】
［第３操作方法］
第３操作方法を説明する。第３操作方法によるタッチパネル操作は、指を表示画面５１に触れさせながら表示画面５１上の或る特定領域（操作者が望む領域）を該指で囲む操作である。この際、特定領域を囲む図形を描く指先は表示画面５１から触れない。即ち、操作者の指は、特定領域を囲む図形を一筆書きにて描く。
【００６７】
第３操作方法によるタッチパネル操作では、まず、操作者の指が表示画面５１上の位置（ｘ3A，ｙ3A）にて接触開始し、その後、指が位置（ｘ3A，ｙ3A）を起点として特定領域の外周を囲みながら表示画面５１上の位置（ｘ3B，ｙ3B）まで至る。指が位置（ｘ3A，ｙ3A）から位置（ｘ3B，ｙ3B）に至るまで、指は表示画面５１から離れない。操作者は、指が位置（ｘ3B，ｙ3B）に至った時点で指を表示画面５１から離す。従って、タッチ検出部５２からのタッチ操作情報によって、位置（ｘ3A，ｙ3A）を始点とし位置（ｘ3B，ｙ3B）を終点とする指の移動軌跡が特定される。理想的には位置（ｘ3A，ｙ3A）と位置（ｘ3B，ｙ3B）は一致すべきであるが、実際には、両者が一致しないことも多い。両者が一致しない場合においては、例えば、位置（ｘ3A，ｙ3A）と位置（ｘ3B，ｙ3B）を結ぶ直線又は曲線を上記移動軌跡に追加することができる。
【００６８】
切り出し設定部６１は、タッチ操作情報によって特定される上記移動軌跡に基づき、その移動軌跡によって囲まれる図形の重心が切り出し枠の中心となるように、且つ、切り出し枠の大きさが該移動軌跡によって囲まれる図形の大きさに応じたものとなるように、切り出し情報を設定する。この際、該図形の大きさが増大するにつれて切り出し枠の大きさは大きくされる。例えば、その図形の重心を中心として有する矩形枠であって且つ該図形を内包する最小の矩形枠が切り出し枠として設定される。この際、その矩形枠のアスペクト比を所望のアスペクト比（本例においてＴＶモニタ７のアスペクト比）と一致させると良い。
【００６９】
［第４操作方法］
第４操作方法を説明する。第４操作方法によるタッチパネル操作は、指を表示画面５１に触れさせながら切り出し領域となるべき表示領域の対角線を指でなぞる操作である。
【００７０】
第４操作方法によるタッチパネル操作では、まず、操作者の指が表示画面５１上の位置（ｘ4A，ｙ4A）にて接触開始し、その後、指が位置（ｘ4A，ｙ4A）を起点として直線的に表示画面５１上の位置（ｘ4B，ｙ4B）まで至る。指が位置（ｘ4A，ｙ4A）から位置（ｘ4B，ｙ4B）に至るまで、指は表示画面５１から離れない。操作者は、指が位置（ｘ4B，ｙ4B）に至った時点で指を表示画面５１から離す。従って、タッチ検出部５２からのタッチ操作情報によって、位置（ｘ4A，ｙ4A）を始点とし位置（ｘ4B，ｙ4B）を終点とする指の移動軌跡が特定される。ここで、表示画面５１及びＸＹ座標面上において、位置（ｘ4A，ｙ4A）が位置（ｘ4B，ｙ4B）よりも左上側に位置しているものとする（図６（ａ）参照）。従って、ｘ4A＜ｘ4B且つｙ4A＜ｙ4Bである。
【００７１】
切り出し設定部６１は、タッチ操作情報に基づき、位置（ｘ4A，ｙ4A）が切り出し枠の開始点となるように且つ位置（ｘ4B，ｙ4B）が切り出し枠の終了点となるように切り出し情報を設定する（図１０（ｂ）参照）。この設定の際、所望のアスペクト比（本例においてＴＶモニタ７のアスペクト比）も考慮される。所望のアスペクト比を考慮した切り出し枠（切り出し情報）の設定方法は、第２操作方法の説明文にて述べたものと同様である。尚、切り出し枠における左上隅の位置（ｘ4A，ｙ4A）及び右下隅の位置（ｘ4B，ｙ4B）を指定する場合の動作を説明したが、切り出し枠における右上隅の位置及び左下隅の位置をタッチパネル操作にて指定するようにしても良い。
【００７２】
［第５操作方法］
第５操作方法を説明する。第５操作方法によるタッチパネル操作は、指を表示画面５１に触れさせながら切り出し領域となるべき表示領域の対角線の半分を指でなぞる操作である。
【００７３】
第５操作方法によるタッチパネル操作では、まず、操作者の指が表示画面５１上の位置（ｘ5A，ｙ5A）にて接触開始し、その後、指が位置（ｘ5A，ｙ5A）を起点として直線的に表示画面５１上の位置（ｘ5B，ｙ5B）まで至る。指が位置（ｘ5A，ｙ5A）から位置（ｘ5B，ｙ5B）に至るまで、指は表示画面５１から離れない。操作者は、指が位置（ｘ5B，ｙ5B）に至った時点で指を表示画面５１から離す。従って、タッチ検出部５２からのタッチ操作情報によって、位置（ｘ5A，ｙ5A）を始点とし位置（ｘ5B，ｙ5B）を終点とする指の移動軌跡が特定される。ここで、表示画面５１及びＸＹ座標面上において、位置（ｘ5A，ｙ5A）が位置（ｘ5B，ｙ5B）よりも左上側に位置しているものとする（図６（ａ）参照）。従って、ｘ5A＜ｘ5B且つｙ5A＜ｙ5Bである。
【００７４】
切り出し設定部６１は、タッチ操作情報に基づき、位置（ｘ5A，ｙ5A）が切り出し枠の中心位置となるように且つ位置（ｘ5B，ｙ5B）が切り出し枠の終了点となるように切り出し情報を設定する（図１０（ｂ）参照）。従って、（｜ｘ5A−ｘ5B｜×２）が切り出し枠の幅となる。但し、この設定の際、所望のアスペクト比（本例においてＴＶモニタ７のアスペクト比）も考慮するようにすると良い。所望のアスペクト比を考慮した切り出し情報及び切り出し枠の設定方法は、第２操作方法の説明にて述べたものと同様である。
【００７５】
即ち、操作者によって指定された位置（ｘ5A，ｙ5A）及び（ｘ5B，ｙ5B）をそのまま切り出し枠の中心の位置及び終了点の位置として用いて切り出し画像の生成を行うと、切り出し画像のアスペクト比が所望のアスペクト比と一致しない場合、例えば、両者のアスペクト比が一致するように切り出し枠内の画像を水平又は垂直方向に引き伸ばした画像をＴＶモニタ７に表示させるようにしても良い、或いは、位置（ｘ5A，ｙ5A）及び（ｘ5B，ｙ5B）を元にして所望のアスペクト比と一致する切り出し枠の中心及び終了点を再設定するようにしても良い。
【００７６】
また例えば、（｜ｘ5A−ｘ5B｜×２）が切り出し枠の幅となるように且つ切り出し枠のアスペクト比が所望のアスペクト比と一致するように、切り出し情報を設定するようにしても良い。この際、切り出し枠の中心位置は（ｘ5A，ｙ5A）とされる。また例えば、（｜ｙ5A−ｙ5B｜×２）が切り出し枠の高さとなるように且つ切り出し枠のアスペクト比が所望のアスペクト比と一致するように、切り出し情報を設定するようにしても良い。この際においても、切り出し枠の中心位置は（ｘ5A，ｙ5A）とされる。
【００７７】
尚、切り出し枠における中心位置（ｘ5A，ｙ5A）及び右下隅の位置（ｘ5B，ｙ5B）を指定する場合の動作を説明したが、右下隅の位置の代わりに、切り出し枠における左上隅、右上隅又は左下隅の位置をタッチパネル操作にて指定するようにしても良い。
【００７８】
デジタルカメラ１にて、上述の第１〜第５操作方法の何れかを採用することができる。第１〜第５操作方法の内、複数の操作方法にてタッチパネル操作ができるようにデジタルカメラ１を形成しておき、表示画面５１に触れている指の本数や表示画面５１に触れている指の移動の状態をタッチ操作情報から判断することで、何れの操作方法にてタッチパネル操作が行われたのかをデジタルカメラ１が自動的に判断するようにしても良い。
【００７９】
上述の如く、直感的なタッチパネル操作（領域指定操作）にて切り出し枠の位置及び大きさを指定することができるため、操作者は素早く且つ容易に再生映像の画角等を所望のものに設定することが可能となる。各操作方法では、操作者がデジタルカメラ１にタッチパネル操作を与える工程において、指はタッチパネルの表示画面５１から離されない。即ち、指が表示画面５１から離れる工程を介さない単一の操作によって、切り出し枠の位置及び大きさが指定される（指を表示画面５１から離すことによって、該単一の操作は完了する）。このため、切り出し枠の位置と切り出し枠の大きさを別個に指示する必要のある従来の装置と比べて、操作が容易であると共に操作が短時間で完了する。
【００８０】
例えば、従来の装置では、切り出し枠の中心位置を指定するための第１操作（カーソルキーによる操作等）を行った後に、第１操作とは異なる、切り出し枠の大きさを指定するための第２操作（ズームボタンによる操作等）を別個に行うことで、切り出し枠の位置及び大きさの指定が完了する。即ち、従来の装置では、切り出し枠の中心位置を指定するための操作と切り出し枠の大きさを指定するための操作が、互いに異なるタイミングに、互いに異なる操作方法によって成される。これに対し、本実施形態では、切り出し枠の位置を指定するための操作と切り出し枠の大きさを指定するための操作が共通化されており、切り出し枠の位置を指定するための操作が完了すると同時に切り出し枠の大きさを指定するための操作が完了する、或いは、切り出し枠の大きさを指定するための操作が完了すると同時に切り出し枠の位置を指定するための操作が完了する。即ち、本実施形態では、分離のできない単一の操作によって切り出し枠の位置及び大きさが指定される。
【００８１】
また、特許文献３の段落００７９に記載された“被写体を囲む円を入力する操作、被写体の周りをなぞる操作”との比較において、図１１の各操作方法は、以下のような優位性を有する。
第１操作方法では、指の触れた位置が切り出し枠の中心位置に設定されるため、ユーザは切り出し枠の中心位置を所望の位置に正確に設定しやすくなる。
第２操作方法では、二本の指が表示画面５１を触れた時点で切り出し枠の位置及び大きさが決定されるため、ユーザは切り出し枠の位置及び大きさの指定を瞬時に完了することができる。
第４操作方法では、指の移動軌跡の始点及び終点位置に切り出し枠の対向し合う角が配置されるため、ユーザは切り出し枠の位置及び大きさを所望の位置及び大きさに正確に設定しやすくなる。また、“被写体を囲む円を入力する操作、被写体の周りをなぞる操作”よりも素早く切り出し枠の位置等の設定を完了しやすくなる。
第５操作方法によっても、第４操作方法と同様、ユーザは切り出し枠の位置及び大きさを所望の位置及び大きさに正確に設定しやすくなると共に、“被写体を囲む円を入力する操作、被写体の周りをなぞる操作”よりも素早く切り出し枠の位置等の設定を完了しやすくなる。
【００８２】
尚、上述の説明では、タッチパネル操作に従って生成された切り出し画像をＴＶモニタ７に表示することを想定しているが、該切り出し画像をカメラモニタ１７に表示するようにしても良い（後述の第２〜第６実施形態においても同様）。即ち例えば、タッチパネル操作が成される前においては、再生対象画像の全体画像（例えば、図８（ａ）の画像３１０）をカメラモニタ１７の表示画面５１の全体を用いて表示するようにし、タッチパネル操作後において、タッチパネル操作に従って生成された切り出し画像（例えば、図８（ｂ）の画像３２０）を表示画面５１の全体を用いて表示するようにしても良い。
【００８３】
＜＜第２実施形態＞＞
本発明の第２実施形態を説明する。第２実施形態並びに後述の第３〜第６実施形態は、第１実施形態の記載を基礎とする実施形態であり、第１実施形態において述べた事項が、矛盾なき限り、第２〜第６実施形態にも適用される。第２〜第６実施形態おいても、第１実施形態と同様、再生モードにおけるデジタルカメラ１の動作を説明する。また、第２〜第６実施形態おいても、第１実施形態と同様、テレビ受信機６がデジタルカメラ１に接続されている状況を想定する。
【００８４】
第２実施形態では、入力画像としての再生対象画像が動画像であることが前提とされる。また、切り出し枠内の画像の画素数よりもＴＶモニタ７の表示画面の画素数の方が多いことを想定する（従って、切り出し枠内の画像を切り出してＴＶモニタ７にて表示する際、切り出し枠内の画像のサイズが拡大される）。
【００８５】
動画像である再生対象画像は、時系列上に並ぶ複数のフレーム画像から形成される。再生対象画像としての入力画像を形成する各フレーム画像を特に入力フレーム画像と呼び、ｎ番目の入力フレーム画像を符号Ｆnによって参照する（ｎは整数）。１、２、３・・・番目の入力フレーム画像Ｆ1、Ｆ2、Ｆ3・・・が順次表示されることで動画像としての再生対象画像の再生が成される。尚、本明細書では、記述の簡略化上、符号を参照することによって該符号に対応する名称を省略又は略記することがある。例えば、入力フレーム画像Ｆnを単に画像Ｆnと表記することもあるが、両者は同じものを指す。
【００８６】
第２実施形態では、タッチパネル操作にて切り出し枠の位置等を決定した後、切り出し枠内の被写体を追尾するように切り出し枠の位置を更新していく。このため、切り出し枠の位置及び大きさの決定に、タッチ検出部５２からのタッチ操作情報だけでなく、図９の追尾処理部６３からの追尾結果情報をも利用する。
【００８７】
図１２を参照して、具体的な動作例を説明する。再生対象画像の再生が開始されると、記録媒体１５より順次読み出される入力フレーム画像が図９の切り出し処理部６２に入力される。各入力フレーム画像は、追尾処理部６３にも入力される。切り出し情報を設定するためのタッチパネル操作が成される前においては、入力フレーム画像の全体画像がＴＶモニタ７及びカメラモニタ１７に表示される。或る時点でタッチパネル操作が成されると、その後においては、入力フレーム画像の一部を切り出すことによって生成された切り出し画像がＴＶモニタ７に表示される（該切り出し画像をカメラモニタ１７に表示させることも可能である）。タッチパネル操作直後に切り出し処理部６２及び追尾処理部６３に入力される入力フレーム画像Ｆnを起点にして、追尾処理部６３等の動作を説明する。
【００８８】
タッチパネル操作直後において、切り出し設定部６１は、そのタッチパネル操作に従った切り出し情報を作成して切り出し処理部６２に与える。これにより、タッチパネル操作直後において、入力フレーム画像Ｆn上に設定された切り出し枠内の画像の拡大画像が切り出し画像としてＴＶモニタ７に表示される。入力フレーム画像Ｆn上に設定される切り出し枠の位置及び大きさは、追尾処理部６３の出力に依存することなく、タッチ操作情報に基づいて決定される。以後、入力フレーム画像Ｆn+1、Ｆn+2・・・に設定される切り出し枠の位置及び大きさを入力フレーム画像Ｆnのそれと同じにすることもできるが、本実施形態では、前者の位置及び大きさを追尾処理部６３の出力（即ち追尾結果情報）に基づいて更新してゆく。
【００８９】
この更新を実現するべく、タッチパネル操作後、追尾処理部６３は、入力フレーム画像列の画像データに基づき入力フレーム画像列上における注目物体を入力フレーム画像列上で追尾する追尾処理を実行する。ここにおける入力フレーム画像列は、入力フレーム画像Ｆnと入力フレーム画像Ｆn以降の各入力フレーム画像とから成る入力フレーム画像列である。再生対象画像がデジタルカメラ１の撮影によって取得されたものである場合、注目物体は、再生対象画像の撮影時におけるデジタルカメラ１の注目被写体である。追尾処理によって追尾されるべき注目物体を、以下、追尾対象という。
【００９０】
追尾処理では、入力フレーム画像列の画像データに基づき、各入力フレーム画像における追尾対象の位置及び大きさが逐次検出される。実際には、追尾対象を表す画像データの存在する画像領域が追尾対象領域として各入力フレーム画像内に設定され、追尾対象領域の中心位置（又は重心位置）及び大きさが追尾対象の位置及び大きさとして検出される。追尾処理部６３は、各入力フレーム画像における追尾対象の位置及び大きさを表す情報を含む追尾結果情報を出力する。追尾処理の方法として公知の方法を含む任意の追尾方法を利用可能である。例えば、Mean-shift法、ブロックマッチング法や、オプティカルフローに基づく追尾方法を利用することで追尾処理を実現可能である。
【００９１】
切り出し設定部６１は、入力フレーム画像Ｆn以降の各入力フレーム画像に設定される切り出し枠内に追尾対象領域が含まれるように、追尾結果情報に基づき切り出し情報を更新する。単純には例えば、追尾対象領域の中心と切り出し枠内の中心とが一致或いは略一致するように、追尾結果情報に基づき切り出し情報を順次更新してゆく。切り出し枠の大きさは一定であっても良いが、追尾対象領域の大きさに応じて切り出し枠の大きさを更新していくようにしても良い。
【００９２】
追尾対象がフレームアウトすることなどによって、入力フレーム画像から追尾対象を検出することができなくなったならば、切り出し制御を解除すると良い。切り出し制御とは、切り出し画像を生成して該切り出し画像をＴＶモニタ７及び／又はカメラモニタ１７に表示させる制御を指す。切り出し制御の解除とは、切り出し画像の生成並びにＴＶモニタ７及び／又はカメラモニタ１７における切り出し画像の表示を停止することを指す。切り出し制御の解除後においては、入力フレーム画像の全体画像がＴＶモニタ７及びカメラモニタ１７に表示される。
【００９３】
また、追尾対象の設定後、追尾対象が一定時間動かないと判断される場合においても、切り出し制御を解除するようにしても良い。動かない物体を拡大表示し続けると表示動画像が単調になり、鑑賞者が退屈するおそれがあるからである。入力フレーム画像上における追尾対象領域の中心位置の動きの大きさが一定時間継続して所定値以下の場合に、追尾対象が一定時間動かないと判断することができる。
【００９４】
追尾対象の設定方法として様々な方法を採用可能である。
例えば、画像データに基づく輪郭抽出処理などを利用して、画像Ｆnに設定された切り出し枠内の中央付近に位置する物体を抽出し、抽出した物体を追尾対象として設定することが可能である。
或いは例えば、画像Ｆn上の切り出し枠内の画像の画像データに基づいて、画像Ｆn上の切り出し枠内の画像の主要色を求め、画像Ｆn上の切り出し枠内の、主要色を有する物体を追尾対象として設定することも可能である。画像Ｆn上の切り出し枠内の、主要色を有する画像領域の重心を追尾対象領域の中心に設定することができ、主要色を有する画像領域を追尾対象領域に設定することが可能である。主要色とは、例えば、画像Ｆn上の切り出し枠内の画像における支配色又は最頻色である。或る画像の支配色とは、その画像の画像領域の大部分を占めている色を指し、或る画像の最頻色とは、その画像の色ヒストグラムにおいて最も高い度数を有している色を指す（支配色と最頻色は同じでありうる）。
或いは例えば、画像Ｆn上の切り出し枠内の画像の画像データに基づいて、その画像上に現れている人物の顔を検出し、検出した顔又は検出した顔を有する人物を追尾対象として設定するようにしても良い。
【００９５】
更に或いは例えば、タッチパネル操作時に生成されたタッチ操作情報に基づいて追尾対象を設定することも可能である。例えば、タッチパネル操作時において最初に指が表示画面５１に触れた位置に存在する物体を追尾対象に設定するようにしても良い。
具体的には例えば、タッチパネル操作に基づく、以下のような追尾対象設定方法を用いることも可能である。タッチパネル操作時にカメラモニタ１７に表示されていた入力フレーム画像が、図１３（ａ）の画像４３０であった場合を例に挙げる。画像４３０には、人物４３１及び４３２の画像データが存在している。操作者が、人物４３１及び４３２の拡大画像の表示を希望しつつ、人物４３１が追尾対象に設定されることを希望する場合、操作者は、タッチパネル操作時において、図１３（ｂ）の点４３３及び４３４を始点及び終点とする軌跡４３５に沿って、指を表示画面５１上で移動させると良い。
【００９６】
このようなタッチパネル操作は、第１実施形態で述べた第３操作方法によるそれを変形したものであり（図１１参照）、点４３３及び４３４の位置が、夫々、第３操作方法で述べた位置（ｘ3A，ｙ3A）及び（ｘ3B，ｙ3B）に相当する。第１実施形態で述べたように、切り出し設定部６１は、タッチ操作情報によって特定される指の移動軌跡４３５に基づき、その移動軌跡４３５によって囲まれる図形の重心が切り出し枠の中心となるように、且つ、切り出し枠の大きさが該移動軌跡４３５によって囲まれる図形の大きさに応じたものとなるように、切り出し情報を一旦設定する。一方において、追尾処理部６３は、点４３３の位置（ｘ3A，ｙ3A）に存在している物体（今の例において人物４３１）を追尾対象に設定する。以後、上述したように、追尾処理の結果に基づいて切り出し枠の位置等は更新される。
【００９７】
追尾処理を利用して切り出し枠の位置等を更新していくことにより、操作者（及び鑑賞者）が注目している物体の拡大画像を表示し続けることが可能となる。
【００９８】
＜＜第３実施形態＞＞
本発明の第３実施形態を説明する。第３実施形態においても、第２実施形態と同様、入力画像としての再生対象画像が動画像であることを前提とし、切り出し枠内の画像の画素数よりもＴＶモニタ７の表示画面の画素数の方が多いことを想定する。
【００９９】
第３実施形態では、タッチパネル操作にて切り出し枠の位置等を決定した後、図９のカメラ運動判定部２１からのカメラ運動情報に基づき、必要に応じて切り出し制御の解除等を行う。
【０１００】
図１４を参照して、具体的な動作例を説明する。再生対象画像の再生が開始されると、記録媒体１５より順次読み出される入力フレーム画像が図９の切り出し処理部６２に入力される。各入力フレーム画像は、カメラ運動判定部２１にも入力される。切り出し情報を設定するためのタッチパネル操作が成される前においては、入力フレーム画像の全体画像がＴＶモニタ７及びカメラモニタ１７に表示される。或る時点でタッチパネル操作が成されると、その後においては、入力フレーム画像の一部を切り出すことによって生成された切り出し画像がＴＶモニタ７に表示される（該切り出し画像をカメラモニタ１７に表示させることも可能である）。タッチパネル操作直後に切り出し処理部６２及びカメラ運動判定部２１に入力される入力フレーム画像Ｆnを起点にして、カメラ運動判定部２１等の動作を説明する。
【０１０１】
タッチパネル操作直後において、切り出し設定部６１は、そのタッチパネル操作に従った切り出し情報を作成して切り出し処理部６２に与える。これにより、タッチパネル操作直後において、入力フレーム画像Ｆn上に設定された切り出し枠内の画像の拡大画像が切り出し画像としてＴＶモニタ７に表示される。入力フレーム画像Ｆn以降の各入力フレーム画像に対しても、原則として同様の切り出し制御が成されるが、カメラ運動情報に基づき切り出し制御は解除されうる。
【０１０２】
カメラ運動判定部２１は、入力フレーム画像列の画像データに基づき、入力フレーム画像列の撮影時におけるカメラ運動の状態を判定する。ここにおける入力フレーム画像列は、入力フレーム画像Ｆnと入力フレーム画像Ｆn以降の各入力フレーム画像とから成る入力フレーム画像列である。カメラ運動とは、パン操作（主筐体２をヨー方向に回転させる操作）などによる主筐体２の運動を指す。カメラ運動には、主筐体２をチルト又はロール方向に回転させる運動や主筐体２を平行移動させる運動も含まれるが、以下では、説明の便宜上、カメラ運動がパン操作による主筐体２の運動であることを想定する。
【０１０３】
例えば、カメラ運動判定部２１は、時間的に隣接する第１及び第２のフレーム画像の画像データに基づいて検出された、第１及び第２のフレーム画像間のオプティカルフローを用いてパン操作の有無を推定し、これによってカメラ運動の有無を判定する。オプティカルフローに基づくパン操作の有無の推定方法は公知である。第１及び第２のフレーム画像は、例えば、入力フレーム画像Ｆn+9と入力フレーム画像Ｆn+10である。パン操作が有りと推定された場合にカメラ運動は有りと判定され、パン操作が無しと推定された場合にカメラ運動は無しと判定される。
また例えば、カメラ運動判定部２１は、色ヒストグラムを用いたシーンチェンジ判定を用いてカメラ運動の有無を判定することができる。例えば、第１及び第２のフレーム画像（例えば、画像Ｆn+9及びＦn+10）の画像データから第１及び第２のフレーム画像の色ヒストグラムを作成し、第１及び第２のフレーム画像間で色ヒストグラムの相違度を算出する。そして、相緯度が比較的大きい場合にはカメラ運動が有ると判定し、相緯度が比較的小さい場合にはカメラ運動が無いと判定する。山の風景の撮影後、パン操作によって海の風景を撮影した場合、パン操作の前後で色ヒストグラムが大きく変化する。このような色ヒストグラムの変化からカメラ運動の有無を判定可能である。
【０１０４】
尚、主筐体２の運動を検出するカメラ運動センサがカメラ運動判定部２１に設けられており、入力フレーム画像列の撮影時におけるカメラ運動センサの検出データが記録媒体１５に記録されている場合においては、その検出データからパン操作の有無を判定することでカメラ運動の有無を判定するようにしても良い。カメラ運動センサとは、例えば、主筐体２の角速度を検出する角速度センサ又は主筐体２の加速度を検出する加速度センサである。
【０１０５】
切り出し設定部６１及び切り出し処理部６２は、切り出し制御の実行中にカメラ運動が有ると判定された場合には、その判定時点において、切り出し制御を解除する。例えば、入力フレーム画像Ｆn+9及びＦn+10の撮影間においてパン操作が成され、入力フレーム画像Ｆn+9及びＦn+10間においてカメラ運動が有ると判定された場合には、入力フレーム画像Ｆn+10に対する切り出し制御を解除し、入力フレーム画像Ｆn+10の全体画像をＴＶモニタ７（及びカメラモニタ１７）に表示させるようにする（図１４参照）。再度、タッチパネル操作が無い限り、入力フレーム画像Ｆn+10以降の各入力フレーム画像に対しても切り出し制御は成されない。
【０１０６】
但し、一旦、切り出し制御が解除された後において、以下のように処理することも可能である。入力フレーム画像Ｆn+9及びＦn+10の撮影間において１回目のパン操作が成されており、これに起因して、入力フレーム画像Ｆn〜Ｆn+9に対して成されていた切り出し制御が入力フレーム画像Ｆn+10の表示時点において解除された場合を想定する。この場合、カメラ運動判定部２１は、１回目のパン操作前の撮影画像である入力フレーム画像Ｆn+9に対して設定されていた切り出し情報を初期切り出し情報として記憶しておく。そして、入力フレーム画像Ｆn+9を背景画像として捉えた上で、入力フレーム画像Ｆn+10以降に得られる各入力フレーム画像（Ｆn+11、Ｆn+12・・・）と背景画像との類似度を評価し、高い類似度を与える入力フレーム画像がカメラ運動判定部２１に入力された時点で、初期切り出し情報を用いて切り出し制御を再開する。
【０１０７】
より具体的には例えば、入力フレーム画像Ｆn+10以降に得られる入力フレーム画像ごとに、入力フレーム画像と背景画像との二値化差分画像を生成し、二値化差分画像から両画像間の類似度を評価する。二値化差分画像の各画素の画素信号の絶対値総和が小さいほど類似度は高くなる。所定の基準類似度よりも高い類似度が得られるまで切り出し制御は再開されない。仮に、入力フレーム画像Ｆn+11〜Ｆn+19に対応する各類似度が基準類似度よりも低く且つ入力フレーム画像Ｆn+20に対応する類似度が基準類似度よりも高いなら、入力フレーム画像Ｆn+20の撮影直前に２回目のパン操作が行われてデジタルカメラ１の撮影方向が１回目のパン操作前のそれに戻ったと判断し、切り出し制御を再開する。切り出し制御の再開後の入力フレーム画像（入力フレーム画像Ｆn+20を含む）に対しては、初期切り出し情報が適用される。
【０１０８】
このような方法は、例えば、図１５及び図１６に示す如く、第１の人物に注目した構図（図１６の画像４４１に対応する構図）で暫く撮影を行った後、１回目のパン操作を行って第２の人物に注目した構図（図１６の画像４４２に対応する構図）で撮影を行い、その後、２回目のパン操作によって再び撮影構図を第１の人物に注目した構図（図１６の画像４４３に対応する構図）に戻す、といった状況に適応する。
【０１０９】
尚、操作者に指示に従って、初期切り出し情報による切り出し制御の再開を行うようにしても良い。例えば、上述の例では、１回目のパン操作によって切り出し制御が解除された後、初期切り出し情報が記憶されつつ、入力フレーム画像Ｆn+10以降の各入力フレーム画像の全体画像が順次ＴＶモニタ７及びカメラモニタ１７に表示されるが、この際、カメラモニタ１７の表示画面５１上に特定のアイコンも表示するようにする。操作者が、このアイコンを指で触れると、その触れた時点以降の各入力フレーム画像に対して初期切り出し情報が適用されて切り出し制御が再開される。
【０１１０】
パン操作等が成された場合に単純に切り出し制御を継続すると、通常、操作者及び鑑賞者が注目していない画像領域が拡大表示されることとなり、望ましくない。第３実施形態の方法によれば、このような問題に対応することができる。
【０１１１】
＜＜第４実施形態＞＞
本発明の第４実施形態を説明する。第４実施形態では、タッチパネル操作を表示映像に反映させるタイミングを説明する。所望の画像をＴＶモニタ７又はカメラモニタ１７に表示させるために操作者がデジタルカメラ１に対して行う操作は、上述のタッチパネル操作と、それ以外の設定操作から成る。タッチパネル操作と設定操作を成す一連の区間を操作期間と呼ぶ。操作期間はタッチパネル操作の開始と同時に開始すると考えることができる。但し、操作者による所定操作によって操作期間を開始させるようにしても良い。タッチパネル操作の終了と同時に操作期間を終了させても良いし（即ち、表示画面５１から指を離した時点で操作期間を終了させても良いし）、操作者による所定操作に従って操作期間を終了させても良い。
【０１１２】
第１方法では、タッチパネル操作が開始されたら、操作期間の終了を待たずして、即時、タッチパネル操作に従った切り出し画像の表示をＴＶモニタ７又はカメラモニタ１７にて行わせる。より具体的には例えば、上述の第１操作方法を利用する場合において（図１１参照）、操作者が表示画面５１上の一点を指にてΔｔ秒だけ押した後に指を表示画面５１から離す状況を考える。Δｔ秒に対応する切り出し枠の大きさをＳＩＺＥ［Δｔ］にて表す。この場合、操作者が表示画面５１上の一点を指にてΔｔ／３秒だけ押した時点において、ＳＩＺＥ［Δｔ／３］の大きさを有する切り出し枠を設定して切り出し制御を実行し、その後更にΔｔ／３秒が経過した時点において、ＳＩＺＥ［２Δｔ／３］の大きさを有する切り出し枠を設定して切り出し制御を実行し、その後更にΔｔ／３秒が経過した時点において、ＳＩＺＥ［Δｔ］の大きさを有する切り出し枠を設定して切り出し制御を実行する。ここで、ＳＩＺＥ［Δｔ］＜ＳＩＺＥ［２Δｔ／３］＜ＳＩＺＥ［Δｔ／３］である。これによれば、タッチパネル操作の完了を待たずして、次々と表示映像が変化してゆく。
【０１１３】
第２方法では、タッチパネル操作が完了するまで或いは操作期間が完了するまで、タッチパネル操作の内容を表示映像に反映させない。例えば、上述の第１操作方法を利用する場合において（図１１参照）、操作者が表示画面５１上の一点を指にてΔｔ秒だけ押した後に指を表示画面５１から離した場合、その指が表示画面５１から離されるまでは切り出し制御を実行せず、その指が離されて操作期間が終了した後に、切り出し制御を実行するようにしてもよい。
【０１１４】
＜＜第５実施形態＞＞
本発明の第５実施形態を説明する。第５実施形態では、操作期間中における、カメラモニタ１７又はＴＶモニタ７の表示内容制御について説明する。表示内容制御の方法として、以下に、第１〜第５表示制御方法を列記する。デジタルカメラ１において、第１〜第５表示制御方法の何れかを実施することが可能であり、矛盾なき限り、或る表示制御方法を他の表示制御方法と組み合わせて実施することも可能である。
【０１１５】
第１表示制御方法を説明する。第１及び第２表示制御方法では、切り出し情報の生成後、カメラモニタ１７に切り出し画像を表示することを前提としている。第１表示制御方法では、タッチパネル操作の内容を、即時、カメラモニタ１７に反映させる。即ち、タッチパネル操作が成された時、そのタッチパネル操作に応じた切り出し情報に従った切り出し画像を、即時、入力画像から生成してカメラモニタ１７に表示させる（換言すれば、切り出し枠の位置及び大きさを指定するタッチパネル操作が成された際、その指定内容をカメラモニタ１７の表示内容に即時反映させる）。第１表示制御方法では、タッチパネル操作に応じた表示内容変更のレスポンスが良好となる。
【０１１６】
第２表示制御方法を説明する。第２表示制御方法では、操作期間中に成されたタッチパネル操作の内容を、段階的に、カメラモニタ１７に反映させる（換言すれば、切り出し枠の位置及び大きさを指定するタッチパネル操作が成された際、その指定内容をカメラモニタ１７の表示内容に段階的に反映させる）。例えば、入力画像の全体画像がカメラモニタ１７に表示されている状態を起点として、タッチパネル操作により切り出し枠の大きさを入力画像のそれの１／３に設定した場合を考える。この場合、タッチパネル操作の直後において、入力画像の大きさの２／３の大きさを有する切り出し枠を用いた切り出し画像をカメラモニタ１７に表示し、その後所定時間が経過した後において、入力画像の大きさの１／２の大きさを有する切り出し枠を用いた切り出し画像をカメラモニタ１７に表示し、その後更に所定時間が経過した後において、入力画像の大きさの１／３の大きさを有する切り出し枠を用いた切り出し画像をカメラモニタ１７に表示する。各切り出し枠の中心位置は、タッチパネル操作にて指定されたものと一致する。第２表示制御方法によれば、タッチパネル操作の内容が緩やかに映像に反映されるため、操作者が表示映像を所望のものに設定しやすくなる。
【０１１７】
第３表示制御方法を説明する。第３表示制御方法では、操作期間中においてカメラモニタ１７に再生対象画像の全体画像を表示することを前提としている。第３表示制御方法では、操作期間中において、カメラモニタ１７に切り出し枠を実際に表示する。即ち例えば、切り出し処理部６２に入力される再生対象画像が図８（ａ）の再生対象画像３１０である場合、切り出し処理部６２は、操作期間中において、切り出し枠３１１が重畳された再生対象画像３１０をカメラモニタ１７に表示する。切り出し枠をカメラモニタ１７に表示することで、操作者が表示映像を所望のものに設定しやすくなる。
【０１１８】
第４表示制御方法を説明する。第４表示制御方法においては、切り出し設定情報をカメラモニタ１７においてのみ表示させる。切り出し設定情報とは、操作者による、切り出し枠の位置等の決定を支援するための情報を指す。
【０１１９】
第４表示制御方法において、例えば、操作期間中に、図１７に示すような画像４５０をカメラモニタ１７に表示させることができる。画像４５０は、図８（ｂ）の切り出し画像３２０の端部に図８（ａ）の再生対象画像３１０の縮小画像である画像４５１を重畳したものであり、画像４５１が切り出し設定情報に相当する。カメラモニタ１７において、画像４５１上に切り出し枠を更に表示するようにしても良い。カメラモニタ１７に画像４５０が表示されている時点において、ＴＶモニタ７には、例えば図８（ａ）の再生対象画像３１０が表示され、操作期間の終了後に図８（ｂ）の切り出し画像３２０が表示される。このように、ＴＶモニタ７には切り出し設定情報が表示されない。このため、切り出し設定情報がＴＶモニタ７に表示されることによる、ＴＶモニタ７の鑑賞者の違和感又は不快感が生じなくなる。
【０１２０】
切り出し設定情報は上記のものに限定されない。第３表示制御方法にて述べたカメラモニタ１７に表示される切り出し枠も、切り出し設定情報の一種である。また、切り出し枠の位置や切り出しサイズを表す数値等を切り出し設定情報に含めることも可能である。また更に、切り出し枠の設定の支援等を目的とした何らかのアイコン（例えば、第３実施形態で述べたアイコン）を切り出し設定情報としてカメラモニタ１７に表示させることも可能である。
【０１２１】
尚、第３又は第４表示制御方法による表示を、操作期間以外において実施することも可能である。例えば、現時点が操作期間に属するか否かに関わらず、カメラモニタ１７に、切り出し枠が重畳された再生対象画像の全体画像や、図１７の画像４５０のような画像を表示させるようにしても良い。
【０１２２】
第５表示制御方法を説明する。第５表示制御方法では、再生対象画像が動画像であることが前提とされる。再生対象画像が動画像である場合、タッチパネル操作後において、再生対象画像を形成する各フレーム画像から切り出し画像が順次生成され、切り出し画像列から成る動画像がＴＶモニタ７に表示されると共に、切り出し画像列から成る動画像又はフレーム画像列から成る動画像（即ち再生対象画像）がカメラモニタ１７に表示される。第５表示制御方法では、操作期間中において、カメラモニタ１７に表示される動画像の再生を一時停止する。即ち例えば、操作期間の開始時点においてカメラモニタ１７に表示される画像（静止画像としての切り出し画像又はフレーム画像）を、操作期間中、固定的にカメラモニタ１７に表示させる。動画像の再生を一時停止することで操作者が各種の操作を行いやすくなる。操作期間が終了すれば、カメラモニタ１７に表示される動画像の再生は再開される。
【０１２３】
上述の各表示制御方法ではカメラモニタ１７の表示内容に特に注目したが、矛盾なき限り、上述の各表示制御方法にて述べたカメラモニタ１７の表示内容の全部又は一部を、ＴＶモニタ７に表示させることも可能である。
【０１２４】
＜＜第６実施形態＞＞
本発明の第６実施形態を説明する。操作期間の終了後におけるＴＶモニタ７の表示内容制御について説明する。第６実施形態に係る表示内容制御の方法として、以下に、第６及び第７表示制御方法を説明する。デジタルカメラ１において、第６又は第７表示制御方法を実施することが可能である。
【０１２５】
第６表示制御方法を説明する。第６及び第７表示制御方法では、操作期間中に成されたタッチパネル操作の内容が、操作期間においては、ＴＶモニタ７に反映されないことを前提としている。第６表示制御方法では、操作期間中に成されたタッチパネル操作の内容を、操作期間の終了直後において、即時、ＴＶモニタ７に反映させる。即ち、操作期間中においてはタッチパネル操作に応じた切り出し画像の表示をＴＶモニタ７にて行わないが、操作期間が終了すれば、その直後において、タッチパネル操作に応じた切り出し情報に基づく切り出し画像を、即時、再生対象画像から生成してＴＶモニタ７に表示させる。第６表示制御方法では、タッチパネル操作に応じた表示内容変更のレスポンスが良好となる。
【０１２６】
第７表示制御方法を説明する。第７表示制御方法では、操作期間中に成されたタッチパネル操作の内容を、操作期間の終了直後において、段階的に、ＴＶモニタ７に反映させる。例えば、入力画像の全体画像がカメラモニタ１７に表示されている状態を起点として、タッチパネル操作により切り出し枠の大きさを入力画像のそれの１／３に設定した場合を考える。この場合、操作期間の終了直後において、入力画像の大きさの２／３の大きさを有する切り出し枠を用いた切り出し画像をＴＶモニタ７に表示し、その後所定時間が経過した後において、入力画像の大きさの１／２の大きさを有する切り出し枠を用いた切り出し画像をＴＶモニタ７に表示し、その後更に所定時間が経過した後において、入力画像の大きさの１／３の大きさを有する切り出し枠を用いた切り出し画像をＴＶモニタ７に表示する。各切り出し枠の中心位置は、タッチパネル操作にて指定されたものと一致する。第７表示制御方法によれば、切り出し制御の実行前後における表示映像の関係が鑑賞者にとって理解しやすくなる。
【０１２７】
第１実施形態で述べた第１〜第５操作方法の夫々に、第２〜第６実施形態で述べた任意の方法を組み合わせて実施することが可能である。
【０１２８】
＜＜第７実施形態＞＞
本発明の第７実施形態を説明する。上述の説明では、撮影モードにおいて撮影した静止画像又は動画像を一旦記録媒体１５に記録しておき、後に再生モードにおいて記録媒体１５から読み出した静止画像又は動画像を入力画像として切り出し処理部６２に与えている。一方、第７実施形態では、撮影によって得た静止画像又は動画像から切り出し画像の静止画像又は動画像を生成する処理を、撮影モードにおいてリアルタイムで実行する。尚、第７実施形態に係るデジタルカメラ１では、図９の切り出し設定部６１及び切り出し処理部６２が、表示制御部２０ではなく、画像処理部１４内に設けられる。
【０１２９】
撮影モードにおいて静止画像の撮影を行った時の動作を説明する。撮影モードにおいて静止画像の撮影を行った際、その静止画像を表す１枚のフレーム画像がカメラモニタ１７に表示されると共に入力画像として図９の切り出し処理部６２に与えられる。その入力画像の全体画像がカメラモニタ１７に表示されている状態において、撮影者は上述してきたものと同様のタッチパネル操作を行うことができる。カメラモニタ１７に対してタッチパネル操作が成されると、切り出し設定部６１は、タッチパネル操作に基づくタッチ操作情報に基づき切り出し情報を生成し、切り出し処理部６２は該切り出し情報に従って入力画像としての静止画像から切り出し画像を生成する。タッチパネル操作の方法、タッチパネル操作に従って入力画像から切り出し画像が生成される方法は、上述してきたものと同様である。
【０１３０】
切り出し画像の生成後、表示制御部２０は、切り出し画像をカメラモニタ１７（又はＴＶモニタ７）に表示させることができる。また、切り出し画像の画像データを記録媒体１５に記録することができる。切り出し画像の画像データと共に入力画像の全体の画像データも記録媒体１５に記録するようにしても良い。
【０１３１】
撮影モードにおいて動画像の撮影を行った時の動作を説明する。撮影モードにおいて動画像の撮影を行った際、その動画像を形成する各フレーム画像がカメラモニタ１７に順次表示されると共に入力フレーム画像として図９の切り出し処理部６２に与えられる。その入力フレーム画像の全体画像がカメラモニタ１７に表示されている状態において、撮影者は上述してきたものと同様のタッチパネル操作を行うことができる。カメラモニタ１７に対してタッチパネル操作が成されると、切り出し設定部６１は、タッチパネル操作に基づくタッチ操作情報に基づき切り出し情報を生成し、切り出し処理部６２は該切り出し情報に従って各入力フレーム画像から切り出し画像を生成する。タッチパネル操作の方法、タッチパネル操作に従って入力画像から切り出し画像が生成される方法は、上述してきたものと同様である。
【０１３２】
表示制御部２０は、入力フレーム画像列から生成された切り出し画像列をカメラモニタ１７（又はＴＶモニタ７）に表示させることができる。また、切り出し画像列の画像データを記録媒体１５に記録することができる。切り出し画像列の画像データと共に入力フレーム画像列の全体の画像データも記録媒体１５に記録するようにしても良い。
【０１３３】
また、動画像の撮影時においては、各入力フレーム画像の画像データを図９の追尾処理部６３及び／又はカメラ運動判定部２１にも与えるようにしても良い。これにより、タッチ操作情報に基づくだけでなく、追尾結果情報及び／又はカメラ運動情報にも基づいた切り出し制御を行うことが可能となる。
【０１３４】
第７実施形態は第１実施形態の記載を基礎とする実施形態であり、第１実施形態において述べた事項が、矛盾なき限り第７実施形態にも適用される。更に、第２〜第６実施形態において述べた事項も、矛盾なき限り第７実施形態にも適用される。第１〜第６実施形態にて述べた事項を第７実施形態に適用する際、再生モードに適応した幾つかの文言を撮影モードに適応した文言に読み替えると良い。即ち例えば、第１〜第６実施形態にて述べた事項を第７実施形態に適用する際、第１〜第６実施形態の説明文中における操作者及び再生対象画像を、夫々、撮影者及び記録対象画像（又は単に対象画像）に読み替えると良い。
【０１３５】
ところで、図３の撮像素子３３は、二次元配列された複数の受光画素から形成され、図１８に示す如く、受光画素が配置される全体の領域内に、矩形形状の有効画素領域が設定されている。各受光画素は、光学系３５及び絞り３２を介して入射した被写体の光学像を光電変換し、該光電変換によって得られた電気信号を画像信号として出力する。図１９に示す如く、有効画素領域もまた、表示画面５１及び二次元画像３００と同様（図６（ａ）及び（ｂ）参照）、ＸＹ座標面上の領域として捉えられ、有効画素領域上の位置はＸＹ座標面上の位置（ｘ，ｙ）にて表現される。有効画素領域上の位置（ｘ，ｙ）における画像信号は、フレーム画像上の位置（ｘ，ｙ）における画像信号となる。
【０１３６】
フレーム画像の全体画像は、有効画素領域内に配置された各受光画素の出力画像信号より形成される。切り出し画像は、フレーム画像の全体画像の一部であるため、切り出し画像は、有効画素領域内の一部の受光画素の出力画像信号より形成される。その一部の受光画素が配置される領域を撮像素子３３上の切り出し領域と捉えることができる。撮像素子３３上の切り出し領域は、有効画素領域の一部である。そうすると、切り出し処理部６２は、有効画素領域に設定された切り出し領域内の受光画素の出力画像信号を抽出する部位である、とも言える。
【０１３７】
これを考慮すると、動画像の撮影時においては、切り出し情報の設定後、その切り出し情報に従った切り出し領域（切り出し枠）を撮像素子３３上に定義し、切り出し領域内の受光画素の出力画像信号のみを撮像素子３３から読み出すようにしても良い。ここで読み出した画像信号から形成される画像は、上述してきた切り出し画像と等価なものであり、その画像を出力画像としてカメラモニタ１７（又はＴＶモニタ７）に表示させると共に記録媒体１５に記録するようにしても良い。
【０１３８】
本実施形態においても、上述の各実施形態と同様の効果が得られる。即ち、直感的なタッチパネル操作（領域指定操作）にて切り出し位置及び大きさを指定することができるため、操作者は素早く且つ容易に表示画像又は記録画像の画角等を所望のものに設定することが可能となる。
【０１３９】
＜＜第８実施形態＞＞
本発明の第８実施形態を説明する。特定領域内の被写体像を抽出する方法として、所謂電子ズームを利用した方法を第７実施形態で説明したが、第８実施形態では光学ズームを利用した方法を説明する。第８実施形態における以下の説明は、撮影モードにおけるデジタルカメラ１の動作説明である。
【０１４０】
撮影モードにおいて、順次撮影によって得られるフレーム画像列は、表示制御部２０の制御の下、動画像としてカメラモニタ１７に表示される。第８実施形態においてカメラモニタ１７に表示される画像は、フレーム画像の全体画像である。フレーム画像の全体画像がカメラモニタ１７に表示されている状態において、撮影者は上述してきたものと同様のタッチパネル操作を行うことができる。カメラモニタ１７に対してタッチパネル操作が成されると、図９の切り出し設定部６１は、タッチパネル操作に基づくタッチ操作情報に基づき切り出し情報を生成する。第８実施形態に係るデジタルカメラ１において、切り出し設定部６１は、図２の撮影制御部１３に設けられている。
【０１４１】
第８実施形態では、上述の各実施形態にて述べた切り出し枠に相当する枠を、拡大指定枠と呼ぶ。今、説明の具体化のため、図２０（ａ）のフレーム画像５００がカメラモニタ１７に表示されている時に操作者がカメラモニタ１７に対して成したタッチパネル操作により、拡大指定枠の左上隅及び右下隅の位置が夫々（ｘA1，ｙA1）及び（ｘA2，ｙA2）あることが指定された場合を考える。また、説明の簡略化上、実空間上で各被写体及びデジタルカメラ１は静止しているものとし、拡大指定枠のアスペクト比と有効画素領域のアスペクト比は一致しているものとする。
【０１４２】
この場合、撮影制御部１３は、フレーム画像５００の撮影時点において撮像素子３３上の位置（ｘA1，ｙA1）及び（ｘA2，ｙA2）に結像していた被写体の光学像が、光学制御に必要な時間の経過後において有効画素領域の左上隅及び右下隅に結像するように、拡大指定情報とも言うべき切り出し情報に基づいて、撮影画角を調整すると共に、被写体の光学像の、撮像素子３３への入射位置を調整する。撮影画角の調整は、図３のズームレンズ３０の移動によって実現され、上記入射位置の調整は、図３の補正レンズ３６の移動によって実現される。光学制御に必要な時間とは、撮影画角の調整及び上記入射位置の調整に必要な時間を指す。
【０１４３】
光学制御に必要な時間が経過した後の撮影によって得られるフレーム画像５１０を、図２０（ｂ）に示す。フレーム画像５１０も、フレーム画像５００と同様、有効画素領域内に配置された各受光画素の出力画像信号より形成される。
【０１４４】
撮影制御部１３は、以下のようにして上記の光学制御を実現することができる。拡大指定枠の中心位置（（ｘA1＋ｘA2）／２，（ｙA1＋ｙA2）／２）に結像していた被写体の光学像を有効画素領域の中心位置に結像させるために必要な補正レンズ３６の移動方向及び移動量を、予め用意されたルックアップテーブルや換算式を用いて求める。また、有効画素領域の大きさ（幅又は高さ）の、拡大指定枠の大きさ（幅又は高さ）に対する比を求める一方で、フレーム画像５００の撮影時における撮影画角の、フレーム画像５１０の撮影時における撮影画角に対する比を求め、前者の比と後者の比を一致させるために必要なズームレンズ３０の移動量を、予め用意されたルックアップテーブルや換算式を用いて求める（ズームレンズ３０の移動方向は既知である）。そして、フレーム画像５００の撮影完了後、フレーム画像５１０の露光が開始されるまでの期間において、求めた補正レンズ３６の移動方向及び移動量に従って補正レンズ３６を実際に移動させると共に求めたズームレンズ３０の移動量に従ってズームレンズ３０を実際に移動させ、これによって上記の光学制御を実現する。
【０１４５】
表示制御部２０は、フレーム画像５００及び５１０の夫々を静止画像としてカメラモニタ１７（及びＴＶモニタ７）に表示させることができると共に、フレーム画像５００及び５１０を含むフレーム画像列を動画像としてカメラモニタ１７（及びＴＶモニタ７）に表示させることができる。記録制御部１６は、フレーム画像５００及び５１０の夫々を静止画像として記録媒体１５に記録させることができると共に、フレーム画像５００及び５１０を含むフレーム画像列を動画像として記録媒体１５に記録させることができる。
【０１４６】
第８実施形態は第１実施形態の記載を基礎とする実施形態であり、第１実施形態において述べた事項が、矛盾なき限り第８実施形態にも適用される。更に、第２〜第７実施形態において述べた事項も、矛盾なき限り第８実施形態にも適用される。第１〜第６実施形態にて述べた事項を第８実施形態に適用する際、再生モードに適応した幾つかの文言を撮影モードに適応した文言に読み替えると良い。即ち例えば、第１〜第６実施形態にて述べた事項を第８実施形態に適用する際、第１〜第６実施形態の説明文中における操作者を撮影者に読み替えると良い。
【０１４７】
本実施形態においても、上述の各実施形態と同様の効果が得られる。即ち、直感的なタッチパネル操作（画角／位置指定操作）にて拡大指定枠の位置及び大きさを指定することができるため、操作者は素早く且つ容易に表示画像又は記録画像の画角等を所望のものに設定することが可能となる。また、注目被写体の拡大画像を光学制御によって得るため、それを電子ズームにて得る第７実施形態と比べ、表示画像又は記録画像の画質が向上する。
【０１４８】
補正レンズ３６の移動を用いて光学像の入射位置の調整を実現する方法を上述したが、被写体からの入射光の屈折角を調節可能なバリアングルプリズム（不図示）を補正レンズ３６の代わりに光学系３５内に設けておき、該バリアングルプリズムを駆動することによって上記入射位置の調整を実現するようにしても良い。或いは、補正レンズ３６やバリアングルプリズム等の光学部材を駆動するのではなく、光軸に直交する方向に撮像素子３３を移動させることによって上記入射位置の調整を実現するようにしても良い。上記のバリアングルプリズムを駆動する機能又は撮像素子３３の移動させる機能を、入射位置調整部として機能する図２の撮影制御部１３に担わせることができる。撮影制御部１３は、撮影画角を調整する画角調整部としての機能をも有する。入射位置調整部及び画角調整部の構成要素にドライバ３４が更に含まれていると考えることも可能である。
【０１４９】
＜＜第９実施形態＞＞
本発明の第９実施形態を説明する。第９実施形態は、上述の第１実施形態を基礎とする実施形態であり、本実施形態において特に述べない事項に関しては、第１実施形態において述べた事項が、矛盾なき限り本実施形態にも適用される。更に、矛盾なき限り、第２〜第６実施形態に記載した事項も本実施形態に適用することができる。第９実施形態においても、第１実施形態と同様、再生モードにおけるデジタルカメラ１の動作を説明する。第１実施形態では、図１１を参照して、切り出し枠（例えば、図８（ａ）の切り出し枠３１１）の位置及び大きさを指定するための第１〜第５操作方法を説明した。本実施形態及び後述の他の実施形態では、便宜上、図２１に示す如く、第１〜第５操作方法を夫々方法Ａ1〜Ａ5とも呼ぶ。上述したように、切り出し枠内の画像は切り出し画像として表示される。第１実施形態における方法Ａiを利用すれば、表示画像が、例えば図８（ａ）の再生対象画像３１０から切り出し画像３２０へと変更される。ｉは、任意の整数である。以下の説明において、特に記述なき限り、表示とは、ＴＶモニタ７及びカメラモニタ１７における表示を指し、表示画像とは、ＴＶモニタ７又はカメラモニタ１７に表示される画像を指す。
【０１５０】
以下説明では、再生対象画像そのものである入力画像を、便宜上、原入力画像とも呼ぶ。方法Ａiを用いて原入力画像から抽出された切り出し画像を新たな入力画像として設定し、新たな入力画像に対して方法Ａiを更に適用することもできる。図２２（ａ）において、符号６００は原入力画像の例を示している。図９の切り出し設定部６１及び切り出し処理部６２は、方法Ａiを用いて原入力画像６００内に切り出し枠６０１を設定することで、切り出し枠６０１内の画像を切り出し画像６１０として抽出することができる。更に、切り出し設定部６１及び切り出し処理部６２は、この切り出し画像６１０を新たな入力画像６２０と捉えて、入力画像６２０内に切り出し枠６２１を設定することができると共に切り出し枠６２１内の画像を切り出し画像６３０として抽出することもできる。入力画像６２０は原入力画像６００の一部なのであるから、図２２（ｂ）に示す如く、切り出し枠６２１は、原入力画像６００内に設定された切り出し枠と捉えることもできる。
【０１５１】
上述の方法Ａiによるタッチパネル操作が行われた場合、表示画像の画角は減少していく。他のタッチパネル操作を利用することで、表示画像の画角を増大させることもできる。即ち例えば、図２３に示す如く、カメラモニタ１７等に入力画像６２０が表示されている状態において、方法Ａiによるタッチパネル操作が行われれば切り出し枠が図２２（ｂ）の切り出し枠６０１から切り出し枠６２１へと変更されて切り出し画像６３０が表示されるようになり（即ち、表示画像の画角が減少し）、上記他のタッチパネル操作が行われれば切り出し枠が切り出し枠６０１よりも大きな切り出し枠（不図示）へと変更されて入力画像６２０よりも大きな画角を有する切り出し画像６０５が表示されるようになる（即ち、表示画像の画角が増大する）。切り出し画像６０５は原入力画像６００と一致しうる。表示画像の画角の減少は表示画像のズームインに対応し、表示画像の画角の増大は表示画像のズームアウトに対応する。
【０１５２】
本実施形態では、タッチパネル操作によって、表示画像の画角の増大及び減少を切り替え実行する方法を説明する。上述の説明からも明らかであるが、切り出し枠の大きさの減少は表示画像の画角を減少させ、切り出し枠の大きさの増大は表示画像の画角を増大させる。従って、表示画像の画角の増大及び減少を切り替え実行する方法は、切り出し枠の大きさの増大及び減少を切り替え実行する方法とも言える。以下の説明では、便宜上、図２２（ａ）の切り出し枠６０１が原入力画像６００に設定されて入力画像６２０が表示されている状態を基準状態として考える。従って、切り出し枠の大きさの増大（換言すれば拡大）とは、図２４（ａ）に示す如く原入力画像６００に設定される切り出し枠が切り出し枠６０１から切り出し枠６０１よりも大きな切り出し枠６０１Ａへと変更されることを意味し、この変更によって、切り出し枠６０１Ａ内の画像が切り出し画像として生成及び表示されるようになる。逆に、切り出し枠の大きさの減少（換言すれば縮小）とは、図２４（ｂ）に示す如く原入力画像６００に設定される切り出し枠が切り出し枠６０１から切り出し枠６０１よりも小さな切り出し枠６０１Ｂへと変更されることを意味し、この変更によって、切り出し枠６０１Ｂ内の画像が切り出し画像として生成及び表示されるようになる。尚、第１実施形態で述べたように、切り出し枠内の領域が切り出し領域なのであるから、切り出し枠の大きさと切り出し領域の大きさは同義である。
【０１５３】
ユーザは、原入力画像６００に設定される切り出し枠を切り出し枠６０１から切り出し枠６０１Ａへと変更させるための操作（以下、増大操作という）と、原入力画像６００に設定される切り出し枠を切り出し枠６０１から切り出し枠６０１Ｂへと変更させるための操作（以下、減少操作という）を、タッチパネルを用いて成すことができる。前者の変更は、切り出し枠の大きさの増大（換言すれば拡大）に相当し、後者の変更は切り出し枠の大きさの減少（換言すれば縮小）に相当する。増大操作及び減少操作の夫々は、タッチパネル操作の一種である。第１実施形態で述べた方法Ａiによるタッチパネル操作は、減少操作の一種である。切り出し枠の大きさを増大させる、以下の様々な方法は、増大操作の一種である。増大操作に従って切り出し枠の大きさを増大させる際、増大の前後において切り出し枠の中心位置を一致させても良いし、増大操作の内容に基づき増大後の切り出し枠の中心位置を決定しても良い（後述の他の実施形態においても同様）。
【０１５４】
――増減切り替え方法――
まず、切り出し枠の大きさを増大させるのか或いは減少させるのかを切り替える方法として、複数の切り替え方法を説明する。各切り替え方法によって、切り出し枠の大きさの変化方向が決定される。この複数の切り替え方法は、以下の方法Ｂ1〜Ｂ6を含む。図２５に、方法Ｂ1〜Ｂ6の概要を示す。
【０１５５】
［方法Ｂ1］
方法Ｂ1では、タッチパネル操作の一種である増減方向設定操作又は図１の操作部１８に対する増減方向設定操作によって、切り出し枠の大きさの変化方向を予め定めておく。定められた方向が増大方向である場合には、その後のタッチパネル操作によって、切り出し枠の大きさが増大せしめられ、逆に、定められた方向が減少方向である場合には、その後のタッチパネル操作によって、切り出し枠の大きさが減少せしめられる。
【０１５６】
方法Ｂ1は、方法Ａ1〜Ａ5の何れかと組み合わせて実施することができる。例えば、方法Ａ1と組み合わせる場合において、定められた方向が減少方向である場合には、タッチ位置を中心にして、切り出し枠（図２５の例において切り出し枠６５１）の大きさがタッチ時間の増加と共に減少し、定められた方向が増大方向である場合には、タッチ位置を中心にして、切り出し枠（図２５の例において切り出し枠６５２）の大きさがタッチ時間の増加と共に増大する。タッチ位置とは、指が表示画面５１に触れている、表示画面５１上の位置を指す。タッチ時間とは、指が表示画面５１に触れている時間の長さであり、第１実施形態で述べた“押下時間”と同じものを指す。
【０１５７】
方法Ｂ1と方法Ａ2〜Ａ5の何れかを組み合わせる場合において、定められた方向が減少方向であるときには、方法Ａ2〜Ａ5に従って切り出し枠を設定すれば良く、この設定によって切り出し枠の大きさが減少する。方法Ｂ1と方法Ａ2〜Ａ5の何れかを組み合わせる場合において、定められた方向が増大方向であるときには、所定のタッチパネル操作（例えば、表示画面５１上の特定点を指にて押す操作）によって切り出し枠の大きさを増大させれば良い。増大率の設定方法については後述される（方法Ｂ2〜Ｂ6についても同様）。
【０１５８】
［方法Ｂ2］
方法Ｂ2は、タッチ位置の移動軌跡における始点から終点への移動方向によって、切り出し枠の大きさの変化方向を決定する（始点及び終点の位置関係に基づいて切り出し枠の大きさの変化方向を決定するとも言える）。図２５の方法Ｂ2に対応する欄では、図中の矢印に沿って１本の指が表示画面５１上で移動する様子が示されている。図２５の方法Ｂ3〜Ｂ5に対応する欄及び後述の図２８の方法Ｃ2〜Ｃ6に対応する欄も同様である。タッチ位置の移動軌跡とは、指と表示画面５１との接触位置（即ちタッチ位置）の軌跡であり、第１実施形態で述べた“指の移動軌跡”と同じものを指す。以下、単に始点及び終点といった場合、それらは、タッチ位置の移動軌跡における始点及び終点を指すものとする。方法Ｂ2は、方法Ａ4又はＡ5と組み合わせて実施することができる。例えば、表示画面５１において、タッチ位置の移動方向が右方向であることによって終点が始点よりも右側に位置するときには方法Ａ4又はＡ5に従って切り出し枠を設定すれば良く、この設定によって切り出し枠の大きさが減少する。逆に、タッチ位置の移動方向が左方向であることによって終点が始点よりも左側に位置するときには切り出し枠の大きさを増大させればよい（上下左右の定義については図６（ａ）を参照）。或いは例えば、表示画面５１において、タッチ位置の移動方向が下方向であることによって終点が始点よりも下側に位置するときには方法Ａ4又はＡ5に従って切り出し枠を設定するようにしても良く、この設定によって切り出し枠の大きさが減少する。逆に、タッチ位置の移動方向が上方向であることによって終点が始点よりも上側に位置するときには切り出し枠の大きさを増大させるようにしても良い。上述した移動方向と切り出し枠の大きさの変化方向との関係を逆にすることもできる。
【０１５９】
［方法Ｂ3］
方法Ｂ3は、タッチ位置の移動軌跡における始点及び終点の位置関係に基づいて、切り出し枠の大きさの変化方向を決定する。方法Ｂ3も、方法Ａ4又はＡ5と組み合わせて実施することができる。例えば、終点が始点よりも表示画面５１の中心に近いときには、方法Ａ4又はＡ5に従って切り出し枠を設定すれば良く、この設定によって切り出し枠の大きさが減少する。逆に、始点が終点よりも表示画面５１の中心に近いときには切り出し枠の大きさを増大させればよい。上述した位置関係と切り出し枠の大きさの変化方向との関係を逆にすることもできる。
【０１６０】
［方法Ｂ4］
方法Ｂ4は、タッチ位置の移動中にタッチ位置の移動方向が反転したか否かによって、切り出し枠の大きさの変化方向を決定する。方法Ｂ4も、方法Ａ4又はＡ5と組み合わせて実施することができる。例えば、始点から終点へと向かう過程において、タッチ位置が同一の方向にのみ移動している場合には、タッチ位置の移動方向の反転はない。この場合には、方法Ａ4又はＡ5に従って切り出し枠を設定すれば良く、この設定によって切り出し枠の大きさが減少する。逆に、タッチ位置が始点から或る方向へ移動した後、逆の方向に移動して終点に到達した場合、タッチ位置の移動方向が反転したと判断される。この場合には、切り出し枠の大きさを増大させればよい。尚、反転があったとしても、反転後のタッチ位置の移動量が少ない場合には、切り出し枠の大きさの変化方向を減少方向に設定しても良い。上述した反転有無と切り出し枠の大きさの変化方向との関係を逆にすることもできる。
【０１６１】
［方法Ｂ5］
方法Ｂ5の利用時には、タッチ位置が始点から終点に至るまでにタッチ位置が時計回り方向又は反時計回り方向に移動することが想定される。表示画面５１において、タッチ位置が左側領域から上側領域を通過して右側領域に至る方向が時計回り方向に対応する（図６（ａ）参照）。方法Ｂ5は、方法Ａ3〜Ａ5の何れかと組み合わせて実施することができる。例えば、タッチ位置が始点から終点を向かう過程において、タッチ位置が時計回り方向に移動している場合には、方法Ａ3〜Ａ5の何れかに従って切り出し枠を設定すれば良く、この設定によって切り出し枠の大きさが減少する。逆に、タッチ位置が始点から終点を向かう過程において、タッチ位置が反時計回り方向に移動している場合には、切り出し枠の大きさを増大させればよい。上述したタッチ位置の移動方向と切り出し枠の大きさの変化方向との関係を逆にすることもできる。
【０１６２】
［方法Ｂ6］
方法Ｂ6の利用時には、指が始点又は終点において或る程度の時間だけ静止していることが想定される。指と表示画面５１との接触状態を保ちつつ指が始点において静止している期間及び指が終点において静止している期間のどちらかを、対象静止期間として採用することができる。方法Ｂ6では、対象静止期間の時間長さに応じて切り出し枠の大きさの変化方向を決定する。方法Ｂ6は、方法Ａ1〜Ａ5の何れかと組み合わせて実施することができる。方法Ａ1及びＡ2ではタッチ位置の移動が想定されていないため、方法Ａ1及びＡ2を利用する場合は、方法Ａ1及びＡ2におけるタッチ位置自体を始点又は終点と捉えれば良い。例えば、一定の単位時間が経過するごとにリセット信号を出力するカウンタ（不図示）を用い、対象静止期間中に出力されるリセット信号の個数が奇数個の場合に切り出し枠の大きさの変化方向を減少方向に設定し、該個数が偶数個の場合に該変化方向を増大方向に設定することができる。上述した個数と変化方向の関係を逆にすることもできる。
【０１６３】
具体例を挙げる。例えば、方法Ｂ6を方法Ａ1と組み合わせる場合、図２６（ａ）に示す如く、指が表示画面５１上の或る位置６６１に触れると、まず、時間の経過に伴って表示画面５１上の切り出し枠は位置６６１を中心にして徐々に大きくなってゆき、一定の時間が経過すると、切り出し枠の大きさの変化方向が反転し、今度は、時間の経過に伴って表示画面５１上の切り出し枠が徐々に小さくなってゆく。図２６（ａ）における破線枠が表示画面５１上の切り出し枠である。表示画面５１上の切り出し枠の大きさがある程度まで小さくなると、再び、該切り出し枠の大きさの変化方向が増加方向へと反転し、上述と同様の動作が繰り替えされる。そして、指を表示画面５１から離した時点（対象静止期間の終了時点）で切り出し枠の大きさは決定される。即ち、対象静止期間の終了時点における表示画面５１上の切り出し枠が原入力画像６００又は入力画像６２０に設定されて、設定された切り出し枠内の画像が切り出し画像として原入力画像６００又は入力画像６２０から抽出される。
【０１６４】
図２６（ａ）に対応する方法Ｂ6及びＡ1の組み合わせ例において、表示画面５１上の切り出し枠の大きさが減少している期間中、図２７（ａ）に示すような、切り出し枠の大きさの減少を示すアイコンＩＣDを表示するようにしてもよく、表示画面５１上の切り出し枠の大きさが増大している期間中、図２７（ｂ）に示すような、切り出し枠の大きさの増大を示すアイコンＩＣUを表示するようにしてもよい。
【０１６５】
また、図２６（ｂ）を参照して、方法Ｂ6を方法Ａ3と組み合わせる場合の動作例を説明する。この動作例では、指が始点において静止している期間が対象静止期間であるとする。図２６（ｂ）に示す如く、指と表示画面５１とが表示画面５１上の位置６６２にて接触開始すると、対象静止期間が開始すると共に画角減少セット期間が開始する。対象静止期間において、単位時間が経過するごとに、画角減少セット期間と画角増大セット期間が交互に現れる。画角減少セット期間中にアイコンＩＣDを表示すると良く、画角増大セット期間中にアイコンＩＣUを表示すると良い。画角減少セット期間中に指が位置６６２から移動を開始すると、切り出し枠の大きさの変化方向は減少方向に決定され、画角増大セット期間中に指が位置６６２から移動を開始すると、切り出し枠の大きさの変化方向は増大方向に決定される。図２６（ｂ）は、該変化方向が減少方向に決定された状態に対応しており、指の移動中、アイコンＩＣDが表示されている。
【０１６６】
――変化率（増大率・減少率）の設定方法――
次に、切り出し枠の大きさの変化率の設定方法について説明する。切り出し枠の大きさの変化前における切り出し枠の大きさをＳＩＺＥBFにて表し、切り出し枠の大きさの変化後における切り出し枠の大きさをＳＩＺＥAFにて表す。そうすると、変化率は“ＳＩＺＥAF／ＳＩＺＥBF”で表される。切り出し枠の大きさは、例えば、切り出し枠内に属する画素の数にて表される。切り出し枠の大きさにおける変化の程度を“変化度合い”と呼ぶ。切り出し枠の大きさの変化方向が減少方向の場合、変化率は１未満の値をとる減少率であり、この場合は、変化率（ＳＩＺＥAF／ＳＩＺＥBF）がゼロに近いほど変化度合い（減少の変化度合い）が大きく、変化率（ＳＩＺＥAF／ＳＩＺＥBF）が１に近いほど変化度合い（減少の変化度合い）が小さい。切り出し枠の大きさの変化方向が増大方向の場合、変化率は１より大きな値をとる増大率であり、この場合は、変化率（ＳＩＺＥAF／ＳＩＺＥBF）が大きいほど変化度合い（増大の変化度合い）が大きく、変化率（ＳＩＺＥAF／ＳＩＺＥBF）が１に近いほど変化度合い（増大の変化度合い）が小さい。
【０１６７】
変化率の設定方法として、以下に方法Ｃ1〜Ｃ7を説明する。図２８に、方法Ｃ1〜Ｃ7の概要を示す。矛盾なき限り、上述の方法Ｂ1〜Ｂ6中の任意の方法と、方法Ｃ1〜Ｃ7中の任意の方法を組み合わせて実施することができる。方法Ｃiの説明において例示される変化度合いの大小関係を逆にすること可能である。
【０１６８】
［方法Ｃ1］
方法Ｃ1では、１回の操作に対する変化率を予め固定的に設定しておく。即ち、上述の方法Ｂiにて切り出し枠の大きさの変化方向が減少方向と決定されたならば、指の移動状態等に関係なく予め定めておいた減少率にて切り出し枠の大きさを減少させ、逆に、該変化方向が増大方向と決定されたならば、指の移動状態等に関係なく予め定めておいた増大率にて切り出し枠の大きさを増大させる。方法Ｃ1は、方法Ａ1〜Ａ5の何れかと組み合わせて実施することができる。
【０１６９】
［方法Ｃ2］
方法Ｃ2では、表示画面５１上における指の移動量に対する変化率を予め固定的に設定しておく。従って、その移動量が定まれば、自動的に変化率が決定される。
【０１７０】
［方法Ｃ3］
方法Ｃ3は方法Ａ3と組み合わせて用いられる。方法Ａ3では、タッチ位置の移動軌跡が弧を描く。方法Ｃ3では、この弧の長さが大きいほど減少又は増加の変化度合いを大きくし、この弧の長さが小さいほど減少又は増加の変化度合いを小さくする。或いは、この弧の中心角が大きいほど減少又は増加の変化度合いを大きくし、この弧の中心角が小さいほど減少又は増加の変化度合いを小さくする。方法Ｃ3を利用する場合、タッチ位置を表示画面５１上の円周に沿って複数周移動させてもよい。タッチ位置を表示画面５１上の円周に沿ってちょうど一周させたとき、弧の長さは円周の長さと一致し且つ弧の中心角は３６０°であると判断され、タッチ位置を表示画面５１上の円周に沿ってちょうど二周させたとき、弧の長さは円周の長さの２倍と一致し且つ弧の中心角は７２０°であると判断される。
【０１７１】
［方法Ｃ4］
方法Ｃ4は方法Ａ4又はＡ5と組み合わせて用いられる。方法Ｃ4では、方法Ａ4又はＡ5によるタッチ位置の移動軌跡の長さを求め、求めた長さが大きいほど減少又は増加の変化度合いを大きくし、求めた長さが小さいほど減少又は増加の変化度合いを小さくする。
【０１７２】
［方法Ｃ5］
方法Ｃ5が利用される場合、タッチ位置の移動軌跡において始点及び終点間に折り返し点が存在する。即ち、方法Ｃ5では、タッチ位置が或る方向に沿って始点から折り返し点に移動した後、タッチ位置が他の方向に沿って折り返し点から終点に移動することが想定される。そして、折り返し点及び終点間の距離を求め、求めた距離が短いほど減少又は増加の変化度合いを大きくし、求めた距離が長いほど減少又は増加の変化度合いを小さくする。方法Ｃ5を方法Ａ4又はＡ5と組み合わせて用いることができる。この組み合わせの際、方法Ａ4又はＡ5の内容を若干修正すると良い。例えば、方法Ｃ5と方法Ａ4を組み合わせる場合、始点、折り返し点及び終点を内包する極力小さな矩形枠を切り出し枠と捉えるようにすれば良い。
【０１７３】
［方法Ｃ6］
方法Ｃ6が利用される場合、タッチ位置の移動軌跡において始点及び終点間に折り返し点が存在すると共に、始点から折り返し点に向かう方向と折り返し点から終点に向かう方向は逆方向であることが想定される（但し、終点と折り返し点は実質的に同一の点であっても良い）。タッチ位置が始点から折り返し点に達した後、タッチ位置が始点側に戻るが、この戻りの程度に応じて変化率を決定する。具体的には例えば、始点及び折り返し点間の距離ｄSM及び折り返し点及び終点間の距離ｄMEを求め、距離比（ｄME／ｄSM）が大きいほど減少又は増加の変化度合いを大きくし、距離比（ｄME／ｄSM）が小さいほど減少又は増加の変化度合いを小さくする。方法Ｃ5を方法Ａ4又はＡ5と組み合わせて用いることができる。この組み合わせの際、折り返し点を方法Ａ4又はＡ5における終点とみなすようにしても良い。
【０１７４】
［方法Ｃ7］
方法Ｃ7では、指が始点又は終点において或る程度の時間だけ静止していることが想定される。指と表示画面５１との接触状態を保ちつつ指が始点において静止している期間及び指が終点において静止している期間のどちらかを、対象静止期間として採用することができる。方法Ｃ7では、対象静止期間の時間長さに応じて変化率を決定する。具体的には例えば、対象静止期間の時間長さが長いほど減少又は増加の変化度合いを大きくし、対象静止期間の時間長さが短いほど減少又は増加の変化度合いを小さくする。方法Ｃ7は、方法Ａ1〜Ａ5の何れかと組み合わせて実施することができる。方法Ａ1及びＡ2ではタッチ位置の移動が想定されていないため、方法Ａ1及びＡ2を利用する場合は、方法Ａ1及びＡ2におけるタッチ位置自体を始点又は終点と捉えれば良い。
【０１７５】
――切り出し枠の大きさの増減等に関する情報を通知――
次に、切り出し枠の大きさの増減等に関する情報をユーザに通知する方法を説明する。この通知に関する処理として、以下に通知処理Ｄ1〜Ｄ5を説明する。図２９に、通知処理Ｄ1〜Ｄ5の概要を示す。通知処理Ｄiは、図２１の方法Ａ1〜Ａ5の何れとも組み合わせ可能であり、且つ、図２５の方法Ｂ1〜Ｂ6の何れとも組み合わせ可能であり、且つ、図２８の方法Ｃ1〜Ｃ7の何れとも組み合わせ可能である。更に、通知処理Ｄ1〜Ｄ5の内、複数の通知処理を自由に組み合わせて実施することも可能である。
【０１７６】
［通知処理Ｄ1］
通知処理Ｄ1を説明する。通知処理Ｄ1では、切り出し枠の大きさの変化方向の確定前であって且つ切り出し枠の大きさの変化方向を設定するためのタッチパネル操作が成されている最中において、図２７（ａ）のアイコンＩＣD又は図２７（ｂ）のアイコンＩＣUを表示する。図２６（ｂ）を参照して説明したような、対象静止期間中にアイコンＩＣD又はＩＣUを表示する処理は、通知処理Ｄ1の一種である。切り出し枠の大きさの変化方向は確定していないが、現状のタッチパネル操作によると該変化方向が減少方向になると推測される場合にはアイコンＩＣDを表示し、逆に、現状のタッチパネル操作によると該変化方向が増大方向になると推測される場合にはアイコンＩＣUを表示する。図２の表示制御部２０は、この推測をタッチ操作情報（図５参照）に基づいて成すことが可能である。
【０１７７】
例えば、図２５の方法Ｂ5を利用する場合において、タッチ位置が始点から時計回りに弧を描き始めたとき、切り出し枠の大きさの変化方向が減少方向に決定される可能性が高いと推測され、タッチ位置が描く弧の中心角が１８０°を超えた時点で切り出し枠の大きさの変化方向が減少方向であると確定される。逆に、タッチ位置が始点から反時計回りに弧を描き始めたとき、切り出し枠の大きさの変化方向が増大方向に決定される可能性が高いと推測され、タッチ位置が描く弧の中心角が１８０°を超えた時点で切り出し枠の大きさの変化方向が増大方向であると確定される。
【０１７８】
［通知処理Ｄ2］
切り出し枠の大きさの変化方向が確定したとき、該変化方向が確定した旨をユーザに通知するようにしても良く、変化方向の確定を知らせる通知処理が通知処理Ｄ2に内包される。通知処理Ｄ2による通知の方法は任意である。例えば、切り出し枠の大きさの変化方向が減少方向になることが確定した場合、表示画面５１上のアイコンＩＣDを点滅させることで確定を通知しても良いし、その他、人間の五感（視覚、聴覚等）に訴える任意の方法によって変化方向の確定を通知しても良い。該変化方向が増大方向に確定した場合も同様である。通知処理Ｄ1における通知（例えば、アイコンＩＣD又はＩＣUの表示）及び通知処理Ｄ2における通知（例えば、アイコンＩＣD又はＩＣUの点滅表示）は、カメラモニタ１７に成されたタッチパネル操作が増大操作と減少操作のどちらに対応するのかをユーザに知らせる通知に相当し、この通知により、ユーザが所望の操作を行いやすくなる。
【０１７９】
［通知処理Ｄ3］
通知処理Ｄ3を説明する。通知処理Ｄ1では、切り出し枠の大きさの変化率の確定前であって且つ切り出し枠の大きさの変化率を決定するためのタッチパネル操作が成されている最中において、現状の変化率を示す指標を表示する。変化率の示し方は任意であり、例えば、バー形状のアイコン、数値、色などを用いて現状の変化率をユーザに通知すれば良い。
【０１８０】
例えば、図２５の方法Ｂ5及び図２８の方法Ｃ3を利用する場合において、タッチ位置が時計回りに移動することで切り出し枠の大きさの変化方向が減少方向であると確定した場合を考える。この場合、終点の位置が確定するまで減少の変化率は確定しないが、各時点におけるタッチ位置を終点の位置であると仮定したならば、各時点に対応する変化率を算出することができる。終点の位置の確定前に、各時点に対応する変化率を通知する処理が通知処理Ｄ3に相当する。実際に指が表示画面５１から離れて終点の位置が確定すると、減少の変化率が確定する。
【０１８１】
［通知処理Ｄ4］
切り出し枠の大きさの変化率が確定したとき、該変化率が確定した旨をユーザに通知するようにしても良く、変化率の確定を知らせる通知処理が通知処理Ｄ4に内包される。変化率が確定したことを、特定のアイコンの表示の他、人間の五感（視覚、聴覚等）に訴える任意の方法によって通知することができる。また、確定した変化率自体も、通知処理Ｄ4にてユーザに通知される。確定した変化率の示し方は任意であり、例えば、バー形状のアイコン、数値、色などを用いて確定した変化率をユーザに通知すれば良い。
【０１８２】
［通知処理Ｄ5］
切り出し枠の大きさの変化方向及び変化率の確定後、一定の時間長さ（例えば数秒）を有する取消受付期間だけ、取消アイコン又は取消用ジェスチャを明示する取消ジャスチャアイコンを表示するようにしても良い。取消アイコン及び取消ジャスチャアイコンの表示が通知処理Ｄ5に内包される。図３０（ａ）及び（ｂ）のアイコン６８１及び６８２は、夫々、取消アイコン及び取消ジャスチャアイコンの例である。切り出し枠の大きさの変更後、取消受付期間中に、ユーザが取消アイコン６８１を押すタッチパネル操作又は取消ジャスチャアイコン６８２が指し示すタッチパネル操作を成すと、切り出し枠の大きさの変更が取り消され、切り出し枠の大きさは変更前のそれに戻る。取消受付期間中において、取消受付期間が終了するまでの残り時間を表示するようにしても良い。
【０１８３】
例えば、カメラモニタ１７の表示画像が入力画像６２０である状態において（図２２（ａ）及び図２３）、何らかのタッチパネル操作によって切り出し枠の大きさを減少させる処理の実行が確定し、その後、実際に切り出し枠の大きさを減少が実行されることでカメラモニタ１７の表示画像が切り出し画像６３０へと変化したことを考える。この場合、カメラモニタ１７の表示画像が入力画像６２０から切り出し画像６３０へと変化した時点より、取消受付期間の時間長さだけ、切り出し画像６３０と共に取消アイコン６８１又は取消ジャスチャアイコン６８２を表示する。取消アイコン６８１が表示されている期間中において取消アイコン６８１を指にて押すタッチパネル操作が成されたとき、又は、取消ジャスチャアイコン６８２が表示されている期間中において取消ジャスチャアイコン６８２が指し示すタッチパネル操作が成されたとき、表示画像は切り出し枠の変更前の状態に戻される。即ち、カメラモニタ１７の表示画像が切り出し画像６３０から入力画像６２０に戻される。
【０１８４】
――具体的動作例――
次に、上述の各方法及び各処理を利用した、デジタルカメラ１の具体的な動作例を説明する。
【０１８５】
［第１動作例］
図３１を参照して、第１動作例を説明する。図３１は、第１動作例における表示画面５１の様子等を示した図である。第１動作例では、方法Ａ3、Ｂ5及びＣ3が組み合わせて適用され（図２１、図２５及び図２８参照）、且つ、通知処理Ｄ1〜Ｄ5が実施される。また、第１動作例において、第４実施形態で述べた任意の方法を利用することもできる。この他、第１動作例において、第５実施形態で述べた任意の方法（特に例えば第３表示制御方法）及び第６実施形態で述べた任意の方法（特に例えば第６表示制御方法）を利用することができる。
【０１８６】
時刻ＴA(i+1)は、時刻ｔAiよりも後の時刻であるとする。位置７１１〜７１５は、夫々、時刻ＴA1〜ＴA5におけるタッチ位置である。位置７１１〜７１５は互いに異なる位置であり、位置７１１〜７１５を順次繋ぐことで形成される軌跡は弧を描く。位置７１１及び７１５は、夫々、この軌跡の始点の位置及び終点の位置である。タッチ位置が位置７１１から位置７１５を向かう過程において、タッチ位置が時計回り方向に移動しているものとする。例えば、時刻ＴA1〜ＴA5では入力画像６２０が表示画面５１に表示され、時刻ＴA6及びＴA7では切り出し画像６３０が表示画面５１に表示される（図２３参照）。
【０１８７】
時系列に沿って具体的に説明する。時刻ＴA1において指が表示画面５１上の位置７１１に触れ、時刻ＴA1及びＴA2間にタッチ位置が位置７１１から位置７１２へと移動する。この際、表示制御部２０は通知処理Ｄ1を実行する。即ち、図２５の方法Ｂ5に基づき、位置７１１及び位置７１２間の移動軌跡から切り出し枠の大きさの変化方向が減少方向に決定される可能性が高いと推測し、時刻ＴA2においてアイコンＩＣDを表示する（図２７（ａ）も参照）。アイコンＩＣDを表示画面５１上に表示することができるが、図面の煩雑化防止のため、図３１では、アイコンＩＣDを表示画面５１の図示とは別に示している（後述の図３２及び図３３においても同様）。
【０１８８】
続いて、時刻ＴA2及びＴA3間にタッチ位置が位置７１２から位置７１３へと移動する。この際、表示制御部２０は通知処理Ｄ2を実行する。即ち、時刻ＴA3において、位置７１１及び位置７１３間の移動軌跡によって形成される弧の中心角が１８０°を超えたため、切り出し枠の大きさの変化方向が減少方向であると確定し、その確定をユーザに通知すべく時刻ＴA3においてアイコンＩＣDを点滅表示させる。この点滅表示は、一定時間継続される。
【０１８９】
続いて、時刻ＴA3及びＴA4間にタッチ位置が位置７１３から位置７１４へと移動する。この際、表示制御部２０は通知処理Ｄ3を実行する。即ち、時刻ＴA4において、位置７１４が終点であると仮定した上で上記変化率を算出し、算出した変化率（図３１の例において９０％）を表示する。その後、時刻ＴA4及びＴA5間にタッチ位置が位置７１４から位置７１５へと移動し、時刻ＴA5において指が表示画面５１から離されることで終点の位置が位置７１５にて確定する。時刻ＴA5では、終点位置７１５に対応する変化率が算出され、算出された変化率（図３１の例において７５％）が表示される。また、表示制御部２０が通知処理Ｄ4を実行することで、時刻ＴA5において、変化率が確定したことがユーザに通知される。尚、時刻ＴA4及びＴA5において、タッチ位置の移動軌跡に基づく切り出し枠７２０が表示される。また、変化方向の確定後、少なくとも変化率が確定する時刻ＴA5までアイコンＩＣDの表示は継続される。
【０１９０】
時刻ＴA5から取消受付期間が始まり、取消受付期間は時刻ＴA7の直前で終了する。時刻ＴA6は、取消受付期間中の時刻である。従って、時刻ＴA6においては、取消アイコン６８１又は取消ジェスチャアイコン６８２であるアイコン６８０が表示される。取消受付期間が終了するとアイコン６８０の表示は消去され、他のタッチパネル操作を受け付ける状態に至る。尚、時刻ＴA4等において表示される変化率は、原入力画像６００の大きさを基準とした変化率であっても良いし、入力画像６２０の大きさを基準とした変化率であっても良い。また、上述したように、変化率を決定するためにタッチ位置を表示画面５１上の円周に沿って複数周移動させてもよい。
【０１９１】
［第２動作例］
図３２を参照して、第２動作例を説明する。図３２は、第２動作例における表示画面５１の様子等を示した図である。第２動作例では、方法Ａ5、Ｂ5及びＣ6が組み合わせて適用され（図２１、図２５及び図２８参照）、且つ、通知処理Ｄ1〜Ｄ5が実施される。また、第２動作例において、第４実施形態で述べた任意の方法を利用することもできる。この他、第２動作例において、第５実施形態で述べた任意の方法及び第６実施形態で述べた任意の方法（特に例えば第６表示制御方法）を利用することができる。
【０１９２】
時刻ＴB(i+1)は、時刻ｔBiよりも後の時刻であるとする。位置７３１〜７３３は、夫々、時刻ＴB1〜ＴB3におけるタッチ位置である。位置７３１〜７３３は互いに異なる位置であり、位置７３１〜７３３を順次繋ぐことで形成される軌跡は弧を描く。タッチ位置が位置７３１から位置７３３を向かう過程において、タッチ位置が反時計回り方向に移動しているものとする。例えば、時刻ＴB1〜ＴB5では入力画像６２０が表示画面５１に表示され、時刻ＴB6及びＴB7では原入力画像６００が表示画面５１に表示される（図２２（ａ）参照）。
【０１９３】
時系列に沿って具体的に説明する。時刻ＴB1において指が表示画面５１上の位置７３１に触れ、時刻ＴB1及びＴB2間にタッチ位置が位置７３１から位置７３２へと移動する。この際、表示制御部２０は通知処理Ｄ1を実行する。即ち、図２５の方法Ｂ5に基づき、位置７３１及び位置７３２間の移動軌跡から切り出し枠の大きさの変化方向が増大方向に決定される可能性が高いと推測し、時刻ＴB2においてアイコンＩＣUを表示する（図２７（ｂ）も参照）。
【０１９４】
続いて、時刻ＴB2及びＴB3間にタッチ位置が位置７３２から位置７３３へと移動する。この際、表示制御部２０は通知処理Ｄ2を実行する。即ち、時刻ＴB3において、位置７３１及び位置７３３間の移動軌跡によって形成される弧の中心角が１８０°を超えたため、切り出し枠の大きさの変化方向が増大方向であると確定し、その確定をユーザに通知すべく時刻ＴB3においてアイコンＩＣUを点滅表示させる。この点滅表示は、一定時間継続される。
【０１９５】
第２動作例では、変化率の設定方法に方法Ｃ6（図２８参照）を採用しているため、ユーザによる変化率の設定操作を支援すべく、バーアイコン７４０を表示する。バーアイコン７４０は、位置７３３から位置７３１へ向かって伸びるバー形状のアイコンであり、変化率の確定が成されるまで表示される。本例では、少なくとも時刻ＴB4及びＴB5においてバーアイコン７４０が表示される。時刻ＴB4において、表示制御部２０は通知処理Ｄ3を実行する。今、時刻ＴB4におけるタッチ位置は位置７３３と一致しているものとする。そうすると、通知処理Ｄ3の実行により、位置７３３が終点であると仮定した上で上記変化率が算出され、算出された変化率（図３２の例において１００％）が表示される。その後、時刻ＴB4及びＴB5間においてタッチ位置は位置７３３から位置７３３よりも左側に移動し、時刻ＴB5において指が表示画面５１から離されることで終点の位置が確定する。時刻ＴB5では、確定した終点位置に対応する変化率が算出され、算出された変化率（図３２の例において１２０％）が表示される。また、時刻ＴB5において、音声出力等により変化率が確定したことをユーザに通知しても良い。また、変化方向の確定後、少なくとも変化率が確定する時刻ＴB5までアイコンＩＣUの表示は継続される。
【０１９６】
時刻ＴB5から取消受付期間が始まり、取消受付期間は時刻ＴB7の直前で終了する。時刻ＴB6は、取消受付期間中の時刻である。従って、時刻ＴB6においては、取消アイコン６８１又は取消ジェスチャアイコン６８２であるアイコン６８０が表示される。取消受付期間が終了するとアイコン６８０の表示は消去され、他のタッチパネル操作を受け付ける状態に至る。
【０１９７】
［第３動作例］
図３３を参照して、第３動作例を説明する。図３３は、第３動作例における表示画面５１の様子等を示した図である。第３動作例では、方法Ａ5、Ｂ4及びＣ1が組み合わせて適用され（図２１、図２５及び図２８参照）、且つ、通知処理Ｄ1〜Ｄ4が実施される。また、第１動作例において、第４実施形態で述べた任意の方法を利用することもできる。この他、第１動作例において、第５実施形態で述べた任意の方法（特に例えば第３表示制御方法）及び第６実施形態で述べた任意の方法（特に例えば第６表示制御方法）を利用することができる。
【０１９８】
時刻ＴC(i+1)は、時刻ｔCiよりも後の時刻であるとする。位置７５１〜７５３は、夫々、時刻ＴC1〜ＴC3におけるタッチ位置である。位置７５１から位置７５２に向かう方向は右方向であって、位置７５２から位置７５３に向かう方向は左方向であるとする。例えば、時刻ＴC1〜ＴC4では入力画像６２０が表示画面５１に表示され、時刻ＴC5では原入力画像６００が表示画面５１に表示される（図２２（ａ）参照）。
【０１９９】
時系列に沿って具体的に説明する。時刻ＴC1において指が表示画面５１上の位置７５１に触れ、時刻ＴC1及びＴC2間にタッチ位置が位置７５１から位置７５２へと移動する。この際、表示制御部２０は通知処理Ｄ1を実行する。タッチ位置が位置７５１から位置７５２に向かう過程においてタッチ位置の移動方向に反転はないため、時刻ＴC2においては、図２５の方法Ｂ4に基づき、切り出し枠の大きさの変化方向が減少方向に決定される可能性が高いと推測される。従って、時刻ＴC2においてアイコンＩＣDを表示する（図２７（ａ）も参照）。更に、第３動作例では図２８の方法Ｃ1が採用されているため、時刻ＴC2において通知処理Ｄ3を実行することができ、その結果としての変化率（図３３の例において９０％）が表示される。
【０２００】
時刻ＴC2を中心としてタッチ位置の移動方向が反転し、時刻ＴC2及びＴC3間にタッチ位置が位置７５２から位置７５３へと移動する。表示制御部２０は、この反転を検知することで切り出し枠の大きさの変化方向が増大方向に決定されると推測し、時刻ＴC3においてアイコンＩＣUを表示する（図２７（ｂ）も参照）。更に、時刻ＴC3において通知処理Ｄ3を実行し、その結果としての変化率（図３３の例において１１０％）を表示する。
【０２０１】
時刻ＴC4において指が表示画面５１から離されることで、上記変化方向及び変化率が確定する。そうすると、表示制御部２０は通知処理Ｄ2及びＤ4を実行する。即ち、上記変化方向が増大方向になるべきことが確定したことをユーザに通知すべく時刻ＴC4においてアイコンＩＣUを点滅表示させる。この点滅表示は、一定時間継続される。更に、確定した変化率（図３３の例において１１０％）も時刻ＴC4において表示される。また、音声出力等によって変化率が確定したことをユーザに通知しても良い。尚、本例では変化方向及び変化率が時刻ＴC4において確定したと考えているが、タッチ位置の移動方向の反転が検知された時点で、それらを確定させるようにしても良い。
【０２０２】
本実施形態によれば、表示画像の画角を減少させるだけでなく、表示画像の画角の増大をも直感的なタッチパネル操作にて指示することができるようになる。
【０２０３】
＜＜第１０実施形態＞＞
本発明の第１０実施形態を説明する。第１０実施形態は、上述の第７実施形態を基礎とする実施形態であり、本実施形態において特に述べない事項に関しては、第７実施形態において述べた事項が、矛盾なき限り本実施形態にも適用される。従って、第１０実施形態における以下の説明は、撮影モードにおけるデジタルカメラ１の動作説明である。第９実施形態に記載した事項を第７実施形態に適用することができる。第１０実施形態は、第７及び第９実施形態を組み合わせたものに相当する。
【０２０４】
撮影モードにおいて静止画像の撮影を行った時の動作を説明する。撮影モードにおいて静止画像の撮影を行った際、その静止画像を表す１枚のフレーム画像がカメラモニタ１７に表示されると共に入力画像として図９の切り出し処理部６２に与えられる。その入力画像の全体画像がカメラモニタ１７に表示されている状態において、撮影者は方法Ａiによるタッチパネル操作を行うことができる。方法Ａiによるタッチパネル操作が成されると、切り出し設定部６１は、そのタッチパネル操作に基づくタッチ操作情報に基づき切り出し情報を生成し、切り出し処理部６２は該切り出し情報に従って入力画像としての静止画像から切り出し画像を生成する。ここにおける入力画像及び切り出し画像を、夫々、原入力画像６００及び切り出し画像６１０と捉えることができる（図２２（ａ）参照）。
【０２０５】
撮影モードにおいて動画像の撮影を行った時の動作を説明する。撮影モードにおいて動画像の撮影を行った際、その動画像を形成する各フレーム画像がカメラモニタ１７に順次表示されると共に入力フレーム画像として図９の切り出し処理部６２に与えられる。或る入力フレーム画像の全体画像がカメラモニタ１７に表示されている状態において、撮影者は方法Ａiによるタッチパネル操作を行うことができる。方法Ａiによるタッチパネル操作が成されると、切り出し設定部６１は、そのタッチパネル操作に基づくタッチ操作情報に基づき切り出し情報を生成し、切り出し処理部６２は該切り出し情報に従って各入力フレーム画像から切り出し画像を生成する。ここにおける各々の入力フレーム画像を原入力画像６００と捉えることができると共に、各々の入力フレーム画像に対応する切り出し画像を切り出し画像６１０と捉えることができる（図２２（ａ）参照）。
【０２０６】
今、第９実施形態で述べたように、切り出し画像６１０を新たな入力画像６２０と捉え、入力画像６２０が表示されている状態を基準状態として考える（図２２（ａ）参照）。この基準状態は、原入力画像６００に切り出し枠６０１が設定されている状態に相当する。この基準状態において、ユーザは、第９実施形態と同様、原入力画像６００に設定される切り出し枠を切り出し枠６０１から切り出し枠６０１Ａへと変更させるための増大操作と、原入力画像６００に設定される切り出し枠を切り出し枠６０１から切り出し枠６０１Ｂへと変更させるための減少操作を、タッチパネルを用いて成すことができる（図２４（ａ）及び（ｂ）参照）。切り出し枠の大きさを増大又は減少させる操作の例は、第９実施形態で述べた通りである。
【０２０７】
増大操作が成された場合には、切り出し枠６０１Ａ内の画像を切り出し画像として表示することができると共に切り出し枠６０１Ａ内の画像データを切り出し画像の画像データとして記録媒体１５に記録することができる。減少操作が成された場合には、切り出し枠６０１Ｂ内の画像を切り出し画像として表示することができると共に切り出し枠６０１Ｂ内の画像データを切り出し画像の画像データとして記録媒体１５に記録することができる。
【０２０８】
第７実施形態で述べたように、フレーム画像の全体画像は、撮像素子３３の有効画素領域内に配置された各受光画素の出力画像信号より形成される（図１８及び図１９参照）。従って、動画像の撮影時においては、増大操作又は減少操作によって切り出し枠の大きさが変更された際、変更後の切り出し枠（切り出し領域）を撮像素子３３上に定義し、切り出し枠内の受光画素の出力画像信号のみを撮像素子３３から読み出すようにしても良い。ここで読み出した画像信号から形成される画像は、上述してきた切り出し画像と等価なものであり、その画像を出力画像としてカメラモニタ１７（又はＴＶモニタ７）に表示させると共に記録媒体１５に記録するようにしても良い。
【０２０９】
本実施形態によれば、表示画像及び記録画像の画角の減少だけでなく、表示画像及び記録画像の画角の増大をも直感的なタッチパネル操作にて指示することができるようになる。
【０２１０】
＜＜第１１実施形態＞＞
本発明の第１１実施形態を説明する。第１１実施形態は、上述の第８実施形態を基礎とする実施形態であり、本実施形態において特に述べない事項に関しては、第８実施形態において述べた事項が、矛盾なき限り本実施形態にも適用される。従って、第８実施形態と同様、第１１実施形態における以下の説明は、撮影モードにおけるデジタルカメラ１の動作説明である。第９実施形態に記載した事項を第８実施形態に適用することができる。第１１実施形態は、第８及び第９実施形態を組み合わせたものに相当する。
【０２１１】
第８実施形態で述べたように、方法Ａiによるタッチパネル操作によって撮影画角及び撮像素子３３への入射位置を調整することができる。第８実施形態で述べた撮影画角の調整は撮影画角の減少に相当する。ユーザは、タッチパネルを用いて撮影画角減少指示操作及び撮影画角増大指示操作を成すことができる。撮影画角減少指示操作及び撮影画角増大指示操作の夫々は、タッチパネル操作の一種である。第８実施形態で述べた、撮影画角を減少させるためのタッチパネル操作は、撮影画角減少指示操作に相当する。
【０２１２】
撮影画角減少指示操作の方法は、第９実施形態で述べた切り出し枠の大きさを減少させる減少操作と同様であり、撮影画角増大指示操作の方法は、第９実施形態で述べた切り出し枠の大きさを増大させる増大操作と同様である。第９実施形態で述べた事項を本実施形態に適用する際、第９実施形態における切り出し枠（又は切り出し枠の大きさ）を撮影画角へと読み替え、第９実施形態における変化率を撮影画角変化率へと読み替えればよい。撮影画角変化率は、例えば “ＡＮＧAF／ＡＮＧBF”で表される。ＡＮＧBFは撮影画角の変化前における撮影画角を表し、ＡＮＧAFは撮影画角の変化後における撮影画角を表す。
【０２１３】
撮影画角減少指示操作が成されると、第９実施形態で述べた方法に従って撮影画角変化率を決定し、決定した撮影画角変化率に従って、図１の撮影制御部１３は撮影画角を減少させる。図２０（ａ）のフレーム画像５００が表示されているときにおいて撮影画角減少指示操作が成されたならば、撮影画角の減少後に、例えば図２０（ｂ）のフレーム画像５１０が撮影によって得られて表示及び記録されるようになる。
【０２１４】
撮影画角増大指示操作が成されると、第９実施形態で述べた方法に従って撮影画角変化率を決定し、決定した撮影画角変化率に従って、図１の撮影制御部１３は撮影画角を増大させる。図２０（ｂ）のフレーム画像５１０が表示されているときにおいて撮影画角増大指示操作が成されたならば、撮影画角の増大後に、例えば図２０（ａ）のフレーム画像５００が撮影によって得られて表示及び記録されるようになる。
【０２１５】
本実施形態によれば、表示画像及び記録画像の画角の減少だけでなく、表示画像及び記録画像の画角の増大をも直感的なタッチパネル操作にて指示することができるようになる。
【０２１６】
＜＜変形等＞＞
上述した説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態の変形例または注釈事項として、以下に、注釈１及び注釈２を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。
【０２１７】
［注釈１］
上述の各実施形態では、切り出し枠及び拡大指定枠の位置及び大きさを指定するためのポインティングデバイスの例としてタッチパネルを利用しているが、タッチパネル以外のポインティングデバイス（例えば、ペンタブレットやマウス）を利用して、切り出し枠及び拡大指定枠の位置及び大きさを指定することも可能である。
【０２１８】
［注釈２］
本実施形態に係るデジタルカメラ１を、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。ソフトウェアを用いてデジタルカメラ１を構成する場合、ソフトウェアにて実現される部位についてのブロック図は、その部位の機能ブロック図を表すことになる。ソフトウェアを用いて実現される機能をプログラムとして記述し、該プログラムをプログラム実行装置（例えばコンピュータ）上で実行することによって、その機能を実現するようにしてもよい
【符号の説明】
【０２１９】
１  デジタルカメラ
２  主筐体
３  モニタ筐体
５  被写体
６  テレビ受信機
７  ＴＶモニタ
１１  撮像部
１７  カメラモニタ
２０  表示制御部
２１  カメラ運動判定部
３０  ズームレンズ
３１  フォーカスレンズ
３３  撮像素子
３５  光学系
３６  補正レンズ
５１  表示画面
５２  タッチ検出部
６１  切り出し設定部
６２  切り出し処理部
６３  追尾処理部
３００  光軸
【図２】
2011050038.tif 000003
【図３】
2011050038.tif 000004
【図４】
2011050038.tif 000005
【図５】
2011050038.tif 000006
【図６】
2011050038.tif 000007
【図７】
2011050038.tif 000008
【図８】
2011050038.tif 000009
【図９】
2011050038.tif 000010
【図１０】
2011050038.tif 000011
【図１２】
2011050038.tif 000012
【図１３】
2011050038.tif 000013
【図１４】
2011050038.tif 000014
【図１５】
2011050038.tif 000015
【図１６】
2011050038.tif 000016
【図１７】
2011050038.tif 000017
【図１８】
2011050038.tif 000018
【図１９】
2011050038.tif 000019
【図２０】
2011050038.tif 000020
【図２２】
2011050038.tif 000021
【図２３】
2011050038.tif 000022
【図２４】
2011050038.tif 000023
【図２６】
2011050038.tif 000024
【図２７】
2011050038.tif 000025
【図２９】
2011050038.tif 000026
【図３０】
2011050038.tif 000027
【図３１】
2011050038.tif 000028
【図３２】
2011050038.tif 000029
【図３３】
2011050038.tif 000030
【図１】
2011050038.tif 000031
【図１１】
2011050038.tif 000032
【図２１】
2011050038.tif 000033
【図２５】
2011050038.tif 000034
【図２８】
2011050038.tif 000035