(57)【要約】【課題】  流し撮り撮影の際に、撮影者がカメラのパンニング速度が適正かどうかを判断することが難しい場合があった。【解決手段】  撮影光学系を通過した光線が集光する撮像素子と、前記撮像素子で取得された撮像信号より主被写体の動きベクトルを検出する動きベクトル検出手段と、前記動きベクトル検出手段結果より前記撮像装置の主被写体との相対的な移動速度を検出する相対速度検出手段と音声を発することにより通知を行なう音声通知手段とを有し、前記撮像装置の露光開始前の前記相対速度検出手段の結果に応じて異なる通知音を発生することを特徴とする撮像装置。【選択図】  図１
2020191547.tif 000002
【特許請求の範囲】
【請求項１】
撮影光学系を通過した光線が集光する撮像素子と、
前記撮像素子で取得された情報に基づき主被写体の動きベクトルを検出する動きベクトル検出手段と、
前記動きベクトル検出手段の結果より前記撮像装置の主被写体との相対的な移動速度を検出する相対速度検出手段と
音声を発することにより通知を行なう音声通知手段とを有し、
前記撮像装置の露光開始前の前記相対速度検出手段の結果に応じて異なる通知音を発生することを特徴とする撮像装置。
【請求項２】
流し撮り通知モードを有し、
前記流し撮り通知モードにおいて露光開始前の前記相対速度検出手段の結果に応じて異なる通知音を発することを特徴とする請求項１に記載の撮像装置。
【請求項３】
露光開始前の前記相対速度検出手段の結果による前記撮像装置の相対速度が第１の速度範囲内である場合は第１の通知音を発することを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
露光開始前の前記相対速度検出手段の結果による前記撮像装置の速度が第１の速度範囲よりも速い場合は第２の通知音を鳴らし、第１の速度範囲よりも遅い場合は第３の通知音を発することを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記第１の通知音、前記第２の通知音、及び前記第３の通知音はそれぞれ周波数が異なることを特徴とする請求項４記載の撮像装置。
【請求項６】
前記第２の通知音よりも前記第３の通知音の方が周波数が低いことを特徴とする請求項５記載の撮像装置。
【請求項７】
前記第１の通知音は前記第２の通知音及び前記第３の通知音よりも周波数が高い又は低いことを特徴とする請求項５または６記載の撮像装置。
【請求項８】
前記第２の通知音、及び前記第３の通知音は前記撮像装置の相対速度に合わせて連続的に周波数が変化することを特徴とする請求項５乃至７のいずれか１項に記載の撮像装置。
【請求項９】
前記音声通知手段が指向性を有し、
前記音声通知手段は露光開始前の前記撮像素子の移動方向及び、前記撮像装置の主被写体に対する相対速度の第１の速度範囲に対する差分の符号に応じて音声の指向性を切り替えることを特徴とする請求項１乃至８のいずれか１項に記載の撮像装置。
【請求項１０】
前記動きベクトル検出手段の結果より前記撮像装置の移動方向と主被写体と移動方向のベクトルからなす角度が所定の角度以上である場合は第４の通知音を発することを特徴とする請求項１乃至９のいずれか１項に記載の撮像装置。
【請求項１１】
前記撮像装置の移動速度を慣性力により検出する絶対速度検出手段と、
前記撮影光学系の一部、または前記撮像素子を光軸に対して略直交方向に併進移動させることで前記撮像装置のブレ補正を行なうブレ補正手段とを有し
露光の直前の前記相対速度検出手段の結果と前記速度検出手段の結果とに基づいて露光中にブレ補正手段を駆動する流し撮り補正モードを有し、
流し撮り補正モード時において、露光前の前記相対速度検出手段と前記速度検出手段の結果に基づき、前記撮像装置の被写体に対する相対速度が前記第１の速度範囲内に収まるように補正可能な速度範囲の場合は、前記音声通知手段により第５の通知音を発することを特徴とする請求項１乃至８のいずれか１項に記載の撮像装置。
【請求項１２】
前記撮像装置の移動速度を慣性力により検出する絶対速度検出手段を有し、
前記絶対速度検出手段の結果より相対速度に換算し、露光中は前記絶対速度検出の結果より換算した相対速度に応じて通知音を切り替えることを特徴とする請求項１乃至１１のいずれか１項に記載の撮像装置。
【請求項１３】
前記撮像素子で取得された画像及び前記撮像装置の露光開始前の前記相対速度検出手段の結果を通知表示する画像表示部と、
前記撮像装置の撮影状態を検出する撮影状態検出手段を有し、
前記撮影状態検出手段の結果に応じて前記音声通知手段の出力と前記画像表示部の通知表示を切り替えることを特徴とする請求項１乃至１２のいずれか１項に記載の撮像装置。
【請求項１４】
前記撮像装置の移動速度を慣性力により検出する絶対速度検出手段を有し、
前記撮像装置の移動速度が所定の速度を超える場合は流し撮り通知モードに切り替えることを特徴とする請求項１乃至１３のいずれか１項に記載の撮像装置。
【請求項１５】
撮影光学系を通過した光線が集光する撮像素子を有する撮像装置の制御方法であって、
前記撮像素子で取得された情報に基づき主被写体の動きベクトルを検出する動きベクトル検出ステップと、
前記動きベクトル検出ステップの結果より前記撮像装置の主被写体との相対的な移動速度を検出する相対速度検出ステップと
音声を発することにより通知を行なう音声通知ステップとを有し、
前記撮像装置の露光開始前の前記相対速度検出ステップの結果に応じて異なる通知音を発生することを特徴とする撮像装置の制御方法。
【請求項１６】
コンピュータを、請求項１乃至１３のいずれか１項に記載の撮像装置の各手段として機能させるための、コンピュータが読み取り可能なプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は音声出力部を有する交換レンズとカメラからなる撮像装置に関する。
【背景技術】
【０００２】
カメラでの撮影手法の一つとして流し撮りと呼ばれる方法がある。これは動いている被写体を撮影する際に、被写体の移動方向に合わせてカメラをパンニングさせ、遅いシャッター速度で撮影することで、背景の画像はブレさせながら、被写体はぶれずに静止しているかのような画像を得る手法である。流し撮りにおいて、撮像面上で被写体が静止しているように被写体の移動速度に対しカメラのパンニング速度を適正に調整することが必要だが、パンニング速度を適正に合わせるのは熟練技術が必要である。特許文献１ではカメラのパンニング量と露光開始前の被写体の移動量との差を検出し、露光期間中に表示手段に表示する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１６−１１１６８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述の従来技術では、次のような課題がある。特許文献１では露光期間中に表示手段にカメラのパンニング量と露光開始前の被写体の移動量との差を表示するが、露光中に既にパンニング量が適正でない場合は、所望の流し撮り写真を得ることができない。また、画像を見てパンニング速度を確認しなくてはいけないため、撮影に集中している場合に視認が困難である。
【０００５】
そこで本発明は、流し撮り撮影の際に、撮影者がカメラのパンニング速度が適正かどうかを判断しやすくすることを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明の撮像装置は、撮影光学系を通過した光線が集光する撮像素子と、前記撮像素子で取得された撮像信号より主被写体の動きベクトルを検出する動きベクトル検出手段と、前記動きベクトル検出手段結果より前記撮像装置の主被写体との相対的な移動速度を検出する相対速度検出手段と音声を発することにより通知を行なう音声通知手段とを有し、前記撮像装置の露光開始前の前記相対速度検出手段の結果に応じて異なる通知音を発生することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、流し撮り撮影の際に、撮影者がカメラのパンニング速度が適正かどうかを判断しやすくなる。
【図面の簡単な説明】
【０００８】
【図１】（ａ）第１の実施形態におけるカメラを示すブロック図である。（ｂ）第１の実施形態におけるカメラの断面模式図である。
【図２】第１の実施形態における相対速度と通知音の関係を示すグラフである。
【図３】第１の実施形態における流し撮りを説明する図である。
【図４】第１の実施形態における音声出力部の動作を示すフローチャートである。
【図５】第１の実施形態における主被写体の移動方向とパンニング方向のなす角度を示す図である。
【図６】第２の実施形態におけるカメラの背面図である。
【図７】第２の実施形態における主被写体の移動方向とパンニング方向を示す図である。
【図８】第２の実施形態における音声出力部の動作を示すフローチャートである。
【図９】第３の実施形態におけるパンニング速度とブレ補正量の関係を示すグラフである。
【図１０】第３の実施形態における相対速度と通知音の関係を示すグラフである。
【発明を実施するための形態】
【０００９】
以下に、本発明を実施するための形態について、添付の図面を用いて詳細に説明する。
【００１０】
なお、以下に説明する実施の形態は、本発明の実現手段としての一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されてもよい。また、各実施の形態を適宜組み合せることも可能である。
【００１１】
［第１の実施形態］
＜撮像システム＞
以下、第１の実施形態における撮像システムについて説明する。
【００１２】
まず、図１を用いて本発明におけるデジタル一眼カメラの構成を述べる。図１（ａ）は本発明における撮像装置であるデジタル一眼カメラのブロック図を図１（ｂ）はデジタル一眼カメラの断面模式図を示している。同じ機能を有するものについては同じ番号を付してある。
【００１３】
図１（ａ）において、１はカメラを示しており、２は交換レンズを示している。カメラ１は、交換レンズ２を通過して集光された光線を受光する撮像素子１１、撮像素子１１で光電変換された情報から画像を生成する画像処理部１２、画像情報などの情報が記録されるメモリ手段１３を持つ。さらに、撮影素子１１への光線の遮光・通過を制御するフォーカルプレーンシャッター１４（以下、シャッター）、ユーザーの操作を認識する操作部１５、画像などの表示を行う画像表示部１６、通知音を発生させる音声出力部１７を有する。そして、これらの制御を司るカメラシステム制御部１０を有する。特に、カメラシステム制御部１０に包括される通知音制御部１８によって音声出力部１７から発せられる音声が制御される。なお、音声出力部１７が音声通知手段に相当する。また、操作部１５は押下されることで撮影命令を受けるレリーズ釦を含む。
【００１４】
図１（ｂ）に示すように、カメラ１は画像表示部１６である背面液晶部１６ａと、ＥＶＦ１６ｂを有している。ＥＶＦ１６ｂは表示面方向にファインダー光学系１９を有し、撮影者は接眼レンズ１９ａ側から目視することでＥＶＦ１６ｂの画像を確認することができる。
【００１５】
一方、交換レンズ２は２１を光軸として光線を通過させる撮影光学系２２、撮影光学系を調整するレンズ駆動手段２３を持つ。さらに、撮影光学系の一部であるブレ補正レンズを光軸略直交方向に併進移動させるブレ補正機構２４、カメラ１のブレを検出するブレ検出手段２５、これらの制御を司るレンズシステム制御部２０を有している。なお、レンズ駆動手段２３はブレ補正機構２４、フォーカスレンズ２５、絞り２６を制御する。
【００１６】
また、カメラ１と交換レンズ２は電気的に接続される通信手段３０を介して信号のやり取りを行うことができる。
【００１７】
交換レンズ２の撮影光学系２２及びシャッター１４の開口を通過し撮像素子１１で受光した光線に対し光電変換が行われ、不図示のＡ／Ｄ変換器により光電変換出力に対し量子化処理が行われる。画像処理部１２は、内部にホワイトバランス回路、ガンマ補正回路、補間演算回路等を有しており、カメラシステム制御部１０の命令を受けて、撮像素子１１から取得した信号から画像データを生成する。画像処理部１２で生成されたデータは、メモリ手段１３で記憶される。
【００１８】
カメラシステム制御部１０はＣＰＵ（中央演算処理装置）等を備え、交換レンズ２との通信を含むカメラ１の制御を統括する。カメラシステム制御部１０は、撮像の際のタイミング信号等を生成して各部に出力する。カメラシステム制御部１０は、操作部１５に含まれるレリーズ釦が押下され操作指示を受け付けた場合、該指示に応じて撮像素子１１の制御及び、レンズシステム制御部２５へ命令信号を送信する。また、カメラ１は後述する流し撮り通知モードを含む複数の撮影モードを有しており、撮影者の操作により撮影モードが設定されている。
【００１９】
また、交換レンズ２の撮影光学系２２はフォーカスレンズや絞りなどを有しており、レンズシステム制御部２０からの命令に基づきレンズ駆動手段２３により光学系の調整が行われる。
【００２０】
＜流し撮りの動作について＞
次に図２を用いて流し撮りの動作について説明する。図２（ａ）は流し撮り時のカメラと主被写体の動きを示した図であり、図２（ｂ）は図２（ａ）で示す露光時のシャッター速度が短い場合に撮影される画像を、図２（ｂ）は図２（ａ）で示す露光時のシャッター速度が長い流し撮り時に撮影される画像を示している。図２において１はカメラを、４１は流し撮り時に静止させたい主被写体を、４２は流してブレさせたい背景を示している。図２（ａ）において主被写体４１は矢印５１で示す方向に移動している。一方、カメラ１は矢印５１と同じ方向である矢印５２で示すようにパンニング動作をして主被写体４１を追って撮影している。なお、本明細書におけるパンニングとは図２（ａ）の矢印５２のように撮影者が撮影者を中心としてカメラを回転移動させる動作を指し、パンニング速度はその時の絶対的な角速度に相当する。露光時のシャッター速度が短い場合は、図２（ｂ）で示すように主被写体４１及び背景４２が静止した画像を取得することができる。一方、主被写体４１の速度に対しカメラ１のパンニング速度が適正である場合は、図２（ｃ）で示すように主被写体４１は静止しつつ、背景４２がブレた画像を得ることができる。しかしながら、主被写体４１の速度に対しカメラ１のパンニング速度が適正速度に対し速い場合や遅い場合は、図２（ｄ）で示すような背景４２だけでなく主被写体４１もブレた画像となってしまう。特に習熟度が十分でない撮影者の場合は、画像表示部１６を目視しながら流し撮り撮影を行なっていても、カメラ１を適正な速度でパン動作させること難しいため、所望の流し撮り画像を得ることが困難である。
【００２１】
そこで本発明では、露光前に取得される画像情報より主被写体４１に対するカメラ１のパンニング速度が適正かどうかを音声出力部１７により通知音を発することで通知し、撮影者がパンニング速度を適正な速度に調整することを容易にする。なお、本実施形態の露光時とは静止画撮影の本露光のことをさし、静止画露光前のいわゆるライブビュー表示時の予備露光と区別される。以下、この予備露光のことをライブビュー撮影と呼ぶ。なお本発明ではカメラ１の移動を回転動作であるパンニング動作を例にして説明するが、カメラ１を主被写体の移動方向に対して平行に水平移動させて撮影してもかまわない。
【００２２】
上述した流し撮り時におけるカメラ１の適正なパンニング速度は、主被写体の移動速度は当然のことながら主被写体までの距離、カメラ１に装着された交換レンズ２の焦点距離などによって異なる相対的なものである。なぜならば、主被写体の速度が同じであっても焦点距離や被写体の距離によって、撮像素子１１の像面上での主被写体の移動速度は異なるからである。例えば、主被写体４１がある速度で移動しており、同じ場所から撮影した場合でも、焦点距離が短い場合の適正なパンニング速度は、焦点距離が長い場合よりも遅くなる。なぜならば主被写体までの距離が同じであれば、焦点距離が短い方が主被写体の像倍率が小さく、主被写体の像面上での移動速度は小さくなるので、適正なパンニング速度は焦点距離が長いときに比べて遅くなる。よって、パンニング速度が適正かどうかをジャイロなどの慣性センサのみで検出することは困難である。
【００２３】
そこで、本実施形態では、動きベクトル検出手段で流し撮り撮影の露光前に取得される時系列画像を用いて撮像素子面上での画像の移動量、いわゆる動きベクトルを検出する。そして、検出された動きベクトルを用いて主被写体の像面上での像面移動速度を算出することで、カメラ１の主被写体との相対的な移動速度を検出することができる。主被写体の動きベクトルが０から一定量の範囲内である場合、そのままのパンニング速度を維持して流し撮り撮影の露光を行なえば、露光時の主被写体のブレがないので、適正な流し撮り画像を撮影することができる。よって、主被写体の動きベクトルが０から一定量の範囲内である、つまり検出された相対速度がある第１の速度範囲内の場合は、パンニング速度が適正であると判断する。
【００２４】
そして、第１の通知音を音声出力部１７から発することで撮影者に適正なパンニング速度であることを知らせて、露光開始をしてもよいことを通知する。一方、主被写体の動きベクトルが一定量の範囲を超えている場合、動きベクトルの量と方向に応じてカメラ１の相対的な移動速度が速い、または遅いと判断する。そして相対速度の速さ、または遅さに応じて異なる通知音を発し、撮影者にパンニング速度が適正になるように促す。このように制御することで、撮影者は流し撮り撮影を容易に行なうことができる。なお、この動きベクトルの検出方法は公知の技術であるため詳細を割愛する。
【００２５】
図３は本発明における、カメラ１のパンニング動作による主被写体に対する相対移動速度と通知音の関係について説明する図である。
【００２６】
図３において、横軸は相対速度検出手段により検出された主被写体の移動方向の相対速度の大きさを示しており、目盛５３で示す位置がパンニング速度が適正であり、像面上での被写体像が静止している状態である。右側に行くに従い相対速度が早くなり、目盛５３より右側はパンニング速度が適正速度より早く、目盛５３より左側はパンニング速度が適正速度より遅いことを示している。そして、縦軸は通知音の周波数を示しており、対数で軸を表現している。そして、線５７、５８、５９はそれぞれ発生させる通知音の周波数を示しており、５７が第１の通知音を、５８が第２の通知音を、５９は第３の通知音を示している。
【００２７】
上述したようにカメラ１の主被写体に対する相対速度は、動きベクトル検出結果から求められ、相対速度の量は動きベクトル量から求められる。動きベクトルの量とは動きベクトル検出手段により検出された画素数に相当する。また、相対速度が早い、または遅いは、主被写体の動きベクトルの方向とパンニングの方向によって決まる。例えば、図２（ａ）で示すようにカメラのパンニング方向が左から右の場合、主被写体の動きベクトルについて左側のベクトルが検出される場合は、パンニング動作による相対速度が早いことになり、右側のベクトルが検出される場合は遅いことになる。一方、カメラのパンニング方向が右から左の場合、主被写体の動きベクトルについて右側のベクトルが検出される場合は、パンニング動作による相対速度が早いことになり、右側のベクトルが検出される場合は遅いことになる。
【００２８】
上述したように第１の速度範囲５４は適正なパンニングの相対速度の範囲の速度でパンニングをしているので、主被写体の像面上でのブレは許容範囲であり静止しているとみなせる。第１の速度範囲５４は例えば主被写体の動きベクトルの量が５画素以下である状態である。また、第２の速度範囲５５は第１の速度範囲より早く、第３の速度範囲５６は第１の速度範囲より遅い速度を示している。第２及び第３の速度範囲は、例えば主被写体の動きベクトルの量が５画素から３０画素までの状態である時などと設定される。
【００２９】
流し撮り撮影時の露光前のパンニング速度が適正速度を含む第１の速度範囲よりも遅く、相対速度が第３の速度範囲５６に含まれる場合は、線５９で示される周波数の第３の通知音が発せられる。第３の通知音の周波数は相対速度の遅れ量に応じて変化し、第３の速度範囲の最も遅い場合（範囲５６の左端）は、音声出力部１７から１００Ｈｚの音が発せられ、相対速度が徐々に第１の速度範囲に近づくにつれ連続的に周波数が高くなっていく。このように通知音が変化することで、撮影者は流し撮り撮影時のパンニング速度が遅いのかを視線を変更することなく認知することができ、パンニング速度を調整することが容易になる。そして、相対速度が適正速度を含む第１の速度範囲に収まったら、音声出力部１７からの音声が、４００Ｈｚまで変化して発せられていた第３の通知音から、線５７で示す４０００Ｈｚの第１の通知音に変更される。音声出力部１７からの通知音が４００Ｈｚから４０００Ｈｚに不連続的変化することで、撮影者はパンニング速度が適正になったことを容易に認知することができ、レリーズ釦を押下し静止画露光の撮影命令を下すことで良好な流し撮り画像を得ることができる。なお、相対速度が第１の速度範囲５４に収まっている間は、第１の通知音が連続的に発せられる。
【００３０】
一方、露光前のパンニング速度が適正速度を含む第１の速度範囲よりも早く、相対速度が第２の速度範囲５５に含まれる場合は、線５８で示される周波数の第２の通知音が発せられる。第２の通知音の周波数は相対速度の早さの量に応じて変化し、第２の速度範囲の最も早い場合（範囲５５の右端）は、音声出力部１７から２００００Ｈｚの音が発せられ、相対速度が徐々に第１の速度範囲に近づくにつれ連続的に周波数が低くなっていく。
【００３１】
そして、相対速度が適正速度を含む第１の速度範囲に収まったら、音声出力部１７からの音声が、１０００Ｈｚまで変化して発せられていた第２の通知音から、４０００Ｈｚの第１の通知音に変更される。パンニング動作による相対速度が遅い時は低い周波数の第３の通知音が発せられ、相対速度が早い時は高い周波数の第２の通知音が発せられるので、撮影者は直感的にパンニング速度が適正速度に対して早いか、遅いかを認知しやすい。
【００３２】
また、第１の通知音の周波数が、第２の通知音の周波数帯域及び第３の通知音の周波数帯域から、大きく離れた高い周波数に設定されている。つまり、第２の通知音及び第３の通知音から第１の通知音に変化するとき、断続的な周波数の変化となる。よって、撮影者はパンニング速度が適正になったおことを認知しやすい。なお、第１の通知音の周波数は、第２及び第３の通知音の周波数よりも低く設定されていてもよい。
【００３３】
このように本実施形態では、本発明では動きベクトル検出により用いてカメラと主被写体との相対的な移動速度を検出し、相対速度の大きさに応じて異なる通知音を発する。
【００３４】
具体的には、相対速度が第１の速度範囲内である時は適正速度と判断し、音声出力部１７から第１の通知音を発し、第１の速度範囲より早い時は第２の通知音を発し、第１の速度範囲より遅い時は第３の通知音を発する。また、第１、第２、第３の通知音は、それぞれことなる周波数帯域の音であり、第２の通知音よりも第３の通知音の方が低く設定されている。また、第２の通知音、及び第３の通知音は、相対速度に合わせて連続的に周波数を変化させている。また、第１の通知音は第２の通知音、及び第３の通知音よりも高く設定されている。
【００３５】
上述の通知音は、カメラ１が流し撮り通知モードに設定されている時のみ発せられる。なぜならば、流し撮り通知モード以外も通知音が発すると、一般的なカメラ及び主被写体が静止した撮影を行なった際に第１の通知音がなり続けてしまい、撮影者にとって煩わしいからである。
【００３６】
＜流し撮り時の撮影動作について＞
次に、図４を用いて本実施形態の流し撮り時の撮影動作のフローについて説明する。図４は撮影動作を説明するフローチャートである。本フローチャートに示す処理は、カメラ１のカメラシステム制御部１０が入力信号やプログラムに従い、カメラ１の各部を制御することにより実現される。また、本フローチャートの処理は、ユーザのメニュー操作等によって、撮像モードを開始する指示を受け付けたことに応じて、ライブビューのために順次撮像されるスルー画像の表示と共に開始される。また、特に記載しない限り、各ステップはカメラシステム制御部１０によって実行される。
【００３７】
フローが開始すると、ステップＳ１０１では静止画撮影露光前のライブビュー撮影が開始される。
【００３８】
ステップＳ１０２において、ライブビュー撮影により取得された画像から、主被写体を検出する。主被写体の選定方法は、もっとも近傍の被写体を主被写体として検出してもよいし、予め撮影者が指定したエリアに含まれる被写体を主被写体としてもよいし、その他の選定方法を用いてもよい。また、レリーズ釦が２段階の押し込み深さがあり、１段階目のいわゆる半押し動作をした際に、主被写体の選択を開始するなどでもよい。このステップにおいて撮影者は流し撮り撮影のためのパンニング動作を開始する。
【００３９】
ステップＳ１０３において、撮影モードが流し撮り通知モードかを検出する。流し撮り通知モードでないと判断された場合はステップＳ１１１に進み、流し撮り通知モードでないと判断された場合はステップＳ１０４に進む。
【００４０】
ステップＳ１０４において、動きベクトル検出手段により主被写体の動きベクトルを検出し、相対速度検出手段によりカメラ１の主被写体に対する相対速度を検出する。
【００４１】
ステップＳ１０５において、ステップＳ１０４で検出された相対速度が第１の速度範囲以内かを判定する。相対速度が第１の速度範囲以内の場合はステップＳ１０６に進み、それ以外はステップＳ１０７に進む。
【００４２】
ステップＳ１０６において、相対速度が第１の速度範囲以内と判断され音声出力部より第１の通知音を発生させ、ステップＳ１１１に進む。
【００４３】
ステップＳ１０７において、ステップＳ１０４で検出された相対速度が第２の速度範囲以内かを判定する。相対速度が第２の速度範囲以内の場合はステップＳ１０８に進み、それ以外はステップＳ１０９に進む。
【００４４】
ステップＳ１０８において、相対速度が第２の速度範囲以内と判断され音声出力部より第２の通知音を発生させる。なお、ステップＳ１０８では図３を用いた説明したように、相対速度に応じて通知音の周波数を変更する。
【００４５】
ステップＳ１０９において、ステップＳ１０４で検出された相対速度が第３の速度範囲以内かを判定する。相対速度が第３の速度範囲以内の場合はステップＳ１１０に進み、それ以外はステップＳ１１１に進む。
【００４６】
ステップＳ１１０において、相対速度が第３の速度範囲以内と判断され音声出力部より第３の通知音を発生させる。なお、ステップＳ１１０では図３を用いた説明したように、相対速度に応じて通知音の周波数を変更する。
【００４７】
ステップＳ１１１において、操作部材１５に含まれるレリーズ釦が押下され、静止画の撮影命令が下されたかを判断する。撮影命令が下されたと判断するまで、ステップＳ１０３に戻りフローを繰り返す。撮影命令が下されたと判断したら、ステップＳ１１２に進む。
【００４８】
ステップＳ１１２において、音声出力部１７から発していた通知音を停止させる。
【００４９】
ステップＳ１１３において、シャッター１４が駆動され静止画撮影の露光が開始される。
【００５０】
ステップＳ１１４において、シャッター１４の不図示の遮光幕が閉じられて静止画撮影の露光が終了する。
【００５１】
ステップＳ１１５では、操作部材に含まれる電源スイッチが押下され、撮影が終了されたかを判断する。電源スイッチの操作がない場合は、撮影はまだ終了しないと判断しステップＳ１０３に戻る。そして、撮影終了と判断されるとフローを終了する。
【００５２】
以上のようなフローで撮影動作が行われる。
【００５３】
以上説明したように、本発明では静止画撮影の露光前に得られた画像の動きベクトルを用いてカメラ１の主被写体に対する相対速度を検出する。そして、相対速度に応じて異なる通知音を発生させる。相対速度が適正なパンニング速度になる第１の速度範囲以内の場合は第１の通知音を発し、第１の速度範囲より早い場合は第２の通知音を、第１の速度範囲より遅い場合は第３の通知音を発する。このように制御することで、撮影者に流し撮りのパンニング速度が適正速度かどうかを通知し、好適な流し撮り撮影画像を得ることを容易にしている。つまり、流し撮り撮影の際に、撮影者がカメラのパンニング速度が適正かどうかを判断しやすい。また、第１の通知音の周波数は第２の通知音及び第３の通知音の周波数よりも高く設定されているので、連続的に変化する第２の通知音、第３の通知音と明確に差異を認識しやすい。
【００５４】
なお、本実施形態では、第１、第２、及び第３の通知音を、異なる周波数で発することにより、撮影者にパンニング速度が適正かどうかを通知していたが、その他の方法をとってもよい。例えば、第１、第２、及び第３の通知音で音声の大きさを変えて撮影者に通知してもよい。さらに、周波数、音量、音色の変化を組み合わせてもよい。例えば、第１及び第３の通知音はサイン波の単波長で通知音を発生させるが、第２の通知音は異なる周波数かつ鋸波や矩形波を発生させ音色を変えることで明確に差異があることを通知するようにしてもよい。もちろん、第１及び第３の通知音についても、鋸波や矩形波やその他の合成波を用いてもよい。その場合、主となる周波数を第１、第２及び第３の通知音で異ならせておくことが望ましい。
【００５５】
また、相対速度が第１の速度範囲内の間は第１の通知音を連続的に出し続けてもよいし、第１の速度範囲内に収まった瞬間だけ、突発的に第１の通知音を発してもよい。また、第２の通知音は相対速度に合わせて連続的に周波数を変化させているが、第１、及び第３の通知音の周波数と異なり、撮影者が第１及び第３の通知音との差異を認知できれば、通知音の周波数は固定でも構わない。同様に、第３の通知音についても周波数は固定でも構わない。また、第２と第３の通知音の周波数はそれぞれの値で固定のまま、相対速度に合わせて通知音の音量を変えるようにしてもよい。例えば周波数は一定のまま、相対速度が第１の速度範囲に近づくに従い音量が徐々に上がっていく、などでもよい。
【００５６】
また、本実施形態では、通知音によって撮影者のパンニング速度が適正かどうかを通知しているが、通知音と同時に画像表示部１６に通知表示をしてもよい。または、設定や撮影者の状態などに合わせて通知音のみ、通知表示のみ、両方を切替えて通知してもよい。他にも次のように切替えを行なってもよい。撮影者がカメラ１の接眼レンズ１９ａを覗いてＥＶＦ１６ｂを目視している状態を検出する接眼センサを有しているとする。接眼センサで撮影者が接眼レンズ１９ａを覗いていることを検出すると、ＥＶＦ１６ｂへ画像を表示し、検出されない場合は背面液晶部１６ａへ画像を表示するように制御される。この時、撮影者が接眼レンズ１９ａを覗いている場合は、撮影者は確実にＥＶＦ１６を観察していると判断できる。
【００５７】
しかし、背面液晶部１６ａに表示している場合は、撮影者が背面液晶部１６ａを観察しているとは限らない。そこで、接眼センサにより撮影者が接眼レンズ１９ａを覗いていることを検出されない場合は、音声通知手段により通知音を必ず発生させるようにし、撮影者の接眼状態が検出される場合は通知表示のみにするなど切替えてもよい。この接眼センサが撮影状態検出手段の一つの例にあたり、接眼センサは例えば赤外線投光部、受光部で構成される。
【００５８】
また、本実施形態では、図５で示すように静止画撮影露光中は通知音を発しないように制御しているが、静止画撮影露光中も通知音を発するようにしてもよい。しかしながら、シャッター速度の長い静止画撮影露光中は、動きベクトルを得ることができない。そこで、以下のような制御を行い、静止画撮影露光中のパンニング速度が適正かどうかを判断してもよい。
【００５９】
図１を用いて説明したように、カメラ１は交換レンズ２側にブレ検出手段２５を有しており、ブレ検出手段２５は慣性力を用いて角速度を検出するジャイロであるとする。ジャイロは慣性力を利用するので静止画露光中もパンニング速度である角速度を検出することができ、カメラ１のパンニング動作の絶対速度検出手段に相当する。そこで、静止画露光前は動きベクトル検出手段結果から相対速度検出手段によりカメラ１の主被写体に対する相対速度を求め、ブレ検出手段２５によりカメラ１のパンニングによる絶対速度を検出する。そして露光前に、相対速度検出手段から求められる相対速度とブレ検出手段２５から求められる絶対速度より、相対速度と絶対速度の換算を行なう。本実施形態では撮影者を中心とした回転動作であるパンニング動作について述べるので、絶対速度は絶対角速度に相当する。
【００６０】
まず、パンニング動作中のあるタイミングでブレ検出手段２５から求められた絶対角速度をωとし、その時の動きベクトルから求められる相対速度をＶとする。交換レンズ２の焦点距離をｆ、ブレ角速度をωと置いたとき、像面上のブレｓはｓ＝ｆ・ωで表されるので、像面上でのブレ量と等価であるので相対速度Ｖは数１で表される。なお相対速度はパンニング方向を正とした量である。
Ｖ＝ｐ・ω−ｑ  （数１）
【００６１】
よって、パンニング動作中の時刻ａでの絶対角速度ωａ、相対速度Ｖａと、そこからパンニング速度の変化した時刻ｂでの絶対角速度ωｂ、相対速度Ｖｂを用いて係数ｐ、ｑを求めれば絶対速角度を相対速度に換算することができる。なお、パンニング速度が適正となる絶対角速度は数２となる。
ω＝ｑ／ｐ  （数２）
【００６２】
そして、静止画露光中はブレ検出手段２５の検出結果より、相対速度への換算式に基づいて相対速度を求め、図１を用いてに述べたように相対速度に応じて通知音を通知すればよい。その他の方法として、より簡易化して静止画露光中はパンニング動作が適正かどうかだけを通知するようにしてもよい。その場合は、露光開始直前の相対速度が第１の速度範囲に入っている時、その時のブレ検出手段の結果を記憶しておく。そして、静止画露光中はブレ検出手段の結果が、露光開始直前の値との差異が所定値以下の時は第１の通知音を通知し続け、所定値を上回ったら通知音を停止させるなどでもよい。
【００６３】
また、本実施形態では動きベクトル検出手段により、主被写体の動き方向とカメラ１のパンニング動作の向きの差異を検出することができるので、両者の向きの角度の差異が大きいとき、異なる第４の通知音を発するように制御してもよい。図５は主被写体の動き方向とカメラ１のパンニング動作の向きに差異がある場合の画像の例を示した図である。図５（ａ）において、矢印６１は主被写体４１の移動方向を示しており、矢印６２はカメラ１の像面上に換算されたパンニング方向を示している。図５（ｂ）においては矢印６１、６２で示すベクトルを抽出しており、矢印６１と矢印６２のなす角度を角度６３で示している。このなす角度６３が本来は０度であることが望ましいが、角度が完全に０度になるようにパンニングすることは困難である。
【００６４】
そこで、なす角度６３が許容の角度未満である場合は上述したように相対速度に応じて第１、第２、第３のいずれかの通知音を発するが、なす角度６３が許容の角度以上ある場合は第４の通知音を発し、パンニング方向がずれていることを通知する。第４の通知音は第１、第２、第３の通知音と、周波数、音量、音色の少なくもいずれかを異ならせておくが望ましい。また、第４の通知音を第１、第２、第３の通知音の合間や、同時に合成して発しても構わない。
【００６５】
また、相対速度が第２の速度範囲５６から第１の速度範囲５４に変化した時、相対速度が第１の速度範囲以内に入ってから一定時間が経過してから第１の通知音を鳴らすようにしてもよい。例えば、相対速度が第２の速度範囲５６から急に遅くなり、第１の速度範囲５４を通過し第３の速度範囲に到達した場合、第１の速度範囲５４を通過する際に瞬間的に第１の通知音が発せられるのを防ぐためである。第１の速度範囲５４を通過する際に瞬間的に第１の通知音が発せられると、撮影者が適正なパンニング速度だと認識し、レリーズ釦を押して静止画露光を開始する命令を下してしまう可能性がある。そこで、相対速度が第１の速度範囲以内に入ってから一定時間が経過してから第１の通知音を発するように制御してもよい。
【００６６】
本実施形態では、撮影者がカメラ１のモードを流し撮り通知モードに切り替えるとしているが、カメラ１が得られる情報から判断して自動で流し撮り通知モードに切り替えてもよい。例えば、上述のブレ検出手段２５であるジャイロ信号から、角速度が所定値を超えている場合は流し撮り撮影であると判断して、流し撮り通知モードに切り替えてもよい。
【００６７】
［第２の実施形態］
図６から図８を用いて第２の実施形態の撮像装置について説明する。第２の実施形態では音声出力部が指向性を有し、通知音を撮影者にとって左右から聞き取れるように発する。そして、カメラ１の主被写体に対する相対速度及び方向に応じて、通知音の撮影者の左右からの聞こえ方を制御し、撮影者にパンニング速度が適正かどうかを判断しやすくする。
【００６８】
第２の実施形態のカメラの構成は第１の実施形態の図１に示すカメラ及び交換レンズと概ねの同じため説明を割愛する。図６は第２の実施形態におけるカメラ１の背面図である。図６において第１の実施形態と同じ機能を有する物には同じ番号を付した。図６において第２の実施形態のカメラ１は背面に背面液晶部１６ａ、ＥＶＦ１６ｂを観察するための接眼レンズ１８ｂを有し、音声出力部１７として左スピーカー１７ａと右スピーカー１７ｂを有している。通知音の音量や位相を左スピーカー１７ａ、右スピーカー１７ｂから異ならせて発することで、撮影者に対し指向性のある音声を伝えることできる。例えば、左スピーカー１７ａからのみ通知音を発することで、撮影者の右から通知音が聞こえてくるようにする。第２の実施形態では、撮影者のパンニングの方向と、パンニング動作によるカメラ１の主被写体に対する相対速度の第１の速度範囲に対する差分の符号に応じて、左スピーカー１７ａ、右スピーカー１７ｂのどちらから通知音を出すかを制御する。
【００６９】
図７、８を用いて第２の実施形態の具体的なフローについて述べる。図７は第２の実施形態における流し撮り撮影動作のフローを表したものであり、図８はカメラ１のパンニング方向と主被写体の移動方向を表した図である。
【００７０】
図８（ａ）において、主被写体４１は矢印７１の方向に移動しており、カメラ１は矢印７１と同様の矢印７２に示す方向にパンニング動作がされている。一方、図８（ｂ）において、主被写体４１は矢印７３の方向に移動しており、カメラ１は矢印７３と同様の矢印７４に示す方向にパンニング動作がされている。
【００７１】
次に図７を用いながら図８のフローチャートのフローについて説明する。本フローチャートに示す処理は、カメラ１のカメラシステム制御部１０が入力信号やプログラムに従い、カメラ１の各部を制御することにより実現される。また、本フローチャートの処理は、ユーザのメニュー操作等によって、撮像モードを開始する指示を受け付けたことに応じて、ライブビューのために順次撮像されるスルー画像の表示と共に開始される。また、特に記載しない限り、各ステップはカメラシステム制御部１０によって実行される。
【００７２】
フローが開始すると、ステップＳ２０１では静止画撮影露光前のライブビュー撮影が開始される。
【００７３】
ステップＳ２０１からステップＳ２０４までの動作は、第１の実施形態で述べた図４のフローチャートのステップＳ１０１からステップＳ１０４までの動作と同様のため説明を省略する。
【００７４】
ステップＳ２０５において、ステップＳ２０４で検出された相対速度が第１の速度範囲以内かを判定する。相対速度が第１の速度範囲以内の場合はステップＳ２０６に進み、それ以外はステップＳ２０７に進む。
【００７５】
ステップＳ２０６において、相対速度が第１の速度範囲以内と判断され左スピーカー１７ａ、右スピーカー１７ｂの両方のスピーカーより第１の通知音を発生させ、ステップＳ２１５に進む。
【００７６】
一方、ステップＳ２０７において、ステップＳ２０４で検出された相対速度が第２の速度範囲以内かを判定する。相対速度が第２の速度範囲以内の場合はステップＳ２０８に進み、それ以外はステップＳ２１１に進む。
【００７７】
ステップＳ２０８において、カメラ１の移動方向であるパンニングの方向が左から右かを判断する。図７（ａ）に示すようにパンニング方向が左から右の場合は、ステップＳ２０９に進み、図７（ｂ）に示すようにパンニング方向が右から左の場合は、ステップＳ２１０に進む。
【００７８】
ステップＳ２０９で、相対速度が第１の範囲以内に対して早い、つまり相対速度と第１の速度範囲との差分の符号が正であり、かつカメラ１が左から右にパンニングしているので、右スピーカー１７ｂからのみ第２の通知音を発生させ、ステップＳ２１５へ進む。
【００７９】
一方、ステップＳ２１０において、相対速度と第１の速度範囲との差分の符号が正であり、かつカメラ１が右から左にパンニングしているので右スピーカー１７ｂからのみ第２の通知音を発生させ、ステップＳ２１５へ進む。
【００８０】
次にステップＳ２１１において、ステップＳ２０４で検出された相対速度が第３の速度範囲以内かを判定する。相対速度が第３の速度範囲以内の場合はステップＳ２１２に進み、それ以外はステップＳ２１５に進む。
【００８１】
ステップＳ２１２において、カメラ１の移動方向であるパンニングの方向が左から右かを判断する。図７（ａ）に示すようにパンニング方向が左から右の場合は、ステップＳ２１３に進み、図７（ｂ）に示すようにパンニング方向が右から左の場合は、ステップＳ２１４進む。
【００８２】
ステップＳ２０９で、相対速度が第１の範囲以内に対して早い、つまり相対速度と第１の速度範囲との差分の符号が正であり、かつカメラ１が左から右にパンニングしているので、右スピーカー１７ｂからのみ第２の通知音を発生させ、ステップＳ２１５へ進む。
【００８３】
一方、ステップＳ２１０において、相対速度と第１の速度範囲との差分の符号が正であり、かつカメラ１が右から左にパンニングしているので右スピーカー１７ｂからのみ第２の通知音を発生させ、ステップＳ２１５へ進む。
【００８４】
ステップＳ２１３において、相対速度が第１の範囲以内に対して遅い、つまり相対速度と第１の速度範囲との差分の符号が負であり、かつ主被写体が左から右に移動しているので、左スピーカー１７ｂからのみ第３の通知音を発生させ、ステップＳ２１５へ進む。
【００８５】
一方、ステップＳ２１４において、相対速度と第１の速度範囲との差分の符号が正であり、かつカメラ１が右から左にパンニングしているので右スピーカー１７ｂからのみ第３の通知音を発生させ、ステップＳ２１５へ進む。
【００８６】
ステップＳ２１５からフロー終了までの動作は、第１の実施形態のステップＳ１１１からフロー終了までの動作と同様のため、説明を省略する。
【００８７】
以上説明したように、第２の実施形態ではカメラ１のパンニング方向と、カメラ１の主被写体に対する相対速度の第１の速度範囲に対する差分値の符号に合わせて音声出力部１７の指向性を切り替えている。
【００８８】
このように音声出力部１７からの通知音の指向性を切り替えることで、撮影者はパンニング速度が適正速度に対して、遅いか早いかを直感的に認知することができる。第２の実施形態では、音声出力部１７からの通知音に指向性を持たせているので、第２の通知音と第３の通知音が同じ周波数や音色で合ってもよい。また、第１の実施形態でも述べたように相対速度に応じて音量の大小を変化させてもよい。
【００８９】
本実施形態では、カメラ１の背面に二つのスピーカーを配して音声出力部１７からの音声に指向性を持たせたが、外部出力端子を設けておきステレオイヤホンが外部出力端子に接続されるようにしてもよい。その場合、音声出力部１７はステレオイヤホンに対してのみ音声を出力する。そして、ステレオイヤホンの左右のスピーカーからの音を、上述の左スピーカー１７ａ、右スピーカー１７ｂのように制御してもよい。
【００９０】
［第３の実施形態］
図９から図１０を用いて第３の実施形態の撮像装置について説明する。第３の実施形態ではカメラがブレ補正手段であるブレ補正機構２４を用いて、流し撮り中にパンニング速度が適正になるように補正を行なう流し撮り補正モードを有する。そして、流し撮り補正モードにおいてはブレ補正手段で流し撮り補正が可能なパンニング速度であるかを判断し、ブレ補正が可能な場合は第５の通知音を発する。
【００９１】
第２の実施形態のカメラの構成は第１の実施形態の図１に示すカメラ及び交換レンズと同じため説明を割愛する。
【００９２】
図９を用いてブレ補正機構２４による流し撮り時の補正である流し撮り補正動作についいて述べる。第３の実施形態のカメラ１は後述する流し撮り補正動作を行う流し撮り補正モード有している。図９の上段はカメラ１の手ブレを含むパンニング速度を表す図で、横軸を時間、縦軸をパンニング速度である角速度［ｄｅｇ／ｓ］にとっている。下段はブレ補正機構２４による補正量を示す図で、横軸を上段と同期した時間、縦軸をブレ補正機構２４の補正量にとっている。上段において、線９１は主被写体の移動速度に対応する適正なパンニング速度を、点線９２は手ブレを含むカメラ１のパンニング速度を、線９３は線９１に対する線９２の差分値を示している。線９２はジャイロであるブレ検出手段２５より得られる信号に相当する。そして線９３の角度速度の積分値を補正量としてブレ補正機構２４を駆動することで、パンニング速度が適正でなくても主被写体が像面上で静止することができる。主被写体が一定速度で移動するとき、線９１で示す適正なパンニング速度は一定になる。しかしながら撮影者がカメラ１をパンニング動作させる時、パンニング速度が適正ではなかったり、手ブレにより一定速度にならないなど、線９２で示すようなパンニング速度になることが考えられる。
【００９３】
そこで、第２の実施形態で説明したように絶対速度検出手段であるブレ検出手段２５の検出結果と相対速度検出手段の検出結果の換算を行い、露光前に適正なパンニング速度の角速度を求めておく。そして、静止画露光中は線９３で示す適正なパンニング速度からブレ検出手段２５の結果の差分を求め、その差分値である線９３を用いてブレ補正量を求めてブレ補正機構２４を駆動させる。例えば、図９で示す時刻ｔ１から時刻ｔ２の間に露光が行なわれとすると、時刻ｔ１からｔ２の間の差分値である線９３の結果を用いて、その積分値である線９５で示す補正量でブレ補正機構２４は駆動される。このように制御することで、パンニング速度が適正出ない場合も所望の流し撮り画像を得ることができる。この流し撮り時のブレ補正機構２４を用いた補正を流し撮り補正動作と呼び、カメラ１が流し撮り補正モードに設定されている際のみ、流し撮り補正動作が行われる。
【００９４】
しかしながら、パンニング速度が所定よりも早すぎる、または遅すぎる場合は、ブレ補正機構２４で適正な流し撮り補正動作を行うことができない。撮影者のパンニング速度である線９２の近似線９４が手ブレを含まないパンニング速度といえる。しかし、線９１と線９４の差分が大きすぎる、つまりパンニング速度が早すぎると、ブレ補正に必要な補正量が大きくなり、ブレ補正機構２４の補正ストロークが足りなくなるので、適正な流し撮り補正動作を行うことができない。当然ながら、パンニング速度を遅すぎる場合も同様である。また、補正ストロークが足りるかどうかは、シャッター速度の長さにもよる。予め設定されたシャッター速度が長い場合はより補正量が大きくなるので、適正パンニング速度との差分が小さくても補正ストロークが足りなくなることがある。なお補正ストロークが十分かどうかは予め設定されたシャッター速度と、露光開始前の適正なパンニング速度とブレ検出手段２５の検出結果の差分値によって決まる。
【００９５】
本実施形態では、流し撮り補正モード時において、補正ストロークが十分ありブレ補正手段で流し撮り補正動作が可能なパンニング速度であるかを判断し、ブレ補正が可能な場合は第５の通知音を発する。図１０を用いて、通知音と相対速度の関係について述べる。図１０は図１と同様に、カメラ１の主被写体に対する相対速度と、通知音の関係を示す図であり、横軸に相対速度、縦軸に通知音の周波数をとっている。第１の実施形態の図１と同様に、相対速度が０である目盛８１を含む第１の速度範囲８２はパンニング動作による適正な相対速度の範囲である。パンニング動作によるカメラ１の相対速度がこの速度範囲８２に納まっていれば主被写体の像面上でのブレは許容範囲であり静止しているとみなせる。そして、この時は線８６で示す４０００Ｈｚの第１の通知音を発する。速度範囲８３は、上述したブレ補正機構２４で流し撮り補正が可能な相対速度の速度範囲を示している。相対速度が速度範囲８２外かつ速度範囲８３内に収まっている場合は、流し撮り補正動作が可能として線８７ａ、８７ｂである３０００Ｈｚの第５の通知音を発生させる。この速度範囲８３が補正可能速度範囲に相当する。そして、相対速度が速度範囲８３より早い速度範囲８４内の場合は、線８８で示す周波数の第２の通知音を発生させる。そして、相対速度が速度範囲８３より遅い速度範囲８５内の場合は、線８９で示す周波数の第３の通知音を発生させる。
【００９６】
このように第３の実施形態では相対速度に応じて通知音を発生するが、ブレ補正手段により流し撮り補正動作が可能なパンニング速度かを判断し、補正が可能な場合は第５の通知音を発する。このように制御することで、撮影者はパンニング速度が適正かどうかの判断をしやすくなり、さらに流し撮り補正動作が可能かも知ることができる。これにより、流し撮り撮影のパンニングの速度を調整することや、露光開始すべきタイミングを直感的に知ることができ、所望の流し撮り画像を得ることができる。
【００９７】
なお、第３の実施形態では、補正可能速度範囲８３である時の第５の通知音である線８７ａと線８７ｂを同じ周波数で示したが、線８７ａと線８７ｂで異なる周波数にしてもよい。
【００９８】
（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【図１】
2020191547.tif 000003
【図２】
2020191547.tif 000004
【図３】
2020191547.tif 000005
【図４】
2020191547.tif 000006
【図５】
2020191547.tif 000007
【図６】
2020191547.tif 000008
【図７】
2020191547.tif 000009
【図８】
2020191547.tif 000010
【図９】
2020191547.tif 000011
【図１０】
2020191547.tif 000012