(57)【要約】カメラシステム及びカメラシステム動作方法を開示する。本発明の方法は、カメラ及び中央処理演算ユニットを含むカメラシステムを準備する段階と、カメラによって被写体のビューを捕捉する段階と、ビューのシネマトグラフィックパラメータを決定する段階と、決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータを比較する段階と、決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータの比較に基づいて推奨カメラ動作を形成する段階と、推奨カメラ動作をユーザに示す段階を含む。
2004519140.tif 000002
【特許請求の範囲】
【請求項１】
カメラシステムを動作する方法であって、
カメラ及び中央処理演算ユニットを含むカメラシステムを準備する段階と、
上記カメラで被写体のビューを捕捉する段階と、
上記ビューのシネマトグラフィックパラメータを決定する段階と、
上記決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとを比較する段階と、
上記決定されたシネマトグラフィックパラメータと上記基準シネマトグラフィックパラメータとの比較に基づいて、推奨カメラ動作を形成する段階と、
上記推奨カメラ動作を、ユーザに示す段階とを含む方法。
【請求項２】
上記推奨カメラ動作に応じて、カメラ動作を実行する段階を更に含む請求項１記載の方法。
【請求項３】
上記準備段階は更に、上記中央処理演算ユニットに、上記基準シネマトグラフィックパラメータを決めるデータを入力する段階を含む請求項１記載の方法。
【請求項４】
上記捕捉段階は、上記ビューを決めるビデオデータを生成する段階を含む請求項１記載の方法。
【請求項５】
上記ビデオデータを解析し、解析されたビデオデータを上記基準シネマトグラフィックパラメータと比較する段階を更に含む請求項４記載の方法。
【請求項６】
上記決定段階は、上記ビューが同じままである時間の長さを測定する段階を含む請求項１記載の方法。
【請求項７】
上記比較段階は、上記決定されたシネマトグラフィックパラメータと上記基準シネマトグラフィックパラメータとの比較に基づいて、上記ビューの質レベルを決定する段階を含む請求項１記載の方法。
【請求項８】
上記捕捉されたビューの質が、所定の質レベル以下であると決定されると、新しいビューの捕捉を行うための推奨カメラ動作を形成する段階を更に含む請求項７記載の方法。
【請求項９】
上記決定された時間の長さを、所定の時間の長さと比較する段階を更に含む請求項１記載の方法。
【請求項１０】
上記決定された時間の長さが、上記所定の時間の長さを超えると、新しいビューを捕捉するための推奨カメラ動作を形成する段階を更に含む請求項９記載の方法。
【請求項１１】
上記捕捉されたビューは角度を有し、
上記決定段階は、上記ビューの上記角度を決定する段階を含む請求項１記載の方法。
【請求項１２】
上記比較段階は、上記捕捉されたビューの上記決定された角度と、上記基準シネマトグラフィックパラメータによって決められる基準角度とを比較する段階を含む請求項１記載の方法。
【請求項１３】
上記形成段階は、上記捕捉されたビューの上記角度の変更を行う推奨カメラ動作を形成する段階を含む請求項１１記載の方法。
【請求項１４】
中央処理演算ユニット及び被写体のビューを捕捉するためのカメラを含む、カメラシステムであって、
上記中央処理演算ユニットは、上記カメラとデータのやり取りをし、
上記中央処理演算ユニットは、（ｉ）上記捕捉されたビューのシネマトグラフィックパラメータを決定し、（ｉｉ）上記決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとを比較し、（ｉｉｉ）上記決定されたシネマトグラフィックパラメータと上記基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成するよう構成され、
上記カメラシステムは更に、上記推奨カメラ動作をユーザに示す指示装置を含む、システム。
【請求項１５】
上記形成された推奨カメラ動作に応じて、上記カメラを制御する手段を更に含む請求項１４記載のカメラシステム。
【請求項１６】
被写体のビューを捕捉するカメラによって捕捉されるビューのシネマトグラフィックパラメータを決定し、中央処理演算ユニットと上記カメラを含むカメラシステムを用いて、推奨カメラ動作を形成するためのコンピュータプロセッサ可読プログラムコードが内部に具現化された、コンピュータプロセッサ使用可能な媒体を含む製品であって、
上記中央処理演算ユニットは、上記カメラとデータのやり取りをし、
上記中央処理演算ユニットは、（ｉ）上記捕捉されたビューのシネマトグラフィックパラメータを決定し、（ｉｉ）上記決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとを比較し、（ｉｉｉ）上記決定されたシネマトグラフィックパラメータと上記基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成するよう構成され、
上記製品の内部にある上記コンピュータプロセッサ可読プログラムコードは、
上記カメラシステムに、上記カメラによって捕捉されたビューの上記シネマトグラフィックパラメータを決定させるよう構成されるコンピュータプロセッサ可読プログラムコードと、
上記カメラシステムに、上記決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとを比較させるよう構成されるコンピュータ可読プログラムコードと、
上記カメラシステムに、上記決定されたシネマトグラフィックパラメータと上記基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成させるよう構成されるコンピュータ可読プログラムコードと、
上記カメラシステムに、上記推奨カメラ動作をユーザに指示させるよう構成されるコンピュータ可読プログラムコードとを含む、製品。
【発明の詳細な説明】
【０００１】
発明の背景
［発明の属する技術分野］
本発明は一般的に、カメラシステム、及び、そのカメラシステムによって捕捉したビューの質を向上する推奨カメラ動作に関する情報を、ユーザに提供する方法に関する。
【０００２】
［関連技術の説明］
従来のカメラシステムは、カメラにより捕捉されるビューに画像処理解析を行うことによって、捕捉されたビューの構成の質を決定することができた。このようなシステムは、米国特許第５，８３１，６７０号に記載される。
【０００３】
［発明の概要］
本発明のカメラシステムは、コンピュータビジョンを使用してビデオシーケンスを解析し、カメラ１４を動かす最良の方法（例えば、パン、チルト、ズーム等の方向）を、カメラの操作者に推奨する。このような推奨は、例えば、良好なビデオ操作の単純な原理（例えば、被写体の静的なビューを長い時間維持しない）や、高品質の映画撮影術（シネマトグラフィ）の認知されている原理や、画像解析といった多くのファクタに基づいている。特に、本発明のカメラシステムは、ビデオと、カメラによって捕捉されている現在のビュー又はショットを解析し、捕捉ビューのシネマトグラフィックパラメータを決定し、そのシネマトグラフィックパラメータを基準シネマトグラフィックパラメータと比較し、ビュー全体の質を向上する推奨カメラ動作を生成するか、又は、カメラによって捕捉されるべき次のビューをユーザに通知する。
【０００４】
本発明は、１つの面において、カメラと中央処理演算ユニットを含むカメラシステムを準備する段階と、そのカメラで被写体のビューを捕捉する段階と、捕捉されたビューのシネマトグラフィックパラメータを決定する段階と、決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータを比較する段階と、決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成する段階と、推奨カメラ動作をユーザに示す段階とを含む、カメラシステムの動作方法に関する。
【０００５】
本発明は、別の面において、中央処理演算ユニットと、被写体のビューを捕捉するカメラを含むカメラシステムに関する。中央処理演算ユニットは、カメラとデータをやり取りする。中央処理演算ユニットは、（ｉ）ビューのシネマトグラフィックパラメータを決定し、（ｉｉ）決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとを比較し、（ｉｉｉ）決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成するよう構成される。１つの実施例では、カメラシステムは更に、推奨カメラ動作をユーザに示す指示装置を含む。
【０００６】
本発明は、更なる面において、被写体のビューを捕捉するカメラによって捕捉されたビューのシネマトグラフィックパラメータを決定し、中央処理演算ユニットと上述のカメラを含むカメラシステムを用いてビューの質を向上するための推奨カメラ動作を形成するよう、内部に具現化されるコンピュータプロセッサ読取り可能なプログラムコードを有する、コンピュータプロセッサが使用可能である媒体を含む製品に関する。中央処理演算ユニットは、カメラとデータのやり取りをする。中央処理演算ユニットは、（ｉ）ビューのシネマトグラフィックパラメータを決定し、（ｉｉ）決定されたシネマトグラフィックパラメータを基準シネマトグラフィックパラメータと比較し、（ｉｉｉ）決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成するよう構成される。製品中の、コンピュータプロセッサが読取り可能なプログラムコードは、カメラシステムに、カメラによって捕捉されるビューのシネマトグラフィックパラメータを決定させるよう構成されるコンピュータプロセッサ読取り可能なプログラムコードと、カメラシステムに、決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとを比較させるよう構成されるコンピュータプロセッサ読取り可能なプログラムコードと、カメラシステムに、決定されたシネマトグラフィックパラメータと基準シネマトグラフィックパラメータとの比較に基づいて推奨カメラ動作を形成させるよう構成されるコンピュータプロセッサ読取り可能なプログラムコードと、カメラシステムに、推奨カメラ動作をユーザに指示させるよう構成されるコンピュータプロセッサ読取り可能なプログラムコードとを含む。
【０００７】
［本発明の詳細な説明］
本発明の特徴は新規性のあるものと考えられ、本発明の特徴的な要素は、特許請求の範囲において具体的に記載される。構成及び動作の方法に関する本発明自体は、添付図面と共に以下の詳細な説明を参照することにより理解することができるものとする。
【０００８】
図１を参照するに、本発明のカメラシステム１０は、一般的に、中央処理演算ユニット（ＣＰＵ）１２及びカメラ１４を含む。１つの実施例では、カメラシステム１０は更に、指示装置１６も含む。ＣＰＵ１２は一般的に、カメラ１４の動作を制御するマイクロコンピュータと周辺装置を含む。１つの好適な実施例では、カメラシステム１０は、この技術において周知であるコンピュータビジョンシステムとして構成される。ＣＰＵ１２は、カメラ１４及びインジケータ装置１６と、リンク１８を介して電子データのやり取りをする。リンク１８は、カメラ１４とインジケータ装置１６の間の電子データ通信も可能にする。１つの実施例では、リンク１８は、専用データラインによって実現される。しかし、データ通信リンク１８は、公衆交換電話網、セルラ式、パーソナルコミュニケーション（ＰＣＳ）、マイクロ波、及び衛星ネットワークを使用するインターネット接続としても実現することができる。１つの好適な実施例では、ＣＰＵ１２は、ＣＰＵ１２のマイクロプロセッサにデータが入力されることを可能にするユーザインタフェースを含む。
【０００９】
カメラ１４は、ユーザによって取り扱われるよう構成される部分を有する本体を含む。カメラ１４は、電子パン−チルト−ズーム（ＥＰＴＺ）又は自動機械パン−チルト−ズーム（ＭＰＴＺ）を使用するよう構成され得る。カメラ１４は更に、カメラ１４とＣＰＵ１２の間、且つ、カメラ１４と指示装置１６の間のデータの転送を可能にするインタフェース回路（図示せず）を含む。カメラ１４は、捕捉されたビューを決めるビデオデータを生成する。ビデオデータは、ＣＰＵ１２に入力される。
【００１０】
インジケータ装置１６は、例えば、「近接ビューを捕捉する」、「広角ビューを捕捉する」、「フェードアウトする」等のようなフォトグラフィック推奨といった写真情報を表示する機能を提供するよう構成される。１つの実施例では、インジケータ装置１６は、ブザー、合成音、振動等の警告機能を提供する回路及び部品を含む。１つの実施例では、インジケータ装置１６は、液晶ディスプレイを含む。１つの実施例では、インジケータ装置１６は、米国特許第５，８３１，６７０号に記載されるようなインジケータ装置として構成される。この特許の開示内容は本願に参考として組込まれる。
【００１１】
ＣＰＵ１２は、適切なアルゴリズムでプログラムされて、カメラ１４から受け取ったビデオデータによって決められるショット又はビューのシネマトグラフィックパラメータの決定を行う。このようなシネマトグラフィックパラメータには、以下に制限されないが、以下を含む。
ａ）被写体の捕捉ビュー又はショットの角度
ｂ）カメラ１４が被写体に固定される時間
ｃ）ビューにおける被写体の数
ｄ）カメラ１４と１つ以上の被写体との距離
ｅ）シーンにおける活動量
ｆ）捕捉ビュー又はショットにおける一番の関心被写体
ｇ）捕捉ビューの全体的な質
カメラシステム１０の動作の前に、基準データが、ＣＰＵ１２のマイクロプロセッサに入力される。基準データは、シネマトグラフィの実質的な原理に基づいた基準又は所定のシネマトグラフィックパラメータを決定する。好適な実施例では、基準データは、ＣＰＵ１２のユーザインタフェースを介して、ＣＰＵ１２のマイクロプロセッサに入力され得る。上述したアルゴリズムは、ＣＰＵ１２が、ビューの決定されたシネマトグラフィックパラメータと、基準シネマトグラフィックパラメータを比較することを可能にする。
【００１２】
本発明の方法の各段階は、図１及び図２を参照しながら、説明する。
【００１３】
本発明の方法の第１の段階２０は、カメラシステム１０を初期化することにある。この段階では、基準シネマトグラフィックパラメータをＣＰＵ１２に入力し、カメラ１４とインジケータ装置１６との正しいデータ通信を確認することが必要である。この段階において、カメラ１４は、特定の被写体の第１のビュー又はショットを捕捉するよう制御される。
【００１４】
段階２２において、カメラ１４は、捕捉されたビューを決めるビデオデータを生成する。そのビデオデータはリンク１８を介してＣＰＵ１２に送信される。
【００１５】
段階２４において、カメラ１４によって捕捉されたビューのシネマトグラフィックパラメータを決定する。
【００１６】
段階２６において、ＣＰＵ１２は、決定されたシネマトグラフィックパラメータと、基準シネマトグラフィックパラメータとの比較を行う。この段階は更に、ビューの質レベルを決定する。好適な実施例において、この段階では、現在のビューのシネマトグラフィックパラメータが、その特定のビューの全体的な質を所定の質レベル以上にさせているか、又は、以下にさせているかを決定する。所定の質レベルは、ＣＰＵ１２に入力される、上述した基準シネマトグラフィックパラメータに基づいている。
【００１７】
段階２８において、ＣＰＵ１２は、比較段階２６において決定された特定の欠陥に対処し、ショット又はビューの全体的な質を向上する推奨カメラ動作を決定するデータを生成又は形成する。推奨カメラ動作を決定するデータは、カメラ１４及び指示装置１６に送信される。
【００１８】
段階３０において、推奨カメラ動作は、カメラ１４のユーザによって無効にされない限り、ユーザに示され、ユーザによって、又は、自動的に、カメラ１４によって実行される。推奨カメラ動作が実行される方法は、カメラ１４の構成に依存する。例えば、カメラ１４が、ＥＰＴＺカメラとして構成される場合、推奨カメラ動作は、捕捉されるべき新しい又は次のビューを決定し、その特定の新しい又は次のビューは、カメラ１４のビューファインダ内に現れる。カメラ１４のユーザは、カメラ１４がＥＰＴＺを実行して次の（即ち、推奨された）ビューを撮るポイントである次のビューに切り替えるために、カメラ１４に適切な制御を行うだけでよい。カメラ１４が、ＭＰＴＺカメラとして構成される場合、推奨カメラ動作を決定するデータは、カメラ１４のモータを制御するために使用する制御信号に変換される。その結果、モータは、推奨されたビュー又はショットを捕捉し易くするようカメラ１４の位置を決める。推奨カメラ動作は、指示装置１６上に表示される。従って、例えば、「近接」又は「フェードアウト」等である推奨カメラ動作は、指示装置１６上に表示され、それにより、ユーザに推奨カメラ動作の指示と、推奨カメラ動作を手動で無効にする機会を提供する。カメラ１４が、ＥＰＴＺカメラでもＭＰＴＺカメラでもない場合、ユーザは、推奨カメラ動作に応じてカメラ１４を手動で動かす。
【００１９】
別の実施例では、センサ（図示せず）をカメラ１４と共に使用して、推奨カメラ動作を決定するのに使用できる他の種類の情報を提供することもできる。特に、センサの出力は、決定されたシネマトグラフィックパラメータの一部としてＣＰＵ１２に入力され、上述の説明にて説明した比較段階２６において使用されうる。このようなセンサには、オーディオセンサ及び動きセンサが含まれる。１つの例では、センサはオーディオセンサであり、オーディオ情報が出ているセットの一部を検出するよう構成される。従って、現在のショット又はビューが、たった今話し終えた人物を示し、そのビューにいない別の人物が話し始めたとすると、オーディオセンサは、音が、現在のビューにはないセットの特定の位置から出ていることを示す信号を出力する。オーディオセンサから出力される信号は、ＣＰＵ１２に入力される。それに反応して、ＣＰＵ１２は、カメラ１４が、新しい話者のビューを捕捉することを可能にする推奨カメラ動作を決定するデータを出力する。
【００２０】
本発明は、フロッピー（登録商標）ディスク、ＣＤ−ＲＯＭ、ハードドライブ、又は、他の任意のコンピュータ可読記憶媒体といったコンピュータプロセッサ使用可能な媒体に具現化されるコンピュータプロセッサ可読プログラムコードの形で具現化され得る。コンピュータプログラムコードがコンピュータにロードされ、実行されると、コンピュータは、本発明を実施する装置又はシステムと一体となる。
【００２１】
本発明の原理、好適な実施例、及び、動作モードは、上述の明細書中に説明した。しかし、保護されるべき本発明は、開示された特定の形式に制限されると解釈されるべきではなく、というのは、開示された特定の形式は、制限的ではなく、むしろ、例示的であると認識すべきである。本発明の目的から逸脱することなく、様々な変更を、当業者は行うことが可能である。従って、上述の詳細な説明は、本質的に例示的であり、特許請求の範囲に記載されるように、本発明の範囲及び目的に制限されるものではないと考えるべきである。
【図面の簡単な説明】
【図１】
本発明のカメラシステムの１つの実施例を示すブロック図である。
【図２】
本発明の方法を示すフローチャートである。
【図１】
2004519140.tif 000003
【図２】
2004519140.tif 000004
【国際公開パンフレット】
2004519140.tif 000005
2004519140.tif 000006
2004519140.tif 000007
2004519140.tif 000008
2004519140.tif 000009
2004519140.tif 000010
2004519140.tif 000011
2004519140.tif 000012
2004519140.tif 000013
2004519140.tif 000014
2004519140.tif 000015
【国際調査報告】
2004519140.tif 000016
2004519140.tif 000017
2004519140.tif 000018