(57)【要約】【課題】  撮影状況の変化や周囲の状況に制約を受けることなくワイパーの誤検知を確実に防止することを可能にした撮影システムを提供すること。【解決手段】  撮像装置１０１と、前記撮像装置１０１に備えられたワイパー１０４と、前記撮像装置１０１および前記ワイパー１０４を駆動制御する制御手段１０５と、前記撮像装置１０１で得られた映像信号を受信し、映像処理を行う映像処理手段１０８を備えた撮影システムにおいて、前記撮影システムは、前記ワイパー１０４の動作状況を前記映像処理手段１０８へ通知する通知手段を備えたことを特徴とする。【選択図】  図１
2020136980.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置と、
前記撮像装置に備えられたワイパーと、
前記撮像装置および前記ワイパーを駆動制御する制御手段と、
前記撮像装置で得られた映像信号を受信し、映像処理を行う映像処理手段を備えた撮影システムにおいて、
前記撮影システムは、前記ワイパーの動作状況を前記映像処理手段へ通知する通知手段を備えたことを特徴とする撮影システム。
【請求項２】
前記通知手段は、前記制御手段のワイパー駆動信号を基に前記映像処理手段へ前記ワイパーの動作状況を通知することを特徴とする請求項１に記載の撮影システム。
【請求項３】
前記撮影システムは、前記ワイパーの位置を検出するワイパー位置検出手段を備え、前記通知手段は、前記ワイパー位置検出手段の位置情報を基に前記映像処理手段へ前記ワイパーの動作状況を通知することを特徴とする請求項１に記載の撮影システム。
【請求項４】
前記撮像装置は、前記通知手段の情報を前記映像信号へメタデータとして付与する映像信号処理手段を備えたことを特徴とする請求項１乃至請求項３の何れか一項に記載の撮影システム。
【請求項５】
前記撮像装置は、前記撮像装置の画界情報を検出する画界検出手段を備えており、前記通知手段は前記画界検出手段の画界情報に基づいて前記ワイパーの動作状況を前記映像処理手段へ通知することを特徴とする請求項１乃至請求項４の何れか一項に記載の撮影システム。
【請求項６】
前記映像処理手段は、前記通知手段の通知を基に前記ワイパー動作中の映像を映像処理から省くことを特徴とする請求項１乃至請求項５の何れか一項に記載の撮影システム。
【請求項７】
前記撮影システムは、前記撮像装置を複数備えたことを特徴とする請求項１乃至請求項６の何れか一項に記載の撮影システム。
【請求項８】
前記撮影システムは、前記複数の撮像装置の映像信号を合成し、多視点映像を生成する多視点映像生成手段を備えたことを特徴とする請求項１乃至請求項７の何れか一項に記載の撮影システム。
【請求項９】
前記多視点映像生成手段は、前記通知手段の通知を基に前記ワイパー動作中の映像を映像処理から省くことを特徴とする請求項１、請求項２、請求項３、請求項４、請求項５、請求項７、請求項８の何れか一項に記載の撮影システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影システムに関し特にワイパーを備えた撮像装置を用いた撮影システムに関する。
【背景技術】
【０００２】
主に監視分野では被写体に動きがあった場合に特定の撮影モードに切り替わる動体検知機能を備えた撮影システムが知られている。また、監視・スポーツ分野においては異なる位置に複数の撮像装置を配置し、撮影した映像情報から多視点映像を生成する撮影システムが知られている。中でも多視点映像を生成する撮影システムでは得られる映像情報の情報量を抑制するために、動きの有る被写体と動きの無い背景とを分離し、動きのある被写体情報を主に映像情報として利用するシステムが存在している。
【０００３】
上記のような撮影システムでは屋外で使われるものも存在しており、撮像装置の前面に備えたワイパーを動作させることでガラス表面のゴミや雨を払拭し、良好な撮影状態を維持している。
【０００４】
しかしながら、ワイパーを動作させると撮像装置の前面をワイパーが横切るため、ワイパーを動きのある被写体として誤検知してしまい所望の映像処理を行えないといった場合がある。そのため、動きのある被写体とワイパーの動きとを分離する映像処理技術が提案されている。
【０００５】
特許文献１には、物体検出機能がワイパーを誤検知することを防止するために、あらかじめワイパーのテンプレート情報を画像から生成し記憶することで映像情報とワイパー情報とを分離する技術が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１４−９３６０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上記の特許文献１に開示された従来技術では画角を変化させた場合や撮像装置をパンチルトさせた場合など、撮影状況が変化した際に再度テンプレート情報を生成することが必要となる。そのため撮影状況を変化させながらの連続撮影を行いたい場合にはテンプレート情報の生成が行えず、ワイパーを誤検知してしまうおそれがある。また、テンプレート情報を画像から生成する際にはワイパー以外に動く物体が無い状況下で生成する必要があるため、情報生成時は周囲の状況に制約を受けてしまうおそれがある。
【０００８】
そこで、本発明の目的は、撮影状況の変化や周囲の状況に制約を受けることなくワイパーの誤検知を確実に防止することを可能にした撮影システムを提供することにある。
【課題を解決するための手段】
【０００９】
上記の目的を達成するために、本発明に係る撮影システムは、
撮像装置と撮像装置に備えられたワイパーと、撮像装置およびワイパーを駆動制御する制御手段と、撮像装置で得られた映像信号を受信し、映像処理を行う映像処理手段を備えた撮影システムにおいて、撮影システムは、ワイパーの動作状況を映像処理手段へ通知する通知手段を備えたことを特徴とする。
【発明の効果】
【００１０】
本発明によれば、撮影状況の変化や周囲の状況に制約を受けることなくワイパーの誤検知を確実に防止することを可能にした撮影システムの提供を実現できる。
【図面の簡単な説明】
【００１１】
【図１】第１の実施例における撮影システムのシステム構成図
【図２】撮像装置の斜視図
【図３】第２の実施例における撮影システムのシステム構成図
【図４】第３の実施例における撮影システムのシステム構成図
【図５】第４の実施例における撮影システムの撮影状況を簡易的に示した撮影概略図
【図６】第４の実施例における撮影システムのシステム構成図
【図７】第４の実施例の映像処理手段内部の処理手段の一部を示したフローチャート
【図８】第５の実施例における撮影システムのシステム構成図
【図９】第５の実施例の映像処理手段内部の処理手段の一部を示したフローチャート
【発明を実施するための形態】
【００１２】
以下、本発明を実施するための形態について、図面を参照しながら詳細に説明する。
【実施例１】
【００１３】
以下、図１から図２を参照して、本発明の第１の実施例における詳細な説明を行う。
【００１４】
はじめに、図１〜２を用いて本実施例の撮影システムについて説明する。
【００１５】
図１は本発明の第１の実施例における撮影システムのシステム構成図、図２は撮像装置の斜視図である。
【００１６】
本実施例の撮影システムは、撮像装置１０１および操作手段１１０から構成されている。撮像装置１０１は図２に示すような外観をしており、内部機器を外環境から保護するハウジング１０２、ハウジング１０２の内部に不図示のレンズおよびカメラ、制御基板等を備えている。またハウジング１０２の前面にはフロントガラス１０３が備えられており、フロントガラス１０３を通して内部のレンズ・カメラによりハウジング外部を撮影可能になっている。また、撮像装置１０１には、フロントガラス１０３に付着する雨やゴミを清掃するためのワイパー１０４が備えられている。
【００１７】
次に図１を用いて本実施例の撮影システムのシステム構成を説明する。
【００１８】
前述の通り本実施例の撮影システムは撮像装置１０１、操作手段１１０から構成されている。撮像装置１０１の内部には撮像装置全体の動きを制御するＣＰＵ１０５が備えられており、操作手段１１０の各種操作スイッチの操作により撮像装置１０１を駆動する駆動信号を受けとることが可能になっている。ＣＰＵ１０５は操作手段１１０から駆動信号を受け取ると、信号に基づいてワイパー１０４、レンズ１０６、カメラ１０７へ制御信号を出し動きを制御可能になっている。また、撮像装置１０１は映像処理手段１０８を備えておりカメラ１０７で撮影された映像信号を受信し、現像や動体検知等の各種映像処理を行うことが可能になっている。以上が、本実施例の撮影システムの構成である。
【００１９】
次に、本実施例の撮影状態でのワイパー作動時の映像処理について説明する。
【００２０】
まず操作手段１１０の操作によりワイパーの駆動信号がＣＰＵ１０５に入力されるとＣＰＵ１０５は、ワイパー１０４へ駆動の制御信号を出す。するとワイパー１０４は動作を始めフロントガラス１０３表面を払拭する。またＣＰＵ１０５はワイパー１０４への制御信号を出すと同時に、映像処理手段１０８へワイパー１０４の駆動を知らせる通知信号（通知手段）を発信する。映像処理手段１０８はＣＰＵ１０５からワイパー動作の通知信号を受信するとカメラ１０７から受け取った映像信号と通知信号とを組み合わせ、ワイパー動作が含まれた映像として映像処理を実施する。
【００２１】
以上のようにして、通知信号の通知により映像処理手段１０８内でワイパー１０４の動作状況を認識した状態で映像処理が可能となるため、映像処理においてワイパー１０４の動きを被写体と誤認識することを防止可能になっている。また、画角変化等の撮影状態の変化が起きた場合でもテンプレートの再生成処理などを必要とせずワイパー動作を検知することが可能である。よって、本発明では撮影状況の変化や周囲の状況に制約を受けることなくワイパーの誤検知を確実に防止することを可能にした撮影システムを提供することが可能である。
【００２２】
なお、今回は映像処理手段での映像処理の内容については詳細な説明を割愛するが、ワイパー駆動時は動体検知機能を動作させない制御とすることやワイパー駆動中はオートフォーカス機能を動作させない制御とすることといった映像処理へ利用可能になっている。
【００２３】
なお、本実施例では操作手段１１０からのワイパー駆動信号をＣＰＵ１０５を介して通知したが、操作手段１１０から直接映像処理手段１０８へワイパー１０４の駆動信号を通知する構成としても同様に構わない。
【実施例２】
【００２４】
次に以下、図３を参照して、本発明の第２の実施例における詳細な説明を行う。なお、本実施の形態では第１の実施例と共通の部分については同一の符号を付し説明を省略する。
【００２５】
図３は本発明の第２の実施例における撮影システムのシステム構成図である。
【００２６】
本実施例の構成では実施例１に対して撮像装置２０１内にワイパー位置検出手段２０２を備えている点が異なる。ワイパー位置検出手段２０２はワイパー１０４の動作位置を検知することが可能になっている。またワイパー位置検出手段２０２はＣＰＵ１０５および映像処理手段１０８と電気的に接続されておりワイパー１０４の位置を適宜通知可能になっている。ＣＰＵ１０５は操作手段１１０からワイパーの制御信号を受信するとワイパー１０４へ駆動信号を出す。するとワイパー１０４は動作を始め、ワイパー位置検出手段２０２はワイパー１０４の位置を検出しＣＰＵ１０５および映像処理手段１０８へワイパー１０４の位置を通知する。ＣＰＵ１０５はワイパー位置検出手段２０２の位置情報に基づいてワイパー１０４の動作を適宜コントロールする。映像処理手段１０８はワイパー位置検出手段２０２から通知される位置情報とカメラ１０７から受信する映像信号とを組み合わせ、ワイパー動作が含まれた映像として映像処理を実施する。
【００２７】
以上のようにして、ワイパー１０４の動きをワイパー位置検出手段２０２で検出し映像処理手段１０８へ通知するようにしたことで、映像処理手段１０８はワイパーを被写体と誤認識することなく所望の映像処理を実施することが可能となる。また、本実施例の発明では、実施例１の効果に加えてワイパー位置検出手段２０２で検出されるワイパー１０４の位置情報をワイパー動作の通知手段として利用したため、ワイパーの位置をより正確に検出することが可能となっている。
【実施例３】
【００２８】
次に以下、図４を参照して、本発明の第３の実施例における詳細な説明を行う。なお、本実施の形態では第１および第２の実施例と共通の部分については同一の符号を付し説明を省略する。
【００２９】
図４は本発明の第３の実施例における撮影システムのシステム構成図である。
【００３０】
本実施例では実施例２の構成に対して撮像装置に映像信号処理手段および画界検出手段を備えている点が異なる。
【００３１】
まず初めに本実施例の撮影システムの新規構成について説明する。
【００３２】
本実施例の撮像装置３０１には実施例２に加えて、映像信号処理手段３０２、画界検出手段３０３を備えている。映像信号処理手段３０２はＣＰＵ１０５と接続されておりＣＰＵ１０５から出される種々の信号を受信することが可能となっている。また映像信号処理手段３０２はカメラ１０７とも接続されておりカメラ１０７から出力された映像信号を受信し、受信した映像信号へＣＰＵ１０５から受信した信号をメタデータとして付与することが可能になっている。また映像信号処理手段３０２は映像処理手段１０８とも接続されておりメタデータを付与した映像信号を映像処理手段１０８へ送信することが可能となっている。画界検出手段３０３はレンズ１０６およびカメラ１０７からイメージサークルや焦点距離情報などの画角情報を受信可能となっている。また画界検出手段３０３はフロントガラス１０３とレンズ１０６との距離等の情報を保持しており、画角情報と組み合わせることでフロントガラス１０３表面上で撮影可能な画界範囲を算出することが可能になっている。また、画界検出手段３０３はＣＰＵ１０５とも接続されており、ＣＰＵ１０５は算出された画界情報を信号として受信可能になっている。
【００３３】
以上が、本実施例における新規構成の説明である。
【００３４】
次に本実施例の撮影システムの、ワイパー作動時の制御方法について説明する。
【００３５】
他の実施例と同様に本実施例の撮影システムは、操作手段１１０から受信した指令信号に基づいてＣＰＵ１０５がワイパー１０４へ制御信号を出しワイパー１０４が駆動する。同時に映像信号処理手段３０２はＣＰＵ１０５からワイパーの位置情報と、画界情報を取得する。そしてワイパー１０４の位置情報と画界情報からワイパーの映像への映り込みの有無を算出し、ワイパーが映り込んでいる場合には映像信号へワイパー映り込みの通知情報をメタデータとして付与する。その後、映像信号処理手段３０２はメタデータが付与された映像信号を映像処理手段１０８へ送信し映像処理手段１０８にて他の実施例と同様の映像処理を実施する。
【００３６】
以上のようにして本発明では、ワイパーの位置情報と撮像装置の画界情報からワイパーの映像への映り込みの有無を算出し映像処理手段へ通知するため、より正確にワイパーの映り込みを検出することが可能となる。また、ワイパー駆動の通知信号を映像情報へメタデータとして付与したため、映像処理手段で処理する信号を映像信号のみに減らすことが可能となる。そのため映像処理手段で処理する信号数を減らすことができる。
【実施例４】
【００３７】
次に以下、図５〜図７を参照して、本発明の第４の実施例における詳細な説明を行う。なお、本実施の形態では第１および第２、第３の実施例と共通の部分については同一の符号を付し説明を省略する。
【００３８】
図５は本発明の第４の実施例における撮影システムの撮影状況を簡易的に示した撮影概略図、図６は撮影システムのシステム構成図、図７は映像処理手段内部の映像処理フローの一部を示したフローチャートである。
【００３９】
図５に示すように本実施例の撮影システムは、被写体４０１を異なる位置から撮影可能な複数の撮像装置４０２から構成されている。上記撮影システムでは被写体４０１を様々な角度から撮影することが可能なため、被写体の死角を減らした映像情報を得ることが可能である。また、複数の撮像装置４０２から得られた映像情報を映像処理手段で集約し画像解析や画像処理を行うことで多視点映像や自由視点映像を生成することも可能になっている。
【００４０】
次に図６を用いて本実施例の撮影システムのシステム構成を説明する。
【００４１】
本実施例の撮影システムは図５、図６に示すように複数の撮像装置４０２から構成されている。それぞれの撮像装置４０２は操作手段１１０と接続されており、操作手段１１０の操作を行うことにより複数の撮像装置４０２を同時に操作することが可能になっている。またそれぞれの撮像装置４０２は撮像装置４０２の外部に設けられた映像処理手段４０３とも接続されており複数の撮像装置４０２で得られた映像信号を同時に受信し、多視点映像の生成等の処理を行うことが可能になっている。
【００４２】
次に本実施例の撮影システムのワイパー駆動時の映像処理方法について説明する。
【００４３】
図７は映像処理手段４０３の映像信号１フレームに対して行う、映像処理フローの一部を示したフローチャートである。
【００４４】
本実施例の撮像装置４０２は実施例３と同様に映像信号へワイパー１０４の駆動状態を通知するメタデータを付与可能になっている。映像処理手段４０３はそれぞれの撮像装置４０２から映像信号を受信すると（Ｓ１０１）、それぞれの映像信号に対してワイパー動作の通知があるかどうかをまず判別する（Ｓ１０２）。ワイパー動作の通知が無い場合は、そのまま画像の合成処理へと進み（Ｓ１０３）複数の撮像装置の映像情報を合成し映像処理を完了させる。ワイパー動作の通知がある場合は、その映像信号はＳ１０３の画像合成処理を通さず、映像処理を完了させる（映像として使用しない）。上記のような映像処理を各撮像装置４０２から映像信号を受信するごとに実施する。
【００４５】
以上のような処理を実施することでワイパー動作中の映像情報は画像合成処理から省くことが可能となる。そのため、映像処理でワイパーを動きのある被写体と誤検知することを防止することが可能となる。
【実施例５】
【００４６】
次に以下、図８〜図９を参照して、本発明の第５の実施例における詳細な説明を行う。なお、本実施の形態では第１〜第４の実施例と共通の部分については同一の符号を付し説明を省略する。
【００４７】
図８は本発明の第５の実施例における撮影システムのシステム構成図、図９は映像処理手段内部の映像処理フローの一部を示したフローチャートである。
【００４８】
本実施例の撮影システムは実施例４と同様に被写体を異なる位置から複数の撮像装置５０１で撮影し、多視点映像や自由視点映像を生成する撮影システムに適用した例である。
【００４９】
図８に示すように本実施例の撮影システムでは実施例４に対して撮像装置５０１それぞれが個別に映像処理手段５０２を備えている点、多視点映像生成手段５０３を新たに備えている点が異なっている。また、本実施例の撮影システムでは撮像装置５０１が操作手段１１０と個別には接続されておらず撮像装置５０１同士が直列に接続され、特定の撮像装置のみが操作手段１１０と接続される構成となっている。また、多視点映像生成手段５０３も同様に撮像装置５０１個々には接続されておらず撮像装置５０１が直列に接続され、特定の撮像装置のみが多視点映像生成手段５０３と接続される構成となっている。
【００５０】
なお、本実施例の撮像装置５０１は実施例３、４の撮像装置と同様に映像信号へワイパー１０４の駆動状態を通知するメタデータを付与可能になっている。
【００５１】
次に本実施例の撮影システムの制御信号および映像信号の伝送について説明する。
【００５２】
本実施例の撮影システムでは、操作手段１１０からのワイパー操作信号は撮像装置５０１を介しながら直列に繋がれた撮像装置５０１へ順々に送信されていく。撮像装置５０１で得られた映像信号も同様に撮像装置５０１を介して次々に映像情報を追加しながら伝送されていき、最終的に多視点映像生成手段５０３へ送信される。多視点映像生成手段５０３では集められた映像信号を用いて多視点映像を生成することが可能になっている。
【００５３】
次に各撮像装置５０１内の映像処理について説明する。
【００５４】
撮像装置５０１は直列に接続されているため自カメラで生成した映像信号の他に、他カメラで生成された映像信号も転送されてくる。そのため本実施例での映像処理手段５０２では自カメラで撮影された映像信号の処理に加えて、他カメラから転送されてきた映像信号と自カメラで映像処理された映像信号とを同期する映像処理を行い、次の撮像装置へ転送する役割を担っている。
【００５５】
次に映像処理のフローを図９のフローチャートを用いて説明する。
【００５６】
まず自カメラである撮像装置５０１で撮影された映像信号が映像処理手段５０２へ転送される。またワイパー動作の通知がある場合は、ＣＰＵ１０５から映像処理手段５０２へ通知信号が転送される（Ｓ２０１）。次にＳ２０２でワイパー動作の通知があるかどうかを判別する。ワイパー動作の通知がない場合はＳ２０３の映像同期処理へフローを進める。ワイパー動作の通知がある場合はＳ２０４で映像信号へメタデータの付与を行いＳ２０３へフローを進める。次にＳ２０３では映像信号にメタデータが付与されていない場合は、タイムコード等を利用して自カメラの映像信号と他カメラの映像信号との同期を取る。そして同期した映像信号を生成しＳ２０５へフローを進める。一方、自カメラの映像信号にメタデータが付与されている場合は、他カメラの映像信号との同期処理は行わず他カメラの映像信号のみを映像信号としてＳ２０５へフローを進める。最後にＳ２０５にて次の撮像装置５０１へ映像信号を転送する。
【００５７】
以上が本実施例での映像処理フローの説明となる。
【００５８】
以上のようなフローで映像処理を実施することで、ワイパー動作が含まれている映像信号を映像処理から省くことが可能となる。そのため、他の実施例同様に映像処理においてワイパーを被写体と誤検知することを防止することが可能となる。
【００５９】
なお、本実施例ではＳ２０３でメタデータが付与されている映像信号に関しては同期処理を行わなかったが、メタデータを残した状態で同期を行う処理としても構わない。その場合、多視点映像生成手段５０３でメタデータのついている映像情報を映像生成処理から省くフローとすれば同様の効果を得ることが可能である。
【００６０】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更、組み合わせが可能である。
【符号の説明】
【００６１】
１０１  撮像装置、１０４  ワイパー、１０５  ＣＰＵ（制御手段）、
１０９  映像処理手段
【図１】
2020136980.tif 000003
【図２】
2020136980.tif 000004
【図３】
2020136980.tif 000005
【図４】
2020136980.tif 000006
【図５】
2020136980.tif 000007
【図６】
2020136980.tif 000008
【図７】
2020136980.tif 000009
【図８】
2020136980.tif 000010
【図９】
2020136980.tif 000011