(57)【要約】  カメラ装置は、撮影手段と通信手段と特定領域検出手段と画像データ加工手段とを有する。撮影手段は、撮影範囲内の空間を撮影し、画像データを取得する。通信手段は、被写体情報を記憶したメモリデバイスと通信を行い、被写体情報を取得する。特定領域検出手段は、被写体に対応した特定領域を動的に検出する。画像データ加工手段は、被写体が保護対象である場合には、被写体情報に基づいて、特定領域から保護領域を特定し、保護領域のみを保護加工する。この構成によって、撮影される被写体の中で、保護を要する被写体を隠蔽した画像データを生成するカメラ装置が提供される。
2009001530.tif 000002
【特許請求の範囲】
【請求項１】
撮影範囲内の空間を撮影し、画像データを取得する撮影手段と、
特定の被写体のサイズと形状と向きと位置とを含む被写体情報を取得する通信手段と、
前記撮影手段で取得された前記画像データに含まれる前記被写体に対応した特定領域を動的に検出する特定領域検出手段と、
前記被写体が保護すべき保護対象である場合には、前記通信手段で取得した前記被写体情報に基づいて、前記特定領域検出手段で検出された前記特定領域から保護領域を特定し、前記保護領域のみを保護加工する画像データ加工手段と、を備える
カメラ装置。
【請求項２】
前記保護領域をユーザが指定するユーザ指定手段をさらに備え、
前記画像データ加工手段は、前記被写体情報に基づいて、前記特定領域からユーザ指定の保護領域を特定して保護加工する
請求項１に記載のカメラ装置。
【請求項３】
前記画像データ加工手段は、前記保護領域を保護加工する精度を制御する保護精度制御手段を含む
請求項１または請求項２に記載のカメラ装置。
【請求項４】
前記保護精度制御手段は、前記被写体の向きに応じて、前記被写体における保護が必要な領域の撮影面に対する射影領域を保護加工するように制御する
請求項３に記載のカメラ装置。
【請求項５】
前記保護精度制御手段は、ユーザ設定および利用環境の少なくとも一方に従って、保護対象となる被写体周辺のマージン領域を所定の範囲および形状に調整して保護加工するように制御する
請求項３に記載のカメラ装置。
【請求項６】
前記画像データ加工手段は、前記保護領域を保護加工する時間を制御する保護時間制御手段を含む
請求項１または請求項２に記載のカメラ装置。
【請求項７】
前記保護時間制御手段は、ユーザ設定に従って、前記保護領域を保護加工する時間を制限する
請求項６に記載のカメラ装置。
【請求項８】
前記保護時間制御手段は、ユーザ設定に従って、前記保護領域の保護加工を、時間に応じて動的なマスク制御および静的なマスク制御のいずれかに切り換える
請求項６に記載のカメラ装置。
【請求項９】
前記被写体は保護すべきコンテンツを再生表示している画像表示器を含み、
前記画像表示器は、ＥＰＧ情報を保持しており、
前記通信手段は、前記ＥＰＧ情報を取得し、
前記保護時間制御手段は、取得した前記ＥＰＧ情報に従って、前記保護領域を保護加工する時間を、特定番組の放映時間に相当する時間に限定する
請求項６に記載のカメラ装置。
【請求項１０】
前記画像データ加工手段は、前記保護領域を制御する保護範囲制御手段を含む
請求項１または請求項２に記載のカメラ装置。
【請求項１１】
前記保護範囲制御手段は、前記被写体の移動および前記カメラ装置の動作のいずれかに追従して、前記保護領域を変更する
請求項１０に記載のカメラ装置。
【請求項１２】
前記保護範囲制御手段は、ズームインやズームアウトに追従して、前記保護領域を変更する
請求項１０に記載のカメラ装置。
【請求項１３】
著作権保護、または、プライバシー保護された前記被写体の前記被写体情報を、画像情報とは別に画像付属情報として記録する記録手段をさらに含む
請求項１または請求項２に記載のカメラ装置。
【請求項１４】
複数の被写体が一部重なって同時に存在する場合、前記画像データ加工手段は、前記通信手段で取得した前記被写体情報に基づいて、前記複数の被写体の重なり部分を検知して、前記保護領域を動的に変更する
請求項１または請求項２に記載のカメラ装置。
【請求項１５】
前記画像データ加工手段は、前記被写体の前記保護領域を、動的に別画像に置き換える加工をする
請求項１または請求項２に記載のカメラ装置。
【請求項１６】
前記画像データ加工手段は、保護する領域を前記被写体の動きおよび記録再生映像の前後のフレーム情報の少なくともひとつから予測し、予めマスク領域を準備する保護範囲予測制御手段を含み、準備した前記マスク領域を保護加工する
請求項１または請求項２に記載のカメラ装置。
【請求項１７】
ジャイロ・センサをさらに備え、
前記画像データ加工手段は、保護する領域を前記ジャイロ・センサの出力情報から予測して、予めマスク領域を準備する保護範囲予測制御手段を含み、準備した前記マスク領域を保護加工する
請求項１または請求項２に記載のカメラ装置。
【請求項１８】
撮影対象に含まれる保護すべき被写体を保護加工して撮影する撮影方法であって、
撮影範囲内の空間を撮影し、画像データを取得する撮影ステップと、
前記被写体に付属して設けられ、前記被写体のサイズと形状と向きと位置とを含む被写体情報を取得する通信ステップと、
取得された前記画像データに含まれる特定の被写体に対応した特定領域を動的に検出する特定領域検出ステップと、
前記被写体が保護すべき保護対象である場合には、取得した前記被写体情報に基づいて、検出された前記特定領域から保護領域を特定し、前記保護領域のみを保護加工する画像データ加工ステップと、を備える
撮影方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影し、撮影した被写体の画像データを記録媒体に記録するカメラ装置と撮影方法とに関する。
【背景技術】
【０００２】
近年、静止画を撮影するデジタルスチルカメラ、または、動画を撮影するデジタルビデオカメラのようなカメラ装置、さらには、デジタルカメラを内蔵する各種電子機器などが普及している。これに伴い、著作権、または、肖像権、その他のプライバシーなどの保護対象（以下、これらをまとめて「保護対象」と総称する）である被写体が、無意識に、かつ、無作為に撮影され、撮影された画像、または、画像に対応する画像データが流布する危険性が増大している。さらに、デジタルカメラ、または、カメラ付き携帯電話にも、短時間の動画撮影録画機能が装備されている。また、インターネットを使うことによって、デジタルカメラ、または、カメラ付き携帯電話などを使って、保護対象の被写体を含む画像を全世界へ瞬時に配布することも可能である。【０００３】
一方、公共性、または、安全確保、防犯などを目的として、街頭、または、ＡＴＭ端末、コンビニ、公共施設、会社、工場などの監視カメラによって、人の顔が頻繁に撮影されている。これらの監視カメラで撮影された画像の画像データの取り扱いは、必ずしも、プライバシー保護を考慮して行われていない。このため、これらの保護すべき被写体の画像データに対する保護対策として、保護対象の画像、または、画像データに対する各種の保護技術が提案されている。【０００４】
このような保護技術の１つとして、たとえば、カメラの撮影範囲内の一部に保護対象の被写体がある場合、この保護対象の被写体をマスキング加工などによって隠蔽する技術が知られている。すなわち、保護対象の被写体を隠蔽することによって、肖像権などが保護される。このように、保護対象の被写体を撮影したとしても、保護対象の被写体を判別不可能にする技術が、たとえば、特許文献１に提案されている。【０００５】
このような従来のカメラは、画像に対するモザイク処理のような、画像を隠蔽する機能を有している。すなわち、従来のカメラは、モザイク処理モードのボタンを操作することによって、ボタン操作直後の撮影によって得られた画像データについて、適正なパスワードが入力されない限り、画像の一部についてモザイク処理をする構成である。図１０Ａと図１０Ｂとは、このような従来のカメラによって撮影された画像２０１の一例を示す図である。図１０Ａは、モザイク処理モードを用いない、通常モードで撮影された画像２０１の一例を示している。また、図１０Ｂは、モザイク処理モードを用いて撮影された画像２０１の一例を示している。また、図１０Ｂに示すように、画像２０１の一部の保護対象の被写体２０２を隠蔽するモザイクの領域２０３は、モザイク処理モードが選択されたときに、ユーザが設定可能に構成されている。【０００６】
また、保護対象の画像、または、保護対象の画像の画像データに対する、その他の保護技術として、画像に埋め込まれた電子透かしを用いることによって、保護対象の被写体であることが明示されている場合、この画像の撮影を阻止する技術が、たとえば、特許文献２に開示されている。また、ＩＣタグなどの、保護対象の被写体であることを示す情報を発信する機器を用いて、保護対象の被写体の撮影を阻止する技術が、たとえば、特許文献３などに開示されている。【０００７】
しかしながら、特許文献１に開示された従来のカメラの構成の場合、撮影開始前に保護処理すべき被写体の画像領域を表示装置上で手動によって指定し、保護処理を行う範囲を設定する必要がある。このため、動画撮影においては適切に対応することができないという課題がある。また、特許文献２と特許文献３とのようなカメラの構成の場合、撮影範囲全体の保護処理は可能である。しかしながら、保護対象の被写体が撮影範囲の一部である場合には、保護対象の被写体のみの保護処理を行うことができないという課題がある。また、これらの従来の技術は、保護対象の被写体の検出を自動的に行うことができない。したがって、保護対象の被写体が動いたり、変化したりする場合、自動的に保護対象の被写体を追尾できないという課題もある。
【特許文献１】特開２００３−８７６３２号公報
【特許文献２】特開２００５−１５１１２４号公報
【特許文献３】特開２００５−２２３６０１号公報
【発明の開示】
【０００８】
本発明は、保護対象の被写体が動いたり、変化したりしても、被写体が追尾され、保護対象の被写体を含む画像に対して、被写体の画像領域が保護加工されるカメラ装置とこのカメラ装置に適用される撮影方法とを提供する。
【０００９】
本発明のカメラ装置は、撮影手段と通信手段と特定領域検出手段と画像データ加工手段とを有する。撮影手段は、撮影範囲内の空間を撮影して、画像データを取得する。通信手段は、特定の被写体のサイズと形状と向きと位置とを含む被写体領域情報を記憶した無線通信可能なメモリデバイスと通信を行い、被写体情報を取得する。特定領域検出手段は、撮影手段で取得された画像データに含まれる被写体に対応した特定領域を動的に検出する。画像データ加工手段は、被写体が著作権保護、または、プライバシー保護すべき保護対象である場合には、通信手段で取得した被写体情報を基に、特定領域検出手段で検出された特定領域から保護領域を特定し、保護領域のみを保護加工する。この構成によって、撮影される被写体の中で、著作権、または、肖像権、プライバシーなどの保護を要する被写体を隠蔽した画像データを生成するカメラ装置が得られる。
【００１０】
また、本発明の撮影方法は、撮影対象に含まれる著作権保護、または、プライバシー保護すべき被写体を保護加工して撮影する方法であって、撮影ステップと通信ステップと特定領域検出ステップと画像データ加工ステップとを有する。撮影ステップは、撮影範囲内の空間を撮影し、画像データを取得する。通信ステップは、被写体に付属して設けられ、被写体のサイズと形状と向きと位置とを含む被写体情報を保持した無線通信可能なメモリデバイスと通信を行い、被写体情報を取得する。特定領域検出ステップは、取得された画像データに含まれる特定の被写体に対応した特定領域を動的に検出する。画像データ加工ステップは、被写体が著作権保護またはプライバシー保護すべき保護対象である場合には、取得した被写体情報に基づいて、検出された特定領域から保護領域を特定し、保護領域のみを保護加工する。この方法によって、撮影される被写体の中で、著作権、または、肖像権、プライバシーなどの保護を要する被写体を隠蔽した画像データを生成する撮影方法が提供される。
【図面の簡単な説明】
【００１１】
【図１】図１は本発明の実施の形態におけるカメラ装置の構成を示すブロック図である。
【図２】図２は図１に示すカメラ装置に用いられる保護制御部の構成を示すブロック図である。
【図３】図３は図１に示すカメラ装置に適用される撮影方法を示すフローチャートである。
【図４Ａ】図４Ａは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｂ】図４Ｂは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｃ】図４Ｃは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｄ】図４Ｄは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｅ】図４Ｅは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｆ】図４Ｆは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｇ】図４Ｇは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｈ】図４Ｈは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図４Ｉ】図４Ｉは保護対象の被写体に対する保護加工の一例を示す説明図である。
【図５】図５は画像データを合成した画像の一例を示す図である。
【図６Ａ】図６Ａは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図６Ｂ】図６Ｂは保護対象となる画像が表示された被写体に対する保護加工の一例を示す図である。
【図６Ｃ】図６Ｃは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図７Ａ】図７Ａは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図７Ｂ】図７Ｂは保護対象となる画像を撮影する場合のカメラ装置の状態を示す概要図である。
【図７Ｃ】図７Ｃは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図７Ｄ】図７Ｄは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図８Ａ】図８Ａは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図８Ｂ】図８Ｂは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図８Ｃ】図８Ｃは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図８Ｄ】図８Ｄは保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図である。
【図９】図９は図１に示すカメラ装置に適用される保護再生方法を示すフローチャートである。
【図１０Ａ】図１０Ａは従来のカメラによって撮影された画像の一例を示す説明図である。
【図１０Ｂ】図１０Ｂは従来のカメラによって撮影された画像の一例を示す説明図である。
【符号の説明】
【００１２】
１０    カメラ装置
１１    第１カメラ
１２    第２カメラ
１３    オートフォーカス処理部
１４    ネットワーク通信部
１５    カメラ制御部
１６    画像音声形成部
１７    保護制御部
１８    保護処理部
１９    記録再生処理部
２０    Ｒ／Ｗ制御部
２１    出力Ｉ／Ｆ部
２２    記録メディア
２３    画像音声提示部
２４    ユーザＩ／Ｆ部
２５    マイク
２６    ジャイロ部
２８    モニタ
３０，３１，４２    被写体
３４    ＩＣタグ
３５    画像
３６    画像表示器
３７    芸術品
３８    サーバ
３９    電波
４０    撮影範囲
４４    特定領域
４６    保護領域
７１    保護判定部
７２    保護範囲制御部
７３    保護精度制御部
７４    保護時間制御部
７５    保護範囲予測制御部
８１    画像音声メモリ
８２    距離推定部
８３    特定領域検出部
８４    電子透かし抽出部
８５    形状探索部
【発明を実施するための最良の形態】
【００１３】
以下、本発明の実施の形態について図面を参照しながら詳細に説明する。【００１４】
（実施の形態）
図１は、本発明の実施の形態におけるカメラ装置１０の構成を示すブロック図である。また、図２は、カメラ装置１０に用いられる保護制御部１７の構成を示すブロック図である。【００１５】
また、本発明の実施の形態におけるカメラ装置１０は、たとえば、動画を撮影するデジタルビデオカメラとして用いられる。カメラ装置１０は、撮影する被写体３０、３１が著作権、肖像権、その他のプライバシー保護の保護対象の被写体である場合に、被写体３０、３１を撮影して得られる画像データＶ１０、Ｖ２０の出力表示画像、または、記録再生画像に保護加工を加えて出力する。なお、本発明のカメラ装置１０は、カメラ付き携帯電話、または、カメラ付きＰＤＡなどのデジタルカメラが付属された各種電子機器に付属されるデジタルカメラにも適用される。また、静止画を撮影するデジタルスチルカメラ、または、デジタルスチルカメラに設けられた動画撮影機能などにも適用される。【００１６】
図１と図２とに示すように、カメラ装置１０は、第１カメラ１１（以下、カメラ１１と呼ぶ）と第２カメラ１２（以下、カメラ１２と呼ぶ）とマイク２５と画像音声形成部１６と画像音声メモリ８１（以下、メモリ８１と呼ぶ）とを有している。さらに、カメラ装置１０は、ネットワーク通信部１４（以下、通信部１４と呼ぶ）とカメラ制御部１５とオートフォーカス処理部１３（以下、処理部１３と呼ぶ）とジャイロ部２６とを有している。さらにまた、カメラ装置１０は、特定領域検出部８３（以下、検出部８３と呼ぶ）と形状探索部８５と距離推定部８２と電子透かし抽出部８４（以下、抽出部８４と呼ぶ）とを有している。さらにまた、カメラ装置１０は、保護制御部１７と保護処理部１８とを有している。保護制御部１７は、保護判定部７１と保護範囲制御部７２と保護精度制御部７３と保護時間制御部７４とを有している。さらにまた、カメラ装置１０は、記録再生処理部１９（以下、処理部１９と呼ぶ）とリード／ライト（Ｒｅａｄ／Ｗｒｉｔｅ）制御部２０（以下、Ｒ／Ｗ制御部２０と呼ぶ）と出力インタフェース（Ｉｎｔｅｒｆａｃｅ）部２１（出力Ｉ／Ｆ部２１と呼ぶ）と画像音声提示部２３（以下、提示部２３と呼ぶ）とユーザインタフェース（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）部２４（以下、ユーザＩ／Ｆ部２４と呼ぶ）とを有している。【００１７】
カメラ１１、１２は、撮影範囲内の空間を撮影し画像データを取得する撮影手段である。カメラ１１、１２は、被写体３０、または、被写体３１を含む撮影範囲内の画像を撮影し、撮影した画像に対応する画像データを生成する。被写体３０と被写体３１とは、撮影対象の一部である。被写体３０と被写体３１に含まれる画像３５とが、保護すべき対象である特定の被写体であると仮定する。また、図１に示すように、被写体３０にＩＣタグ３４が取り付けられている。また、被写体３１は、画像３５を表示している、たとえば、テレビ受像機のような画像表示器３６であり、同様に、ＩＣタグ３４が取り付けられている。【００１８】
カメラ装置１０は、カメラ１１とカメラ１２とのように、２つのカメラ１１、１２を有している。カメラ１１、１２は、所定の間隔を隔てて配置されていることによって、２眼撮影が可能である。なお、２眼撮影することによって、カメラ１１、１２は、立体画像データを取得することができる。本実施の形態では、図１に示すように、２つのカメラ１１、１２によって、立体画像を取得できる構成について説明する。しかしながら、カメラ装置１０は、立体画像ではない通常画像の表示、または、記録再生をする構成であってもよい。たとえば、カメラ１１、１２のうち、一方のカメラが距離測定機能に特化された撮影手段であってもよい。さらにまた、カメラ装置１０は、カメラ１１、１２のうち、一方のカメラのみを有する構成であってもよい。【００１９】
カメラ１１、１２は、たとえば、光学レンズ群（図示せず）と撮像素子（図示せず）とＡＤ変換器（図示せず）とを有している。撮像素子は、マトリクス状に配列されたＣＣＤ、または、ＭＯＳによって構成されるイメージセンサなどである。ＡＤ変換器は、画像信号をデジタルデータに変換する機能を有している。カメラ１１、１２において、撮像素子の各画素によって検出された光量は、電気信号に変換される。変換された電気信号が画像信号となる。さらに、画像信号は、ＡＤ変換器によってデジタル信号である画像データに変換される。カメラ１１は、このように生成された画像データＶ１０を出力する。カメラ１２は、同様に、生成された画像データＶ２０を出力する。カメラ１１から出力された画像データＶ１０とカメラ１２から出力された画像データＶ２０とは、画像音声形成部１６へ入力される。【００２０】
マイク２５は、カメラ１１、１２によって撮影される撮影範囲近辺の音を取得し、電気信号に変換する。変換された電気信号は、デジタルデータに変換された音声データＡ３として、画像音声形成部１６へ入力される。【００２１】
また、画像音声形成部１６は、カメラ１１、１２が出力した２つの画像データＶ１０、Ｖ２０を受け取り、あらかじめ決められた所定のフォーマットなどに従った画像データの形式に変換する。たとえば、立体画像を表示するための画像データＶ３０を合成する場合、２つの画像データＶ１０、Ｖ２０から立体視が可能な画像データＶ３０を形成する。また、画像音声形成部１６は、マイク２５から出力された音声データＡ３を受け取る。画像音声形成部１６は、まず、画像データＶ１０、Ｖ２０と音声データＡ３とをメモリ８１に保存する。メモリ８１は、画像データＶ１０、Ｖ２０と音声データＡ３とを、フレーム単位で蓄積するメモリである。画像音声形成部１６は、画像データＶ１０、Ｖ２０をメモリ８１に蓄積するとともに、蓄積した画像データＶ１０、Ｖ２０を適宜抽出する。このことによって、立体画像データである画像データＶ３０を生成する。画像音声形成部１６は、右眼に対応するカメラ１１から出力された画像データＶ１０を第１フィールドとし、左眼に対応するカメラ１２から出力された画像データＶ２０を第２フィールドとする画像データＶ３０を合成する。このようにして画像データＶ３０が合成される。画像データＶ３０による表示画像は、たとえば、シャッタ付きの眼鏡（図示せず）が利用され、シャッタが右の画像データと左の画像データとのタイミングに同期して切替えられる。このことによって、立体画像が視認可能である。画像音声形成部１６は、画像データＶ３０を保護処理部１８に供給する。なお、画像音声形成部１６が出力する画像データＶ３０は、必ずしも、立体画像である必要はなく、カメラ１１から出力された通常の画像データＶ１０、または、カメラ１２から出力された通常の画像データＶ２０のいずれか、または、両方であってもよい。【００２２】
通信部１４は、被写体３０、３１に取り付けられているＩＣタグ３４と通信を行い、ＩＣタグ３４が記憶するタグ情報を取得する通信手段である。通信部１４は、たとえば、電波３９などの高周波の電磁波を発信し、発信した電波３９に対する応答である応答信号などの電波３９を受信する。すなわち、図１に示すように、カメラ装置１０の近辺にＩＣタグ３４が存在する場合、通信部１４が発信した電波３９がＩＣタグ３４によって受信される。ＩＣタグ３４は、通信部１４から発信された電波３９を受信すると、受信した電波３９に応答して、ＩＣタグ３４が記憶しているタグ情報を含む電波３９を送信する。通信部１４は、ＩＣタグ３４から発信された、タグ情報を含む電波３９を受信し、電波信号の中からタグ情報を抽出する。被写体３０に取り付けられたＩＣタグ３４は、タグ情報として、ＩＣタグ３４が取り付けられた被写体３０における著作権、肖像権、その他プライバシー保護などの保護対象か否かを示す有無情報とともに、被写体３０のサイズ情報と形状情報と向き情報と位置情報などの被写体情報を含んでいる。以下、有無情報は、著作権保護／プライバシー保護の有無情報として説明する。なお、被写体３０が、著作権保護／プライバシー保護を必要とする保護対象を含む場合、被写体情報は、被写体３０に関する物体情報と保護対象に関する保護対象物情報とを含む。すなわち、被写体３０に関する物体サイズ情報と物体形状情報と物体向き情報などが物体情報に分類される。保護対象に関する保護対象サイズ情報と保護対象形状情報と保護対象向き情報と保護対象位置情報などが保護対象物情報に分類される。被写体３１に取り付けられたＩＣタグ３４は、タグ情報として、ＩＣタグ３４が取り付けられた被写体３１における著作権保護／プライバシー保護の有無情報とともに、被写体３１の画面サイズ情報と画面の向き情報などの、画像表示器３６の表示状態に関する被写体情報を含む。同様に、被写体３１が著作権保護／プライバシー保護を必要とする保護すべき対象となる画像３５を含む場合、被写体情報は、被写体３１に関する物体情報と保護対象に関する保護対象物情報とを含む。すなわち、画像表示器３６の画像表示面に保護対象が表示されている場合、被写体３１の画面サイズ情報と画面の向き情報などが保護対象物情報に分類される。なお、通信部１４は、被写体３０、３１に取り付けられたＩＣタグ３４からタグ情報を受信すると、保護範囲制御部７２へタグ情報を通知する。【００２３】
ＩＣタグ３４は、電子タグ、無線タグ、あるいはＲＦＩＤ（Radio Frequency Identification）などと呼ばれ、内部に電子回路（図示せず）が組み込まれた、通信可能な小型のメモリデバイスである。電子回路は、記憶部（図示せず）と無線通信部（図示せず）とを有する。ＩＣタグは、たとえば、物品（図示せず）などに取り付けられ、ＩＣタグ検出器（図示せず）によって、ＩＣタグに記憶されたタグ情報を読み取る。ＩＣタグに記憶されたタグ情報を読み取ることによって、ＩＣタグが取り付けられた物品の識別コード、または、所有者、身元などが判別される。なお、便宜上、通信部１４が通信する対象をＩＣタグ３４として説明する。しかしながら、通信部１４が通信を行い、被写体情報を取得する対象は、ＩＣタグ３４に限定されない。通信部１４の通信の対象は、記憶部と無線通信部とを有し、通信部１４と通信可能な小型のメモリデバイスであればよく、たとえば、記憶部が搭載されたブルートゥース（Bluetooth：米国Bluetooth SIG, Inc.の登録商標）などの無線通信デバイス、光通信デバイスであってもよい。【００２４】
被写体３１は、テレビジョン受信機などの画像表示器３６である。図１に示す画像表示器３６は、被写体３１として、著作権保護などの保護対象となる画像３５が、画像３５を保護するための電子透かしとともに表示されている。【００２５】
ＩＣタグ３４に記憶されているタグ情報の一例を表１に示す。表１に示すように、タグ情報は、ヘッダ（Header）領域とデータ（Data）領域とを有し、ＩＣタグ３４が取り付けられている被写体３０、３１に関する情報が記録されている。なお、被写体３０、３１に関する情報は、被写体３０、３１がカメラ装置１０によって撮影された場合、撮影範囲内の被写体情報として認識される。【００２６】
【表１】
2009001530.tif 000003
【００２７】
ヘッダ領域には、それぞれ、「Ｔａｇ−ＩＤ」と「Ｌｅｎｇｔｈ」と「Ｃｏｎｔｅｎｔ  ＩＤ」と「Ｔｙｐｅ」と「Ｅｎｃｒｙｐｔｉｏｎ」とが記録されている。「Ｔａｇ−ＩＤ」は、ＩＣタグ３４を識別するための識別子の情報であり、情報の長さが８バイト（Ｂｙｔｅ）である。「Ｌｅｎｇｔｈ」は、ＩＣタグ３４が送信するタグ情報の送信情報の長さを示す情報であり、情報の長さが８Ｂｙｔｅである。「Ｃｏｎｔｅｎｔ  ＩＤ」は、ＩＣタグ３４が取り付けられている被写体３０、３１を特定するための情報であり、情報の長さが６４Ｂｙｔｅである。「Ｔｙｐｅ」は、被写体３０、３１の有するコンテンツ付属情報、または、ＥＰＧ情報（ＥＰＧ  Ｉｎｆｏとも呼ぶ）などを特定するための情報であり、情報の長さが４Ｂｙｔｅである。「Ｅｎｃｒｙｐｔｉｏｎ」は、データ領域に記録されている情報に、暗号化処理が行われているかどうかを示す暗号化情報であり、情報の長さが４Ｂｙｔｅである。【００２８】
データ領域には、それぞれ、「Ｃｏｎｔｅｎｔ  ＩＤ」と「Ｔｙｐｅ」と「Ｃｏｎｔｅｎｔ  Ａｔｔｒｉｂｕｔｅ」と「Ｃｙｃｌｉｃ  Ｒｅｄｕｎｄａｎｃｙ  Ｃｈｅｃｋ」（以下、ＣＲＣと呼ぶ）とが記録されている。なお、データ領域に記録されている情報が暗号化処理の対象となる。「Ｃｏｎｔｅｎｔ  ＩＤ」は、ＩＣタグ３４が取り付けられている被写体３０、３１を特定するための情報であり、情報の長さが６４Ｂｙｔｅである。「Ｔｙｐｅ」は、被写体３０、３１の有するコンテンツ付属情報、または、ＥＰＧ情報などを特定するための情報であり、情報の長さが４Ｂｙｔｅである。「Ｃｏｎｔｅｎｔ  Ａｔｔｒｉｂｕｔｅ」は、被写体３０、３１のコンテンツ属性を示す情報であり、情報の長さは可変長である。「ＣＲＣ」は、タグ情報が改ざんされたかどうかを判別するための改ざんチェック情報であり、情報の長さが４Ｂｙｔｅである。また、「Ｃｏｎｔｅｎｔ  Ａｔｔｒｉｂｕｔｅ」は、「Ｃｏｎｔｅｎｔ  情報」（以下、Ｃｏｎｔｅｎｔ  Ｉｎｆｏと呼ぶ）と「Ｅｎｖｉｒｏｎｍｅｎｔａｌ  情報」（以下、Ｅｎｖ  Ｉｎｆｏと呼ぶ）と「ＥＰＧ  Ｉｎｆｏ」とを含む。「Ｃｏｎｔｅｎｔ  Ｉｎｆｏ」は、被写体３０、３１の個別の情報であるコンテンツ情報であり、情報の長さは可変長である。「Ｅｎｖ  Ｉｎｆｏ」は、被写体３０、３１の周囲の環境に関する環境情報であり、情報の長さは可変長である。「ＥＰＧ  Ｉｎｆｏ」は、被写体３１に含まれる画像３５に関するＥＰＧ情報であり、情報の長さは可変長である。【００２９】
また、「Ｃｏｎｔｅｎｔ  Ｉｎｆｏ」は、」ＰｒｏｔｅｃｔとＴａｒｇｅｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」と「Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」と「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」と「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」と「Ａｃｃｅｌｅｒａｔｉｏｎ」（以下、Ａｃｃｅｌと呼ぶ）と「Ｒｅｓｅｒｖｅｄ」とを含む。「Ｐｒｏｔｅｃｔ」は、被写体３０、３１に対して、著作権保護、または、プライバシー保護が必要であるかどうかを示す保護有無情報であり、情報の長さが４Ｂｙｔｅである。なお、「Ｐｒｏｔｅｃｔ」は、被写体３０、３１が保護対象であるかどうかに加え、保護対象が部分的な領域であるか、全体が保護対象であるかの情報も含んでいる。したがって、たとえば、「Ｐｒｏｔｅｃｔ」は、保護対象ではない（Ｎｏｎｅ）／部分的に保護対象（Ｐａｒｔｉａｌ）／全体が保護対象（ＡＬＬ）などによって示されている。「Ｔａｒｇｅｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」は、被写体３０、３１のサイズを示す物体サイズ情報と被写体３０、３１の形状を示す物体形状情報であり、情報の長さが３２Ｂｙｔｅである。なお、物体形状情報は、領域情報として記録されてもよい。「Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」は、被写体３０、３１の向きを示す物体向き情報であり、情報の長さが１６Ｂｙｔｅである。「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」は、被写体３０、３１に含まれる保護対象のサイズを示す保護対象サイズ情報と保護対象の形状を示す保護対象形状情報であり、情報の長さが３２Ｂｙｔｅである。なお、保護対象形状情報は、領域情報として記録されてもよい。「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」は、被写体３０、３１に含まれる保護対象の向きを示す保護対象向き情報であり、情報の長さが１６Ｂｙｔｅである。「Ａｃｃｅｌ」は、被写体３０、３１に含まれる保護対象の動きに関する情報であり、情報の長さが３２Ｂｙｔｅである。なお、「Ａｃｃｅｌ」は、たとえば、保護対象加速度情報、または、保護対象角速度情報であり、保護対象の位置を示す保護対象位置情報と考えることができる。「Ｒｅｓｅｒｖｅｄ」は、被写体３０、３１、または、被写体３０、３１に含まれる保護対象に関して、さらに、必要と思われるコンテンツ情報を記録するために予備として確保されている予約領域であり、情報の長さは可変長である。【００３０】
また、「Ｅｎｖ  Ｉｎｆｏ」は、「Ｔｅｍｐ」と「Ｒｅｓｅｒｖｅｄ」とを含む。「Ｔｅｍｐ」は、被写体３０、３１の周囲の温度に関する環境温度情報、または、被写体３０、３１に含まれる保護対象の温度に関するターゲット温度情報であり、情報の長さが４Ｂｙｔｅである。「Ｒｅｓｅｒｖｅｄ」は、被写体３０、３１の周囲の環境、または、保護対象自身の環境条件に関して、さらに、必要と思われる環境情報を記録するために予備として確保されている予約領域であり、情報の長さは可変長である。【００３１】
また、「ＥＰＧ  Ｉｎｆｏ」は、「Ｓｃｈｅｄｕｌｅ」と「Ｒｅｓｅｒｖｅｄ」とを含む。「Ｓｃｈｅｄｕｌｅ」は、被写体３１に含まれる画像に関する番組スケジュール情報を記録する情報領域であり、情報の長さは可変長である。さらに、「Ｓｃｈｅｄｕｌｅ」は、被写体３１に含まれる画像に関する著作権保護、または、プライバシー保護が必要であるかどうかを示す保護有無情報を含む。「Ｒｅｓｅｒｖｅｄ」は、被写体３１に含まれる画像に関するＥＰＧ情報に関して、さらに、必要と思われるＥＰＧ情報を記録するために予備として確保されている予約領域であり、情報の長さは可変長である。【００３２】
以上、ＩＣタグ３４に記憶されているタグ情報の一例について説明した。なお、タグ情報は、上記の構成に限定されない。以下に説明するように、カメラ装置１０が、少なくとも、保護加工するべき保護領域を特定するために必要となる保護対象物情報を含む被写体情報を有していればよい。【００３３】
通信部１４は、サーバ通信部（図示せず）を有するサーバ３８とも通信を行うことができる。通信部１４は、たとえば、サーバ３８に対して、電波３９などの高周波の電磁波を発信し、発信した信号に対する応答である応答信号などの電波３９を受信する。サーバ３８からの応答信号としては、たとえば、画像表示器３６が表示する公共放送に関する電子番組表（ＥＰＧ）などの情報である。なお、サーバ３８は、放送、または、通信コンテンツプロバイダなどのネットワーク配信用サーバに接続され、配信用サーバから、ネットワークを介してＥＰＧ番組情報などを入手することができる。【００３４】
カメラ制御部１５は、ユーザＩ／Ｆ部２４からの撮影に関する指示情報に応じて、カメラ１１、１２と処理部１３とを制御する。たとえば、ユーザＩ／Ｆ部２４からズームインの指示情報が通知されると、カメラ制御部１５は、カメラ１１、１２の光学レンズ群を制御し、カメラ１１、１２の撮影する撮影範囲を狭くする。逆に、ユーザＩ／Ｆ部２４からズームアウトの指示情報が通知されると、カメラ制御部１５は、カメラ１１、１２の光学レンズ群を制御し、カメラ１１、１２の撮影する撮影範囲を広くする。カメラ制御部１５は、たとえば、ズームイン時の拡大率などの、カメラ制御部１５がカメラ１１、１２を制御した情報を、操作情報として、検出部８３と保護範囲制御部７２とへ通知する。なお、操作情報は、カメラ装置１０が撮影を行う際の、撮影条件情報の一部である。【００３５】
処理部１３は、カメラ制御部１５からオートフォーカス処理を実行するように通知されると、カメラ１１、１２の撮影範囲内のほぼ中央に位置する撮影対象にフォーカスが合うように、カメラ１１、１２のそれぞれの光学レンズ群の焦点を制御する。なお、カメラ１１、１２の撮影範囲内のほぼ中央に位置する撮影対象は被写体３０、３１であってもよい。また、ときには、処理部１３は、大面積の撮影対象にフォーカスが合うように、カメラ１１、１２のそれぞれの光学レンズ群の焦点を制御することもできる。なお、大面積の撮影対象が被写体３０、３１であってもよい。処理部１３は、被写体３０、３１とカメラ装置１０との間の距離情報を生成し、カメラ制御部１５へ通知する。カメラ制御部１５は、処理部１３から通知された距離情報を、検出部８３と保護範囲制御部７２とへ通知する。なお、距離情報も、カメラ装置１０が撮影を行う際の、撮影条件情報の一部である。【００３６】
ジャイロ部２６は、角速度センサ、または、加速度センサなどのジャイロ・センサ（図示せず）を内蔵し、ジャイロ部２６に内蔵されたジャイロ・センサの出力信号に基づいて、ジャイロ部２６が搭載されているカメラ装置１０の向き情報と位置情報とを出力する。出力された向き情報と位置情報とは、カメラ制御部１５へ入力される。カメラ制御部１５へ入力されたカメラ装置１０の向き情報と位置情報とが、検出部８３と保護範囲制御部７２とへ通知される。カメラ装置１０の向き情報は、カメラ装置１０の相対的な向きを示す情報である。カメラ装置１０の相対的な向き情報は、たとえば、撮影開始から変化した向きの状態量であってもよいし、被写体３０、３１とカメラ装置１０との相対的な向き関係を状態量として表してもよい。同様に、カメラ装置１０の位置情報も、カメラ装置１０の相対的な位置を示す情報である。カメラ装置１０の相対的な位置情報は、たとえば、撮影開始から変化した位置の状態量であってもよいし、被写体３０、３１とカメラ装置１０との相対的な位置関係を状態量として表してもよい。カメラ装置１０の向き情報と位置情報とは、共に、カメラ装置１０が撮影を行う際の、撮影条件情報の一部である。【００３７】
検出部８３は、カメラ１１、１２で取得した画像データＶ１０、Ｖ２０に含まれる特定の被写体３０、３１に対応した特定領域を動的に検出する特定領域検出手段として機能する。すなわち、検出部８３は、検出部８３に通知される保護対象物情報と候補情報と電子すかし領域情報と距離情報と撮影条件情報などに基づいて、保護対象である特定の被写体３０、３１に対応した特定領域を検出する。検出部８３は、タグ情報に含まれる特定の被写体３０、３１の保護対象サイズ情報と保護対象形状情報と保護対象向き情報などの基本情報とともに、動的に変化する操作情報、または、動きに追従した距離情報に基づいて特定領域を検出する。このため、たとえば、動画像のような保護対象の被写体３０が動いたり、大きさが変化したりするような画像に対しても特定領域を精度よく検出することができる。検出部８３は、検出した特定領域に関する情報を特定領域情報として保護範囲制御部７２へ通知する。なお、保護対象物情報は保護範囲制御部７２から、候補情報は形状探索部８５から、電子すかし情報は抽出部８４から、距離情報は距離推定部８２から、撮影条件情報はカメラ制御部１５から、それぞれ検出部８３へ通知される。なお、検出部８３が、被写体３０、３１に対応した特定領域を動的に検出する場合、保護対象物情報と候補情報と電子すかし領域情報と距離情報と撮影条件情報との全ての情報に基づいて、検出することに限定されない。たとえば、被写体３０に対応した特定領域を動的に検出する場合、保護対象物情報と候補情報とに基づいて、特定領域を動的に検出することができる。また、たとえば、撮影範囲内に存在する動的な被撮影物が被写体３０だけである場合、被写体３０に対応した特定領域を、距離情報のみに基づいて、または、操作情報のみに基づいて、特定領域を動的に検出することができる。また、被写体３１に対応した特定領域を動的に検出する場合、電子すかし領域情報のみに基づいて、特定領域を動的に検出することができる。なお、保護対象物情報と候補情報と電子すかし領域情報と距離情報と操作情報などの撮影条件情報とが複合的に利用されることによって、特定領域を動的に検出するときの検出精度がさらに向上する。【００３８】
形状探索部８５は、メモリ８１に蓄積された画像データＶ１０と画像データＶ２０とのうちの少なくともいずれか一方の画像データにおいて、検出部８３から通知された保護対象物情報に対応する部分画像の領域を探索する。すなわち、たとえば、顔の輪郭のような形状が指定される場合、形状探索部８５は、メモリ８１に蓄積された画像データＶ１０、または、画像データＶ２０の画像内において、顔の形状が存在する箇所を探査する。顔の形状の存在を探査した結果、形状探索部８５は、顔の形状が存在すると判断した場合、顔の形状が存在する位置情報と顔のサイズ情報とを生成する。形状探索部８５は、生成した位置情報とサイズ情報とを候補情報として検出部８３へ通知する。このように、画像データＶ１０、Ｖ２０に対して、形状探索部８５は、検出部８３から通知される保護対象形状情報に対応した部分画像の領域を探索する。形状探索部８５は、探索によって検出した部分画像のサイズ情報と位置情報とを候補情報として検出部８３と距離推定部８２とに通知する。【００３９】
距離推定部８２は、画像データＶ１０と画像データＶ２０とを参照して、カメラ装置１０から被写体３０までの距離を推定する。２つのカメラ１１、１２から生成された、２眼視による画像データＶ１０、Ｖ２０においては、２つの画像を重ねた場合、被写体３０の位置が左右にずれている。カメラ装置１０と被写体３０との距離が近距離であるほど、画像データＶ１０と画像データＶ２０との間の被写体３０の左右のずれ量は大きくなる。このため、被写体３０の左右のずれ量に基づいて、カメラ装置１０から被写体３０までの距離を推定することが可能である。距離推定部８２は、このような原理に基づき、推定した被写体３０までの距離を距離情報として検出部８３に通知する。【００４０】
抽出部８４は、メモリ８１に蓄積された画像データＶ１０と画像データＶ２０との少なくともいずれか一方の画像データを参照して、参照した画像データに電子透かしが存在するかどうかを判定する。抽出部８４は、画像データＶ１０、Ｖ２０の画像内に電子透かしが存在すると判定する場合、画像上における電子透かしを表示している画像表示器３６、または、表示部などの領域に関する情報を生成する。抽出部８４は、このような領域に関する情報と、少なくともこの領域に関するサイズ情報と形状情報と位置情報などを含む情報とを透かし領域情報として検出部８３に通知する。被写体３１のように画像表示器３６の表示状態に関する情報を含むタグ情報を記憶したＩＣタグ３４が取り付けられている場合、表示状態に関する情報を保護対象物情報として、検出部８３から抽出部８４へ通知される。抽出部８４は、検出部８３から通知された保護対象物情報を利用して、著作権保護、または、プライバシー保護を要する領域、または、画像を置き換えたい領域のサイズ情報と形状情報とに調整し、これらの情報を透かし領域情報として検出部８３に通知する。【００４１】
保護制御部１７は、カメラ装置１０が撮影する撮影範囲内に著作権保護／プライバシー保護するべき保護対象がある場合に、通信部１４で取得したタグ情報などに基づいて、検出部８３で検出された特定領域情報から保護領域を特定する。保護制御部１７は、ユーザＩ／Ｆ部２４を介して通知されるユーザ指示に基づいた指示信号に応じて動作する。ユーザＩ／Ｆ部２４を介して通知される指示信号は、たとえば、加工出力範囲指定情報、または、画像データの精度レベル指定情報、撮影者スケジュール情報などである。撮影者スケジュール情報は、たとえば、出力加工時期指定情報である。【００４２】
保護制御部１７は、図２に示すように、保護判定部７１と保護範囲制御部７２と保護精度制御部７３と保護時間制御部７４とを有している。保護範囲制御部７２は、保護範囲予測制御部７５を有している。【００４３】
カメラ装置１０の撮影者であるユーザが、ユーザＩ／Ｆ部２４を介して設定した、撮影に関する指示情報が保護制御部１７へ通知される。撮影に関する指示情報が保護制御部１７へ通知されると、保護制御部１７は、カメラ制御部１５へ指示情報を通知する。その後、ＩＣタグ３４から通信部１４へタグ情報が通知されると、タグ情報が保護制御部１７へ通知される。通信部１４が受信したタグ情報が保護制御部１７へ通知されると、まず、保護判定部７１が、通知されたタグ情報を解析する。また、タグ情報の解析結果の１つとして生成する著作権保護／プライバシー保護の有無情報において、保護判定部７１は、著作権保護／プライバシー保護が「有」であると判定する場合、判定結果を保護範囲制御部７２と保護精度制御部７３と保護時間制御部７４とへ通知する。保護範囲制御部７２は、著作権保護／プライバシー保護が「有」であると判定された判定結果を受けると、検出部８３に対して、タグ情報から抽出した保護対象に関する保護対象物情報を通知する。検出部８３は、保護範囲制御部７２から受け取った保護対象物情報に基づき、撮影範囲内の保護対象となり得る対象を解析し、保護対象となり得る対象が検出された場合に、特定領域として保護範囲制御部７２へ通知する。また、同様に、保護精度制御部７３は、保護領域の精度に関する情報を保護範囲制御部７２へ通知して、保護領域を特定するときの精度を制御する。同様に、保護時間制御部７４は、保護加工する時間に関する情報を保護範囲制御部７２へ通知して、保護範囲を特定する時の時間を制御する。【００４４】
すなわち、保護範囲制御部７２が、具体的に、検出部８３で検出された特定領域から保護領域を特定する。保護範囲制御部７２は、保護処理部１８が保護加工する範囲を制御する保護範囲制御手段である。保護範囲制御部７２は、通信部１４から通知されるタグ情報に含まれている保護対象物情報とカメラ制御部１５から通知される操作情報と距離情報と位置情報などの撮影条件情報とに基づいて、特定領域から保護領域を特定する。さらに、保護範囲制御部７２は、ユーザＩ／Ｆ部２４に対してユーザが指定する加工出力範囲指定に基づいて、特定領域から保護領域を特定する。ユーザが指定する加工出力範囲指定には、たとえば、「撮影範囲全面」、または、「保護対象の射影」、「保護対象の周辺を含む」などが選択される。また、「保護対象の周辺を含む」が選択された場合、ユーザによって設定された精度レベル指定値分（たとえば、１０％など）のマージン領域が、保護対象の境界領域に加えて、拡げられた範囲が保護領域として特定される。このとき、保護範囲制御部７２は、保護精度制御部７３から通知される保護領域に関する保護精度情報に基づいて、特定領域から保護領域を特定する。保護領域に関する保護精度情報は、たとえば、ユーザによって設定された精度レベル指定の値から、演算された射影情報、または、マージン演算情報である。すなわち、「保護対象の射影」が選択された場合、保護精度制御部７３が、射影情報を保護範囲制御部７２へ通知し、保護範囲制御部７２は、通知された射影情報に基づいて、特定領域から保護領域を特定する。また、「保護対象の周辺を含む」が選択された場合、保護精度制御部７３が、マージン演算情報を保護範囲制御部７２へ通知し、保護範囲制御部７２は、通知されたマージン演算情報を考慮して、特定領域から保護領域を特定する。また、保護範囲制御部７２は、保護時間制御部７４から通知される保護時間に関する保護時間情報に基づいて、特定領域から保護領域を特定する。保護範囲制御部７２は、特定した保護領域に関する保護領域情報を保護処理部１８へ通知する。【００４５】
保護精度制御部７３は、保護領域の保護加工をするときの保護加工の精度を制御するために設けられている保護精度制御手段である。保護精度制御部７３は、保護するべき被写体３０、３１の向き情報に応じて、被写体３０、３１における保護に必要な領域を撮影範囲に対する射影領域として算出し、射影領域情報を保護領域に関する保護精度情報として保護範囲制御部７２へ通知することができる。また、保護精度制御部７３は、ユーザがあらかじめ設定した精度レベル指定情報に応じて、保護対象の境界領域から保護領域の境界領域までのマージンを演算し、マージン演算結果を保護精度情報として保護範囲制御部７２へ通知する。なお、ユーザがあらかじめ精度レベル指定を行わない場合などは、撮影範囲の状況、すなわちカメラ装置１０の利用環境にしたがって、保護対象となる被写体３０、３１周辺のマージン領域が設定されてもよい。このとき、マージン領域は、所定の範囲、または、所定の形状に調整されて、保護領域が特定されるとよい。すなわち、保護対象を含む被写体３０、３１が特定されやすい背景を有する利用環境においては、マージン領域を小さく設定することができる。逆に、保護対象を含む被写体３０、３１が特定されにくい利用環境においては、マージン領域を大きく設定するとよい。たとえば、被写体３０の保護対象が顔形状であり、撮影範囲内に複数の顔形状が存在する場合が想定される。このような場合、被写体３０の顔形状よりもサイズの大きな、保護対象ではない顔形状が複数存在する場合、マージン領域を大きく設定することによって、少なくとも保護するべき保護対象の被写体３０、３１が保護される。【００４６】
保護時間制御部７４は、保護領域の保護加工をするときの保護加工する時間を制御するために設けられている保護時間制御手段である。保護時間制御部７４は、ユーザＩ／Ｆ部２４を介してユーザが設定した加工出力時期指定情報などの撮影者スケジュール情報、または、通信部１４から通知されるＥＰＧ情報などの被写体スケジュール情報などに基づいて、保護範囲制御部７２が保護領域を特定する際に必要となる、保護領域を保護する時間に関する保護時間情報を保護範囲制御部７２へ通知する。保護時間情報は、たとえば、ユーザ設定にしたがって、保護対象となる被写体３０、３１の保護のオン／オフ（ＯＮ／ＯＦＦ）するタイミングに関する情報を含む。また、保護時間情報は、ユーザ設定にしたがって、保護対象となる被写体３０、３１の保護加工を、動的なマスク制御、または、静的なマスク制御のいずれかに切り換える時間に関する情報を含む。また、被写体３１に含まれる画像表示器３６が保護すべきコンテンツを再生表示している場合、保護時間情報は、通信部１４が取得したＥＰＧ情報にしたがって、保護対象となるコンテンツが放映される、特定番組の放映時間に相当する時間に関する情報を含む。保護時間制御部７４は、保護範囲制御部７２が特定領域から保護領域を特定する際に、これらの保護時間情報に基づいて、特定するように保護範囲制御部７２を制御する。【００４７】
保護範囲予測制御部７５は、保護範囲制御部７２が保護領域を特定する場合に、撮影範囲内の保護領域の動きを予測し、あらかじめマスク領域を準備するために設けられた保護範囲予測制御手段である。保護範囲予測制御部７５は、たとえば、検出部８３から通知された動的に変化する特定情報に基づいて、被写体３０の動きを予測し、あらかじめマスク領域を準備することができる。また、保護範囲予測制御部７５は、撮影された画像データＶ１０、Ｖ２０を検出部８３から受け取り、画像データＶ１０、Ｖ２０の前後のフレームの変化から、保護領域の動きを予測し、あらかじめマスク領域を準備することもできる。さらに、保護範囲予測制御部７５は、カメラ制御部１５から通知されるカメラ装置１０の位置情報、または、向き情報から、保護領域の動きを予測し、あらかじめマスク領域を準備することもできる。なお、カメラ装置１０の位置情報と向き情報とは、ジャイロ部２６から出力される出力情報である。保護範囲予測制御部７５が準備した保護領域に関するマスク領域情報に基づいて、保護範囲制御部７２が保護範囲を特定することもできる。【００４８】
保護処理部１８は、保護制御部１７によって特定された保護領域を保護加工する。保護処理部１８は、保護領域に対してマスキング、モザイク、他の画像との置き換え、あるいは、消去など、保護領域を隠蔽するような加工、あるいは、消去処理（以下、このような処理を総称して「マスク処理」と呼ぶ）を行う。保護処理部１８は、画像データＶ１０、Ｖ２０、Ｖ３０における保護領域に対応した画像データに対してマスク処理を行い、マスク処理後の画像データＶ３１を生成する。保護処理部１８は、画像データＶ３１を、処理部１９と出力Ｉ／Ｆ部２１とへ供給する。保護領域の保護加工は、動的に別の画像に置き換えるマスク処理が行われてもよい。【００４９】
このようにして、保護処理部１８は、画像音声形成部１６から供給された画像データＶ１０、Ｖ２０、Ｖ３０に対して、保護範囲制御部７２で特定された保護領域をモザイク画像などによって保護加工する。保護処理部１８は、保護領域に加工処理が施された画像を画像データＶ３１として出力する。保護制御部１７と保護処理部１８とは、検出部８３で検出された特定領域から、通信部１４で取得したタグ情報に含まれる被写体情報に基づいて保護領域を特定し、保護領域を保護加工する画像データ加工手段として機能する。【００５０】
処理部１９は、画像データＶ３１に対して圧縮符号化処理を行い、圧縮符号化処理により生成した画像ストリームを画像情報として、Ｒ／Ｗ制御部２０を介して、記録メディア２２に記録する記録手段として機能する。処理部１９は、記録メディア２２に記録された画像ストリームを、Ｒ／Ｗ制御部２０を介して読み出し、読み出した画像ストリームに対して伸張復号化処理を行う。伸張復号化処理によって復元された画像データが出力Ｉ／Ｆ部２１に供給される。すなわち、Ｒ／Ｗ制御部２０は、記録メディア２２に対する書き込み、読み出しの制御を行う。処理部１９は、マイク２５が出力する音声データＡ３を、画像音声形成部１６などを介して受け取る。音声データＡ３は、音声情報として、画像データＶ３１と同様に、記録メディア２２への記録、出力Ｉ／Ｆ部２１への出力が行われる。さらに、処理部１９は、画像情報と音声情報とに関連する画像付属情報を、記録メディア２２に対して記録／再生することができる。画像付属情報は、画像と音声とに関する、たとえば、保護対象物情報を含む被写体情報である。また、画像付属情報は、撮影された画像に対応する撮影条件情報である。これらの被写体情報と撮影条件情報とが、画像情報と音声情報とは別の画像付属情報として扱われ、記録メディア２２に対する記録／再生が行われる。なお、記録メディア２２に記録されている画像付属情報は、関連する画像情報が再生されるときには、Ｒ／Ｗ制御部２０と処理部１９とを介して、保護制御部１７へ通知される。また、記録メディア２２は、ＳＤカード、または、Ｂｌｕ−ｒａｙ  Ｄｉｓｃ（以下、ＢＤと呼ぶ）、ＤＶＤ、ＨＤＤ、ＵＳＢメモリ、内蔵フラッシュメモリなどによって構成され、カメラ装置１０に設けられた記録メディア挿入部（図示せず）に装着されている。【００５１】
出力Ｉ／Ｆ部２１は、提示部２３へ画像データＶ３１と音声データＡ３とを出力するためのインターフェースである。提示部２３は、液晶ディスプレイ、または、有機ＥＬディスプレイ、ヘッドマウントディスプレイ、プラズマディスプレイなどの画像を表示するモニタ２８と、音声を出力するイヤホーン、または、スピーカなどの音声出力器（図示せず）などを含み、カメラ１１、１２によって撮影される画像の表示、または、マイク２５によって取得された音声の再生、記録メディア２２に記録されている画像と音声の再生などを行う。また、保護領域が保護加工された画像データＶ３１を再生表示することもできる。【００５２】
ユーザＩ／Ｆ部２４は、ボタンスイッチ（図示せず）、または、液晶表示部に付属するタッチパネルに表示されたメニュー表示（図示せず）などの入力部を有している。ユーザがユーザＩ／Ｆ部２４から、カメラ装置１０の撮影、または、音声記録のオン／オフを制御する。また、カメラ１１、１２の切り換えと、ズームインとズームアウトなどの撮影範囲の変更と、オートフォーカス機能と、もユーザＩ／Ｆ部２４から入力される。処理部１９の制御も、ユーザによって、ユーザＩ／Ｆ部２４から入力される。また、ユーザＩ／Ｆ部２４は、ユーザが保護領域の範囲を指定するユーザ指定手段としても機能する。保護領域の範囲指定以外に、加工出力範囲指定情報、または、画像データの精度レベル指定情報、撮影者スケジュール情報なども、ユーザＩ／Ｆ部２４から設定される。設定された各項目は、保護制御部１７へ通知される。【００５３】
以上説明したように、本発明のカメラ装置１０は、少なくとも、撮影手段と通信手段と特定領域検出手段と画像データ加工手段とを有している。撮影手段は、撮影範囲４０内の空間を撮影し、画像データを取得する。通信手段は、特定の被写体のサイズと形状と向きと位置とを含む被写体情報を記憶したＩＣタグ３４と通信を行い、被写体情報を取得する。特定領域検出手段は、撮影手段で取得された画像データＶ１０、Ｖ２０に含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する。画像データ加工手段は、被写体３０、３１が著作権保護、または、プライバシー保護するべき対象である場合には、通信手段で取得した被写体情報に基づいて、特定領域検出手段で検出された特定領域４４から保護領域４６を特定し、保護領域４６を保護加工する。このため、保護対象の被写体３０、３１が動いたり、変化したりしても、被写体３０、３１を追尾し、保護対象の被写体３０、３１を含む画像に対して、被写体３０、３１の画像領域を保護加工し、隠蔽することが可能となるカメラ装置が提供される。【００５４】
次に、以上のように構成されたカメラ装置１０が撮影する被写体３０、３１が著作権、または、肖像権、その他のプライバシー保護の保護対象であるとき、保護対象の被写体３０、３１に対応した画像領域のみが保護加工された画像データＶ３１を生成する撮影方法について、以下、説明する。【００５５】
図３は、カメラ１１、１２が撮影する撮影範囲内で、保護対象となる被写体３０、３１における特定領域４４が検出され、検出された特定領域４４を加工して画像データＶ３１を生成する手順について示すフローチャートである。【００５６】
図４Ａから図４Ｉは、ＩＣタグ３４が取り付けられた著作権、肖像権、あるいは、プライバシー保護の保護対象の被写体３０に対して保護加工を行う場合の一例を示す説明図である。図４Ａから図４Ｇは、ＩＣタグ３４が取り付けられた被写体３０である特定の人物の顔を保護対象とする一例を示している。特定の人物に取り付けられたＩＣタグ３４には、著作権などの保護が「有」とする保護の有無情報とともに、特定の人物の顔のサイズと形状と向きと位置の情報とが保護対象物情報を含むタグ情報として記憶されている。図４Ａは、カメラ装置１０の撮影範囲４０内において、保護加工が行なわれていない場合の画像を示している。図４Ｂは、図４Ａと等しい撮影範囲４０内において、検出部８３によって動的に検出された、保護対象の候補となる特定領域４４を示す画像を示している。図４Ｃは、図４Ａと等しい撮影範囲４０内において、保護加工が行われる場合の画像の一例を示している。図４Ｄは、図４Ｃと等しい撮影範囲４０内において、図４Ｃの撮影時刻から時間が経過したあとの画像を示している。図４Ｅは、図４Ｄと等しい撮影範囲４０内において、図４Ｄの撮影時刻から時間がさらに経過したあとの画像を示している。図４Ｆは、図４Ｅと等しい撮影範囲４０内において、図４Ｅの撮影時刻から時間がさらに経過したあとの画像を示している。図４Ｇは、図４Ｄと等しい撮影範囲４０内において、図４Ｄとは異なる保護精度に基づいて、保護領域４６が特定された場合の画像を示している。図４Ｈは、図４Ｇと等しい撮影範囲４０内において、図４Ｇの撮影時刻から時間が経過したあとの画像を示している。図４Ｉは、図４Ｄと等しい撮影範囲４０内において、図４Ｄとは異なる保護精度に基づいて、保護領域４６が特定された場合の画像を示している。図４Ａから図４Ｉに示すように、プライバシー保護の対象である被写体３０と、プライバシー保護の対象ではない被写体４２とが同一の撮影範囲４０内で撮影されている。【００５７】
図５は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０の２眼視による画像データが合成された画像の一例を示す図である。【００５８】
図６Ａは、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６である場合の画像を示している。図６Ｂは、図６Ａと等しい撮影範囲４０内において、保護対象の画像３５が保護加工された場合の画像を示している。図６Ｃ、図６Ａと等しい撮影範囲４０内において、保護対象の画像３５が、動的なマスク制御によって保護加工された場合の画像の一例を示している。【００５９】
図７Ａは、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合の画像を示している。図７Ｂは、図７Ａと等しい撮影範囲４０を撮影するカメラ装置１０を示している。図７Ｃは、図７Ａを撮影した撮影時刻から時間が経過したあとの画像を示している。図７Ｄは、図７Ａを撮影した撮影時刻から時間が経過したあとの画像を示している。【００６０】
図８Ａは、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合の画像を示している。図８Ｂは、図８Ａと等しい撮影範囲４０内において、保護加工が行われる場合の画像の一例を示している。図８Ｃは、図８Ｂに対して、撮影範囲４０がズームインされた場合の画像の一例を示している。図８Ｄは、図８Ｂに対して、撮影範囲４０がズームアウトされた場合の画像の一例を示している。【００６１】
以下、図３から図８を参照しながら、カメラ装置１０を用いて、撮影した画像から画像データＶ３１を生成する撮影方法と、保護加工された画像データの具体例について説明する。【００６２】
図３に示すように、まず、ユーザＩ／Ｆ部２４からカメラ装置１０の撮影開始が入力されると、カメラ装置１０が撮影を開始する（ステップＳ１００）。すなわち、撮影ステップが動作する。次に、通信部１４は、被写体３０、３１から送信される被写体情報を含むタグ情報の受信待ちを行う（ステップＳ１０１）。次に、通信ステップにおいて、保護制御部１７が通信部１４を制御し、通信部１４がＩＣタグ３４と通信を開始するための電波３９を発信する。たとえば、図１に示すように、電波３９の届く範囲にＩＣタグ３４が存在する場合、ＩＣタグ３４は、通信部１４から発信された通信開始の電波３９に応答して、通信部１４に対してタグ情報を送信する。一方、通信部１４からの電波の届く範囲にＩＣタグ３４が存在しない場合には、通信部１４は応答を受信しない。すなわち、保護制御部１７は、通信部１４が受信することができる受信データがあるかどうかを判定する。通信部１４が受信できる受信データがあると判定した場合（Ｙｅｓ）、ステップＳ１０４の処理へ進み、応答がないと判定する場合（Ｎｏ）、通信部１４が受信データを受信するまでステップＳ１０１の処理を繰り返す（ステップＳ１０２）。【００６３】
ＩＣタグ３４からタグ情報の応答がある場合、通信部１４が受信したタグ情報が保護判定部７１に通知され、保護判定部７１がタグ情報を取得して解析する（ステップＳ１０４）。保護判定部７１は、取得したタグ情報を解析し、まず、タグ情報に含まれるＴｙｐｅ情報の判定を行い、判定結果を保護時間制御部７４へ通知する（ステップＳ１０６）。Ｔｙｐｅ情報がＥＰＧ情報と一致しない場合（Ｎｏ）、第１の保護時間制御ステップ（ステップＳ１０８）へ進み、一致する場合（Ｙｅｓ）、第２の保護時間制御ステップ（ステップＳ１１０）へ進む。【００６４】
第１の保護時間制御ステップにおいて、ユーザＩ／Ｆ部２４を介してユーザが設定した保護時間情報に基づいて、保護時間制御部７４が保護期間を設定する。すなわち、ユーザＩ／Ｆ部２４を介してユーザが設定した保護時間情報に基づいて、保護領域４６を保護加工するタイミングが保護時間制御部７４から保護範囲制御部７２へ通知される。この後、保護判定ステップ（ステップＳ１１２）の処理へ進む。また、第２の保護時間制御ステップにおいて、通信部１４が取得したＥＰＧ情報に含まれる特定番組の放映時間に関する保護時間情報に基づいて、保護時間制御部７４が保護期間を設定する。すなわち、通信部１４が取得したＥＰＧ情報に含まれる特定番組の放映時間に関する保護時間情報に基づいて、保護領域４６を保護加工するタイミングが保護時間制御部７４から保護範囲制御部７２へ通知される。この後、保護判定ステップ（ステップＳ１１２）の処理へと進む。【００６５】
次に、保護判定ステップにおいて、保護判定部７１は、取得したタグ情報を解析し、タグ情報に含まれる著作権保護／プライバシー保護の有無情報に関する判定を行う。保護判定部７１は、著作権保護／プライバシー保護の有無情報において、保護が「有」（Ｙｅｓ）と判定した場合、ステップＳ１１４の処理へ進み、保護が「無」（Ｎｏ）と判定した場合、ステップＳ１０１の処理へ進む。ステップＳ１０１の処理へ進む場合、再び、通信部１４が受信データを受信するまでステップＳ１０１の処理が繰り返される。【００６６】
保護判定ステップにおいて、保護が「有」と判定された場合、保護対象物情報取得ステップにおいて、保護範囲制御部７２は、保護対象物情報の生成を行う（ステップＳ１１４）。すなわち、保護範囲制御部７２は、ＩＣタグ３４から送られたタグ情報から、ＩＣタグ３４が取り付けられている保護対象、すなわち、被写体３０、３１に含まれる保護対象の保護対象サイズ情報と保護対象形状情報と保護対象向き情報と保護対象位置情報などの保護対象物情報を取得する。得られた保護対象物情報は検出部８３へ通知される。なお、このとき、保護範囲制御部７２は、ＩＣタグ３４から送られたタグ情報から、ＩＣタグ３４が取り付けられている撮影対象、すなわち、被写体３０、３１の物体サイズ情報と物体形状情報と物体向き情報などの物体情報を取得することもできる。なお、得られた物体情報が検出部８３へ通知されてもよい。【００６７】
次に、特定領域検出ステップにおいて、検出部８３が、画像データに含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する（ステップＳ１１６）。このようにＩＣタグ３４から送信されたタグ情報に関する処理が実行されるとともに、カメラ１１、１２によって撮影された、被写体３０、３１を含む撮影範囲内の画像が取り込まれ、画像に対応した、たとえば１フレーム分の画像データＶ１０、Ｖ２０、Ｖ３０がメモリ８１に蓄積される。たとえば、図４Ａに示すように、被写体３０を含む撮影範囲内の画像の１フレーム分の画像データＶ１０がメモリ８１に蓄積される。【００６８】
特定領域検出ステップにおいて、検出部８３は、保護対象物情報に含まれる保護対象の形状を示す保護対象物形状情報を形状探索部８５に通知する。形状探索部８５は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０、Ｖ３０に対し、画像データに対応した画像内において、保護対象物形状情報が示す形状に該当する部分画像が存在する箇所を探索し、候補情報として検出部８３へ通知する。たとえば、保護対象物情報として、顔の形状が指定されると、形状探索部８５は、画像内における顔画像が存在する箇所を探索する。形状探索部８５は、探索により検出した該当形状の部分画像のサイズと形状と向きと位置との情報を候補情報として検出部８３へ通知する。形状探索部８５は、探索により該当形状の部分画像を複数検出した場合には、それぞれを保護対象の候補とし、それぞれの部分画像（以下、「候補部分画像」と呼ぶ）におけるサイズと形状と向きと位置との情報を候補情報として検出部８３へ通知する。【００６９】
なお、このとき、距離推定部８２は、形状探索部８５から通知された候補情報に基づき、各候補部分画像におけるカメラ装置１０からの距離を演算により求めてもよい。すなわち、距離推定部８２は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０によって生成された２眼視による画像データＶ３０を参照して、２つの画像上での各候補部分画像の左右の位置ずれ量を求め、これによって各候補部分画像に対応した被写体３０のカメラ装置１０からの距離を推定することができる。たとえば、顔の候補部分画像が３つ検出された場合、カメラ装置１０からそれぞれの顔である被写体３０、４２までの実際の距離を推定する。距離推定部８２は、このようにして求めた各候補部分画像に対応する被写体３０、４２までの距離を距離情報として検出部８３に通知する。【００７０】
図５は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０の２眼視による画像データが合成された画像の一例を示す図である。図５に示すように、カメラ装置１０から近距離にある顔ほど、画像データＶ１０と画像データＶ２０との画像のずれが大きく合成された画像となる。距離推定部８２は、このような画像データＶ１０、Ｖ２０のずれ幅を利用して、撮影している各顔までの距離を推定し、距離情報を得ることができる。なお、処理部１３とカメラ制御部１５とによって、カメラ装置１０と被写体３０との距離を直接測定することによって、距離情報を得ることもできる。処理部１３とカメラ制御部１５とによって、距離情報を得る場合、距離情報は、検出部８３と保護範囲制御部７２とへ通知される。距離推定部８２によって距離情報を得るか、処理部１３から距離情報を得るかは、ユーザＩ／Ｆ部２４へ入力されるユーザ設定に基づいて適宜決定される。【００７１】
また、形状探索部８５から通知された候補情報と、距離推定部８２から通知された各候補部分画像に対応した距離情報と、カメラ制御部１５から通知された撮影条件情報と、の一部、または、全部を用いて、検出部８３は、特定領域４４を動的に検出する。検出部８３は、図４Ｂに示すような、特定領域４４に関する特定領域情報を保護範囲制御部７２へ通知する。【００７２】
次に、保護領域４６の設定に関するユーザ指定の有無を確認する（ステップＳ１１８）。ユーザ指定がある場合（Ｙｅｓ）、ユーザ指定の保護領域４６に関する情報をユーザＩ／Ｆ部２４が、保護制御部１７へ通知する（ステップＳ１２０）。保護制御部１７へ通知する情報は、たとえば、加工出力範囲指定情報、画像データの精度レベル指定情報などである。ユーザ指定がない場合（Ｎｏ）は、保護制御部１７にあらかじめ設定されている所定の指定条件が適用される。【００７３】
次に、保護精度制御ステップにおいて、保護精度制御部７３から保護範囲制御部７２へ、保護対象の形状とサイズと向きと位置とに関する領域情報に対する、保護領域４６を特定するための保護領域４６の保護精度情報が通知される（ステップＳ１２２）。【００７４】
次に、保護範囲制御ステップにおいて、保護範囲制御部７２が、検出部８３から通知された特定領域４４に対して、保護領域４６を特定する（ステップＳ１２４）。すなわち、保護範囲制御部７２は、図４Ｂに示すように、検出部８３から通知された特定領域４４内の被写体３０、４２（以下、「候補被写体」と呼ぶ）の実際の形状とサイズと向きと位置とを算出する。保護範囲制御部７２は、特定領域４４内の被写体３０、４２におけるサイズに対し、距離情報における距離と、操作情報におけるズーム率で補正演算を行うことによって、各特定領域４４に含まれる候補被写体の実サイズ算出値を算出する。次に、保護範囲制御部７２は、保護対象物情報における保護対象サイズ情報と、算出した各候補被写体の実サイズ算出値とを比較し、保護対象サイズ情報と一致、または、最も近似した実サイズ算出値の候補被写体を抽出する。すなわち、保護範囲制御部７２は、特定領域４４内の各候補被写体の中から、ＩＣタグ３４を保持した被写体３０の保護対象のサイズと一致、または、最も近似した候補被写体の実サイズ算出値である候補被写体の特定領域４４を抽出して、保護領域４６を特定する。保護範囲制御部７２は、同様に、保護対象物情報における保護対象形状情報と保護対象向き情報と保護対象位置情報とに基づいて、保護領域４６を特定することもできる。保護領域４６を特定する際に、できるだけ多くの情報を利用することによって、精度よく保護領域４６を特定することができる。保護範囲制御部７２は、特定した保護領域４６の情報、すなわち、保護領域４６の画像上のサイズと形状と位置と向きとに関する情報を保護領域情報として保護処理部１８に通知する。【００７５】
保護範囲制御ステップにおいて、保護範囲予測制御部７５によって、保護範囲予測制御ステップが実行されてもよい。保護範囲予測制御ステップは、保護範囲制御部７２が保護領域４６を特定する場合に、撮影範囲内の保護領域４６の動きを予測し、あらかじめマスク領域を準備するステップである。保護範囲予測制御ステップにおいて、準備されたマスク領域情報に基づいて、保護範囲制御部７２が保護範囲を特定することもできる。【００７６】
次に、保護加工ステップにおいて、保護処理部１８は、画像音声形成部１６から供給される画像データＶ１０、Ｖ２０、Ｖ３０に対して、保護範囲制御部７２から通知された保護領域情報に基づいて、画像上のサイズと形状と位置とに対応した画像データＶ１０、Ｖ２０、Ｖ３０上の保護領域４６に、保護加工する（ステップＳ１２６）。保護加工は、たとえば、モザイク画像を用いて隠蔽するようなマスク処理が行われる。また、保護領域４６が保護加工された画像データＶ３１が生成され、処理部１９、または、出力Ｉ／Ｆ部２１へ送られる。【００７７】
以上、ステップＳ１０８からステップＳ１２６までの処理が実行されることによって、ＩＣタグ３４が取り付けられた被写体３０、３１を含む画像の撮影範囲４０内で、被写体３０、３１の著作権、肖像権、あるいは、プライバシー保護の保護対象となる領域が保護領域４６として保護加工され、隠蔽される。なお、保護範囲制御ステップと保護加工ステップとによって、画像データ加工ステップが構成される。【００７８】
次に、再生ステップにおいて、カメラ１１、１２によって撮影された画像データＶ１０、Ｖ２０、Ｖ３０に対して、画像データ加工手段によって保護加工された画像が重畳された画像データＶ３１が出力Ｉ／Ｆ部２１へ送られる。また、マイク２５によって集音された音声データＡ３が出力Ｉ／Ｆ部２１へ送られる。出力Ｉ／Ｆ部２１へ送られた、画像データＶ３１と音声データＡ３とが、モニタ２８などの提示部２３によって再生される（ステップＳ１２８）。【００７９】
次に、記録ステップにおいて、再生ステップで再生された画像データＶ３１と音声データＡ３とが、同様に処理部１９へ送られる。処理部１９へ送られたデータは、Ｒ／Ｗ制御部２０によって制御されて、記録メディア２２に記録される（ステップＳ１２９）。このとき、画像データＶ３１は画像情報として、記録メディア２２に記録される。また、マイク２５によって集音された音声データＡ３は音声情報として記録メディア２２に記録される。なお、画像情報と音声情報とは、画像音声情報として一括して記録されてもよい。さらに、撮影範囲４０内に撮影された保護対象である被写体３０、３１に関する保護対象物情報を含む被写体情報が、保護範囲制御部７２から処理部１９へ送られる。処理部１９へ送られた被写体情報は、Ｒ／Ｗ制御部２０によって制御されて、画像情報と音声情報とは異なる画像付属情報として、記録メディア２２に記録される。同時に、カメラ装置１０が撮影を行った際の、操作情報、距離情報などの撮影条件情報も、同様に、画像付属情報として、記録メディア２２に記録される。【００８０】
次に、保護制御部１７は、ユーザＩ／Ｆ部２４から撮影を終了する指示情報が通知されているかどうかを判定し、撮影終了の指示情報が通知されている場合（Ｙｅｓ）は、撮影を終了する（ステップＳ１３０）。撮影終了の指示情報が通知されていない場合（Ｎｏ）には、再び、ステップＳ１０２の処理へ進み、上述したような処理が繰り返し実行される。【００８１】
なお、たとえば、図４Ａに示すように、撮影範囲４０内において複数の顔が存在する場合、たとえば顔認識技術などで利用される顔パターン抽出処理では、撮影範囲４０内の全ての顔が抽出される。このため、保護対象となる特定の顔、すなわち、図４Ａに示す被写体３０のみを抽出することは困難であり、保護対象ではない被写体４２の顔も抽出される。【００８２】
これに対し、本実施の形態のカメラ装置１０は、まず、ＩＣタグ３４から送られるタグ情報に含まれている、被写体３０の保護対象である顔に関する保護対象物情報を受け取る。さらに、検出部８３が、図４Ｂで示すように、撮影範囲４０内の画像データから、画像内の保護対象物情報に類似する画像が存在する箇所を動的に検出し、特定領域４４として保護範囲制御部７２へ通知する。たとえば、図４Ａに示すように、撮影範囲４０内には、３つの顔が存在する。このため、検出部８３は、図４Ｂで示すように、撮影範囲４０内の３つの顔画像を特定領域４４として検出し保護範囲制御部７２へ通知する。さらに、保護範囲制御部７２は、通知された３つの特定領域４４から、各特定領域４４の候補部分画像のサイズ情報と形状情報と位置情報と向き情報とを算出し、保護対象物情報と撮影条件情報とを考慮して、保護領域４６を特定する。【００８３】
たとえば、フレームごとに保護対象となる特定領域４４のサイズと形状と向きと位置とが算出され、保護領域４６が特定される。したがって、たとえば、保護領域４６のサイズがカメラ１１、１２のズーム率とともに距離情報によって補正される。このため、図４Ｄに示すように、たとえば、図４Ｃに示す時刻から、時間が経過するにしたがい、保護対象の被写体３０が、カメラ装置１０に近づき、保護対象の顔の面積が大きくなった場合であっても、被写体３０の動きに追尾して、保護領域４６が変更され、保護されるべき保護対象が確実に保護される。【００８４】
また、図４Ｅに示すように、保護対象である被写体３０が、カメラ装置１０に対して反転し、保護対象である顔部分が撮影範囲４０には存在しなくなった場合、保護範囲制御部７２は、撮影範囲４０内には保護領域４６が存在しないとして、保護領域４６を特定する。このように、保護するべき対象の向きが反転して、保護するべき対象が、撮影範囲４０内に存在しないと判定するときに、特に、保護範囲制御部７２は、被写体情報に含まれる保護対象物向き情報を考慮することによって、的確に保護領域４６を特定する。この結果、撮影範囲４０内に保護加工される領域は存在しない状態となり、無用な保護加工が行われない。【００８５】
また、図４Ｆに示すように、保護対象ではない被写体４２が、保護対象である被写体３０とカメラ装置１０との間に移動した場合、被写体３０は、被写体４２の影に隠れて撮影範囲４０内に撮影されない。このように、撮影範囲内に複数の被写体３０、４２が一部重なって同時に存在する場合、保護範囲制御部７２は、特に、被写体情報に含まれる保護対象物位置情報に基づいて、複数の被写体３０、４２の重なり部分を検知して、保護領域４６を特定する。このことによって、撮影範囲４０内の保護が必要な領域のみが保護領域４６として特定される。この結果、撮影範囲４０内の保護が必要な領域のみが動的に保護加工される。【００８６】
また、図４Ｇに示すように、保護対象である被写体３０の顔部分のみが、保護対象の境界領域とほぼ等しいサイズと形状との領域で、保護加工されてもよい。すなわち、保護領域４６の精度レベルが「保護対象の射影」として、ユーザが設定する場合、保護精度制御部７３は、保護対象である被写体３０の向き情報に応じて、被写体３０における保護が必要な領域の撮影面に対する射影領域を特定するように保護範囲制御部７２を制御する。このことによって、図４Ｇに示すように、保護対象である顔部分のみが保護加工される。【００８７】
また、図４Ｈに示すように、保護対象である被写体３０が、カメラ装置１０に対して横向きになった場合、保護対象である顔部分が撮影範囲４０のサイズと形状とが変化する。この場合、保護範囲制御部７２は、被写体３０の向きに応じて、撮影範囲４０内の保護領域４６を特定する。このように、保護するべき対象の向きが変化して、保護するべき対象の領域が、撮影範囲４０内で変化する場合、特に、保護範囲制御部７２は、被写体情報に含まれる保護対象物向き情報を考慮することによって、的確に保護領域４６を特定する。この結果、図４Ｈに示すように、保護対象である顔部分の横顔部分のみが保護加工される。【００８８】
また、図４Ｉに示すように、保護対象である被写体３０を含む撮影範囲４０の全面が、保護領域４６として保護加工されてもよい。すなわち、保護領域４６の精度レベルが「撮影範囲全面」として、ユーザが設定する場合、保護精度制御部７３は、保護対象である被写体３０を含む撮影範囲４０全面を保護領域４６として特定するように保護範囲制御部７２を制御する。このことによって、図４Ｉに示すように、保護対象である被写体３０の顔部分を含む撮影範囲４０の全面が保護加工される。【００８９】
また、図６Ａに示すように、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６である場合、保護対象である画像３５が保護領域４６として特定され、図６Ｂに示すように、保護加工される。なお、図６Ａから図６Ｃは、図３のステップＳ１０６で説明したＴｙｐｅ判定において、Ｔｙｐｅ情報がＥＰＧと一致しない場合を想定している。このとき、ユーザは、ユーザＩ／Ｆ部２４において、保護対象となる被写体３１の保護加工する時間を設定する。保護時間制御部７４は、ユーザＩ／Ｆ部２４において、ユーザ設定された保護加工時間に関する保護時間情報に基づいて、保護範囲制御部７２を制御する。したがって、ユーザ設定された保護加工する時間を経過した後は、図６Ａのように、画像３５の保護がオフされる。【００９０】
ユーザが、ユーザＩ／Ｆ部２４において、保護対象となる被写体３１の保護加工する時間を設定する際に、時間に応じて動的なマスク制御と静的なマスク制御とを切り換えることもできる。この場合、静的なマスク制御が設定された時間の間は、図６Ｂに示すような、モザイク処理などの静的なマスク制御に基づいた保護加工が行われる。また、動的なマスク制御が設定された時間の間は、図６Ｃに示すような、動画像に代表される動的なマスク制御に基づく保護加工が行われる。すなわち、保護時間制御部７４は、ユーザ設定にしたがって、保護対象となる被写体３１の保護領域４６を、時間に応じて動的なマスク制御と静的なマスク制御のいずれかに切り換えて保護加工するように、保護範囲制御部７２を制御する。【００９１】
また、図６Ａに示すような、撮影範囲４０内で撮影される被写体３１が、電子透かしが埋め込まれた画像３５を含んでいる場合、抽出部８４が、画像内の電子透かしが埋め込まれた画像表示器３６、または、表示部などの領域を判別することもできる。このとき、抽出部８４が判別した、画像上の領域の位置とサイズと形状とが透かし領域情報として検出部８３へ通知される。検出部８３は、透かし領域情報に基づいて、特定領域４４を動的に検出し、保護範囲制御部７２へ通知する。保護範囲制御部７２は、通知された特定領域４４から保護領域４６を特定し、保護処理部１８へ通知する。このことによって、保護処理部１８は、図６Ｂで示すように、画像上での電子透かしが検出された領域に対して保護加工することもできる。【００９２】
このように、カメラ装置１０は、テレビジョン受信機などの画像表示器３６に表示される著作権、肖像権、あるいは、プライバシー保護の保護対象となるような画像が表示され、ユーザがそのような保護対象であることを意識せずに撮影したとしても、保護対象となる画像を保護加工し、隠蔽することができる。また、保護対象となるような画像３５が表示された画像表示器３６のみが保護加工されるため、撮影を意図した領域が侵食されない。【００９３】
また、図７Ａに示すように、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合、保護対象である画像３５と保護対象である芸術品３７とが保護領域４６として特定され、図７Ｂに示すように、保護加工される。なお、図７Ｂにおいて、カメラ装置１０は、提示部２３であるモニタ２８を有し、モニタ２８上で保護加工された画像データＶ３１を視認することができる。【００９４】
図７Ｃは、固定された被写体３１を撮影するユーザの動きに伴ってカメラ装置１０が動作した時の、保護加工後の画像を示している。カメラ装置１０の動きは、ジャイロ部２６によって検知され、ジャイロ部２６からカメラ装置１０の位置情報と向き情報とが検出部８３と保護範囲制御部７２へと通知される。保護範囲制御部７２は、カメラ装置１０の動作に基づいて、保護領域４６を変更する。なお、保護範囲予測制御部７５は、ジャイロ部２６から保護範囲制御部７２へ通知されるカメラ装置１０の位置情報と向き情報とに基づいて、保護領域４６が相対的に移動する形状とサイズと向きと位置とを予測し、マスク領域を準備することもできる。準備されたマスク領域が保護領域４６として特定され、保護処理部１８に通知されてもよい。このことによって、撮影範囲４０内の保護対象の動きを予測することができる。このため、保護領域４６を動的に特定し、高精度な保護領域４６の保護加工が実現される。【００９５】
図７Ｄは、図７Ｃと同様に、固定された被写体３１を撮影するユーザの動きに伴ってカメラ装置１０が動作した時の、保護加工後の画像を示している。図７Ｄは、ユーザが画像表示器３６の背面に移動した場合の、撮影範囲４０の画像を示している。さらに、芸術品３７とカメラ装置１０との間に、画像表示器３６が存在するため、保護対象である芸術品３７の一部が画像表示器３６に重なっている。ユーザが画像表示器３６の背面に移動することによって、画像表示器３６に表示されている保護の対象である画像３５が、撮影範囲４０内には存在しない状態となっている。このように、撮影範囲４０に保護対象である画像３５が存在しなくなった場合、保護範囲制御部７２は、画像３５に対応する保護領域４６が撮影範囲４０内には存在しないとして、保護領域４６を特定する。このように、保護するべき対象の向きが変化して、保護するべき対象が、撮影範囲４０内に存在しないと判定するときに、特に、保護範囲制御部７２は、被写体情報に含まれる保護対象物向き情報を考慮することによって、的確に保護領域４６を特定する。この結果、撮影範囲４０内に保護加工される領域は存在しない状態となり、無用な保護加工が行われない。さらに、撮影範囲４０内に複数の被写体３１が一部重なって同時に存在する場合、保護範囲制御部７２は、特に、被写体情報に含まれる保護対象物位置情報に基づいて、複数の被写体３１の重なり部分を検知して、保護領域４６を特定する。このことによって、芸術品３７を保護するための保護領域４６が動的に変更される。この結果、撮影範囲４０内の保護が必要な領域のみが動的に保護加工される。【００９６】
また、図８Ａに示すように、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合、同様に、保護対象である画像３５と保護対象である芸術品３７とが保護領域４６として特定され、図８Ｂに示すように、保護加工される。さらに、カメラ装置１０がユーザによってズームイン操作された場合、図８Ｃに示すように、撮影範囲４０内で保護対象のサイズが変化する。カメラ装置１０が、ズームインまたはズームアウトなどの、撮影範囲４０の拡大率が変化されると、カメラ制御部１５から保護範囲制御部７２へ操作情報として、拡大率の変化の情報が通知される。保護範囲制御部７２は、通知された操作情報に基づいて、保護領域４６を変更し、変更した後の保護領域情報を保護処理部１８へ通知する。このように、カメラ装置１０がズームイン操作された場合、図８Ｃに示すように、撮影範囲４０内の保護対象の動きに追従して保護領域４６を変更する。同様に、カメラ装置１０がズームアウト操作された場合、図８Ｄに示すように、撮影範囲４０内の保護対象の動きに追従して保護領域４６を変更する。【００９７】
なお、図８Ａから図８Ｄに示すように、撮影範囲４０内で撮影される画像表示器３６は、保護すべきコンテンツを再生表示している。さらに、画像表示器３６はＥＰＧ情報を保持し、画像表示器３６に取り付けられているＩＣタグ３４に、画像表示器３６が表示するコンテンツに関するＥＰＧ情報が記憶されている。すなわち、図３のステップＳ１０６で説明したＴｙｐｅ判定において、撮影範囲４０内で撮影される画像表示器３６に取り付けられているＩＣタグ３４の記憶する保護対象物情報に含まれるＴｙｐｅ情報がＥＰＧと一致する。この場合、保護時間制御部７４は、通信部１４を介してＥＰＧ情報を取得し、取得したＥＰＧ情報にしたがって、画像表示器３６が再生する保護対象であるコンテンツを保護加工する時間を、ＥＰＧ情報に基づいて、特定番組の放映時間に想定する時間に限って、保護領域４６を特定するように保護範囲制御部７２を制御する。このため、保護処理部１８は、保護対象である特定番組のみを保護加工することができる。この結果、保護対象に対して、保護が必要な時にのみ保護加工することができる。【００９８】
以上説明したように、本発明のカメラ装置１０に適用される撮影方法は、撮影対象に含まれる著作権保護、または、プライバシー保護すべき被写体３０、３１を保護加工して撮影する撮影方法であって、少なくとも、撮影ステップと通信ステップと特定領域検出ステップと画像データ加工ステップとを有している。撮影ステップは、撮影範囲４０内の空間を撮影し、画像データを取得する。通信ステップは、被写体に付属して設けられ、特定の被写体のサイズと形状と向きと位置とを含む被写体情報を記憶したＩＣタグ３４と通信を行い、被写体情報を取得する。特定領域検出ステップは、撮影ステップで取得された画像データＶ１０、Ｖ２０に含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する。画像データ加工ステップは、被写体３０、３１が著作権保護、または、プライバシー保護するべき対象である場合には、通信ステップで取得した被写体情報に基づいて、特定領域検出ステップで検出された特定領域４４から保護領域４６を特定し、保護領域４６を保護加工する。このように、撮影ステップから画像データ保護加工ステップまでの処理が実行されることによって、ＩＣタグ３４が取り付けられた被写体３０、３１を含む撮影範囲４０の画像の中で、被写体３０、３１の著作権、肖像権、あるいは、プライバシー保護の保護対象となる保護領域４６を動的に特定し、保護加工することができる。特に、たとえば、画像のフレームごとに保護対象となる保護領域４６の位置、および、サイズを算出して保護加工を行うため、動画像における保護対象となり得る特定領域４４を追尾して保護加工する。また、保護加工するサイズが、カメラ装置１０の操作情報、カメラ装置１０と被写体３０、３１との間の距離情報などによって精度よく補正されている。このため、保護対象となる被写体３０、３１が動いたり、カメラ装置１０を動かしたり、あるいはズーム率を変えたために画像上の被写体のサイズが変化しても、その変化に応じたサイズで被写体を保護加工することができる。【００９９】
また、本実施の形態では、保護加工された保護領域４６を含む画像データＶ３１が記録メディア２２に記録され、提示部２３によって、表示される構成例を挙げて説明した。しかしながら、たとえば、提示部２３では、保護加工されていない画像データＶ１０、Ｖ２０、Ｖ３０が表示される構成であってもよい。すなわち、記録メディア２２へ記録される画像データと、記録メディア２２から読み取られ、提示部２３へ表示される画像データとが、保護加工された保護領域４６を含む画像データＶ３１と保護加工されていない画像データＶ１０、Ｖ２０、Ｖ３０とに適宜変更されて供給される構成でもよい。【０１００】
また、本実施の形態では、著作権保護、または、プライバシー保護の保護対象となる被写体３０、３１に対応した特定領域４４を検出し、特定領域４４から保護領域４６を特定して、保護加工する構成について説明した。しかしながら、たとえば、ユーザがあらかじめ画像上で削除の対象としたい被写体３０、３１にＩＣタグ３４を取り付けた上で、撮影した画像において、削除の対象となる被写体３０、３１に対応した保護領域４６を別の画像と置き換える編集機能を有する構成でもよい。【０１０１】
また、本発明の実施の形態では、図３に示すように、カメラ装置１０がカメラ１１、１２を用いて、保護するべき対象を含んだ被写体３０、３１を撮影するのと同時に、保護するべき保護領域４６を特定し、保護加工する構成について説明した。しかしながら、特定領域４４の動的な検出と、特定領域４４から保護領域４６を特定し、特定した保護領域４６を保護加工することとは、必ずしも撮影と同時に行うことに限定されない。たとえば、保護するべき対象を含んだ被写体３０、３１を撮影する場合に、撮影した画像データＶ１０、Ｖ２０、Ｖ３０と音声データＡ３とが、処理部１９を介して記録メディア２２に画像音声情報として記録される。画像音声情報を記録するときに、撮影対象である被写体３０、３１に関する保護対象物情報を含んだ被写体情報が画像付属情報として記録メディア２２に記録される。同時に、カメラ装置１０が画像を撮影したときの、操作情報と距離情報などに関する撮影条件情報が画像付属情報として記録メディア２２に記録される。さらに、画像音声情報を再生する際に、特定領域４４の動的な検出と、特定領域４４から保護領域４６を特定し、特定した保護領域４６が保護加工されてもよい。図９は、このように画像データを再生する際に、保護するべき対象の画像を保護加工する保護再生方法を示したフローチャートである。なお、図９に示す保護再生方法を示すフローチャートは、図３に示した撮影方法のフローチャートに対して、同様のステップは同様のステップ名を付与し、詳細な説明は省略する。また、図３に示す撮影方法の各ステップでは、カメラ１１、１２によって撮影された画像データＶ１０、Ｖ２０、Ｖ３０に対して、特定領域４４の検出と、保護領域４６の特定と保護加工と、が行われている。図９に示す保護再生方法においては、記録メディア２２に記録されている画像データに対して、特定領域４４の検出と、保護領域４６の特定と保護加工と、が行われる。【０１０２】
図９に示すように、まず、ユーザＩ／Ｆ部２４からカメラ装置１０の保護再生開始が入力されると、ユーザが指定した画像が選択され、カメラ装置１０が再生を開始する（ステップＳ２００）。すなわち、再生ステップが開始される。再生ステップが開始されると、画像付属情報取得ステップにおいて、処理部１９が記録メディア２２から、画像データと音声データとを含む画像音声情報と、画像音声情報に付属する画像付属情報と、を取得する（ステップＳ２０２）。このとき、再生する画像に、保護するべき対象を含んだ被写体３０、３１が撮影されている場合、保護するべき対象に関する被写体情報が、画像音声情報に付属する画像付属情報として、記録メディア２２に記録されている。したがって、画像音声情報に付属する画像付属情報が、記録メディア２２に記録されていない場合、再生する画像は、保護するべき対象が撮影された画像ではないと判断される。そこで、処理部１９が取得した画像音声情報に付属する画像付属情報が、記録メディア２２に記録されているかが判断される（ステップＳ２０４）。画像付属情報が取得されない場合（Ｎｏ）は、再びステップＳ２０２へ戻る。また、画像付属情報が取得された場合（Ｙｅｓ）は、ステップＳ２０６へと進む。【０１０３】
処理部１９によって取得された画像付属情報は、保護判定部７１へ通知され、解析される。次に、保護判定ステップにおいて、保護判定部７１は、取得した画像付属情報を解析し、画像付属情報に含まれる著作権保護／プライバシー保護の有無情報に関する判定を行う（ステップＳ２０６）。保護判定部７１は、著作権保護／プライバシー保護の有無情報において、保護が「有」（Ｙｅｓ）と判定した場合、ステップＳ１１４の処理へ進み、保護が「無」（Ｎｏ）と判定した場合、ステップＳ２０２の処理へ進む。ステップＳ２０２の処理へ進む場合、再び、処理部１９が、画像音声情報と画像付属情報とを取得する。【０１０４】
保護判定ステップにおいて、画像付属情報に含まれている被写体情報が、保護判定部７１によって解析された結果、保護が「有」と判定された場合、図３に示すと同様に、保護対象物情報取得ステップ以下の各ステップが実行される。また、保護範囲制御ステップにおいて、保護範囲制御部７２は、画像付属情報に含まれている被写体情報と撮影条件情報とに基づいて、保護範囲を特定する。【０１０５】
なお、保護対象物情報取得ステップ以下の各ステップが実行された後、保護制御部１７は、ユーザＩ／Ｆ部２４から保護再生を終了する指示情報が通知されているかどうかを判定し、再生終了の指示情報が通知されている場合（Ｙｅｓ）は、再生を終了する（ステップＳ２３０）。再生終了の指示情報が通知されていない場合（Ｎｏ）は、再び、ステップＳ２０２の処理へ進み、上述したような処理を繰り返し実行する。【０１０６】
以上のように、本発明のカメラ装置１０に適用される保護再生方法は、撮影対象に含まれる著作権保護、または、プライバシー保護すべき被写体３０、３１を保護加工して再生する保護再生方法であって、少なくとも、再生ステップと画像付属情報取得ステップと特定領域検出ステップと画像データ加工ステップとを有している。再生ステップは、撮影範囲４０内の空間を撮影した画像データを再生する。画像付属情報取得ステップは、画像データに付属して設けられた、特定の被写体のサイズと形状と向きと位置とを含む被写体情報を取得する。特定領域検出ステップは、再生ステップで取得された画像データに含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する。画像データ加工ステップは、被写体３０、３１が著作権保護、または、プライバシー保護するべき対象である場合には、画像付属情報取得ステップで取得した被写体情報に基づいて、特定領域検出ステップで検出された特定領域４４から保護領域４６を特定し、保護領域４６を保護加工する。このように、再生ステップから画像データ保護加工ステップまでの処理が実行されることによって、保護するべき対象を含んだ被写体３０、３１を含む撮影範囲４０の画像の中で、被写体３０、３１の著作権、肖像権、あるいは、プライバシー保護の保護対象となる保護領域４６を動的に特定し、保護加工して、画像を再生することができる。特に、たとえば、画像のフレームごとに保護対象となる保護領域４６の位置、および、サイズを算出して保護加工を行うため、動画像における保護対象となり得る特定領域４４を追尾して保護加工する。また、保護加工するサイズが、カメラ装置１０の操作情報、カメラ装置１０と被写体３０、３１との間の距離情報などによって精度よく補正されている。このため、保護対象となる被写体３０、３１が動いたり、カメラ装置１０を動かしたり、あるいはズーム率を変えたために画像上の被写体のサイズが変化しても、その変化に応じたサイズで被写体を保護加工することができる。【０１０７】
本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されない。さらに、以下のような構成も本発明に含まれる。【０１０８】
すなわち、図１に示すような、カメラ装置１０を構成する構成要素の一部は、１個のシステムＬＳＩ（Large Scale Integration：大規模集積回路）に含まれる構成であってもよい。システムＬＳＩは、たとえば、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩである。カメラ装置１０を構成する構成要素の一部が、システムＬＳＩに含まれる構成である場合、少なくとも、画像音声形成部１６と保護制御部１７と保護処理部１８と検出部８３とがシステムＬＳＩによって構成されることによって、高速な処理が実現される。さらに、処理部１３と通信部１４とカメラ制御部１５とメモリ８１とを加えることができる。さらに、処理部１９とＲ／Ｗ制御部２０と出力Ｉ／Ｆ部とを加えることができる。さらにまた、距離推定部８２と抽出部８４と形状探索部８５とを加えることもできる。【０１０９】
また、本発明のカメラ装置１０を実現するための回路が、回路を構成する構成要素の各部は、個別に１チップ化されていてもよいし、一部、または、全てを含むように１チップ化されてもよい。１チップ化される際には、システムＬＳＩと同様の構成を有することができる。【０１１０】
また、システムＬＳＩに限ることなく、集積度の違いによって、ＩＣ、ＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されるような構成であってもよい。また、集積回路化の手法は、ＬＳＩに限るものではなく、専用回路、または、汎用プロセッサであってもよい。また、ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）、または、ＬＳＩ内部の回路セルの接続と設定とが再構成可能なリコンフィギュラブル・プロセッサ（Reconfigurable Processor）が利用されてもよい。【０１１１】
さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応などが可能性としてありえる。【０１１２】
また、本発明の撮影方法が、コンピュータなどによって動作されるコンピュータプログラムであってもよい。さらに、コンピュータプログラムからなるデジタル信号であってもよい。【０１１３】
また、本発明は、コンピュータプログラム、または、デジタル信号が読み取り可能な記録媒体、たとえば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ、半導体メモリなどに記録された構成であってもよい。また、これらの記録媒体に記録されたデジタル信号であってもよい。【０１１４】
また、本発明は、コンピュータプログラム、または、デジタル信号が、電気通信回線、または、無線、有線通信回線、インターネットに代表されるネットワーク、データ放送などを経由して伝送される構成でもよい。【０１１５】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、上記メモリは、上記コンピュータプログラムを記憶しており、上記マイクロプロセッサは、上記コンピュータプログラムに従って動作するとしてもよい。【０１１６】
また、コンピュータプログラム、または、デジタル信号が、記録媒体に記録されて移送されることによって、または、コンピュータプログラム、または、デジタル信号がネットワークなどを経由して移送されることによって、独立した他のコンピュータシステムによって実行される構成であってもよい。【０１１７】
また、上記の実施の形態と変形例とが、それぞれ組み合わせる構成であってもよい。
【産業上の利用可能性】
【０１１８】
本発明のカメラ装置は、著作権、肖像権、その他プライバシー保護などの保護するべき対象である被写体が動いたり変化したりしても、被写体を追尾して、被写体の画像領域を保護加工する。このため、撮影により動画データ、または、静止画データを得るデジタルカメラ、または、監視カメラ、その他の電子機器に搭載される撮影手段として利用される。
【図１】
2009001530.tif 000004
【図２】
2009001530.tif 000005
【図３】
2009001530.tif 000006
【図４Ａ】
2009001530.tif 000007
【図４Ｂ】
2009001530.tif 000008
【図４Ｃ】
2009001530.tif 000009
【図４Ｄ】
2009001530.tif 000010
【図４Ｅ】
2009001530.tif 000011
【図４Ｆ】
2009001530.tif 000012
【図４Ｇ】
2009001530.tif 000013
【図４Ｈ】
2009001530.tif 000014
【図４Ｉ】
2009001530.tif 000015
【図５】
2009001530.tif 000016
【図６Ａ】
2009001530.tif 000017
【図６Ｂ】
2009001530.tif 000018
【図６Ｃ】
2009001530.tif 000019
【図７Ａ】
2009001530.tif 000020
【図７Ｂ】
2009001530.tif 000021
【図７Ｃ】
2009001530.tif 000022
【図７Ｄ】
2009001530.tif 000023
【図８Ａ】
2009001530.tif 000024
【図８Ｂ】
2009001530.tif 000025
【図８Ｃ】
2009001530.tif 000026
【図８Ｄ】
2009001530.tif 000027
【図９】
2009001530.tif 000028
【図１０Ａ】
2009001530.tif 000029
【図１０Ｂ】
2009001530.tif 000030
【手続補正書】
【提出日】平成21年3月12日(2009.3.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１
【補正方法】変更
【補正の内容】
【請求項１】
撮影範囲内の空間を撮影し、画像データを取得する撮影手段と、
特定の被写体のサイズと形状と向きと位置とを含む物体情報を、被写体情報としてネットワークを介して受信する通信手段と、
前記撮影手段で取得された前記画像データに含まれる前記被写体に対応した特定領域を動的に検出する特定領域検出手段と、
前記被写体が保護すべき保護対象を含む場合には、前記通信手段で受信した前記被写体情報は、前記保護対象に関する保護対象サイズと保護対象形状と保護対象向きと保護対象位置を含む保護対象物情報を、前記物体情報と共に含み、前記被写体情報に含まれる前記保護対象物情報に基づいて、前記特定領域検出手段で検出された前記特定領域から保護領域を特定し、前記保護領域のみを保護加工する画像データ加工手段と、を備える
カメラ装置。
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項２
【補正方法】変更
【補正の内容】
【請求項２】
前記保護領域をユーザが指定するユーザ指定手段をさらに備え、
前記画像データ加工手段は、前記被写体情報に含まれる前記保護対象物情報に基づいて、前記特定領域からユーザ指定の保護領域を特定して保護加工する
請求項１に記載のカメラ装置。
【手続補正３】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１８
【補正方法】変更
【補正の内容】
【請求項１８】
撮影対象に含まれる保護すべき被写体を保護加工して撮影する撮影方法であって、
撮影範囲内の空間を撮影し、画像データを取得する撮影ステップと、
前記被写体に付属して設けられ、前記被写体のサイズと形状と向きと位置とを含む物体情報を、被写体情報としてネットワークを介して受信する通信ステップと、
取得された前記画像データに含まれる特定の被写体に対応した特定領域を動的に検出する特定領域検出ステップと、
前記被写体が保護すべき保護対象を含む場合には、受信した前記被写体情報は、前記保護対象に関する保護対象サイズと保護対象形状と保護対象向きと保護対象位置を含む保護対象物情報を、前記物体情報と共に含み、前記被写体情報に含まれる前記保護対象物情報に基づいて、検出された前記特定領域から保護領域を特定し、前記保護領域のみを保護加工する画像データ加工ステップと、を備える
撮影方法。
【手続補正書】
【提出日】平成21年6月24日(2009.6.24)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影し、撮影した被写体の画像データを記録媒体に記録するカメラ装置と撮影方法とに関する。
【背景技術】
【０００２】
近年、静止画を撮影するデジタルスチルカメラ、または、動画を撮影するデジタルビデオカメラのようなカメラ装置、さらには、デジタルカメラを内蔵する各種電子機器などが普及している。これに伴い、著作権、または、肖像権、その他のプライバシーなどの保護対象（以下、これらをまとめて「保護対象」と総称する）である被写体が、無意識に、かつ、無作為に撮影され、撮影された画像、または、画像に対応する画像データが流布する危険性が増大している。さらに、デジタルカメラ、または、カメラ付き携帯電話にも、短時間の動画撮影録画機能が装備されている。また、インターネットを使うことによって、デジタルカメラ、または、カメラ付き携帯電話などを使って、保護対象の被写体を含む画像を全世界へ瞬時に配布することも可能である。
【０００３】
一方、公共性、または、安全確保、防犯などを目的として、街頭、または、ＡＴＭ端末、コンビニ、公共施設、会社、工場などの監視カメラによって、人の顔が頻繁に撮影されている。これらの監視カメラで撮影された画像の画像データの取り扱いは、必ずしも、プライバシー保護を考慮して行われていない。このため、これらの保護すべき被写体の画像データに対する保護対策として、保護対象の画像、または、画像データに対する各種の保護技術が提案されている。
【０００４】
このような保護技術の１つとして、たとえば、カメラの撮影範囲内の一部に保護対象の被写体がある場合、この保護対象の被写体をマスキング加工などによって隠蔽する技術が知られている。すなわち、保護対象の被写体を隠蔽することによって、肖像権などが保護される。このように、保護対象の被写体を撮影したとしても、保護対象の被写体を判別不可能にする技術が、たとえば、特許文献１に提案されている。
【０００５】
このような従来のカメラは、画像に対するモザイク処理のような、画像を隠蔽する機能を有している。すなわち、従来のカメラは、モザイク処理モードのボタンを操作することによって、ボタン操作直後の撮影によって得られた画像データについて、適正なパスワードが入力されない限り、画像の一部についてモザイク処理をする構成である。図１０Ａと図１０Ｂとは、このような従来のカメラによって撮影された画像２０１の一例を示す図である。図１０Ａは、モザイク処理モードを用いない、通常モードで撮影された画像２０１の一例を示している。また、図１０Ｂは、モザイク処理モードを用いて撮影された画像２０１の一例を示している。また、図１０Ｂに示すように、画像２０１の一部の保護対象の被写体２０２を隠蔽するモザイクの領域２０３は、モザイク処理モードが選択されたときに、ユーザが設定可能に構成されている。
【０００６】
また、保護対象の画像、または、保護対象の画像の画像データに対する、その他の保護技術として、画像に埋め込まれた電子透かしを用いることによって、保護対象の被写体であることが明示されている場合、この画像の撮影を阻止する技術が、たとえば、特許文献２に開示されている。また、ＩＣタグなどの、保護対象の被写体であることを示す情報を発信する機器を用いて、保護対象の被写体の撮影を阻止する技術が、たとえば、特許文献３などに開示されている。
【０００７】
しかしながら、特許文献１に開示された従来のカメラの構成の場合、撮影開始前に保護処理すべき被写体の画像領域を表示装置上で手動によって指定し、保護処理を行う範囲を設定する必要がある。このため、動画撮影においては適切に対応することができないという課題がある。また、特許文献２と特許文献３とのようなカメラの構成の場合、撮影範囲全体の保護処理は可能である。しかしながら、保護対象の被写体が撮影範囲の一部である場合には、保護対象の被写体のみの保護処理を行うことができないという課題がある。また、これらの従来の技術は、保護対象の被写体の検出を自動的に行うことができない。したがって、保護対象の被写体が動いたり、変化したりする場合、自動的に保護対象の被写体を追尾できないという課題もある。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００３−８７６３２号公報
【特許文献２】特開２００５−１５１１２４号公報
【特許文献３】特開２００５−２２３６０１号公報
【発明の概要】
【０００９】
本発明は、保護対象の被写体が動いたり、変化したりしても、被写体が追尾され、保護対象の被写体を含む画像に対して、被写体の画像領域が保護加工されるカメラ装置とこのカメラ装置に適用される撮影方法とを提供する。
【００１０】
本発明のカメラ装置は、撮影手段と通信手段と特定領域検出手段と画像データ加工手段とを有する。撮影手段は、撮影範囲内の空間を撮影して、画像データを取得する。通信手段は、特定の被写体のサイズと形状と向きと位置とを含む被写体領域情報を記憶した無線通信可能なメモリデバイスと通信を行い、被写体情報を取得する。特定領域検出手段は、撮影手段で取得された画像データに含まれる被写体に対応した特定領域を動的に検出する。画像データ加工手段は、被写体が著作権保護、または、プライバシー保護すべき保護対象である場合には、通信手段で取得した被写体情報を基に、特定領域検出手段で検出された特定領域から保護領域を特定し、保護領域のみを保護加工する。この構成によって、撮影される被写体の中で、著作権、または、肖像権、プライバシーなどの保護を要する被写体を隠蔽した画像データを生成するカメラ装置が得られる。
【００１１】
また、本発明の撮影方法は、撮影対象に含まれる著作権保護、または、プライバシー保護すべき被写体を保護加工して撮影する方法であって、撮影ステップと通信ステップと特定領域検出ステップと画像データ加工ステップとを有する。撮影ステップは、撮影範囲内の空間を撮影し、画像データを取得する。通信ステップは、被写体に付属して設けられ、被写体のサイズと形状と向きと位置とを含む被写体情報を保持した無線通信可能なメモリデバイスと通信を行い、被写体情報を取得する。特定領域検出ステップは、取得された画像データに含まれる特定の被写体に対応した特定領域を動的に検出する。画像データ加工ステップは、被写体が著作権保護またはプライバシー保護すべき保護対象である場合には、取得した被写体情報に基づいて、検出された特定領域から保護領域を特定し、保護領域のみを保護加工する。この方法によって、撮影される被写体の中で、著作権、または、肖像権、プライバシーなどの保護を要する被写体を隠蔽した画像データを生成する撮影方法が提供される。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施の形態におけるカメラ装置の構成を示すブロック図
【図２】図１に示すカメラ装置に用いられる保護制御部の構成を示すブロック図
【図３】図１に示すカメラ装置に適用される撮影方法を示すフローチャート
【図４Ａ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｂ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｃ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｄ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｅ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｆ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｇ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｈ】保護対象の被写体に対する保護加工の一例を示す説明図
【図４Ｉ】保護対象の被写体に対する保護加工の一例を示す説明図
【図５】画像データを合成した画像の一例を示す図
【図６Ａ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図６Ｂ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す図
【図６Ｃ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図７Ａ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図７Ｂ】保護対象となる画像を撮影する場合のカメラ装置の状態を示す概要図
【図７Ｃ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図７Ｄ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図８Ａ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図８Ｂ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図８Ｃ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図８Ｄ】保護対象となる画像が表示された被写体に対する保護加工の一例を示す説明図
【図９】図１に示すカメラ装置に適用される保護再生方法を示すフローチャート
【図１０Ａ】従来のカメラによって撮影された画像の一例を示す説明図
【図１０Ｂ】従来のカメラによって撮影された画像の一例を示す説明図
【発明を実施するための形態】
【００１３】
以下、本発明の実施の形態について図面を参照しながら詳細に説明する。
【００１４】
（実施の形態）
図１は、本発明の実施の形態におけるカメラ装置１０の構成を示すブロック図である。また、図２は、カメラ装置１０に用いられる保護制御部１７の構成を示すブロック図である。
【００１５】
また、本発明の実施の形態におけるカメラ装置１０は、たとえば、動画を撮影するデジタルビデオカメラとして用いられる。カメラ装置１０は、撮影する被写体３０、３１が著作権、肖像権、その他のプライバシー保護の保護対象の被写体である場合に、被写体３０、３１を撮影して得られる画像データＶ１０、Ｖ２０の出力表示画像、または、記録再生画像に保護加工を加えて出力する。なお、本発明のカメラ装置１０は、カメラ付き携帯電話、または、カメラ付きＰＤＡなどのデジタルカメラが付属された各種電子機器に付属されるデジタルカメラにも適用される。また、静止画を撮影するデジタルスチルカメラ、または、デジタルスチルカメラに設けられた動画撮影機能などにも適用される。
【００１６】
図１と図２とに示すように、カメラ装置１０は、第１カメラ１１（以下、カメラ１１と呼ぶ）と第２カメラ１２（以下、カメラ１２と呼ぶ）とマイク２５と画像音声形成部１６と画像音声メモリ８１（以下、メモリ８１と呼ぶ）とを有している。さらに、カメラ装置１０は、ネットワーク通信部１４（以下、通信部１４と呼ぶ）とカメラ制御部１５とオートフォーカス処理部１３（以下、処理部１３と呼ぶ）とジャイロ部２６とを有している。さらにまた、カメラ装置１０は、特定領域検出部８３（以下、検出部８３と呼ぶ）と形状探索部８５と距離推定部８２と電子透かし抽出部８４（以下、抽出部８４と呼ぶ）とを有している。さらにまた、カメラ装置１０は、保護制御部１７と保護処理部１８とを有している。保護制御部１７は、保護判定部７１と保護範囲制御部７２と保護精度制御部７３と保護時間制御部７４とを有している。さらにまた、カメラ装置１０は、記録再生処理部１９（以下、処理部１９と呼ぶ）とリード／ライト（Ｒｅａｄ／Ｗｒｉｔｅ）制御部２０（以下、Ｒ／Ｗ制御部２０と呼ぶ）と出力インタフェース（Ｉｎｔｅｒｆａｃｅ）部２１（出力Ｉ／Ｆ部２１と呼ぶ）と画像音声提示部２３（以下、提示部２３と呼ぶ）とユーザインタフェース（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）部２４（以下、ユーザＩ／Ｆ部２４と呼ぶ）とを有している。
【００１７】
カメラ１１、１２は、撮影範囲内の空間を撮影し画像データを取得する撮影手段である。カメラ１１、１２は、被写体３０、または、被写体３１を含む撮影範囲内の画像を撮影し、撮影した画像に対応する画像データを生成する。被写体３０と被写体３１とは、撮影対象の一部である。被写体３０と被写体３１に含まれる画像３５とが、保護すべき対象である特定の被写体であると仮定する。また、図１に示すように、被写体３０にＩＣタグ３４が取り付けられている。また、被写体３１は、画像３５を表示している、たとえば、テレビ受像機のような画像表示器３６であり、同様に、ＩＣタグ３４が取り付けられている。
【００１８】
カメラ装置１０は、カメラ１１とカメラ１２とのように、２つのカメラ１１、１２を有している。カメラ１１、１２は、所定の間隔を隔てて配置されていることによって、２眼撮影が可能である。なお、２眼撮影することによって、カメラ１１、１２は、立体画像データを取得することができる。本実施の形態では、図１に示すように、２つのカメラ１１、１２によって、立体画像を取得できる構成について説明する。しかしながら、カメラ装置１０は、立体画像ではない通常画像の表示、または、記録再生をする構成であってもよい。たとえば、カメラ１１、１２のうち、一方のカメラが距離測定機能に特化された撮影手段であってもよい。さらにまた、カメラ装置１０は、カメラ１１、１２のうち、一方のカメラのみを有する構成であってもよい。
【００１９】
カメラ１１、１２は、たとえば、光学レンズ群（図示せず）と撮像素子（図示せず）とＡＤ変換器（図示せず）とを有している。撮像素子は、マトリクス状に配列されたＣＣＤ、または、ＭＯＳによって構成されるイメージセンサなどである。ＡＤ変換器は、画像信号をデジタルデータに変換する機能を有している。カメラ１１、１２において、撮像素子の各画素によって検出された光量は、電気信号に変換される。変換された電気信号が画像信号となる。さらに、画像信号は、ＡＤ変換器によってデジタル信号である画像データに変換される。カメラ１１は、このように生成された画像データＶ１０を出力する。カメラ１２は、同様に、生成された画像データＶ２０を出力する。カメラ１１から出力された画像データＶ１０とカメラ１２から出力された画像データＶ２０とは、画像音声形成部１６へ入力される。
【００２０】
マイク２５は、カメラ１１、１２によって撮影される撮影範囲近辺の音を取得し、電気信号に変換する。変換された電気信号は、デジタルデータに変換された音声データＡ３として、画像音声形成部１６へ入力される。
【００２１】
また、画像音声形成部１６は、カメラ１１、１２が出力した２つの画像データＶ１０、Ｖ２０を受け取り、あらかじめ決められた所定のフォーマットなどに従った画像データの形式に変換する。たとえば、立体画像を表示するための画像データＶ３０を合成する場合、２つの画像データＶ１０、Ｖ２０から立体視が可能な画像データＶ３０を形成する。また、画像音声形成部１６は、マイク２５から出力された音声データＡ３を受け取る。画像音声形成部１６は、まず、画像データＶ１０、Ｖ２０と音声データＡ３とをメモリ８１に保存する。メモリ８１は、画像データＶ１０、Ｖ２０と音声データＡ３とを、フレーム単位で蓄積するメモリである。画像音声形成部１６は、画像データＶ１０、Ｖ２０をメモリ８１に蓄積するとともに、蓄積した画像データＶ１０、Ｖ２０を適宜抽出する。このことによって、立体画像データである画像データＶ３０を生成する。画像音声形成部１６は、右眼に対応するカメラ１１から出力された画像データＶ１０を第１フィールドとし、左眼に対応するカメラ１２から出力された画像データＶ２０を第２フィールドとする画像データＶ３０を合成する。このようにして画像データＶ３０が合成される。画像データＶ３０による表示画像は、たとえば、シャッタ付きの眼鏡（図示せず）が利用され、シャッタが右の画像データと左の画像データとのタイミングに同期して切替えられる。このことによって、立体画像が視認可能である。画像音声形成部１６は、画像データＶ３０を保護処理部１８に供給する。なお、画像音声形成部１６が出力する画像データＶ３０は、必ずしも、立体画像である必要はなく、カメラ１１から出力された通常の画像データＶ１０、または、カメラ１２から出力された通常の画像データＶ２０のいずれか、または、両方であってもよい。
【００２２】
通信部１４は、被写体３０、３１に取り付けられているＩＣタグ３４と通信を行い、ＩＣタグ３４が記憶するタグ情報を取得する通信手段である。通信部１４は、たとえば、電波３９などの高周波の電磁波を発信し、発信した電波３９に対する応答である応答信号などの電波３９を受信する。すなわち、図１に示すように、カメラ装置１０の近辺にＩＣタグ３４が存在する場合、通信部１４が発信した電波３９がＩＣタグ３４によって受信される。ＩＣタグ３４は、通信部１４から発信された電波３９を受信すると、受信した電波３９に応答して、ＩＣタグ３４が記憶しているタグ情報を含む電波３９を送信する。通信部１４は、ＩＣタグ３４から発信された、タグ情報を含む電波３９を受信し、電波信号の中からタグ情報を抽出する。被写体３０に取り付けられたＩＣタグ３４は、タグ情報として、ＩＣタグ３４が取り付けられた被写体３０における著作権、肖像権、その他プライバシー保護などの保護対象か否かを示す有無情報とともに、被写体３０のサイズ情報と形状情報と向き情報と位置情報などの被写体情報を含んでいる。以下、有無情報は、著作権保護／プライバシー保護の有無情報として説明する。なお、被写体３０が、著作権保護／プライバシー保護を必要とする保護対象を含む場合、被写体情報は、被写体３０に関する物体情報と保護対象に関する保護対象物情報とを含む。すなわち、被写体３０に関する物体サイズ情報と物体形状情報と物体向き情報などが物体情報に分類される。保護対象に関する保護対象サイズ情報と保護対象形状情報と保護対象向き情報と保護対象位置情報などが保護対象物情報に分類される。被写体３１に取り付けられたＩＣタグ３４は、タグ情報として、ＩＣタグ３４が取り付けられた被写体３１における著作権保護／プライバシー保護の有無情報とともに、被写体３１の画面サイズ情報と画面の向き情報などの、画像表示器３６の表示状態に関する被写体情報を含む。同様に、被写体３１が著作権保護／プライバシー保護を必要とする保護すべき対象となる画像３５を含む場合、被写体情報は、被写体３１に関する物体情報と保護対象に関する保護対象物情報とを含む。すなわち、画像表示器３６の画像表示面に保護対象が表示されている場合、被写体３１の画面サイズ情報と画面の向き情報などが保護対象物情報に分類される。なお、通信部１４は、被写体３０、３１に取り付けられたＩＣタグ３４からタグ情報を受信すると、保護範囲制御部７２へタグ情報を通知する。
【００２３】
ＩＣタグ３４は、電子タグ、無線タグ、あるいはＲＦＩＤ（Radio Frequency Identification）などと呼ばれ、内部に電子回路（図示せず）が組み込まれた、通信可能な小型のメモリデバイスである。電子回路は、記憶部（図示せず）と無線通信部（図示せず）とを有する。ＩＣタグは、たとえば、物品（図示せず）などに取り付けられ、ＩＣタグ検出器（図示せず）によって、ＩＣタグに記憶されたタグ情報を読み取る。ＩＣタグに記憶されたタグ情報を読み取ることによって、ＩＣタグが取り付けられた物品の識別コード、または、所有者、身元などが判別される。なお、便宜上、通信部１４が通信する対象をＩＣタグ３４として説明する。しかしながら、通信部１４が通信を行い、被写体情報を取得する対象は、ＩＣタグ３４に限定されない。通信部１４の通信の対象は、記憶部と無線通信部とを有し、通信部１４と通信可能な小型のメモリデバイスであればよく、たとえば、記憶部が搭載されたブルートゥース（Bluetooth：米国Bluetooth SIG, Inc.の登録商標）などの無線通信デバイス、光通信デバイスであってもよい。
【００２４】
被写体３１は、テレビジョン受信機などの画像表示器３６である。図１に示す画像表示器３６は、被写体３１として、著作権保護などの保護対象となる画像３５が、画像３５を保護するための電子透かしとともに表示されている。
【００２５】
ＩＣタグ３４に記憶されているタグ情報の一例を表１に示す。表１に示すように、タグ情報は、ヘッダ（Header）領域とデータ（Data）領域とを有し、ＩＣタグ３４が取り付けられている被写体３０、３１に関する情報が記録されている。なお、被写体３０、３１に関する情報は、被写体３０、３１がカメラ装置１０によって撮影された場合、撮影範囲内の被写体情報として認識される。
【００２６】
【表１】
2009001530.tif 000031
【００２７】
ヘッダ領域には、それぞれ、「Ｔａｇ−ＩＤ」と「Ｌｅｎｇｔｈ」と「Ｃｏｎｔｅｎｔ  ＩＤ」と「Ｔｙｐｅ」と「Ｅｎｃｒｙｐｔｉｏｎ」とが記録されている。「Ｔａｇ−ＩＤ」は、ＩＣタグ３４を識別するための識別子の情報であり、情報の長さが８バイト（Ｂｙｔｅ）である。「Ｌｅｎｇｔｈ」は、ＩＣタグ３４が送信するタグ情報の送信情報の長さを示す情報であり、情報の長さが８Ｂｙｔｅである。「Ｃｏｎｔｅｎｔ  ＩＤ」は、ＩＣタグ３４が取り付けられている被写体３０、３１を特定するための情報であり、情報の長さが６４Ｂｙｔｅである。「Ｔｙｐｅ」は、被写体３０、３１の有するコンテンツ付属情報、または、ＥＰＧ情報（ＥＰＧ  Ｉｎｆｏとも呼ぶ）などを特定するための情報であり、情報の長さが４Ｂｙｔｅである。「Ｅｎｃｒｙｐｔｉｏｎ」は、データ領域に記録されている情報に、暗号化処理が行われているかどうかを示す暗号化情報であり、情報の長さが４Ｂｙｔｅである。
【００２８】
データ領域には、それぞれ、「Ｃｏｎｔｅｎｔ  ＩＤ」と「Ｔｙｐｅ」と「Ｃｏｎｔｅｎｔ  Ａｔｔｒｉｂｕｔｅ」と「Ｃｙｃｌｉｃ  Ｒｅｄｕｎｄａｎｃｙ  Ｃｈｅｃｋ」（以下、ＣＲＣと呼ぶ）とが記録されている。なお、データ領域に記録されている情報が暗号化処理の対象となる。「Ｃｏｎｔｅｎｔ  ＩＤ」は、ＩＣタグ３４が取り付けられている被写体３０、３１を特定するための情報であり、情報の長さが６４Ｂｙｔｅである。「Ｔｙｐｅ」は、被写体３０、３１の有するコンテンツ付属情報、または、ＥＰＧ情報などを特定するための情報であり、情報の長さが４Ｂｙｔｅである。「Ｃｏｎｔｅｎｔ  Ａｔｔｒｉｂｕｔｅ」は、被写体３０、３１のコンテンツ属性を示す情報であり、情報の長さは可変長である。「ＣＲＣ」は、タグ情報が改ざんされたかどうかを判別するための改ざんチェック情報であり、情報の長さが４Ｂｙｔｅである。また、「Ｃｏｎｔｅｎｔ  Ａｔｔｒｉｂｕｔｅ」は、「Ｃｏｎｔｅｎｔ  情報」（以下、Ｃｏｎｔｅｎｔ  Ｉｎｆｏと呼ぶ）と「Ｅｎｖｉｒｏｎｍｅｎｔａｌ  情報」（以下、Ｅｎｖ  Ｉｎｆｏと呼ぶ）と「ＥＰＧ  Ｉｎｆｏ」とを含む。「Ｃｏｎｔｅｎｔ  Ｉｎｆｏ」は、被写体３０、３１の個別の情報であるコンテンツ情報であり、情報の長さは可変長である。「Ｅｎｖ  Ｉｎｆｏ」は、被写体３０、３１の周囲の環境に関する環境情報であり、情報の長さは可変長である。「ＥＰＧ  Ｉｎｆｏ」は、被写体３１に含まれる画像３５に関するＥＰＧ情報であり、情報の長さは可変長である。
【００２９】
また、「Ｃｏｎｔｅｎｔ  Ｉｎｆｏ」は、」ＰｒｏｔｅｃｔとＴａｒｇｅｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」と「Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」と「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」と「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」と「Ａｃｃｅｌｅｒａｔｉｏｎ」（以下、Ａｃｃｅｌと呼ぶ）と「Ｒｅｓｅｒｖｅｄ」とを含む。「Ｐｒｏｔｅｃｔ」は、被写体３０、３１に対して、著作権保護、または、プライバシー保護が必要であるかどうかを示す保護有無情報であり、情報の長さが４Ｂｙｔｅである。なお、「Ｐｒｏｔｅｃｔ」は、被写体３０、３１が保護対象であるかどうかに加え、保護対象が部分的な領域であるか、全体が保護対象であるかの情報も含んでいる。したがって、たとえば、「Ｐｒｏｔｅｃｔ」は、保護対象ではない（Ｎｏｎｅ）／部分的に保護対象（Ｐａｒｔｉａｌ）／全体が保護対象（ＡＬＬ）などによって示されている。「Ｔａｒｇｅｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」は、被写体３０、３１のサイズを示す物体サイズ情報と被写体３０、３１の形状を示す物体形状情報であり、情報の長さが３２Ｂｙｔｅである。なお、物体形状情報は、領域情報として記録されてもよい。「Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」は、被写体３０、３１の向きを示す物体向き情報であり、情報の長さが１６Ｂｙｔｅである。「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｓｉｚｅ」は、被写体３０、３１に含まれる保護対象のサイズを示す保護対象サイズ情報と保護対象の形状を示す保護対象形状情報であり、情報の長さが３２Ｂｙｔｅである。なお、保護対象形状情報は、領域情報として記録されてもよい。「Ｐｒｏｔｅｃｔ  Ｃｏｎｔｅｎｔ  Ｄｉｒｅｃｔｉｏｎ」は、被写体３０、３１に含まれる保護対象の向きを示す保護対象向き情報であり、情報の長さが１６Ｂｙｔｅである。「Ａｃｃｅｌ」は、被写体３０、３１に含まれる保護対象の動きに関する情報であり、情報の長さが３２Ｂｙｔｅである。なお、「Ａｃｃｅｌ」は、たとえば、保護対象加速度情報、または、保護対象角速度情報であり、保護対象の位置を示す保護対象位置情報と考えることができる。「Ｒｅｓｅｒｖｅｄ」は、被写体３０、３１、または、被写体３０、３１に含まれる保護対象に関して、さらに、必要と思われるコンテンツ情報を記録するために予備として確保されている予約領域であり、情報の長さは可変長である。
【００３０】
また、「Ｅｎｖ  Ｉｎｆｏ」は、「Ｔｅｍｐ」と「Ｒｅｓｅｒｖｅｄ」とを含む。「Ｔｅｍｐ」は、被写体３０、３１の周囲の温度に関する環境温度情報、または、被写体３０、３１に含まれる保護対象の温度に関するターゲット温度情報であり、情報の長さが４Ｂｙｔｅである。「Ｒｅｓｅｒｖｅｄ」は、被写体３０、３１の周囲の環境、または、保護対象自身の環境条件に関して、さらに、必要と思われる環境情報を記録するために予備として確保されている予約領域であり、情報の長さは可変長である。
【００３１】
また、「ＥＰＧ  Ｉｎｆｏ」は、「Ｓｃｈｅｄｕｌｅ」と「Ｒｅｓｅｒｖｅｄ」とを含む。「Ｓｃｈｅｄｕｌｅ」は、被写体３１に含まれる画像に関する番組スケジュール情報を記録する情報領域であり、情報の長さは可変長である。さらに、「Ｓｃｈｅｄｕｌｅ」は、被写体３１に含まれる画像に関する著作権保護、または、プライバシー保護が必要であるかどうかを示す保護有無情報を含む。「Ｒｅｓｅｒｖｅｄ」は、被写体３１に含まれる画像に関するＥＰＧ情報に関して、さらに、必要と思われるＥＰＧ情報を記録するために予備として確保されている予約領域であり、情報の長さは可変長である。
【００３２】
以上、ＩＣタグ３４に記憶されているタグ情報の一例について説明した。なお、タグ情報は、上記の構成に限定されない。以下に説明するように、カメラ装置１０が、少なくとも、保護加工するべき保護領域を特定するために必要となる保護対象物情報を含む被写体情報を有していればよい。
【００３３】
通信部１４は、サーバ通信部（図示せず）を有するサーバ３８とも通信を行うことができる。通信部１４は、たとえば、サーバ３８に対して、電波３９などの高周波の電磁波を発信し、発信した信号に対する応答である応答信号などの電波３９を受信する。サーバ３８からの応答信号としては、たとえば、画像表示器３６が表示する公共放送に関する電子番組表（ＥＰＧ）などの情報である。なお、サーバ３８は、放送、または、通信コンテンツプロバイダなどのネットワーク配信用サーバに接続され、配信用サーバから、ネットワークを介してＥＰＧ番組情報などを入手することができる。
【００３４】
カメラ制御部１５は、ユーザＩ／Ｆ部２４からの撮影に関する指示情報に応じて、カメラ１１、１２と処理部１３とを制御する。たとえば、ユーザＩ／Ｆ部２４からズームインの指示情報が通知されると、カメラ制御部１５は、カメラ１１、１２の光学レンズ群を制御し、カメラ１１、１２の撮影する撮影範囲を狭くする。逆に、ユーザＩ／Ｆ部２４からズームアウトの指示情報が通知されると、カメラ制御部１５は、カメラ１１、１２の光学レンズ群を制御し、カメラ１１、１２の撮影する撮影範囲を広くする。カメラ制御部１５は、たとえば、ズームイン時の拡大率などの、カメラ制御部１５がカメラ１１、１２を制御した情報を、操作情報として、検出部８３と保護範囲制御部７２とへ通知する。なお、操作情報は、カメラ装置１０が撮影を行う際の、撮影条件情報の一部である。
【００３５】
処理部１３は、カメラ制御部１５からオートフォーカス処理を実行するように通知されると、カメラ１１、１２の撮影範囲内のほぼ中央に位置する撮影対象にフォーカスが合うように、カメラ１１、１２のそれぞれの光学レンズ群の焦点を制御する。なお、カメラ１１、１２の撮影範囲内のほぼ中央に位置する撮影対象は被写体３０、３１であってもよい。また、ときには、処理部１３は、大面積の撮影対象にフォーカスが合うように、カメラ１１、１２のそれぞれの光学レンズ群の焦点を制御することもできる。なお、大面積の撮影対象が被写体３０、３１であってもよい。処理部１３は、被写体３０、３１とカメラ装置１０との間の距離情報を生成し、カメラ制御部１５へ通知する。カメラ制御部１５は、処理部１３から通知された距離情報を、検出部８３と保護範囲制御部７２とへ通知する。なお、距離情報も、カメラ装置１０が撮影を行う際の、撮影条件情報の一部である。
【００３６】
ジャイロ部２６は、角速度センサ、または、加速度センサなどのジャイロ・センサ（図示せず）を内蔵し、ジャイロ部２６に内蔵されたジャイロ・センサの出力信号に基づいて、ジャイロ部２６が搭載されているカメラ装置１０の向き情報と位置情報とを出力する。出力された向き情報と位置情報とは、カメラ制御部１５へ入力される。カメラ制御部１５へ入力されたカメラ装置１０の向き情報と位置情報とが、検出部８３と保護範囲制御部７２とへ通知される。カメラ装置１０の向き情報は、カメラ装置１０の相対的な向きを示す情報である。カメラ装置１０の相対的な向き情報は、たとえば、撮影開始から変化した向きの状態量であってもよいし、被写体３０、３１とカメラ装置１０との相対的な向き関係を状態量として表してもよい。同様に、カメラ装置１０の位置情報も、カメラ装置１０の相対的な位置を示す情報である。カメラ装置１０の相対的な位置情報は、たとえば、撮影開始から変化した位置の状態量であってもよいし、被写体３０、３１とカメラ装置１０との相対的な位置関係を状態量として表してもよい。カメラ装置１０の向き情報と位置情報とは、共に、カメラ装置１０が撮影を行う際の、撮影条件情報の一部である。
【００３７】
検出部８３は、カメラ１１、１２で取得した画像データＶ１０、Ｖ２０に含まれる特定の被写体３０、３１に対応した特定領域を動的に検出する特定領域検出手段として機能する。すなわち、検出部８３は、検出部８３に通知される保護対象物情報と候補情報と電子すかし領域情報と距離情報と撮影条件情報などに基づいて、保護対象である特定の被写体３０、３１に対応した特定領域を検出する。検出部８３は、タグ情報に含まれる特定の被写体３０、３１の保護対象サイズ情報と保護対象形状情報と保護対象向き情報などの基本情報とともに、動的に変化する操作情報、または、動きに追従した距離情報に基づいて特定領域を検出する。このため、たとえば、動画像のような保護対象の被写体３０が動いたり、大きさが変化したりするような画像に対しても特定領域を精度よく検出することができる。検出部８３は、検出した特定領域に関する情報を特定領域情報として保護範囲制御部７２へ通知する。なお、保護対象物情報は保護範囲制御部７２から、候補情報は形状探索部８５から、電子すかし情報は抽出部８４から、距離情報は距離推定部８２から、撮影条件情報はカメラ制御部１５から、それぞれ検出部８３へ通知される。なお、検出部８３が、被写体３０、３１に対応した特定領域を動的に検出する場合、保護対象物情報と候補情報と電子すかし領域情報と距離情報と撮影条件情報との全ての情報に基づいて、検出することに限定されない。たとえば、被写体３０に対応した特定領域を動的に検出する場合、保護対象物情報と候補情報とに基づいて、特定領域を動的に検出することができる。また、たとえば、撮影範囲内に存在する動的な被撮影物が被写体３０だけである場合、被写体３０に対応した特定領域を、距離情報のみに基づいて、または、操作情報のみに基づいて、特定領域を動的に検出することができる。また、被写体３１に対応した特定領域を動的に検出する場合、電子すかし領域情報のみに基づいて、特定領域を動的に検出することができる。なお、保護対象物情報と候補情報と電子すかし領域情報と距離情報と操作情報などの撮影条件情報とが複合的に利用されることによって、特定領域を動的に検出するときの検出精度がさらに向上する。
【００３８】
形状探索部８５は、メモリ８１に蓄積された画像データＶ１０と画像データＶ２０とのうちの少なくともいずれか一方の画像データにおいて、検出部８３から通知された保護対象物情報に対応する部分画像の領域を探索する。すなわち、たとえば、顔の輪郭のような形状が指定される場合、形状探索部８５は、メモリ８１に蓄積された画像データＶ１０、または、画像データＶ２０の画像内において、顔の形状が存在する箇所を探査する。顔の形状の存在を探査した結果、形状探索部８５は、顔の形状が存在すると判断した場合、顔の形状が存在する位置情報と顔のサイズ情報とを生成する。形状探索部８５は、生成した位置情報とサイズ情報とを候補情報として検出部８３へ通知する。このように、画像データＶ１０、Ｖ２０に対して、形状探索部８５は、検出部８３から通知される保護対象形状情報に対応した部分画像の領域を探索する。形状探索部８５は、探索によって検出した部分画像のサイズ情報と位置情報とを候補情報として検出部８３と距離推定部８２とに通知する。
【００３９】
距離推定部８２は、画像データＶ１０と画像データＶ２０とを参照して、カメラ装置１０から被写体３０までの距離を推定する。２つのカメラ１１、１２から生成された、２眼視による画像データＶ１０、Ｖ２０においては、２つの画像を重ねた場合、被写体３０の位置が左右にずれている。カメラ装置１０と被写体３０との距離が近距離であるほど、画像データＶ１０と画像データＶ２０との間の被写体３０の左右のずれ量は大きくなる。このため、被写体３０の左右のずれ量に基づいて、カメラ装置１０から被写体３０までの距離を推定することが可能である。距離推定部８２は、このような原理に基づき、推定した被写体３０までの距離を距離情報として検出部８３に通知する。
【００４０】
抽出部８４は、メモリ８１に蓄積された画像データＶ１０と画像データＶ２０との少なくともいずれか一方の画像データを参照して、参照した画像データに電子透かしが存在するかどうかを判定する。抽出部８４は、画像データＶ１０、Ｖ２０の画像内に電子透かしが存在すると判定する場合、画像上における電子透かしを表示している画像表示器３６、または、表示部などの領域に関する情報を生成する。抽出部８４は、このような領域に関する情報と、少なくともこの領域に関するサイズ情報と形状情報と位置情報などを含む情報とを透かし領域情報として検出部８３に通知する。被写体３１のように画像表示器３６の表示状態に関する情報を含むタグ情報を記憶したＩＣタグ３４が取り付けられている場合、表示状態に関する情報を保護対象物情報として、検出部８３から抽出部８４へ通知される。抽出部８４は、検出部８３から通知された保護対象物情報を利用して、著作権保護、または、プライバシー保護を要する領域、または、画像を置き換えたい領域のサイズ情報と形状情報とに調整し、これらの情報を透かし領域情報として検出部８３に通知する。
【００４１】
保護制御部１７は、カメラ装置１０が撮影する撮影範囲内に著作権保護／プライバシー保護するべき保護対象がある場合に、通信部１４で取得したタグ情報などに基づいて、検出部８３で検出された特定領域情報から保護領域を特定する。保護制御部１７は、ユーザＩ／Ｆ部２４を介して通知されるユーザ指示に基づいた指示信号に応じて動作する。ユーザＩ／Ｆ部２４を介して通知される指示信号は、たとえば、加工出力範囲指定情報、または、画像データの精度レベル指定情報、撮影者スケジュール情報などである。撮影者スケジュール情報は、たとえば、出力加工時期指定情報である。
【００４２】
保護制御部１７は、図２に示すように、保護判定部７１と保護範囲制御部７２と保護精度制御部７３と保護時間制御部７４とを有している。保護範囲制御部７２は、保護範囲予測制御部７５を有している。
【００４３】
カメラ装置１０の撮影者であるユーザが、ユーザＩ／Ｆ部２４を介して設定した、撮影に関する指示情報が保護制御部１７へ通知される。撮影に関する指示情報が保護制御部１７へ通知されると、保護制御部１７は、カメラ制御部１５へ指示情報を通知する。その後、ＩＣタグ３４から通信部１４へタグ情報が通知されると、タグ情報が保護制御部１７へ通知される。通信部１４が受信したタグ情報が保護制御部１７へ通知されると、まず、保護判定部７１が、通知されたタグ情報を解析する。また、タグ情報の解析結果の１つとして生成する著作権保護／プライバシー保護の有無情報において、保護判定部７１は、著作権保護／プライバシー保護が「有」であると判定する場合、判定結果を保護範囲制御部７２と保護精度制御部７３と保護時間制御部７４とへ通知する。保護範囲制御部７２は、著作権保護／プライバシー保護が「有」であると判定された判定結果を受けると、検出部８３に対して、タグ情報から抽出した保護対象に関する保護対象物情報を通知する。検出部８３は、保護範囲制御部７２から受け取った保護対象物情報に基づき、撮影範囲内の保護対象となり得る対象を解析し、保護対象となり得る対象が検出された場合に、特定領域として保護範囲制御部７２へ通知する。また、同様に、保護精度制御部７３は、保護領域の精度に関する情報を保護範囲制御部７２へ通知して、保護領域を特定するときの精度を制御する。同様に、保護時間制御部７４は、保護加工する時間に関する情報を保護範囲制御部７２へ通知して、保護範囲を特定する時の時間を制御する。
【００４４】
すなわち、保護範囲制御部７２が、具体的に、検出部８３で検出された特定領域から保護領域を特定する。保護範囲制御部７２は、保護処理部１８が保護加工する範囲を制御する保護範囲制御手段である。保護範囲制御部７２は、通信部１４から通知されるタグ情報に含まれている保護対象物情報とカメラ制御部１５から通知される操作情報と距離情報と位置情報などの撮影条件情報とに基づいて、特定領域から保護領域を特定する。さらに、保護範囲制御部７２は、ユーザＩ／Ｆ部２４に対してユーザが指定する加工出力範囲指定に基づいて、特定領域から保護領域を特定する。ユーザが指定する加工出力範囲指定には、たとえば、「撮影範囲全面」、または、「保護対象の射影」、「保護対象の周辺を含む」などが選択される。また、「保護対象の周辺を含む」が選択された場合、ユーザによって設定された精度レベル指定値分（たとえば、１０％など）のマージン領域が、保護対象の境界領域に加えて、拡げられた範囲が保護領域として特定される。このとき、保護範囲制御部７２は、保護精度制御部７３から通知される保護領域に関する保護精度情報に基づいて、特定領域から保護領域を特定する。保護領域に関する保護精度情報は、たとえば、ユーザによって設定された精度レベル指定の値から、演算された射影情報、または、マージン演算情報である。すなわち、「保護対象の射影」が選択された場合、保護精度制御部７３が、射影情報を保護範囲制御部７２へ通知し、保護範囲制御部７２は、通知された射影情報に基づいて、特定領域から保護領域を特定する。また、「保護対象の周辺を含む」が選択された場合、保護精度制御部７３が、マージン演算情報を保護範囲制御部７２へ通知し、保護範囲制御部７２は、通知されたマージン演算情報を考慮して、特定領域から保護領域を特定する。また、保護範囲制御部７２は、保護時間制御部７４から通知される保護時間に関する保護時間情報に基づいて、特定領域から保護領域を特定する。保護範囲制御部７２は、特定した保護領域に関する保護領域情報を保護処理部１８へ通知する。
【００４５】
保護精度制御部７３は、保護領域の保護加工をするときの保護加工の精度を制御するために設けられている保護精度制御手段である。保護精度制御部７３は、保護するべき被写体３０、３１の向き情報に応じて、被写体３０、３１における保護に必要な領域を撮影範囲に対する射影領域として算出し、射影領域情報を保護領域に関する保護精度情報として保護範囲制御部７２へ通知することができる。また、保護精度制御部７３は、ユーザがあらかじめ設定した精度レベル指定情報に応じて、保護対象の境界領域から保護領域の境界領域までのマージンを演算し、マージン演算結果を保護精度情報として保護範囲制御部７２へ通知する。なお、ユーザがあらかじめ精度レベル指定を行わない場合などは、撮影範囲の状況、すなわちカメラ装置１０の利用環境にしたがって、保護対象となる被写体３０、３１周辺のマージン領域が設定されてもよい。このとき、マージン領域は、所定の範囲、または、所定の形状に調整されて、保護領域が特定されるとよい。すなわち、保護対象を含む被写体３０、３１が特定されやすい背景を有する利用環境においては、マージン領域を小さく設定することができる。逆に、保護対象を含む被写体３０、３１が特定されにくい利用環境においては、マージン領域を大きく設定するとよい。たとえば、被写体３０の保護対象が顔形状であり、撮影範囲内に複数の顔形状が存在する場合が想定される。このような場合、被写体３０の顔形状よりもサイズの大きな、保護対象ではない顔形状が複数存在する場合、マージン領域を大きく設定することによって、少なくとも保護するべき保護対象の被写体３０、３１が保護される。
【００４６】
保護時間制御部７４は、保護領域の保護加工をするときの保護加工する時間を制御するために設けられている保護時間制御手段である。保護時間制御部７４は、ユーザＩ／Ｆ部２４を介してユーザが設定した加工出力時期指定情報などの撮影者スケジュール情報、または、通信部１４から通知されるＥＰＧ情報などの被写体スケジュール情報などに基づいて、保護範囲制御部７２が保護領域を特定する際に必要となる、保護領域を保護する時間に関する保護時間情報を保護範囲制御部７２へ通知する。保護時間情報は、たとえば、ユーザ設定にしたがって、保護対象となる被写体３０、３１の保護のオン／オフ（ＯＮ／ＯＦＦ）するタイミングに関する情報を含む。また、保護時間情報は、ユーザ設定にしたがって、保護対象となる被写体３０、３１の保護加工を、動的なマスク制御、または、静的なマスク制御のいずれかに切り換える時間に関する情報を含む。また、被写体３１に含まれる画像表示器３６が保護すべきコンテンツを再生表示している場合、保護時間情報は、通信部１４が取得したＥＰＧ情報にしたがって、保護対象となるコンテンツが放映される、特定番組の放映時間に相当する時間に関する情報を含む。保護時間制御部７４は、保護範囲制御部７２が特定領域から保護領域を特定する際に、これらの保護時間情報に基づいて、特定するように保護範囲制御部７２を制御する。
【００４７】
保護範囲予測制御部７５は、保護範囲制御部７２が保護領域を特定する場合に、撮影範囲内の保護領域の動きを予測し、あらかじめマスク領域を準備するために設けられた保護範囲予測制御手段である。保護範囲予測制御部７５は、たとえば、検出部８３から通知された動的に変化する特定情報に基づいて、被写体３０の動きを予測し、あらかじめマスク領域を準備することができる。また、保護範囲予測制御部７５は、撮影された画像データＶ１０、Ｖ２０を検出部８３から受け取り、画像データＶ１０、Ｖ２０の前後のフレームの変化から、保護領域の動きを予測し、あらかじめマスク領域を準備することもできる。さらに、保護範囲予測制御部７５は、カメラ制御部１５から通知されるカメラ装置１０の位置情報、または、向き情報から、保護領域の動きを予測し、あらかじめマスク領域を準備することもできる。なお、カメラ装置１０の位置情報と向き情報とは、ジャイロ部２６から出力される出力情報である。保護範囲予測制御部７５が準備した保護領域に関するマスク領域情報に基づいて、保護範囲制御部７２が保護範囲を特定することもできる。
【００４８】
保護処理部１８は、保護制御部１７によって特定された保護領域を保護加工する。保護処理部１８は、保護領域に対してマスキング、モザイク、他の画像との置き換え、あるいは、消去など、保護領域を隠蔽するような加工、あるいは、消去処理（以下、このような処理を総称して「マスク処理」と呼ぶ）を行う。保護処理部１８は、画像データＶ１０、Ｖ２０、Ｖ３０における保護領域に対応した画像データに対してマスク処理を行い、マスク処理後の画像データＶ３１を生成する。保護処理部１８は、画像データＶ３１を、処理部１９と出力Ｉ／Ｆ部２１とへ供給する。保護領域の保護加工は、動的に別の画像に置き換えるマスク処理が行われてもよい。
【００４９】
このようにして、保護処理部１８は、画像音声形成部１６から供給された画像データＶ１０、Ｖ２０、Ｖ３０に対して、保護範囲制御部７２で特定された保護領域をモザイク画像などによって保護加工する。保護処理部１８は、保護領域に加工処理が施された画像を画像データＶ３１として出力する。保護制御部１７と保護処理部１８とは、検出部８３で検出された特定領域から、通信部１４で取得したタグ情報に含まれる被写体情報に基づいて保護領域を特定し、保護領域を保護加工する画像データ加工手段として機能する。
【００５０】
処理部１９は、画像データＶ３１に対して圧縮符号化処理を行い、圧縮符号化処理により生成した画像ストリームを画像情報として、Ｒ／Ｗ制御部２０を介して、記録メディア２２に記録する記録手段として機能する。処理部１９は、記録メディア２２に記録された画像ストリームを、Ｒ／Ｗ制御部２０を介して読み出し、読み出した画像ストリームに対して伸張復号化処理を行う。伸張復号化処理によって復元された画像データが出力Ｉ／Ｆ部２１に供給される。すなわち、Ｒ／Ｗ制御部２０は、記録メディア２２に対する書き込み、読み出しの制御を行う。処理部１９は、マイク２５が出力する音声データＡ３を、画像音声形成部１６などを介して受け取る。音声データＡ３は、音声情報として、画像データＶ３１と同様に、記録メディア２２への記録、出力Ｉ／Ｆ部２１への出力が行われる。さらに、処理部１９は、画像情報と音声情報とに関連する画像付属情報を、記録メディア２２に対して記録／再生することができる。画像付属情報は、画像と音声とに関する、たとえば、保護対象物情報を含む被写体情報である。また、画像付属情報は、撮影された画像に対応する撮影条件情報である。これらの被写体情報と撮影条件情報とが、画像情報と音声情報とは別の画像付属情報として扱われ、記録メディア２２に対する記録／再生が行われる。なお、記録メディア２２に記録されている画像付属情報は、関連する画像情報が再生されるときには、Ｒ／Ｗ制御部２０と処理部１９とを介して、保護制御部１７へ通知される。また、記録メディア２２は、ＳＤカード、または、Ｂｌｕ−ｒａｙ  Ｄｉｓｃ（以下、ＢＤと呼ぶ）、ＤＶＤ、ＨＤＤ、ＵＳＢメモリ、内蔵フラッシュメモリなどによって構成され、カメラ装置１０に設けられた記録メディア挿入部（図示せず）に装着されている。
【００５１】
出力Ｉ／Ｆ部２１は、提示部２３へ画像データＶ３１と音声データＡ３とを出力するためのインターフェースである。提示部２３は、液晶ディスプレイ、または、有機ＥＬディスプレイ、ヘッドマウントディスプレイ、プラズマディスプレイなどの画像を表示するモニタ２８と、音声を出力するイヤホーン、または、スピーカなどの音声出力器（図示せず）などを含み、カメラ１１、１２によって撮影される画像の表示、または、マイク２５によって取得された音声の再生、記録メディア２２に記録されている画像と音声の再生などを行う。また、保護領域が保護加工された画像データＶ３１を再生表示することもできる。
【００５２】
ユーザＩ／Ｆ部２４は、ボタンスイッチ（図示せず）、または、液晶表示部に付属するタッチパネルに表示されたメニュー表示（図示せず）などの入力部を有している。ユーザがユーザＩ／Ｆ部２４から、カメラ装置１０の撮影、または、音声記録のオン／オフを制御する。また、カメラ１１、１２の切り換えと、ズームインとズームアウトなどの撮影範囲の変更と、オートフォーカス機能と、もユーザＩ／Ｆ部２４から入力される。処理部１９の制御も、ユーザによって、ユーザＩ／Ｆ部２４から入力される。また、ユーザＩ／Ｆ部２４は、ユーザが保護領域の範囲を指定するユーザ指定手段としても機能する。保護領域の範囲指定以外に、加工出力範囲指定情報、または、画像データの精度レベル指定情報、撮影者スケジュール情報なども、ユーザＩ／Ｆ部２４から設定される。設定された各項目は、保護制御部１７へ通知される。
【００５３】
以上説明したように、本発明のカメラ装置１０は、少なくとも、撮影手段と通信手段と特定領域検出手段と画像データ加工手段とを有している。撮影手段は、撮影範囲４０内の空間を撮影し、画像データを取得する。通信手段は、特定の被写体のサイズと形状と向きと位置とを含む被写体情報を記憶したＩＣタグ３４と通信を行い、被写体情報を取得する。特定領域検出手段は、撮影手段で取得された画像データＶ１０、Ｖ２０に含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する。画像データ加工手段は、被写体３０、３１が著作権保護、または、プライバシー保護するべき対象である場合には、通信手段で取得した被写体情報に基づいて、特定領域検出手段で検出された特定領域４４から保護領域４６を特定し、保護領域４６を保護加工する。このため、保護対象の被写体３０、３１が動いたり、変化したりしても、被写体３０、３１を追尾し、保護対象の被写体３０、３１を含む画像に対して、被写体３０、３１の画像領域を保護加工し、隠蔽することが可能となるカメラ装置が提供される。
【００５４】
次に、以上のように構成されたカメラ装置１０が撮影する被写体３０、３１が著作権、または、肖像権、その他のプライバシー保護の保護対象であるとき、保護対象の被写体３０、３１に対応した画像領域のみが保護加工された画像データＶ３１を生成する撮影方法について、以下、説明する。
【００５５】
図３は、カメラ１１、１２が撮影する撮影範囲内で、保護対象となる被写体３０、３１における特定領域４４が検出され、検出された特定領域４４を加工して画像データＶ３１を生成する手順について示すフローチャートである。
【００５６】
図４Ａから図４Ｉは、ＩＣタグ３４が取り付けられた著作権、肖像権、あるいは、プライバシー保護の保護対象の被写体３０に対して保護加工を行う場合の一例を示す説明図である。図４Ａから図４Ｇは、ＩＣタグ３４が取り付けられた被写体３０である特定の人物の顔を保護対象とする一例を示している。特定の人物に取り付けられたＩＣタグ３４には、著作権などの保護が「有」とする保護の有無情報とともに、特定の人物の顔のサイズと形状と向きと位置の情報とが保護対象物情報を含むタグ情報として記憶されている。図４Ａは、カメラ装置１０の撮影範囲４０内において、保護加工が行なわれていない場合の画像を示している。図４Ｂは、図４Ａと等しい撮影範囲４０内において、検出部８３によって動的に検出された、保護対象の候補となる特定領域４４を示す画像を示している。図４Ｃは、図４Ａと等しい撮影範囲４０内において、保護加工が行われる場合の画像の一例を示している。図４Ｄは、図４Ｃと等しい撮影範囲４０内において、図４Ｃの撮影時刻から時間が経過したあとの画像を示している。図４Ｅは、図４Ｄと等しい撮影範囲４０内において、図４Ｄの撮影時刻から時間がさらに経過したあとの画像を示している。図４Ｆは、図４Ｅと等しい撮影範囲４０内において、図４Ｅの撮影時刻から時間がさらに経過したあとの画像を示している。図４Ｇは、図４Ｄと等しい撮影範囲４０内において、図４Ｄとは異なる保護精度に基づいて、保護領域４６が特定された場合の画像を示している。図４Ｈは、図４Ｇと等しい撮影範囲４０内において、図４Ｇの撮影時刻から時間が経過したあとの画像を示している。図４Ｉは、図４Ｄと等しい撮影範囲４０内において、図４Ｄとは異なる保護精度に基づいて、保護領域４６が特定された場合の画像を示している。図４Ａから図４Ｉに示すように、プライバシー保護の対象である被写体３０と、プライバシー保護の対象ではない被写体４２とが同一の撮影範囲４０内で撮影されている。
【００５７】
図５は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０の２眼視による画像データが合成された画像の一例を示す図である。
【００５８】
図６Ａは、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６である場合の画像を示している。図６Ｂは、図６Ａと等しい撮影範囲４０内において、保護対象の画像３５が保護加工された場合の画像を示している。図６Ｃ、図６Ａと等しい撮影範囲４０内において、保護対象の画像３５が、動的なマスク制御によって保護加工された場合の画像の一例を示している。
【００５９】
図７Ａは、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合の画像を示している。図７Ｂは、図７Ａと等しい撮影範囲４０を撮影するカメラ装置１０を示している。図７Ｃは、図７Ａを撮影した撮影時刻から時間が経過したあとの画像を示している。図７Ｄは、図７Ａを撮影した撮影時刻から時間が経過したあとの画像を示している。
【００６０】
図８Ａは、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合の画像を示している。図８Ｂは、図８Ａと等しい撮影範囲４０内において、保護加工が行われる場合の画像の一例を示している。図８Ｃは、図８Ｂに対して、撮影範囲４０がズームインされた場合の画像の一例を示している。図８Ｄは、図８Ｂに対して、撮影範囲４０がズームアウトされた場合の画像の一例を示している。
【００６１】
以下、図３から図８を参照しながら、カメラ装置１０を用いて、撮影した画像から画像データＶ３１を生成する撮影方法と、保護加工された画像データの具体例について説明する。
【００６２】
図３に示すように、まず、ユーザＩ／Ｆ部２４からカメラ装置１０の撮影開始が入力されると、カメラ装置１０が撮影を開始する（ステップＳ１００）。すなわち、撮影ステップが動作する。次に、通信部１４は、被写体３０、３１から送信される被写体情報を含むタグ情報の受信待ちを行う（ステップＳ１０１）。次に、通信ステップにおいて、保護制御部１７が通信部１４を制御し、通信部１４がＩＣタグ３４と通信を開始するための電波３９を発信する。たとえば、図１に示すように、電波３９の届く範囲にＩＣタグ３４が存在する場合、ＩＣタグ３４は、通信部１４から発信された通信開始の電波３９に応答して、通信部１４に対してタグ情報を送信する。一方、通信部１４からの電波の届く範囲にＩＣタグ３４が存在しない場合には、通信部１４は応答を受信しない。すなわち、保護制御部１７は、通信部１４が受信することができる受信データがあるかどうかを判定する。通信部１４が受信できる受信データがあると判定した場合（Ｙｅｓ）、ステップＳ１０４の処理へ進み、応答がないと判定する場合（Ｎｏ）、通信部１４が受信データを受信するまでステップＳ１０１の処理を繰り返す（ステップＳ１０２）。
【００６３】
ＩＣタグ３４からタグ情報の応答がある場合、通信部１４が受信したタグ情報が保護判定部７１に通知され、保護判定部７１がタグ情報を取得して解析する（ステップＳ１０４）。保護判定部７１は、取得したタグ情報を解析し、まず、タグ情報に含まれるＴｙｐｅ情報の判定を行い、判定結果を保護時間制御部７４へ通知する（ステップＳ１０６）。Ｔｙｐｅ情報がＥＰＧ情報と一致しない場合（Ｎｏ）、第１の保護時間制御ステップ（ステップＳ１０８）へ進み、一致する場合（Ｙｅｓ）、第２の保護時間制御ステップ（ステップＳ１１０）へ進む。
【００６４】
第１の保護時間制御ステップにおいて、ユーザＩ／Ｆ部２４を介してユーザが設定した保護時間情報に基づいて、保護時間制御部７４が保護期間を設定する。すなわち、ユーザＩ／Ｆ部２４を介してユーザが設定した保護時間情報に基づいて、保護領域４６を保護加工するタイミングが保護時間制御部７４から保護範囲制御部７２へ通知される。この後、保護判定ステップ（ステップＳ１１２）の処理へ進む。また、第２の保護時間制御ステップにおいて、通信部１４が取得したＥＰＧ情報に含まれる特定番組の放映時間に関する保護時間情報に基づいて、保護時間制御部７４が保護期間を設定する。すなわち、通信部１４が取得したＥＰＧ情報に含まれる特定番組の放映時間に関する保護時間情報に基づいて、保護領域４６を保護加工するタイミングが保護時間制御部７４から保護範囲制御部７２へ通知される。この後、保護判定ステップ（ステップＳ１１２）の処理へと進む。
【００６５】
次に、保護判定ステップにおいて、保護判定部７１は、取得したタグ情報を解析し、タグ情報に含まれる著作権保護／プライバシー保護の有無情報に関する判定を行う。保護判定部７１は、著作権保護／プライバシー保護の有無情報において、保護が「有」（Ｙｅｓ）と判定した場合、ステップＳ１１４の処理へ進み、保護が「無」（Ｎｏ）と判定した場合、ステップＳ１０１の処理へ進む。ステップＳ１０１の処理へ進む場合、再び、通信部１４が受信データを受信するまでステップＳ１０１の処理が繰り返される。
【００６６】
保護判定ステップにおいて、保護が「有」と判定された場合、保護対象物情報取得ステップにおいて、保護範囲制御部７２は、保護対象物情報の生成を行う（ステップＳ１１４）。すなわち、保護範囲制御部７２は、ＩＣタグ３４から送られたタグ情報から、ＩＣタグ３４が取り付けられている保護対象、すなわち、被写体３０、３１に含まれる保護対象の保護対象サイズ情報と保護対象形状情報と保護対象向き情報と保護対象位置情報などの保護対象物情報を取得する。得られた保護対象物情報は検出部８３へ通知される。なお、このとき、保護範囲制御部７２は、ＩＣタグ３４から送られたタグ情報から、ＩＣタグ３４が取り付けられている撮影対象、すなわち、被写体３０、３１の物体サイズ情報と物体形状情報と物体向き情報などの物体情報を取得することもできる。なお、得られた物体情報が検出部８３へ通知されてもよい。
【００６７】
次に、特定領域検出ステップにおいて、検出部８３が、画像データに含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する（ステップＳ１１６）。このようにＩＣタグ３４から送信されたタグ情報に関する処理が実行されるとともに、カメラ１１、１２によって撮影された、被写体３０、３１を含む撮影範囲内の画像が取り込まれ、画像に対応した、たとえば１フレーム分の画像データＶ１０、Ｖ２０、Ｖ３０がメモリ８１に蓄積される。たとえば、図４Ａに示すように、被写体３０を含む撮影範囲内の画像の１フレーム分の画像データＶ１０がメモリ８１に蓄積される。
【００６８】
特定領域検出ステップにおいて、検出部８３は、保護対象物情報に含まれる保護対象の形状を示す保護対象物形状情報を形状探索部８５に通知する。形状探索部８５は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０、Ｖ３０に対し、画像データに対応した画像内において、保護対象物形状情報が示す形状に該当する部分画像が存在する箇所を探索し、候補情報として検出部８３へ通知する。たとえば、保護対象物情報として、顔の形状が指定されると、形状探索部８５は、画像内における顔画像が存在する箇所を探索する。形状探索部８５は、探索により検出した該当形状の部分画像のサイズと形状と向きと位置との情報を候補情報として検出部８３へ通知する。形状探索部８５は、探索により該当形状の部分画像を複数検出した場合には、それぞれを保護対象の候補とし、それぞれの部分画像（以下、「候補部分画像」と呼ぶ）におけるサイズと形状と向きと位置との情報を候補情報として検出部８３へ通知する。
【００６９】
なお、このとき、距離推定部８２は、形状探索部８５から通知された候補情報に基づき、各候補部分画像におけるカメラ装置１０からの距離を演算により求めてもよい。すなわち、距離推定部８２は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０によって生成された２眼視による画像データＶ３０を参照して、２つの画像上での各候補部分画像の左右の位置ずれ量を求め、これによって各候補部分画像に対応した被写体３０のカメラ装置１０からの距離を推定することができる。たとえば、顔の候補部分画像が３つ検出された場合、カメラ装置１０からそれぞれの顔である被写体３０、４２までの実際の距離を推定する。距離推定部８２は、このようにして求めた各候補部分画像に対応する被写体３０、４２までの距離を距離情報として検出部８３に通知する。
【００７０】
図５は、メモリ８１に蓄積された画像データＶ１０、Ｖ２０の２眼視による画像データが合成された画像の一例を示す図である。図５に示すように、カメラ装置１０から近距離にある顔ほど、画像データＶ１０と画像データＶ２０との画像のずれが大きく合成された画像となる。距離推定部８２は、このような画像データＶ１０、Ｖ２０のずれ幅を利用して、撮影している各顔までの距離を推定し、距離情報を得ることができる。なお、処理部１３とカメラ制御部１５とによって、カメラ装置１０と被写体３０との距離を直接測定することによって、距離情報を得ることもできる。処理部１３とカメラ制御部１５とによって、距離情報を得る場合、距離情報は、検出部８３と保護範囲制御部７２とへ通知される。距離推定部８２によって距離情報を得るか、処理部１３から距離情報を得るかは、ユーザＩ／Ｆ部２４へ入力されるユーザ設定に基づいて適宜決定される。
【００７１】
また、形状探索部８５から通知された候補情報と、距離推定部８２から通知された各候補部分画像に対応した距離情報と、カメラ制御部１５から通知された撮影条件情報と、の一部、または、全部を用いて、検出部８３は、特定領域４４を動的に検出する。検出部８３は、図４Ｂに示すような、特定領域４４に関する特定領域情報を保護範囲制御部７２へ通知する。
【００７２】
次に、保護領域４６の設定に関するユーザ指定の有無を確認する（ステップＳ１１８）。ユーザ指定がある場合（Ｙｅｓ）、ユーザ指定の保護領域４６に関する情報をユーザＩ／Ｆ部２４が、保護制御部１７へ通知する（ステップＳ１２０）。保護制御部１７へ通知する情報は、たとえば、加工出力範囲指定情報、画像データの精度レベル指定情報などである。ユーザ指定がない場合（Ｎｏ）は、保護制御部１７にあらかじめ設定されている所定の指定条件が適用される。
【００７３】
次に、保護精度制御ステップにおいて、保護精度制御部７３から保護範囲制御部７２へ、保護対象の形状とサイズと向きと位置とに関する領域情報に対する、保護領域４６を特定するための保護領域４６の保護精度情報が通知される（ステップＳ１２２）。
【００７４】
次に、保護範囲制御ステップにおいて、保護範囲制御部７２が、検出部８３から通知された特定領域４４に対して、保護領域４６を特定する（ステップＳ１２４）。すなわち、保護範囲制御部７２は、図４Ｂに示すように、検出部８３から通知された特定領域４４内の被写体３０、４２（以下、「候補被写体」と呼ぶ）の実際の形状とサイズと向きと位置とを算出する。保護範囲制御部７２は、特定領域４４内の被写体３０、４２におけるサイズに対し、距離情報における距離と、操作情報におけるズーム率で補正演算を行うことによって、各特定領域４４に含まれる候補被写体の実サイズ算出値を算出する。次に、保護範囲制御部７２は、保護対象物情報における保護対象サイズ情報と、算出した各候補被写体の実サイズ算出値とを比較し、保護対象サイズ情報と一致、または、最も近似した実サイズ算出値の候補被写体を抽出する。すなわち、保護範囲制御部７２は、特定領域４４内の各候補被写体の中から、ＩＣタグ３４を保持した被写体３０の保護対象のサイズと一致、または、最も近似した候補被写体の実サイズ算出値である候補被写体の特定領域４４を抽出して、保護領域４６を特定する。保護範囲制御部７２は、同様に、保護対象物情報における保護対象形状情報と保護対象向き情報と保護対象位置情報とに基づいて、保護領域４６を特定することもできる。保護領域４６を特定する際に、できるだけ多くの情報を利用することによって、精度よく保護領域４６を特定することができる。保護範囲制御部７２は、特定した保護領域４６の情報、すなわち、保護領域４６の画像上のサイズと形状と位置と向きとに関する情報を保護領域情報として保護処理部１８に通知する。
【００７５】
保護範囲制御ステップにおいて、保護範囲予測制御部７５によって、保護範囲予測制御ステップが実行されてもよい。保護範囲予測制御ステップは、保護範囲制御部７２が保護領域４６を特定する場合に、撮影範囲内の保護領域４６の動きを予測し、あらかじめマスク領域を準備するステップである。保護範囲予測制御ステップにおいて、準備されたマスク領域情報に基づいて、保護範囲制御部７２が保護範囲を特定することもできる。
【００７６】
次に、保護加工ステップにおいて、保護処理部１８は、画像音声形成部１６から供給される画像データＶ１０、Ｖ２０、Ｖ３０に対して、保護範囲制御部７２から通知された保護領域情報に基づいて、画像上のサイズと形状と位置とに対応した画像データＶ１０、Ｖ２０、Ｖ３０上の保護領域４６に、保護加工する（ステップＳ１２６）。保護加工は、たとえば、モザイク画像を用いて隠蔽するようなマスク処理が行われる。また、保護領域４６が保護加工された画像データＶ３１が生成され、処理部１９、または、出力Ｉ／Ｆ部２１へ送られる。
【００７７】
以上、ステップＳ１０８からステップＳ１２６までの処理が実行されることによって、ＩＣタグ３４が取り付けられた被写体３０、３１を含む画像の撮影範囲４０内で、被写体３０、３１の著作権、肖像権、あるいは、プライバシー保護の保護対象となる領域が保護領域４６として保護加工され、隠蔽される。なお、保護範囲制御ステップと保護加工ステップとによって、画像データ加工ステップが構成される。
【００７８】
次に、再生ステップにおいて、カメラ１１、１２によって撮影された画像データＶ１０、Ｖ２０、Ｖ３０に対して、画像データ加工手段によって保護加工された画像が重畳された画像データＶ３１が出力Ｉ／Ｆ部２１へ送られる。また、マイク２５によって集音された音声データＡ３が出力Ｉ／Ｆ部２１へ送られる。出力Ｉ／Ｆ部２１へ送られた、画像データＶ３１と音声データＡ３とが、モニタ２８などの提示部２３によって再生される（ステップＳ１２８）。
【００７９】
次に、記録ステップにおいて、再生ステップで再生された画像データＶ３１と音声データＡ３とが、同様に処理部１９へ送られる。処理部１９へ送られたデータは、Ｒ／Ｗ制御部２０によって制御されて、記録メディア２２に記録される（ステップＳ１２９）。このとき、画像データＶ３１は画像情報として、記録メディア２２に記録される。また、マイク２５によって集音された音声データＡ３は音声情報として記録メディア２２に記録される。なお、画像情報と音声情報とは、画像音声情報として一括して記録されてもよい。さらに、撮影範囲４０内に撮影された保護対象である被写体３０、３１に関する保護対象物情報を含む被写体情報が、保護範囲制御部７２から処理部１９へ送られる。処理部１９へ送られた被写体情報は、Ｒ／Ｗ制御部２０によって制御されて、画像情報と音声情報とは異なる画像付属情報として、記録メディア２２に記録される。同時に、カメラ装置１０が撮影を行った際の、操作情報、距離情報などの撮影条件情報も、同様に、画像付属情報として、記録メディア２２に記録される。
【００８０】
次に、保護制御部１７は、ユーザＩ／Ｆ部２４から撮影を終了する指示情報が通知されているかどうかを判定し、撮影終了の指示情報が通知されている場合（Ｙｅｓ）は、撮影を終了する（ステップＳ１３０）。撮影終了の指示情報が通知されていない場合（Ｎｏ）には、再び、ステップＳ１０２の処理へ進み、上述したような処理が繰り返し実行される。
【００８１】
なお、たとえば、図４Ａに示すように、撮影範囲４０内において複数の顔が存在する場合、たとえば顔認識技術などで利用される顔パターン抽出処理では、撮影範囲４０内の全ての顔が抽出される。このため、保護対象となる特定の顔、すなわち、図４Ａに示す被写体３０のみを抽出することは困難であり、保護対象ではない被写体４２の顔も抽出される。
【００８２】
これに対し、本実施の形態のカメラ装置１０は、まず、ＩＣタグ３４から送られるタグ情報に含まれている、被写体３０の保護対象である顔に関する保護対象物情報を受け取る。さらに、検出部８３が、図４Ｂで示すように、撮影範囲４０内の画像データから、画像内の保護対象物情報に類似する画像が存在する箇所を動的に検出し、特定領域４４として保護範囲制御部７２へ通知する。たとえば、図４Ａに示すように、撮影範囲４０内には、３つの顔が存在する。このため、検出部８３は、図４Ｂで示すように、撮影範囲４０内の３つの顔画像を特定領域４４として検出し保護範囲制御部７２へ通知する。さらに、保護範囲制御部７２は、通知された３つの特定領域４４から、各特定領域４４の候補部分画像のサイズ情報と形状情報と位置情報と向き情報とを算出し、保護対象物情報と撮影条件情報とを考慮して、保護領域４６を特定する。
【００８３】
たとえば、フレームごとに保護対象となる特定領域４４のサイズと形状と向きと位置とが算出され、保護領域４６が特定される。したがって、たとえば、保護領域４６のサイズがカメラ１１、１２のズーム率とともに距離情報によって補正される。このため、図４Ｄに示すように、たとえば、図４Ｃに示す時刻から、時間が経過するにしたがい、保護対象の被写体３０が、カメラ装置１０に近づき、保護対象の顔の面積が大きくなった場合であっても、被写体３０の動きに追尾して、保護領域４６が変更され、保護されるべき保護対象が確実に保護される。
【００８４】
また、図４Ｅに示すように、保護対象である被写体３０が、カメラ装置１０に対して反転し、保護対象である顔部分が撮影範囲４０には存在しなくなった場合、保護範囲制御部７２は、撮影範囲４０内には保護領域４６が存在しないとして、保護領域４６を特定する。このように、保護するべき対象の向きが反転して、保護するべき対象が、撮影範囲４０内に存在しないと判定するときに、特に、保護範囲制御部７２は、被写体情報に含まれる保護対象物向き情報を考慮することによって、的確に保護領域４６を特定する。この結果、撮影範囲４０内に保護加工される領域は存在しない状態となり、無用な保護加工が行われない。
【００８５】
また、図４Ｆに示すように、保護対象ではない被写体４２が、保護対象である被写体３０とカメラ装置１０との間に移動した場合、被写体３０は、被写体４２の影に隠れて撮影範囲４０内に撮影されない。このように、撮影範囲内に複数の被写体３０、４２が一部重なって同時に存在する場合、保護範囲制御部７２は、特に、被写体情報に含まれる保護対象物位置情報に基づいて、複数の被写体３０、４２の重なり部分を検知して、保護領域４６を特定する。このことによって、撮影範囲４０内の保護が必要な領域のみが保護領域４６として特定される。この結果、撮影範囲４０内の保護が必要な領域のみが動的に保護加工される。
【００８６】
また、図４Ｇに示すように、保護対象である被写体３０の顔部分のみが、保護対象の境界領域とほぼ等しいサイズと形状との領域で、保護加工されてもよい。すなわち、保護領域４６の精度レベルが「保護対象の射影」として、ユーザが設定する場合、保護精度制御部７３は、保護対象である被写体３０の向き情報に応じて、被写体３０における保護が必要な領域の撮影面に対する射影領域を特定するように保護範囲制御部７２を制御する。このことによって、図４Ｇに示すように、保護対象である顔部分のみが保護加工される。
【００８７】
また、図４Ｈに示すように、保護対象である被写体３０が、カメラ装置１０に対して横向きになった場合、保護対象である顔部分が撮影範囲４０のサイズと形状とが変化する。この場合、保護範囲制御部７２は、被写体３０の向きに応じて、撮影範囲４０内の保護領域４６を特定する。このように、保護するべき対象の向きが変化して、保護するべき対象の領域が、撮影範囲４０内で変化する場合、特に、保護範囲制御部７２は、被写体情報に含まれる保護対象物向き情報を考慮することによって、的確に保護領域４６を特定する。この結果、図４Ｈに示すように、保護対象である顔部分の横顔部分のみが保護加工される。
【００８８】
また、図４Ｉに示すように、保護対象である被写体３０を含む撮影範囲４０の全面が、保護領域４６として保護加工されてもよい。すなわち、保護領域４６の精度レベルが「撮影範囲全面」として、ユーザが設定する場合、保護精度制御部７３は、保護対象である被写体３０を含む撮影範囲４０全面を保護領域４６として特定するように保護範囲制御部７２を制御する。このことによって、図４Ｉに示すように、保護対象である被写体３０の顔部分を含む撮影範囲４０の全面が保護加工される。
【００８９】
また、図６Ａに示すように、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６である場合、保護対象である画像３５が保護領域４６として特定され、図６Ｂに示すように、保護加工される。なお、図６Ａから図６Ｃは、図３のステップＳ１０６で説明したＴｙｐｅ判定において、Ｔｙｐｅ情報がＥＰＧと一致しない場合を想定している。このとき、ユーザは、ユーザＩ／Ｆ部２４において、保護対象となる被写体３１の保護加工する時間を設定する。保護時間制御部７４は、ユーザＩ／Ｆ部２４において、ユーザ設定された保護加工時間に関する保護時間情報に基づいて、保護範囲制御部７２を制御する。したがって、ユーザ設定された保護加工する時間を経過した後は、図６Ａのように、画像３５の保護がオフされる。
【００９０】
ユーザが、ユーザＩ／Ｆ部２４において、保護対象となる被写体３１の保護加工する時間を設定する際に、時間に応じて動的なマスク制御と静的なマスク制御とを切り換えることもできる。この場合、静的なマスク制御が設定された時間の間は、図６Ｂに示すような、モザイク処理などの静的なマスク制御に基づいた保護加工が行われる。また、動的なマスク制御が設定された時間の間は、図６Ｃに示すような、動画像に代表される動的なマスク制御に基づく保護加工が行われる。すなわち、保護時間制御部７４は、ユーザ設定にしたがって、保護対象となる被写体３１の保護領域４６を、時間に応じて動的なマスク制御と静的なマスク制御のいずれかに切り換えて保護加工するように、保護範囲制御部７２を制御する。
【００９１】
また、図６Ａに示すような、撮影範囲４０内で撮影される被写体３１が、電子透かしが埋め込まれた画像３５を含んでいる場合、抽出部８４が、画像内の電子透かしが埋め込まれた画像表示器３６、または、表示部などの領域を判別することもできる。このとき、抽出部８４が判別した、画像上の領域の位置とサイズと形状とが透かし領域情報として検出部８３へ通知される。検出部８３は、透かし領域情報に基づいて、特定領域４４を動的に検出し、保護範囲制御部７２へ通知する。保護範囲制御部７２は、通知された特定領域４４から保護領域４６を特定し、保護処理部１８へ通知する。このことによって、保護処理部１８は、図６Ｂで示すように、画像上での電子透かしが検出された領域に対して保護加工することもできる。
【００９２】
このように、カメラ装置１０は、テレビジョン受信機などの画像表示器３６に表示される著作権、肖像権、あるいは、プライバシー保護の保護対象となるような画像が表示され、ユーザがそのような保護対象であることを意識せずに撮影したとしても、保護対象となる画像を保護加工し、隠蔽することができる。また、保護対象となるような画像３５が表示された画像表示器３６のみが保護加工されるため、撮影を意図した領域が侵食されない。
【００９３】
また、図７Ａに示すように、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合、保護対象である画像３５と保護対象である芸術品３７とが保護領域４６として特定され、図７Ｂに示すように、保護加工される。なお、図７Ｂにおいて、カメラ装置１０は、提示部２３であるモニタ２８を有し、モニタ２８上で保護加工された画像データＶ３１を視認することができる。
【００９４】
図７Ｃは、固定された被写体３１を撮影するユーザの動きに伴ってカメラ装置１０が動作した時の、保護加工後の画像を示している。カメラ装置１０の動きは、ジャイロ部２６によって検知され、ジャイロ部２６からカメラ装置１０の位置情報と向き情報とが検出部８３と保護範囲制御部７２へと通知される。保護範囲制御部７２は、カメラ装置１０の動作に基づいて、保護領域４６を変更する。なお、保護範囲予測制御部７５は、ジャイロ部２６から保護範囲制御部７２へ通知されるカメラ装置１０の位置情報と向き情報とに基づいて、保護領域４６が相対的に移動する形状とサイズと向きと位置とを予測し、マスク領域を準備することもできる。準備されたマスク領域が保護領域４６として特定され、保護処理部１８に通知されてもよい。このことによって、撮影範囲４０内の保護対象の動きを予測することができる。このため、保護領域４６を動的に特定し、高精度な保護領域４６の保護加工が実現される。
【００９５】
図７Ｄは、図７Ｃと同様に、固定された被写体３１を撮影するユーザの動きに伴ってカメラ装置１０が動作した時の、保護加工後の画像を示している。図７Ｄは、ユーザが画像表示器３６の背面に移動した場合の、撮影範囲４０の画像を示している。さらに、芸術品３７とカメラ装置１０との間に、画像表示器３６が存在するため、保護対象である芸術品３７の一部が画像表示器３６に重なっている。ユーザが画像表示器３６の背面に移動することによって、画像表示器３６に表示されている保護の対象である画像３５が、撮影範囲４０内には存在しない状態となっている。このように、撮影範囲４０に保護対象である画像３５が存在しなくなった場合、保護範囲制御部７２は、画像３５に対応する保護領域４６が撮影範囲４０内には存在しないとして、保護領域４６を特定する。このように、保護するべき対象の向きが変化して、保護するべき対象が、撮影範囲４０内に存在しないと判定するときに、特に、保護範囲制御部７２は、被写体情報に含まれる保護対象物向き情報を考慮することによって、的確に保護領域４６を特定する。この結果、撮影範囲４０内に保護加工される領域は存在しない状態となり、無用な保護加工が行われない。さらに、撮影範囲４０内に複数の被写体３１が一部重なって同時に存在する場合、保護範囲制御部７２は、特に、被写体情報に含まれる保護対象物位置情報に基づいて、複数の被写体３１の重なり部分を検知して、保護領域４６を特定する。このことによって、芸術品３７を保護するための保護領域４６が動的に変更される。この結果、撮影範囲４０内の保護が必要な領域のみが動的に保護加工される。
【００９６】
また、図８Ａに示すように、撮影範囲４０内で撮影される被写体３１が、著作権保護の保護対象である画像３５が表示された画像表示器３６と著作権保護の対象である芸術品３７とである場合、同様に、保護対象である画像３５と保護対象である芸術品３７とが保護領域４６として特定され、図８Ｂに示すように、保護加工される。さらに、カメラ装置１０がユーザによってズームイン操作された場合、図８Ｃに示すように、撮影範囲４０内で保護対象のサイズが変化する。カメラ装置１０が、ズームインまたはズームアウトなどの、撮影範囲４０の拡大率が変化されると、カメラ制御部１５から保護範囲制御部７２へ操作情報として、拡大率の変化の情報が通知される。保護範囲制御部７２は、通知された操作情報に基づいて、保護領域４６を変更し、変更した後の保護領域情報を保護処理部１８へ通知する。このように、カメラ装置１０がズームイン操作された場合、図８Ｃに示すように、撮影範囲４０内の保護対象の動きに追従して保護領域４６を変更する。同様に、カメラ装置１０がズームアウト操作された場合、図８Ｄに示すように、撮影範囲４０内の保護対象の動きに追従して保護領域４６を変更する。
【００９７】
なお、図８Ａから図８Ｄに示すように、撮影範囲４０内で撮影される画像表示器３６は、保護すべきコンテンツを再生表示している。さらに、画像表示器３６はＥＰＧ情報を保持し、画像表示器３６に取り付けられているＩＣタグ３４に、画像表示器３６が表示するコンテンツに関するＥＰＧ情報が記憶されている。すなわち、図３のステップＳ１０６で説明したＴｙｐｅ判定において、撮影範囲４０内で撮影される画像表示器３６に取り付けられているＩＣタグ３４の記憶する保護対象物情報に含まれるＴｙｐｅ情報がＥＰＧと一致する。この場合、保護時間制御部７４は、通信部１４を介してＥＰＧ情報を取得し、取得したＥＰＧ情報にしたがって、画像表示器３６が再生する保護対象であるコンテンツを保護加工する時間を、ＥＰＧ情報に基づいて、特定番組の放映時間に想定する時間に限って、保護領域４６を特定するように保護範囲制御部７２を制御する。このため、保護処理部１８は、保護対象である特定番組のみを保護加工することができる。この結果、保護対象に対して、保護が必要な時にのみ保護加工することができる。
【００９８】
以上説明したように、本発明のカメラ装置１０に適用される撮影方法は、撮影対象に含まれる著作権保護、または、プライバシー保護すべき被写体３０、３１を保護加工して撮影する撮影方法であって、少なくとも、撮影ステップと通信ステップと特定領域検出ステップと画像データ加工ステップとを有している。撮影ステップは、撮影範囲４０内の空間を撮影し、画像データを取得する。通信ステップは、被写体に付属して設けられ、特定の被写体のサイズと形状と向きと位置とを含む被写体情報を記憶したＩＣタグ３４と通信を行い、被写体情報を取得する。特定領域検出ステップは、撮影ステップで取得された画像データＶ１０、Ｖ２０に含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する。画像データ加工ステップは、被写体３０、３１が著作権保護、または、プライバシー保護するべき対象である場合には、通信ステップで取得した被写体情報に基づいて、特定領域検出ステップで検出された特定領域４４から保護領域４６を特定し、保護領域４６を保護加工する。このように、撮影ステップから画像データ保護加工ステップまでの処理が実行されることによって、ＩＣタグ３４が取り付けられた被写体３０、３１を含む撮影範囲４０の画像の中で、被写体３０、３１の著作権、肖像権、あるいは、プライバシー保護の保護対象となる保護領域４６を動的に特定し、保護加工することができる。特に、たとえば、画像のフレームごとに保護対象となる保護領域４６の位置、および、サイズを算出して保護加工を行うため、動画像における保護対象となり得る特定領域４４を追尾して保護加工する。また、保護加工するサイズが、カメラ装置１０の操作情報、カメラ装置１０と被写体３０、３１との間の距離情報などによって精度よく補正されている。このため、保護対象となる被写体３０、３１が動いたり、カメラ装置１０を動かしたり、あるいはズーム率を変えたために画像上の被写体のサイズが変化しても、その変化に応じたサイズで被写体を保護加工することができる。
【００９９】
また、本実施の形態では、保護加工された保護領域４６を含む画像データＶ３１が記録メディア２２に記録され、提示部２３によって、表示される構成例を挙げて説明した。しかしながら、たとえば、提示部２３では、保護加工されていない画像データＶ１０、Ｖ２０、Ｖ３０が表示される構成であってもよい。すなわち、記録メディア２２へ記録される画像データと、記録メディア２２から読み取られ、提示部２３へ表示される画像データとが、保護加工された保護領域４６を含む画像データＶ３１と保護加工されていない画像データＶ１０、Ｖ２０、Ｖ３０とに適宜変更されて供給される構成でもよい。
【０１００】
また、本実施の形態では、著作権保護、または、プライバシー保護の保護対象となる被写体３０、３１に対応した特定領域４４を検出し、特定領域４４から保護領域４６を特定して、保護加工する構成について説明した。しかしながら、たとえば、ユーザがあらかじめ画像上で削除の対象としたい被写体３０、３１にＩＣタグ３４を取り付けた上で、撮影した画像において、削除の対象となる被写体３０、３１に対応した保護領域４６を別の画像と置き換える編集機能を有する構成でもよい。
【０１０１】
また、本発明の実施の形態では、図３に示すように、カメラ装置１０がカメラ１１、１２を用いて、保護するべき対象を含んだ被写体３０、３１を撮影するのと同時に、保護するべき保護領域４６を特定し、保護加工する構成について説明した。しかしながら、特定領域４４の動的な検出と、特定領域４４から保護領域４６を特定し、特定した保護領域４６を保護加工することとは、必ずしも撮影と同時に行うことに限定されない。たとえば、保護するべき対象を含んだ被写体３０、３１を撮影する場合に、撮影した画像データＶ１０、Ｖ２０、Ｖ３０と音声データＡ３とが、処理部１９を介して記録メディア２２に画像音声情報として記録される。画像音声情報を記録するときに、撮影対象である被写体３０、３１に関する保護対象物情報を含んだ被写体情報が画像付属情報として記録メディア２２に記録される。同時に、カメラ装置１０が画像を撮影したときの、操作情報と距離情報などに関する撮影条件情報が画像付属情報として記録メディア２２に記録される。さらに、画像音声情報を再生する際に、特定領域４４の動的な検出と、特定領域４４から保護領域４６を特定し、特定した保護領域４６が保護加工されてもよい。図９は、このように画像データを再生する際に、保護するべき対象の画像を保護加工する保護再生方法を示したフローチャートである。なお、図９に示す保護再生方法を示すフローチャートは、図３に示した撮影方法のフローチャートに対して、同様のステップは同様のステップ名を付与し、詳細な説明は省略する。また、図３に示す撮影方法の各ステップでは、カメラ１１、１２によって撮影された画像データＶ１０、Ｖ２０、Ｖ３０に対して、特定領域４４の検出と、保護領域４６の特定と保護加工と、が行われている。図９に示す保護再生方法においては、記録メディア２２に記録されている画像データに対して、特定領域４４の検出と、保護領域４６の特定と保護加工と、が行われる。
【０１０２】
図９に示すように、まず、ユーザＩ／Ｆ部２４からカメラ装置１０の保護再生開始が入力されると、ユーザが指定した画像が選択され、カメラ装置１０が再生を開始する（ステップＳ２００）。すなわち、再生ステップが開始される。再生ステップが開始されると、画像付属情報取得ステップにおいて、処理部１９が記録メディア２２から、画像データと音声データとを含む画像音声情報と、画像音声情報に付属する画像付属情報と、を取得する（ステップＳ２０２）。このとき、再生する画像に、保護するべき対象を含んだ被写体３０、３１が撮影されている場合、保護するべき対象に関する被写体情報が、画像音声情報に付属する画像付属情報として、記録メディア２２に記録されている。したがって、画像音声情報に付属する画像付属情報が、記録メディア２２に記録されていない場合、再生する画像は、保護するべき対象が撮影された画像ではないと判断される。そこで、処理部１９が取得した画像音声情報に付属する画像付属情報が、記録メディア２２に記録されているかが判断される（ステップＳ２０４）。画像付属情報が取得されない場合（Ｎｏ）は、再びステップＳ２０２へ戻る。また、画像付属情報が取得された場合（Ｙｅｓ）は、ステップＳ２０６へと進む。
【０１０３】
処理部１９によって取得された画像付属情報は、保護判定部７１へ通知され、解析される。次に、保護判定ステップにおいて、保護判定部７１は、取得した画像付属情報を解析し、画像付属情報に含まれる著作権保護／プライバシー保護の有無情報に関する判定を行う（ステップＳ２０６）。保護判定部７１は、著作権保護／プライバシー保護の有無情報において、保護が「有」（Ｙｅｓ）と判定した場合、ステップＳ１１４の処理へ進み、保護が「無」（Ｎｏ）と判定した場合、ステップＳ２０２の処理へ進む。ステップＳ２０２の処理へ進む場合、再び、処理部１９が、画像音声情報と画像付属情報とを取得する。
【０１０４】
保護判定ステップにおいて、画像付属情報に含まれている被写体情報が、保護判定部７１によって解析された結果、保護が「有」と判定された場合、図３に示すと同様に、保護対象物情報取得ステップ以下の各ステップが実行される。また、保護範囲制御ステップにおいて、保護範囲制御部７２は、画像付属情報に含まれている被写体情報と撮影条件情報とに基づいて、保護範囲を特定する。
【０１０５】
なお、保護対象物情報取得ステップ以下の各ステップが実行された後、保護制御部１７は、ユーザＩ／Ｆ部２４から保護再生を終了する指示情報が通知されているかどうかを判定し、再生終了の指示情報が通知されている場合（Ｙｅｓ）は、再生を終了する（ステップＳ２３０）。再生終了の指示情報が通知されていない場合（Ｎｏ）は、再び、ステップＳ２０２の処理へ進み、上述したような処理を繰り返し実行する。
【０１０６】
以上のように、本発明のカメラ装置１０に適用される保護再生方法は、撮影対象に含まれる著作権保護、または、プライバシー保護すべき被写体３０、３１を保護加工して再生する保護再生方法であって、少なくとも、再生ステップと画像付属情報取得ステップと特定領域検出ステップと画像データ加工ステップとを有している。再生ステップは、撮影範囲４０内の空間を撮影した画像データを再生する。画像付属情報取得ステップは、画像データに付属して設けられた、特定の被写体のサイズと形状と向きと位置とを含む被写体情報を取得する。特定領域検出ステップは、再生ステップで取得された画像データに含まれる特定の被写体３０、３１に対応した特定領域４４を動的に検出する。画像データ加工ステップは、被写体３０、３１が著作権保護、または、プライバシー保護するべき対象である場合には、画像付属情報取得ステップで取得した被写体情報に基づいて、特定領域検出ステップで検出された特定領域４４から保護領域４６を特定し、保護領域４６を保護加工する。このように、再生ステップから画像データ保護加工ステップまでの処理が実行されることによって、保護するべき対象を含んだ被写体３０、３１を含む撮影範囲４０の画像の中で、被写体３０、３１の著作権、肖像権、あるいは、プライバシー保護の保護対象となる保護領域４６を動的に特定し、保護加工して、画像を再生することができる。特に、たとえば、画像のフレームごとに保護対象となる保護領域４６の位置、および、サイズを算出して保護加工を行うため、動画像における保護対象となり得る特定領域４４を追尾して保護加工する。また、保護加工するサイズが、カメラ装置１０の操作情報、カメラ装置１０と被写体３０、３１との間の距離情報などによって精度よく補正されている。このため、保護対象となる被写体３０、３１が動いたり、カメラ装置１０を動かしたり、あるいはズーム率を変えたために画像上の被写体のサイズが変化しても、その変化に応じたサイズで被写体を保護加工することができる。
【０１０７】
本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されない。さらに、以下のような構成も本発明に含まれる。
【０１０８】
すなわち、図１に示すような、カメラ装置１０を構成する構成要素の一部は、１個のシステムＬＳＩ（Large Scale Integration：大規模集積回路）に含まれる構成であってもよい。システムＬＳＩは、たとえば、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩである。カメラ装置１０を構成する構成要素の一部が、システムＬＳＩに含まれる構成である場合、少なくとも、画像音声形成部１６と保護制御部１７と保護処理部１８と検出部８３とがシステムＬＳＩによって構成されることによって、高速な処理が実現される。さらに、処理部１３と通信部１４とカメラ制御部１５とメモリ８１とを加えることができる。さらに、処理部１９とＲ／Ｗ制御部２０と出力Ｉ／Ｆ部とを加えることができる。さらにまた、距離推定部８２と抽出部８４と形状探索部８５とを加えることもできる。
【０１０９】
また、本発明のカメラ装置１０を実現するための回路が、回路を構成する構成要素の各部は、個別に１チップ化されていてもよいし、一部、または、全てを含むように１チップ化されてもよい。１チップ化される際には、システムＬＳＩと同様の構成を有することができる。
【０１１０】
また、システムＬＳＩに限ることなく、集積度の違いによって、ＩＣ、ＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されるような構成であってもよい。また、集積回路化の手法は、ＬＳＩに限るものではなく、専用回路、または、汎用プロセッサであってもよい。また、ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）、または、ＬＳＩ内部の回路セルの接続と設定とが再構成可能なリコンフィギュラブル・プロセッサ（Reconfigurable Processor）が利用されてもよい。
【０１１１】
さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応などが可能性としてありえる。
【０１１２】
また、本発明の撮影方法が、コンピュータなどによって動作されるコンピュータプログラムであってもよい。さらに、コンピュータプログラムからなるデジタル信号であってもよい。
【０１１３】
また、本発明は、コンピュータプログラム、または、デジタル信号が読み取り可能な記録媒体、たとえば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ、半導体メモリなどに記録された構成であってもよい。また、これらの記録媒体に記録されたデジタル信号であってもよい。
【０１１４】
また、本発明は、コンピュータプログラム、または、デジタル信号が、電気通信回線、または、無線、有線通信回線、インターネットに代表されるネットワーク、データ放送などを経由して伝送される構成でもよい。
【０１１５】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、上記メモリは、上記コンピュータプログラムを記憶しており、上記マイクロプロセッサは、上記コンピュータプログラムに従って動作するとしてもよい。
【０１１６】
また、コンピュータプログラム、または、デジタル信号が、記録媒体に記録されて移送されることによって、または、コンピュータプログラム、または、デジタル信号がネットワークなどを経由して移送されることによって、独立した他のコンピュータシステムによって実行される構成であってもよい。
【０１１７】
また、上記の実施の形態と変形例とが、それぞれ組み合わせる構成であってもよい。
【産業上の利用可能性】
【０１１８】
本発明のカメラ装置は、著作権、肖像権、その他プライバシー保護などの保護するべき対象である被写体が動いたり変化したりしても、被写体を追尾して、被写体の画像領域を保護加工する。このため、撮影により動画データ、または、静止画データを得るデジタルカメラ、または、監視カメラ、その他の電子機器に搭載される撮影手段として利用される。
【符号の説明】
【０１１９】
１０    カメラ装置
１１    第１カメラ
１２    第２カメラ
１３    オートフォーカス処理部
１４    ネットワーク通信部
１５    カメラ制御部
１６    画像音声形成部
１７    保護制御部
１８    保護処理部
１９    記録再生処理部
２０    Ｒ／Ｗ制御部
２１    出力Ｉ／Ｆ部
２２    記録メディア
２３    画像音声提示部
２４    ユーザＩ／Ｆ部
２５    マイク
２６    ジャイロ部
２８    モニタ
３０，３１，４２    被写体
３４    ＩＣタグ
３５    画像
３６    画像表示器
３７    芸術品
３８    サーバ
３９    電波
４０    撮影範囲
４４    特定領域
４６    保護領域
７１    保護判定部
７２    保護範囲制御部
７３    保護精度制御部
７４    保護時間制御部
７５    保護範囲予測制御部
８１    画像音声メモリ
８２    距離推定部
８３    特定領域検出部
８４    電子透かし抽出部
８５    形状探索部
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮影範囲内の空間を撮影し、画像データを取得する撮影手段と、
特定の被写体のサイズと形状と向きと位置とを含む物体情報を、被写体情報としてネットワークを介して受信する通信手段と、
前記撮影手段で取得された前記画像データに含まれる前記被写体に対応した特定領域を動的に検出する特定領域検出手段と、
前記被写体が保護すべき保護対象を含む場合には、前記通信手段で受信した前記被写体情報は、前記保護対象に関する保護対象サイズと保護対象形状と保護対象向きと保護対象位置を含む保護対象物情報を、前記物体情報と共に含み、前記被写体情報に含まれる前記保護対象物情報に基づいて、前記特定領域検出手段で検出された前記特定領域から保護領域を特定し、前記保護領域のみを保護加工する画像データ加工手段と、を備える
カメラ装置。
【請求項２】
前記保護領域をユーザが指定するユーザ指定手段をさらに備え、
前記画像データ加工手段は、前記被写体情報に含まれる前記保護対象物情報に基づいて、前記特定領域からユーザ指定の保護領域を特定して保護加工する
請求項１に記載のカメラ装置。
【請求項３】
前記画像データ加工手段は、前記保護領域を保護加工する精度を制御する保護精度制御手段を含む
請求項１または請求項２に記載のカメラ装置。
【請求項４】
前記保護精度制御手段は、前記被写体の向きに応じて、前記被写体における保護が必要な領域の撮影面に対する射影領域を保護加工するように制御する
請求項３に記載のカメラ装置。
【請求項５】
前記保護精度制御手段は、ユーザ設定および利用環境の少なくとも一方に従って、保護対象となる被写体周辺のマージン領域を所定の範囲および形状に調整して保護加工するように制御する
請求項３に記載のカメラ装置。
【請求項６】
前記画像データ加工手段は、前記保護領域を保護加工する時間を制御する保護時間制御手段を含む
請求項１または請求項２に記載のカメラ装置。
【請求項７】
前記保護時間制御手段は、ユーザ設定に従って、前記保護領域を保護加工する時間を制限する
請求項６に記載のカメラ装置。
【請求項８】
前記保護時間制御手段は、ユーザ設定に従って、前記保護領域の保護加工を、時間に応じて動的なマスク制御および静的なマスク制御のいずれかに切り換える
請求項６に記載のカメラ装置。
【請求項９】
前記被写体は保護すべきコンテンツを再生表示している画像表示器を含み、
前記画像表示器は、ＥＰＧ情報を保持しており、
前記通信手段は、前記ＥＰＧ情報を取得し、
前記保護時間制御手段は、取得した前記ＥＰＧ情報に従って、前記保護領域を保護加工する時間を、特定番組の放映時間に相当する時間に限定する
請求項６に記載のカメラ装置。
【請求項１０】
前記画像データ加工手段は、前記保護領域を制御する保護範囲制御手段を含む
請求項１または請求項２に記載のカメラ装置。
【請求項１１】
前記保護範囲制御手段は、前記被写体の移動および前記カメラ装置の動作のいずれかに追従して、前記保護領域を変更する
請求項１０に記載のカメラ装置。
【請求項１２】
前記保護範囲制御手段は、ズームインやズームアウトに追従して、前記保護領域を変更する
請求項１０に記載のカメラ装置。
【請求項１３】
著作権保護、または、プライバシー保護された前記被写体の前記被写体情報を、画像情報とは別に画像付属情報として記録する記録手段をさらに含む
請求項１または請求項２に記載のカメラ装置。
【請求項１４】
複数の被写体が一部重なって同時に存在する場合、前記画像データ加工手段は、前記通信手段で取得した前記被写体情報に基づいて、前記複数の被写体の重なり部分を検知して、前記保護領域を動的に変更する
請求項１または請求項２に記載のカメラ装置。
【請求項１５】
前記画像データ加工手段は、前記被写体の前記保護領域を、動的に別画像に置き換える加工をする
請求項１または請求項２に記載のカメラ装置。
【請求項１６】
前記画像データ加工手段は、保護する領域を前記被写体の動きおよび記録再生映像の前後のフレーム情報の少なくともひとつから予測し、予めマスク領域を準備する保護範囲予測制御手段を含み、準備した前記マスク領域を保護加工する
請求項１または請求項２に記載のカメラ装置。
【請求項１７】
ジャイロ・センサをさらに備え、
前記画像データ加工手段は、保護する領域を前記ジャイロ・センサの出力情報から予測して、予めマスク領域を準備する保護範囲予測制御手段を含み、準備した前記マスク領域を保護加工する
請求項１または請求項２に記載のカメラ装置。
【請求項１８】
撮影対象に含まれる保護すべき被写体を保護加工して撮影する撮影方法であって、
撮影範囲内の空間を撮影し、画像データを取得する撮影ステップと、
前記被写体に付属して設けられ、前記被写体のサイズと形状と向きと位置とを含む物体情報を、被写体情報としてネットワークを介して受信する通信ステップと、
取得された前記画像データに含まれる特定の被写体に対応した特定領域を動的に検出する特定領域検出ステップと、
前記被写体が保護すべき保護対象を含む場合には、受信した前記被写体情報は、前記保護対象に関する保護対象サイズと保護対象形状と保護対象向きと保護対象位置を含む保護対象物情報を、前記物体情報と共に含み、前記被写体情報に含まれる前記保護対象物情報に基づいて、検出された前記特定領域から保護領域を特定し、前記保護領域のみを保護加工する画像データ加工ステップと、を備える
撮影方法。
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2009001530.tif 000032
【図２】
2009001530.tif 000033
【図３】
2009001530.tif 000034
【図４Ａ】
2009001530.tif 000035
【図４Ｂ】
2009001530.tif 000036
【図４Ｃ】
2009001530.tif 000037
【図４Ｄ】
2009001530.tif 000038
【図４Ｅ】
2009001530.tif 000039
【図４Ｆ】
2009001530.tif 000040
【図４Ｇ】
2009001530.tif 000041
【図４Ｈ】
2009001530.tif 000042
【図４Ｉ】
2009001530.tif 000043
【図５】
2009001530.tif 000044
【図６Ａ】
2009001530.tif 000045
【図６Ｂ】
2009001530.tif 000046
【図６Ｃ】
2009001530.tif 000047
【図７Ａ】
2009001530.tif 000048
【図７Ｂ】
2009001530.tif 000049
【図７Ｃ】
2009001530.tif 000050
【図７Ｄ】
2009001530.tif 000051
【図８Ａ】
2009001530.tif 000052
【図８Ｂ】
2009001530.tif 000053
【図８Ｃ】
2009001530.tif 000054
【図８Ｄ】
2009001530.tif 000055
【図９】
2009001530.tif 000056
【図１０Ａ】
2009001530.tif 000057
【図１０Ｂ】
2009001530.tif 000058
【国際調査報告】
2009001530.tif 000059
2009001530.tif 000060
2009001530.tif 000061
2009001530.tif 000062