(57)【要約】【課題】画像に関するプライバシー等を保護する。【解決手段】撮像装置は、被写体を撮影することによって元画像を取得し、元画像の顔領域に対して可逆性の加工処理を施すことにより元画像から加工画像を生成する。そして、この加工画像と、顔領域の位置及び大きさ並びに加工処理の内容を特定する復元用情報と、その復元用情報に従って加工画像から元画像を復元してそれを表示することに対する許可／禁止を切替制御するための権限管理情報と、を互いに関連付けて画像ファイルに格納する。ＳＮＳ等を運営するサーバはユーザＰＣから画像ファイルを受け取り、閲覧側ＰＣからの送信要求があった際、ユーザＰＣと閲覧側ＰＣとの関係及び画像ファイル内の権限管理情報から閲覧側ＰＣに元画像を送信するか否かを判断する。【選択図】図７
2009033738.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影することによって元画像を取得する撮像手段と、
前記元画像中の特定領域内の画像に対して可逆型の加工処理を施すことにより、前記元画像から加工画像を生成する加工処理手段と、
前記加工画像と、前記加工画像から前記元画像を復元するために必要な復元処理の内容を特定する復元用情報と、を互いに関連付けて格納した画像ファイルを記録手段に記録する記録制御手段と、を備えた
ことを特徴とする撮像装置。
【請求項２】
前記記録制御手段は、前記復元用情報に従って前記加工画像から前記元画像を復元してそれを視認可能な状態にすることに対する許可／禁止を切替制御するための権限管理情報を、更に、前記加工画像及び前記復元用情報に関連付けて前記画像ファイルに格納する
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記元画像の画像データに基づいて、前記元画像から特定の画像特徴を有する領域を検出する特定領域検出手段を更に備え、
前記加工処理手段は、前記特定領域検出手段によって検出された領域から前記特定領域を設定する
ことを特徴とする請求項１または請求項２に記載の撮像装置。
【請求項４】
外部からの前記特定領域を指定するための操作を受け付ける指定操作受付手段を更に備え、
前記加工処理手段は、前記操作に従って前記特定領域を設定する
ことを特徴とする請求項１または請求項２に記載の撮像装置。
【請求項５】
前記特定領域検出手段によって検出される、前記特定の画像特徴を有する領域は、人物の顔を含む顔領域であり、
前記特定領域検出手段は、自身が検出した顔領域が特定条件を満たすか否かを判断し、
前記加工処理手段は、前記特定条件を満たすと判断された顔領域から前記特定領域を設定する
ことを特徴とする請求項３に記載の撮像装置。
【請求項６】
当該撮像装置に予め設定された登録人物の顔領域、
特定性別の人物の顔領域、
特定人種の人物の顔領域、及び、
特定年齢層の人物の顔領域の内の、
何れか１以上の顔領域が前記特定条件を満たすと判断される
ことを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記撮像手段は、時系列に並ぶ複数の元画像より成る元動画像を取得し、
当該撮像装置は、前記元動画像の画像データに基づいて前記元動画像内で特定被写体を追尾する追尾処理手段を更に備え、
前記加工処理手段は、
前記複数の元画像の何れかの元画像を基準元画像として捉えて、前記基準元画像中の、前記特定被写体を含む特定領域を設定するとともに、
前記追尾処理手段の追尾結果に基づいて、前記基準元画像以外の元画像における特定領域内に前記特定被写体が含まれるように前記基準元画像以外の元画像に対する特定領域を設定し、その後、
各元画像に対して設定した特定領域内の画像に前記加工処理を施すことにより、前記元動画像から、時系列に並ぶ複数の加工画像より成る加工動画像を生成する
ことを特徴とする請求項１または請求項２に記載の撮像装置。
【請求項８】
前記基準元画像に対する前記特定領域は、前記基準元画像の画像データに基づいて又は外部からの操作に基づいて設定される
ことを特徴とする請求項７に記載の撮像装置。
【請求項９】
前記復元用情報は、前記加工画像上における前記特定領域の位置及び大きさを表す情報を含む
ことを特徴とする請求項１〜請求項８の何れかに記載の撮像装置。
【請求項１０】
前記加工処理は、前記特定領域内の画像を加工するためのモザイク処理又はマスク処理を含む
ことを特徴とする請求項１〜請求項９の何れかに記載の撮像装置。
【請求項１１】
前記権限管理情報は、認証コードを含み、
当該撮像装置と他の撮像装置との間で互いに異なる固有コードが各撮像装置に予め与えられており、
当該撮像装置は、
表示手段と、
前記復元用情報に基づいて前記加工画像から前記元画像を復元する復元処理手段と、
前記認証コードと当該撮像装置に対する固有コードとを照合する照合手段と、
前記照合手段による照合結果に基づいて、前記復元処理手段によって復元された前記元画像の前記表示手段での表示を許可するか否かを判別する判別手段と、を備え、
前記判別手段の判別結果に応じて前記復元処理手段及び前記表示手段を制御する
ことを特徴とする請求項２に記載の撮像装置。
【請求項１２】
元画像中の特定領域内の画像に対して可逆型の加工処理を施すことによって得られた加工画像のデータと、
前記加工画像から前記元画像を復元するために必要な復元処理の内容を特定する復元用情報のデータと、を互いに関連付けて格納した
ことを特徴とする画像ファイルのデータ構造。
【請求項１３】
前記復元用情報に従って前記加工画像から前記元画像を復元してそれを視認可能な状態にすることに対する許可／禁止を切替制御するための権限管理情報のデータを、更に、前記加工画像のデータ及び前記復元用情報のデータに関連付けて格納した
ことを特徴とする請求項１２に記載の画像ファイルのデータ構造。
【請求項１４】
請求項２又は請求項１３に記載の画像ファイルを提供元装置から受け取り、前記提供元装置と所定の関係を有し且つ表示手段を備えた端末装置からの送信要求に従って通信網を介して前記画像ファイルに基づく情報を前記端末装置に送信する情報提供装置であって、
前記画像ファイル内の復元用情報に基づいて前記画像ファイル内の加工画像から元画像を復元する復元処理手段を備え、
前記送信要求があった際、前記画像ファイル内の権限管理情報と前記関係に基づいて、前記復元処理手段によって復元された前記元画像の前記端末装置に対する送信を許可するか否かを判別し、その判別結果に応じて前記端末装置への送信内容を制御する
ことを特徴とする情報提供装置。
【請求項１５】
当該情報提供装置は、前記関係を事前に認識しており、
前記権限管理情報と前記関係に応じて、前記端末装置に、第１及び第２の権限を含む複数段階の権限の内の何れかを与え、
前記第１の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復元処理手段による復元された前記元画像を前記端末装置に対して送信する一方、
前記第２の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復元処理手段による復元された前記元画像の前記端末装置に対する送信を禁止する
ことを特徴とする請求項１４に記載の情報提供装置。
【請求項１６】
表示手段を備え、
請求項１４又は請求項１５に記載された情報提供装置から通信網を介して前記画像ファイルに基づく情報を受け取って、受け取った情報に基づく画像を前記表示手段に表示する
ことを特徴とする端末装置。
【請求項１７】
請求項２又は請求項１３に記載の画像ファイルを受け取るファイル入力手段と、表示手段と、を備えた画像表示装置において、
前記画像ファイル内の権限管理情報は、認証コードを含み、
当該画像表示装置は、
前記画像ファイル内の復元用情報に基づいて前記画像ファイル内の加工画像から元画像を復元する復元処理手段と、
前記認証コードと当該画像表示装置に登録されたコードとを照合する照合手段と、
前記照合手段による照合結果に基づいて、前記復元処理手段によって復元された前記元画像の前記表示手段での表示を許可するか否かを判別する判別手段と、を更に備え、
前記判別手段の判別結果に応じて前記復元処理手段及び前記表示手段を制御する
ことを特徴とする画像表示装置。
【請求項１８】
画像ファイルの記録方式であって、
元画像中の特定領域内の画像に対して可逆型の加工処理を施すことによって得られた加工画像のデータと、
前記加工画像から前記元画像を復元するために必要な復元処理の内容を特定する復元用情報のデータと、を互いに関連付けて記録する
ことを特徴とする画像ファイルの記録方式。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルスチルカメラ又はデジタルビデオカメラ等の撮像装置に関する。また本発明は、画像データを格納した画像ファイルのデータ構造に関する。また本発明は、上記の撮像装置又は画像ファイルと関連する、情報提供装置、端末装置、画像表示装置及び画像ファイルの記録方式に関する。
【背景技術】
【０００２】
これまで、個人的に撮影した静止画像や動画像は、撮影者自身とその家族や友人などの限られた人間にのみ閲覧されることが通常であった。しかし、近年のデジタルカメラの普及と、ソーシャルネットワーキングサービス（以下、「ＳＮＳ」と略記する）や所謂ブログ等の情報共有サービスが浸透するにつれて、不特定多数の人間に対して撮影した静止画像や動画像を公開する機会が増えつつある。その一方で、肖像権、著作権又はプライバシー等の保護に関する意識は高まりつつある。
【０００３】
プライバシー等を保護する方法として、ＳＮＳ等で採用される公開制限（閲覧制限）を利用する方法があるが、制限されたユーザ（画像の提供を受けるユーザ）は全く画像の内容を知ることができない。プライバシー等を保護するためには、保護したい部分だけの公開を制限すれば足るのであり、画像の内容を全て非公開とすることが画像提供者の意図に沿うとは限らない。
【０００４】
また、下記特許文献１に記載の方法では、元画像の全体領域から顔領域やテキスト記載領域を抽出し、それらの領域に対してモザイク処理や黒塗り処理等の加工処理を行うことにより、それらの領域の画像内容を特定不可能にしている。しかしながら、この方法では、加工処理が一旦施されると加工処理前の元画像を復元することが困難となるため、元画像を閲覧しても良い人であっても元画像の内容を見ることができなくなるという問題を有する。
【０００５】
【特許文献１】特開２００２−１００６３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
そこで本発明は、プライバシー等の保護に寄与する、撮像装置、画像ファイルのデータ構造、情報提供装置、端末装置、画像表示装置及び画像ファイルの記録方式を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために本発明に係る撮像装置は、被写体を撮影することによって元画像を取得する撮像手段と、前記元画像中の特定領域内の画像に対して可逆型の加工処理を施すことにより、前記元画像から加工画像を生成する加工処理手段と、前記加工画像と、前記加工画像から前記元画像を復元するために必要な復元処理の内容を特定する復元用情報と、を互いに関連付けて格納した画像ファイルを記録手段に記録する記録制御手段と、を備えたことを特徴とする。
【０００８】
撮像装置上で画像ファイルを保存する時点で加工処理が実施され、画像ファイル内の画像は加工画像となっているため、仮に、画像ファイルが不正に流通した場合でも特定領域内の画像に関するプライバシー等が保護される。また、従来の手法（例えば、上記特許文献１参照）と異なり、復元用情報を用いることによって加工画像から元画像を復元することが可能である。
【０００９】
そして例えば、前記記録制御手段は、前記復元用情報に従って前記加工画像から前記元画像を復元してそれを視認可能な状態にすることに対する許可／禁止を切替制御するための権限管理情報を、更に、前記加工画像及び前記復元用情報に関連付けて前記画像ファイルに格納する。
【００１０】
権限管理情報を適切に設定することにより、ユーザの意図に沿った、元画像の閲覧制限制御が可能となる。
【００１１】
また具体的には例えば、当該撮像装置は、前記元画像の画像データに基づいて、前記元画像から特定の画像特徴を有する領域を検出する特定領域検出手段を更に備え、前記加工処理手段は、前記特定領域検出手段によって検出された領域から前記特定領域を設定する。
【００１２】
或いは具体的には例えば、当該撮像装置は、外部からの前記特定領域を指定するための操作を受け付ける指定操作受付手段を更に備え、前記加工処理手段は、前記操作に従って前記特定領域を設定する。
【００１３】
また例えば、前記特定領域検出手段によって検出される、前記特定の画像特徴を有する領域は、人物の顔を含む顔領域であり、前記特定領域検出手段は、自身が検出した顔領域が特定条件を満たすか否かを判断し、前記加工処理手段は、前記特定条件を満たすと判断された顔領域から前記特定領域を設定する。
【００１４】
そして例えば、当該撮像装置に予め設定された登録人物の顔領域、特定性別の人物の顔領域、特定人種の人物の顔領域、及び、特定年齢層の人物の顔領域の内の、何れか１以上の顔領域が前記特定条件を満たすと判断されてもよい。
【００１５】
また例えば、前記撮像手段は、時系列に並ぶ複数の元画像より成る元動画像を取得し、当該撮像装置は、前記元動画像の画像データに基づいて前記元動画像内で特定被写体を追尾する追尾処理手段を更に備え、前記加工処理手段は、前記複数の元画像の何れかの元画像を基準元画像として捉えて、前記基準元画像中の、前記特定被写体を含む特定領域を設定するとともに、前記追尾処理手段の追尾結果に基づいて、前記基準元画像以外の元画像における特定領域内に前記特定被写体が含まれるように前記基準元画像以外の元画像に対する特定領域を設定し、その後、各元画像に対して設定した特定領域内の画像に前記加工処理を施すことにより、前記元動画像から、時系列に並ぶ複数の加工画像より成る加工動画像を生成する。
【００１６】
そして例えば、前記基準元画像に対する前記特定領域は、前記基準元画像の画像データに基づいて又は外部からの操作に基づいて設定される。
【００１７】
また具体的には例えば、前記復元用情報は、前記加工画像上における前記特定領域の位置及び大きさを表す情報を含む。
【００１８】
また具体的には例えば、前記加工処理は、前記特定領域内の画像を加工するためのモザイク処理又はマスク処理を含む。
【００１９】
また例えば、前記権限管理情報は、認証コードを含み、当該撮像装置と他の撮像装置との間で互いに異なる固有コードが各撮像装置に予め与えられており、当該撮像装置は、  表示手段と、前記復元用情報に基づいて前記加工画像から前記元画像を復元する復元処理手段と、前記認証コードと当該撮像装置に対する固有コードとを照合する照合手段と、  前記照合手段による照合結果に基づいて、前記復元処理手段によって復元された前記元画像の前記表示手段での表示を許可するか否かを判別する判別手段と、を備え、前記判別手段の判別結果に応じて前記復元処理手段及び前記表示手段を制御する。
【００２０】
これにより、画像ファイルを記録した記録媒体の紛失等があった場合でも、プライバシー等が保護される。
【００２１】
また、本発明に係る画像ファイルのデータ構造は、元画像中の特定領域内の画像に対して可逆型の加工処理を施すことによって得られた加工画像のデータと、前記加工画像から前記元画像を復元するために必要な復元処理の内容を特定する復元用情報のデータと、を互いに関連付けて格納したことを特徴とする。
【００２２】
そして例えば、前記復元用情報に従って前記加工画像から前記元画像を復元してそれを視認可能な状態にすることに対する許可／禁止を切替制御するための権限管理情報のデータを、更に、前記加工画像のデータ及び前記復元用情報のデータに関連付けて画像ファイルに格納するとよい。
【００２３】
また、本発明に係る情報提供装置は、上記の画像ファイルを提供元装置から受け取り、前記提供元装置と所定の関係を有し且つ表示手段を備えた端末装置からの送信要求に従って通信網を介して前記画像ファイルに基づく情報を前記端末装置に送信する情報提供装置であって、前記画像ファイル内の復元用情報に基づいて前記画像ファイル内の加工画像から元画像を復元する復元処理手段を備え、前記送信要求があった際、前記画像ファイル内の権限管理情報と前記関係に基づいて、前記復元処理手段によって復元された前記元画像の前記端末装置に対する送信を許可するか否かを判別し、その判別結果に応じて前記端末装置への送信内容を制御することを特徴とする。
【００２４】
これにより、ＳＮＳ等において、プライバシー等を保護する仕組みを導入することが可能である。
【００２５】
そして例えば、当該情報提供装置は、前記関係を事前に認識しており、前記権限管理情報と前記関係に応じて、前記端末装置に、第１及び第２の権限を含む複数段階の権限の内の何れかを与え、前記第１の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復元処理手段による復元された前記元画像を前記端末装置に対して送信する一方、前記第２の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復元処理手段による復元された前記元画像の前記端末装置に対する送信を禁止する。
【００２６】
また、本発明に係る端末装置は、表示手段を備え、上記の情報提供装置から通信網を介して前記画像ファイルに基づく情報を受け取って、受け取った情報に基づく画像を前記表示手段に表示することを特徴とする。
【００２７】
また、本発明に係る画像表示装置は、上記の画像ファイルを受け取るファイル入力手段と、表示手段と、を備えている。そして、前記画像ファイル内の権限管理情報は、認証コードを含み、当該画像表示装置は、前記画像ファイル内の復元用情報に基づいて前記画像ファイル内の加工画像から元画像を復元する復元処理手段と、前記認証コードと当該画像表示装置に登録されたコードとを照合する照合手段と、前記照合手段による照合結果に基づいて、前記復元処理手段によって復元された前記元画像の前記表示手段での表示を許可するか否かを判別する判別手段と、を更に備え、前記判別手段の判別結果に応じて前記復元処理手段及び前記表示手段を制御することを特徴とする。
【００２８】
これにより、画像ファイルが不正に流出した場合でも、プライバシー等が保護される。
【００２９】
また、本発明に係る画像ファイルの記録方式は、元画像中の特定領域内の画像に対して可逆型の加工処理を施すことによって得られた加工画像のデータと、前記加工画像から前記元画像を復元するために必要な復元処理の内容を特定する復元用情報のデータと、を互いに関連付けて記録することを特徴とする。
【発明の効果】
【００３０】
本発明によれば、プライバシー等の保護に寄与する撮像装置等を提供することができる。
【００３１】
本発明の意義ないし効果は、以下に示す実施の形態の説明により更に明らかとなろう。ただし、以下の実施の形態は、あくまでも本発明の一つの実施形態であって、本発明ないし各構成要件の用語の意義は、以下の実施の形態に記載されたものに制限されるものではない。
【発明を実施するための最良の形態】
【００３２】
以下、本発明の実施の形態につき、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。後に第１〜第９実施例を説明するが、まず、各実施例に共通する事項又は各実施例にて参照される事項について説明する。
【００３３】
図１は、本発明の実施の形態に係る撮像装置１の全体ブロック図である。撮像装置１は、動画像及び静止画像を撮影可能なデジタルビデオカメラである。但し、撮像装置１は、静止画像のみを撮影可能なデジタルスチルカメラであってもよい。図１に示す如く、撮像装置１は、符号１１〜２８で参照される各部位を備える。
【００３４】
まず、撮像装置１内の各部位の基本的な動作を説明する。撮像装置１内の各部位は、バス２４又は２５を介して、各部位間の信号（データ）のやり取りを行う。ＴＧ２２は、撮像装置１全体における各動作のタイミングを制御するためのタイミング制御信号を生成し、生成したタイミング制御信号を撮像装置１内の各部に与える。タイミング制御信号は、垂直同期信号Ｖｓｙｎｃと水平同期信号Ｈｓｙｎｃを含む。
【００３５】
ＣＰＵ２３は、撮像装置１内の各部の動作を統括的に制御する。操作部２６は、ユーザによる操作を受け付ける。操作部２６は、録画ボタン２６ａ、シャッタボタン２６ｂ及び操作キー２６ｃ等を有している。操作部２６に与えられた操作内容は、ＣＰＵ２３に伝達される。撮像装置１上での各種の設定は、主として操作キー２６ｃを介して行われる。ＳＤＲＡＭ１７は、フレームメモリとして機能する。撮像装置１内の各部は、必要に応じ、信号処理時に一時的に各種のデータ（デジタル信号）をＳＤＲＡＭ１７に記録する。メモリカード１８は、外部記録媒体であり、例えば、ＳＤ（Secure Digital）メモリカードである。尚、本実施形態では外部記録媒体としてメモリカード１８を例示しているが、外部記録媒体を、１または複数のランダムアクセス可能な記録媒体（半導体メモリ、メモリカード、光ディスク、磁気ディスク等）で構成することができる。
【００３６】
図２は、図１の撮像部１１の内部構成図である。撮像部１１にカラーフィルタなどを用いることにより、撮像装置１は、撮影によってカラー画像を生成可能なように構成されている。
【００３７】
撮像部１１は、光学系３５と、絞り３２と、撮像素子３３と、ドライバ３４を有している。光学系３５は、ズームレンズ３０及びフォーカスレンズ３１を含む複数枚のレンズを備えて構成される。ズームレンズ３０及びフォーカスレンズ３１は光軸方向に移動可能である。ドライバ３４は、ＣＰＵ２３からの制御信号に基づいて、ズームレンズ３０及びフォーカスレンズ３１の移動を制御し、光学系３５のズーム倍率や焦点距離を制御する。また、ドライバ３４は、ＣＰＵ２３からの制御信号に基づいて絞り３２の開度（絞り値）を制御する。
【００３８】
被写体からの入射光は、光学系３５を構成する各レンズ及び絞り３２を介して、撮像素子３３に入射する。光学系３５を構成する各レンズは、被写体の光学像を撮像素子３３上に結像させる。ＴＧ２２は、上記タイミング制御信号に同期した、撮像素子３３を駆動するための駆動パルスを生成し、該駆動パルスを撮像素子３３に与える。
【００３９】
撮像素子３３は、例えばＣＣＤ（Charge Coupled Devices）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等からなる。撮像素子３３は、光学系３５及び絞り３２を介して入射した光学像を光電変換し、該光電変換によって得られた電気信号をＡＦＥ１２に出力する。より具体的には、撮像素子３３は、マトリクス状に二次元配列された複数の画素（受光画素；不図示）を備え、各撮影において、各画素は露光時間に応じた電荷量の信号電荷を蓄える。蓄えた信号電荷の電荷量に比例した大きさを有する各画素からの電気信号は、ＴＧ２２からの駆動パルスに従って、後段のＡＦＥ１２に順次出力される。
【００４０】
ＡＦＥ１２は、撮像部１１（撮像素子３３）から出力されるアナログ信号を増幅し、増幅されたアナログ信号をデジタル信号に変換する。ＡＦＥ１２は、このデジタル信号を、順次、映像信号処理部１３に出力する。
【００４１】
映像信号処理部１３は、ＡＦＥ１２の出力信号に基づいて、撮像部１１によって撮影された画像（以下、「撮影画像」又は「フレーム画像」ともいう）を表す映像信号を生成する。映像信号は、撮影画像の輝度を表す輝度信号Ｙと、撮影画像の色を表す色差信号Ｕ及びＶと、から構成される。映像信号処理部１３にて生成された映像信号は、圧縮処理部１６と映像出力回路２０に送られる。
【００４２】
また、映像信号処理部１３は、撮影画像中のフォーカス検出領域内のコントラスト量に応じたＡＦ評価値及び撮影画像の明るさに応じたＡＥ評価値（輝度評価値）を検出し、それらをＣＰＵ２３に伝達する。ＣＰＵ２３は、ＡＦ評価値に応じて図２のドライバ３４を介してフォーカスレンズ３１の位置を調節することにより、被写体の光学像を撮像素子３３上に結像させる。また、ＣＰＵ２３は、ＡＥ評価値に応じて図２のドライバ３４を介して絞り３２の開度（及び必要に応じてＡＦＥ１２における信号増幅の増幅度）を調節することにより、受光量（画像の明るさ）を制御する。
【００４３】
マイク１４は、外部から与えられた音声（音）を、アナログの音声信号に変換して出力する。音声信号処理部１５は、マイク１４から出力されるアナログの音声信号をデジタルの音声信号に変換する。このデジタルの音声信号は、圧縮処理部１６に送られる。
【００４４】
圧縮処理部１６は、映像信号処理部１３からの映像信号を、所定の圧縮方式を用いて圧縮する。動画像または静止画像の撮影及び記録時において、圧縮された映像信号はメモリカード１８に送られ、メモリカード１８に記録される。また、圧縮処理部１６は、音声信号処理部１５からの音声信号を、所定の圧縮方式を用いて圧縮する。動画像の撮影及び記録時において、映像信号処理部１３からの映像信号と音声信号処理部１５からの音声信号は、圧縮処理部１６にて時間的に互いに関連付けられつつ圧縮され、圧縮後のそれらはメモリカード１８に記録される。
【００４５】
撮像装置１の動作モードには、動画像または静止画像の撮影及び記録が可能な撮影モードと、メモリカード１８に格納された動画像または静止画像を表示部２７に再生表示する再生モードと、が含まれる。操作キー２６ｃに対する操作に応じて、各モード間の遷移は実施される。録画ボタン２６ａに対する操作に従って動画像の撮影及び記録の開始又は終了が実施される。また、シャッタボタン２６ｂに対する操作に従って静止画像の撮影及び記録が実施される。
【００４６】
撮影モードでは、所定のフレーム周期（例えば、１／６０秒）にて順次撮影が行われる。撮影モードにおいて、ユーザが録画ボタン２６ａを押下すると、ＣＰＵ２３の制御の下、その押下後の各フレームの映像信号及びそれに対応する音声信号が、順次、圧縮処理部１６を介してメモリカード１８に記録される。再度、録画ボタン２６ａを押下すると、動画像撮影は終了する。つまり、映像信号及び音声信号のメモリカード１８への記録は終了し、１つの動画像の撮影は完了する。
【００４７】
また、撮影モードにおいて、ユーザがシャッタボタン２６ｂを押下すると、静止画像の撮影が行われる。具体的には、ＣＰＵ２３の制御の下、その押下後の１つのフレームの映像信号が、静止画像を表す映像信号として、圧縮処理部１６を介してメモリカード１８に記録される。
【００４８】
再生モードにおいて、ユーザが操作キー２６ｃに所定の操作を施すと、メモリカード１８に記録された動画像または静止画像を表す圧縮された映像信号は、伸張処理部１９に送られる。伸張処理部１９は、受け取った映像信号を伸張して映像出力回路２０に送る。尚、撮影モードにおいては、録画ボタン２６ａ又はシャッタボタン２６ｂが押下されていなくても、所定のフレーム周期（例えば、１／６０秒の周期）にて撮影画像が取得されている。この撮影画像を、特に、スルー画像という。撮影モードでは、所謂プレビューを行うべく、逐次スルー画像の映像信号が映像出力回路２０に送られる。
【００４９】
映像出力回路２０は、与えられたデジタルの映像信号を表示部２７で表示可能な形式の映像信号（例えば、アナログの映像信号）に変換して出力する。表示部２７は、液晶ディスプレイなどの表示装置であり、映像出力回路２０から出力された映像信号に応じた画像を表示する。
【００５０】
また、再生モードにおいて動画像を再生する際、メモリカード１８に記録された動画像に対応する圧縮された音声信号も、伸張処理部１９に送られる。伸張処理部１９は、受け取った音声信号を伸張して音声出力回路２１に送る。音声出力回路２１は、与えられたデジタルの音声信号をスピーカ２８にて出力可能な形式の音声信号（例えば、アナログの音声信号）に変換してスピーカ２８に出力する。スピーカ２８は、音声出力回路２１からの音声信号を音声（音）として外部に出力する。
【００５１】
図３に、撮像装置１と協働して特徴的な動作を行う画像管理システムの全体構成図を示す。図３において、符号２は、ユーザ用のコンピュータ（以下、「ユーザＰＣ」という）である。符号３は、サーバコンピュータ（以下、単に「サーバ」という）である。符号４は、コンピュータ・ネットワークとしての通信網である。今、通信網４は、インターネットであるとする。符号１０１、１０２及び１０３は、夫々、サーバ３に格納された画像の閲覧等を行うための閲覧用のコンピュータ（以下、「閲覧側ＰＣ」という）である。
【００５２】
図４に、ユーザＰＣ２の概略内部ブロック図を示す。ユーザＰＣ２は、符号４１〜４８にて参照される各部位を備える。図５に、サーバ３の概略内部ブロック図を示す。サーバ３は、符号６１〜６５にて参照される各部位を備える。閲覧側ＰＣ１０１〜１０３も、ユーザＰＣ２と同様の構成を有し、液晶ディスプレイ等から成る表示部（不図示）等を備えている。ユーザＰＣ２とサーバ３は、通信網４を介して任意のデータの送受信が可能であり、閲覧側ＰＣ１０１〜１０３の夫々とサーバ３は、通信網４を介して任意のデータの送受信が可能である。尚、図示の簡略化及び説明の便宜上、図３には閲覧用ＰＣが３台しか示されていないが、閲覧用ＰＣ１０１、１０２又は１０３と同様の多数の閲覧用ＰＣが通信網４を介してサーバ３に接続されうる。
【００５３】
撮像装置１は、撮影された静止画像又は動画像に応じた画像ファイルを作成し、該画像ファイルはメモリカード１８に記録される。ここにおける画像ファイルには、後述の特殊画像ファイルが含まれる。メモリカード１８は撮像装置１に対して着脱自在となっている。メモリカード１８を撮像装置１から取り外して図４のユーザＰＣ２のカードスロット４４に装着することにより、ユーザＰＣ２は、メモリカード１８内に記録された画像ファイルを読み出すことが可能となる。また、撮像装置１に装着されたメモリカード１８内の画像ファイルを、ＵＳＢ（Universal Serial Bus）などの規格に従った通信線を介してユーザＰＣ２に読み込ませることもできる。ユーザＰＣ２に読み込まれた画像ファイルは、画像処理部４２を含む主制御部４１に与えられる。液晶ディスプレイ等から成る表示部４５及びスピーカ４６は、主制御部４１の制御の下、夫々、映像の表示及び音声の出力を行う。また、メモリ４８の記憶内容は、主制御部４１に参照される。
【００５４】
図４のＰＣ操作キー４７に所定の操作が施された時、主制御部４１に与えられた画像ファイルは、図５のサーバ３の、画像処理部６２を含む主制御部６１に送信される（所謂アップロードが行われる）。この送信は、図４の通信部４３、図３の通信網４及び図５の通信部６３を介して行われる。主制御部６１が受信した画像ファイルは、ユーザＰＣ２の固有情報と関連付けられつつサーバＨＤＤ（ハードディスク）６４に保存される。
【００５５】
サーバ３は、インターネット上で所定のＩＰアドレスが割り当てられたＷＷＷ（World Wide Web）サーバであり、ＳＮＳ（ソーシャルネットワーキングサービス）や所謂ブログ等のウェブサイトを運営する。
【００５６】
サーバ３は、通信網４を介して閲覧側ＰＣ１０１〜１０３の夫々からの送信要求（配信要求）を受け付ける。閲覧側ＰＣ１０１からサーバＨＤＤ６４に格納された画像ファイル又は該画像ファイルを含むウェブページに対する送信要求を受け取った時、画像ファイルの内容と公開管理メモリ６５の記憶内容に基づいて送信すべきデータを判断し、その判断結果に応じたデータを閲覧側ＰＣ１０１に送信する（詳細は後述）。閲覧側ＰＣ１０２及び１０３についても同様である。尚、公開管理メモリ６５を、サーバＨＤＤ６４内の一部記録領域から形成することが可能である。
【００５７】
図１の撮像装置１において、操作キー２６ｃに対して所定の操作を施すことによってメモリカード１８への画像の記録方式を特殊記録方式に設定することができる。撮像装置１は、特殊記録方式が設定されている時に特異な動作を行い、特徴的な画像ファイルを作成及び保存（記録）する。この特徴的な画像ファイルを、特に、特殊画像ファイルと呼ぶことにする。以下の説明は、特に記述なき限り、特殊記録方式が設定されている時の動作の説明である。特殊記録方式は、肖像権、著作権又はプライバシー等の保護や機密情報の秘密性保持にとって有益である。
【００５８】
以下に、図３に示す画像管理システムの全体又は一部の動作又はそれらに関与する動作を説明する実施例として、第１〜第９実施例を説明する。各実施例に記載した事項は、矛盾なき限り或いは特に記述無き限り、任意に組み合わせて実施することが可能である。
【００５９】
＜＜第１実施例＞＞
第１実施例について説明する。まず、特殊記録方式が設定されている時に撮像装置１において実施される画像処理内容について説明する。ここでは、人物の顔をプライバシー保護の対象とすることを想定する。
【００６０】
図１の撮像装置１は、顔検出機能を備えている。顔検出機能は、図１の映像信号処理部１３内の顔検出部よって実現される。図６に、図１の映像信号処理部１３の内部の一部ブロック図を示す。映像信号処理部１３は、顔検出部８１及び加工処理部８２を含む。
【００６１】
顔検出部８１は、撮像部１１による各撮影画像を入力画像として受け取り、入力画像の画像データに基づいて、入力画像中から人物の顔を検出して、顔を含む顔領域を抽出する。画像中に含まれる顔を検出する手法として様々な手法が知られており、顔検出部８１は何れの手法をも採用可能である。例えば、特開２０００−１０５８１９号公報に記載の手法のように入力画像から肌色領域を抽出することによって顔（顔領域）を検出しても良いし、特開２００６−２１１１３９号公報又は特開２００６−７２７７０号公報に記載の手法を用いて顔（顔領域）を検出しても良い。
【００６２】
典型的には例えば、入力画像内に設定された着目領域の画像と所定の画像サイズを有する基準顔画像とを対比して両画像の類似度を判定し、その類似度に基づいて着目領域に顔が含まれているか否か（着目領域が顔領域であるか否か）を検出する。類似判定は、顔であるか否かを識別するのに有効な特徴量を抽出することによって行う。特徴量は、水平エッジ、垂直エッジ、右斜めエッジ、左斜めエッジ等である。
【００６３】
入力画像において着目領域は一画素ずつ左右方向又は上下方向にずらされる。そして、ずらされた後の着目領域の画像と基準顔画像とが対比されて、再度、両画像の類似度が判定され、同様の検出が行われる。このように、着目領域は、例えば入力画像の左上から右下方向に向けて１画素ずつずらされながら、更新設定される。また、入力画像を一定割合で縮小し、縮小後の画像に対して、同様の顔検出処理を行う。このような処理を繰り返すことにより、入力画像中から任意の大きさの顔を検出することができる。
【００６４】
顔検出部８１から出力される顔検出結果は、加工処理部８２に与えられる。加工処理部８２は、撮像部１１による撮影画像を顔検出結果に基づいて加工し、加工後の画像を加工画像として出力する。加工画像との区別を明確化するため、撮像部１１の撮影によって得られた加工前の撮影画像を、以下、「元画像」と呼ぶ。
【００６５】
今、１つの元画像に着目する。図７（ａ）に、着目した元画像３００を示す。元画像３００には２人の人物３０１及び３０２が描写されている。紙面左側の人物３０１は男性であり、紙面右側の人物３０２は女性である。符号３１１及び３１２が付された矩形領域は、夫々、人物３０１及び３０２について抽出された顔領域である。
【００６６】
顔検出部８１から出力される顔検出結果によって、顔検出部８１にて抽出された元画像内の顔領域の位置及び大きさが特定される（大きさによって幅と高さが特定されるものとする）。複数の顔領域が抽出された場合は、各顔領域についての位置及び大きさを特定する情報が顔検出結果に含まれる。尚、顔領域の形状が矩形である場合を例示しているが、顔領域の形状は矩形以外（例えば、楕円や真円）であっても構わない。本実施例において、顔検出部８１によって検出された顔領域は、加工処理部８２による「加工対象領域」となる。図７（ａ）の例では、顔領域３１１と３１２の夫々が、加工対象領域となる（従って、加工対象領域は２つである）。
【００６７】
加工処理部８２は、与えられた元画像内の加工対象領域に対して所定の加工処理を施す。加工対象領域以外の領域に対して該加工処理は施されない。図７（ｂ）に、図７（ａ）の元画像３００に対して加工処理を経て得られる加工画像３２０を示す。加工画像３２０においては、人物３０１及び３０２が誰であるのかを顔に基づいて判断できないようになっている。
【００６８】
加工処理部８２にて実施される加工処理として様々な種類の加工処理を採用することが可能である。但し、その加工処理は、可逆型の加工処理である必要がある。
【００６９】
加工処理部８２における加工処理として、例えば、ガラス処理、ネガポジ処理、ＸＯＲ０ｘ８０処理、ＲＧＢ入れ替え処理、Ｗｉｎマスク処理、Ｍｅｋｏマスク処理、Ｑ０マスク処理、ＦＬマスク処理、ＣＰマスク処理などを採用可能である。それらの処理は、何れもマスク処理の一種であるが、それらの処理の内の一部は、モザイク処理にも分類される。モザイク処理では、例えば、加工対象領域を縦及び横方向に所定画素間隔で分割し、分割によって得られた各領域をランダムに並べ替える。
【００７０】
ガラス処理には横ガラス処理と縦ガラス処理が含まれる。横ガラス処理では、加工対象領域を縦方向に所定画素間隔で分割し、分割によって得られた各領域の上下方向の位置関係を入れ替える。縦ガラス処理では、加工対象領域を横方向に所定画素間隔で分割し、分割によって得られた各領域の左右方向の位置関係を入れ替える。横ガラス処理と縦ガラス処理を組み合わせて実施することもできる。
ネガポジ処理では、加工対象領域内のＲＧＢ信号のビット反転を行う。尚、加工対象領域内の映像信号がＹＵＶ形式で表現されている場合は、その映像信号をＲＧＢ信号に変換してからネガポジ処理を実施すればよい。
ＸＯＲ０ｘ８０処理では、加工対象領域内のＲＧＢ信号の各信号値と、１６進数表記における０ｘ８０（８０Ｈ）との排他的論理和をとり、その排他的論理和の結果を出力する。
ＲＧＢ入れ替え処理では、加工対象領域内のＲＧＢ信号の各信号値を、Ｒ、Ｇ、Ｂ信号間で入れ替える。
Ｗｉｎマスク処理では、加工対象領域を縦方向に所定画素間隔で分割し、分割によって得られた各領域を所定の規則に則って入れ替える。
Ｍｅｋｏマスク処理では、加工対象領域を縦及び横方向に所定画素間隔で分割し、分割によって得られた各領域をランダムに並べ替え、更にネガポジ反転を行う。
Ｑ０マスク処理では、横ガラス処理と縦ガラス処理とネガポジ反転などを組み合わせて実施する。
ＦＬマスク処理では、加工対象領域を縦及び横方向に所定画素間隔で分割し、分割によって得られた各領域を渦巻き状に並べ替える。
ＣＰマスク処理では、加工対象領域を縦及び横方向に所定画素間隔で分割し、分割によって得られた各領域を並べ替える。但し、この並べ替えの仕方は、分割によって得られた領域の個数と所定文字数以下のアルファベット文字列とで決定される。従って、元の画像を得るためには、このアルファベット文字列が必要となる。ＣＰマスク処理を利用する際には、後述の認証コードとともに、このアルファベット文字列を用いた管理が可能となる。例えば、加工画像から元画像を復元する機能を備えた装置（撮像装置１やユーザＰＣ２）において、その装置のユーザがその装置に上記アルファベット文字列を与えないと元画像の復元を行わない、といった仕組みを導入することもできる。
【００７１】
これらの他、加工対象領域内の映像信号のビット列をランダムに入れ替えるといったことも可能である。
【００７２】
加工処理部８２にて実施される加工処理は可逆型の加工処理であるので、その加工処理に対応する復元処理によって加工画像から元画像を完全に復元することができる。この復元処理の実行に必要な復元処理情報も、加工処理部８２（又は図１のＣＰＵ２３等）にて生成される。復元処理情報は、加工対象領域に対して如何なる加工処理を行ったかを特定する情報とも言える。加工処理部８２における加工処理が、分割された領域、信号値又はビット列に対する並べ替え処理を含む場合、その並べ替え順を復元処理情報に含める必要があるが、その並べ替え順を暗号化してから復元処理情報に含めるようにしてもよい。
【００７３】
尚、加工処理部８２にて如何なる加工処理を施すかを、図１の操作キー２６ｃに対する所定操作によってユーザが設定することができる。その際、加工処理の強度等も設定することが可能である。それらの設定がなされていない場合は、予め規定された加工処理を撮像装置１が自動的に実施する。尚、加工処理の強度とは、加工処理によって加工対象領域内の画像が元画像のそれからどの程度変質したかを表す指標であり、加工処理の程度とも読み替えることができる。加工処理の強度の設定によって、例えば、ガラス処理によって分割される領域の大きさを設定することができる。
【００７４】
図８に、図１のシャッタボタン２６ｂの押下に伴って作成されメモリカード１８に記録される特殊画像ファイル３４０のデータ構造を示す。特殊画像ファイル３４０は、静止画像用の特殊画像ファイルであり、ＣＰＵ２３の制御の下、撮像装置１内で作成される。
【００７５】
特殊画像ファイル３４０は、ヘッダ領域３４１と本体領域３４２から形成される。当然ではあるが、同一の特殊画像ファイル内に定義されたヘッダ領域と本体領域は互いに関連付けられている。特殊画像ファイル３４０の場合、ヘッダ領域３４１と本体領域３４２は互いに関連付けられ、特殊画像ファイル３４０内に格納された各データは互いに関連付けられている。
【００７６】
本体領域３４２には加工画像を表す画像データが格納される。この画像データは、加工画像を図１の圧縮処理部１６にて圧縮することによって得られた、圧縮された映像信号としての圧縮データである。本体領域３４２を含む特殊画像ファイル３４０内に、元画像の画像データは含まれない。ヘッダ領域３４１には加工対象領域の関連情報等が格納される。具体的には、特殊画像ファイル３４０に対応する元画像の加工対象領域に対して、加工対象領域ＩＤ、加工位置・大きさ情報、復元処理情報、認証コード、公開レベル情報及び拡張情報が定められ、それらがヘッダ領域３４１に格納される。この際、加工対象領域が複数ある場合は、加工対象領域ごとに、加工対象領域ＩＤ、加工位置・大きさ情報、復元処理情報、認証コード、公開レベル情報及び拡張情報が定められる。
【００７７】
説明の具体化のため、図７（ａ）の元画像３００に対応する特殊画像ファイルが特殊画像ファイル３４０である場合を考える。この場合、図７（ａ）の顔領域３１１及び３１２の夫々についての加工対象領域ＩＤ、加工位置・大きさ情報、復元処理情報、認証コード、公開レベル情報及び拡張情報がヘッダ領域３４１に格納される。
【００７８】
加工対象領域ＩＤは、基本的には、加工対象領域ごとに異なる通し番号である。今の例の場合、第１の加工対象領域としての領域３１１及び第２の加工対象領域としての顔領域３１２の通し番号は、例えば、夫々１及び２とされる。加工対象領域が顔領域である場合、加工対象領域ＩＤに、更に、性別、年齢及び人種等の属性情報を付加することも可能である。撮像装置１又は特殊画像ファイル３４０を受け取ったユーザＰＣ２（図３参照）上において、加工対象領域ごとに、これらの属性情報を手動にて設定することができる。
【００７９】
加工位置・大きさ情報は、加工対象領域の画像上の位置及び大きさを特定する情報である。加工対象領域が矩形領域である場合は、大きさによって加工対象領域の幅と高さが特定されるものとする。今の例の場合、顔領域３１１と３１２の夫々が加工対象領域となっているため、加工位置・大きさ情報は、図６の顔検出部８１の顔検出結果に基づく、顔領域の画像上の位置及び大きさを特定する情報である。顔領域３１１についての加工位置・大きさ情報は、元画像３００及び加工画像３２０上における顔領域３１１の位置及び大きさを表す。顔領域３１２についても同様である。尚、加工対象領域の形状が矩形でない場合は、加工対象領域の形状をも特定する情報を加工位置・大きさ情報に含めればよい。
【００８０】
ヘッダ領域３４１内の復元処理情報は、加工処理部８２にて生成されたそれと同じものである。加工対象領域に対して如何なる加工処理を行ったかを特定する復元処理情報と、加工対象領域の画像上の位置及び大きさを特定する加工位置・大きさ情報とに基づけば、加工画像から元画像を復元することが可能である。従って、加工位置・大きさ情報と復元処理情報は、加工画像から元画像を復元するために必要な復元処理の内容を特定する復元用情報を形成する。
【００８１】
各加工対象領域間において、復元処理情報は、典型的には同じとされるが、それらは互いに相違しうる。例えば、加工処理部８２にて如何なる加工処理を施すかを、特殊画像ファイル３４０の作成及び保存時に、操作キー２６ｃを用いて加工対象領域（顔領域３１１及び３１２）ごとに設定することができるようにしておくとよい。この場合において、例えば、元画像３００が得られた後、特殊画像ファイル３４０を生成する際に、顔領域３１１にネガポジ処理を実施し且つ顔領域３１２にＲＧＢ入れ替え処理を実施するように設定されたとする。そうすると、その設定内容に従った加工処理が元画像３００に対して実施されて、得られた加工画像が特殊画像ファイル３４０の本体領域３４２に格納されると共に、ネガポジ処理に対応する復元処理情報が顔領域３１１の復元処理情報として且つＲＧＢ入れ替え処理に対応する復元処理情報が顔領域３１２の復元処理情報として特殊画像ファイル３４０のヘッダ領域３４１に格納される。
【００８２】
認証コード及び公開レベル情報は、復元用情報に従って加工画像から元画像を復元しそれを視認可能な状態にすることに対する許可又は禁止（或いは一部許可）を切替制御するための権限管理情報である。認証コード及び公開レベル情報の利用例については後述する。
【００８３】
拡張情報は、ユーザによって付加されうる付加的な情報であり、ユーザは、様々な情報を付加情報としてヘッダ領域３４１に格納しておくことができる。
【００８４】
認証コード及び公開レベル情報を、加工対象領域ごとに個別に設定することが可能である。例えば、それらを特殊画像ファイル３４０の作成及び保存時に、操作キー２６ｃを用いて加工対象領域ごとに設定することができる。認証コード及び公開レベル情報に対してこのような設定がなされなかった場合は、撮像装置１が自動的に認証コード及び公開レベル情報として予め規定された初期データをヘッダ領域３４１に書き込む。拡張情報に関しても、加工対象領域ごとに個別に設定することが可能である。
【００８５】
ヘッダ領域へのデータ保存形式及び特殊画像ファイル全体のデータ保存形式は、任意に定めることができるが、各データをＥｘｉｆ（Exchangeable image file format）などの既存の規格に沿って保存することも可能である。また、記録機器又は再生機器に対する画像のファイルシステムの規格としてＤＣＦ（Design rule for Camera File system）等があるが、ヘッダ領域へのデータ保存形式及び特殊画像ファイル全体のデータ保存形式をＤＣＦ等の既存の規格に従わせることも可能である。
【００８６】
例えば、Ｅｘｉｆのファイルフォーマットに準拠するように特殊画像ファイルを作成する場合、Ｅｘｉｆのファイルフォーマットに準拠した任意の画像表示ソフトウェア上で特殊画像ファイル内の画像を閲覧することが可能となる。しかしながら、撮像装置１上で特殊画像ファイルを保存する時点でモザイク処理等が実施され、特殊画像ファイル内の画像は加工画像となっているため、仮に、メモリカード１８が紛失又は盗難されたり、コンピュータウイルスやファイル交換ソフトの悪用等によってネット経由で特殊画像ファイルが流出した場合でも、プライバシーが保護される（今の例の場合、加工画像内の人物の顔が特定できないため、プライバシーが保護される）。
【００８７】
また、従来の手法（例えば、上記特許文献１参照）と異なり、復元用情報を用いることによって加工画像から元画像を復元することが可能である。そして、権限管理情報を利用することによって元画像への復元及び復元した元画像の閲覧権限を管理することが可能である（この管理の手法例は、他の実施例で後述する）。
【００８８】
尚、図３のユーザＰＣ２及びサーバ３は、特殊画像ファイルに準拠しているものとする。つまり、図３の撮像装置１、ユーザＰＣ２及びサーバ３を含む画像管理システム全体内において、ヘッダ領域へのデータ保存形式及び特殊画像ファイル全体のデータ保存形式は予め規定されているものとする。
【００８９】
＜＜第２実施例＞＞
次に、第２実施例について説明する。第１実施例では、図６の顔検出部８１を利用して元画像中の顔領域を加工対象領域とする場合を説明した。しかしながら、加工対象領域は、顔領域以外であっても構わない。一般化して考えれば、元画像の画像データに基づいて元画像から特定の画像特徴を有する領域を検出する特定領域検出部（不図示）を図１の映像信号処理部１３内に設け、その特定領域検出部によって検出された領域から加工対象領域を定めればよい。通常は、特定領域検出部によって検出された領域そのものを加工対象領域とすればよい。第１実施例においては、特定領域検出部が図６の顔検出部８１に相当し、特定の画像特徴は顔の画像特徴に相当し、特定領域検出部によって検出された領域が顔領域（図７（ａ）の顔領域３１１及び３１２）に相当する。
【００９０】
元画像内において、特定の画像特徴を有する領域は、例えば、人物の顔を含む領域（即ち、上述の顔領域）、特定種類の物体（極秘に開発中の機械等）を含む領域、特定の文字（極秘資料のタイトル文字等）を含む領域、又は、特定のデザイン（開発中の衣装デザイン等）を含む領域であり、何れも不特定の人物に閲覧されると問題が生じうる領域である。
【００９１】
元画像の画像データに基づいて元画像から特定の画像特徴を有する領域を検出する手法として、公知の手法を採用可能である。例えば、特定種類の物体を表す基準画像を撮像装置１内のメモリ（不図示）に予め登録しておき、パターンマッチング等を用いて元画像と基準画像とを対比することにより特定種類の物体を含む領域を自動検出することが可能である。人物の顔を含む領域、特定の文字を含む領域及び特定のデザインを含む領域についても同様にして検出可能である。
【００９２】
また、撮像装置１上又はユーザＰＣ２上で、加工対象領域を手動操作によって設定するようにしてもよい。例えば、撮像装置１において、特殊画像ファイルの作成及び保存時に操作キー２６ｃを用いて加工対象領域を任意に手動設定することができるようにしておく。そして、元画像が得られた後、その元画像に対応する特殊画像ファイルを生成する際にユーザの手動設定にて加工対象領域を定め、手動設定にて定められた加工対象領域に対して加工処理を施すことにより該加工処理に応じた特殊画像ファイルを撮像装置１内のメモリカード１８に格納するようにする。この場合、勿論、ヘッダ領域の内容は、手動設定にて定められた加工対象領域に応じた内容となる。
【００９３】
加工対象領域の手動設定は、一旦、特殊画像ファイルの作成及び保存が行われた後であっても可能である。この場合、事後的に行われる手動設定によって新たに定められた加工対象領域に応じて、特殊画像ファイルの本体領域内の画像データ及びヘッダ領域内の復元用情報等が更新される。更に、この事後的に行われる加工対象領域の手動設定は、撮像装置１上だけでなく、撮像装置１から特殊画像ファイルの提供を受けたユーザＰＣ２（図３）上でも可能である（図４のＰＣ操作キー４７を用いて該手動設定を行えばよい）。尚、撮像装置１又はユーザＰＣ２にタッチパネル機能が備わっているなら、タッチパネルを介した操作によって加工対象領域を手動設定するように構わない。
【００９４】
例えば、図７（ａ）の元画像３００に関し、顔領域３１１を加工対象領域から除外し、顔領域３１２のみを加工対象領域とするといった利用法も可能である。
【００９５】
また、撮像装置１における特殊画像ファイルの作成及び保存時又はその後に、撮像装置１上又はユーザＰＣ２上において、その特殊画像ファイルのヘッダ領域における認証コード及び公開レベル情報を任意に設定することができるようしておくとよい。
【００９６】
＜＜第３実施例＞＞
また、人物の顔ではなく、その人物の背景を知られたくない場合もある。この場合は、人物の顔を含まない背景領域に対してモザイク処理等を行うことも可能である。これを第３実施例として説明する。例えば、不特定の人間に撮影場所の特定をなされたくない場合や、撮影時の背景部分に存在していた家具や小物を不特定の人間に対して開示したくない場合に、本実施例は有益である。
【００９７】
これを実施するには、撮像装置１において特殊画像ファイルの作成及び保存時にユーザが操作キー２６ｃ等を用いて背景領域を加工対象領域とするように指示する。この指示内容は、図１のＣＰＵ２３を介して図６の加工処理部８２に伝達される。この場合、加工処理部８２は、顔検出部８１にて検出された顔領域を除く背景領域を加工対象領域として取り扱って元画像内の背景領域に対して所定の加工処理を施し、これによって加工画像を得る。背景領域に対して加工処理を施した加工画像の画像データは、撮像装置１においてシャッタボタン２６ｂの押下に伴って作成及び保存されるべき特殊画像ファイルの本体領域に格納され、背景領域に対する加工処理に応じた復元用情報がその特殊画像ファイルのヘッダ領域に格納される（図８参照）。
【００９８】
図７（ａ）の元画像３００に対して上述の背景領域に対する加工処理を施すことによって得られる加工画像の例を図９に示す。図９は、顔領域及び顔領域の近傍を除く領域が加工対象領域として取り扱われた時に得られる加工画像を表している。
【００９９】
背景領域を加工対象領域に設定した場合は、例えば、その旨を表す情報が、図８のヘッダ領域の拡張情報として格納される。尚、加工対象領域が顔領域と背景領域の何れとなっているかを表す情報の格納領域を、拡張情報の格納領域とは別に、ヘッダ領域に設けるようにしても構わない。
【０１００】
＜＜第４実施例＞＞
次に、第４実施例について説明する。第４実施例では、撮像装置１で作成した特殊画像ファイルを図３のサーバ３を介して公開する手法例を説明する。
【０１０１】
今、説明の具体化のため、撮像装置１にて作成されユーザＰＣ２を介してサーバ３にアップロードされる（即ち、送信される）特殊画像ファイルが、第１実施例で述べた図８の特殊画像ファイル３４０であり、且つ、該特殊画像ファイル３４０の本体領域３４２に格納されている加工画像が図７（ｂ）の加工画像３２０である場合を想定する。加工画像３２０は、第１実施例で述べたように、図７（ａ）の元画像３００内の顔領域３１１及び３１２に所定の加工処理を施すことによって得られた加工画像である。勿論、本実施例で着目する特殊画像ファイル３４０のヘッダ領域３４１には、第１実施例でも述べたように、加工画像３２０を元画像３００に復元するために必要な復元用情報が格納されている（図８参照）。
【０１０２】
サーバ３が運営するＳＮＳやウェブサイトの規定に従って、ユーザＰＣ２と閲覧側ＰＣ１０１〜１０３の夫々には、互いに異なる固有のＩＤ番号が事前に割り振られているものとする。サーバ３の公開管理メモリ６５（図５参照）には、各ＩＤ番号と、ユーザＰＣ２と閲覧側ＰＣ１０１〜１０３の夫々との関係を示す公開管理関係情報が予め格納されている。公開管理関係情報によって示される関係を、以下「公開関係」と呼ぶ。尚、固有のＩＤ番号とは、ユーザＰＣ２又は閲覧用ＰＣの利用者に対して割り振られたＩＤ番号であり、例えば、閲覧側ＰＣ１０１に対応するＩＤ番号が事前にサーバ３から発行され、その発行を受けたユーザが該ＩＤ番号をサーバ３に接続可能な任意のコンピュータに付与すると、そのコンピュータが閲覧側ＰＣ１０１として機能するようになる。ユーザＰＣ２並びに閲覧側ＰＣ１０２及びＰＣ１０３についても同様である。
【０１０３】
この公開管理関係情報の内容例を図１０に示す。今、ユーザＰＣ２と閲覧側ＰＣ１０１、１０２及び１０３との間の公開関係が、夫々、第１、第２及び第３の公開関係であったとし、それを表す情報が公開管理関係情報となっていたとする。実際には、各ＩＤ番号を用いてサーバ３は図１０に示すような各公開関係を認識している。
【０１０４】
ところで、ＳＮＳ等においては、一般的に、公開しようとする各情報に対して公開制限を加えることができ、“或る情報を「友人」に相当するＩＤ番号を有した閲覧用ＰＣには公開するが、その情報を「友人の友人」又は「一般」に相当するＩＤ番号を有した閲覧用ＰＣには公開しない”といったことを公開側のＰＣ（ユーザＰＣ２に相当）で自由に設定することが可能である。「一般」とは、「友人」でも「友人の友人」でもないことを示す。そこで、第１〜第３の公開関係を、サーバ３が運営するＳＮＳやウェブサイトの公開制限に沿って規定しておく。今、第１、第２及び第３の公開関係を、夫々、公開制限における「友人」、「友人の友人」及び「一般」に割り当てるものとする。
【０１０５】
本実施例では、公開管理関係情報とヘッダ領域３４１内の公開レベル情報に基づいて公開の仕方を制御する。ヘッダ領域３４１内の公開レベル情報は、上述したように、撮像装置１によって自動的に設定される、或いは、撮像装置１又はユーザＰＣ２上でユーザにより設定される。特殊画像ファイル３４０は、ユーザＰＣ２及び通信網４を経由してサーバ３にアップロードされ（即ち、送信され）、サーバ３は、特殊画像ファイル３４０をユーザＰＣ２のＩＤ番号と関連付けてサーバＨＤＤ６４（図５参照）に保存する。実際には、特殊画像ファイル３４０を含むウェブページがサーバ３にアップロードされてサーバＨＤＤ６４に保存されることも多いが、説明の簡略化上、特殊画像ファイル３４０のみに着目する。
【０１０６】
今、公開レベル情報によって、公開の仕方を３段階に分類する場合を考える。サーバＨＤＤ６４に格納された特殊画像ファイル３４０のヘッダ領域３４１内の公開レベル情報の内容例を図１１に示す。今、ユーザＰＣ２との間で第１、第２及び第３の公開関係を有する閲覧側ＰＣに、夫々、第１、第２及び第３の権限を与えることを指示する内容が、公開レベル情報によって規定されていた場合を考える。この場合、図５のサーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊画像ファイル３４０に対するアクセス権限として、閲覧側ＰＣ１０１、１０２及び１０３に、夫々、第１、第２及び第３の権限を与えることになる。
【０１０７】
以上のような想定の下、各閲覧用ＰＣがサーバ３内の特殊画像ファイル３４０にアクセスしようとした場合の、サーバ３の動作及び各閲覧用ＰＣ上での表示画像を説明する。
【０１０８】
閲覧用ＰＣ１０１が、サーバ３内の特殊画像ファイル３４０に対応する画像を閲覧用ＰＣ１０１に送信するように送信要求をサーバ３に対して出した際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊画像ファイル３４０の公開レベル情報と公開管理メモリ６５内の公開管理関係情報に基づいて、閲覧用ＰＣ１０１に与えられるべき権限を認識する。上述したように、閲覧用ＰＣ１０１に与えられるべき権限は第１の権限である。この場合、サーバ３の画像処理部６２（図５参照）は、サーバＨＤＤ６４から特殊画像ファイル３４０内の加工画像３２０と復元用情報を読み出し、復元用情報に基づいて加工画像３２０から元画像３００を復元する。そして、復元した元画像３００を表す画像データを閲覧用ＰＣ１０１に送信する。これにより、閲覧用ＰＣ１０１に備えられる表示部（不図示）上に図１２（ａ）に示す画像（即ち、元画像３００）が表示される。
【０１０９】
閲覧用ＰＣ１０３が、サーバ３内の特殊画像ファイル３４０に対応する画像を閲覧用ＰＣ１０３に送信するように送信要求をサーバ３に対して出した際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊画像ファイル３４０の公開レベル情報と公開管理メモリ６５内の公開管理関係情報に基づいて、閲覧用ＰＣ１０３に与えられるべき権限を認識する。上述したように、閲覧用ＰＣ１０３に与えられるべき権限は第３の権限である。この場合、サーバ３の画像処理部６２（図５参照）は、サーバＨＤＤ６４から特殊画像ファイル３４０内の加工画像３２０を読み出し、復元処理を行うことなく、加工画像３２０を表す画像データを閲覧用ＰＣ１０３に送信する。これにより、閲覧用ＰＣ１０３に備えられる表示部（不図示）上に図１２（ｃ）に示す画像（即ち、加工画像３２０）が表示される。
【０１１０】
閲覧用ＰＣ１０２が、サーバ３内の特殊画像ファイル３４０に対応する画像を閲覧用ＰＣ１０２に送信するように送信要求をサーバ３に対して出した際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊画像ファイル３４０の公開レベル情報と公開管理メモリ６５内の公開管理関係情報に基づいて、閲覧用ＰＣ１０２に与えられるべき権限を認識する。上述したように、閲覧用ＰＣ１０２に与えられるべき権限は第２の権限である。この場合、サーバ３の画像処理部６２（図５参照）は、サーバＨＤＤ６４から特殊画像ファイル３４０内の加工画像３２０と復元用情報を読み出し、復元用情報に基づいて加工画像３２０から元画像３００を一旦復元した後、元画像３００内の顔領域３１１及び３１２に対して所定の加工処理を施すことによって第２の加工画像を生成する。そして、この第２の加工画像を表す画像データを閲覧用ＰＣ１０２に送信する。これにより、閲覧用ＰＣ１０２に備えられる表示部（不図示）上に図１２（ｂ）に示す画像（即ち、第２の加工画像）が表示される。尚、撮像装置１又はユーザＰＣ２において、加工画像３２０を第２の加工画像に変換するための情報を復元用情報に含めておくようにしてもよく、そのようにすれば、元画像３００を一旦生成する必要は無い。
【０１１１】
第２の加工画像を生成する際に用いる加工処理として、撮像装置１の加工処理部８２にて採用可能な任意の加工処理を用いることができる。但し、元画像３００から第２の加工画像を生成する際に用いる加工処理の種類及び／又は強度を加工画像３２０を生成する際のそれと異ならせて、加工画像３２０と第２の加工画像を異ならせる。どのような加工処理を用いて第２の加工画像を生成するかは、予めサーバ３及び撮像装置１を含む画像管理システム全体内で予め設定される、或いは、ヘッダ領域３４１の拡張情報によって規定される。今の例の場合、第２の加工画像の方が加工画像３２０よりも加工処理の強度が弱く、画像内の人物の顔が比較的特定されやすくなっている。
【０１１２】
また、女性の顔の公開を控えたい場合は、図１２（ｂ）に示す画像に代えて、図１３に示すような画像を第２の加工画像として生成させるといったことも可能である。図１３の画像では、女性の顔領域だけに強度が比較的弱い加工処理が施されており、男性の顔領域には加工処理が施されていない。
【０１１３】
上述のようにすれば、ＳＮＳやブログ等のウェブサイトにおいて、画像中の個人のプライバシーを保護する仕組みを導入することが可能である。公開側のユーザは、公開レベル情報を設定しておくだけで（或いは撮像装置１で自動的に設定される公開レベル情報を利用するだけで）、簡便にプライバシーの保護効果を享受することができる。
【０１１４】
公開側で詳細に加工対象領域や公開レベル情報を設定することもできるのであるが、その設定を行おうとすると、その設定分だけユーザに負担がかかる。公開しようとする画像の枚数は多数であることが通常であるので、以下のようにすればユーザの負担が軽減され、実用性が増す。例えば、人物の顔をプライバシー保護の対象と考える場合、一旦、顔領域を加工対象領域とするように且つ図１１に示すような公開レベル情報が自動的に設定されるように撮像装置１又はユーザＰＣ２を操作しておく。そうすると、その後は、プライバシー保護のための操作を殆ど要することなく、公開側のユーザは特殊画像ファイルを次々とアップロードすることができる。
【０１１５】
また、公開レベル情報に基づく公開制御の他に、認証コードを利用した公開制御も実施することが可能である。例えば、ユーザＰＣ２のユーザが、第３の権限しか有さない閲覧用ＰＣ１０３のユーザに、特別に特殊画像ファイル３４０の元画像３００をサーバ３経由で提供したい場合、ユーザＰＣ２のユーザが閲覧用ＰＣ１０３のユーザに、ヘッダ領域３４１内の認証コードをパスワードとして伝える。閲覧用ＰＣ１０３のユーザが該パスワードを沿えて特殊画像ファイル３４０に対応する画像の送信要求をサーバ３に対して出力した際、サーバ３の主制御部６１は、閲覧用ＰＣ１０３から送られてきたパスワードとサーバＨＤＤ６４内の特殊画像ファイル３４０に格納された認証コードとを照合し、両者の合致が確認されれば、特殊画像ファイル３４０内の加工画像３２０と復元用情報から元画像３００を復元して元画像３００を表す画像データを閲覧用ＰＣ１０３に送信する（合致しなければ該送信は行われない）。これにより、閲覧用ＰＣ１０３に備えられる表示部（不図示）上に元画像３００が表示される。
【０１１６】
尚、パスワードを伝える代わりに、閲覧用ＰＣ１０３のＩＤ番号と認証コードをリンクさせておいてもよい。つまり、単純には例えば、ヘッダ領域３４１の認証コードが閲覧用ＰＣ１０３のＩＤ番号と同じとなるように、認証コードを撮像装置１又はユーザＰＣ２上で設定しておき、その認証コードを含む特殊画像ファイル３４０をサーバ３にアップロードするようにする。閲覧用ＰＣ１０３のユーザが特殊画像ファイル３４０に対応する画像の送信要求をサーバ３に対して出力した際、サーバ３の主制御部６１は、閲覧用ＰＣ１０３のＩＤ番号とヘッダ領域３４１の認証コードを照合し、両者の合致が確認されれば、特殊画像ファイル３４０内の加工画像３２０と復元用情報から元画像３００を復元して元画像３００を表す画像データを閲覧用ＰＣ１０３に送信する（合致しなければ該送信は行われない）。
【０１１７】
この他、様々な変形例があるが、以下に利用可能な変形例を列記する。
【０１１８】
変形例１：認証コードを、ヘッダ領域３４１内の各情報へのアクセス制限に利用することも可能である。例えば、サーバ３は、サーバＨＤＤ６４における特殊画像ファイル３４０のヘッダ領域３４１の各情報を、認証コードをサーバ３に与えた閲覧用ＰＣに対してのみ、提供する。これに類似して、公開レベル情報を、ヘッダ領域３４１内の各情報へのアクセス制限に利用することも可能である。例えば、サーバ３は、サーバＨＤＤ６４における特殊画像ファイル３４０のヘッダ領域３４１の各情報を、第１の権限を有する閲覧用ＰＣ１０１に対してのみ、提供する。
【０１１９】
変形例２：図１１に示すような内容を規定の記述形式に従って記述したものを公開レベル情報としてもよいが、例えば、図３に示される画像管理システムの全体で図１１に示す内容が「１」であることを規定しておくようにしてもよい。この場合、ヘッダ領域３４１には「１」を公開レベル情報として記述しておけば足る。この場合、勿論、図１１に示す公開レベル情報と異なる公開レベル情報には１以外の文字列が割り当てられる。それ以外にも、画像管理システム内で規定された任意の記述方式で公開レベル情報を表すことが可能である。また、図１１に示す各公開関係と各権限との関係は例示であり、ユーザがそれを様々に変更可能である。
【０１２０】
変形例３：上述の例では、第１、第２、第３の権限を有する閲覧用ＰＣからの送信要求に対して、夫々、元画像３００、加工画像３２０及び第２の加工画像を送信しているが、これはあくまでも例示であり、様々に変形可能である。例えば、第１、第２、第３の権限を有する閲覧用ＰＣからの送信要求に対して、夫々、元画像３００、元画像３００及び加工画像３２０を送信するようにしてもよいし、夫々、元画像３００、加工画像３２０及び加工画像３２０を送信するようにしてもよい。また、第３の権限を有する閲覧用ＰＣからの送信要求に対しては画像の送信を一切行わないといったことも可能である。
【０１２１】
変形例４：上述の例では、公開レベル情報によって、公開の仕方を３段階に分類しているが、この段階数は任意である。ＳＮＳ等の規定に応じて、公開の仕方を４段階以上に分類することも可能であるし、２段階までの分類に限定されることもある。セキュリティ用途であれば、一般に、２段階で足るともいえる。また、同様に、権限の分類数も３以外となりうる。尚、変形例３で例示した如く、第１、第２、第３の権限を有する閲覧用ＰＣからの送信要求に対して、夫々、元画像３００、元画像３００及び加工画像３２０を送信するようにした場合は、結果的に公開の仕方が２段階に分類されていることになる。
【０１２２】
＜＜第５実施例＞＞
静止画像の特殊画像ファイルに関する動作説明を行ってきたが、同様の動作を、動画像にも適用することができる。動画像用の特殊画像ファイルに関する実施例を、第５実施例として説明する。
【０１２３】
図１４に、図１の録画ボタン２６ａの操作に伴って作成されメモリカード１８に記録される特殊画像ファイル４００のデータ構造を示す。特殊画像ファイル４００は、動画像用の特殊画像ファイルであり、ＣＰＵ２３の制御の下、撮像装置１内で作成される。
【０１２４】
特殊画像ファイル４００は、ヘッダ領域４０１と本体領域４０２から形成される。当然ではあるが、同一の特殊画像ファイル内に定義されたヘッダ領域と本体領域は互いに関連付けられている。特殊画像ファイル４００の場合、ヘッダ領域４０１と本体領域４０２は互いに関連付けられ、特殊画像ファイル４００内に格納された各データは互いに関連付けられている。
【０１２５】
１つの動画像は、時系列で並ぶ複数のフレーム画像によって形成される。周期的に訪れる各フレームにおいて、１つのフレーム画像が得られる。各フレーム画像は、撮像部１１にて順次得られる各撮影画像である。動画像においては、各フレーム画像が図６の加工処理部８２に対する元画像となり、各元画像が加工画像に変換される。
【０１２６】
本体領域４０２には各加工画像を表す各画像データが格納される。この各画像データは、各加工画像を図１の圧縮処理部１６にて圧縮することによって得られた、圧縮された映像信号としての圧縮データである。ヘッダ領域４０１には加工対象領域の関連情報等が格納される。典型的には例えば、フレームごとに、加工対象領域ＩＤ、加工位置・大きさ情報、復元処理情報、認証コード、公開レベル情報及び拡張情報が定められ、それらがヘッダ領域４０１に格納される。この際、１つのフレーム画像内に加工対象領域が複数ある場合は、加工対象領域ごとに、加工対象領域ＩＤ、加工位置・大きさ情報、復元処理情報、認証コード、公開レベル情報及び拡張情報が定められる。尚、図１４は、１つのフレーム画像内に２つの加工対象領域が存在している場合を想定している。
【０１２７】
個々のフレーム（フレーム画像）に対する、加工対象領域ＩＤ、加工位置・大きさ情報、復元処理情報、認証コード、公開レベル情報及び拡張情報は、静止画像用の特殊画像ファイルにおけるそれらと同様である。ヘッダ領域４０１には、静止画像用のヘッダ領域における情報と同様の情報が、動画像を形成するフレームの個数分だけ格納されることとなる。個々のフレームに対して、静止画像に対して説明してきた上述の各事項を適用することができる。
【０１２８】
個々のフレームに対して公開レベル情報等を個別に設定することができるのであるが、例えば、公開レベル情報を全フレームに対して共通とすることも可能である。復元処理情報及び認証コードについても同様である。公開レベル情報、復元処理情報及び認証コードを全フレームに対して共通とした場合、第２番目以降のフレームに対しては加工位置・大きさ情報のみをヘッダ領域４０１に格納していけば足る。
【０１２９】
また、第ｋ番目のフレームに対する公開レベル情報を第（ｋ−１）番目のフレームに対する公開レベル情報から変更する場合は、第ｋ番目のフレームに対する公開レベル情報をヘッダ領域４０１に記述すればよい（ｋは２以上の整数）。この際において、第（ｋ＋１）番目以降のフレームに対する公開レベル情報をヘッダ領域４０１に記述しなかった場合、第（ｋ＋１）番目以降のフレームに対する公開レベル情報は第ｋ番目のフレームのそれと同じとされる。認証コード等に対しても同様である。
【０１３０】
図３のユーザＰＣ２及びサーバ３は、静止画像の特殊画像ファイルと同様に、動画像用の特殊画像ファイルにも準拠している。つまり、図３の撮像装置１、ユーザＰＣ２及びサーバ３を含む画像管理システム全体内において、ヘッダ領域４０１へのデータ保存形式及び特殊画像ファイル４００全体のデータ保存形式は予め規定されている。
【０１３１】
静止画像の特殊画像ファイルと同様、特殊画像ファイル４００は、ユーザＰＣ２及び通信網４を経由してサーバ３にアップロードされうる。このアップロードがなされた際、サーバ３は、特殊画像ファイル４００をユーザＰＣ２のＩＤ番号と関連付けつつサーバＨＤＤ６４に保存する。
【０１３２】
そして、特殊画像ファイル４００に対応する画像を送信するように指示する送信要求を各閲覧用ＰＣから受けた際、サーバ３は、特殊画像ファイル４００内の各フレームの加工画像ごとに第４実施例と同様の処理を行う。例えば、第４実施例の図１０と同じ公開管理関係情報が定められており、図１１と同じ公開レベル情報を全フレームに対して共通に設定していた場合において、閲覧用ＰＣ１０１が特殊画像ファイル４００に対する送信要求をサーバ３に与えた場合は、本体領域４０２内の各加工画像が元画像に復元されて各元画像から成る動画像がサーバ３から閲覧用ＰＣ１０１に送信される。一方、閲覧用ＰＣ１０３が特殊画像ファイル４００に対する送信要求をサーバ３に与えた場合は、本体領域４０２内の各加工画像を時系列で並べた動画像がサーバ３から閲覧用ＰＣ１０３に送信される。公開レベル情報が各フレーム間で異なる場合は、フレームごとに、元画像の復元及び送信に対する許可／禁止が判断される。
【０１３３】
＜＜第６実施例＞＞
次に、第６実施例について説明する。第６実施例では、通信網４などを介して公開する予定がない画像に対してプライバシー等の保護を図る手法を説明する。
【０１３４】
まず、複数の撮像装置間におけるプライバシー等の保護手法を説明する。今、図１５に示す如く、２台の撮像装置１及び１ａがあったとする。図１５における撮像装置１は、図１及び図３に示すそれと同じものである。撮像装置１ａは、撮像装置１と同一の構成を有する撮像装置である。撮像装置１ａの全体ブロック図は、図１のそれと同じであるため、重複する図示を省略する。
【０１３５】
撮像装置１及び１ａを含む各撮像装置には、互いに異なる固有コードが割り振られている。この固有コードは、例えば、各撮像装置に割り当てられたシリアル番号である。例えば、各撮像装置の出荷時において、撮像装置（１又は１ａ）の内部に設けられた不揮発性メモリ（不図示）に上記の固有コードを保存しておく。今、撮像装置１に割り当てられた固有コードを第１の固有コードと呼び、撮像装置１ａに割り当てられた固有コードを第２の固有コードと呼ぶ。上述の説明から明らかなように、第１の固有コードと第２の固有コードは互いに異なる。
【０１３６】
本実施例において、各撮像装置（１、１ａ）は、自身に割り当てられた固有コードを認証コードとして特殊画像ファイルのヘッダ領域に書き込むものとする。また、本実施例では、上述の他の実施例で述べたのと異なり、特殊画像ファイルのヘッダ領域における認証コードをユーザが変更できないものとする。また更に、本実施例において、各撮像装置（１、１ａ）には特殊画像ファイルに対する閲覧用ソフトウェアが導入されており、各撮像装置（１、１ａ）は該閲覧用ソフトウェア上で特殊画像ファイル内の画像データを読み出すものとする（該閲覧用ソフトウェアを用いることなく、特殊画像ファイル内の画像データを読み出すことができないとする）。閲覧用ソフトウェアは、図１のＣＰＵ２３上で動作する。
【０１３７】
そして、今、撮像装置１において、静止画像又は動画像が撮影され、静止画像用又は動画像用の特殊画像ファイル４３０が撮像装置１のメモリカード１８に保存された場合を考える。特殊画像ファイル４３０のデータ構造は、図８の特殊画像ファイル３４０又は図１４の特殊画像ファイル４００のそれと同様である。この特殊画像ファイル４３０のヘッダ領域には、撮像装置１に割り当てられた第１の固有コードが認証コードとして書き込まれることになる。
【０１３８】
閲覧用ソフトウェアは、特殊画像ファイル４３０のヘッダ領域に書き込まれた認証コードと当該閲覧用ソフトウェアが導入された撮像装置の固有コードとを照合し、両者の一致が確認された場合にのみ、特殊画像ファイル４３０内の加工画像から元画像を復元して、該元画像を当該閲覧用ソフトウェアが導入された撮像装置の表示部に表示させる。尚、この復元は、例えば、図１の映像信号処理部１３に実装された復元処理部（不図示）によって実施される。また、認証コードと固有コードとの照合を行う照合部と、その照合結果に基づく元画像の復元及び表示の許可／禁止を判別する判別部は、ＣＰＵ２３によって実現されることになる。
【０１３９】
具体的には、撮像装置１において以下のような動作が行われる。撮像装置１のユーザが特殊画像ファイル４３０に対応する元画像を閲覧しようとする場合、その閲覧希望を指示する操作を操作キー２６ｃに対して行う。この操作がなされると、閲覧用ソフトウェア（即ち、撮像装置１のＣＰＵ２３）が特殊画像ファイル４３０のヘッダ領域に書き込まれた認証コードをメモリカード１８から読み出すと共に撮像装置１に割り当てられた固有コードを上記不揮発性メモリ等から読み出し、読み出した認証コードと固有コードを照合する。今の場合、両者が一致しているため、閲覧用ソフトウェア（即ち、撮像装置１のＣＰＵ２３）は元画像の復元及び表示を許可する。従って、撮像装置１において特殊画像ファイル４３０内の加工画像から元画像が復元され、該元画像が撮像装置１の表示部２７の表示画面上に表示される。
【０１４０】
一方、特殊画像ファイル４３０を格納したメモリカード１８を撮像装置１ａに装着し、撮像装置１ａのユーザが特殊画像ファイル４３０に対応する元画像を閲覧しようとした場合は、撮像装置１ａにおいて以下のような動作が行われる。撮像装置１ａにおいて、元画像の閲覧希望を指示する操作がなされると、閲覧用ソフトウェア（即ち、撮像装置１ａのＣＰＵ２３）が特殊画像ファイル４３０のヘッダ領域に書き込まれた認証コードをメモリカード１８から読み出すと共に撮像装置１ａに割り当てられた固有コードを上記不揮発性メモリ等から読み出し、読み出した認証コードと固有コードを照合する。今の場合、両者は一致していないため、閲覧用ソフトウェア（即ち、撮像装置１ａのＣＰＵ２３）は元画像の復元及び表示を禁止する。この場合、例えば、特殊画像ファイル４３０内の加工画像が撮像装置１ａの表示部２７の表示画面上に表示される。或いは、撮像装置１ａの表示部２７の表示画面上に、画像を表示できない旨のメッセージが表示される。
【０１４１】
尚、撮像装置１及び１ａの内、撮像装置１においてのみ、元画像の復元の許可／禁止に対する、上述のような処理を解除可能としておくとよい。この解除は、閲覧用ソフトウェア上で、認証コードと固有コードとの合致を条件として実行される（従って、撮像装置１ａでは実行できない）。この解除を指示する操作が撮像装置１に対してなされた後は、特殊画像ファイル４３０に対応する元画像の復元及び表示を撮像装置１ａ上でも行うことが可能となる。
【０１４２】
次に、上記の特殊画像ファイル４３０を例にとりつつ、ＰＣ上におけるプライバシー等の保護手法を説明する。今、図１６に示す如く、ユーザＰＣ２の他に、ユーザＰＣ２とは異なるパーソナルコンピュータ２ａ（以下、ＰＣ２ａという）があったとする。ＰＣ２ａは、ユーザＰＣ２と同一の構成を有する。ＰＣ２ａの内部ブロック図は、図４のそれと同じであるため、重複する図示を省略する。特殊画像ファイル４３０は、ユーザＰＣ２とＰＣ２ａに提供される。
【０１４３】
本実施例において、ユーザＰＣ２及びＰＣ２ａには特殊画像ファイルに対する専用ソフトウェアが導入されており、ユーザＰＣ２及びＰＣ２ａを含む、特殊画像ファイルにアクセス可能な再生機器（画像表示装置）は、その専用ソフトウェア上でしか特殊画像ファイル内の各データの読み出し及び編集ができないものとする。専用ソフトウェアを表すプログラムは、ハードディスク等から成る図４のメモリ４８に格納され、専用ソフトウェアは主制御部４１上で動作する。
【０１４４】
専用ソフトウェアには、ＰＣ用登録コードを登録可能である。この登録は、専用ソフトウェアを再生機器（例えば、ユーザＰＣ２及びＰＣ２ａ）に導入する際に行われる。撮像装置１及びユーザＰＣ２のユーザは、ユーザＰＣ２に専用ソフトウェアを導入する際に、撮像装置１に割り当てられた第１の固有コードをユーザＰＣ２に与えることにより、第１の固有コードをＰＣ用登録コードとしてユーザＰＣ２の専用ソフトウェア上に登録する。一方、撮像装置１ａ及びＰＣ２ａのユーザは、ＰＣ２ａに専用ソフトウェアを導入する際に、撮像装置１ａに割り当てられた第２の固有コードをＰＣ２ａに与えることにより、第２の固有コードをＰＣ用登録コードとしてＰＣ２ａの専用ソフトウェア上に登録する。第１の固有コードは、撮像装置１ａ及びＰＣ２ａのユーザにとって不明である。
【０１４５】
専用ソフトウェアは、特殊画像ファイル４３０のヘッダ領域に書き込まれた認証コード（今の例の場合、第１の固有コード）と当該専用ソフトウェアに登録されたＰＣ用登録コードとを照合し、両者の一致が確認された場合にのみ、特殊画像ファイル４３０内の加工画像から元画像を復元して、該元画像を当該専用ソフトウェアが導入された再生機器の表示部に表示させる。尚、この復元は、例えば、図４の画像処理部４２（復元処理部）によって実施される。また、認証コードとＰＣ用登録コードとの照合を行う照合部と、その照合結果に基づく元画像の復元及び表示の許可／禁止を判別する判別部は、主制御部４１によって実現されることになる。
【０１４６】
具体的には、ユーザＰＣ２において以下のような動作が行われる。ユーザＰＣ２のユーザが特殊画像ファイル４３０に対応する元画像を閲覧しようとする場合、その閲覧希望を指示する操作をＰＣ操作キー４７に対して行う。この操作がなされると、専用ソフトウェア（即ち、ユーザＰＣ２の主制御部４１）が特殊画像ファイル４３０のヘッダ領域に書き込まれた認証コードとユーザＰＣ２の専用ソフトウェアに登録されたＰＣ用登録コードを照合する。今の場合、両者が一致しているため、専用ソフトウェア（即ち、ユーザＰＣ２の主制御部４１）は元画像の復元及び表示を許可する。従って、ユーザＰＣ２において特殊画像ファイル４３０内の加工画像から元画像が復元され、該元画像がユーザＰＣ２の表示部４５の表示画面上に表示される。また、ユーザＰＣ２において、元画像の編集も許可される。
【０１４７】
一方、ＰＣ２ａのユーザが特殊画像ファイル４３０に対応する元画像を閲覧しようとした場合は、ＰＣ２ａにおいて以下のような動作が行われる。ＰＣ２ａのユーザは、その閲覧希望を指示する操作をＰＣ２ａのＰＣ操作キー４７に対して行う。この操作がなされると、専用ソフトウェア（即ち、ＰＣ２ａの主制御部４１）が特殊画像ファイル４３０のヘッダ領域に書き込まれた認証コードとＰＣ２ａの専用ソフトウェアに登録されたＰＣ用登録コードを照合する。今の場合、両者は一致していないため、専用ソフトウェア（即ち、ＰＣ２ａの主制御部４１）は元画像の復元及び表示を禁止する。この場合、例えば、特殊画像ファイル４３０内の加工画像がＰＣ２ａの表示部４５の表示画面上に表示される。或いは、ＰＣ２ａの表示部４５の表示画面上に、画像を表示できない旨のメッセージが表示される。
【０１４８】
尚、ユーザＰＣ２及びＰＣ２ａの内、ユーザＰＣ２においてのみ、元画像の復元の許可／禁止に対する、上述のような処理を解除可能としておくとよい。この解除は、専用ソフトウェア上で、認証コードとＰＣ用登録コードとの合致を条件として実行される（従って、ＰＣ２ａでは実行できない）。この解除を指示する操作がユーザＰＣ２に対してなされた後は、特殊画像ファイル４３０に対応する元画像の復元及び表示をＰＣ２ａ上でも行うことが可能となる。
【０１４９】
上述のように処理することで、撮像装置１又はユーザＰＣ２以外では元画像は表示されなくなるため、メモリカード１８が紛失又は盗難されたり、コンピュータウイルスやファイル交換ソフトの悪用等によってネット経由で特殊画像ファイル４３０が流出した場合でも、プライバシー等が保護される。
【０１５０】
＜＜第７実施例＞＞
上述の各実施例にて生成された静止画像用又は動画像用の特殊画像ファイルは、メモリカード１８以外の記録媒体にコピー（複製）される可能性があるが、このコピーに対して、プライバシー等の保護を図る仕組みを導入することもできる。静止画像用の特殊画像ファイルを例にとり、これを第７実施例として説明する。本実施例では、特殊画像ファイルを特定の複製用ソフトウェア上でしかコピーできないものとする。複製用ソフトウェアは、例えば、ユーザＰＣ２に導入され、ユーザＰＣ２上で動作する。
【０１５１】
図１７に、本実施例に係る特殊画像ファイル５００のデータ構造を示す。特殊画像ファイル５００は、図８のヘッダ領域３４１に権限レベル情報を付加したヘッダ領域５０１と、図８の本体領域３４２と同じ本体領域５０２と、から形成される。権限レベル情報がヘッダ領域５０１内の権限管理情報に含まれる、と考えることもできる。
【０１５２】
権限レベル情報は、複数段階に分類された権限レベルの何れかを示す。今、権限レベル情報は「１」、「２」又は「３」の何れかの値をとり、権限レベルが３段階で分類されるものとする。勿論、権限レベルを３段階以外の段階数で分類しても構わない。権限レベル情報が「１」である時に権限レベルは最も高く、権限レベル情報の数値が大きくなるにつれて権限レベルが低くなるものとする。
【０１５３】
権限レベル情報は、当初「１」となっている。つまり、撮像装置１上で特殊画像ファイル５００を作成及び保存する際、権限レベル情報として「１」を書き込むようにする。ユーザは、この権限レベル情報を変更できないものとする。
【０１５４】
複製用ソフトウェア上で特殊画像ファイル５００を複製する時、権限レベル情報だけは複製元の特殊画像ファイルのそれから変更される。具体的には、複製元の特殊画像ファイルにおける権限レベル情報の数値に対して複製先の特殊画像ファイルにおける権限レベル情報の数値を１以上大きくする。例えば、複製元の特殊画像ファイルにおける権限レベル情報が「１」であるとき、複製先の特殊画像ファイルにおける権限レベル情報は「２」とされ、複製元の特殊画像ファイルにおける権限レベル情報が「２」であるとき、複製先の特殊画像ファイルにおける権限レベル情報は「３」とされる。但し、複製しようとするユーザが複製用ソフトウェアが導入された機器（例えばユーザＰＣ２）に対してヘッダ領域５０１に格納された認証コードを与えた上で複製を行った場合は、権限レベル情報の変更は行われないものとする。
【０１５５】
今、特殊画像ファイル５００内に対応する元画像が図７（ａ）の元画像３００であるとする。本実施例において、撮像装置１及びユーザＰＣ２を含む、特殊画像ファイル５００にアクセス可能な再生機器（画像表示装置）は、権限レベル情報に応じた画像の表示を行う。つまり、特殊画像ファイル内の画像を表示する際、その再生機器は自身に与えられた特殊画像ファイル５００内の権限レベル情報を参照する。そして、権限レベル情報が「１」の時は、特殊画像ファイル５００内の復元用情報に基づいて特殊画像ファイル５００内の加工画像から元画像３００を復元して元画像３００を表示する。一方、権限レベル情報が「２」の時は、図１２（ｂ）に示す第２の加工画像を生成し、第２の加工画像を表示する。第２の加工画像の生成手法は、第４実施例で記載したものと同様である。また、権限レベル情報が「３」の時は、図１２（ｃ）に示す加工画像を表示する（即ち、特殊画像ファイル５００内の加工画像をそのまま表示する）。
【０１５６】
上述の如く、コピーを繰り返す度に権限レベル情報を変更していくことにより、（再生に関する権限レベルを低下させていくことにより）、顔を特定可能な画像が不特定の人間に流通する可能性が抑制され、プライバシー等の保護が図られる。尚、上述した、権限レベル情報の変更の仕方は例示であり、それを上述の例と異ならせることも可能である。
【０１５７】
＜＜第８実施例＞＞
第８実施例について説明する。第８実施例では、図６の顔検出部８１が、撮影画像（元画像）から顔領域を単に検出するだけでなく、検出した顔領域が特定顔条件を満たすか否かを判断可能なように形成されている。特殊記録方式によってメモリカード１８に記録されるべき画像の取得に先立って、ユーザは、特定顔条件を撮像装置１に設定しておくことができる。そして、第８実施例では、顔検出部８１による顔検出結果だけでなく、特定顔条件の成否にも基づいて加工対象領域が設定される。加工対象領域の設定動作を除いて、第８実施例に係る撮像装置１の構成及び動作は、第１実施例で説明したものと同様である。
【０１５８】
例えば、検出した顔領域に含まれる顔が、撮像装置１に予め設定されている登録人物の顔である場合、特定顔条件が満たされると判断される。このような特定顔条件を利用する場合、ユーザは、登録しておきたい人物の顔の画像を登録顔画像として撮像装置１に予め記憶させておく。その後、元画像から顔領域が抽出された時、顔検出部８１は、その抽出した顔領域の画像の画像データと登録顔画像の画像データに基づいて両画像間の類似度を評価し、評価した類似度が所定の基準類似度よりも高い場合、抽出した顔領域内の顔が登録人物の顔であると判断する一方、そうでない場合、抽出した顔領域内の顔が登録人物の顔でないと判断する。抽出した顔領域内の顔が登録人物の顔であると判断したとき、その登録人物の顔を含む顔領域は特定顔条件（以下、第１の特定顔条件とも呼ぶ）を満たすと判断する。
【０１５９】
或いは例えば、検出した顔領域に含まれる顔を有する人物の性別を推定可能に顔検出部８１を形成しておく。一方で、ユーザは、特定顔条件の成否に関わる特定性別として男性及び女性の何れか一方を、操作部２６に対する所定操作等によって予め設定しておく。元画像から顔領域が抽出された時、顔検出部８１は、その抽出した顔領域の画像データに基づいて、その顔領域に含まれる顔が男性の顔であるのか或いは女性の顔であるのかを推定し、推定した性別と特定性別が一致するときに、抽出した顔領域（即ち、特定性別の顔を含む顔領域）は特定顔条件（以下、第２の特定顔条件とも呼ぶ）を満たすと判断する。
【０１６０】
或いは例えば、検出した顔領域に含まれる顔を有する人物の人種を推定可能に顔検出部８１を形成しておく。ユーザは、特定顔条件の成否に関わる特定人種を操作部２６に対する所定操作等によって予め設定しておく。特定人種は、複数の人種の内の何れかであり、複数の人種には、白人、黒人、アジア人が含まれる。元画像から顔領域が抽出された時、顔検出部８１は、その抽出した顔領域の画像データに基づいて、その顔領域に含まれる顔の人種を推定し、推定した人種と特定人種が一致するときに、抽出した顔領域（即ち、特定人種の顔を含む顔領域）は特定顔条件（以下、第３の特定顔条件とも呼ぶ）を満たすと判断する。
【０１６１】
或いは例えば、検出した顔領域に含まれる顔を有する人物の年齢層を推定可能に顔検出部８１を形成しておく。ユーザは、特定顔条件の成否に関わる特定年齢層を操作部２６に対する所定操作等によって予め設定しておく。人間の年齢（例えば０歳から１００歳）を複数の年齢層に切り分け、その複数の年齢層の内の１つを特定年齢層として設定しておくことができる。例えば、１１歳以下、１２〜１９歳以下、２０〜３９歳、４０歳〜５９歳、６０歳以上を、夫々、第１、第２、第３、第４及び第５の年齢層とし、第１〜第５の年齢層によって上記の複数の年齢層を形成することができる。元画像から顔領域が抽出された時、顔検出部８１は、その抽出した顔領域の画像データに基づいて、その顔領域に含まれる顔の年齢層を推定し、推定した年齢層と特定年齢層が一致するときに、抽出した顔領域（即ち、特定年齢層の顔を含む顔領域）は特定顔条件（以下、第４の特定顔条件とも呼ぶ）を満たすと判断する。
【０１６２】
顔領域の画像データから、その顔領域に対応する人物の性別、人種及び年齢層を推定する方法として、公知の方法（例えば、特開２００４−２４６４５６号公報、特開２００５−２６６９８１号公報または特開２００３−２４２４８６号公報に記載の方法）を含む任意の方法を利用することができる。
【０１６３】
図６の加工処理部８２は、顔検出部８１にて抽出された、元画像内の顔領域の位置及び大きさを特定する顔検出結果と、上記の特定顔条件の成否に基づいて、加工対象領域を設定する。説明の具体化のため、図７（ａ）に示す元画像３００が取得された場合を考える。
【０１６４】
この場合において、人物３０２のみが登録人物として撮像装置１に設定されているとき、加工処理部８２は、顔領域３１２を加工対象領域として設定する一方で顔領域３１１を加工対象領域から除外し、加工対象領域に対して第１実施例等で述べた加工処理を施すことにより加工画像を生成する。これによって、図１８（ａ）に示すような加工画像が得られる。
【０１６５】
或いは、女性が特定性別として撮像装置１に設定されているとき、加工処理部８２は、顔領域３１２を加工対象領域として設定する一方で顔領域３１１を加工対象領域から除外し、加工対象領域に対して第１実施例等で述べた加工処理を施すことにより加工画像を生成する。これによって、図１８（ｂ）に示すような加工画像が得られる。
【０１６６】
或いは、アジア人が特定人種として撮像装置１に設定されているとき、加工処理部８２は、顔領域３１１及び３１２の夫々を加工対象領域として設定し、各加工対象領域に対して第１実施例等で述べた加工処理を施すことにより加工画像を生成する（尚、人物３０１及び３０２はアジア人であるとする）。これによって、図１８（ｃ）に示すような加工画像が得られる。
【０１６７】
或いは、上記の第３の年齢層が特定年齢層として撮像装置１に設定されているとき、加工処理部８２は、顔領域３１１及び３１２の夫々を加工対象領域として設定し、各加工対象領域に対して第１実施例等で述べた加工処理を施すことにより加工画像を生成する（尚、人物３０１及び３０２の年齢は２０代であるとする）。これによって、図１８（ｄ）に示すような加工画像が得られる。
【０１６８】
尚、上記の第１〜第４の特定顔条件の内、２以上の特定顔条件を満たす顔領域のみが、加工対象領域として設定されるようにしてもよい。
【０１６９】
上述のような特定顔条件を利用することにより、ユーザが望む特定の人物に対してのみ、適切なプライバシー保護を成すことができる。
【０１７０】
＜＜第９実施例＞＞
第９実施例について説明する。上述の第５実施例において動画像に対する画像処理方法を説明したが、第９実施例でも、動画像に対する画像処理方法を説明する。
【０１７１】
第５実施例でも述べたように、１つの動画像は、時系列で並ぶ複数のフレーム画像によって形成される。周期的に訪れる各フレームにおいて、１つのフレーム画像が得られる。各フレーム画像は、撮像部１１にて順次得られる各撮影画像である。動画像においては、各フレーム画像が加工処理部８２に対する元画像となり、各元画像が加工画像に変換される。動画像に対する特殊画像ファイルの作成方法は、第５実施例で述べたそれと同様である。以下、第９実施例に特有の、特定被写体の追尾処理を用いた加工対象領域の設定方法を説明する。
【０１７２】
今、図１の撮像部１１を用いた撮影によって動画像６００が取得された場合を考える。図１９に、動画像６００を形成する、複数の元画像として複数のフレーム画像が示されている。動画像６００を形成する複数のフレーム画像には、時刻ｔnの撮影によって得られたフレーム画像ＦＩn、時刻ｔn+1の撮影によって得られたフレーム画像ＦＩn+1、時刻ｔn+2の撮影によって得られたフレーム画像ＦＩn+2、時刻ｔn+3の撮影によって得られたフレーム画像ＦＩn+3、・・・が含まれる（ｎは整数）。時刻ｔiから１フレーム周期分の時間が経過すると時刻ｔi+1が訪れるものとする（ｉは整数）。
【０１７３】
図２０に、第９実施例に係る映像信号処理部１３ａの内部の一部ブロック図を示す。映像信号処理部１３ａは、図１の映像信号処理部１３として利用される。映像信号処理部１３ａは、追尾処理部８３及び加工処理部８２を含む。加工処理部８２は、図６に示すそれと同じ機能を有する。追尾処理部８３は、動画像６００内に含まれる特定被写体を動画像６００内において追尾する機能を備える。
【０１７４】
追尾処理部８３は、動画像６００の画像データに基づき、各フレーム画像内における特定被写体の位置を逐次検出していくことにより、動画像６００内において特定被写体の位置を追尾する。追尾されるべき特定被写体を、以下、「追尾対象」という。
【０１７５】
追尾処理部８３は、動画像６００を形成する複数のフレーム画像の内、何れかのフレーム画像を基準フレーム画像として捉え、基準フレーム画像の画像データに基づいて追尾対象を設定すると共に基準フレーム画像における追尾対象の位置及び大きさを検出する。その後、動画像６００を形成する複数のフレーム画像の内、基準フレーム画像以外のフレーム画像を追尾対象フレーム画像として捉え、追尾対象フレーム画像の画像データに基づいて追尾対象フレーム画像における追尾対象の位置及び大きさを検出する。
【０１７６】
例えば、追尾処理部８３は、追尾対象が有する色情報に基づいて追尾処理を行う。色情報に基づく追尾処理の方法として、特開平５−２８４４１１号公報、特開２０００−４８２１１号公報、特開２００１−１６９１６９号公報などに記載の方法を用いることができる。色情報に基づく追尾処理ではなく、他の情報に基づく追尾処理（他の方法による追尾処理）を実行するようにしてもよい。例えば、画像マッチングを用いた追尾処理、オプティカルフローを用いた追尾処理、背景差分法に基づく移動物体検出を用いた追尾処理、又は、フレーム間差分法に基づく移動物体検出を用いた追尾処理を、追尾処理部８３にて実行するようにしてもよい。
【０１７７】
説明の具体化のため、以下、追尾処理部８３が色情報に基づく追尾処理を行う場合を想定する。また、追尾対象が人物である場合を考える。追尾対象が人物である場合、追尾処理部８３には、追尾処理機能だけでなく、図６の顔検出部８１が有する機能と同等の機能が備えられる。尚、追尾対象は人物以外でもよい。例えば、追尾対象は、自動車等の車両や移動するロボットであってもよい。
【０１７８】
動画像６００を形成する複数のフレーム画像の内、追尾対象が含まれる１枚のフレーム画像が基準フレーム画像として設定される。例えば、動画像６００を形成する複数のフレーム画像の内、追尾対象を含み且つ最も時間的に早く得られたフレーム画像が基準フレーム画像として設定される。説明の簡略化上、今、動画像６００を形成する複数のフレーム画像の内、４つのフレーム画像ＦＩn〜ＦＩn+3にのみ追尾対象が含まれているものとする（フレーム画像ＦＩn〜ＦＩn+3にのみ追尾対象の画像データが存在するものとする）。そうすると、フレーム画像ＦＩnが基準フレーム画像として設定される。尚、ユーザの手動操作に従って基準フレーム画像の設定を行っても良い。
【０１７９】
追尾処理部８３は、基準フレーム画像としてのフレーム画像ＦＩnの画像データに基づいて、追尾対象及び追尾色を設定する。追尾対象及び追尾色の設定方法を、図２１を参照して説明する。図２１において、破線矩形領域６１１は、追尾処理部８３の顔検出処理によって基準フレーム画像としてのフレーム画像ＦＩnから抽出された顔領域である。追尾処理部８３は、顔領域６１１に含まれる顔を有する人物を、追尾対象として設定する。顔領域６１１の抽出後、追尾処理部８３は、その顔領域６１１に対応する人物の胴体部分を含む領域である胴体領域６１２を検出する。胴体領域６１２は、顔領域６１１の下方側（眉間から口に向かう方向側）に存在する矩形領域とされる。基準フレーム画像において、胴体領域６１２の位置及び大きさは、顔領域６１１の位置及び大きさに依存して決定される。
【０１８０】
その後、追尾処理部８３は、胴体領域６１２内の画像の画像データに基づいて胴体領域６１２内の色を特定し、特定した色を追尾色として設定する。例えば、胴体領域６１２内の画像を形成する各画素の色信号（例えば、ＲＧＢ信号）に基づいて胴体領域６１２内の画像の色ヒストグラムを生成する。そして、その色ヒストグラムに基づいて胴体領域６１２内の画像における支配色又は最頻色を求め、その求めた色を追尾色として設定する。或る画像の支配色とは、その画像の画像領域の大部分を占めている色を指し、或る画像の最頻色とは、その画像の色ヒストグラムにおいて最も高い度数を有している色を指す（支配色と最頻色は同じでありうる）。或いは、胴体領域６１２内の画像を形成する各画素の色信号（例えば、ＲＧＢ信号）を平均化することにより胴体領域６１２内の画像の平均的な色を求めて、その平均的な色を追尾色として設定するようにしてもよい。
【０１８１】
尚、追尾対象及び追尾色を、操作部２６に対する手動操作によって設定するようにしても良い。例えば、ユーザが、操作部２６に対する操作を介して追尾対象となるべき人物のフレーム画像上の位置を指定することによって追尾対象が設定されてもよく、操作部２６に対する操作を介して追尾色を指定することによって追尾色が設定されてもよい。
【０１８２】
フレーム画像ＦＩnを基準フレーム画像として捉えた上で追尾対象及び追尾色が設定された後、追尾処理部８３は、フレーム画像ＦＩnより後に得られる各追尾対象フレーム画像に対して追尾処理を実行することにより、各追尾対象フレーム画像における追尾対象の位置及び大きさを検出する。より具体的には例えば、着目した追尾対象フレーム画像内に、追尾対象の胴体領域の大きさと同程度の大きさを有する追尾枠を設定して、追尾枠内における画像の色と追尾色との類似性評価を追尾枠の位置を探索範囲内で順次変更しながら実行し、最大の類似性が得られた追尾枠の位置に追尾対象の胴体領域が存在すると判断する。今回の追尾対象フレーム画像に対する探索範囲は、前回の追尾対象フレーム画像における追尾対象の位置を基準にして設定される。通常、その探索範囲は、前回の追尾対象フレーム画像における追尾対象の位置を中心とする矩形領域とされ、探索範囲のサイズ（画像サイズ）は、フレーム画像の全体画像領域のサイズよりも小さい。
【０１８３】
追尾処理部８３は、追尾対象フレーム画像ＦＩn+1、ＦＩn+2、ＦＩn+3・・・に対して、未来に向かって時間が進行する方向に追尾処理を順次実行することにより、各追尾対象フレーム画像における追尾対象の位置を検出する。尚、追尾対象フレーム画像における追尾対象の大きさは、公知の方法（例えば、特開２００４−９４６８０号公報又は特開平９−１８９９３４号公報に記載された方法）を含む任意の方法によって検出することができる。検出された追尾対象の大きさに依存して、上記の追尾枠の大きさは可変設定される。
【０１８４】
追尾処理部８３によって検出された、各追尾対象フレーム画像における追尾対象の位置及び大きさを表す追尾結果情報は、加工処理部８２に伝達される。また、基準フレーム画像における追尾対象の位置及び大きさを表す追尾初期情報も、追尾処理部８３から加工処理部８２に伝達される。
【０１８５】
加工処理部８２は、追尾初期情報に基づき、基準フレーム画像の全体画像領域の中から、追尾対象の全体又は一部の像が表れる画像領域（追尾対象を表す画像データが存在する領域）を抽出し、その抽出した画像領域を基準フレーム画像上における加工対象領域として設定する。例えば、図２１の顔領域６１１を含む画像領域、又は、顔領域６１１及び胴体領域６１２を含む画像領域、又は、追尾対象の全体像が表れる画像領域を、基準フレーム画像上における加工対象領域として設定する。
【０１８６】
更に、加工処理部８２は、追尾結果情報に基づき、追尾対象フレーム画像ごとに、追尾対象フレーム画像の全体画像領域の中から、追尾対象の全体又は一部の像が表れる画像領域（追尾対象を表す画像データが存在する領域）を抽出し、その抽出した画像領域を追尾対象フレーム画像上における加工対象領域として設定する。例えば、追尾対象フレーム画像内の追尾対象についての顔領域を含む画像領域、追尾対象フレーム画像内の追尾対象についての顔領域及び胴体領域を含む画像領域、又は、追尾対象フレーム画像内の追尾対象の全体像が表れる画像領域を、追尾対象フレーム画像上における加工対象領域として設定する。
【０１８７】
加工対象部８２は、各フレーム画像上の加工対象領域に対して、フレーム画像ごとに、第１実施例等にて述べた加工処理を施す。これにより、時系列で並ぶ複数の加工画像が生成される。動画像用の特殊画像ファイルの作成動作を含む、この複数の加工画像が生成された後の動作は、第５実施例で述べたものと同様である。
【０１８８】
図２２に、追尾対象の全体像が表れる画像領域を追尾対象領域として設定した場合における、各フレーム画像上の加工対象領域を示す。図２２において、破線矩形領域６２０〜６２３が、夫々、フレーム画像ＦＩn〜ＦＩn+3上の加工対象領域である。加工対象領域の外形形状は、勿論、矩形以外であっても構わない。
【０１８９】
尚、上述の例では、未来に向かって時間が進行する方向に追尾処理が順次実行されているが、過去に向かって時間が遡る方向に追尾処理を順次実行しても良い。つまり例えば、ユーザの手動操作又は追尾処理部８３による自動設定により、動画像６００を形成する複数のフレーム画像の内、フレーム画像ＦＩn+3が基準フレーム画像として設定された場合、フレーム画像ＦＩn+2、ＦＩn+1、ＦＩn・・・の順番で、追尾対象の追尾を行うようにしてもよい。
【０１９０】
また、基準フレーム画像から検出された顔領域が第８実施例で述べた特定顔条件を満たすか否かを判断する機能を追尾処理部８３に持たせるようにしてもよい。そして、特定顔条件を満たす顔領域を基準フレーム画像内から抽出し、抽出した顔領域に含まれる顔を有する人物を追尾対象として設定するようにしてもよい。この場合、登録人物、特定性別の人物、特定人種の人物、又は、特定年齢層の人物が追尾対象として設定される。尚、上記の第１〜第４の特定顔条件の内、２以上の特定顔条件を満たす顔領域に対応する人物のみが、追尾対象として設定されるようにしてもよい。
【０１９１】
本実施例の如く撮像装置１を形成すれば、基準フレーム画像に対して設定された追尾対象の画像が動画像全体に亘って自動的に加工される。つまり、ユーザに殆ど負担をかけることなく、追尾対象のプライバシーを動画像全体に亘って保護することができる。
【０１９２】
＜＜変形等＞＞
上述した説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態の変形例または注釈事項として、以下に、注釈１及び注釈２を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。
【０１９３】
［注釈１］
図１の撮像装置１は、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって実現可能である。特に、図６に示される各部位の機能は、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合わせによって実現可能である。
【０１９４】
図４のユーザＰＣ２及び図５のサーバ３も、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって実現可能である。特に、図４の主制御部４１の機能及び図５の主制御部６１の機能は、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合わせによって実現可能である。ソフトウェアを用いて実現される部位についてのブロック図は、その部位の機能ブロック図を表すことになる。
【０１９５】
［注釈２］
例えば、以下のように考えることができる。図１のＣＰＵ２３は、特殊画像ファイルをメモリカード１８に記録する記録制御手段としての機能を備える。図４のユーザＰＣ２において、カードスロット４４は、特殊画像ファイルを受け取るためのファイル入力手段として機能しうる。勿論、特殊画像ファイルを有線又は無線の通信によってユーザＰＣ２に提供することもできる。
【図面の簡単な説明】
【０１９６】
【図１】本発明の実施の形態に係る撮像装置の全体ブロック図である。
【図２】図１の撮像部の内部構成図である。
【図３】本発明の実施の形態に係る画像管理システムの全体構成図である。
【図４】図３のユーザＰＣの概略内部ブロック図である。
【図５】図３のサーバの概略内部ブロック図である。
【図６】図１の映像信号処理部の内部の一部ブロック図である。
【図７】図６の加工処理部に入力される元画像（ａ）と加工処理部から出力される加工画像（ｂ）とを例示する図である。
【図８】図１の撮像装置にて作成及び保存される、静止画像用の特殊画像ファイルのデータ構造を示す図である。
【図９】図６の加工処理部にて生成される加工画像の他の例を示す図である。
【図１０】図３のユーザＰＣと各閲覧用ＰＣとの関係を規定する公開管理関係情報の内容例を示す図である。
【図１１】図５のサーバのサーバＨＤＤに保存された特殊画像ファイル内の公開レベル情報の内容例を示す図である。
【図１２】図３の各閲覧用ＰＣからの送信要求に応じてサーバから送信された各画像を示す図である。
【図１３】図３の閲覧用ＰＣからの送信要求に応じてサーバが送信可能な画像の他の例を示す図である。
【図１４】図１の撮像装置にて作成及び保存される、動画像用の特殊画像ファイルのデータ構造を示す図である。
【図１５】本発明の第６実施例に係る２台の撮像装置を示す図である。
【図１６】本発明の第６実施例に係る２台のＰＣ（パーソナルコンピュータ）を示す図である。
【図１７】本発明の第７実施例に係る、静止画像用の特殊画像ファイルのデータ構造を示す図である。
【図１８】本発明の第８実施例に係り、図６の加工処理部にて生成される加工画像の例を示す図である。
【図１９】本発明の第９実施例に係り、図１の撮像部から得られる動画像を示す図である。
【図２０】本発明の第９実施例に係る映像信号処理部の内部の一部ブロック図である。
【図２１】図１９の動画像内の基準フレーム画像から顔領域及び胴体領域が抽出される様子を示した図である。
【図２２】図１９の動画像を形成する各フレーム画像に対して設定される加工対象領域を示す図である。
【符号の説明】
【０１９７】
１  撮像装置
２  ユーザＰＣ
３  サーバ
４  通信網
１０１、１０２、１０３  閲覧用ＰＣ
【図１】
2009033738.tif 000003
【図２】
2009033738.tif 000004
【図３】
2009033738.tif 000005
【図４】
2009033738.tif 000006
【図５】
2009033738.tif 000007
【図６】
2009033738.tif 000008
【図８】
2009033738.tif 000009
【図１０】
2009033738.tif 000010
【図１１】
2009033738.tif 000011
【図１４】
2009033738.tif 000012
【図１５】
2009033738.tif 000013
【図１６】
2009033738.tif 000014
【図１７】
2009033738.tif 000015
【図２０】
2009033738.tif 000016
【図７】
2009033738.tif 000017
【図９】
2009033738.tif 000018
【図１２】
2009033738.tif 000019
【図１３】
2009033738.tif 000020
【図１８】
2009033738.tif 000021
【図１９】
2009033738.tif 000022
【図２１】
2009033738.tif 000023
【図２２】
2009033738.tif 000024