(57)【要約】【課題】オーディオ信号の記録方式に対してプライバシーを保護する仕組みを導入する。【解決手段】オーディオ信号記録装置は、入力された元オーディオ信号の全区間から人の音声の信号成分を含む音声区間を検出して、前記音声区間における信号に対して暗号化処理を施すことにより、前記元オーディオ信号から暗号化オーディオ信号を生成する。そして、前記暗号化オーディオ信号と、前記暗号化オーディオ信号を復号するための復号用情報と、前記復号用情報に従った前記暗号化オーディオ信号の復号及び前記元オーディオ信号の再生出力に対する許可／禁止を再生装置側で切替制御させるための権限管理情報と、を互いに関連付けて電子ファイルに格納する。【選択図】図２
2008309959.tif 000002
【特許請求の範囲】
【請求項１】
オーディオ信号記録装置において、
入力された元オーディオ信号の全区間から人の音声の信号成分が含まれている音声区間を検出する音声区間検出手段と、
前記元オーディオ信号の内の、前記音声区間における信号に対して暗号化処理を施すことにより、前記元オーディオ信号から暗号化オーディオ信号を生成する暗号化手段と、
前記暗号化オーディオ信号と、前記暗号化オーディオ信号を復号するための復号用情報と、を互いに関連付けて格納した電子ファイルを記録手段に記録する記録制御手段と、を備えた
ことを特徴とするオーディオ信号記録装置。
【請求項２】
前記記録制御手段は、前記復号用情報に従って前記暗号化オーディオ信号を復号して該復号によって得られた前記元オーディオ信号を再生出力することに対する許可／禁止を切替制御するための権限管理情報を、更に、前記暗号化オーディオ信号及び前記復号用情報に関連付けて前記電子ファイルに格納する
ことを特徴とする請求項１に記載のオーディオ信号記録装置。
【請求項３】
前記復号用情報は、前記全区間中の何れの区間が前記音声区間であるかを表す音声区間情報を含む
ことを特徴とする請求項１または請求項２に記載のオーディオ信号記録装置。
【請求項４】
前記音声区間は、互いに異なる複数の要素区間から成り、
当該オーディオ信号記録装置は、前記音声の発話者と予め登録された登録話者との一致又は不一致を要素区間ごとに判別する話者認識手段を更に備え、
前記復号用情報は、前記全区間中の何れの区間が前記音声区間であるかを表すとともに各要素区間に対する前記話者認識手段の判別結果をも表す音声区間情報を含み、
前記記録制御手段は、前記復号用情報に従って各要素区間の前記暗号化オーディオ信号を復号して該復号によって得られた各要素区間の前記元オーディオ信号を再生出力することに対する許可／禁止を切替制御するための権限管理情報を、更に、前記暗号化オーディオ信号及び前記復号用情報に関連付けて前記電子ファイルに格納し、
前記権限管理情報は、前記登録話者の音声の信号成分を含む要素区間に対する第１の権限管理情報と、それ以外の要素区間に対する第２の権限管理情報と、を個別に含む
ことを特徴とする請求項１に記載のオーディオ信号記録装置。
【請求項５】
請求項２に記載のオーディオ信号記録装置を備えたオーディオ信号記録再生装置であって、
前記権限管理情報は、認証コードを含み、
当該オーディオ信号記録再生装置と他のオーディオ信号記録再生装置との間で互いに異なる固有コードが当該オーディオ信号記録再生装置に予め与えられており、
当該オーディオ信号記録再生装置は、
オーディオ信号を再生出力する再生出力手段と、
前記復号用情報に基づいて前記暗号化オーディオ信号を復号する復号処理手段と、
前記認証コードと当該オーディオ信号記録再生装置に対する固有コードとを照合する照合手段と、
前記照合手段による照合結果に基づいて、前記復号処理手段の復号によって得られた前記元オーディオ信号の前記再生出力手段での再生出力を許可するか否かを判別する判別手段と、を備え、
前記判別手段の判別結果に応じて前記復号処理手段及び前記再生出力手段を制御する
ことを特徴とするオーディオ信号記録再生装置。
【請求項６】
被写体に応じた画像を取得する撮像装置において、
請求項１〜請求項４の何れかに記載のオーディオ信号記録装置又は請求項５に記載のオーディオ信号記録再生装置を備えた
ことを特徴とする撮像装置。
【請求項７】
元オーディオ信号の内の、人の音声の信号成分が含まれている音声区間における信号に対して暗号化処理を施すことによって得られた暗号化オーディオ信号のデータと、
前記暗号化オーディオ信号を復号するための復号用情報のデータと、を互いに関連付けて格納した
ことを特徴とする電子ファイル。
【請求項８】
前記復号用情報に従って前記暗号化オーディオ信号を復号して該復号によって得られた前記元オーディオ信号を再生出力することに対する許可／禁止を切替制御するための権限管理情報のデータを、更に、前記暗号化オーディオ信号のデータ及び前記復号用情報のデータに関連付けて格納した
ことを特徴とする請求項７に記載の電子ファイル。
【請求項９】
請求項２又は請求項８に記載の電子ファイルを提供元装置から受け取り、前記提供元装置と所定の関係を有し且つオーディオ信号を再生出力する再生出力手段を備えた端末装置からの送信要求に従って通信網を介して前記電子ファイルに基づく情報を前記端末装置に送信する情報提供装置であって、
前記電子ファイル内の復号用情報に基づいて前記電子ファイル内の前記暗号化オーディオ信号を復号する復号処理手段を備え、
前記送信要求があった際、前記電子ファイル内の権限管理情報と前記関係に基づいて、前記復号処理手段の復号によって得られた元オーディオ信号の前記端末装置に対する送信を許可するか否かを判別し、その判別結果に応じて前記端末装置への送信内容を制御する
ことを特徴とする情報提供装置。
【請求項１０】
オーディオ信号を再生出力する再生出力手段を備え、
請求項１０に記載された情報提供装置から通信網を介して前記電子ファイルに基づく情報を受け取って、受け取った情報に基づくオーディオ信号を前記再生出力手段にて再生出力する
ことを特徴とする端末装置。
【請求項１１】
請求項２又は請求項８に記載の電子ファイルを受け取るファイル入力手段と、オーディオ信号を再生出力する再生出力手段と、を備えたオーディオ信号再生装置において、
前記電子ファイル内の権限管理情報は、認証コードを含み、
当該オーディオ信号再生装置は、
前記電子ファイル内の復号用情報に基づいて前記電子ファイル内の暗号化オーディオ信号を復号する復号処理手段と、
前記認証コードと当該オーディオ信号再生装置に登録されたコードとを照合する照合手段と、
前記照合手段による照合結果に基づいて、前記復号処理手段の復号によって得られた前記元オーディオ信号の前記再生出力手段での再生出力を許可するか否かを判別する判別手段と、を備え、
前記判別手段の判別結果に応じて前記復号処理手段及び前記再生出力手段を制御する
ことを特徴とするオーディオ信号再生装置。
【請求項１２】
電子ファイルの記録方式において、
元オーディオ信号の内の、人の音声の信号成分が含まれている音声区間における信号に対して暗号化処理を施すことによって得られた暗号化オーディオ信号のデータと、
前記暗号化オーディオ信号を復号するための復号用情報のデータと、を互いに関連付けて記録する
ことを特徴とする電子ファイルの記録方式。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、オーディオ信号を記録するオーディオ信号記録装置、オーディオ信号の記録及び再生を行うオーディオ信号記録再生装置、並びに、デジタルビデオカメラ等の撮像装置に関する。また本発明は、オーディオ信号を格納した電子ファイルに関する。また本発明は、上記の各装置又は電子ファイルと関連する、情報提供装置、端末装置、オーディオ信号再生装置及び電子ファイルの記録方式に関する。
【背景技術】
【０００２】
近年、デジタルビデオカメラやボイスレコーダで記録したオーディオ信号のデータを、インターネットを介して、ソーシャルネットワーキングサービス（以下、「ＳＮＳ」と略記する）や所謂ブログ等のウェブサイト上で公開することが多くなっている。これまでは、家族や知人の間だけで閲覧（視聴）していた記録データも、インターネットを介して公開することで不特定多数の人間が閲覧することが可能となる。このような背景の中、公開データに関するプライバシーを保護する技術の必要性も指摘されている。オーディオ信号に関してプライバシーの保護に重要なのは発話者の音声を含む部分であり、その部分のデータが適切に扱われれば、発話者のプライバシーが保護される。
【０００３】
尚、オーディオ信号に関する従来技術として下記特許文献１及び２に記載された技術がある。
【０００４】
特許文献１の技術は、著作権保護対象となる音楽情報を保護するための技術であり、人が会話しているシーンなどに対して提供可能な技術ではない。
【０００５】
特許文献２の技術では、提供するデータを複数のブロックに分割して各ブロックにセキュリティレベルを設定する。そして、再生時に、設定されたセキュリティレベルに応じて各ブロックのデータの提供を許可するか否かを判断する。この技術では、データ提供時にブロックを分割して各ブロックにセキュリティレベルを設定するという作業が必要となり、手間がかかる。
【０００６】
【特許文献１】特開２００１−７６４３１号公報
【特許文献２】特開２００４−２８７５２５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
そこで本発明は、オーディオ信号に関するプライバシー保護に寄与する、オーディオ信号記録装置、オーディオ信号記録再生装置、撮像装置、電子ファイル、情報提供装置、端末装置、オーディオ信号再生装置及び電子ファイルの記録方式を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために本発明に係るオーディオ信号記録装置は、入力された元オーディオ信号の全区間から人の音声の信号成分が含まれている音声区間を検出する音声区間検出手段と、前記元オーディオ信号の内の、前記音声区間における信号に対して暗号化処理を施すことにより、前記元オーディオ信号から暗号化オーディオ信号を生成する暗号化手段と、前記暗号化オーディオ信号と、前記暗号化オーディオ信号を復号するための復号用情報と、を互いに関連付けて格納した電子ファイルを記録手段に記録する記録制御手段と、を備えたことを特徴とする。
【０００９】
オーディオ信号記録装置上で電子ファイルを保存する時点で暗号化処理が実施され、電子ファイル内の音声区間におけるオーディオ信号は暗号化されるため、仮に、電子ファイルが不正に流出した場合でも、音声に関するプライバシーが保護される。また、プライバシー保護にとって重要な音声区間が自動的に検出され、音声区間に対して暗号化処理が自動的に施されるため、プライバシー保護を図るためのユーザ負担が極めて少ない。
【００１０】
そして例えば、前記記録制御手段は、前記復号用情報に従って前記暗号化オーディオ信号を復号して該復号によって得られた前記元オーディオ信号を再生出力することに対する許可／禁止を切替制御するための権限管理情報を、更に、前記暗号化オーディオ信号及び前記復号用情報に関連付けて前記電子ファイルに格納する。
【００１１】
権限管理情報を適切に設定することにより、ユーザの意図に沿った、元オーディオ信号の再生制御が可能となる。
【００１２】
具体的には例えば、前記復号用情報は、前記全区間中の何れの区間が前記音声区間であるかを表す音声区間情報を含む。
【００１３】
また具体的には例えば、前記暗号化手段は、前記元オーディオ信号の内の、前記音声区間以外の区間における信号を、前記暗号化処理の対象から除外する。
【００１４】
また例えば、前記音声区間は、互いに異なる複数の要素区間から成り、当該オーディオ信号記録装置は、前記音声の発話者と予め登録された登録話者との一致又は不一致を要素区間ごとに判別する話者認識手段を更に備え、前記復号用情報は、前記全区間中の何れの区間が前記音声区間であるかを表すとともに各要素区間に対する前記話者認識手段の判別結果をも表す音声区間情報を含み、前記記録制御手段は、前記復号用情報に従って各要素区間の前記暗号化オーディオ信号を復号して該復号によって得られた各要素区間の前記元オーディオ信号を再生出力することに対する許可／禁止を切替制御するための権限管理情報を、更に、前記暗号化オーディオ信号及び前記復号用情報に関連付けて前記電子ファイルに格納し、前記権限管理情報は、前記登録話者の音声の信号成分を含む要素区間に対する第１の権限管理情報と、それ以外の要素区間に対する第２の権限管理情報と、を個別に含む。
【００１５】
また、本発明に係るオーディオ信号記録再生装置は、上記のオーディオ信号記録装置を備えている。そして、前記権限管理情報は、認証コードを含み、当該オーディオ信号記録再生装置と他のオーディオ信号記録再生装置との間で互いに異なる固有コードが当該オーディオ信号記録再生装置に予め与えられており、当該オーディオ信号記録再生装置は、オーディオ信号を再生出力する再生出力手段と、前記復号用情報に基づいて前記暗号化オーディオ信号を復号する復号処理手段と、前記認証コードと当該オーディオ信号記録再生装置に対する固有コードとを照合する照合手段と、前記照合手段による照合結果に基づいて、前記復号処理手段の復号によって得られた前記元オーディオ信号の前記再生出力手段での再生出力を許可するか否かを判別する判別手段と、を備え、前記判別手段の判別結果に応じて前記復号処理手段及び前記再生出力手段を制御することを特徴とする。
【００１６】
これにより、電子ファイルを記録した記録媒体の紛失等があった場合でも、音声に関するプライバシーが保護される。
【００１７】
また、本発明に係る撮像装置は、被写体に応じた画像を取得する。そして、上記のオーディオ信号記録装置又はオーディオ信号記録再生装置を備えている。
【００１８】
また、本発明に係る電子ファイルは、元オーディオ信号の内の、人の音声の信号成分が含まれている音声区間における信号に対して暗号化処理を施すことによって得られた暗号化オーディオ信号のデータと、前記暗号化オーディオ信号を復号するための復号用情報のデータと、を互いに関連付けて格納したことを特徴とする。
【００１９】
そして例えば、前記復号用情報に従って前記暗号化オーディオ信号を復号して該復号によって得られた前記元オーディオ信号を再生出力することに対する許可／禁止を切替制御するための権限管理情報のデータを、更に、前記暗号化オーディオ信号のデータ及び前記復号用情報のデータに関連付けて電子ファイルに格納するとよい。
【００２０】
また、本発明に係る情報提供装置は、上記の電子ファイルを提供元装置から受け取り、前記提供元装置と所定の関係を有し且つオーディオ信号を再生出力する再生出力手段を備えた端末装置からの送信要求に従って通信網を介して前記電子ファイルに基づく情報を前記端末装置に送信する情報提供装置であって、前記電子ファイル内の復号用情報に基づいて前記電子ファイル内の前記暗号化オーディオ信号を復号する復号処理手段を備え、前記送信要求があった際、前記電子ファイル内の権限管理情報と前記関係に基づいて、前記復号処理手段の復号によって得られた元オーディオ信号の前記端末装置に対する送信を許可するか否かを判別し、その判別結果に応じて前記端末装置への送信内容を制御することを特徴とする。
【００２１】
これにより、ＳＮＳ等において、オーディオ信号に関するプライバシーを保護する仕組みを導入することが可能である。
【００２２】
具体的には例えば、当該情報提供装置は、当該情報提供装置は、前記関係を事前に認識しており、前記権限管理情報と前記関係に応じて、前記端末装置に、第１及び第２の権限を含む複数段階の権限の内の何れかを与え、前記第１の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復号処理手段の復号によって得られた元オーディオ信号を前記端末装置に対して送信する一方、前記第２の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復号処理手段の復号によって得られた元オーディオ信号の前記端末装置に対する送信を禁止する。
【００２３】
或いは例えば、当該情報提供装置は、当該情報提供装置は、前記関係を事前に認識しており、前記権限管理情報と前記関係に応じて、前記端末装置に、第１、第２及び第３の権限を含む複数段階の権限の内の何れかを与え、前記第１の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記復号処理手段の復号によって得られた元オーディオ信号を前記端末装置に対して送信し、前記第２の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記元オーディオ信号から第１加工オーディオ信号を生成して該第１加工オーディオ信号を前記端末装置に対して送信し、前記第３の権限を前記端末装置に与えているときにおいて、前記送信要求があった際、前記元オーディオ信号から第２加工オーディオ信号を生成して該第２加工オーディオ信号を前記端末装置に対して送信し、前記第１加工オーディオ信号は、前記元オーディオ信号の前記音声区間における音声の特徴を変化させることによって生成され、前記第２加工オーディオ信号は、前記元オーディオ信号の前記音声区間から音声の信号成分を排除することによって生成される。
【００２４】
また、本発明に係る端末装置は、オーディオ信号を再生出力する再生出力手段を備え、  上記の情報提供装置から通信網を介して前記電子ファイルに基づく情報を受け取って、受け取った情報に基づくオーディオ信号を前記再生出力手段にて再生出力することを特徴とする。
【００２５】
また、本発明に係るオーディオ信号再生装置は、上記の電子ファイルを受け取るファイル入力手段と、オーディオ信号を再生出力する再生出力手段と、を備えている。そして、前記電子ファイル内の権限管理情報は、認証コードを含み、当該オーディオ信号再生装置は、前記電子ファイル内の復号用情報に基づいて前記電子ファイル内の暗号化オーディオ信号を復号する復号処理手段と、前記認証コードと当該オーディオ信号再生装置に登録されたコードとを照合する照合手段と、前記照合手段による照合結果に基づいて、前記復号処理手段の復号によって得られた前記元オーディオ信号の前記再生出力手段での再生出力を許可するか否かを判別する判別手段と、を備え、前記判別手段の判別結果に応じて前記復号処理手段及び前記再生出力手段を制御することを特徴とする。
【００２６】
これにより、電子ファイルが不正に流出した場合でも、音声に関するプライバシーが保護される。
【００２７】
また、本発明に係る電子ファイルの記録方式は、元オーディオ信号の内の、人の音声の信号成分が含まれている音声区間における信号に対して暗号化処理を施すことによって得られた暗号化オーディオ信号のデータと、前記暗号化オーディオ信号を復号するための復号用情報のデータと、を互いに関連付けて記録することを特徴とする。
【発明の効果】
【００２８】
本発明によれば、オーディオ信号に関するプライバシー保護に寄与するオーディオ信号記録装置等を提供することができる。
【００２９】
本発明の意義ないし効果は、以下に示す実施の形態の説明により更に明らかとなろう。ただし、以下の実施の形態は、あくまでも本発明の一つの実施形態であって、本発明ないし各構成要件の用語の意義は、以下の実施の形態に記載されたものに制限されるものではない。
【発明を実施するための最良の形態】
【００３０】
以下、本発明の実施の形態につき、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。以下に、第１〜第８実施例を説明するが、或る実施例に記載した事項は、矛盾なき限り他の実施例にも適用される。
【００３１】
＜＜第１実施例＞＞
まず、本発明の第１実施例について説明する。図１は、第１実施例に係るオーディオ信号記録装置１（以下、「記録装置１」と略記する）の内部ブロック図である。記録装置１は、符号１１〜１５にて参照される各部位を備える。
【００３２】
マイク部１１は、単数又は複数のマイクロホンから成り、記録装置１の周辺音を集音して該周辺音をデジタルの電気信号に変換する。このデジタルの電気信号は、記録装置１の周辺音を表すオーディオ信号としてオーディオ信号処理部１２に与えられる。以下の説明では、或る特定の区間におけるオーディオ信号を考え、その特定の区間の全体を全区間と捉える。その特定の区間（即ち、全区間）の開始時点及び終了時点は、操作部１５に対する操作によって指定される。
【００３３】
オーディオ信号処理部１２は、マイク部１１からのオーディオ信号に基づいてオーディオ信号の全区間内から人の音声の信号成分を含む区間を検出する音声検出部（図１において不図示）を備える。検出された、人の音声の信号成分を含む区間を、以下、「音声区間」と呼ぶ。また、オーディオ信号の全区間の内、音声区間以外の区間を「非音声区間」と呼ぶ。また、オーディオ信号に含まれる音声を発した人を発話者（又は話者）とも呼ぶ。
【００３４】
オーディオ信号処理部１２は、マイク部１１から与えられたオーディオ信号の全区間の内、音声区間における信号に対して所定の暗号化方式に従った暗号化処理を施すことにより暗号化オーディオ信号を生成する。この際、非音声区間における信号に対しては暗号化処理は施されない。暗号化オーディオ信号との区別を明確化するため、暗号化される前のオーディオ信号を、以下、元オーディオ信号と呼ぶことにする。
【００３５】
元オーディオ信号における音声区間内の信号に上記暗号化処理を施した信号と、元オーディオ信号における非音声区間内の信号（暗号化されていない信号）と、の合成信号が、暗号化オーディオ信号となる。但し、元オーディオ信号の全体に対して、暗号化以外の所定の処理（符号化処理等）は実施されうる。
【００３６】
オーディオ信号処理部１２にて実施される暗号化処理の暗号化方式として任意の公知の暗号化方式を利用することが可能である。例えば、音声区間における暗号化前の信号のビット列を暗号鍵に従って所定のアルゴリズムで並べ替え、これによって暗号化後の信号を生成する。
【００３７】
メモリカード１３は、外部記録媒体であり、例えばＳＤ（Secure Digital）メモリカードである。尚、外部記録媒体としてメモリカード１３を例示しているが、外部記録媒体を、１または複数のランダムアクセス可能な記録媒体（半導体メモリ、メモリカード、光ディスク、磁気ディスク等）で構成することができる。
【００３８】
主制御部１４は、オーディオ信号処理部１２にて生成された暗号化オーディオ信号を格納したファイルを作成し、このファイルをメモリカード１３に保存する（記録する）。尚、記録装置１は、暗号化オーディオ信号を格納したファイル以外にも、全く暗号化されていないオーディオ信号を含むファイルをもメモリカード１３に保存することが可能である。但し、記録装置１は、暗号化オーディオ信号を格納したファイルを生成することに特徴点を有するため、暗号化オーディオ信号を格納したファイルを特殊ファイルと呼んで他のファイルと区別し、以下、特殊ファイルに関する説明を行うものとする。
【００３９】
操作部１５は、操作キー等から成り、ユーザによる操作を受け付ける。操作部１５に対する操作内容は主制御部１４に伝達される。操作部１５に対して所定操作を施すことにより、元オーディオ信号の取得並びに特殊ファイルの作成及び保存が実施される。
【００４０】
図２に、メモリカード１３に保存される特殊ファイル３００のデータ構造を示す。特殊ファイル３００は、ヘッダ領域３０１と本体領域３０２から形成される。当然ではあるが、同一の特殊ファイル内に定義されたヘッダ領域と本体領域は互いに関連付けられている。特殊ファイル３００の場合、ヘッダ領域３０１と本体領域３０２は互いに関連付けられ、特殊ファイル３００内に格納された各データは互いに関連付けられている。尚、ヘッダ領域を、ユーザ領域と呼ぶこともできる。
【００４１】
本体領域３０２には暗号化オーディオ信号を表すデータが格納される。ヘッダ領域３０１には暗号化オーディオ信号の関連情報等が格納される。具体的には、ヘッダ領域３０１には、音声区間情報と復号鍵情報と権限管理情報とが格納される。
【００４２】
音声区間情報は、元オーディオ信号（又は暗号化オーディオ信号）の全区間中の何れの区間が音声区間であるかを表す情報である。
【００４３】
復号鍵情報は、暗号化された信号を復号するための復号処理に用いられる復号鍵を表す情報である。上記の暗号化処理は、記録装置１に予め与えられた或いは記録装置１内で発生した暗号鍵を用いて行われ、この暗号鍵に対応する復号用の鍵が復号鍵である。暗号化オーディオ信号から元オーディオ信号を復元することのできる装置（以下、「復元用装置」という）上において、この復号鍵を用いれば暗号化オーディオ信号を復号することができる（復号に復号鍵は必須であるものとする）。
【００４４】
音声区間情報を参照すれば、暗号化されている音声区間の、全区間内における位置が分かる。このため、音声区間情報と復号鍵情報に基づけば、本体領域３０２内の暗号化オーディオ信号を復号して元オーディオ信号を復元することができる。従って、音声区間情報と復号鍵情報は、暗号化オーディオ信号を復号するための復号用情報を形成する。
【００４５】
尚、復元用装置がヘッダ領域３０１を参照することなく復号鍵を知っている場合は、特殊ファイル３００内に復号鍵情報を含めておく必要は無い（後述の各実施例においても共通）。即ち例えば、復元用装置に予め復号鍵が与えられている場合、或いは、ユーザが手動操作等によって復元用装置に復号鍵を与える場合は、特殊ファイル３００内に復号鍵情報を含めておく必要は無い。
【００４６】
復元用装置において、復号用情報に従って暗号化オーディオ信号を復号し、この復号によって得た元オーディオ信号を再生出力することが可能であるが、この復号及び再生出力を実施することに対する許可又は禁止を切替制御するための情報が、権限管理情報である。この権限管理情報の利用例については他の実施例にて詳説する。尚、記録装置１においてユーザが権限管理情報を設定する場合、その設定のための操作は、操作部１５に対して行われる。
【００４７】
暗号化オーディオ信号を復号することなく、そのまま再生しても音声区間における人の音声を聞き取ることはできない。暗号化オーディオ信号を元オーディオ信号に戻すためには、上述の暗号化方式のアルゴリズムに従った復号処理の実施が必須である。復元用装置は、オーディオ信号処理部１２での暗号化方式のアルゴリズムに関する情報を事前に認識しており、復号用情報に基づいて、その暗号化方式のアルゴリズムに従った復号処理を実行可能である。その復号処理によって暗号化オーディオ信号から元オーディオ信号が復元される。後述のユーザＰＣ２、サーバ３、オーディオ信号記録再生装置６及び撮像装置７は、暗号化オーディオ信号から元オーディオ信号を復元可能な復元用装置として機能する。
【００４８】
オーディオ信号に関してプライバシーの保護に重要なのは発話者の音声を含む部分であり、発話者の音声が含まれるオーディオ信号が不特定の人間に対して流通すると、発話者のプライバシーが害されるおそれがある。しかしながら、記録装置１上で特殊ファイルを保存する時点で暗号化処理が実施され、特殊ファイル内のオーディオ信号は暗号化されているため、仮に、メモリカード１３が紛失又は盗難されたり、コンピュータウイルスやファイル交換ソフトの悪用等によってネット経由で特殊ファイルが流出した場合でも、プライバシーが保護される。また、プライバシー保護に関与する音声区間が自動的に検出され、音声区間に対して暗号化処理が自動的に施されるため、プライバシー保護を図るためのユーザ負担が極めて少ない（特許文献２のようなブロック分割の手間がかからない）。
【００４９】
ヘッダ領域に復号鍵情報を含めた場合でも、暗号化のアルゴリズムを知る正規の装置上でしか復号鍵を用いて正しく元オーディオ信号を復元することができず、その正規の装置は、記録装置１のユーザの意図に沿うようにヘッダ領域内の権限管理情報に応じて復号処理の実施／非実施を管理するため（詳細は後述）、プライバシーは適切に保護される。勿論、ヘッダ領域に復号鍵情報を含めない方が意図しない復号がなされる危険性は減る。
【００５０】
尚、ヘッダ領域へのデータ保存形式及び特殊ファイル全体のデータ保存形式は、任意に定めることができるが、各データを既存の規格に沿って保存することも可能である。既存の規格に沿って特殊ファイルを作成及び保存する場合は、その既存の規格に沿った任意の再生装置上で特殊ファイル内のオーディオ信号を再生出力することが可能となるが、この場合でも、特殊ファイル内のオーディオ信号は暗号化されているためプライバシーは保護される。
【００５１】
第１実施例に記載した事項は、後述の各実施例に適用され、後述の各実施例の説明の基礎となる。
【００５２】
＜＜第２実施例＞＞
図１のオーディオ信号処理部１２の内部構成例を示す実施例として、第２実施例を説明する。第２実施例は、第１実施例と組み合わせて実施される。
【００５３】
図３は、第２実施例に係る、図１のオーディオ信号処理部１２の内部ブロック図である。図３のオーディオ信号処理部１２は、符号２１〜２３にて参照される各部位を備える。
【００５４】
ＡＡＣエンコーダ２１は、元オーディオ信号に符号化処理を施す。この符号化処理は、ＡＡＣ(Advanced Audio Coding)の符号化方式に従う。ＡＡＣは、ＭＰＥＧ（Moving Picture Experts Group）において規格化された、オーディオ信号に対する符号化方式（圧縮方式）である。
【００５５】
オーディオ信号処理部１２に与えられる元オーディオ信号は、時間軸上に離散的に並ぶデジタル信号（以下、離散オーディオ信号という）の集まりである。ＡＡＣでは、１０２４サンプルの離散オーディオ信号を単位区間にして符号化及び記録が行われるため、本実施例では、１０２４サンプルごとに音声区間と非音声区間を判別する。上記の単位区間をフレームと呼ぶ。元オーディオ信号の全体は、順次訪れる第１、第２、第３、・・・、第（ｎ−１）及び第ｎのフレームの離散オーディオ信号から形成され、各フレームは、１０２４サンプル分の離散オーディオ信号を含む（ｎは２以上の整数）。
【００５６】
ＡＡＣエンコーダ２１は、フレームごとに離散オーディオ信号をＡＡＣに従って符号化する。この符号化によって得られた信号を符号化信号と呼び、第ｋのフレームの離散オーディオ信号を符号化することによって得られた符号化信号を、第ｋのフレームの符号化信号と呼ぶ（ｋは、１≦ｋ≦ｎを満たす整数）。各フレームの符号化信号は、暗号化処理部２３に送られる。
【００５７】
音声／非音声判別部２２は、ピッチ抽出に基づく手法によって、フレームごとに、そのフレームが音声区間と非音声区間の何れであるかを判別する。ピッチとは、声帯振動によるオーディオ信号の基本周波数のことである。一般的に、雑音が多い場合は正確にピッチを探し出すことが難しくなるが、本実施例では基本周波数を正確に探す必要はなく、ピッチの有無のみを判別すれば足る。ピッチ抽出手法として、一般的に自己相関処理を利用した手法が広く用いられ、本実施例でも自己相関処理を利用する。
【００５８】
或る１つのフレームに着目して、音声／非音声判別部２２の判別手法について説明する。着目したフレームを着目フレームと呼ぶ。着目フレームに含まれる１０２４サンプル分の離散オーディオ信号の内、ｔ番目の離散オーディオ信号の信号値をｘ（ｔ）で表す。ｔは、１〜１０２４の間の整数値をとる。
【００５９】
そして、図４に示す如く、１〜１２８番目の離散オーディオ信号から成るブロックを基準ブロックとして自己相関を計算する。つまり、着目フレーム内に、１２８個の連続する離散オーディオ信号から成る評価ブロックを定義し、評価ブロックを順次ずらしながら、基準ブロックと評価ブロックとの間の相関を求めてゆく。より具体的には、下記式（１）に従って自己相関値Ｓ（ｐ）を算出する。自己相関値Ｓ（ｐ）は、評価ブロックの位置を決める変数ｐの関数であり、ｐは、０≦ｐ≦（１０２４−１２８）、を満たす各整数をとる。
【００６０】
【数１】
2008309959.tif 000003
【００６１】
図５に、求められた自己相関値Ｓ（ｐ）の変数ｐ依存性を示す。図５において、横軸は、変数ｐである。図５は、着目フレームにピッチが含まれている場合に対応している。着目フレームにピッチが含まれていると自己相関値Ｓ（ｐ）が周期的に大きな値をとる。音声／非音声判別部２２は、自己相関値Ｓ（ｐ）が周期的に所定の閾値ＴＨを超えていると判断される場合、着目フレームが音声区間であると判断し、そうでない場合は、着目フレームが非音声区間であると判断する。例えば、不等式「Ｓ（ｐ）＞ＴＨ」を満たす変数ｐの間隔が一定（或いは略一定）の場合に、自己相関値Ｓ（ｐ）が周期的に所定の閾値ＴＨを超えていると判断する。
【００６２】
音声／非音声判別部２２は、各フレームが音声区間と非音声区間の何れであるかを表す情報を暗号化処理部２３に出力する。この情報は、第１実施例で述べた音声区間情報に相当し、第２実施例では、音声／非音声判別部２２の出力情報が音声区間情報として図２のヘッダ領域３０１内に格納されることとなる。
【００６３】
暗号化処理部２３は、音声／非音声判別部２２の出力情報（音声区間情報）に基づきつつ、ＡＡＣエンコーダ２１から出力される第１〜第ｎのフレームの符号化信号の内、音声区間に分類されるフレームの符号化信号のみを所定の暗号化方式に従って暗号化する。非音声区間に分類されるフレームの符号化信号は暗号化されない。第１実施例でも述べたように、オーディオ信号処理部１２（暗号化処理部２３）にて実施される暗号化処理の暗号化方式として任意の公知の暗号化方式を利用することが可能である。
【００６４】
音声区間に分類されるフレームの符号化信号に暗号化処理を施した信号と、非音声区間に分類されるフレームの符号化信号そのものと、の合成信号が、暗号化オーディオ信号として暗号化処理部２３から出力される。この暗号化オーディオ信号は、図２の特殊ファイル３００の本体領域３０２内に格納されることとなる。
【００６５】
本体領域３０２に格納された暗号化オーディオ信号から元オーディオ信号を復元するためには、まず、音声区間情報と復号鍵情報に基づいて、音声区間における暗号化された符号化信号を復号して通常の符号化信号を復元し、これによって第１〜第ｎフレームについての符号化信号を得る。その後、各フレームについての符号化信号に対して、ＡＡＣの符号化を元に戻すためのデコード処理を施すことによって、元オーディオ信号を復元することができる。この復元手法は、暗号化オーディオ信号から元オーディオ信号を復元する各復元用装置にて利用可能である（復元用装置については後述）。
【００６６】
ＡＡＣの符号化方式に適合した、音声区間と非音声区間の判別手法を例示したが、音声区間と非音声区間の判別手法として他の任意の公知手法を用いることも可能である。
【００６７】
＜＜第３実施例＞＞
次に、第３実施例について説明する。第３実施例では、記録装置１にて生成された特殊ファイルを通信網を介して公開する場合を想定する。
【００６８】
図６に、記録装置１と協働して特徴的な動作を行うファイル管理システムの全体構成図を示す。図６において、符号２は、ユーザ用のコンピュータ（以下、「ユーザＰＣ」という）である。符号３は、サーバコンピュータ（以下、単に「サーバ」という）である。符号４は、コンピュータ・ネットワークとしての通信網である。今、通信網４は、インターネットであるとする。符号１０１、１０２及び１０３は、夫々、サーバ３に格納されたファイルにアクセスするコンピュータ（以下、「閲覧側ＰＣ」という）である。
【００６９】
図７に、ユーザＰＣ２の概略内部ブロック図を示す。ユーザＰＣ２は、符号４１〜４８にて参照される各部位を備える。図８に、サーバ３の概略内部ブロック図を示す。サーバ３は、符号６１〜６５にて参照される各部位を備える。閲覧側ＰＣ１０１〜１０３も、ユーザＰＣ２と同様の構成を有し、それらの内部ブロック図は、図７のそれと同様であるため重複する図示を省略する。ユーザＰＣ２とサーバ３は、通信網４を介して任意のデータの送受信が可能であり、閲覧側ＰＣ１０１〜１０３の夫々とサーバ３は、通信網４を介して任意のデータの送受信が可能である。尚、図示の簡略化及び説明の便宜上、図６には閲覧用ＰＣが３台しか示されていないが、閲覧用ＰＣ１０１、１０２又は１０３と同様の多数の閲覧用ＰＣが通信網４を介してサーバ３に接続されうる。
【００７０】
図１の記録装置１は特殊ファイルを作成し、特殊ファイルはメモリカード１３に記録される。メモリカード１３は記録装置１に対して着脱自在となっている。メモリカード１３を記録装置１から取り外して図７のユーザＰＣ２のカードスロット４４に装着することにより、ユーザＰＣ２は、メモリカード１３内に記録された特殊ファイルを読み出すことが可能となる。また、記録装置１に装着されたメモリカード１３内の特殊ファイルを、ＵＳＢ（Universal Serial Bus）などの規格に従った通信線を介してユーザＰＣ２に読み込ませることもできる。
【００７１】
ユーザＰＣ２に読み込まれた特殊ファイルは、オーディオ信号処理部４２を含む主制御部４１に与えられる。液晶ディスプレイ等から成る表示部４５は、主制御部４１の制御の下、映像の表示を行う。オーディオ信号再生出力部４６は、スピーカを含み、主制御部４１の制御の下、オーディオ信号の再生出力を行う（オーディオ信号を音として出力する）。以下、「オーディオ信号再生出力部」を「再生出力部」と略記する。ＰＣ操作キー４７は、ユーザＰＣ２のユーザの操作を受け付け、その操作内容を主制御部４１に伝達する。また、メモリ４８の記憶内容は、主制御部４１に参照される。
【００７２】
図７のＰＣ操作キー４７に所定の操作が施された時、主制御部４１に与えられた特殊ファイルは、図８のサーバ３の、オーディオ信号処理部６２を含む主制御部６１に送信される（所謂アップロードが行われる）。この送信は、図７の通信部４３、図６の通信網４及び図８の通信部６３を介して行われる。主制御部６１が受信した特殊ファイルは、ユーザＰＣ２に割り当てられたＩＤ番号と関連付けられつつサーバＨＤＤ（ハードディスク）６４に保存される。
【００７３】
サーバ３は、インターネット上で所定のＩＰアドレスが割り当てられたＷＷＷ（World Wide Web）サーバであり、ＳＮＳ（ソーシャルネットワーキングサービス）や所謂ブログ等のウェブサイトを運営する。
【００７４】
サーバ３は、通信網４を介して閲覧側ＰＣ１０１〜１０３の夫々からの送信要求（配信要求）を受け付ける。サーバ３は、閲覧側ＰＣ１０１からサーバＨＤＤ６４に格納された特殊ファイルに対する送信要求を受け取った時、特殊ファイルの内容と公開管理メモリ６５の記憶内容に基づいて送信すべきデータを判断し、その判断結果に応じたデータを閲覧側ＰＣ１０１に送信する。閲覧側ＰＣ１０２及び１０３についても同様である。尚、公開管理メモリ６５を、サーバＨＤＤ６４内の一部記録領域から形成することも可能である。
【００７５】
サーバ３を含むファイル管理システムは、特殊ファイルのヘッダ領域内の情報を参照して特徴的な動作を行う。これについて具体的に説明する。
【００７６】
今、説明の具体化のため、記録装置１にて作成されユーザＰＣ２を介してサーバ３にアップロードされる（即ち、送信される）特殊ファイルが、図２の特殊ファイル３００である場合を想定する。
【００７７】
サーバ３が運営するＳＮＳやウェブサイトの規定に従って、ユーザＰＣ２と閲覧側ＰＣ１０１〜１０３の夫々には、互いに異なる固有のＩＤ番号が事前に割り振られているものとする。サーバ３の公開管理メモリ６５（図８参照）には、各ＩＤ番号と、ユーザＰＣ２と閲覧側ＰＣ１０１〜１０３の夫々との関係を示す公開管理関係情報が予め格納されている。公開管理関係情報によって示される関係を、以下「公開関係」と呼ぶ。
【００７８】
この公開管理関係情報の内容例を図９に示す。今、ユーザＰＣ２と閲覧側ＰＣ１０１、１０２及び１０３との間の公開関係が、夫々、第１、第２及び第３の公開関係であったとし、それを表す情報が公開管理関係情報となっていたとする。実際には、各ＩＤ番号を用いてサーバ３は図９に示すような各公開関係を認識している。
【００７９】
ところで、ＳＮＳ等においては、一般的に、公開しようとする各情報に対して公開制限を加えることができ、“或る情報を「友人」に相当するＩＤ番号を有した閲覧用ＰＣには公開するが、その情報を「友人の友人」又は「一般」に相当するＩＤ番号を有した閲覧用ＰＣには公開しない”といったことを公開側のＰＣ（ユーザＰＣ２に相当）で自由に設定することが可能である。「一般」とは、「友人」でも「友人の友人」でもないことを示す。そこで、第１〜第３の公開関係を、サーバ３が運営するＳＮＳやウェブサイトの公開制限に沿って規定しておく。今、第１、第２及び第３の公開関係を、夫々、公開制限における「友人」、「友人の友人」及び「一般」に割り当てるものとする。
【００８０】
本実施例では、公開管理関係情報とヘッダ領域３４１内の権限管理情報（図２参照）に基づいて公開の仕方を制御し、権限管理情報が「公開レベル情報」を含むものとする。
【００８１】
ユーザは、図１の操作部１５の操作を介して記録装置１上で、又は、図７のＰＣ操作キー４７の操作を介してユーザＰＣ２上で、公開レベル情報を任意に設定することができる。記録装置１上で公開レベル情報の設定のための操作を全く行わなかった場合は、記録装置１が自動的に規定の初期データを公開レベル情報としてヘッダ領域３４１に格納する。特殊ファイル３００は、ユーザＰＣ２及び通信網４を経由してサーバ３にアップロードされ（即ち、送信され）、サーバ３は、特殊ファイル３００をユーザＰＣ２のＩＤ番号と関連付けてサーバＨＤＤ６４（図８参照）に保存する。
【００８２】
今、公開レベル情報によって、公開の仕方を３段階に分類する場合を考える。サーバＨＤＤ６４に格納された特殊ファイル３００のヘッダ領域３０１内の公開レベル情報の内容例を図１０に示す。今、ユーザＰＣ２との間で第１、第２及び第３の公開関係を有する閲覧側ＰＣに、夫々、第１、第２及び第３の権限を与えることを指示する内容が、公開レベル情報によって規定されていた場合を考える。この場合、図８のサーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊ファイル３００に対するアクセス権限として、閲覧側ＰＣ１０１、１０２及び１０３に、夫々、第１、第２及び第３の権限を与えることになる。
【００８３】
以上のような想定の下、各閲覧用ＰＣがサーバ３内の特殊ファイル３００にアクセスしようとした場合の、サーバ３の動作を説明する。
【００８４】
図１１（ａ）、（ｂ）、（ｃ）及び（ｄ）に、各閲覧用ＰＣに送信されるオーディオ信号を示す。図１１（ａ）、（ｂ）及び（ｃ）において、符号３３０は、着目した音声区間における元オーディオ信号のアナログ波形である。図１１（ａ）の符号３３１、図１１（ｂ）の符号３３２及び図１１（ｃ）の符号３３３は、夫々、その音声区間に対応する、閲覧用ＰＣ１０１、１０２及び１０３への送信オーディオ信号のアナログ波形である。図１１（ｄ）において、符号３４０は着目した非音声区間における元オーディオ信号のアナログ波形であり、符号３４１はその非音声区間における各閲覧用ＰＣ（１０１、１０２及び１０３）への送信オーディオ信号のアナログ波形であり、両アナログ波形（３４０及び３４１）は同じである。
【００８５】
閲覧用ＰＣ１０１が、サーバ３内の特殊ファイル３００に対応するオーディオ信号を閲覧用ＰＣ１０１に送信するように送信要求をサーバ３に対して出した際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊ファイル３００の公開レベル情報と公開管理メモリ６５内の公開管理関係情報に基づいて、閲覧用ＰＣ１０１に与えられるべき権限を認識する。上述したように、閲覧用ＰＣ１０１に与えられるべき権限は第１の権限である。この場合、サーバ３のオーディオ信号処理部６２（図８参照）は、サーバＨＤＤ６４から特殊ファイル３００内の暗号化オーディオ信号と復号用情報を読み出し、復号用情報に基づいて暗号化オーディオ信号を復号することによって元オーディオ信号を復元する。そして、復元した元オーディオ信号を表すデータを閲覧用ＰＣ１０１に送信する。これにより、閲覧用ＰＣ１０１に備えられる、スピーカを含む再生出力部から、図１１（ａ）のアナログ波形３３１及び図１１（ｄ）のアナログ波形３４１の信号を含む元オーディオ信号が再生出力される。
【００８６】
閲覧用ＰＣ１０３が、サーバ３内の特殊ファイル３００に対応するオーディオ信号を閲覧用ＰＣ１０３に送信するように送信要求をサーバ３に対して出した際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊ファイル３００の公開レベル情報と公開管理メモリ６５内の公開管理関係情報に基づいて、閲覧用ＰＣ１０３に与えられるべき権限を認識する。上述したように、閲覧用ＰＣ１０３に与えられるべき権限は第３の権限である。この場合、サーバ３のオーディオ信号処理部６２（図８参照）は、サーバＨＤＤ６４から特殊ファイル３００内の暗号化オーディオ信号を読み出し、その暗号化オーディオ信号と音声区間情報に基づいて、音声区間における発話内容が特定できないような第２加工オーディオ信号を作成する。
【００８７】
例えば、第２加工オーディオ信号の音声区間には、元オーディオ信号とは全く異なる、正弦波のオーディオ信号又は無音のオーディオ信号が挿入される。或いは、暗号化オーディオ信号がＡＡＣに従って符号化されている場合は、音声区間の前フレームの信号（非音声区間の信号）が音声区間に挿入される。これらにより、音声区間から発話者の音声の信号成分が排除される。一方において、非音声区間に関しては、特別な処理を施さない。従って、例えば、図１１（ｃ）のアナログ波形３３３及び図１１（ｄ）のアナログ波形３４１の信号を含む第２加工オーディオ信号を表すデータが閲覧用ＰＣ１０３に送信され、閲覧用ＰＣ１０３に備えられる、スピーカを含む再生出力部から、第２加工オーディオ信号が再生出力される。
【００８８】
閲覧用ＰＣ１０２が、サーバ３内の特殊ファイル３００に対応するオーディオ信号を閲覧用ＰＣ１０２に送信するように送信要求をサーバ３に対して出した際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊ファイル３００の公開レベル情報と公開管理メモリ６５内の公開管理関係情報に基づいて、閲覧用ＰＣ１０２に与えられるべき権限を認識する。上述したように、閲覧用ＰＣ１０２に与えられるべき権限は第２の権限である。この場合、サーバ３のオーディオ信号処理部６２（図８参照）は、サーバＨＤＤ６４から特殊ファイル３００内の暗号化オーディオ信号と復号用情報を読み出し、復号用情報に基づいて暗号化オーディオ信号を復号することによって元オーディオ信号を復元する。その後、音声区間情報に基づきつつ、音声区間における元オーディオ信号に所定の加工処理を施し、音声区間における発話者が特定できないような第１加工オーディオ信号を作成する。
【００８９】
具体的には、第１加工オーディオ信号の音声区間における発話者の音声の特徴（例えば、声色）を元オーディオ信号のそれと異ならせるような加工処理を施す。但し、発話内容が特定できないほどの加工処理を施さないようにする。音声の特徴を変える手法として公知の手法を採用可能である。例えば、音声区間における元オーディオ信号を書き込むバッファメモリを用意し、そのバッファメモリへの書き込み周波数と読み出し周波数を変えることにより、発話者の声色（音程）を変えることができる。また、第１加工オーディオ信号を作成する際、非音声区間に関しては、特別な処理を施さない。従って、例えば、図１１（ｂ）のアナログ波形３３２及び図１１（ｄ）のアナログ波形３４１の信号を含む第１加工オーディオ信号を表すデータが閲覧用ＰＣ１０２に送信され、閲覧用ＰＣ１０２に備えられる、スピーカを含む再生出力部から、第１加工オーディオ信号が再生出力される。
【００９０】
上述のようにすれば、ＳＮＳやブログ等のウェブサイトにおいて、オーディオ信号に関するプライバシーを保護する仕組みを導入することが可能である。公開側のユーザは、公開レベル情報を設定しておくだけで（或いは記録装置１で自動的に設定される公開レベル情報を利用するだけで）、簡便にプライバシーの保護効果を享受することができる。
【００９１】
また、公開レベル情報に基づく公開制御の他に、認証コードを利用した公開制御も実施することが可能である。この場合、例えば、特殊ファイル３００のヘッダ領域３０１内の権限管理情報に、記録装置１又はユーザＰＣ２上で設定可能な認証コードを含めておく。例えば、ユーザＰＣ２のユーザが、第３の権限しか有さない閲覧用ＰＣ１０３のユーザに、特別に元オーディオ信号をサーバ３経由で提供したい場合、ユーザＰＣ２のユーザが閲覧用ＰＣ１０３のユーザに、上記の認証コードをパスワードとして伝える。閲覧用ＰＣ１０３のユーザが該パスワードを沿えて特殊ファイル３００に対応するオーディオ信号の送信要求をサーバ３に対して出力した際、サーバ３の主制御部６１は、閲覧用ＰＣ１０３から送られてきたパスワードとサーバＨＤＤ６４内の特殊ファイル３００に格納された認証コードとを照合し、両者の合致が確認されれば、特殊ファイル３００内の暗号化オーディオ信号と復号用情報から元オーディオ信号を復元して元オーディオ信号を表すデータを閲覧用ＰＣ１０３に送信する（合致しなければ該送信は行われない）。これにより、閲覧用ＰＣ１０３に備えられる、スピーカを含む再生出力部から、元オーディオ信号が再生出力される。
【００９２】
尚、パスワードを伝える代わりに、閲覧用ＰＣ１０３のＩＤ番号と認証コードをリンクさせておいてもよい。つまり、単純には例えば、ヘッダ領域３０１の認証コードが閲覧用ＰＣ１０３のＩＤ番号と同じとなるように、認証コードを記録装置１又はユーザＰＣ２上で設定しておき、その認証コードを含む特殊ファイル３００をサーバ３にアップロードするようにする。閲覧用ＰＣ１０３のユーザが特殊ファイル３００に対応するオーディオ信号の送信要求をサーバ３に対して出力した際、サーバ３の主制御部６１は、閲覧用ＰＣ１０３のＩＤ番号とヘッダ領域３０１の認証コードを照合し、両者の合致が確認されれば、特殊ファイル３００内の暗号化オーディオ信号と復号用情報から元オーディオ信号を復元して元オーディオ信号を表すデータを閲覧用ＰＣ１０３に送信する（合致しなければ該送信は行われない）。
【００９３】
この他、様々な変形例があるが、以下に利用可能な変形例を列記する。
【００９４】
変形例１：図１０に示すような内容を規定の記述形式に従って記述したものを公開レベル情報としてもよいが、例えば、図６に示されるファイル管理システムの全体で図１０に示す内容が「１」であることを規定しておくようにしてもよい。この場合、ヘッダ領域３０１には「１」を公開レベル情報として記述しておけば足る。この場合、勿論、図１０に示す公開レベル情報と異なる公開レベル情報には１以外の文字列が割り当てられる。それ以外にも、ファイル管理システム内で規定された任意の記述方式で公開レベル情報を表すことが可能である。また、図１０に示す各公開関係と各権限との関係は例示であり、ユーザがそれを様々に変更可能である。
【００９５】
変形例２：上述の例では、第１、第２、第３の権限を有する閲覧用ＰＣからの送信要求に対して、夫々、図１１（ａ）に対応する元オーディオ信号、図１１（ｂ）に対応する第１加工オーディオ信号及び図１１（ｃ）に対応する第２加工オーディオ信号を送信しているが、これはあくまでも例示であり、様々に変形可能である。例えば、第１、第２、第３の権限を有する閲覧用ＰＣからの送信要求に対して、夫々、元オーディオ信号、第１加工オーディオ信号及び第１加工オーディオ信号を送信するようにしてもよいし、夫々、元オーディオ信号、元オーディオ信号及び第１加工オーディオ信号を送信するようにしてもよい。また、第３の権限を有する閲覧用ＰＣからの送信要求に対してはオーディオ信号の送信を一切行わないといったことも可能である。
【００９６】
変形例３：上述の例では、公開レベル情報によって、公開の仕方を３段階に分類しているが、この段階数は任意である。ＳＮＳ等の規定に応じて、公開の仕方を４段階以上に分類することも可能であるし、２段階までの分類に限定されることもある。また、同様に、権限の分類数も３以外となりうる。尚、変形例２で例示した如く、第１、第２、第３の権限を有する閲覧用ＰＣからの送信要求に対して、夫々、元オーディオ信号、第１加工オーディオ信号及び第１加工オーディオ信号を送信するようにした場合は、結果的に公開の仕方が２段階に分類されていることになる。
【００９７】
＜＜第４実施例＞＞
次に、第４実施例について説明する。第４実施例は、第３実施例の変形例に相当し、第３実施例に記載した事項は本実施例にも適用される（また、第１実施例に記載した事項も適用される）。
【００９８】
第４実施例では、図１の記録装置１が話者認識機能を備えているものとする。話者認識機能は、図１のオーディオ信号処理部１２内に設けられた話者認識部によって実現される。この話者認識部は、マイク部１１から与えられる元オーディオ信号に基づき、音声区間における発話者（話者）が予め登録された登録話者と一致しているか否かを判断する。
【００９９】
例えば、任意の言葉にて話者認識を行う発声内容独立型の話者認識処理を利用する。話者認識処理を実現する手法として、公知の任意の手法を採用可能である。話者認識の手法について簡単に説明する。図１２に、公知の話者認識処理を行うための話者認識部のブロック図を示す。
【０１００】
まず、話者認識を行う前に話者の登録を行う。話者登録時において、マイク部１１から出力されるオーディオ信号は、特徴量抽出部７１に供給される。話者が発生した文章などの音声に含まれる、ケプストラムやピッチ等の特徴量が特徴量抽出部７１にて抽出される。話者登録時において、該特徴量は話者モデル作成部７２に与えられる。話者モデル作成部７２は、抽出された特徴量に基づき、話者の音声のモデル（以下、登録話者モデルという）、例えば隠れマルコフモデル（Hidden Markov Model）を作成する。登録話者モデルは、話者モデル記録部７３に記録される。
【０１０１】
話者認識時には、マイク１１部からの元オーディオ信号に含まれる認識対象話者（現在の話者）の音声は、特徴量抽出部７１に供給される。認識対象話者が発生した文章などの音声に含まれる、ケプストラムやピッチ等の特徴量が特徴量抽出部７１にて抽出される。話者認識時において、該特徴量は尤度算出部７４に与えられる。尤度算出部７４は、話者モデル記録部７３に記録されている登録話者モデルと認識対象話者に対応する特徴量とを比較し、それらの尤度（類似度）を算出する。そして、尤度が所定の閾値より大きければ認識対象話者が登録話者と一致すると判断し、そうでなければ、認識対象話者は登録話者と相違すると判断する。
【０１０２】
図１３に、本実施例で想定される元オーディオ信号の模式図を示す。この元オーディオ信号の全区間には、音声区間と非音声区間が含まれるが、音声区間は、時間的に互いに分離した複数の区間から形成される。今、図１３に示す如く、音声区間が時間的に互いに分離した３つの区間を含む場合を考え、３つの区間を、第１、第２及び第３の要素区間と呼ぶことにする。そして、図１２に示されるような話者認識部を利用することによって、第１及び第２の要素区間に含まれる音声の発話者（話者）が登録話者と一致し、第３の要素区間に含まれる音声の発話者（話者）が登録話者と相違すると判断されたとする。以下、登録話者と相違する発話者（話者）を非登録話者と呼ぶ。
【０１０３】
本実施例で想定される特殊ファイルを、特殊ファイル４００と呼び、それのデータ構造を図１４に示す。図１のメモリカード１３に保存される特殊ファイル４００の本体領域には暗号化オーディオ信号のデータが格納され、特殊ファイル４００のヘッダ領域には、音声区間情報、復号鍵情報及び権限管理情報が格納される。
【０１０４】
特殊ファイル４００の音声区間情報には、各要素区間の発話者を表す情報も含められる。今の例の場合、音声区間情報は、元オーディオ信号（又は暗号化オーディオ信号）の全区間中の何れの区間が音声区間であるかを表すだけでなく、第１及び第２の要素区間の発話者が登録話者であり且つ第３の要素区間の発話者が非登録話者であることをも表す。そして、第３実施例の如く、特殊ファイル４００の権限管理情報に公開レベル情報を含めるようにし、更に、この公開レベル情報を登録話者に対応する要素区間と非登録話者に対応する要素区間とで区別して設定できるようにする。
【０１０５】
登録話者に対応する要素区間についての公開レベル情報を登録話者用公開レベル情報と呼び、非登録話者に対応する要素区間についての公開レベル情報を非登録話者用公開レベル情報と呼ぶ。登録話者用公開レベル情報と非登録話者用公開レベル情報は、図１０を参照して述べたような各公開関係と各権限との関係を規定する。ユーザは、記録装置１又はユーザＰＣ２上で、登録話者用公開レベル情報と非登録話者用公開レベル情報を個別に設定することが可能である。また、本実施例において、サーバ３の公開管理メモリ６５（図８）には、図９に示す公開管理関係情報が格納されていたものとする。
【０１０６】
仮に、登録話者（例えば、記録装置１の所持者）の音声は友人の友人までに公開されても構わないが、登録話者の周りで話している話者の会話を友人以外に公開したくない場合は、例えば、図１５（ａ）に示す登録話者用公開レベル情報と図１５（ｂ）に示す非登録話者用公開レベル情報を設定しておく。
【０１０７】
設定された登録話者用公開レベル情報は、ユーザＰＣ２との間で第１、第２及び第３の公開関係を有する閲覧側ＰＣに、夫々、第１、第１及び第２の権限を与えることを指示する。この指示は、登録話者が発話していた第１及び第２の要素区間のみに対する指示である。
設定された非登録話者用公開レベル情報は、ユーザＰＣ２との間で第１、第２及び第３の公開関係を有する閲覧側ＰＣに、夫々、第１、第３及び第３の権限を与えることを指示する。この指示は、非登録話者が発話していた第３の要素区間のみに対する指示である。
【０１０８】
この設定後、特殊ファイル４００を、図６のユーザＰＣ２及び通信網４を介してサーバ３にアップロードすると、それは図８のサーバＨＤＤ６４に格納される。
【０１０９】
各閲覧用ＰＣ（１０１〜１０３）からサーバ３内の特殊ファイル４００に対する送信要求が出力された際、サーバ３の主制御部６１は、サーバＨＤＤ６４内の特殊ファイル４００の公開レベル情報と公開管理関係情報に基づいて、各閲覧用ＰＣ（１０１〜１０３）に与えられるべき権限を認識する。そして、認識した権限と特殊ファイル４００の音声区間情報に基づいて、各閲覧用ＰＣに対する送信内容を制御する。
【０１１０】
今の例の場合、主制御部６１は、閲覧用ＰＣ１０１に対しては、第１〜第３の要素区間の全てに関して第１の権限を与える。このため、第１〜第３の要素区間における暗号化オーディオ信号を全て正しく復号し、復号後のオーディオ信号（即ち、元オーディオ信号の全て）を閲覧用ＰＣ１０１に送信する。
【０１１１】
主制御部６１は、閲覧用ＰＣ１０２に対しては、第１及び第２の要素区間に関して第１の権限を与える一方、第３の要素区間に関しては第３の権限を与える。このため、第１及び第２の要素区間における暗号化オーディオ信号を正しく復号し、第１及び第２の要素区間における元オーディオ信号を閲覧用ＰＣ１０２に送信する。但し、第３の要素区間に関しては、元オーディオ信号の代わりに発話内容が特定できないような信号を閲覧用ＰＣ１０２に送信する（図１１（ｃ）参照）。閲覧用ＰＣ１０３に対しても、これらに準じた送信制御がなされる。また、非音声区間については、第３実施例と同様、記録時におけるオーディオ信号と同じオーディオ信号が各閲覧用ＰＣ（１０１〜１０３）に送信される。
【０１１２】
上述の如く処理することにより、発話者に応じた公開制御が可能となり、きめ細かなプライバシー保護が可能となる。
【０１１３】
尚、登録話者が複数である場合は、登録話者ごとに公開レベル情報を設定できるようにするとよい。
【０１１４】
［複数の非登録話者間の区別］
また、非登録話者が複数である場合も、非登録話者ごとに公開レベル情報を設定できるようにするとよい。これについて説明を加える。今、非登録話者として、互いに異なる第１及び第２の非登録話者が存在していた場合を想定する。また、登録話者を無視して考える。この場合、本実施例に係る話者認識部は、音声区間における発話者が第１と第２の非登録話者の何れであるかを区別する。この区別の手法に対して、公知の手法を適用可能である。例えば、話者認識時において、マイク１１部からの元オーディオ信号に含まれる認識対象話者（現在の話者）の音声を特徴量抽出部７１に供給し、認識対象話者が発生した文章などの音声に含まれる、ケプストラムやピッチ等の特徴量を特徴量抽出部７１にて抽出する。この特徴量に基づけば、話者認識部は、或る区間における発話者と他の区間における発話者が同一であるか否かを判別可能である。
【０１１５】
今の例でも、上述の第１〜第３の要素区間を想定する（図１３参照）。そして例えば、話者認識部によって、第１及び第２の要素区間における音声の発話者が同一であり、且つ、第１及び第２の要素区間における音声の発話者と第３の要素区間における音声の発話者が異なる、と判断されたとする。そうすると、話者認識部によって、第１及び第２の要素区間に含まれる音声の発話者が第１の非登録話者であり、第３の要素区間に含まれる音声の発話者が第２の非登録話者であると判断されることになる。
【０１１６】
そして、特殊ファイル４００（図１４参照）の音声区間情報に、各要素区間の発話者を表す情報を含めるようにする。今の例の場合、音声区間情報は、元オーディオ信号（又は暗号化オーディオ信号）の全区間中の何れの区間が音声区間であるかを表すだけでなく、第１及び第２の要素区間の発話者が第１の非登録話者であり且つ第３の要素区間の発話者が第２の非登録話者であることをも表す。そして、第３実施例の如く、特殊ファイル４００の権限管理情報に公開レベル情報を含めるようにし、更に、この公開レベル情報を発話者ごとに区別して設定できるようにする（換言すれば、公開レベル情報を第１の非登録話者に対応する要素区間と第２の非登録話者に対応する要素区間とで区別して設定できるようにする）。
【０１１７】
今の例の場合、第１及び第２の非登録話者に対する公開レベル情報として、夫々、第１及び第２の非登録話者用公開レベル情報が設けられる。第１の非登録話者用公開レベル情報は、第１の非登録話者が発話していた第１及び第２の要素区間に対する公開レベル情報として取り扱われ、第２の非登録話者用公開レベル情報は、第２の非登録話者が発話していた第３の要素区間に対する公開レベル情報として取り扱われる。ユーザは、記録装置１又はユーザＰＣ２上で、第１及び第２の非登録話者用公開レベル情報を個別に設定することが可能である。この設定内容に従ったサーバ３の動作は、上述したものと同様である。
【０１１８】
尚、非登録話者ごとに公開レベル情報を設定するという手法は、登録話者と非登録話者とを区別する手法と切り離して実施することが可能である。
【０１１９】
［音源分離］
また、実際の会話では、同一区間において複数の発話者が存在することもある（同時に複数の人間が発話することがある）。これを考慮し、上述してきた内容に、音源分離処理を組み合わせるようにしてもよい。これについて説明する。
【０１２０】
複数の発話者が同時に発話している区間に対して音源分離処理を適用することにより、その区間内における各発話者を区別して認識することが可能となる。音源分離処理では、互いに異なる発話者を互いに異なる音源として捉える。音源分離を行うためには、例えば、図１のマイク部１１を互いに異なる位置に配置された複数のマイクロホンにて形成するようにし、各マイクロホンの出力信号間の遅延量や各マイクロホンの出力信号間の信号レベル差などから音源を分離する。音源分離の処理内容自体は公知であるため、詳細な説明を割愛する。音源を分離することができれば、互いに異なる複数の発話者を分離して認識することができる。
【０１２１】
例えば、図１３における第１の要素区間において、第１の発話者と第２の発話者が同時に発話していた場合を考える。第１及び第２の発話者がそれぞれ第１及び第２の音源であると想定する。また、第１及び第２の発話者の音声をそれぞれ第１及び第２の音声と呼ぶ。この場合、本実施例に係る話者認識部は、第１の要素区間に対して音源分離処理を施し、これによって音源を分離する。つまり、第１の要素区間に含まれる、第１の音源からの第１の音声（第１の音声の信号成分）と第２の音源からの第２の音声（第２の音声の信号成分）を分離する。この後、話者認識部は、分離によって得られた各音声に対して上述してきた話者認識を行う。
【０１２２】
図１３の第２及び第３の要素区間に対しても同様の処理を行う。これにより、例えば、第１の要素区間において第１及び第２の非登録話者が発話しており、第２の要素区間において第１の非登録話者のみが発話しており、第３の要素区間において第２の非登録話者のみが発話していると判断された場合を想定する。この判断結果は、特殊ファイル４００（図１４参照）の音声区間情報に含められる。そして、第３実施例の如く、特殊ファイル４００の権限管理情報に公開レベル情報を含めるようにし、更に、この公開レベル情報を発話者ごとに区別して設定できるようにする。
【０１２３】
今の例の場合、第１及び第２の非登録話者に対する公開レベル情報として、夫々、第１及び第２の非登録話者用公開レベル情報が設けられる。第１の非登録話者用公開レベル情報は、第１の非登録話者が発話していた第１及び第２の要素区間に対する公開レベル情報として取り扱われ、第２の非登録話者用公開レベル情報は、第２の非登録話者が発話していた第１及び第３の要素区間に対する公開レベル情報として取り扱われる。ユーザは、記録装置１又はユーザＰＣ２上で、第１及び第２の非登録話者用公開レベル情報を個別に設定することが可能である。
【０１２４】
この設定内容に従ったサーバ３の動作は、上述したものと同様であるが、第１の要素区間に対しては、第１及び第２の非登録話者用公開レベル情報が競合するため、どちらか一方が優先して使用される。例えば、第１の非登録話者用公開レベル情報が「ユーザＰＣ２との間で第３の公開関係を有する閲覧側ＰＣに、第１の権限を与えることを指示」している一方で、第２の非登録話者用公開レベル情報が「ユーザＰＣ２との間で第３の公開関係を有する閲覧側ＰＣに、第３の権限を与えることを指示」している場合において、ユーザＰＣ２との間で第３の公開関係を有する閲覧用ＰＣ１０３がサーバ３内の特殊ファイル４００に対する送信要求をサーバ３に対して出力した際、サーバ３は以下のように動作する。
【０１２５】
サーバ３は、第１の非登録話者用公開レベル情報が指示する第１の権限と、第２の非登録話者用公開レベル情報が指示する第３の権限と、を比較し、権限を表す数値の大きい方を選択する。今の例の場合、第３の権限を選択されることになる。従って、サーバ３は、第１の要素区間に関しては、元オーディオ信号の代わりに発話内容が特定できないような信号を閲覧用ＰＣ１０３に送信する（図１１（ｃ）参照）。このように処理することにより、第２の非登録話者のプライバシーが適切に保護される。
【０１２６】
＜＜第５実施例＞＞
次に、第５実施例について説明する。図１の記録装置１に再生機能を付加することにより、オーディオ信号記録再生装置を形成することができる。図１６に、オーディオ信号記録再生装置６（以下、「記録再生装置６」と略記する）の内部ブロック図を示す。記録再生装置６は、図１の記録装置１を含み、更にオーディオ信号処理部１６及びスピーカを含む再生出力部１７を備える。記録再生装置６に含まれる記録装置１は、上述の各実施例で述べたそれと同じものである。
【０１２７】
再生時において、オーディオ信号処理部１６は、主制御部１４の制御の下、メモリカード１３に保存されている特殊ファイルから暗号化オーディオ信号と復号用情報を読み出し、復号用情報に基づいて暗号化オーディオ信号を復号することにより元オーディオ信号を復元する。そして、復元した元オーディオ信号を再生出力部１７に与えることにより、再生出力部１７から元オーディオ信号が再生出力される。
【０１２８】
＜＜第６実施例＞＞
次に、第６実施例について説明する。図１６の記録再生装置６に撮影機能を付加することにより、撮像装置を形成することができる。図１７に、撮像装置７の内部ブロック図を示す。撮像装置７は、図１６の記録再生装置６を含み、更に、撮像部１８、映像信号処理部１９及び表示部２０を備える。撮像装置７は、静止画像又は動画像を撮影可能なデジタルビデオカメラである。
【０１２９】
撮像部１８は、ＣＣＤ（Charge Coupled Devices）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等からなる撮像素子と、光学系と、絞りとを含み、被写体の光学像を電気信号に変換することによって該光学像に応じた画像を取得する。映像信号処理部１９は、取得された画像を表す映像信号を生成し、映像信号に所定の圧縮処理を施してからメモリカード１３に送る。静止画像又は動画像の撮影及び記録時において、映像信号処理部１９からの映像信号はメモリカード１３に記録される。
【０１３０】
特に、動画像の撮影及び記録時には、オーディオ信号処理部１２にて生成された暗号化オーディオ信号と映像信号処理部１９からの映像信号（即ち、撮像部１８にて取得された画像に応じた画像データ）が互いに関連付けられて１つのファイルに格納される。つまり、上述してきた特殊ファイルの本体領域内に暗号化オーディオ信号と映像信号が格納される。この際、オーディオ信号に対するプライバシー保護手法に関連して、特殊ファイルに格納される画像データに対しても何らかの加工処理を施しておいても良い（例えば、顔領域にモザイク処理等を施してから特殊ファイルに保存する）。
【０１３１】
表示部２０は、撮像部１８による現時点の取得画像又はメモリカード１３に記録された映像信号によって表される画像を表示する。
【０１３２】
尚、撮像装置７から、オーディオ信号処理部１６及び再生出力部１７を省くことも可能である。
【０１３３】
＜＜第７実施例＞＞
次に、第７実施例について説明する。第７実施例では、通信網４などを介して公開する予定がないオーディオ信号に対してプライバシーの保護を図る手法を説明する。
【０１３４】
複数の記録再生装置間におけるプライバシーの保護手法を説明する。今、図１８に示す如く、２台の記録再生装置６及び６ａがあったとする。図１８における記録再生装置６は、図１６に示すそれと同じものである。記録再生装置６ａは、記録再生装置６と同一の構成を有する記録再生装置である。記録再生装置６ａの内部ブロック図は、図１６のそれと同じであるため、重複する図示を省略する。
【０１３５】
記録再生装置６及び６ａを含む各記録再生装置には、互いに異なる固有コードが割り振られている。この固有コードは、例えば、各記録再生装置に割り当てられたシリアル番号である。例えば、各記録再生装置の出荷時において、記録再生装置（６又は６ａ）の内部に設けられた不揮発性メモリ（不図示）に上記の固有コードを保存しておく。今、記録再生装置６に割り当てられた固有コードを第１の固有コードと呼び、記録再生装置６ａに割り当てられた固有コードを第２の固有コードと呼ぶ。上述の説明から明らかなように、第１の固有コードと第２の固有コードは互いに異なる。
【０１３６】
本実施例において、特殊ファイルの権限管理情報は認証コードを含み、ユーザは該認証コードを変更できないものとする。そして、各記録再生装置（６、６ａ）は、自身に割り当てられた固有コードを認証コードとして特殊ファイルのヘッダ領域内に書き込むものとする。
【０１３７】
また、本実施例において、各記録再生装置（６、６ａ）には特殊ファイルに対する閲覧用ソフトウェアが導入されており、各記録再生装置（６、６ａ）は該閲覧用ソフトウェア上で特殊ファイル内のデータを読み出すものとする（該閲覧用ソフトウェアを用いることなく、特殊ファイル内のデータを読み出すことができないとする）。閲覧用ソフトウェアは、図１６の主制御部１４上で動作する。
【０１３８】
そして、今、記録再生装置６において、元オーディオ信号が取得され、その元オーディオ信号に対応する特殊ファイル４３０が記録再生装置６のメモリカード１３に保存された場合を考える（図１８参照）。特殊ファイル４３０は図２の特殊ファイル３００と同様のデータ構造を有しているが、特殊ファイル４３０のヘッダ領域には、記録再生装置６に割り当てられた第１の固有コードが認証コードとして書き込まれることになる。
【０１３９】
閲覧用ソフトウェアは、特殊ファイル４３０のヘッダ領域に書き込まれた認証コードと当該閲覧用ソフトウェアが導入された記録再生装置の固有コードとを照合し、両者の一致が確認された場合にのみ、復号用情報に基づいて特殊ファイル４３０内の暗号化オーディオ信号を復号し、この復号によって得られた元オーディオ信号を当該閲覧用ソフトウェアが導入された記録再生装置にて再生出力させる。尚、認証コードと固有コードとの照合を行う照合部と、その照合結果に基づく暗号化オーディオ信号の復号及び元オーディオ信号の再生出力に対する許可／禁止を判別する判別部は、主制御部１４によって実現されることになる。
【０１４０】
具体的には、記録再生装置６において以下のような動作が行われる。記録再生装置６のユーザが特殊ファイル４３０に対応するオーディオ信号を再生出力しようとする場合、再生出力を指示する操作を操作部１５に対して行う。この操作がなされると、閲覧用ソフトウェア（即ち、記録再生装置６の主制御部１４）が特殊ファイル４３０のヘッダ領域に書き込まれた認証コードをメモリカード１３から読み出すと共に記録再生装置６に割り当てられた固有コードを上記不揮発性メモリ等から読み出し、読み出した認証コードと固有コードを照合する。今の場合、両者が一致しているため、閲覧用ソフトウェア（即ち、記録再生装置６の主制御部１４）は暗号化オーディオ信号の復号及び元オーディオ信号の再生出力を許可する。従って、記録再生装置６のオーディオ信号処理部１６にて特殊ファイル４３０内の暗号化オーディオ信号が復号されて、復号によって得られた元オーディオ信号が記録再生装置６の再生出力部１７から再生出力される。
【０１４１】
一方、特殊ファイル４３０を格納したメモリカード１３を記録再生装置６ａに装着し、記録再生装置６ａのユーザが特殊ファイル４３０に対応するオーディオ信号を再生出力しようとした場合は、記録再生装置６ａにおいて以下のような動作が行われる。記録再生装置６ａにおいて、再生出力を指示する操作がなされると、閲覧用ソフトウェア（即ち、記録再生装置６ａの主制御部１４）が特殊ファイル４３０のヘッダ領域に書き込まれた認証コードをメモリカード１３から読み出すと共に記録再生装置６ａに割り当てられた固有コードを上記不揮発性メモリ等から読み出し、読み出した認証コードと固有コードを照合する。今の場合、両者は一致していないため、閲覧用ソフトウェア（即ち、記録再生装置６ａの主制御部１４）は暗号化オーディオ信号の復号及び元オーディオ信号の再生出力を禁止する。この場合、例えば、暗号化オーディオ信号をそのまま記録再生装置６ａの再生出力部１７に与える。このようにすれば、記録再生装置６ａのユーザは、音声区間における人の音声を聞き取ることができない。或いは、オーディオ信号を一切再生出力部１７に与えないようにしてもよい。
【０１４２】
尚、記録再生装置６及び６ａの内、記録再生装置６においてのみ、暗号化オーディオ信号の復号の許可／禁止に対する、上述のような処理を解除可能としておくとよい。この解除は、閲覧用ソフトウェア上で、認証コードと固有コードとの合致を条件として実行される（従って、記録再生装置６ａでは実行できない）。この解除を指示する操作が記録再生装置６に対してなされた後は、特殊ファイル４３０に対応する元オーディオ信号の復元及び再生出力を記録再生装置６ａ上でも行うことが可能となる。
【０１４３】
また、複数の記録再生装置間の動作について説明したが、記録再生装置を含む複数の撮像装置間でも同様の動作を行うことができる。
【０１４４】
次に、上記の特殊ファイル４３０を例にとりつつ、ＰＣ上におけるプライバシー保護手法を説明する。今、図１９に示す如く、ユーザＰＣ２の他に、ユーザＰＣ２とは異なるパーソナルコンピュータ２ａ（以下、ＰＣ２ａという）があったとする。ＰＣ２ａは、ユーザＰＣ２と同一の構成を有する。ＰＣ２ａの内部ブロック図は、図７のそれと同じであるため、重複する図示を省略する。特殊ファイル４３０は、ユーザＰＣ２とＰＣ２ａに提供される。
【０１４５】
本実施例において、ユーザＰＣ２及びＰＣ２ａには特殊ファイルに対する専用ソフトウェアが導入されており、ユーザＰＣ２及びＰＣ２ａを含む、特殊ファイルにアクセス可能な再生機器（オーディオ信号再生装置）は、その専用ソフトウェア上でしか特殊ファイル内の各データの読み出し及び編集ができないものとする。専用ソフトウェアを表すプログラムは、ハードディスク等から成る図７のメモリ４８に格納され、専用ソフトウェアは主制御部４１上で動作する。
【０１４６】
専用ソフトウェアには、ＰＣ用登録コードを登録可能である。この登録は、専用ソフトウェアを再生機器（例えば、ユーザＰＣ２及びＰＣ２ａ）に導入する際に行われる。記録再生装置６及びユーザＰＣ２のユーザは、ユーザＰＣ２に専用ソフトウェアを導入する際に、記録再生装置６に割り当てられた第１の固有コードをユーザＰＣ２に与えることにより、第１の固有コードをＰＣ用登録コードとしてユーザＰＣ２の専用ソフトウェア上に登録する。一方、記録再生装置６ａ及びＰＣ２ａのユーザは、ＰＣ２ａに専用ソフトウェアを導入する際に、記録再生装置６ａに割り当てられた第２の固有コードをＰＣ２ａに与えることにより、第２の固有コードをＰＣ用登録コードとしてＰＣ２ａの専用ソフトウェア上に登録する。第１の固有コードは、記録再生装置６ａ及びＰＣ２ａのユーザにとって不明である。
【０１４７】
専用ソフトウェアは、特殊ファイル４３０のヘッダ領域に書き込まれた認証コード（今の例の場合、第１の固有コード）と当該専用ソフトウェアに登録されたＰＣ用登録コードとを照合し、両者の一致が確認された場合にのみ、特殊ファイル４３０内の暗号化オーディオ信号を復号して、復号によって得られた元オーディオ信号を当該専用ソフトウェアが導入された再生機器の再生出力部から再生出力させる。尚、暗号化オーディオ信号の復号は、例えば、図７のオーディオ信号処理部４２（復号処理部）によって実施される。また、認証コードとＰＣ用登録コードとの照合を行う照合部と、その照合結果に基づく暗号化オーディオ信号の復号及び元オーディオ信号の再生出力に対する許可／禁止を判別する判別部は、主制御部４１によって実現されることになる。
【０１４８】
具体的には、ユーザＰＣ２において以下のような動作が行われる。ユーザＰＣ２のユーザが特殊ファイル４３０に対応するオーディオ信号を再生出力しようとする場合、再生出力を指示する操作をＰＣ操作キー４７に対して行う。この操作がなされると、専用ソフトウェア（即ち、ユーザＰＣ２の主制御部４１）が特殊ファイル４３０のヘッダ領域に書き込まれた認証コードとユーザＰＣ２の専用ソフトウェアに登録されたＰＣ用登録コードを照合する。今の場合、両者が一致しているため、専用ソフトウェア（即ち、ユーザＰＣ２の主制御部４１）は暗号化オーディオ信号の復号及び元オーディオ信号の再生出力を許可する。従って、ユーザＰＣ２において特殊ファイル４３０内の暗号化オーディオ信号が復号されて、復号によって得られた元オーディオ信号がユーザＰＣ２の再生出力部４６から再生出力される。また、ユーザＰＣ２において、元オーディオ信号の編集も許可される。
【０１４９】
一方、ＰＣ２ａのユーザが特殊ファイル４３０に対応するオーディオ信号を再生出力しようとした場合は、ＰＣ２ａにおいて以下のような動作が行われる。ＰＣ２ａのユーザは、その再生出力を指示する操作をＰＣ２ａのＰＣ操作キー４７に対して行う。この操作がなされると、専用ソフトウェア（即ち、ＰＣ２ａの主制御部４１）が特殊ファイル４３０のヘッダ領域に書き込まれた認証コードとＰＣ２ａの専用ソフトウェアに登録されたＰＣ用登録コードを照合する。今の場合、両者は一致していないため、専用ソフトウェア（即ち、ＰＣ２ａの主制御部４１）は暗号化オーディオ信号の復号及び元オーディオ信号の再生出力を禁止する。この場合、例えば、暗号化オーディオ信号をそのままＰＣ２ａの再生出力部４６に与える。このようにすれば、ＰＣ２ａのユーザは、音声区間における人の音声を聞き取ることができない。或いは、オーディオ信号を一切再生出力部４６に与えないようにしてもよい。
【０１５０】
尚、ユーザＰＣ２及びＰＣ２ａの内、ユーザＰＣ２においてのみ、暗号化オーディオ信号の復号の許可／禁止に対する、上述のような処理を解除可能としておくとよい。この解除は、専用ソフトウェア上で、認証コードとＰＣ用登録コードとの合致を条件として実行される（従って、ＰＣ２ａでは実行できない）。この解除を指示する操作がユーザＰＣ２に対してなされた後は、特殊ファイル４３０に対応する元オーディオ信号の復元及び再生出力をＰＣ２ａ上でも行うことが可能となる。
【０１５１】
上述のように処理することで、記録再生装置６又はユーザＰＣ２以外では元オーディオ信号は再生出力されなくなるため、メモリカード１３が紛失又は盗難されたり、コンピュータウイルスやファイル交換ソフトの悪用等によってネット経由で特殊ファイル４３０が流出した場合でも、プライバシーが保護される。
【０１５２】
＜＜第８実施例＞＞
上述の各実施例にて生成された特殊ファイルは、メモリカード１３以外の記録媒体にコピー（複製）される可能性があるが、このコピーに対して、プライバシー保護を図る仕組みを導入することもできる。本実施例では、特殊ファイルを特定の複製用ソフトウェア上でしかコピーできないものとする。複製用ソフトウェアは、例えば、ユーザＰＣ２に導入され、ユーザＰＣ２上で動作する。
【０１５３】
本実施例において、特殊ファイルの権限管理情報は権限レベル情報を含み、ユーザは権限レベル情報を変更できないものとする。図１の記録装置１、図１６の記録再生装置６又は図１７の撮像装置７上で作成された特殊ファイルに対し、ユーザは、パスワードとしての認証コードを付与することができる。この付与は、記録装置１、記録再生装置６若しくは撮像装置７又はユーザＰＣ２上で行われる。その付与が行われた後の特殊ファイル５００のデータ構造を図２０に示す。尚、認証コードの付与は必須ではない。
【０１５４】
特殊ファイル５００のヘッダ領域には、音声区間情報、復号鍵情報及び権限管理情報が格納され、その権限管理情報に、上記の権限レベル情報及び認証コードが含まれることになる。特殊ファイル５００の本体領域には、暗号化オーディオ信号のデータが格納される。権限レベル情報は、複数段階に分類された権限レベルの何れかを示す。今、権限レベル情報は「１」、「２」又は「３」の何れかの値をとり、権限レベルが３段階で分類されるものとする。勿論、権限レベルを３段階以外の段階数で分類しても構わない。権限レベル情報が「１」である時に権限レベルは最も高く、権限レベル情報の数値が大きくなるにつれて権限レベルが低くなるものとする。
【０１５５】
権限レベル情報は、当初「１」となっている。つまり、特殊ファイル５００が作成されてメモリカード１３に保存される際、権限レベル情報として「１」が書き込まれる。
【０１５６】
複製用ソフトウェア上で特殊ファイル５００を複製する時、権限レベル情報だけは複製元の特殊ファイルのそれから変更される。具体的には、複製元の特殊ファイルにおける権限レベル情報の数値に対して複製先の特殊ファイルにおける権限レベル情報の数値を１以上大きくする。例えば、複製元の特殊ファイルにおける権限レベル情報が「１」であるとき、複製先の特殊ファイルにおける権限レベル情報は「２」とされ、複製元の特殊ファイルにおける権限レベル情報が「２」であるとき、複製先の特殊ファイルにおける権限レベル情報は「３」とされる。但し、複製しようとするユーザが複製用ソフトウェアが導入された機器（例えばユーザＰＣ２）に対して上記の認証コードを与えた上で複製を行った場合は、権限レベル情報の変更は行われないものとする。
【０１５７】
本実施例において、記録再生装置６及び撮像装置７並びにユーザＰＣ２を含む、特殊ファイル５００にアクセス可能な再生機器（オーディオ信号再生装置）は、権限レベル情報に応じた再生制御を行う。説明の具体化のため、再生機器が、ユーザＰＣ２である場合を考える。
【０１５８】
例えば、特殊ファイルに対応するオーディオ信号を再生出力するように指示された際、ユーザＰＣ２は自身に与えられた特殊ファイル５００内の権限レベル情報を参照する。そして、権限レベル情報に応じて、以下のような動作を行う。
【０１５９】
権限レベル情報が「１」の時、ユーザＰＣ２は、特殊ファイル５００内の復号用情報に基づいて特殊ファイル５００内の暗号化オーディオ信号の復号を行い、復号によって得られた元オーディオ信号をユーザＰＣ２の再生出力部４６にて再生出力する。
【０１６０】
権限レベル情報が「２」の時、ユーザＰＣ２は、復号用情報に基づいて暗号化オーディオ信号から元オーディオ信号を復元した後、音声区間情報に基づきつつ音声区間における元オーディオ信号に所定の加工処理を施し、音声区間における発話者が特定できないような第１加工オーディオ信号を作成する。この第１加工オーディオ信号は、第３実施例で述べたそれと同様のものであり、第３実施例で述べた手法にてそれを作成することができる（図１１（ｂ）参照）。そして、その第１加工オーディオ信号をユーザＰＣ２の再生出力部４６にて再生出力する。
【０１６１】
権限レベル情報が「３」の時、ユーザＰＣ２は、特殊ファイル５００内の暗号化オーディオ信号を読み出し、その暗号化オーディオ信号と音声区間情報に基づいて、音声区間における発話内容が特定できないような第２加工オーディオ信号を作成する。この第２加工オーディオ信号は、第３実施例で述べたそれと同様のものであり、第３実施例で述べた手法にてそれを作成することができる（図１１（ｃ）参照）。そして、その第２加工オーディオ信号をユーザＰＣ２の再生出力部４６にて再生出力する。
【０１６２】
複製された特殊ファイルを含む記録媒体は、最初は知人や家族に渡されるが、その先々で不特定の人間に行き渡ることもある。これを考慮し、上述の如く、コピーを繰り返す度に権限レベル情報を変更していく（再生に関する権限レベルを低下させていく）。これにより、最終的に、複製された特殊ファイルでは音声が再生されないようになる。結果、不特定の人間に音声情報が流通する可能性が抑制され、プライバシーの保護が図られる。また、パスワードとしての認証コードを利用することで、権限レベルを維持したままでのコピーも可能である。認証コードを利用すれば、知人や家族などに対しては同じ特殊ファイルを配布すること可能である。
【０１６３】
＜＜変形等＞＞
上述した説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態の変形例または注釈事項として、以下に、注釈１〜注釈４を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。
【０１６４】
［注釈１］
上述の各実施例では、音声区間の元オーディオ信号に対してのみ暗号化処理を施し、非音声区間の元オーディオ信号に対しては暗号化処理を施さないと述べたが、暗号化処理を音声区間と非音声区間の双方の元オーディオ信号に対して施すようにしても構わない。この場合においても、例えば、非音声区間に関しては、権限管理情報の如何によらず記録時の元オーディオ信号が再生機器側で再生出力されるようにする。
【０１６５】
［注釈２］
暗号化オーディオ信号を復号する時に音声区間情報を利用する例を説明したが、この音声区間情報を利用して早送り再生等を実施することも可能である。例えば、暗号化オーディオ信号から元オーディオ信号を復号した後、音声区間情報に基づいて元オーディオ信号の全区間の内の音声区間における信号を切り出し、その切り出した部分の信号のみを再生出力することで早送り再生が可能となる。また例えば、その切り出した部分の信号を非音声区間にまで伸張して、音声をゆっくり再生することもできる。
【０１６６】
［注釈３］
図１の記録装置１、図１６の記録再生装置６及び図１７の撮像装置７は、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって実現可能である。特に、主制御部１４、オーディオ信号処理部１２及び１６の各機能は、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合わせによって実現可能である。
【０１６７】
図７のユーザＰＣ２及び図８のサーバ３も、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって実現可能である。特に、図７の主制御部４１の機能及び図８の主制御部６１の機能は、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合わせによって実現可能である。ソフトウェアを用いて実現される部位についてのブロック図は、その部位の機能ブロック図を表すことになる。
【０１６８】
［注釈４］
例えば、以下のように考えることができる。図１等に示される主制御部１４は、特殊ファイルをメモリカード１３に記録する記録制御手段としての機能を備える。図７のユーザＰＣ２において、カードスロット４４は、特殊ファイルを受け取るためのファイル入力手段として機能しうる。勿論、特殊ファイルを有線又は無線の通信によってユーザＰＣ２に提供することもできる。上述してきた特殊ファイルは、勿論、電子ファイルであり、その電子ファイルには、オーディオ信号のデータだけでなく画像データも格納されうる。
【図面の簡単な説明】
【０１６９】
【図１】本発明の第１実施例に係るオーディオ信号記録装置の内部ブロック図である。
【図２】図１のメモリカードに保存される特殊ファイルのデータ構造を示す図である。
【図３】本発明の第２実施例に係る、図１のオーディオ信号処理部の内部ブロック図である。
【図４】図３の音声／非音声判別部の動作内容を説明するための図である。
【図５】図３の音声／非音声判別部の動作内容を説明するための図である。
【図６】本発明の第３実施例に係るファイル管理システムの全体構成図である。
【図７】図６のユーザＰＣの概略内部ブロック図である。
【図８】図６のサーバの概略内部ブロック図である。
【図９】図６のユーザＰＣと各閲覧用ＰＣとの関係を規定する公開管理関係情報の内容例を示す図である。
【図１０】図８のサーバのサーバＨＤＤに保存された特殊ファイル内の公開レベル情報の内容例を示す図である。
【図１１】図６のサーバから各閲覧用ＰＣに送信されるオーディオ信号を示す図である。
【図１２】本発明の第４実施例に係る話者認識部のブロック図である。
【図１３】本発明の第４実施例に係る元オーディオ信号の模式図である。
【図１４】本発明の第４実施例に係る特殊ファイルのデータ構造を示す図である。
【図１５】本発明の第４実施例に係る、登録話者用公開レベル情報（ａ）と非登録話者用公開レベル情報（ｂ）の内容例を示す図である。
【図１６】本発明の第５実施例に係るオーディオ信号記録再生装置の内部ブロック図である。
【図１７】本発明の第６実施例に係る撮像装置の内部ブロック図である。
【図１８】本発明の第７実施例に係る２台のオーディオ信号記録再生装置を示す図である。
【図１９】本発明の第７実施例に係る２台のＰＣ（パーソナルコンピュータ）を示す図である。
【図２０】本発明の第８実施例に係る特殊ファイルのデータ構造を示す図である。
【符号の説明】
【０１７０】
１  オーディオ信号記録装置
２  ユーザＰＣ
３  サーバ
６  オーディオ信号記録再生装置
７  撮像装置
１０１、１０２、１０３  閲覧用ＰＣ
【図１】
2008309959.tif 000004
【図２】
2008309959.tif 000005
【図３】
2008309959.tif 000006
【図４】
2008309959.tif 000007
【図５】
2008309959.tif 000008
【図６】
2008309959.tif 000009
【図７】
2008309959.tif 000010
【図８】
2008309959.tif 000011
【図９】
2008309959.tif 000012
【図１０】
2008309959.tif 000013
【図１１】
2008309959.tif 000014
【図１２】
2008309959.tif 000015
【図１３】
2008309959.tif 000016
【図１４】
2008309959.tif 000017
【図１５】
2008309959.tif 000018
【図１６】
2008309959.tif 000019
【図１７】
2008309959.tif 000020
【図１８】
2008309959.tif 000021
【図１９】
2008309959.tif 000022
【図２０】
2008309959.tif 000023