(57)【要約】【課題】ユーザの手を煩わせることなく、処理対象の音声データ中の目的とする部分を迅速に見つけ出して利用することができるようにする。【解決手段】マイク１３１（１）、１３１（２）を通じて取り込んだ信号から検出される音声信号部分から、音声信号処理部１３６により話者の位置を特定すると共に、この話者の位置をも考慮して、音声特徴解析部１４３により処理対象の音声信号の変化点を検出する。マイク１３１（１）、１３１（２）を通じて取り込んだ信号は、デジタル信号に変換し、検出された話者の変化点の情報と共にデータ記憶装置１１１に記録する。データ記憶装置１１１に記憶された情報の再生時には、話者の変換点の情報に基づいて、デジタル信号の再生に同期して、記憶保持されている話者に関連する表示情報をＬＣＤ１３５に表示する。【選択図】図１２
2008102538.tif 000002
【特許請求の範囲】
【請求項１】
複数のマイクと、
上記マイクから入力される信号をデジタル信号へ変換するデジタル変換手段と、
上記デジタル信号に変換された信号から音声信号部分を検出する音声信号検出手段と、
上記音声信号検出手段によって検出された複数のマイクによって集音された音声信号部分に基づいて話者の位置を特定するとともに話者の変化点を検出するための話者検出手段と、
話者を特定するデータと話者に関する話者関連表示情報とを関連づけて話者毎に記憶する話者情報記憶手段と、
記憶媒体に上記デジタル信号と上記話者の変化点の情報を記憶させる記憶制御手段と、
情報表示がされる表示手段と、
上記記憶媒体に記憶されたデジタル信号と上記話者の変化点の情報を再生する再生手段と、
話者の変化点の情報に基づいて、上記デジタル信号の再生に同期して話者関連表示情報を上記表示手段に表示する制御手段と
を備える記憶再生装置。
【請求項２】
上記特定された話者の位置の話者を特定するための話者位置情報が入力される話者位置入力手段を更に備え、入力された話者位置が上記話者情報記憶手段に記憶される第１項記載の記憶再生装置。
【請求項３】
上記デジタル信号に変換された信号を情報圧縮する情報圧縮手段と、
上記記憶手段に記憶された圧縮されたデジタル信号を伸張する圧縮情報伸張手段と
を更に備え、
上記記憶媒体には情報圧縮されたデジタル信号が記憶される第２項記載の記憶再生装置。
【請求項４】
上記話者関連表示情報が入力される入力手段を更に備える第３項記載の記憶再生装置。
【請求項５】
上記話者関連表示情報は顔写真である第４項記載の記憶再生装置。
【請求項６】
上記デジタル信号に変換された信号を情報圧縮する情報圧縮手段と、
上記記憶手段に記憶された圧縮されたデジタル信号を伸張する圧縮情報伸張手段と
を更に備え、
上記記憶媒体には情報圧縮されたデジタル信号が記憶される第１項記載の記憶再生装置。
【請求項７】
上記話者関連表示情報が入力される入力手段を更に備える第１項記載の記憶再生装置。
【請求項８】
上記話者関連表示情報は顔写真である第１項記載の記憶再生装置。
【請求項９】
複数のマイクから入力される信号を記録媒体に記録可能で、記録媒体に記憶された信号を再生する記憶再生装置の制御方法において、
上記マイクから入力される信号を記録媒体に記憶する制御は、
マイクから入力される信号をデジタル信号へ変換するステップと、
上記デジタル信号に変換された信号から音声信号部分を検出するステップと、
検出された複数のマイクによって集音された音声信号部分に基づいて話者の位置を特定するとともに話者の変化点を検出するステップと、
記録媒体に上記デジタル信号と上記話者の変化点の情報を記憶するステップと、
を備え、
上記記録媒体に記録された信号を再生する制御は、
上記記憶媒体に記憶されたデジタル信号と上記話者の変化点の情報を再生するステップと、
話者を特定するデータと話者に関する話者関連表示情報とを関連づけて話者毎に記憶する話者情報記憶手段から上記話者の変化点の情報に基づいて話者関連表示情報を読み出すステップと、
上記デジタル信号の再生に同期して上記話者の変化点の情報と上記話者情報記憶手段から読み出した上記話者関連表示情報を表示手段に表示するように制御するステップと
を備える記憶再生装置の制御方法。
【請求項１０】
上記特定された話者の位置の話者を特定するための話者位置情報の入力を受け付けるステップと、
受け付けた上記話者位置情報を上記話者情報記憶手段に記憶するステップと
を備える第９項記載の記憶再生装置の制御方法。
【請求項１１】
上記話者関連表示情報の入力を受け付けるステップをさらに備える第１０項記載の記憶再生装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えば、ＩＣ（Integrated Circuit）レコーダ、ＭＤ（Mini Disc（登録商標））レコーダ、パーソナルコンピュータなどの音声信号を処理する種々の装置、この装置で用いられる方法に関する。
【背景技術】
【０００２】
例えば、後に記す特許文献１に開示されているように、録音された音声データに対して音声認識を行って、これをテキストデータに変換し、自動的に議事録を作成するようにする議事録作成装置が提案されている。このような技術を用いることによって、人手を介すことなく、会議の議事録を迅速に作成することが可能となる。しかし、録音した全ての音声データに基づいた議事録を作成するまでもなく、重要な部分のみの議事録を作成するようにしたい場合もある。このため、録音した音声データから目的とする部分を探し出す必要が生じる。
【０００３】
例えば、ＩＣレコーダやＭＤレコーダなどを用いて長時間の会議などの様子を録音した場合、記録された音声データから聞きたい場所を探し出すには、その音声データを再生し、再生音声を聴取するようにしなければならない。もちろん、早送りや早戻しなどの機能を用いて、目的とする部分を探すようにすることも可能であるが、手間や時間がかかる場合が多い。このため、「検索を容易にするための目印」を、録音した音声データに埋め込むようにする（付加するようにする）ことができるようにした機能を備えた録音装置が提供されている。例えば、ＭＤレコーダなどにおいては、トラックマークを付加する機能として実現されている。
【特許文献１】特開平２−２０６８２５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところが、上述したように、「検索を容易にするための目印」をデータに付加するようにする機能は、ユーザの手動操作により用いることができるものであり、ユーザの操作が無ければ、目印を付加することができない。したがって、録音中に重要であると判断した部分に目印を付す操作を行おうと思っていても、会議に集中している場合などにおいては、目印を付すための操作を忘れてしまう場合もあると考えられる。
【０００５】
また、注目すべき発言部分に目印を付けられたとしても、目印を埋め込む操作は注目すべき発言を聞いたときに行われるので、目印は注目の発言の後ろに記録される。そのため、ユーザが注目の発言を聞くには、再生位置を目印のところに移動させたあと、少し前に戻す操作をしなければならない。希望の場所の先に進み過ぎたり、戻り過ぎたりして、この操作を繰り返さなければならないのは、ユーザにとってとても面倒でありストレスのたまる作業である。
【０００６】
また、目印がついている場所がどんな内容であるかは聞いてみるまで分からない。聞いてみて目的の場所でなければ、次の目印へと移動させる操作を目的の場所に達するまで繰り返さなければならず、これもまた手間のかかる作業である。このように、「検索を容易にするための目印」をデータに付加するようにする機能は、便利なものであるが、ユーザの操作がおぼつかない場合などにおいては、音声データの目的とする部分に目印を付す機能を十分に機能させることができない。
【０００７】
以上のことにかんがみ、この発明は、ユーザの手を煩わせることなく、処理対象の音声信号中の目的とする部分を迅速に見つけ出して利用することができるようにする装置、方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するため、請求項１に記載の発明の記憶再生装置は、
複数のマイクと、
上記マイクから入力される信号をデジタル信号へ変換するデジタル変換手段と、
上記デジタル信号に変換された信号から音声信号部分を検出する音声信号検出手段と、
上記音声信号検出手段によって検出された複数のマイクによって集音された音声信号部分に基づいて話者の位置を特定するとともに話者の変化点を検出するための話者検出手段と、
話者を特定するデータと話者に関する話者関連表示情報とを関連づけて話者毎に記憶する話者情報記憶手段と、
記憶媒体に上記デジタル信号と上記話者の変化点の情報を記憶させる記憶制御手段と、
情報表示がされる表示手段と、
上記記憶媒体に記憶されたデジタル信号と上記話者の変化点の情報を再生する再生手段と、
話者の変化点の情報に基づいて、上記デジタル信号の再生に同期して話者関連表示情報を上記表示手段に表示する制御手段と
を備えることを特徴とする。
【０００９】
この請求項１に記載の発明の記憶再生装置によれば、複数のマイクを備えており、当該複数のマイクのそれぞれを通じて入力される信号は、デジタル変換手段によりデジタル信号に変換され、これらのデジタル信号から音声信号検出手段により音声信号部分が検出される。そして、各マイクによって集音された信号から検出された音声信号部分に基づいて、話者検出手段によって、話者の位置が特定されると共に、話者の変化点が検出するようにされる。そして、デジタル変換手段によって変換されたデジタル信号と、話者検出手段によって検出された話者の変化点の情報が記憶制御手段の制御により所定の記録媒体に記憶される。
【００１０】
そして、所定の記録媒体に記録されたデジタル信号と話者の変化点の情報は、再生手段によって再生するようにされるが、話者情報記憶手段には、話者を特定するデータと話者に関連する話者関連表示情報が関連付けられて話者毎に記憶されており、制御手段によって、話者の変換点の情報に基づいて、デジタル信号の再生に同期して話者関連表示情報が表示手段に表示するようにされる。
【００１１】
これにより、複数のマイクを用いることにより、話者の位置をも検出され、この検出された話者の位置をも考慮されて、話者の変化点を正確に検出することができるようにされる。そして、話者の変化点毎に、話者関連表示情報が表示手段に表示するようにされ、話者が変わる毎に、その話者が誰であるのかを確実かつ迅速に知ることができるようにされる。
【発明の効果】
【００１２】
本発明によれば、長時間の会議を録音しても話者が切り換わるごとに切り替わりマーク（目印）が自動的に付加するようにされるので、議事録を作成する際に、発言の検索性を向上させ、目的とする話者の発言部分を繰り返し再生するなどのことが簡単かつ迅速に行えるようになる。
【００１３】
また、変化点における話者を識別し、その識別した話者を示す情報と音声データとの変化点とを対応付けて管理することができるので、音声データを再生することなく、特定の話者の発言部分を簡単かつ迅速に探し出すことができる。
【００１４】
また、これまで議事録作成者の記憶に頼っていた部分を排除し、手間と時間がかかっていた議事録作成作業の効率を向上させることができる。また、議事録自体の作成を省略し、検索性の高い、音声データの形式の議事録として録音データを用いるようにすることができる。
【発明を実施するための最良の形態】
【００１５】
以下、図を参照しながら、この発明の一実施の形態について説明する。以下に説明する実施の形態においては、この発明を音声信号の記録再生装置であるＩＣレコーダに適用した場合を例にして説明する。
【００１６】
［第１の実施の形態］
[ＩＣレコーダの構成と動作の概要]
図１は、この第１の実施の形態の記録再生装置であるＩＣレコーダを説明するためのブロック図である。図１に示すように、この実施の形態のＩＣレコーダは、ＣＰＵ（Central Processing Unit）１０１、プログラムや各種のデータが記憶されているＲＯＭ（Read Only Memory）１０２、主に作業領域として用いられるＲＡＭ（Random Access Memory）１０３がＣＰＵバス１０４を通じて接続されて、マイクロコンピュータの構成とされた制御部１００を備えている。なお、ＲＡＭ１０３は、後述もするように、圧縮データ領域１０３（１）と、ＰＣＭ（Pulse Code Modulation）領域１０３（２）とが設けられている。
【００１７】
制御部１００には、ファイル処理部１１０を通じてデータ記憶装置１１１が接続され、入力処理部１２０を通じてキー操作部１２１が接続されている。また、制御部１００には、アナログ／デジタルコンバータ（以下、Ａ／Ｄコンバータと略称する。）１３２を通じてマイクロホン１３１が接続され、デジタル／アナログコンバータ（以下、Ｄ／Ａコンバータと略称する。）１３４を通じてスピーカ１３３が接続されている。また、制御部１００には、ＬＣＤ（Liquid Crystal Display）１３５が接続されている。なお、この実施の形態において、ＬＣＤ１３５は、ＬＣＤコントローラの機能をも備えたものである。
【００１８】
さらに、制御部１００には、データ圧縮処理部１４１、データ伸張処理部１４２、音声特徴解析部１４３、通信インターフェース（以下、通信Ｉ／Ｆと略称する。）１４４が接続されている。図１において、２重線で示したデータ圧縮処理部１４１、データ伸張処理部１４２、音声特徴解析部１４３は、制御部１００のＣＰＵ１０１で実行されるソフトウェア（プログラム）によっても、その機能を実現することができるものである。
【００１９】
また、この実施の形態において、通信インターフェース１４４は、例えば、ＵＳＢ（Universal Serial Bus）やＩＥＥＥ（Institute of Electrical and Electronics Engineers）１３９４などのデジタルインターフェースであり、接続端子１４５に接続されるパーソナルコンピュータ、デジタルカメラなどの種々の電子機器との間でデータの送受を行うことができるものである。
【００２０】
この第１の実施の形態のＩＣレコーダは、キー操作部１２１のＲＥＣキー（録音キー）２１１が押下操作されると、ＣＰＵ１０１が各部を制御して録音処理を行う。この場合、マイクロホン１３１で集音され、Ａ／Ｄコンバータ１３２でデジタル変換されると共に、データ圧縮処理部１４１の機能によりデータ圧縮された音声信号が、ファイル変換部１１０を通じてデータ記憶装置１１１の所定の記憶領域に記録される。
【００２１】
この第１の実施の形態のデータ記憶装置１１１は、フラッシュメモリ、あるいは、フラッシュメモリを用いたメモリカードであり、後述もするように、データベース領域１１１（１）と音声ファイル１１１（２）が設けられたものである。
【００２２】
録音処理時において、この第１の実施の形態のＩＣレコーダは、音声特徴解析部１４３の機能により、集音して録音（記録）する音声信号について、所定の処理単位毎に特徴解析を行い、特徴が変化したことを検出した場合に、その特徴が変化した時点にマーク（目印）を付すようにしている。そして、このマークを利用して、録音した音声信号から目的とする音声信号部分の検索を迅速に行うことができるようにしている。
【００２３】
図２は、集音して録音する音声信号の変化点にマークを付すようにする処理の概要を説明するための図である。この第１の実施の形態のＩＣレコーダにおいては、上述もしたように、マイクロホン１３１により集音された音声信号について、所定の処理単位毎に特徴解析を行う。
【００２４】
そして、直前の特徴解析結果と比較することによって、無音部分や雑音部分から話音声部分に変化した変化点、あるいは、話音声部分であっても、話者が変化した変化点を検出し、当該音声信号上の変化点の位置（時間）を特定する。そして、その特定した位置を変化点情報（マーク情報）としてデータ記憶装置１１１に記憶しておくようにする。このように、音声信号上の変化点の位置を示す変化点情報を保持することが、集音して録音する音声信号に対してマークを付すことになる。
【００２５】
具体的には、図２に示すように、会議の様子を録音するようにした場合、録音開始から１０秒後に、Ａさんが発言を始めたとする。この場合、Ａさんの発言の開始前は、無音、あるいは、ざわめきや椅子を引く音、テーブルに何かがあたる音など、明瞭な話音声とは異なるいわゆる雑音などの無意味な音声が集音されおり、Ａさんが発言を始め、その話音声が集音されることにより、集音した音声信号の特徴解析結果は、Ａさんが発言を始める前とは明らかに異なることになる。
【００２６】
この集音して録音する音声信号の変化点を音声特徴解析部１４３において検出し、その変化点の音声信号上の位置を特定（取得）して、この特定した変化点情報（音声信号上の特定した位置情報）を図２におけるマークＭＫ１としてデータ記憶装置１１１に記憶保持する。なお、図２においては、録音開始からの経過時間を変化点情報として記憶保持するようにしている場合の例を示している。
【００２７】
そして、Ａさんの発言が終了した後、少し間をおいて、Ｂさんが発言を始めたとする。このＢさんの発言開始の直前も、無音あるいは雑音である。この場合にも、Ｂさんが発言を始め、その話音声が集音されることにより、集音した音声信号の特徴解析結果は、Ｂさんが発言を始める前とは明らかに異なることになり、図２において、マークＭＫ２が示すように、Ｂさんの発言の開始部分にマークを付すように、変化点情報（マークＭＫ２）をデータ記憶装置１１１に記憶保持する。
【００２８】
さらに、Ｂさんの発言の途中でＣさんが割って入ったような場合も発生する。この場合には、Ｂさんの話し声と、Ｃさんの話し声とでは、異なっているために、集音した音声信号の解析結果も異なることになり、図２において、マークＭＫ３が示すように、Ｃさんの発言の開始部分にマークを付すように、変化点情報（マークＭＫ３）をデータ記憶装置１１１に記憶保持する。
【００２９】
このように、この実施の形態のＩＣレコーダは、録音処理時において、集音した音声信号の特徴解析を行い、特徴が変化した音声信号上の位置を記憶保持することによって、音声信号の特徴が変化した時点にマークを付すようにすることができるようにしたものである。
【００３０】
なお、図２において、マークＭＫ１、ＭＫ２、ＭＫ３において、その他という欄が示すように、例えば、発言部分を音声認識してテキストデータに変換することにより、そのテキストデータを関連付けて記憶保持するようにしたり、その他の関連情報を一緒に記憶保持させるようにしたりすることもできるようにしている。
【００３１】
そして、この第１の実施の形態のＩＣレコーダは、キー操作部１２１のＰＬＡＹキー（再生キー）２１２が押下操作されると、ＣＰＵ１０１が各部を制御して再生処理を行う。すなわち、データ圧縮されてデータ記憶装置１１１の所定の記憶領域に記憶されている録音された音声信号（デジタル音声信号）がファイル処理部１１０を通じて読み出され、これがデータ伸張処理部１４２の機能により伸張処理されて、データ圧縮前の元のデジタル音声信号に復元される。この復元されたデジタル音声信号が、Ｄ／Ａコンバータ１３４においてアナログ音声信号に変換され、これがスピーカ１３３に供給されて録音されて再生するようにされた音声信号に応じた音声が放音される。
【００３２】
この再生処理時に、この第１のＩＣレコーダにおいては、キー操作部１２１のＮＥＸＴキー（次のマークへの位置付けを指示するキー）２１４やＰＲＥＶキー（前のマークへの位置付けを指示するキー）２１５が操作された場合に、これに応じて、再生位置をすばやくマークが付与された位置に位置付けて、そこから再生を行うことができるようにしている。
【００３３】
図３は、録音した音声信号の再生時に行われるマークが示す音声信号上の位置への位置付け動作を説明するための図であり、操作に応じて変化するＬＣＤ１３５の表示情報の変化を示す図である。図３に示すように、ＰＬＡＹキー２１１が押下操作されると、上述もしたように、ＣＰＵ１０１は各部を制御し、指示された録音音声信号の先頭から再生を開始する。
【００３４】
そして、Ａさんの発言部分においては、図２を用いて説明したように、録音処理時に付された（記憶保持された）マークＭＫ１に基づいて、図３Ａに示すように、Ａさんの発言の開始時刻が表示されると共に、これが録音開始から最初に付したマークであることを示すＳＥＱ−Ｎｏ．１という表示がされる。
【００３５】
再生が続行され、Ｂさんの発言部分の再生が開始されると、図３Ｂに示すように、Ｂさんの発言の開始時刻が表示されると共に、これが録音開始から２番目に付したマークであることを示すＳＥＱ−Ｎｏ．２という表示がされる。この後、ＰＲＥＶキー２１５が押下操作されると、ＣＰＵ１０１は、図３Ｃに示すように、開始時刻が先頭から１０秒後（０分１０秒後）のマークＭＫ１が示すＡさんの発言の開始部分に再生位置を位置付け、そこから再生を再開する。
【００３６】
この後、ＮＥＸＴキーが押下操作されると、ＣＰＵ１０１は、図３Ｄに示すように、開始時刻が先頭から１分２５秒後のマークＭＫ２が示すＢさんの発言の開始部分に再生位置を位置付け、そこから再生を再開する。さらに、ＮＥＸＴキーが押下操作されると、ＣＰＵ１０１は、図３Ｅに示すように、開始時刻が先頭から２分３０秒後のマークＭＫ３が示すＣさんの発言の開始部分に再生位置を位置付け、そこから再生を再開する。
【００３７】
このように、この実施の形態のＩＣレコーダは、録音処理時において、集音した音声信号の特徴解析を自動的に行い、特徴の変化点にマークを付するようにすると共に、再生処理時においては、ＮＥＸＴキー２１４、ＰＲＥＶキー２１５を操作することによって、付したマークが示す録音された音声信号上の位置に再生位置をすばやく位置付けて、そこから再生を行うようにすることができるものである。
【００３８】
これによって、ユーザは、すばやく目的とする話者（発言者）の発言部分に再生位置を位置付けて、録音した音声信号を再生して聴取することができるので、目的とする発言部分の議事録を迅速に作成することができる。
【００３９】
なお、ここでは、説明を簡単にするため、変化点情報として、録音開始時点からの時刻情報を用いるようにしたが、これに限るものではなく、録音された音声信号のデータ記憶装置１１１の記録媒体上のアドレスを変化点情報として用いることもできる。
【００４０】
[ＩＣレコーダの動作の詳細について]
次に、図４、図５のフローチャートを参照しながら、この第１の実施の形態のＩＣレコーダにおける録音処理と再生処理とについて、詳細に説明する。
【００４１】
［録音処理について］
まず、録音処理について説明する。図４は、この第１の実施の形態のＩＣレコーダにおいて行われる録音処理を説明するためのフローチャートである。図４に示す処理は、ＣＰＵ１０１が各部を制御することにより行われる処理である。
【００４２】
この第１の実施の形態のＩＣレコーダは、電源が投入された状態にあり、動作していないときには、ユーザからの操作入力待ちとなる（ステップＳ１０１）。ユーザが操作部１２１にある操作キーを押下すると、入力処理部１２０がそれを検知し、ＣＰＵ１０１に通知するので、ＣＰＵ１０１は、受け付けた操作入力は、ＲＥＣキー２１１の押下操作か否かを判断する（ステップＳ１０２）。
【００４３】
ステップＳ１０２の判断処理において、受け付けた操作入力は、ＲＥＣキー２１１の押下操作ではないと判断したときには、ＣＰＵ１０１はユーザにより操作されたキーに応じた処理、例えば、ＰＬＡＹキー２１２に応じた再生処理、ＮＥＸＴキー１２４に応じた次のマークへの位置付け処理、ＰＲＥＶキー２１５に応じた１つ前のマークへの位置付け処理などを行うことになる（ステップＳ１０３）。もちろん、早送り処理や早戻し処理などを行うこともできるようにされている。
【００４４】
ステップＳ１０２の判断処理において、ＲＥＣキーが押下されたと判断した場合には、ＣＰＵ１０１は、ファイル処理部１１０にファイル記録処理を行うように指示を出し、これに応じて、ファイル処理部１１０は、データ記録装置１１１に音声ファイル１１１（２）を作成する（ステップＳ１０４）。
【００４５】
そして、ＣＰＵ１０１は、キー操作部１２１のＳＴＯＰキー（停止キー）２１３が押下操作されたか否かを判断する（ステップＳ１０５）。ステップＳ１０５の判断処理において、ＳＴＯＰキー２１３が操作されたと判断したときには、後述もするように、所定の終了処理を行って（ステップＳ１１４）、この図４に示す処理を終了する。
【００４６】
ステップＳ１０５の判断処理において、ＳＴＯＰキー２１３は操作されていないと判断したときには、ＣＰＵ１０１は、Ａ／Ｄコンバータ１３２にマイクロホン１３１を通じて入力されるアナログ音声信号をデジタル音声信号に変換することを指示し、集音音声のデジタル変換を行うようにする（ステップＳ１０６）。
【００４７】
これにより、Ａ／Ｄコンバータ１３２は、マイクロホン１３１を通じて入力されるアナログ音声信号を一定周期ごと（所定の処理単位ごと）に変換したデジタル音声信号を、ＲＡＭ１０３のＰＣＭデータ領域１０３（２）に書き込み、書き込んだことをＣＰＵ１０１に通知する（ステップＳ１０７）。
【００４８】
これを受けて、ＣＰＵ１０１は、データ圧縮処理部１４１に対し、ＲＡＭ１０４のＰＣＭデータ領域１０３（２）に格納したデジタル音声信号（ＰＣＭデータ）をデータ圧縮するように指示する（ステップＳ１０８）。これに応じて、データ圧縮処理部１４１は、ＲＡＭ１０３のＰＣＭデータ領域１０３（２）のデジタル音声信号を圧縮処理し、圧縮したデジタル音声信号をＲＡＭ１０３の圧縮データ領域１０３（１）に書き込む（ステップＳ１０９）。
【００４９】
そして、ＣＰＵ１０１は、ファイル処理部１１０に対して、ＲＡＭ１０３の圧縮データ領域１０３（１）の圧縮されたデジタル音声信号をデータ記憶装置１１１に作成した音声ファイル１１１（２）に書き込むことを指示し、これにより、ファイル処理部１１０により、ＲＡＭ１０３の圧縮データ領域の圧縮されたデジタル音声信号が、データ記憶装置１１１の音声ファイル１１１（２）に書き込まれる（ステップＳ１１０）。
【００５０】
ファイル処理部１１０は、圧縮されたデジタル音声信号の音声ファイル１１１（２）への書き込みを終了すると、これをＣＰＵ１０１に通知するので、ＣＰＵ１０１は、音声特徴解析部１４３に対して、ＲＡＭ１０３のＰＣＭデータ領域１０３（２）に先に記録されたデジタル音声信号の特徴解析を指示し、音声特徴解析部１４３によって、ＲＡＭ１０３のＰＣＭデータ領域１０３（２）のデジタル音声信号の特徴を抽出する（ステップＳ１１１）。
【００５１】
なお、音声特徴解析部１４３において行われるデジタル音声信号の特徴解析（特徴抽出）処理は、声紋分析、話速分析、間の取り方の分析、音声の強弱の分析などの種々の方法を用いることが可能である。ここでは説明を簡単にするため、この第１の実施の形態のＩＣレコーダの音声特徴解析部１４３は、声紋分析を行うことにより、解析対象のデジタル音声信号の特徴を抽出するものとして説明する。
【００５２】
そして、音声特徴解析部１４３は、今回抽出した音声の特徴（声紋データ）と、過去に抽出した音声の声紋データとを比較し、入力された音声信号から抽出した特徴が、これまでの音声の特徴から変化したか否かを判断し、その判断結果をＣＰＵ１０１に対して通知するので、これに基づき、ＣＰＵ１０１は、集音音声の特徴が変化したか否かを判断する（ステップＳ１１２）。
【００５３】
ステップＳ１１２の判断処理において、変化がなかったと判断したときには、ＣＰＵ１０１は、ステップＳ１０５からの処理を繰り返し、次の周期（次の処理単位）の音声信号についても、上述したステップＳ１０５からステップＳ１１２までの処理を行うようにする。
【００５４】
ステップＳ１１２の判断処理において、変化があったと判断したときには、ＣＰＵ１０１は、「話者が切り替わった」と判断し、ファイル処理部１１０に対して、処理対象の音声信号上の音声の特徴の変化点にマークを付することを指示する（ステップＳ１１３）。これにより、ファイル処理部１１０は、データ記録装置１１１上のデータベース領域１１１（１）に当該音声ファイル１１１（２）に関する情報として、音声の特徴に変化のあった場所を示す情報として、当該音声ファイル１１１（２）の先頭からの時刻情報、あるいは、記録位置に対応するアドレス情報を書き込む。この場合、音声ファイルと音声の特徴に変化のあった場所を示す情報とは対応付けられて記憶される。
【００５５】
このステップＳ１１３の処理の後、ＣＰＵ１０１は、ステップＳ１０５からの処理を繰り返し、次の周期（次の処理単位）の音声信号についても、上述したステップＳ１０５からステップＳ１１２までの処理を行うようにする。
【００５６】
そして、ステップＳ１０５の判断処理において、ユーザがＳＴＯＰキー２１３を押下操作したと判断したときには、ＣＰＵ１０１は、ファイル処理部１１０に対してデータ記憶装置１１１の音声ファイル１１１（２）へのデータの書き込みの停止を、データ圧縮処理部１４１に対して圧縮処理の停止を、Ａ／Ｄコンバータ１３２に対してデジタル信号への変換の停止を指示する等の所定の終了処理を行って（ステップＳ１１４）、この図４に示す処理を終了する。
【００５７】
なお、音声特徴解析部１４３において行われる音声の特徴が変化したか否かの判断は、過去に抽出した音声の特徴データ（声紋データ）を保持しておき、これと新たに抽出した特徴データ（声紋データ）とを比較することにより行う。この場合、直前の１つの特徴データだけと比較するだけでよいのであれば、過去の特徴データは、常に直前の１つだけを保持しておけばよい。しかし、精度を向上させるため、過去の２つ以上の特徴データと比較し、２つ以上の違いが生じた場合に特徴が変化したと判断するようにする場合には、２つ以上の過去の特徴データを保持しておく必要がある。
【００５８】
このように、この第１の実施の形態のＩＣレコーダは、集音して録音する音声信号の特徴解析を行い、その集音音声信号の特徴の変化点を検出して、その変化点に相当する集音音声信号上の位置にマークを付すようにすることができるものである。
【００５９】
[再生処理について]
次に、再生処理について説明する。図５は、この第１の実施の形態のＩＣレコーダにおいて行われる再生処理を説明するためのフローチャートである。図５に示す処理は、ＣＰＵ１０１が各部を制御することにより行われる処理である。
【００６０】
この第１の実施の形態のＩＣレコーダの再生処理においては、図４を用いて説明したように、録音処理時に付される集音音声（集音して録音する音声）の特徴の変化点に付されたマークを利用して、録音された音声信号から迅速に目的とする音声信号部分を検出することができるようにしている。
【００６１】
この第１の実施の形態のＩＣレコーダは、電源が投入された状態にあり、動作していないときには、ユーザからの操作入力待ちとなる（ステップＳ２０１）。ユーザが操作部１２１にある操作キーを押下すると、入力処理部１２０がそれを検知し、ＣＰＵ１０１に通知するので、ＣＰＵ１０１は、受け付けた操作入力は、ＰＬＡＹキー２１２の押下操作か否かを判断する（ステップＳ２０２）。
【００６２】
ステップＳ２０２の判断処理において、受け付けた操作入力は、ＰＬＡＹキー２１２の押下操作ではないと判断したときには、ＣＰＵ１０１はユーザにより操作されたキーに応じた処理、例えば、ＲＥＣキー２１２に応じた録音処理、ＮＥＸＴキー１２４に応じた次のマークへの位置付け処理、ＰＲＥＶキー２１５に応じた１つ前のマークへの位置付け処理などを行うことになる（ステップＳ２０３）。もちろん、早送り処理や早戻し処理などを行うこともできるようにされている。
【００６３】
ステップＳ２０２の判断処理において、受け付けた操作入力は、ＰＬＡＹキーの押下操作であると判断したときには、ＣＰＵ１０１は、ファイル処理部１１０にデータ記録装置１１１上の音声ファイル１１１（２）の読み出しを指示する（ステップＳ２０４）。そして、ＣＰＵ１０１は、キー操作部１２１のＳＴＯＰキー（停止キー）２１３が押下操作されたか否かを判断する（ステップＳ２０５）。
【００６４】
ステップＳ２０５の判断処理において、ＳＴＯＰキー２１３が操作されたと判断したときには、後述もするように、所定の終了処理を行って（ステップＳ２１９）、この図５に示す処理を終了することになる。
【００６５】
ステップＳ２０５の判断処理において、ＳＴＯＰキー２１３が操作されていないと判断したときには、ＣＰＵ１０１はファイル処理部１１０を制御し、データ記憶装置１１１の音声ファイル１１１（２）に記憶されている圧縮されたデジタル音声信号をシステムで規定された所定の処理単位の量だけ読み出し、ＲＡＭ１０３の圧縮データ領域１０３（１）に書き込むようにする（ステップＳ２０６）。
【００６６】
書き込みが終了すると、これがＣＰＵ１０１に通知されるので、ＣＰＵ１０１は、データ伸張処理部１４２に対して、ＲＡＭ１０３の圧縮データ領域１０３（１）の圧縮されたデジタル音声信号の伸長処理を行うことを指示し、データ伸張処理部１４２によって圧縮されたデジタル音声信号の伸張処理を行って、ＲＡＭ１０３のＰＣＭデータ領域１０３（２）に書きこむようにする（ステップＳ２０７）。
【００６７】
書き込みが終了すると、これがＣＰＵ１０１に通知されるので、ＣＰＵ１０１は、Ｄ／Ａコンバータ１３４に対し、ＲＡＭ１０３のＰＣＭデータ領域１０３（２）に格納されたデジタル音声信号（伸張されたデジタル音声信号）をアナログ音声信号に変換し、スピーカ１３３に供給するように制御する。
【００６８】
これにより、データ記憶装置１１１の音声ファイル１１１（２）に記憶保持されているデジタル音声信号に応じた音声が、スピーカ１３３から放音するようにされる。そして、Ｄ／Ａコンバータ１３４は、Ｄ／Ａ変換したアナログ音声信号を出力したことをＣＰＵ１０１に通知してくるので、ＣＰＵ１０１は、キー操作部１２１の操作キーが操作されたか否かを判断する（ステップＳ２０９）。
【００６９】
ステップＳ２０９の判断処理において、操作キーは操作されていないと判断したときには、ステップＳ２０５からの処理を繰り返し、データ記憶装置１１１の音声ファイル１１１（２）のデジタル音声信号の再生を続行する。
【００７０】
ステップＳ２０９の判断処理において、操作キーが操作されたと判断したときには、ＣＰＵ１０１は、操作されたキーは、ＰＲＥＶキー２１５か否かを判断する（ステップＳ２１０）。ステップＳ２１０の判断処理において、ＰＲＥＶキー２１５が操作されたと判断したときには、ＣＰＵ１０１は、ファイル処理部１１０に対して音声ファイル１１１（２）からのデジタル音声信号の読み出しの停止を指示し、データ伸張処理部１４２に対して伸長処理の停止を指示し、Ｄ／Ａコンバータ１３４に対してアナログ信号への変換の停止を指示する（ステップＳ２１１）。
【００７１】
次に、ＣＰＵ１０１は、ファイル処理部１１０にデータ記憶装置１１１のデータベース領域１１１（１）から現在再生している位置の直前のマークの情報（変化点情報）を読み出すよう指示し、その読み出されたマークの情報によって指示される音声信号上の位置に再生位置を位置付け、そこから再生を開始するようにし（ステップＳ２１２）、図３を用いて説明したように、位置付けに用いたマークの情報に応じた再生位置情報を表示して（ステップＳ２１３）、ステップＳ２０５からの処理を繰り返す。
【００７２】
ステップＳ２１０の判断処理において、操作されたキーは、ＰＲＥＶキー２１５ではないと判断されたときには、ＣＰＵ１０１は、操作されたキーは、ＮＥＸＴキー２１４か否かを判断する（ステップＳ２１４）。ステップＳ２１４の判断処理において、ＮＥＸＴキー２１４が操作されたと判断したときには、ＣＰＵ１０１は、ファイル処理部１１０を制御し、音声ファイル１１１（２）からのデジタル音声信号の読み出しの停止を、データ伸張処理部１４２に伸長処理の停止を、Ｄ／Ａコンバータ１３４にアナログ信号への変換の停止を、それぞれ指示する（ステップＳ２１５）。
【００７３】
次に、ＣＰＵ１０１は、ファイル処理部１１０にデータ記憶装置１１１のデータベース領域１１１（１）から現在再生している位置の直後のマークの情報（変化点情報）を読み出すよう指示し、その読み出されたマークの情報によって指示される音声信号上の位置に再生位置を位置付け、そこから再生を開始するようにし（ステップＳ２１６）、図３を用いて説明したように、位置付けに用いたマークの情報に応じた再生位置情報を表示して（ステップＳ２１７）、ステップＳ２０５からの処理を繰り返す。
【００７４】
ステップＳ２１４の判断処理において、操作されたキーは、ＮＥＸＴキー２１４ではないと判断されたときには、ＣＰＵ１０１は、操作されたキーに応じた処理、例えば、早送り、早戻しなどの操作されたキーに応じた処理を行って、ステップＳ２０５からの処理を繰り返す。
【００７５】
このように、録音時にＩＣレコーダが音声の特徴に変化があったことを話者の切り替わりと判断し，その位置にマークを自動的につけることで，ユーザは再生時にＰＲＥＶキー２１５、ＮＥＸＴキー２１４を押下操作して簡単に各発言の先頭位置を呼び出すことが可能になり、議事録作成時において、ある発言を繰り返し再生させたいときや、重要な発言を見つけ出す際の手間が大幅に削減できる。すなわち、録音された音声信号中から、目的とする音声信号部分を迅速に検索することができる。
【００７６】
しかも、集音音声の特徴の変化点は自動検出され、その変化点へのマークの付与も自動的に行われるので、変化点へのマークの付与に関し、ユーザの手を煩わせることは一切ない。
【００７７】
[第１の実施の形態の変形例]
ところで、会議の様子を録音し、この録音に基づいて議事録を作成する場合、誰がどこで発言をしたかを、録音音声を再生することなく知ることができればより便利である。そこで、この変形例のＩＣレコーダは、会議への出席者の音声の特徴解析結果である声紋データを、各出席者を識別するためのシンボルと対応付けて記憶させておくことによって、話者を特定できるマークを付すようにしたものである。
【００７８】
この変形例のＩＣレコーダは、図１に示した第１の実施の形態のＩＣレコーダと同様に構成されるものである。しかし、この変形例のＩＣレコーダの例えば外部記憶装置の１１１やＲＡＭ１０３の記憶領域には、会議の出席者についての音声特徴データベースを形成するようにしたものである。なお、以下の説明においては、音声特徴データベースは、外部記憶装置１１１に形成するものとして説明する。
【００７９】
図６は、この変形例のＩＣレコーダの外部記憶装置１１１の記憶領域に形成される音声データベースの一例を説明するための図である。図６に示すように、この例の音声データベースは、会議の出席者を識別するための識別子（例えば、登録順に応じたシーケンスナンバなど）と、会議の出席者の名前、会議の出席者の音声の特徴解析結果である声紋データ、会議の出席者の顔写真などの画像データ、会議の出席者のそれぞれに割り当てられたアイコンデータ、その他、テキストデータなどからなるものである。
【００８０】
声紋データ、画像データ、アイコンデータ、その他のデータのそれぞれは、ファイルの形式で外部記憶装置１１１に記憶されており、それが会議の各出席者の識別子をキー情報（対応付け情報）として記憶保持されている。なお、特徴解析結果である声紋データは、会議に先だって、会議の出席者の音声を集音し、特徴解析を行うことにより予め得るようにしたものである。
【００８１】
すなわち、この例のＩＣレコーダは、音声データベース作成モードを有するものである。そして、音声データベース作成モードが選択された場合には、会議の出席者の音声を集音し、この集音音声の特徴解析を音声特徴解析部１４３で行って声紋データを得て、この声紋データをシーケンスナンバなどの識別子と対応付けて、外部記憶装置１１１の記憶領域に記憶することができるものである。
【００８２】
識別子と声紋データ以外の情報である、名前、画像データ、アイコンデータなどの情報は、接続端子１４５に接続される例えばパーソナルコンピュータなどを通じて、この例のＩＣレコーダに供給され、図６に示したように、対応する識別子、声紋データと関連付けられて記憶保持するようにされる。もちろん、名前などは、ＩＣレコーダのキー操作部１２１に設けられている操作キーを操作して入力することも可能である。また、画像データは、接続端子１４５に接続されるデジタルカメラから取り込むことも可能である。
【００８３】
そして、この例のＩＣレコーダもまた、図１、図２および図４を用いて説明したように、集音音声の特徴解析を行って、声紋データの変化点を検出し、その変化点に対応する音声信号上の位置にマークを自動的に付与していくのであるが、変化点を検出した場合に、最新の集音音声の声紋データと、音声データベースの声紋データとのマッチングを行い、声紋データが一致した会議の出席者の識別子を付与するマークに含めるようにしている。
【００８４】
図７は、この変形例のＩＣレコーダにおいて行われる集音して録音する音声信号にマークを付す処理の概要を説明するための図である。基本的にマークを付す処理は、図２を用いて説明した場合と同様に行なわれる。しかし、マークには、話者の識別子が付加される。
【００８５】
図７に示すように、会議の様子を録音するようにした場合、録音開始から１０秒後に、Ａさんが発言を始めたとする。この場合、Ａさんの発言の開始前は、無音、あるいは、ざわめきや椅子を引く音、テーブルに何かがあたる音など、明瞭な話音声とは異なるいわゆる雑音などの無意味な音声が集音されているので、集音した音声信号の特徴解析結果は、Ａさんが発言を始める前とは明らかに異なることになる。この変化点の音声信号上の位置を特定（取得）して、この特定した変化点情報を図７におけるマークＭＫ１として記憶保持する。
【００８６】
この場合に、最新の声紋データと音声データベースの声紋データとのマッチングを行い、一致する声紋データに対応する話者（会議の出席者）の識別子をマークＭＫ１に含めるようにする。なお、図７においても、録音開始からの経過時間を変化点情報として記憶保持している場合を示している。
【００８７】
そして、Ａさんの発言が終了した後、少し間をおいて、Ｂさんが発言を始めたとする。このＢさんの発言の直前も、無音あるいは雑音であったとする。この場合にも、Ｂさんが発言を始め、それが集音されることにより、集音した音声信号の特徴解析結果は、Ｂさんが発言を始める前とは明らかに異なることになり、図７において、マークＭＫ２が示すように、Ｂさんの発言の開始部分にマークを付すように、変化点情報（マークＭＫ２）を記憶保持する。
【００８８】
この場合にも、最新の声紋データと音声データベースの声紋データとのマッチングを行い、一致する声紋データに対応する話者（会議の出席者）の識別子をマークＭＫ２に含めるようにする。
【００８９】
さらに、Ｂさんの発言の途中でＣさんが割って入ったような場合も発生するが、この場合には、Ｂさんの話し声とＣさんの話し声とでは異なっているために、集音した音声信号の解析結果も異なることになり、図７において、マークＭＫ３が示すように、Ｃさんの発言の開始部分にマークを付すように、変化点情報（マークＭＫ３）を記憶保持する。
【００９０】
この場合にも、最新の声紋データと音声データベースの声紋データとのマッチングを行い、一致する声紋データに対応する話者（会議の出席者）の識別子をマークＭＫ３に含めるようにする。
【００９１】
このようにすることによって、録音した音声信号のどの部分が誰の発言部分であるかを特定することができるようにされ、例えば、Ａさんの発言部分だけを再生するようにしてＡさんの発言の要旨をまとめるなどのことが簡単にできるようになる。
【００９２】
なお、この変形例の各マークのその他の情報は、例えば、集音音声の音声認識を行って、集音音声をテキストデータに変換し、このテキストデータをその他の情報としてファイル形式（テキストデータファイル）で記憶保持するようにしている。このテキストデータを用いることにより、議事録や発言の要約を迅速に作成することができるようにされる。
【００９３】
そして、この変形例のＩＣレコーダにおいても、図１、図３、図５を用いて説明した場合と同様にして、録音音声の再生を行うことができるようにされる。そして、この変形例のＩＣレコーダの場合には、録音音声における各発言者の発言部分の録音音声を再生することなく特定することができるようにされる。
【００９４】
図８は、録音した音声信号の再生時に行われるマークへの位置付け動作を説明するための図であり、操作に応じて変化するＬＣＤ１３５の表示情報の変化を示す図である。図８に示すように、ＰＬＡＹキー２１１が押下操作されると、上述もしたように、ＣＰＵ１０１は各部を制御し、指示された録音音声信号の先頭から再生を開始するようにする。
【００９５】
そして、Ａさんの発言部分においては、図７を用いて説明したように、録音処理時に付された（記憶保持された）マークＭＫ１に基づいて、図８Ａに示すように、Ａさんについての、発言の開始時刻Ｄ（１）、話者の画像データに応じた顔写真Ｄ（２）、話者の名前Ｄ（３）、発言の最初の部分のテキストデータＤ（４）が表示されると共に、再生中表示Ｄ（５）が表示される。
【００９６】
そして、再生が続行され、Ｂさんの発言部分の再生が開始されると、録音時に付されたマークＭＫ２に基づいて、図８Ｂに示すように、Ｂさんについての、発言の開始時刻Ｄ（１）、話者の画像データに応じた顔写真Ｄ（２）、話者の名前Ｄ（３）、発言の最初の部分のテキストデータＤ（４）が表示されると共に、再生中表示Ｄ（５）が表示される。
【００９７】
この後、ＰＲＥＶキー２１５が押下操作されると、ＣＰＵ１０１は、図８Ｃに示すように、開始時刻が先頭から１０秒後（０分１０秒後）のマークＭＫ１が示すＡさんの発言の開始部分に再生位置を位置付け、そこから再生を開始するようにする。この場合には、図８Ａの場合と同様に、Ａさんについての、発言の開始時刻Ｄ（１）、話者の画像データに応じた顔写真Ｄ（２）、話者の名前Ｄ（３）、発言の最初の部分のテキストデータＤ（４）が表示されると共に、再生中表示Ｄ（５）が表示される。
【００９８】
この後、ＮＥＸＴキーが押下操作されると、ＣＰＵ１０１は、図８Ｄに示すように、開始時刻が先頭から１分２５秒後のマークＭＫ２が示すＢさんの発言の開始部分に再生位置を位置付け、そこから再生を開始するようにする。この場合には、図８Ｂの場合と同様に、Ｂさんについての、発言の開始時刻Ｄ（１）、話者の画像データに応じた顔写真Ｄ（２）、話者の名前Ｄ（３）、発言の最初の部分のテキストデータＤ（４）が表示されると共に、再生中表示Ｄ（５）が表示される。
【００９９】
さらに、ＮＥＸＴキーが押下操作されると、ＣＰＵ１０１は、図８Ｅに示すように、開始時刻が先頭から２分３０秒後のマークＭＫ３が示すＣさんの発言の開始部分に再生位置を位置付け、そこから再生を開始するようにする。この場合には、Ｃさんについての、発言の開始時刻Ｄ（１）、話者の画像データに応じた顔写真Ｄ（２）、話者の名前Ｄ（３）、発言の最初の部分のテキストデータＤ（４）が表示されると共に、再生中表示Ｄ（５）が表示される。
【０１００】
なお、この変形例において、例えばＡさんの発言部分を再生中にＮＥＸＴキーまたはＰＲＥＶキーをすばやく２回押下すると、次にＡさんの発言部分が出現する部分またはこれ以前にＡさんの発言部分が出現した部分に再生位置を位置付け、そこから再生を開始するモードを付加してもよい。つまり、この操作を繰り返すことにより、Ａさんの発言部分のみを辿って、あるいは遡って再生させることができる。もちろん、ＮＥＸＴキーやＰＲＥＶキーではなく、このモードを明示的に示す操作キーを設けてもよく、その場合には自動的に次々とＡさんの発言部分が再生されるようにする。
【０１０１】
このように、この変形例のＩＣレコーダは、録音処理時において、集音した音声信号の特徴解析を自動的に行い、特徴の変化点にマークを付与するようにすると共に、再生処理時においては、ＮＥＸＴキー２１４、ＰＲＥＶキー２１５を操作することによって、付与されたマークが示す録音された音声信号上の位置に再生位置をすばやく位置付けて、そこから再生を行うようにすることができるものである。
【０１０２】
しかも、録音された音声信号の変化点においては、誰の発言部分であるかを、話者の名前の表示や顔写真の表示により明確に示すことができるので、目的とする話者の発言部分を迅速に検索することができると共に、特定の話者の発言部分のみを再生するようにするなどのことが簡単にできる。もちろん、話者を特定するための情報として、各話者に固有のアイコンデータに応じたアイコンを表示するようにしてもよい。また、発言の最初の部分のテキストデータを表示することもできるので、目的とする発言部分か否かを判断する際に役立てることができる。
【０１０３】
そして、この変形例のＩＣレコーダのユーザは、再生時の表示情報をも利用して、目的とする人の発言部分に再生位置を迅速に位置付けて、録音した音声信号を再生して聴取することができるので、目的とする発言部分の議事録を迅速に作成することができる。
【０１０４】
換言すれば、録音後に録音音声信号をいちいち再生することなく、どこに誰の発言があるのかを視覚的に把握することができ、特定の話者の発言を簡単に探し出すことが可能になる。シンボルには文字列や記号の他に話者の顔写真など、より話者を特定し易くできるような情報が利用できるので、検索性が向上する。
【０１０５】
また、音声の特徴が未登録の話者(登録済みであってもＩＣレコーダが識別できなかった場合)の発言には未登録話者であることを意味するシンボルを対応付けておくことで、その部分を見つけ易くできる。この場合、議事録作成者は、未登録話者の発言部分を再生し、それが誰であるかを判断すればよい。
【０１０６】
未登録話者が誰であるかがわかったときには、それが登録済みの話者であったならば、その話者に対応付けられたシンボルをマークとして付け直せるようにすることもできる。また、未登録の話者であった場合は，話者の新規登録操作を行えるようにすることもできる。音声の特徴は録音音声から抽出し、対応付けるシンボルはＩＣレコーダに予め登録済みの記号や文字列入力、ＩＣレコーダにカメラ撮影機能があれば撮影した画像，または外部機器から取り込んだ画像データなどを用いる。
【０１０７】
なお、この変形例のＩＣレコーダの録音処理は、図４を用いて説明した録音処理と同様に行われるが、ステップＳ１１３の話者の切り替わりのマークＭＫ１、ＭＫ２、ＭＫ３、…を付与する処理において、音声データベースの声紋データとのマッチングを行って、該当する話者の識別子が付加するようにされる。また、該当する声紋データが無かった場合には、該当なしを示すマークが付与されることになる。
【０１０８】
また、この変形例のＩＣレコーダの再生処理は、図５を用いて説明した再生処理と同様に行われるが、ステップＳ２１３、ステップＳ２１７の再生位置情報の表示処理において、話者の顔写真や氏名、発言内容のテキストデータなどが表示するようにされることになる。
【０１０９】
なお、この変形例のＩＣレコーダの場合にも、変化点情報として、録音開始時点からの時刻を用いるようにしたが、これに限るものではなく、録音された音声信号のデータ記憶装置１１１の記録媒体上のアドレスを変化点情報として用いるようにしてもよい。
【０１１０】
［マーク付与処理の実行タイミングについて］
上述した第１の実施の形態のＩＣレコーダ、第１の実施の形態の変形例のＩＣレコーダにおいては、録音処理時に集音音声の変化点を検出し、その変化点に対応する音声信号上の位置にマークを付すようにしたが、これに限るものではない。録音処理終了後において、マークを付すようにすることができる。すなわち、再生処理時にマークを付すようにしたり、あるいは、マーク付与処理だけを行うようにしたりすることが可能である。
【０１１１】
図９は、録音処理終了後において、録音した音声信号の変化点にマークを付すようにする処理を説明するためのフローチャートである。すなわち、図９に示す処理は、再生処理時において録音音声の変化点にマークを付すようにする場合、あるいは、録音音声の変化点に対してマーク付与処理だけを独立に行う場合において行われるものである。この図９に示す処理もまた、ＩＣレコーダのＣＰＵ１０１が各部を制御することにより行なわれる処理である。
【０１１２】
まず、ＣＰＵ１０１は、ファイル処理部１０４を制御して、データ記憶装置１１１の音声ファイルにデータ圧縮されて記憶されている録音音声信号を所定単位分づつ読み出し（ステップＳ３０１）、全ての録音音声信号の読み出しを終了しているか否かを判断する（ステップＳ３０２）。
【０１１３】
ステップＳ３０２の判断処理において、全ての録音音声信号が読み出されていないと判断したときには、ＣＰＵ１０１は、データ伸張処理部１４２を制御して、データ圧縮されている録音音声信号の伸張処理を行う（ステップＳ３０３）。この後、ＣＰＵ１０１が、音声特徴解析部１４３を制御して、伸張した音声信号の特徴解析を行って、声紋データを得て、先に取得した声紋データと比較することによって、録音音声信号の特徴が変化したか否かを判断する（ステップＳ３０５）。
【０１１４】
ステップＳ３０５の判断処理において、録音音声信号の特徴は変化していないと判断したときには、ステップＳ３０１からの処理を繰り返すようにする。また、ステップＳ３０５の判断処理において、録音音声信号の特徴が変化したと判断したときには、ＣＰＵ１０１は、「話者が切り替わった」と判断し、ファイル処理部１１０に音声の特徴に変化があった場所にマークを付加することを指示する（ステップＳ３０６）。
【０１１５】
これにより、ファイル処理部１１０は、データ記録装置１１１上のデータベース領域１１１（１）に当該音声ファイル１１１（２）に関する情報として、音声の特徴に変化のあった場所を示す情報として、ファイルの先頭からの時刻情報、あるいは、記録位置に対応するアドレス情報を書き込む。この場合、音声ファイルと音声の特徴に変化のあった場所を示す情報とは対応付けられて記憶される。
【０１１６】
このステップＳ３０６の処理の後、ＣＰＵ１０１は、ステップＳ３０１からの処理を繰り返し、次の周期（次の処理単位）の音声信号についても同様の処理を行う。そして、ステップＳ３０２の判断処理において、全ての録音音声信号について読み出しが終了していると判断したときには、所定の終了処理を行って（ステップＳ３０７）、この図９に示す処理を終了する。
【０１１７】
これにより、録音処理後において、再生処理時に録音音声の変化点を検出し、当該録音音声信号に対してマークを付与するようにしたり、あるいは、録音音声に対してマーク付与処理だけを独立に行うようにしたりすることができる。再生処理時において、マークの付与を行う場合には、図９に示したステップＳ３０３で伸張処理された音声信号をＤ／Ａ変換し、Ｄ／Ａ変換後のアナログ音声信号をスピーカ１３３に供給するようにすればよい。
【０１１８】
このように、録音後に録音音声信号の特徴の変化点に対してマークを付与するようにすることによって、録音時の処理の負荷と消費電力を軽減することが期待できる。また、ユーザがすべての録音において自動マーク付けを希望しない場合もある。録音時の自動マーク付け機能のオン／オフ設定ができるようにしてもよい。そして、ユーザがオフに設定したまま録音してしまった場合に、後でマーク付けが必要になった場合には、上述のようにして、録音処理後においても、録音音声信号に対してマーク付けができるので、非常に便利である。
【０１１９】
また、上述したように、録音された音声信号に対するマーク付けが可能であるので、録音機能を持たないが信号処理機能を備えた機器への適用が可能になる。例えば、パーソナルコンピュータのアプリケーションソフトに、この発明を適用することも可能である。すなわち、音声録音機器で録音された音声信号をパーソナルコンピュータに転送し、このパーソナルコンピュータ上で動作する上述の信号処理アプリケーションソフトにより、マーク付けをすることができる。
【０１２０】
また、この発明を適用した機器で作成したデータを、ネットワークなどを介して共有することで、このデータから議事録を書き起こすことなく、このデータそのものを議事録として用いることも可能になる。
【０１２１】
したがって、この発明は、録音機器だけでなく、信号処理が可能な種々の電子機器に適用可能であり、既に録音済みの音声信号であっても、この発明を適応したで電子機器で処理することにより、同様の結果を得ることができる。すなわち、議事録の作成を効率的に行うことができるようにされる。
【０１２２】
また、上述もしたように、図１を用いて説明した第１の実施の形態のＩＣレコーダは、通信Ｉ／Ｆ１４４を備えており、パーソナルコンピュータなどの電子機器に接続可能である。そこで、上述した第１の実施の形態のＩＣレコーダで録音されると共に、変化点にマークが付すようにされた音声信号（デジタル音声信号）をパーソナルコンピュータに転送するようにすれば、パーソナルコンピュータの大きな表示画面の表示装置を通じて、詳細情報をより多く表示し、目的とする発言者の発言部分を迅速に検索することができる。
【０１２３】
図１０、図１１は、上述した第１の実施の形態のＩＣレコーダからパーソナルコンピュータに転送された録音音声信号、付与された変化点情報（マーク情報）に基づいて、パーソナルコンピュータに接続された表示装置２００の表示画面への変化点情報の表示例を説明するための図である。
【０１２４】
図１０の場合には、録音音声信号に対応する時間帯表示２０１と、その時間帯表示２０１の該当位置に、マーク表示（変化点表示）ＭＫ１、ＭＫ２、ＭＫ３、ＭＫ４、…を表示するようにする。このようにすれば、複数の変化点の位置を一見して認識することができる。そして、例えばマウスなどのポインティングデバイスを用いて、目的とするマーク表示にカーソルを位置付けてクリックすることにより、その位置から録音音声の再生を行うようにすることなどができるようにされる。
【０１２５】
また、図１１の場合には、図８に示した表示を、表示装置２００の表示画眼に複数個いっぺんに表示するようにしたものであり、話者の顔写真２１１（１）、２１１（２）、２１１（３）、…や発言内容に応じたテキストデータ２１２（１）、２１２（２）、２１２（３）、…を表示して、目的とする話者の発言部分を迅速に検索するなどのことができるようにされる。また、パーソナルコンピュータの機能を用いて、タイトル表示２１０を行うようにすることもできる。
【０１２６】
なお、図１１の表示例の場合、左側の「００」、「０１」、「０２」、「０３」、…は、録音音声の先頭からの時間を示すものである。もちろん、図８に示したような表示を複数個行うようにするなど、種々の表示態様の実現が可能である。
【０１２７】
そして、発言（録音音声）とその発言者を識別する情報(シンボル)とが対応付けられたデータをパーソナルコンピュータなど表示部が大きい機器に転送すれば、音声データから文章を書き起こさなくても議事録が作成できる。つまり、この発明を適用したＩＣレコーダで録音したデータそのものが議事録になっていることになる。
【０１２８】
また、そのデータを Ｗｅｂページで公開し、Ｗｅｂブラウザで閲覧できるようにするプラグイン（plug-in）のようなソフトウェアを用意すれば、ネットワークを通じて議事録を共有することが可能になる。これにより情報の共有、すなわち、情報を公開するまでの手間と時間が、この発明を用いることにより、大幅に削減できる。
【０１２９】
[第２の実施の形態]
［ＩＣレコーダの構成と動作の概要］
図１２は、この第２の実施の形態の記録再生装置であるＩＣレコーダを説明するためのブロック図である。この第２の実施の形態のＩＣレコーダは、２つのマイクロホン１３１（１）、１３１（２）と、これら２つのマイクロホン１３１（１）、１３１（２）からの音声信号を処理する音声信号処理部１３６を備える点を除けば、図１に示した第１の実施の形態のＩＣレコーダと同様に構成されるものである。このため、この第２の実施の形態のＩＣレコーダにおいて、図１に示した第１の実施の形態のＩＣレコーダと同様に構成される部分には同じ参照符号を付し、その部分の詳細な説明については省略することとする。
【０１３０】
そして、この第２の実施の形態のＩＣレコーダにおいては、２つのマイクロホン１３１（１）、１３１（２）のそれぞれからの集音音声信号を音声信号処理部１３６において処理することにより、話者の位置（音源の位置）を特定するようにし、これをも考慮して集音した音声信号の変化点（話者の変化点）を特定することができるようにしたものである。すなわち、音声解析の結果得られる声紋データを用いた集音音声信号の変化点検出を行う場合の補助情報として、２つのマイクロホンの集音音声に基づく、話者の位置をも用いて、より正確に、変化点や話者を特定することができるようにしたものである。
【０１３１】
図１３は、マイクロホン１３１（１）、１３１（２）と、音声信号処理部１３６との構成例を説明するための図である。この図１３に示す例の場合、２つのマイクロホン１３１（１）、１３１（２）のそれぞれは、図１３にそれらの指向特性を示したように、いずれも単一指向性のものである。そして、マイクロホン１３１（１）、１３１（２）は、主指向方向が逆向きとなるように背中あわせに近接配置されている。これにより、マイクロホン１３１（１）は発言者Ａの音声を良好に集音し、マイクロホン１３１（２）は発言者Ｂの音声を良好に集音することができるようにされる。
【０１３２】
そして、音声信号処理部１３６は、図１３に示したように、加算器１３６１と、コンパレータ（比較器）１３６２と、Ａ／Ｄコンバータ１３６３とを備えたものである。そして、マイクロホン１３１（１）、１３１（２）のそれぞれ集音された音声信号は、加算器１３６１と、コンパレータ１３６２に供給される。
【０１３３】
加算器１３６１は、マイクロホン１３１（１）からの集音音声信号と、マイクロホン１３１（２）からの集音音声信号とを加算し、加算後の音声信号をＡ／Ｄコンバータ１３６３に供給する。マイクロホン１３１（１）からの集音音声とマイクロホン１３１（２）からの集音音声の加算信号は、次の（式１）のように表すことがで、無指向性マイクで集音したものと同じになることが分かる。  
（（１＋ｃｏｓθ）／２）＋（（１−ｃｏｓθ）／２）＝１    …（１式）
また、コンパレータ１３６２は、マイクロホン１３１（１）からの集音声信号と、マイクロホン１３１（２）からの集音音声信号とを比較する。そして、コンパレータ１３６２は、マイクロホン１３１（１）からの集音音声信号のレベルの方が大きければ、発言者Ａが主に発言していると判断し、値が「１（ハイレベル）」となる話者判別信号を制御部１００に供給する。また、コンパレータ１３６２は、マイクロホン１３１（２）からの集音音声信号のレベルの方が大きければ、発言者Ｂが主に発言していると判断し、値が「０（ローレベル）」となる話者判別信号を制御部１００に供給する。
【０１３４】
これにより、マイクロホン１３１（１）からの集音音声信号と、マイクロホン１３１（２）からの集音音声信号とに基づいて、話者の位置を特定するようにし、発言者Ａの発言か発言者Ｂの発言かを判別することができるようにしている。
【０１３５】
なお、３人目の発言者Ｃが、マイクロホン１３１（１）、１３１（２）の主指向方向と交差する方向（図１３において、発言者Ａ、発言者Ｂをそれぞれ斜め前方に見る位置（図１３の横方向））から発言した場合には、マイクロホン１３１（１）、１３１（２）からの集音音声の出力レベルはほぼ等しくなる。
【０１３６】
このような位置にある発言者Ｃについても対応する場合には、コンパレータ１３６２における閾値を２つ設けて、レベル差が±Ｖｔｈ以内なら横方向にいる発言者Ｃによる発言であると判断し、レベル差が＋Ｖｔｈより大きければ発言者Ａであり、レベル差が−Ｖｔｈより小さければ発言者Ｂであると判断するようにしてもよい。
【０１３７】
そして、マイクロホン１３１（１）の指向方向に位置する発言者、マイクロホン１３１（２）の指向方向に位置する発言者、マイクロホン１３１（１）、１３１（２）の指向方向と交差する方向に位置する発言者のそれぞれが誰であるかを把握しておくことにより、発言者（話者）が誰であるかを識別することができるようにされる。したがって、集音音声の特徴解析の結果得られる声紋データによる変化点検出の他に、マイクロホンの集音音声のレベルをも考慮することにより、発言者の特定をより正確に行うようにすることができる。
【０１３８】
［マイクロホンと音声信号処理部の他の例］
また、マイクロホン１３１（１）、１３１（２）と音声信号処理部１３６とは、図１４に示すように構成することもできる。すなわち、図１４は、マイクロホン１３１（１）、１３１（２）と、音声信号処理部１３６との他の構成例を説明するための図である。この図１４に示す例の場合、２つのマイクロホン１３１（１）、１３１（２）のそれぞれは、図１４にそれらの指向特性を示したように、いずれも無指向性のものである。マイクロホン１３１（１）、１３１（２）は、例えば１ｃｍ位離間して近接配置するようにする。
【０１３９】
また、図１４に示したように、この例の音声信号処理部１３６は、加算器１３６１、Ａ／Ｄコンバータ１３６３、減算器１３６４、位相比較器１３６５を備えたものである。そして、マイクロホン１３１（１）、１３１（２）のそれぞれからの集音音声信号は、加算器１３６１と減算器１３６４とのそれぞれに供給される。
【０１４０】
ここで、加算器１３６１からの加算出力信号は、無指向性マイク出力と等価であり、減算器１３６４からの減算出力は、両指向性（８の字型指向性）マイク出力と等価である。両指向性マイクは、その音波の入射方向により出力の位相が正相または逆相になる。そこで、加算器１３６１からの加算出力（無指向性出力）と、減算器１３６４からの減算出力との間で位相コンパレータ１３６５により位相比較を行うことにより、減算器１３６４からの減算出力の極性を判断することにより発言者を特定できる。
【０１４１】
すなわち、減算器１３６４からの減算出力の極性が正相の場合には、発言者Ａの発言を集音しており、減算器１３６４からの減算出力の極性が逆相の場合には、発言者Ｂの発言を集音していると判断することができる。
【０１４２】
また、図１３を用いて説明した場合と同様に、発言者Ａ、発言者Ｂのそれぞれを斜め前方に見る位置（図１４の横方向）に位置する発言者Ｃの発言をも判断しようとする場合には、当該発言者Ｃの発言を集音した音声信号の減算出力は、そのレベルが小さくなる。そこで、加算器１３６１からの加算出力と、減算器１３６４からの減算出力とのレベルをチェックすることで、発言者Ｃの発言をも認識することが可能となる。
【０１４３】
なお、図１４に示した音声信号処理部１３６の場合には、加算器１３６１を用いるようにした。しかし、加算器１３６１は必須の構成要素ではない。例えば、マイクロホン１３１（１）、または、１３１（２）のいずれか一方の出力信号を、Ａ／Ｄコンバータ１３６３と、位相比較器１３６５とに供給するようにしてもよい。
【０１４４】
このように、図１３、図１４は、録音処理時において、２つのマイクロホン１３１（１）、１３１（２）の集音音声のレベルや極性を用いて、発言者の位置を特定することができるようにしている。そして、この特定結果をも考慮することにより、集音音声の変化点の検出、および、発言者の特定を精度良く行うことができるようにしている。
【０１４５】
そして、図１３、図１４を用いた方式は、録音処理時だけでなく、再生処理時に録音音声に対してマークを付与する場合や、録音音声に対してマーク付与処理だけを独立に行う場合にも利用することができる。
【０１４６】
例えば、図１３を用いて説明した方式を録音処理後において利用しようとする場合に置いては、図１５Ａに示すように、単一指向性のマイクロホン１３１（１）、１３１（２）のそれぞれからの集音音声信号を２チャンネルステレオ録音する。そして、図１５Ｂに示すように、再生時、あるいは、マーク付与処理を独立に行う場合において、外部記憶装置１１１から読み出されるデータ圧縮された２チャンネルの音声信号のそれぞれを伸張処理し、伸張処理後の２チャンネルの音声信号を図１３に示したコンパレータ１３６２と同様の機能を有するコンパレータに入力する。
【０１４７】
これにより、マイクロホン１３１（１）の集音音声信号が主に用いられたか、マイクロホン１３１（２）の集音音声信号が主に用いられたかを判別することができ、この判別結果と、予め把握されている各マイクロホンに対する発言者の位置とに基づいて、発言者を特定することができる。
【０１４８】
なお、図１４を用いて説明した方式を録音処理後において利用しようとする場合においても同様に、マイクロホン１３１（１）、１３１（２）からの出力信号を２チャンネルステレオ録音し、再生時やマーク付与処理を独立に行う場合において、図１４に示した音声信号処理部１３６と同様の処理を行うことによって、発言者を特定することができる。
【０１４９】
そして、マイクロホン１３１（１）、１３１（２）からの出力信号を用いた発言者の特定処理を行う場合に予め用意するマイクロホン１３１（１）、１３１（２）のそれぞれに対する発言者の位置情報は、例えば、図１６に示す話者位置データベースのようにして、ＩＣレコーダに記憶保持されておくようにすればよい。
【０１５０】
図１６は、話者位置データベースの一例を説明するための図である。この例の話者位置データベースは、ＩＣレコーダの音声信号処理部１３６からの識別結果に対応する話者識別信号と、各話者識別信号に対応するマイクロホンの識別情報と、各マイクロホンを主に用いる発言者候補の識別子（話者識別子）からなるものである。また、図１６に示したように、１つのマイクロホンに対して、話者識別子は複数個登録することができるようにしている。
【０１５１】
この図１６に示すような話者位置データベースは、好ましくは、会議の始まる前に作成しておく。一般に、会議への出席者や各出席者の席順は予め決まっている場合が多いので、ＩＣレコーダの設置位置を考慮して、会議の始まる前に話者位置データベースを作成することが可能である。
【０１５２】
また、会議への出席者の急な変更や、会議中において、座席が変更になった場合においては、例えば、マイクロホンの集音音声に応じた発言者の認識は行わないようにし、音声解析処理により得た声紋データによる変化点の検出だけを行うようにしたり、あるいは、録音処理後において、話者位置データベースを調整して正確なものとし、録音音声に対して、マークの付け直しを行うようにしたりすることもできる。
【０１５３】
この図１６に示すような話者位置データベースを用いることにより、話者位置を特定し、その位置の話者自体をも特定することができるようにされる。
【０１５４】
なお、この第２の実施の形態においては、２つのマイクロホン１３１（１）、１３１（２）を用い、発言者も２人または３人である場合を例にして説明したが、これに限るものではない。用いるマイクロホンを多くすることにより、より多くの発言者の識別を行うことが可能である。
【０１５５】
また、マイクロホンからの出力信号に応じて、発言者の位置を特定することにより、発言者自身を特定する方式としては、図１３、図１４を用いて説明した方式に限るものではない。例えば、近接４点法や近接３点法などを用いるようにすることもできる。
【０１５６】
近接４点法は、図１７Ａに示すように、必ず１つのマイクロホンが同一平面内にないようにして近接配置される４つのマイクロホンＭ０、Ｍ１、Ｍ２、Ｍ３で集音された音声信号の時間構造のわずかな違いに着目して、短時間相関あるいは音響インテンシティなどの手法により、音源の位置や大きさなどの空間情報を算出するようにする手法である。このように、少なくとも４つのマイクロホンを用いることにより、発言者の位置を正確に特定し、その発言者の位置（座席位置）に応じて、発言者を特定することも可能である。
【０１５７】
また、発言者がほぼ水平面内に位置すると限定して差し支えない場合には、近接配置されるマイクロホンの配置関係は、図１７Ｂに示すように水平面内の３つでよい。
【０１５８】
また、図１７Ａ、Ｂに示したように、各マイクロホンの配置関係は、直交関係とならなくてもよい。図１７Ｂに示した近接３点法の場合には、３つのマイクロホンが、例えば正三角形の頂点に配置されるような位置関係となるようにしてもよい。
【０１５９】
［第２の実施の形態の変形例］
上述した第２の実施の形態のＩＣレコーダにおいては、音声解析の結果得られる声紋データを用いた集音音声信号の変化点検出を行う場合に、２つのマイクロホンの集音音声に基づく、主に利用されているマイクロホンの判別結果をも考慮することによって、音声信号の変化点の検出をより精度良く行うようにした。しかし、これに限るものではない。
【０１６０】
例えば、図１８に示すように、２つのマイクロホン１３１（１）、１３１（２）と、音声信号処理部１３６は備えるが、音声特徴解析部１４３を備えないようにしたＩＣレコーダを構成することも可能である。すなわち、図１８のＩＣレコーダは、音声特徴解析部１４３を備えない点を除けば、図１２に示した第２の実施の形態のＩＣレコーダと同様に構成されるものである。
【０１６１】
そして、２つのマイクロホン１３１（１）、１３１（２）の集音音声に基づく、主に利用されているマイクロホンの判別結果のみに基づいて、話者の変化点を検出し、その変化点に応じた音声信号上の対応する位置にマークを付すようにすることもできる。このようにした場合には、音声特徴解析処理を行う必要が無いので、ＣＰＵ１０１にかかる負荷を軽減することができる。
【０１６２】
なお、上述した実施の形態においては、処理対象の音声信号の変化点にマークを付すようにしたが、変化点であっても、話音声への変化点のみにマークを付すようにすることによって、より効率的に検索を行うようにすることができる。例えば、処理対象の音声信号の信号レベルや声紋データなどに基づいて、話音声とそれ以外の雑音などの不要部分とを明確に認識するようにし、話音声の開始点のみにマークを付すようにすることもできる。
【０１６３】
また、声紋データや音声信号の周波数の特徴データなどに基づいて、話者が男性か女性かを判別して、変化点における話者の性別を通知するようにすることも可能である。
【０１６４】
また、上述したように付されるマーク情報に基づいて、検索だけを行う用にする検索モードや、付されたマークの位置を変更したり、削除したり、追加したりするマーク編集モードや、また、付されたマークに応じて指定可能な話者の発言部分のみ、例えば、Ａさんの発言部分のみを再生するようにする特殊再生モードなどを設けるようにすることもできる。これらの各モードの実現は、ＣＰＵ１０１で実行するプログラムに追加のみによって比較的に簡単に実現可能である。
【０１６５】
また、図６に示した音声特徴データベースの声紋データを、変化点の検出に用いた声紋データによって更新し、精度の高い音声特徴データベースにするなど、データベースの更新機能を持たせるようにしてもよい。例えば、声紋データの比較処理において不一致であっても、実際にその発言者の音声特徴データベースが存在している場合には、その発言者のデータベースの声紋データを新たに取得した声紋データに変更するようにすることができる。
【０１６６】
また、声紋データの比較処理において一致しても、実際には違う話者の声紋データと一致してしまうような場合には、その異なる話者の声紋データを比較処理に用いないように設定するなどのこともできる。
【０１６７】
また、声紋データが、複数の話者の声紋データと一致してしまうような場合には、正しい話者とだけ一致するように、用いる声紋データに優先順位を付けるようにしてももちろんよい。
【０１６８】
また、マークを付す位置は、発言の開始点だけでなく、終了点に付すようにしてもよいし、その他、開始点から数秒後または数秒前などのユーザ個々の利便性を考慮して、変更できるようにすることも可能である。
【０１６９】
また、音声信号の特徴解析は、上述もしたように、声紋解析だけでなく、種々の方法の１つ以上を用いることにより、精度の高い解析データを得るようにすることができる。
【０１７０】
また、上述した第２の実施の形態においては、主に２つのマイクロホンを用いた場合を例にして説明したが、これに限るものではない。マイクロホンの数は２つ以上であれば、いくつでも良く、それら複数のマイクロホンの個々の集音音声の信号レベル、極性、また、集音までの遅延時間などの種々のパラメータを利用して、話者の位置を特定し、その位置に応じた話者自身を特定できるようにすることができる。
【０１７１】
また、上述した第１、第２の実施の形態においては、音声信号の記録再生装置であるＩＣレコーダにこの発明を適用した場合を例にして説明したが、これに限るものではない。例えば、ハードディスクドライブやＭＤなどの光磁気ディスク、ＤＶＤなどの光ディスクなどの記録媒体を用いる記録装置、再生装置、記録再生装置にこの発明を適用することができる。すなわち、種々の記録媒体を用いる記録装置、再生装置、記録再生装置にこの発明を適用することが可能である。
【０１７２】
［ソフトウェアによる実現］
また、上述した実施の形態のＩＣレコーダの音声特徴解析部１４３、音声信号処理部１３６などの各処理部の機能を実現するようにすると共に、各機能を有機的に結びつけるようにするプログラムを作成し、このプログラムをＣＰＵ１０１において実行するようにすることによっても、この発明を実現することができる。すなわち、図４、図５のフローチャートに示した処理を行うプログラムを作成し、これをＣＰＵ１０１で実行させることにより、この発明を実現することができる。
【０１７３】
また、上述した実施の形態と同様に、例えば音声特徴解析部１４３の機能を実現したプログラムがインストールされたパーソナルコンピュータに、録音機で録音した音声データを取り込み、話者の切り換わりを検出させることも可能である。
【図面の簡単な説明】
【０１７４】
【図１】この発明が適用されて構成された記録再生装置の一例を説明するためのブロック図である。
【図２】図１に示した記録再生装置において、集音して録音する音声信号の変化点にマークを付すようにする処理の概要を説明するための図である。
【図３】録音した音声信号の再生時に行われるマークへの位置付け動作を説明するための図であり、操作に応じて変化するＬＣＤ１３５の表示情報の変化を示す図である。
【図４】図１に示した記録再生装置における録音処理を説明するためのフローチャートである。
【図５】図１に示した記録再生装置における再生処理を説明するためのフローチャートである。
【図６】図１に示した構成を有する記録再生装置の外部記憶装置１１１の記憶領域に形成される音声データベースの一例を説明するための図である。
【図７】図１に示した構成を有する記録再生装置において行われる集音した音声信号にマークを付す処理の概要を説明するための図である。
【図８】録音した音声信号の再生時に行われるマークへの位置付け動作を説明するための図であり、操作に応じて変化するＬＣＤ１３５の表示情報の変化を示す図である。
【図９】録音処理終了後において、録音した音声信号の変化点にマークを付すようにする処理を行う場合の処理を説明するためのフローチャートである。
【図１０】図１に示した記録再生装置からパーソナルコンピュータに転送されたデータに応じて、表示装置の表示画面への変化点情報の表示例を説明するための図である。
【図１１】図１に示した記録再生装置からパーソナルコンピュータに転送されたデータに応じて、表示装置の表示画面への変化点情報の表示例を説明するための図である。
【図１２】この発明が適用されて構成された記録再生装置の他の例を説明するためのブロック図である。
【図１３】マイクロホン１３１（１）、１３１（２）と、音声信号処理部１３６との一例を説明するための図である。
【図１４】マイクロホン１３１（１）、１３１（２）と、音声信号処理部１３６との他の例を説明するための図である。
【図１５】録音処理終了後において、録音した音声信号の変化点にマークを付すようにする処理を行う場合の処理を説明するための図である。
【図１６】話者位置データベースの一例を説明するための図である。
【図１７】マイクロホンからの出力信号に応じて、発言者の位置を特定することにより、発言者自身を特定する方式の他の例を説明するための図である。
【図１８】この発明が適用されて構成された記録再生装置の他の例を説明するためのブロック図である。
【符号の説明】
【０１７５】
１０１…ＣＰＵ、１０２…ＲＯＭ、１０３…ＲＡＭ、１０４…ＣＰＵバス、１１０…ファイル処理部、１１１…データ記憶装置、１２０…入力処理部、１２１…キー操作部、１３２…Ａ／Ｄコンバータ、１３１…マイクロホン、１３４…Ｄ／Ａコンバータ、１３３…スピーカ、１３５…ＬＣＤ、１４１…データ圧縮処理部、１４２…データ伸張処理部、１４３…音声特徴解析部、１４４…通信Ｉ／Ｆ、１４５…接続端子、１３１（１）、１３１（２）…マイクロホン、１３６…音声信号処理部
【図１】
2008102538.tif 000003
【図２】
2008102538.tif 000004
【図３】
2008102538.tif 000005
【図４】
2008102538.tif 000006
【図５】
2008102538.tif 000007
【図６】
2008102538.tif 000008
【図７】
2008102538.tif 000009
【図８】
2008102538.tif 000010
【図９】
2008102538.tif 000011
【図１０】
2008102538.tif 000012
【図１１】
2008102538.tif 000013
【図１２】
2008102538.tif 000014
【図１３】
2008102538.tif 000015
【図１４】
2008102538.tif 000016
【図１５】
2008102538.tif 000017
【図１６】
2008102538.tif 000018
【図１７】
2008102538.tif 000019
【図１８】
2008102538.tif 000020