(57)【要約】【課題】特定話者の音声とその他の話者の音声とを区別して記録・再生することを可能とした対話記録装置を提供する。【解決手段】対話の音声は、音声入力部１により取り込まれ、その波形データが符号化部２に渡されて計算機で取り扱いな形式の情報に符号化される。符号化された情報は、発話者特定部４に送られて、その発話者が登録されている者かどうかが判定される。非登録者による発話の場合、認識制御部５は、その音声情報をそのまま記憶部８に格納し、一方、登録者による発話の場合、その音声情報を音声認識部６に引き渡す。音声認識部６は、特徴記憶部７に記憶された登録者の発話の特徴辞書を利用して、その音声情報をテキスト情報に変換して認識制御部５に返却する。そして、認識制御部５は、このテキスト情報とともに、符号化された音声情報を記憶部８に格納する。【選択図】      図１
2005043628.tif 000002
【特許請求の範囲】
【請求項１】
データ記憶手段と、
音声入力手段と、
前記音声入力手段により入力された音声を特定話者の音声とその他の話者の音声とに分別する音声分別手段と、
前記音声分別手段の分別結果を示す情報とともに前記入力音声を前記データ記憶手段に格納する音声格納手段と
を具備することを特徴とする対話記録装置。
【請求項２】
前記特定話者の音声とその他の話者の音声とで再生速度を変化させて前記データ記憶手段に格納された音声を再生する音声再生手段をさらに具備することを特徴とする請求項１記載の対話記録装置。
【請求項３】
表示手段と、
音声認識手段と、
前記データ記憶手段に格納された音声を再生する際に、前記特定話者の音声に対する前記音声認識手段の認識結果のみを前記表示装置に表示する音声表示手段と
をさらに具備することを特徴とする請求項１または２記載の対話記録装置。
【請求項４】
前記データ記憶手段に格納された音声の再生位置を、前記表示手段に表示された認識結果を選択肢として指定する再生位置指定手段をさらに具備することを特徴とする請求項３記載の対話記録装置。
【請求項５】
前記音声表示手段は、前記その他の話者の発話時間を含む前記特定話者の無発話時間を、その前後に発話された前記特定話者の音声の認識結果に介在させて表示することを特徴とする請求項３または４記載の対話記録装置。
【請求項６】
入力した音声を特定話者の音声とその他の話者の音声とに分別し、その分別結果を示す情報とともに前記入力音声を記憶媒体に格納することを特徴とする対話記録方法。
【請求項７】
データ記憶手段と音声入力手段とを備えたコンピュータを、前記音声入力手段により入力された音声を特定話者の音声とその他の話者の音声とに分別する音声分別手段、
前記音声分別手段の分別結果を示す情報とともに前記入力音声を前記データ記憶手段に格納する音声格納手段
として機能させるための対話記録プログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、会議等の対話における参加者の発言を音声で記録する対話記録装置および対話記録方法に係り、特に、特定話者の音声とその他の話者の音声とを区別して記録・再生することを可能とした対話記録装置および対話記録方法に関する。
【０００２】
【従来の技術】
自分が参加した会議のメモを取る代わりに、音声やビデオで会議を記録することは昔から一部で行われているが、その記録された情報を再生して利用するには実際の会議と同程度の時間がかかってしまう。このため、専門家のインタビュアなど特定の業務の人を除いては、ほとんど録りっ放しでさほど有効的に活用されていないのが実情である。
【０００３】
従来の対話記録装置は、会議等の会話を記録した後、特定の箇所を探し出して再生するものであったり、映像、文字入力など様々な情報を記録することにより、その会議に参加できなかった人に対して、実際の会議に出席して得られるものに近い情報を提供するためのものであった。
【０００４】
また、個人用の対話記録装置も、テープレコーダの延長であり、単純に高速に再生したり、発話の無い空白の時間を飛ばして再生することによって時間を短縮するものであった。
【０００５】
このようなことから、対話での発話を音声認識により自動的にテキストに変換して文書の発話記録を提供することにより、短時間でその対話内容を思い出すことを可能とするシステムなども開発されている（例えば特許文献１参照）。しかしながら、実際にこの種の発話記録を見てみると、人の話し言葉は決して読みやすいものではないことが分かる。また、音声認識は、認識しようとする発話者の発話の特徴を事前に音声辞書として提供しなければ認識精度が極端に悪い。にも関わらず、常に対話参加者全員の音声辞書が揃っているのは稀な状況である。
【０００６】
【特許文献１】
特開平７−１８２３６５号公報
【０００７】
【発明が解決しようとする課題】
前述したように、従来の対話記録装置においては、記録された音声の取り扱いが必ずしも効率的とは言い難く、利用者が満足のいく機能を提供するまでには至っていないのが現状であった。
【０００８】
この発明は、このような事情を考慮してなされたものであり、特定話者の音声とその他の話者の音声とを区別して記録・再生することを可能とした対話記録装置および対話記録方法を提供することを目的とする。
【０００９】
【課題を解決するための手段】
前述した目的を達成するために、この発明の対話記録装置は、データ記憶手段と、音声入力手段と、前記音声入力手段により入力された音声を特定話者の音声とその他の話者の音声とに分別する音声分別手段と、前記音声分別手段の分別結果を示す情報とともに前記入力音声を前記データ記憶手段に格納する音声格納手段とを具備することを特徴とする。
【００１０】
この発明の対話記録装置においては、例えば音声辞書を準備容易な記録者の音声とその他の者の音声とを区別して記録することにより、再生者本人の発話である記録者の音声のみを高速に再生したり、あるいは、高レベルの認識精度を保持できる記録者の音声のみに対して音声認識処理を実施する等、記録された音声を効率的に取り扱うことが実現される。
【００１１】
【発明の実施の形態】
以下、図面を参照してこの発明の実施形態を説明する。
【００１２】
図１は、この発明の実施形態に係る対話記録装置の構成を示す図である。
【００１３】
この対話記録装置は、対話における参加者の発言を音声で記録する電子機器であり、例えば議事録の作成を容易にする等のビジネス支援ツールである。
【００１４】
対話を記録する主な目的は、一般的には次の２つであり、１つは、後にその詳細を思い出したり、議事録を作成する時に利用するためである。また、もう１つは、メモを取る代わりに音声データを残すためである。そして、後者の場合、対話の記録者と再生者は同じである。
【００１５】
記録者は、自分が参加した対話では、他人の発言よりも自分の発言の方を詳しく思い出せる可能性が高い。従って、記録者の発言箇所は高速で再生しても左程問題は発生しない。また、自分の発話の特徴を記録した音声辞書を準備することは容易である。従って、記録者の発話箇所だけを音声認識すれば高精度なテキスト化が可能となる。そこで、この対話記録装置では、記録者とその他の者の音声とを区別して記録し、記録者の音声のみを高速に再生したり、記録者の音声のみをテキスト変換する機能を提供する。
【００１６】
図１において対話の音声は、音声入力部１により取り込まれ、その波形データが符号化部２に渡されて計算機で取り扱い可能な形式の情報に符号化される。この符号化の際、符号化部２は、再生時に時間を指定して再生することが可能なように時計部３より時刻を取得して符号化された情報に埋め込む。そして、符号化された情報は、発話者特定部４に送られて、この発話者が登録されている者か、もしくはその他の者かが判定される。
【００１７】
発話者特定部４としては、声の音域や発話の特徴を利用して発話者を区別する方法や、複数のマイクロホンを使用して、同じ波形を最も大きく拾ったマイクロホンの使用者により区別する方法や、マイクロホンアレーなどを用いて発話者の位置から特定する方法など、従来から知られている様々な方法が考えられる。この発話者特定部４によって、発話は少なくとも「記録者による発話」と「非記録者による発話」とに分類されて認識制御部５に送られることになる。
【００１８】
認識制御部５は、非記録者による発話の場合、符号化された音声情報をそのまま記憶部８に記憶する。一方、記録者による発話の場合、認識制御部５は、符号化された音声情報を音声認識部６に渡す。音声認識部６は、特徴記憶部７に記憶された記録者の発話の特徴辞書を利用して、認識制御部５からの音声情報をテキスト情報に高精度に変換し、これにより得たテキスト情報を認識制御部５に返す。そして、認識制御部５は、このテキスト情報とともに、符号化された音声情報を記憶部８に記憶する。
【００１９】
また、再生制御部９は、起動すると、記憶部８から符号化された音声情報を読み出し再生する。再生制御部９は、記録時刻の早いものから順に符号化された音声情報を元の音声に戻し、再生部１０を用いて音声を再生していくが、再生する音声が記録者による発話である場合には、再生速度を速めて高速に再生する。このとき、再生制御部９は、現在再生している箇所の前後の記録者の発話を表示部１１にテキスト表示する。さらに、ユーザによる選択部１２の操作により再生すべき箇所が選択されると、再生制御部９は、該当する箇所の音声を再生部１０を用いて再生し、同時に、表示部１１の表示内容も更新する。
【００２０】
図２は、認識制御部５の動作原理を示すフロー図である。
【００２１】
発話者特定部４から音声情報を受け取ると、認識制御部５は、まず、記録者の発話であるか否かをチェックする（ステップＡ１）。記録者の発話である場合（ステップＡ１のＹＥＳ）、認識制御部５は、その音声情報を音声認識部６に渡して認識処理を実行するよう命令する（ステップＡ２）。そして、認識制御部５は、認識結果のテキスト情報を音声認識部６から受け取ると（ステップＡ３）、この認識結果のテキストを音声情報に付加し（ステップＡ４）、テキストを付加した情報を記憶部８に格納する（ステップＡ５）。
【００２２】
一方、ステップＡ１において、記録者以外の発話の音声データである場合（ステップＡ１のＮＯ）、認識制御部５は、この音声情報に何の情報も付加せずにそのまま記憶部８に格納する（ステップＡ５）。
【００２３】
図３は、記憶部８に記憶されている符号化された音声情報の一例である。
【００２４】
（Ａ）の波形は、音声情報を表しており、（Ｂ）のテーブルは、記録者の発話開始時刻および発話終了時刻と、音声認識部６によりテキスト変換された発話の内容とを格納している。
【００２５】
また、図４は、再生制御部９の動作原理を示すフロー図である。
【００２６】
再生制御部９は、起動すると、まず、記録されたデータ中の再生箇所を管理する変数「開始」をデータの先頭である０に設定し（ステップＢ１）、記憶部８に記憶されているデータを読み出す（ステップＢ２）。
【００２７】
また、再生制御部９は、選択部１２により再生箇所が選択されているかどうかをチェックし（ステップＢ３）、選択部１２により再生箇所が選択されている場合には（ステップＢ３のＹＥＳ）、この選択内容に従って再生の開始箇所を設定する（ステップＢ４）。
【００２８】
次に、再生制御部９は、再生の開始箇所で指定された時刻のデータが存在するかどうかをチェックし（ステップＢ５）、存在しない場合（ステップＢ５のＮＯ）、再生を終了する。一方、データが存在する場合（ステップＢ５のＹＥＳ）、再生制御部９は、その前後のテキスト情報を記憶部８から取得し（ステップＢ６）、表示部１１の表示内容を更新する（ステップＢ７）。
【００２９】
再生制御部９は、再生の開始箇所の音声情報を取得すると（ステップＢ８）、一旦、再生速度を通常の速度に設定し（ステップＢ９）。その後、再生しようとしている音声が記録者の発話か否かをチェックする（ステップＢ１０）。そして、記録者の発話である場合（ステップＢ１０のＹＥＳ）、再生制御部９は、再生速度を通常の２倍速に設定する（ステップＢ１１）。
【００３０】
再生制御部９は、この設定された再生速度に従い、符号化された音声情報を元の音声に戻して再生を行う（ステップ３１２）、そして、再生中の音声データが終了する時刻を次の開始時刻として設定し（ステップＢ１３）、ステップＢ３からの処理を繰り返す。
【００３１】
図５は、表示部１１に図２の情報を表示した場合の一表示例である。
【００３２】
図中、矢印は、現在再生中の箇所を示しており、「えっと」と「次はどうしましょうか」との間を再生中であることを示している。そして、これらの発言の間にある秒数は、他の人の発言時間を示す。この例では、選択部１２として数字を入力するキーを想定しており、利用者が「３」を入力すれば、「結論はこれでいいですか？」から再生されることを意味している。
【００３３】
このように、この対話記録装置においては、認識制御部５が、特徴記憶部７にその特徴が登録された記録者とその他の者の音声とを区別して記憶部８に記録することにより、再生制御部９が、記録者の音声のみを高速に再生したり、記録者の音声のみを表示部１１にテキスト表示すること等が実現される。
【００３４】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【００３５】
【発明の効果】
以上詳述したように、この発明によれば、特定話者の音声とその他の話者の音声とを区別して記録・再生することを可能とした対話記録装置および対話記録方法を提供することができる。
【図面の簡単な説明】
【図１】この発明の実施形態に係る対話記録装置の構成を示す図
【図２】同実施形態の対話記録装置が具備する認識制御部の動作原理を示すフロー図
【図３】同実施形態の対話記録装置が具備する記憶部に記憶されている符号化された音声情報の一例を示す図
【図４】同実施形態の対話記録装置が具備する再生制御部の動作原理を示すフロー図
【図５】同実施形態の対話記録装置が具備する表示部に図２の情報を表示した場合の一表示例を示す図
【符号の説明】
１…音声入力部、２…符号化部、３…時計部、４…発話者特定部、５…認識制御部、６…音声認識部、７…特徴記憶部、８…記憶部、９…再生制御部、１０…再生部、１１…表示部、１２…選択部。
【図１】
2005043628.tif 000003
【図２】
2005043628.tif 000004
【図３】
2005043628.tif 000005
【図４】
2005043628.tif 000006
【図５】
2005043628.tif 000007