(57)【要約】【課題】  講演音声との時間的な対応関係を保ちつつ、講演音声をかき消すことなく音声メモを録音でき、さらにその音声メモの内容が第三者に知られずに済む録音再生装置及び方法の提供。【解決手段】  可聴音信号を収集するための第１のマイクロホン（１０３）と、操作者の声帯振動を伴わないささやきによる非可聴音信号を収集するための第２のマイクロホン（１０２）と、前記第１のマイクロホン（１０３）から入力された信号と前記第２のマイクロホン（１０２）から入力された信号とをそれぞれ記憶する記憶手段（２０３，２０４）とを備える。好適な実施形態によれば、前記記憶手段（２０３，２０４）は、前記第１のマイクロホン（１０３）から入力された信号と前記第２のマイクロホン（１０２）から入力された信号とをそれぞれ別のチャネルに記憶する。【選択図】  図２
2005140858.tif 000002
【特許請求の範囲】
【請求項１】
可聴音信号を収集するための第１のマイクロホンと、
操作者の声帯振動を伴わないささやきによる非可聴音信号を収集するための第２のマイクロホンと、
前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ記憶する記憶手段と、
を有することを特徴とする録音再生装置。
【請求項２】
前記記憶手段は、前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ別のチャネルとして記憶することを特徴とする請求項１に記載の録音再生装置。
【請求項３】
各チャネルに記憶された信号が、前記第１のマイクロホンから入力された信号であるか、前記第２のマイクロホンから入力された信号であるかを判定する判定手段を更に有することを特徴とする請求項２に記載の録音再生装置。
【請求項４】
前記第２のマイクロホンから入力された信号を聴取可能なレベルに調整するレベル調整手段を更に有することを特徴とする請求項１から３までのいずれかに記載の録音再生装置。
【請求項５】
前記非可聴音によって構築された音響モデルに基づいて、前記第２のマイクロホンから入力された信号に対し音声認識を行う音声認識手段と、
前記音声認識手段により得られたテキスト情報から音声合成を行う音声合成手段と、
を更に有することを特徴とする請求項１から３までのいずれかに記載の録音再生装置。
【請求項６】
前記第２のマイクロホンから入力された信号から可聴音を検出する手段と、
前記第２のマイクロホンから入力された信号が検出された可聴音を、前記記憶手段への記憶の対象から除外するように制御する手段と、
を更に有することを特徴とする請求項１から５までのいずれかに記載の録音再生装置。
【請求項７】
再生時に、操作者からの指示に基づいて前記非可聴音の立ち上がり部を再生開始位置として検索する非可聴音頭出し手段を更に有することを特徴とする請求項１から６までのいずれかに記載の録音再生装置。
【請求項８】
前記第１のマイクロホンから入力された信号および第２のマイクロホンから入力された信号のうち、それぞれ可聴音および非可聴音の存在する区間を表示する表示手段を更に有することを特徴とする請求項７に記載の録音再生装置。
【請求項９】
前記第１のマイクロホンから入力された信号において可聴音が途切れる位置に、その時点近傍の前記第２のマイクロホンから入力された非可聴音を挿入して再生する再生制御手段を更に有することを特徴とする請求項１に記載の録音再生装置。
【請求項１０】
可聴音を収集するための第１のマイクロホンを用いて音響信号を入力するステップと、
操作者の耳の後ろ付近に装着された第２のマイクロホンを用いて、操作者の声帯振動を伴わないささやきによる非可聴音を入力するステップと、
前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ記憶手段に記憶する記憶ステップと、
を有することを特徴とする録音再生方法。
【請求項１１】
前記記憶ステップは、前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ別のチャネルとして記憶することを特徴とする請求項１０に記載の録音再生方法。
【請求項１２】
各チャネルに記憶された信号が、前記第１のマイクロホンから入力された信号であるか、前記第２のマイクロホンから入力された信号であるかを判定する判定ステップを更に有することを特徴とする請求項１１に記載の録音再生方法。
【請求項１３】
前記第２のマイクロホンから入力された信号を聴取可能なレベルに調整するレベル調整ステップを更に有することを特徴とする請求項１０から１２までのいずれかに記載の録音再生方法。
【請求項１４】
前記非可聴音によって構築された音響モデルに基づいて、前記第２のマイクロホンから入力された信号に対し音声認識を行う音声認識ステップと、
前記音声認識ステップにより得られたテキスト情報から音声合成を行う音声合成ステップと、
を更に有することを特徴とする請求項１０から１２までのいずれかに記載の録音再生方法。
【請求項１５】
前記第２のマイクロホンから入力された信号から可聴音を検出するステップと、
前記第２のマイクロホンから入力された信号が検出された可聴音を、前記記憶手段への記憶の対象から除外するように制御するステップと、
を更に有することを特徴とする請求項１０から１４までのいずれかに記載の録音再生方法。
【請求項１６】
再生時に、操作者からの指示に基づいて前記非可聴音の立ち上がり部を再生開始位置として検索する非可聴音頭出しステップを更に有することを特徴とする請求項１０から１５までのいずれかに記載の録音再生方法。
【請求項１７】
前記第１のマイクロホンから入力された信号および第２のマイクロホンから入力された信号のうち、それぞれ可聴音および非可聴音の存在する区間を表示部に表示する表示ステップを更に有することを特徴とする請求項１６に記載の録音再生方法。
【請求項１８】
前記第１のマイクロホンから入力された信号において可聴音が途切れる位置に、その時点近傍の前記第２のマイクロホンから入力された非可聴音を挿入して再生する再生制御ステップを更に有することを特徴とする請求項１０に記載の録音再生方法。
【請求項１９】
コンピュータに、請求項１０から請求項１８までのいずれかに記載の録音再生方法を実現させるためのプログラム。
【請求項２０】
請求項１９に記載のプログラムを格納したコンピュータ読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、入力した音響信号を記憶媒体に記録し再生する録音再生装置及び方法に関する。
【背景技術】
【０００２】
従来、講演などの音源を録音しながらメモを書き留める際は、机上にカセットレコーダーやＩＣレコーダーなどの録音装置を用意して講演を録音し、ノートにメモを書き留めるというスタイルが一般的である。あるいは、机上の録音装置に音声メモとして記録することも可能である（例えば、特許文献１，２を参照。）。
【０００３】
【特許文献１】特開平０７−０１４１０４号公報
【特許文献２】特開２０００−０２００９３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、メモをノートに書き留める場合には、録音した講演音声と書き留めたメモとの対応関係がとれなくなってしまうという問題がある。一方、机上の録音装置に音声メモとして記録する場合には、音声メモを発声している間の講演音声が音声メモでかき消されてしまう上に、そのメモの内容を周囲の人間に知られてしまうという問題がある。
【０００５】
本発明は上記問題点に鑑みてなされたものであり、講演音声との時間的な対応関係を保ちつつ、講演音声をかき消すことなく音声メモを録音でき、さらにその音声メモの内容が第三者に知られずに済む録音再生装置及び方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一側面によれば、可聴音信号を収集するための第１のマイクロホンと、操作者の声帯振動を伴わないささやきによる非可聴音信号を収集するための第２のマイクロホンと、前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ記憶する記憶手段とを有することを特徴とする録音再生装置が提供される。
【０００７】
好適な実施形態によれば、前記記憶手段は、前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ別のチャネルに記憶する。
【０００８】
本発明の他の側面によれば、可聴音を収集するための第１のマイクロホンを用いて音響信号を入力するステップと、操作者の耳の後ろ付近に装着された第２のマイクロホンを用いて、操作者の声帯振動を伴わないささやきによる非可聴音を入力するステップと、前記第１のマイクロホンから入力された信号と前記第２のマイクロホンから入力された信号とをそれぞれ記憶手段に記憶する記憶ステップとを有することを特徴とする録音再生方法も提供される。
【発明の効果】
【０００９】
本発明によれば、講演音声との時間的な対応関係を保ちつつ、講演音声をかき消すことなく音声メモを録音でき、さらにその音声メモの内容が周囲の人間に知られずに済む録音再生装置及び方法を提供することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照して本発明の好適な実施形態について詳細に説明する。
【００１１】
（実施形態１）
図１は、本発明の実施形態における録音再生装置の外観を示す図である。
【００１２】
図示のように、本体１０１には２つのマイクロホン端子Ａ，Ｂが設けられており、同時に２つのマイクロホンを接続可能である。ここでは、上述の課題を解決するために、一方のマイクロホンは第１のマイクロホンとして講演等の音声を収録するために使用され、もう一方のマイクロホンは操作者の音声メモ用に使用される。
【００１３】
ところで、音声認識の分野では、無音声認識と呼ばれる技術が提案されている。この無音声認識は、従来の音声認識で扱う通常音声を対象としたものではなく、声帯振動を伴わず独り言のようにささやく、およそ第三者には聞き取ることのできない音声（非可聴音声：Non-Audible Murmur、以下、「ＮＡＭ音声」と呼ぶことにする）を対象にした音声認識技術である。この無音声認識では、ＮＡＭ音声を拾うための、耳の後ろ付近に聴診器のような形をした体表接着型の特殊なマイク（以下、「ＮＡＭマイク」と呼ぶことにする）を装着する。発声者が発したＮＡＭ音声は、体内を通じて体表まで伝わり、ＮＡＭマイクの振動板を振動させ、ＮＡＭマイクに集音される。このようにして集音された信号は、周囲の環境音による影響を受けにくいため、実環境下でも良好な認識性能を期待することができる。また、無音声は周囲の人間にほとんど聞こえないため秘匿性にも優れている。ＮＡＭマイクの構造は基本的に電子聴診器と同じである。ＮＡＭマイクは、体表面に接着した振動板が振動することによって生じる圧力の変化を電気信号に変換する。ＮＡＭマイクの具体的構成については、中島  淑貴、“無音声認識（言霊：ことだま）〜新たなユニバーサルデザイン・入力インターフェースとして〜”（インターネット＜ＵＲＬ：http://www.isid.co.jp/student/ronbun/1-kotodama.pdf＞）または、日本音響学会2003年春期研究発表会講演論文集3-Q-12(pp.175-176)を参照されたい。
【００１４】
本実施形態では、このようなＮＡＭマイク１０２を第２のマイクロホンとして操作者の音声メモ用に使用する。ＮＡＭマイク１０２は、操作者の耳の後ろ付近あるいは首筋の付近に装着され、ＮＡＭ音声を集音する。他方、音声マイク１０３は通常音声を集音する。
【００１５】
なお、図１では、マイク端子ＡにＮＡＭマイク１０２が接続され、マイク端子Ｂに音声マイク１０３が接続されているが、マイク端子Ａ、Ｂの形状は同一であり、どちらに接続されていてもよい。
【００１６】
なお、本実施形態では、上記のように本体にマイク入力端子が設けられている場合について説明するが、本発明はこれに限定されるものではなく、本体に各マイクが組み込まれているものでもよい。また、本実施形態における録音再生装置の再生音声は、本体１０１に内蔵されるスピーカから出力するようにしてもよいし、スピーカを内蔵しない代わりに、イヤホン出力端子を設け、そこに接続されたイヤホンから出力するようにしてもよい。
【００１７】
図２は、本実施形態における録音再生装置のモジュール構成を示すブロック図である。
【００１８】
録音部２０３は、音声マイク１０３およびＮＡＭマイク１０２から入力される信号を記憶手段としてのメモリ２０４に記録する。この場合、音声マイク１０３およびＮＡＭマイク１０２から入力される信号はそれぞれ別のチャネルに記録されることが好ましい。なお、メモリ２０４は記憶手段の一例にすぎない。例えば、磁気テープ、ハードディスク、ＣＤ−ＲＷ、ＤＶＤ−ＲＡＭ、フラッシュメモリなどを用いてもよい。
【００１９】
再生部２０５は、メモリ２０４から取り出した各チャネルの音声データを再生する。ここでは、音声マイク１０３から入力された音声は左スピーカ２０７から出力され、ＮＡＭマイク１０２からのＮＡＭ音声はレベル調整部２０８を介して右スピーカ２０９から出力される。もちろん逆に、音声マイク１０３から入力された音声が右スピーカ２０９から出力され、ＮＡＭマイク１０２からのＮＡＭ音声がレベル調整部２０８を介して左スピーカ２０７から出力されるように構成してもよい。あるいは、ＮＡＭ音声を出力するスピーカを操作者に選択させる機構を備えてもよいであろう。
【００２０】
上記のような処理を実現するためには、再生しようとする各チャネルの音声データが音声マイク１０３から入力された音声であるかＮＡＭマイク１０２からのＮＡＭ音声であるのかを判別する必要がある。ここでは、マイク端子Ａ，ＢのどちらにＮＡＭマイク１０２、音声マイク１０３が接続されているのか不明だからである。そこで、音声／ＮＡＭ判定部２０６が、再生しようとする音声データがＮＡＭ音声であるか通常音声であるかを判別する。
【００２１】
また、レベル調整部２０８は、ＮＡＭ音声を聴取可能なレベルまで増幅する。ここでは、ＮＡＭ音声が通常音声と同程度のレベルになるようにＮＡＭ音声を増幅することが好ましい。ＮＡＭ音声はもともと非可聴音であるから、この増幅によってＮＡＭ音声は可聴音に変換されることになる。
【００２２】
図３は、本実施形態における録音再生装置の再生処理の流れを示すフローチャートである。なお、録音処理の流れは一般的なレコーダーのそれと同じなので省略する。
【００２３】
まず、ステップＳ３０１で、再生部２０５は、複数チャネルの音声データをメモリ２０４から取り出し、音声／ＮＡＭ判定部２０６にデータを送る。音声／ＮＡＭ判定部２０６は、各チャネルが通常音声データであるかＮＡＭ音声データであるかの判定を行う。判別方法としては例えば、有声音が含まれる割合が大きい方のチャネルを通常音声データ、少ない方のチャネルをＮＡＭ音声データと判定する。判定が終了したらステップＳ３０２に移る。次に、ステップＳ３０２で、レベル調整部２０８は、ＮＡＭ音声のレベルを聴取可能なレベルまで増幅し、その後、ステップＳ３０３に移る。そして、ステップＳ３０３で、再生部２０５は、通常音声を左スピーカ２０７に出力し、また、レベル調整後のＮＡＭ音声を右スピーカ２０９に出力して終了する。
【００２４】
このように、本実施形態の録音再生装置は、可聴音を収集するための第１のマイクロホンとしての音声マイク１０３と、操作者の声帯振動を伴わないささやきによる非可聴音を収集するための第２のマイクロホンとしてのＮＡＭマイク１０２とを備え、音声マイク１０３から入力された信号とＮＡＭマイク１０２から入力された信号とをそれぞれメモリに記憶する。これにより、音声メモを非可聴音によりとることができるので、音声メモの内容を第三者に知られずに済ますことが可能になることに加えて、音声メモの非可聴音声が音声マイク１０３に集音されることがないため、音声マイク１０３で集音する通常音声を音声メモでかき消してしまうことがない。加えて本実施形態では、再生する際にＮＡＭマイク１０２から入力された信号を聴取可能なレベルに増幅するようにしたので、非可聴音で入力した音声メモが可聴音に変換されて明瞭に聴取することができる。
【００２５】
（実施形態２）
実施形態１は音声／ＮＡＭ判定およびレベル調整を再生時に行うものであったが、これらの処理は録音時に行うようにしてもよい。このことを実施形態２として以下説明する。この実施形態２でも、実施形態１と同様に、音声マイクとＮＡＭマイクの入力端子の形状は共通であることを前提としている。
【００２６】
図４は、実施形態２における録音再生装置のモジュール構成を示すブロック図である。この構成は図２に示した実施形態１における録音再生装置とほぼ同様の構成であるが、音声／ＮＡＭ判定部２０６およびレベル調整部２０８が再生部２０５ではなく録音部２０３に接続されている点が異なっている。
【００２７】
図５は、実施形態２における録音再生装置の録音処理の流れを示すフローチャートである。なお、再生処理の流れは一般的なレコーダーのそれと同じなので省略する。
【００２８】
まず、ステップＳ５０１で、録音部２０３は、音声マイク１０３およびＮＡＭマイク１０２からそれぞれのチャネルに入力される音声データを取り込み、音声／ＮＡＭ判定部２０６にそれらの音声データを送る。音声／ＮＡＭ判定部２０６は、各チャネルが通常音声データであるかＮＡＭ音声データであるかの判定を行い、判定が終了したらステップＳ５０２に移る。次に、ステップＳ５０２で、レベル調整部２０８は、ＮＡＭ音声のレベルを聴取可能なレベルまで増幅し、その後、ステップＳ５０３に移る。そして、ステップＳ５０３で、録音部２０３は、通常音声とレベル調整後のＮＡＭ音声とをメモリ２０４に保存して終了する。
【００２９】
（実施形態３）
実施形態１および実施形態２では、音声マイクとＮＡＭマイクの入力端子の形状が共通であるため、再生時または録音時に通常音声とＮＡＭ音声の判別をデータの特徴から推定する必要があった。しかしこれは、例えば、音声マイクとＮＡＭマイクの入力端子を異なる形状にすることなどにより、特定のチャネルにＮＡＭ音声を入力させることが可能である。その場合には、上述した実施形態１、２における音声／ＮＡＭ判定処理は不要となる。
【００３０】
（実施形態４）
実施形態１乃至実施形態３では、ＮＡＭ音声を聴取可能なレベルに増幅する場合について説明したが、このようなレベル調整のかわりに、例えば無音声認識を利用して一度文字化した後、これを音声合成するなどして可聴音に変換して出力するようにしてもよい。
【００３１】
図９は、実施形態４における録音再生装置の構成を示す図である。この構成は、図２に示した実施形態１における録音再生装置においてレベル調整部２０８を省略し、かわりに破線で示される可聴音生成部９０を付加した構成である。可聴音生成部９０は図示のように、メモリ２０４に記憶された音響信号（非可聴音声信号）を入力して音声認識を行う音声認識部９１と、その音声認識部９１による音声認識結果を入力して音声合成を行う音声合成部９２を有する。音声認識部９１は、ＮＡＭ音声によって構築された音響モデル９３と、言語モデル９４とに基づいて無音声認識（ＮＡＭ音声認識）を行い、認識結果としてのテキスト情報を音声合成部９２に供給する。音声合成部９２はあらかじめ作成された波形辞書９５を用いて、入力されたテキスト情報に基づいて音声合成を行い、その合成音声を例えば右スピーカ２０９に出力することでＮＡＭ音声を聴取可能にする。
【００３２】
（実施形態５）
実施形態１乃至実施形態３では、レベル調整部２０８によりＮＡＭ音声のレベルを調整する態様について説明したが、本発明はこれに限定されるものではなく、レベル調整部２０８を省略してＮＡＭ音声をそのまま出力するようにしてもよい。この場合の用途としては、ＮＡＭ音声を外部の無音声認識装置に入力する場合などが考えられる。さらに、ＮＡＭ音声のレベル調整を行うか否かを選択する機能を設けてもよい。例えば、そのまま出力する、レベル調整を行う、音声合成を行うなどが考えられる。
【００３３】
（実施形態６）
ＮＡＭマイク１０２は、操作者の声帯振動を伴わないささやきによる非可聴音を収集するためのマイクロホンであるが、前述の実施形態１〜５は、ＮＡＭマイク１０２から入力された信号が現実に可聴音であるか非可聴音であるかにかかわらず、すべて音声メモとして録音するものであった。
【００３４】
しかし、例えば講演の質疑応答のような場面で操作者が発言するような場合を考えると、このときの操作者の発言が音声メモとして録音されるのは好ましくない。かといって、このような場合にいちいちＮＡＭマイクを外すのは面倒である。
【００３５】
そこで、実施形態６では、ＮＡＭマイク１０２から入力された信号から可聴音を検出し、検出された可聴音は音声メモとして録音しないような制御処理を導入する。可聴音声と非可聴音声との判別は、例えば、入力信号の振幅やパワーに一定の閾値を設定しておいて、その閾値より大きい場合は可聴音声、小さい場合は非可聴音声とすればよい。このような制御処理によれば、講演の質疑応答などで聴取者が発言するような場合に、いちいちＮＡＭマイクを外さなくても、その発言の音声が音声メモとして録音されることを防止することができる。
【００３６】
（実施形態７）
実施形態６では、ＮＡＭマイクから入力される可聴音を検出し、その検出された可聴音を音声メモとしての録音対象から除外するようにしたが、この代わりに、検出された可聴音を擬似的にＮＡＭ音声化して、それを録音するようにしてもよい。このようなＮＡＭ音声化の方法としては、低次の周波数をカットするようなフィルタ処理を行う方法などがある。
【００３７】
（実施形態８）
実施形態１および２では、ＮＡＭ音声のレベルを聴取可能なレベルまで、もしくは、通常音声のレベルと同程度になるまで増幅する場合について説明したが、その代わりに、ＮＡＭ音声が検知された部分では、通常音声のレベルを抑制するようにしてもよい。いうまでもないことであるが、この場合もＮＡＭ音声の増幅は行う必要がある。これにより、講演音声よりもメモとして録音したＮＡＭ音声を強調して再生することが可能である。
【００３８】
（実施形態９）
上述の実施形態１〜８では、音声マイク１０３およびＮＡＭマイク１０２からそれぞれ入力される通常音声とＮＡＭ音声が別のチャネルに保存される場合について説明したが、代替例として、両方の入力を混合してモノラルとして保存するようにしてもよい。この場合、それぞれのマイクに入力される通常音声とＮＡＭ音声を独立に一時的にメモリに保存し続け、通常音声およびＮＡＭ音声が途切れるタイミングなどに合わせて、保存用のメモリに書き込む。両マイクに同時期に入力がある場合は、最初に途切れた方を先に書き込むなど順番に書き込めばよい。厳密な時間の対応関係は崩れてしまうが、講演音声とそれに対するメモという観点では、この程度の時間対応関係が保持できれば十分である。
【００３９】
また、録音時はそれぞれ別のチャネルに保存しておき、再生時に混合して再生するようにしてもよい。
【００４０】
また、この混合の前に、ＮＡＭ音声を強調するために、ＮＡＭ音声が検知される部分では通常音声のレベルを抑制するようにしてもよい。
【００４１】
（実施形態１０）
再生時には音声メモの内容が重要である場合が多いと考えられる。そこで、上述の実施形態１〜９において、再生時に、操作者からの指示に基づいて、ＮＡＭ音声立ち上がり部を再生開始位置として検索するＮＡＭ音声頭出し機能を有することが好ましい。
【００４２】
（実施形態１１）
ＩＣレコーダーのようにディジタル録音されている場合は、一般的なカセットレコーダーとは違って両チャネルを非同期に再生することが可能である。例えば、通常音声は従来通り再生することとし、通常音声が途切れた時点でＮＡＭ音声を挿入再生するような利用方法が考えられる。ＮＡＭ音声の挿入位置は、できる限り対応する通常音声に近い時点に行うと効果的である。これにより、講演音声の再生を邪魔することなく、音声メモを聞くことが可能である。
【００４３】
同様に、ＮＡＭ音声を再生する間、通常音声を一時停止するよう制御を行うようにしてもよいであろう。
【００４４】
以下、具体例を示す。
【００４５】
図６は、本実施形態に係る録音再生装置におけるＮＡＭ音声を挿入再生するために必要なモジュールの構成を示すブロック図である。これは例えば、ＮＡＭ音声検知部６０１および一時停止時点探索部６０２が図１に示した構成に付加された構成であることを示している。
【００４６】
ＮＡＭ音声検知部６０１は、通常音声の再生中の時点よりも少し先の時間にＮＡＭ音声が存在することを検知する。一時停止時点探索部６０２は、ＮＡＭ音声の存在時点付近で通常音声が途切れる時点を探索する。再生部２０５は、通常音声の再生を制御し、一時停止させたり再生を再開させたりする。また、ＮＡＭ音声の再生、停止を行う。
【００４７】
図７は、本実施形態に係る録音再生装置におけるＮＡＭ音声の挿入再生処理の一例を示すフローチャートである。
【００４８】
まず、ステップＳ７０１で、ＮＡＭ音声検知部６０１は、通常音声の再生中の時点よりも少し先の時間にＮＡＭ音声が存在することを検知する。検知した時点で次のステップＳ７０２に移る。検知しない場合はステップＳ７０１を繰り返す。ステップＳ７０２では、一時停止時点探索部６０２が、通常音声を一時停止させるにふさわしい時点を探索する。一般的に一時停止させるにふさわしい時点とは、例えば、通常音声が途切れる時点、再生したいＮＡＭ音声に近い時点などが考えられる。続くステップＳ７０３では、一時停止時点探索部６０２の探索結果を受けて、再生部２０５が通常音声の再生を一時停止する。次に、ステップＳ７０４で、再生部２０５がＮＡＭ音声を再生し、再生が終了するとステップＳ７０５に移る。そして、ステップＳ７０５で、再生部２０５が通常音声の再生を再開し、終了する。
【００４９】
（実施形態１２）
実施形態１０で述べたように、再生時には音声メモの内容が重要である場合が多いと考えられる。そこで、例えば、音声マイク１０３から入力された音響信号およびＮＡＭマイク１０２から入力された音響信号のうち、それぞれ可聴音である通常音声の存在する区間および非可聴音である音声メモの存在する区間（すなわち、ＮＡＭ音声が存在する区間）を視覚的に表示することが可能な表示装置を利用すれば、短時間で重要個所を検索することが可能となる。
【００５０】
図８は、本実施形態における録音再生装置の表示部の一例を示す模式図である。図中、グレー表示された個所に通常音声またはＮＡＭ音声が存在することを表している。また、この表示部にタッチパネルなどの入力手段が具備されている場合には、任意の再生したいチャネルおよび時点を指定することにより、きわめて短時間に聞きたい個所の再生を実施することが可能となる。
【００５１】
（他の実施形態）
以上、本発明の実施形態を詳述したが、本発明は、例えばシステム、装置、方法、プログラムもしくは記憶媒体等としての実施態様をとることが可能である。また、本発明は、複数の機器から構成されるシステムに適用してもよいし、また、一つの機器からなる装置に適用してもよい。
【００５２】
なお、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システムあるいは装置に直接あるいは遠隔から供給し、そのシステムあるいは装置のコンピュータがその供給されたプログラムコードを読み出して実行することによって目的が達成される場合を含む。その場合、プログラムの機能を有していれば、その形態はプログラムである必要はない。
【００５３】
従って、本発明の機能処理をコンピュータで実現するために、そのコンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明の特許請求の範囲には、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。
【００５４】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【００５５】
プログラムを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などがある。
【００５６】
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、そのホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記憶媒体にダウンロードすることによっても供給できる。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明のクレームに含まれるものである。
【００５７】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【００５８】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現され得る。
【００５９】
さらに、記憶媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によっても前述した実施形態の機能が実現される。
【図面の簡単な説明】
【００６０】
【図１】本発明の実施形態における録音再生装置の外観を示す図である。
【図２】実施形態１における録音再生装置のモジュール構成を示すブロック図である。
【図３】実施形態１における録音再生装置の再生処理の流れを示すフローチャートである。
【図４】実施形態２における録音再生装置のモジュール構成を示すブロック図である。
【図５】実施形態２における録音再生装置の録音処理の流れを示すフローチャートである。
【図６】実施形態１１に係る録音再生装置におけるＮＡＭ音声を挿入再生するために必要なモジュールの構成を示すブロック図である。
【図７】実施形態１１に係る録音再生装置におけるＮＡＭ音声の挿入再生処理の一例を示すフローチャートである。
【図８】実施形態１２における録音再生装置の表示部の一例を示す模式図である。
【図９】図９は、実施形態４における録音再生装置の構成を示す図である。
【図１】
2005140858.tif 000003
【図２】
2005140858.tif 000004
【図３】
2005140858.tif 000005
【図４】
2005140858.tif 000006
【図５】
2005140858.tif 000007
【図６】
2005140858.tif 000008
【図７】
2005140858.tif 000009
【図８】
2005140858.tif 000010
【図９】
2005140858.tif 000011