(57)【要約】【課題】入力された音声信号に基づいて、特定のユーザ本人が聴取する音声信号を推定することが可能な記憶制御装置、再生制御装置および記録媒体を提供する。【解決手段】特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、を備える、記憶制御装置。【選択図】図１
2014112206.tif 000002
【特許請求の範囲】
【請求項１】
特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、
を備える、記憶制御装置。
【請求項２】
前記記憶制御装置は、ユーザを特定するユーザ特定部をさらに備え、
前記フィルタ検出部は、前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを選択的に検出し、
前記推定部は、前記フィルタ検出部により検出された音声信号推定フィルタに従って、前記特定されたユーザの周辺に配される空気伝導集音部により集音された、当該特定されたユーザの音声に対応する第２の音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する、請求項１に記載の記憶制御装置。
【請求項３】
前記推定部は、前記ユーザ特定部により特定されるユーザの切り替えに応じて、逐次前記フィルタ検出部により検出される特定ユーザに対応する音声信号推定フィルタに従って、切り替えられた特定ユーザの音声に対応する音声信号に基づき、第１の音声信号を推定する、請求項２に記載の記憶制御装置。
【請求項４】
前記特定されたユーザ本人が聴取する第１の音声信号は、骨伝導および空気伝導によりユーザに聴取される音声信号である、請求項１に記載の記憶制御装置。
【請求項５】
前記記憶制御装置は、各ユーザに対応した音声信号推定フィルタを記憶する記憶部をさらに備える、請求項１に記載の記憶制御装置。
【請求項６】
ユーザを特定するユーザ特定部と、
前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出された音声信号推定フィルタに従って、入力された音声信号のうち、前記特定されたユーザの音声に対応する音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、再生部により再生させる再生制御部と、
を備える、再生制御装置。
【請求項７】
前記推定部は、前記ユーザ特定部により特定されるユーザの切り替えに応じて、逐次前記フィルタ検出部により検出される特定ユーザに対応する音声信号推定フィルタに従って、切り替えられた前記特定ユーザの音声に対応する音声信号に基づき、第１の音声信号を推定する、請求項６に記載の再生制御装置。
【請求項８】
前記推定部は、入力された音声信号のうち、空気伝導集音部により集音された特定ユーザの音声に対応する第２の音声信号に基づき、前記特定ユーザ本人が聴取する第１の音声信号を推定する、請求項６に記載の再生制御装置。
【請求項９】
前記推定部は、前記特定されたユーザの音声に対応する音声信号が、既に前記音声信号推定フィルタにより推定されている第１の音声信号であることを検出すると、推定処理は行わない、請求項６に記載の再生制御装置。
【請求項１０】
前記再生制御装置は、各ユーザに対応した音声信号推定フィルタを記憶する記憶部をさらに備える、請求項６に記載の再生制御装置。
【請求項１１】
コンピュータを、
特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、
として機能させるためのプログラムが記録された記録媒体。
【請求項１２】
コンピュータを、
ユーザを特定するユーザ特定部と、
前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出された音声信号推定フィルタに従って、入力された音声信号のうち、前記特定されたユーザの音声に対応する音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、再生部により再生させる再生制御部と、
として機能させるためのプログラムが記録された記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、表記憶制御装置、再生制御装置および記録媒体に関する。
【背景技術】
【０００２】
通常、人間の音声は、自分の声を直接聞く場合と、録音された自分の音声を再生して聞く場合とで、声の印象が大きく異なり、違和感が生じる。これは、自らの音声を聞く場合は空気伝導に加えて骨伝導による音声が聞こえているためである。【０００３】
再生時のこのような違和感を無くすために、例えば下記特許文献１では、任意の利用者が所望の楽曲を歌唱した際に、その歌唱音声の生録音データを当該利用者の周波数変換データに基づいて変換する歌唱音声録音カラオケシステムが開示されている。かかる周波数変換データは、任意の利用者について、空気伝導マイクと骨伝導マイクとから同時入力される各音声それぞれの周波数特性に基づき取得された、空気伝導のみの音声に骨伝導を加えて合成した音声に変換するための周波数変換データである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−１７６０４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで、上述した特許文献１に記載のシステムは、カラオケで歌唱する者の音声を変換して録音することに特化しているので、１のマイクで集音される音声は一人の音声であることが前提とされる。したがって、特許文献１に記載のシステムでは、例えば利用者のＩＤと、利用者が使用するマイクのＩＤとを紐付けして、当該マイクからの入力音声を利用者の歌唱音声とみなしている。【０００６】
しかしながら、上述した特許文献１に記載のシステムでは、会議を録音する場合など、１のマイクで複数話者の音声を集音する場合に、特定のユーザの音声を変換する点については言及していない。また、上述した特許文献１に記載のシステムは、録音時に歌唱者の音声を変換して録音しているが、既に空気伝導マイクで録音された音声を、再生時に変換することについては言及されていない。【０００７】
そこで、本開示では、入力された音声信号に基づいて、特定のユーザ本人が聴取する音声信号を推定することが可能な、新規かつ改良された記憶制御装置、再生制御装置および記録媒体を提案する。
【課題を解決するための手段】
【０００８】
本開示によれば、特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、を備える記憶制御装置を提案する。【０００９】
本開示によれば、ユーザを特定するユーザ特定部と、前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを検出するフィルタ検出部と、前記フィルタ検出部により検出された音声信号推定フィルタに従って、入力された音声信号のうち、前記特定されたユーザの音声に対応する音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する推定部と、前記推定部により推定された第１の音声信号を、再生部により再生させる再生制御部と、を備える再生制御装置を提案する。【００１０】
本開示によれば、コンピュータを、特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、として機能させるためのプログラムが記録された記録媒体を提案する。【００１１】
本開示によれば、コンピュータを、ユーザを特定するユーザ特定部と、前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを検出するフィルタ検出部と、前記フィルタ検出部により検出された音声信号推定フィルタに従って、入力された音声信号のうち、前記特定されたユーザの音声に対応する音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する推定部と、前記推定部により推定された第１の音声信号を、再生部により再生させる再生制御部と、として機能させるためのプログラムが記録された記録媒体を提案する。
【発明の効果】
【００１２】
以上説明したように本開示によれば、入力された音声信号に基づいて、特定のユーザ本人が聴取する音声信号を推定することが可能となる。
【図面の簡単な説明】
【００１３】
【図１】本開示の一実施形態による録音再生制御システムの概要を説明するための図である。
【図２】第１の実施形態による録音再生装置の主要構成を示すブロック図である。
【図３】自分声と録音声との違いについて説明するための図である。
【図４】一のマイクが複数話者の音声信号を集音する場合について説明するための図である。
【図５】第１の実施形態の変形例による録音再生装置が複数の指向性マイクを有する場合におけるユーザ特定について説明するための図である。
【図６】第１の実施形態による録音制御処理を示すフローチャートである。
【図７】第２の実施形態による録音再生装置の主要構成を示すブロック図である。
【図８】第２の実施形態による推定部の機能構成を示すブロック図である。
【図９】第２の実施形態による録音制御処理を示すフローチャートである。
【図１０】第２の実施形態の変形例によるスマートフォンにおけるユーザ特定について説明するための図である。
【図１１Ａ】音声信号ＤＢから読み出した音声信号が、既に推定処理された音声信号であるか否かを判断する動作処理を示すフローチャートである。
【図１１Ｂ】音声信号ＤＢから読み出した音声信号が、既に推定処理された音声信号であるか否かを判断する動作処理を示すフローチャートである。
【発明を実施するための形態】
【００１４】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１５】
また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による録音再生制御の概要
２．各実施形態
２−１．第１の実施形態
２−２．第２の実施形態
２−３．補足
３．まとめ
【００１６】
＜＜１．本開示の一実施形態による録音再生制御システムの概要＞＞
まず、本開示の一実施形態による録音再生制御システムの概要について、図１を参照して説明する。
【００１７】
図１は、本開示の一実施形態による録音再生制御システムの概要を説明するための図である。図１に示すように、本実施形態による録音再生制御システムは、録音再生装置１により実行される。
【００１８】
録音再生装置１は、図１に示すように、筐体の前面に、表示部５および操作入力部４が設けられ、上方側面にマイクロホン２（以下、マイク２と称す）が内蔵され、背面にスピーカ３が設けられている。マイク２は、図１に示すように筐体の上方両側面に複数設けられ、ステレオ集音が可能である。
【００１９】
操作入力部４は、電源、録音／一時停止ボタン、停止ボタン、メニューボタン、フォルダボタン、再生／決定ボタン、コントロールボタン、音量調節ボタン、消去ボタン等を含み、ユーザは各ボタンを操作して録音／再生を指示することができる。なお、操作入力部４の各ボタンは、筐体の前面に限定されず、側面に設けられていてもよい。
【００２０】
ここで、上述したように、人間の音声は、自分の声を直接聞く場合と、録音された自分の音声を再生して聞く場合とで、声の印象が大きく異なり、違和感が生じる。このような違和感を解消するために、上記特許文献１が提案されているが、特許文献１に記載のシステムでは、会議を録音する場合など、複数話者の音声を集音する場合に、特定のユーザの音声を変換する点については言及されていない。また、既に空気伝導マイクで録音された音声を、再生時に変換することについては言及されていない。
【００２１】
そこで、本開示による録音再生制御システムでは、入力された音声信号に基づいて、特定のユーザ本人が普段聴取している音声信号を推定し、推定した音声信号を録音／再生することが可能な、新規かつ改良された録音再生装置１を提案する。なお、本明細書において、特定のユーザ本人が普段聴取している音声信号（空気伝導および骨伝導の合成音）を「普段声」とも称し、また、マイク２で集音された空気伝導による音声信号を「録音声」とも称する。
【００２２】
（録音時に推定する場合）
録音時に普段声を推定する場合、図１に示すように、録音再生装置１は、ステップＡ−Ｓ１に示す処理を行う。すなわち、録音再生装置１は、発話音源Ｓから空気伝導した音声信号をマイク２で集音し、当該音声信号に基づき、特定のユーザ本人が普段聴取している音声信号（普段声）を推定し、推定した音声信号を録音する。
【００２３】
特定のユーザ本人が普段聴取している音声信号とは、空気伝導による音声信号と骨伝導による音声信号が合成された音声信号である。このような特定のユーザ本人が普段聴取している音声信号（普段声）の推定は、予め記憶した特定のユーザに対応した音声信号推定フィルタを用いて行われる。また、録音再生装置１は、複数話者の音声信号がマイク２で集音された場合、特定のユーザ本人から発話された音声信号に対して推定処理を行う。
【００２４】
そして、再生時には、録音再生装置１は、ステップＡ−Ｓ２において、記憶された推定処理済みの音声信号（普段声；Ｏusual）を通常再生する。
【００２５】
（再生時に推定する場合）
一方、再生時に普段声を推定する場合、図１に示すように、録音再生装置１は、ステップＢ−Ｓ１において、まず、発話音源Ｓから空気伝導した音声信号をマイク２で集音し、通常録音する。
【００２６】
そして、録音時には、録音再生装置１は、ステップＡ−Ｓ２に示す処理を行う。すなわち、録音再生装置１は、記憶された音声信号に基づき、特定のユーザ本人が普段聴取している音声信号を推定し、推定した音声信号（普段声；Ｏusual）を再生する。なお、録音再生装置１は、記憶された音声信号を音源分離した上で、特定のユーザ本人から発話された音声信号に対してのみ推定処理を行い、再合成して再生してもよい。
【００２７】
以上説明したように、録音時／再生時に、特定ユーザの音声信号に対して所定の推定処理を行うことで、特定ユーザが録音された自分の音声を再生して聞く場合に、普段自分が直接聞いている自分の音声との違和感が生じないようにすることができる。
【００２８】
以下、録音時に特定ユーザの音声信号に対して所定の推定処理を行う場合について第１実施形態を参照して詳細に説明し、再生時に特定ユーザの音声信号に対して所定の推定処理を行う場合について第２実施形態を参照して詳細に説明する。
【００２９】
なお、図１に示す例では、録音再生装置１の一例としてＩＣ（Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）レコーダーを図示しているが、本実施形態による録音再生装置１はＩＣレコーダーに限定されない。例えば、本実施形態による録音再生装置１は、スマートフォン、携帯電話端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、タブレット端末、ＢＤ（Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ）レコーダー、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）レコーダー、ビデオカムコーダ、テレビジョン装置、ＴＶ会議システム等であってもよい。
【００３０】
＜＜２．各実施形態＞＞
＜２−１．第１の実施形態＞
まず、第１の実施形態による録音再生装置１Ａを用いて、録音時に特定ユーザの音声信号に対して所定の推定処理を行う場合について具体的に説明する。
【００３１】
［２−１−１．構成］
図２は、第１の実施形態による録音再生装置１Ａの主要構成を示すブロック図である。図２に示すように、録音再生装置１Ａは、マイク２、スピーカ３、操作入力部４、表示部５、主制御部１０Ａ、Ａ／Ｄ（アナログ−デジタル）変換部１５、音声信号推定フィルタＤＢ（データベース）１３、および音声信号ＤＢ（データベース）１７を有する。
【００３２】
（マイク２）
マイク２は、空気伝導による音声信号（空気伝導音）を集音する空気伝導集音部であって、上述したようにステレオ集音することも可能である。また、マイク２は、音声信号を増幅処理するマイクアンプ機能も有する。
【００３３】
（Ａ／Ｄ変換部１５）
Ａ／Ｄ変換部１５は、音声信号をアナログからデジタルに変換する機能を有する。本実施形態によるＡ／Ｄ変換部１５は、マイク２から出力されたアナログの音声信号をデジタルに変換し、主制御部１０Ａに出力する。
【００３４】
（主制御部１０Ａ）
主制御部１０Ａは、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）により構成され、録音再生装置１Ａの各構成を制御する。
【００３５】
本実施形態による主制御部１０Ａは、図２に示すように、ユーザ特定部１１、フィルタ検出部１２、推定部１４Ａ、記憶制御部１６Ａ、および再生制御部１８Ａとして機能する。
【００３６】
ユーザ特定部１１は、自動的に、またはユーザ操作に応じて推定処理対象のユーザを特定する。自動的に特定する方法としては、例えばユーザ特定部１１は、集音した音声信号に対して話者認識を行ってユーザを特定してもよいし、複数話者が居る場合は、最も近くに位置する音源の話者をユーザとして特定してもよい。また、録音再生装置１Ａが複数のマイク２を有する場合、ユーザ特定部１１は、所定のマイク２の近くに位置する音源の話者をユーザとして特定してもよい。マイク２と特定ユーザの対応については、図５を参照して後述する。
【００３７】
一方、ユーザ操作に応じて特定する場合、例えばユーザ特定部１１は、ユーザにより操作入力／音声入力されたユーザ名、またはＩＤ番号等に基づいて特定してもよい。
【００３８】
また、ユーザ特定部１１は、特定したユーザを示す情報（特定結果）をフィルタ検出部１２に出力する。
【００３９】
フィルタ検出部１２は、ユーザ特定部１１により特定されたユーザに対応する音声信号推定フィルタを、音声信号推定フィルタＤＢ１３から検出する。なお、フィルタ検出部１２は、録音再生装置１Ａに含まれる音声信号推定フィルタＤＢ１３に限定されず、ネットワーク上の所定のサーバから音声信号推定フィルタを検出してもよい。なお、音声信号推定フィルタの詳細については、後述の「２−１−２．音声信号推定フィルタ」において詳細に説明する。
【００４０】
そして、フィルタ検出部１２は、検出した推定フィルタを推定部１４Ａに出力する。
【００４１】
推定部１４Ａは、マイク２で集音された音声信号に基づき、フィルタ検出部１２により検出された推定フィルタを用いて、特定ユーザが普段直接聴取している音声信号（普段声）を推定する処理を行う。より具体的には、推定部１４Ａは、マイク２で集音された音声信号のうち、特定ユーザの音声信号（空気伝導による音声信号；録音声）を音源分離し、推定フィルタを用いて推定処理を行う。また、録音再生装置１Ａに複数のマイク２が設けられている場合、所定の一のマイク２で集音された音声信号に対して、推定フィルタを用いて推定処理を行ってもよい。
【００４２】
そして、推定部１４Ａは、推定した音声信号を記憶制御部１６Ａに出力する。
【００４３】
記憶制御部１６Ａは、推定部１４Ａにより推定された音声信号（普段声）を、音声信号ＤＢ１７に記憶させる。なお、記憶制御部１６Ａは、ユーザ操作に応じて、マイク２により集音された音声信号（録音声）を、音声信号ＤＢ１７に直接記憶させてもよい。
【００４４】
再生制御部１８Ａは、音声信号ＤＢ１７に記憶されている音声信号を読み出し、スピーカ３で再生させるよう制御する。
【００４５】
（音声信号推定フィルタＤＢ１３）
音声信号推定フィルタＤＢ１３は、各ユーザに対応した音声信号推定フィルタを記憶する記憶部（記憶媒体）である。音声信号推定フィルタＤＢ１３は、例えばＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）により実現される。もちろん記憶媒体としては、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなど各種考えられ、音声信号推定フィルタＤＢ１３としては採用する記憶媒体に応じて記憶再生が実行され得る構成とされればよい。
【００４６】
（音声信号ＤＢ１７）
音声信号ＤＢ１７は、記憶制御部１６Ａによる制御に従って、推定部１４Ａにより推定された特定ユーザの音声信号を記憶する記憶部（記憶媒体）である。また、音声信号ＤＢ１７は、マイク２により集音された音声信号を記憶してもよい。音声信号ＤＢ１７は、例えばＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）により実現される。
【００４７】
（スピーカ３）
スピーカ３は、音声信号を出力（再生）する出力部（再生部）であって、アンプ回路を有していてもよい。本実施形態によるスピーカ３は、再生制御部１８Ａによる制御に従って、音声信号ＤＢ１７に記憶された音声信号を再生する。
【００４８】
（操作入力部４）
操作入力部４は、ユーザ操作を検出し、主制御部１０Ａに出力する機能を有する。操作入力部４は、上述したように、録音再生装置１の筐体前面や側面に設けられた物理的な各種ボタンにより実現される。また、操作入力部４は、マイク２により集音された音声に対して音声認識を行い、ユーザによる音声入力を検出してもよい。
【００４９】
（表示部５）
表示部５は、主制御部１０Ａによる制御に従って、メニュー画面やフォルダ画面、再生画面、録音画面等の各種画面を表示する。表示部５は、液晶パネル、有機ＥＬパネル、またはＬＥＤディスプレイパネル等により実現される。
【００５０】
以上、本実施形態による録音再生装置１Ａの主要構成について説明した。続いて、上述した音声信号推定フィルタについて、図３〜図４を用いて具体的に説明する。
【００５１】
［２−１−２．音声信号推定フィルタ］
図３は、自分声と録音声との違いについて説明するための図である。本明細書では、ユーザＵ０本人が普段直接聴取している自分自身の音声信号（普段声）を「Ｏｕｓｕａｌ０」とし、マイク２で集音（録音）されるユーザＵ０の音声信号（録音声）を「Ｏ’ｒｅｃ０／Ｏｒｅｃ０」とする。
【００５２】
また、図３に示すように、ユーザＵ０による音声発話時の発話音源を「Ｓ」と表現し、この発話音源Ｓからの音声信号がユーザＵ０本人の耳（聴覚器官）に到達するまでの伝達関数は、下記式１に示すように、気導系のＨａｃ０と骨導系のＨｂｃ０の２経路の合成となる。なお、式１において、ac；air conduction、bc；bone conductionとする。
【００５３】
【数１】
2014112206.tif 000003
【００５４】
次に、発話音源Ｓからの音声信号がマイク２に到達するまでの伝達関数は、図３に示すＨｔｘ０が空間的な伝達関数の補間成分を表すものとすると、下記式２となる。
【００５５】
【数２】
2014112206.tif 000004
【００５６】
ここで、図３に示す例では、マイク２がユーザＵ０の耳より遠い位置に配置されている場合を想定し、簡単のため、Ｈｔｘ０をＨａｃ０に追加して示しているが、あくまでＨｔｘ０はＨａｃ０に対しての補間成分であるので、必ずしも空間を表す伝達関数とは一致しない。例えば、マイク２が耳より近い位置に配置されている場合は、空間の伝達関数の逆成分も加味されるが、いずれにしろ式２に示すように、Ｈｔｘ０とＨａｃ０を用いて表すことが可能である。
【００５７】
しかし、本実施形態では、人によって異なる声の音色（または特性、周波数）に注目しており、時間・位相的な成分については言及していない。したがって、最小位相システムを考慮すれば、上記Ｈｔｘ０は、よほど残響を多く含む場合等、特殊な空間でない限り考慮の必要がないとも言える。そこで、Ｈｔｘ０を考慮しない場合について、発話音源Ｓからの音声信号がマイク２に到達するまでの伝達関数を、Ｏｒｅｃ０として下記式３で表す。
【００５８】
【数３】
2014112206.tif 000005
【００５９】
上述したように、第１の実施形態による推定部１４Ａで用いられる音声信号推定フィルタは、マイク２で集音された音声信号（録音声）に基づき、特定ユーザが普段直接聴取している音声信号（普段声）と等価の、または近づけた音声信号を推定するためのものである。したがって、当該音声信号推定フィルタを用いて推定部１４Ａで行われる推定処理は、式１および式３に基づいて、下記式４のように表すことができる。
【００６０】
【数４】
2014112206.tif 000006
【００６１】
上述したＨａｃ０、Ｈｂｃ０の値は、ユーザＵ０に選択された声帯モデルまたはユーザＵ０の実測データに基づいて求められてもよい。また、Ｈａｃ０、Ｈｂｃ０が既知でなくとも、式４に示すように、Ｈａｃ０とＨｂｃ０の比率（差分）が既知であれば、当該比率を用いて、推定部１４Ａは、録音声（Ｏｒｅｃ０）から普段声（Ｏｕｓｕａｌ０）を推定することも可能である。
【００６２】
以上、特定ユーザＵ０の場合について説明したが、他のユーザＵ１、Ｕ２・・・についても推定部１４Ａは、所定の音声信号フィルタを用いて推定することが可能である。通常、各人によって頭蓋骨の形状や骨密度、顔の構成、また口の放射特性が違うので、本実施形態によるＨａｃやＨｂｃは各人によって特性が異なるのは明らかである。
【００６３】
したがって、音声信号推定フィルタＤＢ１３には、例えば「Ｈａｃ０、Ｈｂｃ０」、「Ｈａｃ１、Ｈｂｃ１」、「Ｈａｃ２、Ｈｂｃ２」といったように多数個の伝達関数がプリセットされることが想定される。フィルタ検出部１２は、音声信号推定フィルタＤＢ１３から、ユーザ特定部１１により特定されたユーザに対応する伝達関数を音声信号推定フィルタとして検出する。具体的には、フィルタ検出部１２は、特定されたユーザの顔の形状に基づいて伝達関数を検出してもよいし、予めユーザに紐付けられた伝達関数（実際にユーザ毎に測定して算出された伝達関数）を検出してもよい。
【００６４】
そして、推定部１４Ａは、マイク２で集音した音声信号に基づいて、各ユーザに対応した普段声を、下記式５に示すように推定することができる。
【００６５】
【数５】
2014112206.tif 000007
【００６６】
さらに、本実施形態による推定部１４Ａは、マイク２で集音された空気伝導による音声信号が複数話者の音声信号である場合、この中から特定ユーザの音声信号（録音声）を分離し、これに基づいて特定ユーザが普段直接聴取している音声信号（普段声）を推定する。そして、推定された音声信号は他の音声信号に再合成されて音声信号ＤＢ１７に記憶される。以下、複数話者の音声信号に基づく推定処理について図４を参照して具体的に説明する。
【００６７】
図４は、一のマイク２が複数話者の音声信号を集音する場合について説明するための図である。図４に示すように、ユーザＵ０、Ｕ１、Ｕ２が会議等で発話している場合、録音再生装置１Ａのマイク２は、各発話音源Ｓ０、Ｓ１、Ｓ２から空気伝導した音声信号の合成音を集音する。ここで、マイク２が集音する音声信号を、下記式６で示す。なお、下記式６のうち、Ｏｒｅｃ０はユーザＵ０の録音声、Ｏｒｅｃ１はユーザＵ１の録音声、Ｏｒｅｃ２はユーザＵ２の録音声である。
【００６８】
【数６】
2014112206.tif 000008
【００６９】
この場合、例えばユーザＵ０がユーザ特定部１１により特定された場合、フィルタ検出部１２は、ユーザＵ０に対応する音声信号推定フィルタ（例えばＨａｃ０、Ｈｂｃ０）を音声信号推定フィルタＤＢ１３から検出し、推定部１４Ａに出力する。そして、推定部１４Ａは、マイク２が集音した音声信号のうち、ユーザＵ０の音声信号（録音声；Ｏｒｅｃ０）に基づき、ユーザＵ０本人が普段直接聴取している音声信号（普段声；Ｏｕｓｕａｌ０）を推定し、他の音声信号に再合成する。これにより、ユーザＵ０にとって理想的な、違和感が無い音声信号を生成することができる。このようなユーザＵ０にとって理想的な、違和感が無い音声信号は、下記式７で表すことができる。なお、下記式７では、一例としてユーザＵ０にとって理想的な音声信号を生成しているが、推定部１４Ａは、同様に、ユーザＵ１やユーザＵ２にとって理想的な音声信号を生成することも可能である。具体的には、推定部１４Ａは、集音されたユーザＵ１の音声信号（録音声；Ｏｒｅｃ１）に基づき、ユーザＵ１本人が普段直接聴取している音声信号（普段声；Ｏｕｓｕａｌ１）を推定し、他の音声信号に再合成して、ユーザＵ１にとって理想的な音声信号を生成できる。また、推定部１４Ａは、集音されたユーザＵ２の音声信号（録音声；Ｏｒｅｃ２）に基づき、ユーザＵ２本人が普段直接聴取している音声信号（普段声；Ｏｕｓｕａｌ２）を推定し、他の音声信号に再合成して、ユーザＵ２にとって理想的な音声信号を生成できる。
【００７０】
【数７】
2014112206.tif 000009
【００７１】
以上、複数話者の音声信号を一のマイク２で集音した場合における、任意の特定ユーザにとって理想的な、違和感が無い音声信号の推定処理について説明した。なお、上述した例では、推定部１４Ａは、マイク２（例えば指向性無し）で集音した音声信号を音源分離し、特定ユーザの音声信号を識別する必要があった。しかしながら、録音再生装置１Ａに複数のマイク２（例えば指向性有り）が設けられている場合は、推定部１４Ａは、所定のマイク２から集音される音声信号を特定ユーザの音声信号として認識することができる。以下、図５を参照して具体的に説明する。
【００７２】
（マイクと特定ユーザの紐付け）
図５は、第１の実施形態の変形例による録音再生装置１Ａ’が複数の指向性マイク２ａ〜２ｄを有する場合におけるユーザ特定について説明するための図である。図５に示すように、例えば録音再生装置１Ａ’の筐体の四隅に指向性を有するマイク２ａ〜２ｄが内蔵されている場合、ユーザ特定部１１は、例えば録音再生装置１Ａ’の下端側に設けられたマイク２ａ、２ｂから集音した音声信号を特定ユーザの音声信号として認識する。
【００７３】
すなわち、ユーザＵ０が、ユーザＵ１との対話を録音する場合、図５に示すように、録音再生装置１Ａ’の上端を相手ユーザＵ１側、録音再生装置１Ａ’の下端をユーザＵ０本人側に向けて置くことが想定される。また、録音再生装置１Ａ’の下端側に設けられたマイク２ａ、２ｂによりユーザＵ０の音声信号が集音され録音された後、ユーザＵ０が録音内容を再生して聴くことが想定される。この場合、録音再生装置１Ａ’において、ユーザＵ０の音声信号が推定処理されて記憶されていることが望ましい。したがって、録音再生装置１Ａ’のユーザ特定部１１は、後に録音再生して聞く可能性が高いユーザが位置する方向に設けられているマイク２ａ、２ｂで集音された音声信号を、特定ユーザの音声信号として認識する。
【００７４】
この場合、ユーザ特定部１１は、マイク２ａ、２ｂで集音された音声信号に基づいて話者認識を行い、ユーザＵ０を特定し、フィルタ検出部１２は、特定されたユーザＵ０に対応する音声信号推定フィルタを音声信号推定フィルタＤＢ１３から検出する。
【００７５】
以上、本実施形態による音声信号推定フィルタについて詳細に説明した。なお、上述した伝達関数を用いた推定処理は、本開示による推定処理の一例であって、これに限定されることはない。
【００７６】
［２−１−３．動作処理］
次に、第１の実施形態による録音再生装置１Ａの動作処理について図６を参照して説明する。
【００７７】
図６は、第１の実施形態による録音制御処理を示すフローチャートである。図６に示すように、まず、ステップＳ１０３において、録音再生装置１Ａは、ユーザ操作に応じて、録音（音声信号記憶）モードに設定される。
【００７８】
次に、ステップＳ１０６において、ユーザ操作に応じて録音スタイルが設定される。録音スタイルには、通常録音と、本実施形態による推定処理した音声信号（普段声）の録音がある。
【００７９】
次いで、推定処理した音声信号の録音が設定された場合（Ｓ１０９／Ｙｅｓ）、ステップＳ１１２において、録音再生装置１Ａのユーザ特定部１１は、推定対象のユーザを特定する。
【００８０】
次に、ステップＳ１１５において、フィルタ検出部１２は、特定ユーザに対応する音声信号推定フィルタを音声信号推定フィルタＤＢ１３から検出する。
【００８１】
次いで、ステップＳ１１６において、推定部１４Ａは、検出された音声信号推定フィルタを用いて、特定ユーザの音声信号に対して推定処理を行う。具体的には、推定部１４Ａは、マイク２で集音した空気伝導による特定ユーザの音声信号（録音声）に基づき、特定ユーザが普段直接聴取している、すなわち空気伝導と骨伝導による音声信号（普段声）を推定する。
【００８２】
そして、ステップＳ１１８において、記憶制御部１６Ａは、推定部１４Ａにより推定された音声信号を、音声信号ＤＢ１７に記憶させる。
【００８３】
一方、通常録音が設定された場合（Ｓ１０９／Ｎｏ）、ステップＳ１２１において、録音再生装置１Ａの記憶制御部１６Ａは、通常録音、すなわちマイク２で集音した空気伝導による音声信号を、音声信号ＤＢ１７に直接記憶させる。
【００８４】
以上、第１の実施形態による録音再生装置１Ａの構成および動作処理について詳細に説明した。本実施形態によれば、録音再生装置１Ａは、特定ユーザの音声信号に対して所定の推定処理を行い、推定した音声信号を録音することができる。
【００８５】
なお、本実施形態による録音再生装置１Ａの動作処理は、図６に示す例に限定されない。例えば、録音再生装置１Ａは、図６に示すＳ１１２〜Ｓ１１８を繰り返し行い、特定ユーザの切り替えに応じて、逐次検出される特定ユーザに対応する音声信号推定フィルタに従って、推定処理を行ってもよい。
【００８６】
＜２−２．第２の実施形態＞
続いて、第２の実施形態について説明する。第２の実施形態では、録音再生装置１Ｂを用いて、再生時に特定ユーザの音声信号に対して所定の推定処理を行う場合について具体的に説明する。
【００８７】
［２−２−１．構成］
図７は、第２の実施形態による録音再生装置１Ｂの主要構成を示すブロック図である。図７に示すように、録音再生装置１Ｂは、マイク２、スピーカ３、操作入力部４、表示部５、主制御部１０Ｂ、Ａ／Ｄ変換部１５、音声信号推定フィルタＤＢ１３、および音声信号ＤＢ１７を有する。
【００８８】
マイク２、スピーカ３、操作入力部４、表示部５、Ａ／Ｄ変換部１５、音声信号推定フィルタＤＢ１３、および音声信号ＤＢ１７の各機能は、図２を参照して説明した第１の実施形態による録音再生装置１Ａが有する同ブロックと同様であるので、ここでの説明は省略する。なお、音声信号ＤＢ１７には、後述するように、マイク２で集音された空気伝導による音声信号が記憶されている。
【００８９】
主制御部１０Ｂは、例えばＣＰＵ、ＲＯＭ、ＲＡＭにより構成され、録音再生装置１Ｂの各構成を制御する。本実施形態による主制御部１０Ｂは、図７に示すように、ユーザ特定部１１、フィルタ検出部１２、推定部１４Ｂ、記憶制御部１６Ｂ、および再生制御部１８Ｂとして機能する。
【００９０】
（記憶制御部１６Ｂ）
本実施形態による記憶制御部１６Ｂは、マイク２で集音された空気伝導による音声信号を、音声信号ＤＢ１７に直接記憶させる。
【００９１】
（ユーザ特定部１１）
ユーザ特定部１１は、図２を参照して説明した第１の実施形態による録音再生装置１Ａの主制御部１０Ａが有する同ブロックと同様で、自動的に、またはユーザ操作に応じて推定処理対象のユーザを特定する。
【００９２】
（フィルタ検出部１２）
フィルタ検出部１２は、図２を参照して説明した第１の実施形態による録音再生装置１Ａの主制御部１０Ａが有する同ブロックと同様で、ユーザ特定部１１により特定されたユーザに対応する音声信号推定フィルタを、音声信号推定フィルタＤＢ１３から検出する。
【００９３】
（推定部１４Ｂ）
推定部１４Ｂは、音声信号ＤＢ１７から読み出した音声信号（入力された音声信号）に基づき、フィルタ検出部１２により検出された推定フィルタを用いて、特定ユーザが普段直接聴取している音声信号（普段声）を推定する処理を行う。なお、推定部１４Ｂによる推定処理は、音声信号推定フィルタを用いて、空気伝導による音声信号（録音声）に基づき、特定ユーザが普段直接聴取している音声信号（普段声）を推定する処理であるので、上述した式１〜式７を同様に適用することが可能である。
【００９４】
また、推定部１４Ｂは、入力された音声信号のうち、特定ユーザの音声信号（空気伝導による音声信号；録音声）を、他ユーザの音声信号や雑音、環境音から音源分離し、推定フィルタを用いて推定処理を行うことも可能である。以下、本実施形態による推定部１４Ｂについて、図８を参照して具体的に説明する。
【００９５】
図８は、第２の実施形態による推定部１４Ｂの機能構成を示すブロック図である。図８に示すように、推定部１４Ｂは、音源分離処理部１４１、特定ユーザの音声判定（認識）処理部１４３、推定処理部１４５、および合成部１４７として機能する。
【００９６】
音源分離処理部１４１は、録音コンテンツ、すなわち音声信号ＤＢ１７から読み出した音声信号に対して、音源分離処理を行う。音源分離処理部１４１は、例えばＩＣＡ（独立成分分析）ＰＣＡ（主成分分析）、およびＳＶＤ（特異値分解）等の少なくともいずれかを用いた音源分離を行ってもよい。
【００９７】
特定ユーザの音声判定処理部１４３は、音源分離処理部１４１により音源分離された各音声信号のうち、ユーザ特定部１１により特定されたユーザの音声信号を判定（識別、認識）する。音声判定処理部１４３は、例えば各音声信号の話者認識を行い、特定ユーザの音声信号を判定してもよいし、各音声信号に対してエフェクター調整したものを各々再生し、特定ユーザの音声信号をユーザに選ばせてもよい。
【００９８】
推定処理部１４５は、特定ユーザの音声信号であると判定された音声信号（図８に示すＯｒｅｃ）に基づき、特定ユーザ本人が普段直接聴取している音声信号（図８に示すＯｕｓｕａｌ）を推定する処理を行う。具体的には、上述したように、フィルタ検出部１２により検出された特定ユーザに対応する音声信号推定フィルタを用いて行われる。
【００９９】
合成部１４７は、推定処理部１４５により推定処理された特定ユーザの音声信号を、音源分離した他の音声信号に合成させる処理を行う。そして、合成された音声信号は、推定処理済みの音声信号として、再生制御部１８Ｂに出力される。
【０１００】
（再生制御部１８Ｂ）
再生制御部１８Ｂは、推定部１４Ｂにより推定処理された音声信号を、スピーカ３で再生させるよう制御する。
【０１０１】
以上、本実施形態による音声信号推定フィルタについて詳細に説明した。続いて、本実施形態による録音再生装置１Ｂの動作処理について図９を参照して説明する。
【０１０２】
［２−２−２．動作処理］
図９は、第２の実施形態による録音制御処理を示すフローチャートである。図９に示すように、まず、ステップＳ１２３において、録音再生装置１Ｂは、ユーザ操作に応じて、音声再生（音声信号出力）モードに設定される。
【０１０３】
次に、ステップＳ１２６において、ユーザ操作に応じて再生スタイルが設定される。再生スタイルには、通常再生と、本実施形態による推定処理した音声信号（普段声）の再生がある。
【０１０４】
次いで、推定処理した音声信号の再生が設定された場合（Ｓ１２９／Ｙｅｓ）、ステップＳ１３２において、録音再生装置１Ｂのユーザ特定部１１は、推定対象のユーザを特定する。
【０１０５】
ここで、ユーザの特定を手動で行う場合（Ｓ１３５／Ｎｏ）、ステップＳ１３８において、ユーザ特定部１１は、操作入力部４から入力されるユーザ操作に応じて、ユーザの特定を行う。具体的には、例えばユーザ特定部１１は、入力されたユーザの氏名やＩＤ番号に基づいてユーザを特定する。
【０１０６】
一方、ユーザの特定を自動で行う場合（Ｓ１３５／Ｙｅｓ）、ステップＳ１３９において、ユーザ特定部１１は、例えば予め登録されたユーザを特定したり、音声信号を解析して発話音源が最も近い位置の音声信号の話者を特定したりしてもよい。
【０１０７】
次いで、ステップＳ１４０において、フィルタ検出部１２は、ユーザ特定部１１により特定された特定ユーザに対応する音声信号推定フィルタを、音声信号推定フィルタＤＢ１３から検出する。
【０１０８】
続いて、ステップＳ１４２において、推定部１４Ｂは、検出された音声信号推定フィルタを用いて、特定ユーザの音声信号に対して推定処理を行う。具体的には、推定部１４Ｂは、音声信号ＤＢ１７から読み出した空気伝導による特定ユーザの音声信号（録音声）に基づき、特定ユーザが普段直接聴取している、すなわち空気伝導と骨伝導による音声信号（普段声）を推定する。
【０１０９】
そして、ステップＳ１４４において、再生制御部１８Ｂは、推定部１４Ｂにより推定された音声信号を、スピーカ３で再生させる。
【０１１０】
一方、通常再生が設定された場合（Ｓ１２９／Ｎｏ）、ステップＳ１４７において、録音再生装置１Ｂの再生制御部１８Ｂは、通常再生、すなわち音声信号ＤＢ１７から読み出した空気伝導による音声信号を、スピーカ３で直接再生させる。
【０１１１】
以上、第２の実施形態による録音再生装置１Ｂの構成および動作処理について詳細に説明した。本実施形態によれば、録音再生装置１Ｂは、特定ユーザの音声信号に対して所定の推定処理を行い、推定した音声信号を再生することができる。
【０１１２】
なお、本実施形態による録音再生装置１Ｂの動作処理は、図９に示す例に限定されない。例えば、録音再生装置１Ｂは、図９に示すＳ１３２〜Ｓ１４４を繰り返し行い、特定ユーザの切り替えに応じて、逐次検出される特定ユーザに対応する音声信号推定フィルタに従って、推定処理を行ってもよい。
【０１１３】
また、本実施形態による録音再生装置１Ｂは、音声の録音（記録）・再生が可能なＩＣレコーダーに限定されず、音声信号と共に映像信号の記録・再生も可能なスマートフォン、タブレット端末等の装置であってもよい。録音再生装置１Ｂが、例えばスマートフォンの場合（以下、スマートフォン１Ｂ’と称す）、スマートフォン１Ｂ’のユーザ特定部（不図示）によるユーザの特定は、以下図１０を参照して説明するように行うこともできる。
【０１１４】
図１０は、第２の実施形態の変形例によるスマートフォン１Ｂ’におけるユーザ特定について説明するための図である。図１０に示すように、第２の実施形態による録音再生装置がスマートフォン１Ｂ’である場合、表示部５には、例えば会議を撮影した際の映像信号が再生され、併せてスピーカ３からは会議の音声信号が再生される。ここで、表示部５は、操作入力部４の機能を兼ねたタッチパネルディスプレイとする。
【０１１５】
この場合、スマートフォン１Ｂ’のユーザ特定部は、表示部５に映るユーザＵ０〜Ｕ２のうち、指３０でタッチされたユーザＵ０を、特定ユーザとしてもよい。そして、スマートフォン１Ｂ’の推定部１４Ｂは、ユーザＵ０の音声信号に対して推定処理を行う。ユーザＵ０の音声信号であるか否かは、話者認識の他、表示部５に映るユーザＵ０の口が動いている時に流れている音声信号を、ユーザＵ０の音声信号として判定（認識）されてもよい。
【０１１６】
また、スマートフォン１Ｂ’のユーザ特定部は、表示部５に映るユーザＵ０〜Ｕ２のうち、口が動いている（話している）人物を、特定ユーザとしてもよい。そして、スマートフォン１Ｂ’の推定部は、検出された特定ユーザに対応する音声信号推定フィルタに従って、推定処理を行う。
【０１１７】
また、スマートフォン１Ｂ’は、口が動いている人物が変わる度に特定ユーザを切り替え、特定ユーザの切り替えに応じて、逐次検出される特定ユーザに対応する音声信号推定フィルタに従って、推定処理を行ってもよい。
【０１１８】
＜２−３．補足＞
上述した第２の実施形態では、音声信号ＤＢ１７に記憶されている音声信号を推定処理しているが、音声信号ＤＢ１７に記憶されている音声信号は、必ずしも空気伝導による音声信号であるとは限られない。すなわち、第１の実施形態による録音再生装置１Ａと、第２の実施形態による録音再生装置１Ｂとの構成を兼ねた録音再生装置も当然に本開示の範囲内であるので、音声信号ＤＢ１７に記憶されている音声信号が、既に推定処理された音声信号である場合も想定される。
【０１１９】
そこで、本実施形態による録音再生装置１は、再生時において推定部１４により推定処理する前に、音声信号ＤＢ１７から読み出した音声信号が、既に推定処理された音声信号であるか否かを判断した上で、推定処理を行ってもよい。以下、図１１Ａおよび図１１Ｂを参照して具体的に説明する。
【０１２０】
図１１Ａおよび図１１Ｂは、音声信号ＤＢ１７から読み出した音声信号が、既に推定処理された音声信号であるか否かを判断する動作処理を示すフローチャートである。
【０１２１】
図１１ＡのステップＳ１２３、Ｓ１２６、Ｓ１２９、Ｓ１３２、Ｓ１３５、Ｓ１３８、Ｓ１３９は、図９を参照して説明した同ステップと同様の処理を行うので、ここでの説明は省略する。
【０１２２】
図１１ＡのステップＳ１４１において、録音再生装置１の推定部１４は、音声信号ＤＢ１７から読み出された音声信号に含まれる特定ユーザの音声信号が、既に推定処理された音声信号であるか否かを判断する。例えば推定部１４は、音声信号ＤＢ１７から読み出された音声信号に付加されている属性情報に基づいて、推定処理済みであるか否かを判断してもよい。
【０１２３】
次に、推定処理された音声信号ではないと判断された場合（Ｓ１４１／Ｎｏ）、ステップＳ１４０、Ｓ１４２、およびステップＳ１４４において、図９の同ステップと同様に、録音再生装置１は、特定ユーザの音声信号を推定処理した音声信号（普段声）をスピーカ３から再生させる。
【０１２４】
一方、既に推定処理された音声信号であると判断された場合（Ｓ１４１／Ｙｅｓ）、ステップＳ１４３において、録音再生装置１は、特に推定処理を行わず、音声信号ＤＢ１７から読み出した音声信号を、スピーカ３で直接再生させる。
【０１２５】
また、図１１ＡのステップＳ１２９において、通常再生が設定された場合、すなわち推定処理せずに空気伝導による音声信号をそのまま再生させる設定の場合（Ｓ１２９／Ｎｏ）、図１１ＢのステップＳ１４５に示す処理が行われる。ステップＳ１４５では、録音再生装置１の推定部１４が、音声信号ＤＢ１７から読み出された音声信号に含まれる特定ユーザの音声信号が、既に推定処理された音声信号であるか否かを判断する。
【０１２６】
推定処理された音声信号ではないと判断された場合（Ｓ１４５／Ｎｏ）、ステップＳ１４７において、図９の同ステップと同様に、録音再生装置１は、音声信号ＤＢ１７から読み出した空気伝導による音声信号を、スピーカ３で直接再生させる。
【０１２７】
一方、既に推定処理された音声信号であった場合（Ｓ１４５／Ｙｅｓ）、ステップＳ１４６において、録音再生装置１は、推定処理された音声信号を推定前に戻して再生する。より詳しくは、録音再生装置１の推定部１４が、推定処理された音声信号（普段声）に基づき、空気伝導による音声信号（録音声）を推定する処理を行う。
【０１２８】
特定ユーザＵ０の普段声（Ｏｕｓｕａｌ０）に基づいて、特定ユーザＵ０の録音声（Ｏｒｅｃ０）を推定する方法としては、例えば図３を参照して説明した上記式１および式３に基づいて、下記式８のように表すことができる。
【０１２９】
【数８】
2014112206.tif 000010
【０１３０】
また、他のユーザＵ１、Ｕ２・・・の録音声（Ｏｒｅｃ１、Ｏｒｅｃ２・・・）についても、推定部１４Ａは、上記式８と同様に推定処理を行うことができる。より具体的には、下記式９に示す通りである。
【０１３１】
【数９】
2014112206.tif 000011
【０１３２】
以上説明したように、本開示による録音再生装置１は、音声信号ＤＢ１７に記憶された音声信号が、空気伝導による音声信号（録音声）または既に推定処理された音声信号（普段声）のいずれであっても、所定の音声信号（録音声／普段声）に適切に変換して再生できる。
【０１３３】
＜＜３．まとめ＞＞
上述したように、本実施形態による録音再生制御システムでは、録音時／再生時に、空気伝導による特定ユーザの音声信号に基づき、特定ユーザが普段直接聴取している音声信号を推定することで、録音再生した自分の音声を聴取した際の違和感を解消することができる。
【０１３４】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１３５】
例えば、再生制御装置１に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、上述した再生制御装置１の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
【０１３６】
なお、本技術は以下のような構成も取ることができる。
（１）
特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、
を備える、記憶制御装置。
（２）
前記記憶制御装置は、ユーザを特定するユーザ特定部をさらに備え、
前記フィルタ検出部は、前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを選択的に検出し、
前記推定部は、前記フィルタ検出部により検出された音声信号推定フィルタに従って、前記特定されたユーザの周辺に配される空気伝導集音部により集音された、当該特定されたユーザの音声に対応する第２の音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する、前記（１）に記載の記憶制御装置。
（３）
前記推定部は、前記ユーザ特定部により特定されるユーザの切り替えに応じて、逐次前記フィルタ検出部により検出される特定ユーザに対応する音声信号推定フィルタに従って、切り替えられた特定ユーザの音声に対応する音声信号に基づき、第１の音声信号を推定する、前記（２）に記載の記憶制御装置。
（４）
前記特定されたユーザ本人が聴取する第１の音声信号は、骨伝導および空気伝導によりユーザに聴取される音声信号である、前記（１）〜（３）のいずれか１項に記載の記憶制御装置。
（５）
前記記憶制御装置は、各ユーザに対応した音声信号推定フィルタを記憶する記憶部をさらに備える、前記（１）〜（４）のいずれか１項に記載の記憶制御装置。
（６）
ユーザを特定するユーザ特定部と、
前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出された音声信号推定フィルタに従って、入力された音声信号のうち、前記特定されたユーザの音声に対応する音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、再生部により再生させる再生制御部と、
を備える、再生制御装置。
（７）
前記推定部は、前記ユーザ特定部により特定されるユーザの切り替えに応じて、逐次前記フィルタ検出部により検出される特定ユーザに対応する音声信号推定フィルタに従って、切り替えられた前記特定ユーザの音声に対応する音声信号に基づき、第１の音声信号を推定する、前記（６）に記載の再生制御装置。
（８）
前記推定部は、入力された音声信号のうち、空気伝導集音部により集音された特定ユーザの音声に対応する第２の音声信号に基づき、前記特定ユーザ本人が聴取する第１の音声信号を推定する、前記（６）または（７）に記載の再生制御装置。
（９）
前記推定部は、前記特定されたユーザの音声に対応する音声信号が、既に前記音声信号推定フィルタにより推定されている第１の音声信号であることを検出すると、推定処理は行わない、前記（６）または（７）に記載の再生制御装置。
（１０）
前記再生制御装置は、各ユーザに対応した音声信号推定フィルタを記憶する記憶部をさらに備える、前記（６）〜（９）のいずれか１項に記載の再生制御装置。
（１１）
コンピュータを、
特定のユーザ本人が聴取する第１の音声信号を推定するための音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出した音声信号推定フィルタに従って、空気伝導集音部により集音した特定のユーザの第２の音声信号を含む音声信号に基づいて、前記特定のユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、記憶部に記憶させる記憶制御部と、
として機能させるためのプログラムが記録された記録媒体。
（１２）
コンピュータを、
ユーザを特定するユーザ特定部と、
前記ユーザ特定部により特定されたユーザに対応する音声信号推定フィルタを検出するフィルタ検出部と、
前記フィルタ検出部により検出された音声信号推定フィルタに従って、入力された音声信号のうち、前記特定されたユーザの音声に対応する音声信号に基づき、当該特定されたユーザ本人が聴取する第１の音声信号を推定する推定部と、
前記推定部により推定された第１の音声信号を、再生部により再生させる再生制御部と、
として機能させるためのプログラムが記録された記録媒体。
【符号の説明】
【０１３７】
１、１Ａ、１Ａ’、１Ｂ    録音再生装置
１Ｂ’    スマートフォン（録音再生装置）
２    マイク
３    スピーカ
４    操作入力部
５    表示部
１０Ａ    主制御部
１０Ｂ    主制御部
１１    ユーザ特定部
１２    フィルタ検出部
１３    音声信号推定フィルタＤＢ
１４Ａ    推定部
１４Ｂ    推定部
１４１    音源分離処理部
１４３    音声判定処理部
１４５    推定処理部
１４７    合成部
１５    Ａ／Ｄ変換部
１６Ａ    記憶制御部
１６Ｂ    記憶制御部
１７    音声信号ＤＢ
１８Ａ    再生制御部
１８Ｂ    再生制御部
Ｕ０〜Ｕ２    ユーザ
【図１】
2014112206.tif 000012
【図２】
2014112206.tif 000013
【図３】
2014112206.tif 000014
【図４】
2014112206.tif 000015
【図５】
2014112206.tif 000016
【図６】
2014112206.tif 000017
【図７】
2014112206.tif 000018
【図８】
2014112206.tif 000019
【図９】
2014112206.tif 000020
【図１０】
2014112206.tif 000021
【図１１Ａ】
2014112206.tif 000022
【図１１Ｂ】
2014112206.tif 000023
【国際調査報告】
2014112206.tif 000024
2014112206.tif 000025
2014112206.tif 000026
2014112206.tif 000027