(57)【要約】【課題】通話の円滑化を支援すること。【解決手段】通話装置は、通話中において、当該通話装置の利用者による特定の言葉の発声を検知する検知部と、通話相手の音声について周波数特性を抽出する抽出部と、前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する変更部とを有する。【選択図】図２
2015002386.tif 000002
【特許請求の範囲】
【請求項１】
通話装置であって、
通話中において、当該通話装置の利用者による特定の言葉の発声を検知する検知部と、
通話相手の音声について周波数特性を抽出する抽出部と、
前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する変更部とを有する通話装置。
【請求項２】
前記変更部は、前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する請求項１記載の通話装置。
【請求項３】
前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の周波数特性の複数の変更パターンの中から、一つの変更パターンを選択する選択部を有し、
前記変更部は、選択部によって選択された変更パターンに基づいて、前記通話相手の音声の周波数特性を変更する請求項１又は２記載の通話装置。
【請求項４】
前記通話相手の電話番号に対応付けて、前記選択部によって選択された前記変更パターンを記憶する記憶部を有し、
前記変更部は、前記記憶部に記憶された電話番号に係る発信又は着信に応じた通話において、当該電話番号に対応付けられて記憶されている前記変更パターンに基づいて、通話相手の音声の周波数特性を変更する請求項３記載の通話装置。
【請求項５】
通話装置が、
通話中において、当該通話装置の利用者による特定の言葉の発声を検知し、
通話相手の音声について周波数特性を抽出し、
前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する、
処理を実行する音声変更方法。
【請求項６】
通話装置に、
通話中において、当該通話装置の利用者による特定の言葉の発声を検知し、
通話相手の音声について周波数特性を抽出し、
前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する、
処理を実行させる音声変更プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通話装置、音声変更方法、及び音声変更プログラムに関する。
【背景技術】
【０００２】
通話中において、相手の言葉が聞き取れない場合が有る。聞き取れない主な原因としては、相手の声が小さかったり、相手の話す速度が速かったりすることが挙げられる。この場合、ユーザは、例えば、自らの電話機の出力音量を上げたり、大きい声での発声、又はゆっくり話すことを相手に要請したりすることで対処する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１０−３２６１７６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、声の大小や話す速度に拘わらず、相手の言葉が聞き取りづらい場合がある。すなわち、人間の耳は、音の高さによって感度が異なる。したがって、同じ大きさの声であっても、声の高さによって、聞き取り易い声と聞きとりづらい声とがある。そして、どのような声が聞き取りづらいかについては、個人差が有る。例えば、高齢者は、高音を聞き取りづらいと言われている。
【０００５】
そこで、一側面では、通話の円滑化を支援することを目的とする。
【課題を解決するための手段】
【０００６】
一つの案では、通話装置は、通話中において、当該通話装置の利用者による特定の言葉の発声を検知する検知部と、通話相手の音声について周波数特性を抽出する抽出部と、前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する変更部とを有する。
【発明の効果】
【０００７】
一態様によれば、通話の円滑化を支援することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施の形態における携帯電話装置のハードウェア構成例を示す図である。
【図２】制御部の機能構成例を示す図である。
【図３】携帯電話装置の制御部が実行する処理手順の一例を説明するためのフローチャートである。
【図４】聞き返し言葉の発声前の音声データを説明するための図である。
【図５】補正データ記憶部の構成例を示す図である。
【図６】補正データの内容の一例を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面に基づいて本発明の実施の形態を説明する。図１は、本発明の実施の形態における携帯電話装置のハードウェア構成例を示す図である。図１において、携帯電話装置１０は、制御部１０１、音声信号処理部１０２、スピーカ１０３、マイクロホン１０４、無線部１０５、アンテナ１０６、入力操作部１０７、及び呼出部１０８等を有する。
【００１０】
制御部１０１は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、及びフラッシュメモリ等を含む。ＲＡＭは、プログラムの起動指示に応じて、ＲＯＭ又はフラッシュメモリ等よりプログラムを読み出して格納する。ＣＰＵは、ＲＡＭに格納されたプログラムに従って携帯電話装置１０に係る機能を実現する。例えば、制御部１０１は、通話に関する処理制御を各部に対して実行する。
【００１１】
音声信号処理部１０２はＤ／Ａ変換器、ＤＳＰ（Digital Signal Processor）、Ａ／Ｄ変換器、送信信号増幅器、及び受話信号増幅器等を含む。本実施の形態において、音声信号処理部１０２は、通話相手の音声の周波数特性を補正又は変更する処理を実行する。本実施の形態において、音声の周波数特性とは、音声の周波数成分の分布（周波数スペクトル）をいう。例えば、音声の周波数特性は、周波数を横軸とし、各周波数の成分の強さを縦軸とするグラフによって表現することができる。
【００１２】
スピーカ１０３は、通話相手の音声を出力する。マイクロホン１０４は、当該携帯電話装置１０の利用者（ユーザ）による音声を電気信号に変換する。
【００１３】
無線部１０５は、基地局との間で無線信号の送受信を行う。入力操作部１０７は、ユーザからの操作指示を受け付けるためのボタン又はタッチパネル等を含む。呼出部１０８は、着信を、点滅によって通知するＬＥＤ、音の出力によって通知するリンガ、振動によって通知するバイブレータ等を含む。
【００１４】
例えば、通話中において、当該携帯電話装置１０のユーザ（以下、「当方ユーザ」という。）による発話は、マイクロホン１０４によって入力され、電気信号に変換される。当該電気信号は、音声信号処理部１０２によって符号化され、最終的に変調信号として無線部１０５からアンテナ１０６を介して基地局に送信される。
【００１５】
通話相手（以下、「他方ユーザ」という。）による発話については、無線部１０５が、基地局からの変調信号をアンテナ１０６を介して受信する。当該変調信号は、音声信号処理部１０２によって復号され、スピーカ１０３から音声出力される。
【００１６】
図２は、制御部の機能構成例を示す図である。図２において、制御部１０１は、録音部１１、特定語検知部１２、音声解析部１３、及び補正データ選択部１４等を含む。これら各部は、制御部１０１を構成するＣＰＵにプログラムが実行させる処理により実現される。制御部１０１は、また、音声データ記憶部１５及び補正データ記憶部１６等を含む。音声データ記憶部１５は、制御部１０１を構成するＲＡＭ又はフラッシュメモリ等を用いて実現可能である。補正データ記憶部１６は、制御部１０１を構成するＲＯＭ又はフラッシュメモリ等を用いて実現可能である。
【００１７】
録音部１１は、通話における当方ユーザ及び他方ユーザのそれぞれの発話内容が記録された音声データを生成する。音声データの形式は、特定のものに限定されない。音声データ記憶部１５は、録音部１１によって生成された音声データを記憶する。なお、記憶される音声データは、通話開始時からの全ての通話内容ではなく、現時点から遡って所定期間に限定されてもよい。
【００１８】
特定語検知部１２は、音声データにおける当方ユーザの発話、又はマイクロホン１０４から入力される当方ユーザの発話を監視し、特定の言葉の発声を検知する。本実施の形態において、特定の言葉とは、他方ユーザの発話内容を聞き取れなかった場合に、当該発話内容を聞き返すため又は問い返すために発せられる言葉（以下、「聞き返し言葉」という。）をいう。聞き返し言葉の一例として、「えっ？」、「はい？」、「何？」、「もう一度言って下さい。」等が挙げられる。問い返し言葉の検知は、例えば、音声認識によって抽出される文字列データを、制御部１０１に記憶されている聞き返し言葉のリストと比較することにより行われてもよい。
【００１９】
音声解析部１３は、特定語検知部１２によって当方ユーザによる聞き返し言葉の発声が検知された場合、例えば、当該聞き返し言葉の直前における他方ユーザからの音声に対してスペクトル解析を行い、周波数特性を抽出する。
【００２０】
補正データ選択部１４は、音声解析部１３によって抽出された周波数特性に基づいて、補正データ記憶部１６に記憶されている複数の補正データの中から、他方ユーザの音声を補正又は変更するための補正データを選択する。補正データ選択部１４は、選択された補正データを、音声信号処理部１０２に設定する。音声信号処理部１０２は、設定された補正データに基づいて、他方ユーザの音声の周波数特性を補正又は変更する。
【００２１】
以下、携帯電話装置１０が実行する処理手順について説明する。図３は、携帯電話装置の制御部が実行する処理手順の一例を説明するためのフローチャートである。
【００２２】
発信又は着信後、通話が開始されると、通話中の間（Ｓ１０１でＹｅｓ）、録音部１１は、通話内容を録音する（Ｓ１０２）。具体的には、録音部１１は、通話における当方ユーザ及び他方ユーザのそれぞれの発話内容が記録された音声データを生成し、当該音声データを音声データ記憶部１５に記憶する。
【００２３】
特定語検知部１２は、録音中の間、逐次的に音声データを参照し、例えば、音声認識等を用いて、当方ユーザによる聞き返し言葉の発声の有無を判定する（Ｓ１０４）。例えば、特定検知部は、１秒間隔で、定期的に直前の１秒間における音声データ中の音声を処理対象とする。特定語検知部１２は、聞き返し言葉が発声されたことを検知すると（Ｓ１０４でＹｅｓ）、当該聞き返し言葉の発声開始時から遡って所定時間の音声データを音声データ記憶部１５より抽出する（Ｓ１０５）。
【００２４】
図４は、聞き返し言葉の発声前の音声データを説明するための図である。図４では、他方ユーザと当方ユーザとの間の会話が、記号化されて表現されている。図４において、右方向に時間が進んでいる。他方ユーザが「○×○×」と言ったところ、当方ユーザが「えっ？」と聞き返している。ステップＳ１０４では、この聞き返し言葉の発声が検知される。ステップＳ１０５は、当該聞き返し言葉の直前における他方ユーザによる発話である「○×○×」を含む期間の音声データが抽出される。
【００２５】
したがって、ステップＳ１０５における所定期間は、他方ユーザの発話内容が含まれている可能性が高い期間であることが望ましい。または、当該聞き返し言葉の発声前における、他方ユーザによる最後の発話を含む期間の音声データが抽出されてもよい。なお、抽出される音声データは、聞き返し言葉の直前に係る期間に限定されなくてもよい。例えば、現時点において音声データ記憶部１５に記憶されている音声データ中における、他方ユーザの発話を含む全部分又は一部の部分に係る音声データが抽出されてもよい。但し、聞き返し言葉の直前の録音データを抽出することで、当方ユーザにとって聞き取りづらい音声の周波数特性を特定し易くすることができる。
【００２６】
続いて、音声解析部１３は、抽出された音声データについて、スペクトル解析を実行する（Ｓ１０６）。その結果、当該音声データの周波数特性が抽出又は生成される。
【００２７】
続いて、補正データ選択部１４は、抽出された周波数特性において、高音成分の割合が所定値α以上であるか否かを判定する（Ｓ１０７）。当該判定の趣旨は、一般的な感覚において、他方ユーザの声が、「高い声」であるか否かの判定に相当する。但し、一般的な感覚ではなく、当方ユーザの感覚に基づいて判定されてもよい。例えば、当該所定値αの設定変更が可能とされてもよい。また、高音成分とは、例えば、周波数が或る閾値以上の成分をいうが、当該閾値についても、設定変更が可能とされてもよい。
【００２８】
高音成分の割合が所定値α以上である場合（Ｓ１０７でＹｅｓ）、補正データ選択部１４は、現時点の補正データよりも、１レベル低い補正データを選択する（Ｓ１０８）。現時点の補正データとは、現時点において音声信号処理部１０２に適用されている補正データをいう。
【００２９】
図５は、補正データ記憶部の構成例を示す図である。図５において、補正データ記憶部１６は、補正データ０、補正データ＋１〜＋４、補正データ−１〜−４等を含む。各補正データは、周波数特性の補正前後又は変更前後の差分を示す情報を含むデータであり、その差分情報に応じて、補正データの名前における末尾の数値が異なる。すなわち、補正データ０は、補正を全く行わない補正データである。例えば、携帯電話装置１０の出荷時又は通話開始時等の初期設定においては、補正データ０が、音声信号処理部１０２に設定されていてもよい。
【００３０】
補正データ＋１〜＋４は、高音成分を増加させる（他方ユーザの声を高くする）補正データであり、末尾のプラスの値が大きいほど、高音成分の増加量は大きくなる。以下、補正データ＋１〜＋４を、「プラスの補正データ」という。なお、プラスの補正データは、低音成分を削減するものであってもよい。一方、補正データ−１〜−４は、低音成分を増加させる（他方ユーザの声を低くする）補正データであり、末尾のマイナスの値が大きいほど、低音成分の増加量は大きくなる。以下、補正データ−１〜−４を、「マイナスの補正データ」という。なお、マイナスの補正データは、高音成分を削減するものであってもよい。
【００３１】
図６は、補正データの内容の一例を示す図である。図６において、横軸は、周波数であり、縦軸の＋方向は、周波数の強さの増加分であり、縦軸の−方向は、周波数の強さの削減分である。図６において、（１）は、プラスの補正データの一例である。すなわち、（１）では、高い周波数の成分を増加させ、低い周波数の成分を削減する補正データである。補正データ＋１、＋２、＋３、＋４の順で、その傾向が強くなる。一方、（２）は、プラスの補正データの一例である。すなわち、（２）では、低い周波数の成分を増加させ、高い周波数の成分を削減する補正データである。補正データ−１、−２、−３、−４の順で、その傾向が強くなる。
【００３２】
なお、補正データ０は、全周波数にわたって、±０である。
【００３３】
ステップＳ１０８において、現時点の補正データより１レベル低い補正データとは、補正データの末尾の値が現時点よりも１小さい補正データをいう。したがって、例えば、現時点の補正データが、補正データ０である場合、補正データ−１が選択される。現時点の補正データが、補正データ＋２である場合、補正データ＋１が選択される。現時点の補正データが、補正データ−２である、補正データ−３が選択される。
【００３４】
一方、高音成分の割合が所定値α未満である場合（Ｓ１０７でＮｏ）、補正データ選択部１４は、現時点の補正データよりも、１レベル高い補正データを選択する（Ｓ１０９）。現時点の補正データより１レベル高い補正データとは、補正データの末尾の値が現時点よりも１大きい補正データをいう。したがって、例えば、現時点の補正データが、補正データ０である場合、補正データ＋１が選択される。現時点の補正データが、補正データ＋２である場合、補正データ＋３が選択される。現時点の補正データが、補正データ−２である、補正データ−１が選択される。
【００３５】
補正データ選択部１４は、例えば、選択した補正データがいずれであるのかを示す情報を、ＲＡＭに記憶しておく。
【００３６】
なお、補正データ記憶部１６には、音声の周波数特性について、複数の補正パターン又変更パターンが記憶されているといえる。ステップＳ１０８及びＳ１０９は、複数の補正パターン又変更パターンの中から、一つの補正パターン又変更パターンを選択する処理であるといえる。
【００３７】
続いて、補正データ選択部１４は、選択された補正データを、音声信号処理部１０２に設定する（Ｓ１１０）。音声信号処理部１０２は、その後の他方ユーザの音声について、設定された補正データが示す補正パターン又は変更パターンに基づいて、周波数特性を補正又は変更する。例えば、図６の（１）に示されるような補正データが設定された場合、音声信号処理部１０２は、他方ユーザの音声について、高音域の周波数の成分を増加させ、低音域の周波数の成分を低下させる。一方、図６の（２）に示されるような補正データが設定された場合、音声信号処理部１０２は、他方ユーザの音声について、高音域の周波数の成分を低下させ、低音域の周波数の成分を増加させる。
【００３８】
その結果、例えば、他方ユーザの声が高すぎて聞き取りづらかった場合、他方ユーザの声は低くされる。また、他方ユーザの声が低すぎて聞き取りづらかった場合、他方ユーザの声は高くされる。なお、図３の処理は、通話中繰り返される。したがって、当方ユーザが、再び聞き返し言葉を発声すると、補正データの選択が再度行われる。そうすることにより、他方ユーザの声は、当方ユーザにとって次第に聞き取り易くなることが期待できる。
【００３９】
補正データ選択部１４は、通話の終了時において選択されている補正データを、当該通話の着信番号又は発信番号に対応付けてフラッシュメモリに記憶しておいてもよい。携帯電話装置１０が、発信又は着信した場合、発信番号又は着信番号に対応付けられている補正データが有る場合には、補正データ選択部１４は、例えば、通話開始時に、当該補正データを音声信号処理部１０２に設定するようにしてもよい。そうすることにより、通話開始時より、当方ユーザにとって聞き取り易い周波数特性に補正又は変更された音声を出力できる可能性を高めることができる。
【００４０】
なお、ステップＳ１０８及びＳ１０９において、現時点の補正データが、補正データ−４又は補正データ＋４であり、１レベル低い補正データ又は１レベル高い補正データが無い場合、補正データ０が選択されてもよい。その後、補正データを変更する場合には、ステップＳ１０７の判定は無視され、当初の補正方向と異なる方向の補正データが選択されるようにしてもよい。例えば、当初、補正データがプラス方向に変更され、補正データ＋４に到達した以降において、補正データは、マイナス方向に変更されるようにしてもよい。
【００４１】
上述したように、本実施の形態によれば、聞き返し言葉の発声に応じて、他方ユーザの音声の周波数特性が自動的に変更される。したがって、当方ユーザが特別な操作を行うことなく、他方ユーザの声質が、当方ユーザにとって聞き取り易い声質に補正又は変更される可能性を高めることができる。その結果、聞き返し言葉が頻繁に発せられることを回避することができ、通話の円滑化を期待することができる。
【００４２】
なお、本実施の形態において、補正データは、相対値、すなわち、補正によって適用される差分を示す情報である例を示したが、補正データは、絶対値であってもよい。例えば、低い声から高い声までのＮ個のパターンの周波数特性を示す補正データが用意され、高い声に補正したいときには、１レベル高い声に対応する補正データが選択される。当該補正データと、ステップＳ１０６において抽出された周波数成分との差分を算出し、当該差分が、音声信号処理部１０２に設定されてもよい。その他の方法によって、周波数特性の補正又は変更が行われてもよい。
【００４３】
また、本実施の形態は、固定電話機、トランシーバ等、携帯電話装置１０以外の通話装置に適用されてもよい。
【００４４】
なお、本実施の形態において、携帯電話装置１０は、通話装置の一例である。特定語検知部１２は、検知部の一例である。音声解析部１３は、抽出部の一例である。音声信号処理部１０２は、変更部の一例である。補正データ選択部１４は、選択部の一例である。
【００４５】
以上、本発明の実施例について詳述したが、本発明は斯かる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
【００４６】
以上の説明に関し、更に以下の項を開示する。
（付記１）
通話装置であって、
通話中において、当該通話装置の利用者による特定の言葉の発声を検知する検知部と、
通話相手の音声について周波数特性を抽出する抽出部と、
前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する変更部とを有する通話装置。
（付記２）
前記変更部は、前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する付記１記載の通話装置。
（付記３）
前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の周波数特性の複数の変更パターンの中から、一つの変更パターンを選択する選択部を有し、
前記変更部は、選択部によって選択された変更パターンに基づいて、前記通話相手の音声の周波数特性を変更する付記１又は２記載の通話装置。
（付記４）
前記通話相手の電話番号に対応付けて、前記選択部によって選択された前記変更パターンを記憶する記憶部を有し、
前記変更部は、前記記憶部に記憶された電話番号に係る発信又は着信に応じた通話において、当該電話番号に対応付けられて記憶されている前記変更パターンに基づいて、通話相手の音声の周波数特性を変更する付記３記載の通話装置。
（付記５）
通話装置が、
通話中において、当該通話装置の利用者による特定の言葉の発声を検知し、
通話相手の音声について周波数特性を抽出し、
前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する、
処理を実行する音声変更方法。
（付記６）
前記変更する処理は、前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する付記５記載の音声変更方法。
（付記７）
前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の周波数特性の複数の変更パターンの中から、一つの変更パターンを選択する処理を前記通話装置が実行し、
前記変更する処理は、選択された変更パターンに基づいて、前記通話相手の音声の周波数特性を変更する付記５又は６記載の音声変更方法。
（付記８）
前記通話相手の電話番号に対応付けて、前記選択部によって選択された前記変更パターンを記憶部に記憶し、
前記変更する処理は、前記記憶部に記憶された電話番号に係る発信又は着信に応じた通話において、当該電話番号に対応付けられて記憶されている前記変更パターンに基づいて、通話相手の音声の周波数特性を変更する付記７記載の音声変更方法。
（付記９）
通話装置に、
通話中において、当該通話装置の利用者による特定の言葉の発声を検知し、
通話相手の音声について周波数特性を抽出し、
前記発声の検知に応じ、前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する、
処理を実行させる音声変更プログラム。
（付記１０）
前記変更する処理は、前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の音声の周波数特性を変更する付記９記載の音声変更プログラム。
（付記１１）
前記特定の言葉の発声の直前における前記通話相手の音声について抽出された周波数特性に基づいて、前記通話相手の周波数特性の複数の変更パターンの中から、一つの変更パターンを選択する処理を前記通話装置に実行させ、
前記変更する処理は、選択された変更パターンに基づいて、前記通話相手の音声の周波数特性を変更する付記９又は１０記載の音声変更プログラム。
（付記１２）
前記通話相手の電話番号に対応付けて、前記選択部によって選択された前記変更パターンを記憶部に記憶し、
前記変更する処理は、前記記憶部に記憶された電話番号に係る発信又は着信に応じた通話において、当該電話番号に対応付けられて記憶されている前記変更パターンに基づいて、通話相手の音声の周波数特性を変更する付記１１記載の音声変更プログラム。
【符号の説明】
【００４７】
１０          携帯電話装置
１１          録音部
１２          特定語検知部
１３          音声解析部
１４          補正データ選択部
１５          音声データ記憶部
１６          補正データ記憶部
１０１        制御部
１０２        音声信号処理部
１０３        スピーカ
１０４        マイクロホン
１０５        無線部
１０６        アンテナ
１０７        入力操作部
１０８        呼出部
【図１】
2015002386.tif 000003
【図２】
2015002386.tif 000004
【図３】
2015002386.tif 000005
【図４】
2015002386.tif 000006
【図５】
2015002386.tif 000007
【図６】
2015002386.tif 000008