(57)【要約】【課題】  ヘッドフォンから音漏れしている場合に、その音漏れに対する是正措置を取ることを可能とする。【解決手段】  音声処理部３５はヘッドフォン３３へ再生音声データを供給する。外部マイクロフォン３４は周囲の音声を取得して音声データに変換する。制御部１０は、ヘッドフォン３３へ供給される再生音声データに対して、音漏れし易い周波数部分の抽出処理とヘッドフォン３３から外部へ漏れだした音声がマイクロフォン３４へ到達するまでの到達遅延時間分を加味する時間変換処理を行い、また、マイクロフォン３４からの周辺音声のデータから音漏れし易い周波数部分を抽出し、それら処理後の再生音声データと周辺音声データが略々一致した時、ヘッドフォン３３から音漏れしていることを検知する。そして、制御部１０は、音漏れを是正するための処理を実行する。【選択図】  図１
2009044365.tif 000002
【特許請求の範囲】
【請求項１】
ヘッドフォンへ音声データを供給する音声データ供給部と、
耳に装着された状態のヘッドフォンから外部へ漏れだした音声を検出する処理を実行する音漏れ検出部と、
上記音漏れ検出部により上記ヘッドフォンから外部への音声の漏れだしが検出された時、所定の音漏れ是正処理を実行する音漏れ是正処理部とを有する、
ことを特徴とする音声処理装置。
【請求項２】
上記音漏れ検出部は、
上記ヘッドフォンへ供給される音声データに対して、所定の周波数部分の抽出処理、及び、当該ヘッドフォンから外部へ漏れだした音声が上記マイクロフォンへ到達するまでの到達遅延時間分を加味する時間変換処理を行う音声抽出変換部と、
周辺音声を取得して音声データに変換するマイクロフォンより供給された音声データから上記所定の周波数部分を抽出する処理を行う周辺音声抽出部と、
上記周辺音声抽出部による上記抽出処理後の音声データと、上記音声抽出変換部による上記抽出処理及び時間変換処理後の音声データとの一致判定を行い、両音声データが略々一致したと判定した時に、上記耳に装着された状態のヘッドフォンから外部へ音声の漏れだしが発生していることを検出する一致判定部とを有することを特徴とする請求項１記載の音声処理装置。
【請求項３】
使用者が認識可能な通知を行うための通知部を有し、
上記音漏れ是正処理部は、使用者に対して所定の音漏れ是正措置を求めるための通知を上記通知部に行わせることを、上記音漏れ是正処理として実行することを特徴とする請求項１記載の音声処理装置。
【請求項４】
上記音漏れ是正処理部は、ヘッドフォンから出力される音声の音量を下げる処理、上記所定の周波数部分を減衰させる処理、上記ヘッドフォンから外部へ出力される音声波形に対して逆位相の音声波形を発生させる処理の、何れかの処理を上記音漏れ是正処理として実行することを特徴とする請求項１記載の音声処理装置。
【請求項５】
上記ヘッドフォンからの出力される音声の音量と所定の閾値とを比較し、上記ヘッドフォンから出力される音声の音量が上記所定の閾値以上である時にのみ、上記音漏れ検出部と上記音漏れ是正処理部の機能を有効にする機能設定制御部を有することを特徴とする請求項１記載の音声処理装置。
【請求項６】
音声データ供給部がヘッドフォンへ音声データを供給するステップと、
耳に装着された状態のヘッドフォンから外部へ漏れだした音声を、音漏れ検出部が検出するステップと、
上記音漏れ検出部により上記ヘッドフォンから外部への音声の漏れだしが検出された時、音漏れ是正処理部が、所定の音漏れ是正処理を実行するステップとを有する、
ことを特徴とする音声処理方法。
【請求項７】
ヘッドフォンへ音声データを供給する音声データ供給部と、
耳に装着された状態のヘッドフォンから外部へ漏れだした音声を検出する処理を実行する音漏れ検出部と、
上記音漏れ検出部により上記ヘッドフォンから外部への音声の漏れだしが検出された時、所定の音漏れ是正処理を実行する音漏れ是正処理部とを有する、
ことを特徴とする携帯端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音楽等の再生音声をヘッドフォンを通じて出力する音声処理装置及び方法、携帯端末に関する。
【背景技術】
【０００２】
従来より、例えば音声再生装置にて再生される音楽等をヘッドフォンで聴く場合、本人はもちろんその音楽を楽しむことができる。しかしながら、例えば公共の場所など周囲に人がいる場所で音楽を聴くような場合、ヘッドフォンの性能によっては再生音が周囲に漏れ出してしまうことがあり、当該音漏れにより周囲の人に不快な思いをさせてしまうことがある。
【０００３】
なお、特開平８−３１４４７３号の公開特許公報（特許文献１）には、音楽の音声信号をスピーカにて音波に変換して出力し、一方、別の複数のスピーカからは位相反転した音声信号を音波に変換して出力することにより、再生音場の外に漏れる音を打ち消すようにし、また、上記別の複数のスピーカへ供給する音声信号には、遅延回路による位相調整や増幅器による音量調整を施すことにより、音場の音響特性を自由に設定可能にした防音装置が開示されている。
【０００４】
特開平３−２４７０９８号の公開特許公報（特許文献２）には、ヘッドフォンに供給される音声信号の音漏れ帯域を減衰させると同時に、その減衰量を音声信号のレベルに応じて可変にすることにより、ヘッドフォンから漏れる音を周囲の人に聞こえ難くしつつ音質の劣化を少なくすることも可能にした携帯用再生装置とヘッドフォンが開示されている。
【０００５】
【特許文献１】特開平８−３１４４７３号公報（図１）
【特許文献２】特開平３−２４７０９８号公報（図１）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、ヘッドフォンにて音楽等を聴いている場合において、周囲の人に不快な思いをさせるのは、故意の場合を除くと、殆どの場合、本人の近くに人が居て且つヘッドフォンから音が漏れており、さらにそのことに本人自身が気づいていないために起きる。すなわち、ヘッドフォンから音が漏れていたとしても、例えば本人の近くに全く人が居ない場合には他人に迷惑をかけることはなく、また例えば、本人の近くに人がいる場合であっても、ヘッドフォンから音が漏れていることに本人が気づき、その本人自身が音漏れに対する是正措置（例えば音量を下げるなどの措置）をとれば、周囲の人に迷惑をかけなくて済むことになる。しかしながら、ヘッドフォンにて音楽等を聴いている場合には、音漏れしていることを周囲の人から指摘されるまで、自分自身では全く気づかないことも非常に多い。
【０００７】
また、上述の特開平８−３１４４７３号や特開平３−２４７０９８号の公開特許公報のように、音漏れ自体を少なくする音漏れ防止技術を用いれば、周囲の人に迷惑をかけることも少なくなるが、実際には僅かであるが音が漏れてしまうことも多く、その場合、音楽を聴いている本人は、音漏れによって周囲の人に不快な思いをさせてしまっていることに気づかない。
【０００８】
本発明は、このような実情に鑑みて提案されたものであり、ヘッドフォンにて音楽等を聴く場合において、ヘッドフォンから音漏れしている時に、その音漏れに対する是正措置を取ることを可能とする音声処理装置及び方法、携帯端末を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の音声処理装置及び方法、携帯端末においては、音声データ供給部がヘッドフォンへ音声データを供給し、耳に装着された状態のヘッドフォンから外部へ漏れだした音声を音漏れ検出部が検出し、ヘッドフォンから外部への音声の漏れだしが検出された時、音漏れ是正処理部が所定の音漏れ是正処理を実行することにより、上述した課題を解決する。
【００１０】
すなわち、本発明によれば、耳に装着された状態のヘッドフォンから音声を出力している時に、マイクロフォンにて周辺音声を取得することにより、ヘッドフォンから外部へ音が漏れ出している現象を監視及び検知可能となされている。
【発明の効果】
【００１１】
本発明においては、ヘッドフォンにて音楽等を聴いているような場合に、ヘッドフォンからの音漏れを検知可能となされており、ヘッドフォンからの音漏れを検知した時には、それに対する是正措置を取ることにより、使用者本人が意図しない音漏れにより周囲の人に不快な思いをさせる状態になることを回避することができる。
【発明を実施するための最良の形態】
【００１２】
以下、図面を参照しながら、本発明の一実施形態について説明する。
【００１３】
なお、以下の実施形態では、本発明の音声処理装置及び方法、携帯端末の適用例として、携帯電話端末を挙げているが、勿論、ここで説明する内容はあくまで一例であり、本発明はこの例に限定されないことは言うまでもない。
【００１４】
〔携帯電話端末の概略的な内部構成〕
図１には、本発明実施形態の携帯電話端末の概略的な内部構成を示す。
【００１５】
図１において、通信アンテナ１２は、例えば内蔵アンテナであり通話やパケット通信のための信号電波の送受信を行う。通信回路１１は、送受信信号の周波数変換、変調と復調等を行う。上記通信アンテナ１２及び通信回路１１にて受信された通話音声データは、データラインを介して音声処理部３５へ送られ、それ以外の受信データは、一旦、制御部１０へ送られて処理された後、必要に応じて当該制御部１０から各部へ送られる。
【００１６】
内蔵スピーカ３０は、携帯電話端末に設けられている受話用のスピーカやリンガ（着信音）、アラーム音、警告音、音声、音楽等の出力用スピーカであり、ディジタル／アナログ変換器と増幅器を含み、通話音声やリンガ音，音楽等の音声データを、ディジタル／アナログ変換及び増幅した後に出力する。これにより、通話音声やリンガ音，音楽等の音声が空気中に出力されることになる。
【００１７】
内蔵マイクロホン３１は、携帯電話端末に設けられている送話用及び外部音声集音用のマイクロホンであり、アナログ／ディジタル変換器と増幅器を含む。この内蔵マイクロホン３１を介して入力された音声信号は、増幅器により所定のレベルに増幅された後、アナログ／ディジタル変換器によりディジタル音声データに変換され、データラインを介して音声処理部３５へ送られて符号化された後、データラインを介して通信回路１１へ送られて変調、周波数変換等の各種処理を受け、通信アンテナ１２から送信される。
【００１８】
外部オーディオ端子３２は、外部のヘッドフォン３３や外部マイクロフォン３４と携帯電話端末本体とを接続するための端子である。なお、当該外部オーディオ端子３２には、例えば音楽等の再生音のボリューム調整や早送り再生、早戻し再生、チャネル切換、外部マイクロフォン３４及びヘッドフォン３３を用いた通話時の発話指示などを行うためのリモートコントロール端子も含まれている。
【００１９】
ディジタル放送受信部３８は、ディジタル放送の受信チューナ部とＡＶコーデック部とを備えており、ディジタル放送用アンテナ３９により受信されたディジタルテレビジョン放送信号やディジタルラジオ放送信号の復調，アナログ／ディジタル変換，圧縮符号化されているデータの伸張復号等の処理を行い、それら復調及び伸張復号されたディジタル放送データのうち、ディジタルテレビジョン放送の動画像データについては画像処理部３６へ送り、ディジタルテレビジョン放送の音声データやディジタルラジオ放送の音声データについては音声処理部３５へ送る。
【００２０】
音声処理部３５は、上記通信アンテナ１２及び通信回路１１から受信音声の圧縮符号化データが供給された時には、当該受信音声の圧縮符号化データを伸張復号化し、その伸張復号化後の受信音声データを、データラインを介してスピーカ３０へ送るか若しくは外部オーディオ端子３２に接続されたヘッドフォン３３へ供給する。また、本実施形態の携帯電話端末の動作モードが、例えばメモリ部１６等に圧縮符号化されて保存されている楽曲データコンテンツ（音楽ファイル）や動画像データコンテンツ（動画像ファイル）の再生モードになされている場合、音声処理部３５は、制御部１０による制御の元で、上記メモリ部１６から読み出された楽曲データコンテンツや動画像データコンテンツの音声データの伸張復号化を行い、その伸張復号化後の再生音声データを、データラインを介してスピーカ３０へ送るか若しくは外部オーディオ端子３２に接続されたヘッドフォン３３へ送る。また、本実施形態の携帯電話端末の動作モードが、例えばディジタル放送の受信及び視聴モードになされている場合、音声処理部３５は、制御部１０による制御の元で、ディジタル放送受信部３８から供給されたディジタルテレビジョン放送やディジタルラジオ放送の音声データを、データラインを介してスピーカ３へ送るか若しくは外部オーディオ端子３２経由でヘッドフォン３３へ供給する。なお、当該音声処理部３５の機能は、制御部１０がソフトウェアにより実現することも可能である。
【００２１】
表示部１３は、例えば液晶ディスプレイや有機ＥＬ（ElectorLuminescence）パネル等の表示デバイスと、そのディスプレイの表示駆動回路とを含み、上記ディスプレイ上に文字や各種メッセージ、静止画像や動画像等を表示する。
【００２２】
画像処理部３６は、待ち受け画面や電子メール文、アドレス帳、各種ユーザインターフェース画面、動画像データコンテンツの再生動画像、ディジタルテレビジョン放送の受信動画像等の画像データを生成して、それら画像データをデータラインを介して表示部１３のディスプレイへ送って表示させる処理等を行う。なお、当該画像処理部３６の機能は、制御部１０がソフトウェアにより実現することも可能である。
【００２３】
操作部１４は、本実施形態の携帯電話端末の図示しない筐体上に設けられているテンキーや発話キー、終話／電源キー等の各キーや十字キー，ジョグダイヤル等の各操作子と、それら操作子が操作された時の操作信号を発生する操作信号発生器とからなる。本実施形態において、上記操作部１４の各操作子は、ユーザによる電源のオン／オフ操作、発信や着信の指示操作、電話番号入力操作や電子メール等の文字入力操作、ディスプレイ上に表示されたメニュー項目の選択操作、ディジタルカメラ機能におけるシャッター操作、ディジタル放送の受信指示操作、楽曲データコンテンツや動画像データコンテンツ等の再生指示操作及びそれらに関連する各指示操作のために用いられる。
【００２４】
時計部１５は、年月日及び日時のような時刻情報や、制御部１０が各種処理を行う際に用いる時間情報などを生成する。当該時計部１５による時刻や時間等は、ディスプレイ上に表示されたり、スケジュール管理やアラーム報知などにも用いられる他、例えば楽曲データコンテンツ等の再生時間や再生日時の管理などにも用いられる。
【００２５】
バイブレータ３７は、回転軸に偏芯分銅が固着された小型のモータを回転／停止させることで、本実施形態の携帯電話端末に振動を発生させる。
【００２６】
メモリ部１６は、ＲＯＭ（Read Only Memory）とＲＡＭ（Random Access Memory）を含む。ＲＯＭは、ＮＡＮＤ型フラッシュメモリ（NAND-type flash memory）のような書き換え可能な記憶媒体を含み、例えば、ＯＳ（Operating System）のプログラムや制御部１０が各部を制御するための制御プログラム、例えば楽曲データコンテンツ等の音声再生出力やディジタル放送された楽曲データ等の音声再生出力などのような音声再生出力管理及び制御を行う音声再生管理及び制御プログラム、本発明に係る後述の音漏れ検出及び音漏れ是正措置のための通知や制御等の処理を実行するためのプログラム（音漏れ検出及び制御プログラム）を含む各種のアプリケーションプログラム、圧縮符号化された楽曲データコンテンツや動画像データコンテンツの他、各種の初期設定値、フォントデータ、各辞書データ、機種名情報や端末識別情報などをも記憶する。ＲＡＭは、制御部１０が各種のデータ処理を行う際の作業領域として、随時データを格納する。また、メモリ部１６は、着脱可能な外部メモリカードや小型のハードディスクドライブを含んでいてもよい。なお、本実施形態において、当該メモリ部１６のコンテンツ蓄積部１８には、圧縮符号化された楽曲データコンテンツや動画像データコンテンツ等が蓄積される。当該コンテンツ蓄積部１８に蓄積される楽曲データコンテンツや動画像データコンテンツは、通信回線を介して取得したものやディジタル放送受信部３８により受信したものの他、外部メモリカードに保存されたものも含まれる。また、メモリ部１６のプログラム蓄積部１７には、本実施形態の音漏れ検出及び制御プログラムを含む各種のアプリケーションプログラムが蓄積される。また、音漏れ検知用パラメータ格納部１９には、後述する音漏れ検出及び音漏れ是正措置のための通知や制御等の処理の実行の際に使用される「音漏れし易い音声周波数」の情報や、ヘッドフォン３３と外部マイクロフォン３４との間の空間的な距離に応じた「音声到達遅延時間」の情報、音漏れ是正措置を必要とする「最低音量」の情報などが、音漏れ検知用パラメータとして格納されている。抽出・変換後再生音声データ格納部２０は、後述する音漏れ検出の際に、楽曲やディジタル放送の音声データから「音漏れし易い音声周波数」部分が抽出されて且つそれに音声到達遅延時間が加味された音声データ（抽出・変換後再生音声データ）を一時的に格納するために用意されている。
【００２７】
上記制御部１０は、通信回路１１における通信の制御、音声処理部３５や画像処理部３６、ディジタル放送受信部３８等の各部の制御を行う。特に、本実施形態の場合、詳細については後述するが、制御部１０は、上記メモリ部１６のプログラム蓄積部１７に蓄積されている音漏れ検出及び制御プログラムを実行することにより、音楽等の音声を外部オーディオ端子３２を介してヘッドフォン３３から出力する場合に、そのヘッドフォン３３からの不要な音漏れの検出とそれに対する是正措置のための通知や制御等の処理を実行する。
【００２８】
その他、図１には図示を省略しているが、本発明の携帯電話端末は、写真画像の撮影のためのディジタルカメラ部、キー照明や着信ライト用などのＬＥＤ（発光ダイオード）とその駆動部、各部へ電力を供給するバッテリとその電力をコントロールするパワーマネージメントＩＣ部、いわゆるブルートゥース方式（Bluetooth：登録商標）やＵＷＢ（Ultra Wide Band）方式、無線ＬＡＮ（Local Area Network）などによる近距離無線通信を行うための近距離無線通信部、いわゆる電子マネーのための情報記憶と信号の送受信を行う電子財布部、ＧＰＳ（Global Positioning System）通信部、外部メモリ用スロットなど、一般的な携帯電話端末に設けられる各構成要素についても備えている。
【００２９】
〔音漏れ検出及び音漏れ是正措置の通知，制御の説明〕
以下、本実施形態の携帯電話端末において、音漏れ検出及び音漏れ是正措置のための通知と制御について、前述の図１の構成と図２〜図４のフローチャートを用いて説明する。なお、図２〜図４のフローチャートに示す処理は、本実施形態の携帯電話端末のメモリ部１６のプログラム蓄積部１７に格納された本実施形態の音声再生管理及び制御プログラムと音漏れ検出及び制御プログラムを、上記制御部１０が実行することにより実現される処理である。
【００３０】
〔各パラメータの概要〕
先ず、本実施形態において、例えば携帯電話端末の製品製造段階では、「音声到達遅延時間」と「音漏れし易い音声周波数」と「最低音量」の各パラメータの決定及びそれらパラメータがメモリ部１６の音漏れ検知用パラメータ格納部１９へ格納される。
【００３１】
上記「音声到達遅延時間」のパラメータは、実使用時におけるヘッドフォン３３と外部マイクロフォン３４との間の距離を元に予め決定される情報であり、具体的には、ヘッドフォン３３から音楽等の音声出力が行われた場合に、当該ヘッドフォン３３から漏れ出た音が外部マイクロフォン３４へ到達するまでの時間情報である。すなわち、或る音がヘッドフォン３３から出力されて外部マイクロフォン３４にて検知される場合、その音がヘッドフォン３３から出力された時刻と当該音が外部マイクロフォン３４に到達した時刻との差分が上記「音声到達遅延時間」として決定される。この「音声到達遅延時間」のパラメータは、当該携帯電話端末の製品製造段階で決められ、メモリ部１６の音漏れ検知用パラメータ格納部１９に格納される。
【００３２】
なお、上述の説明では、製品製造段階で「音声到達遅延時間」を決めておく例について述べているが、本実施形態の携帯電話端末は、実使用時にヘッドフォン３３と外部マイクロフォン３４との間の距離が変化するような場合に、それらの距離の変化を検知し、その検知した距離を元にして「音声到達遅延時間」を適宜求める機能を備えていても良い。このような機能を実現する場合の一例としては、ヘッドフォン３３と外部マイクロフォン３４のコードが巻き取り式となされており、実使用時には当該コードの巻き取り，引き出しによってそれらヘッドフォン３３と外部マイクロフォン３４との間の距離が変化するような場合において、例えばコードの巻き取り量や引き出し量によりそれらヘッドフォン３３と外部マイクロフォン３４との間の距離を計測し、当該計測した距離の情報に基づいて「音声到達遅延時間」を適宜計算するような処理を挙げることができる。その他にも、一例として気圧や湿度，温度などによって「音声到達遅延時間」が変動するような場合には、携帯電話端末に気圧計や湿度計，温度計などを設け、それらの計測値に応じて上記「音声到達遅延時間」を適宜計算するような処理を行っても良い。
【００３３】
上記「音漏れし易い音声周波数」のパラメータは、ヘッドフォン３３の実使用状態、つまり例えばユーザの耳に挿入された実使用状態において、当該ヘッドフォン３３から漏れ出し易い（耳から外へ漏れ易い）音声周波数帯を表す情報である。ここで、ユーザの耳に挿入された状態のヘッドフォン３３から外部へ漏れ出し易い音声周波数帯は、実際には可成り広帯域となるが、特に、周囲の人が耳障りに感ずる音は高周波数帯域の音（高い音）である。このため、本実施形態では、一例として４ｋＨｚ以上の高い周波数を上記「音漏れし易い音声周波数」として決定する。この「音漏れし易い音声周波数」のパラメータは、当該携帯電話端末の製品製造段階で決められ、メモリ部１６の音漏れ検知用パラメータ格納部１９に格納される。
【００３４】
なお、上記４ｋＨｚは一例であり、それ以上或いはそれ以下の周波数帯であっても良い。また、上述の説明では、製品製造段階で「音漏れし易い音声周波数」を決めておく例について述べているが、一例として、ヘッドフォン３３から外部へ漏れ出す音の音量や周囲の環境音の音量によって、周囲の人が耳障りと感じる音の周波数が変化するような場合には、それら漏れ出し音や周囲環境音の音量に基づいて上記「音漏れし易い音声周波数」を適宜変更するようにしても良い。
【００３５】
上記「最低音量」のパラメータは、本実施形態の携帯電話端末において音漏れ検知及び音漏れ是正の機能を動作させるか否か（機能を「有効」に設定するか否か）を決定するための情報であり、具体的には、９０ｄＢが閾値として設定され、ヘッドフォン３３から出力される音の音量が、上記閾値以上の音量である場合には上記音漏れ検知及び音漏れ是正の機能を動作させ、一方、上記閾値より低い音量である場合には音漏れ検知及び音漏れ是正の機能を動作させないように制御するための情報である。すなわち、ヘッドフォン３３から出力される音の音量が非常に小さく、音漏れにより周囲の人に不快な思いをさせることがないと判断できる場合には、音漏れ検知及び音漏れ是正の機能を動作させないことで、ヘッドフォン３３からの音楽を聴いている本人がその音楽に集中できるようにする。この「最低音量」のパラメータは、当該携帯電話端末の製品製造段階で決められ、メモリ部１６の音漏れ検知用パラメータ格納部１９に格納される。
【００３６】
なお、ヘッドフォン３３から外部へ漏れ出す音が周囲の人に不快感を与えるかどうかは、その際の周囲の環境音の音量により変化するため、周囲環境音の音量に基づいて上記「最低音量」を適宜変更するようにしても良い。すなわち上述の説明では、製品製造段階で「最低音量」を決めておく例について述べているが、一例として、周囲環境音の音量が非常に大きい場合には上記「最低音量」の閾値を上げるように変更し、逆に、周囲環境音の音量が非常に小さい場合には上記「最低音量」の閾値を下げるように変更するようにしても良い。
【００３７】
その他、周囲環境音については、外部マイクロフォン３４だけでなく、内蔵マイクロフォン３１にて取得しても良い。
【００３８】
〔処理フローの説明〕
次に、本実施形態の携帯電話端末において、外部オーディオ端子３２にヘッドフォン３３及び外部マイクロフォン３４が接続され、上記ヘッドフォン３３から音楽等の音声出力を行う実使用時、制御部１０は、メモリ部１６のプログラム蓄積部１７に格納された本実施形態の音声再生管理及び制御プログラムを実行することにより、図２のフローチャートに示すような音声再生関連処理を実行する。また、音声再生処理を実行する際、制御部１０は、メモリ部１６のプログラム蓄積部１７に格納された本実施形態の音漏れ検出及び制御プログラムを実行することにより、図３及び図４のフローチャートに示すような音漏れ検出及び音漏れ是正関連処理を実行する。
【００３９】
〔音声再生処理フロー〕
本実施形態の携帯電話端末において、音声再生管理及び制御プログラムが起動し、例えばメニュー選択画面に表示された複数のメニュー項目の中から、ユーザにより、複数の音楽ファイルの中から所望の音楽ファイルを選んで再生するメニュー項目の選択が行われたとすると、制御部１０は、先ず図２のフローチャートのステップＳ１の処理として、メモリ部１６のコンテンツ蓄積部１８に蓄積されている全楽曲データコンテンツに対応した音楽ファイルのリストを取得し、次いでステップＳ２の処理として、画像処理部３６を制御して、上記音楽ファイルリストの画像を生成させ、その音楽ファイルリストの画像を表示部１３のディスプレイ画面上に表示させる。
【００４０】
次に、制御部１０は、操作部１４を介してユーザが上記音楽ファイルリストの中から所望の音楽ファイルを選択し、さらに操作部１４を介してユーザがその音楽ファイルの再生開始指示を入力すると、ステップＳ３の処理として、当該ユーザにより選択された音楽ファイルに対応した楽曲データコンテンツを上記コンテンツ蓄積部１８から読み出し、音声処理部３５を制御して当該楽曲データコンテンツの伸張復号化を行わせることにより、上記音楽ファイルの再生処理を開始させる。
【００４１】
そして、制御部１０は、ステップＳ４の処理として、音声処理部３５を制御することにより、上記音楽ファイルの再生処理を実行させると共に、その再生音楽のデータを外部オーディオ端子３２を通じてヘッドフォン３３へ送る。これにより、ヘッドフォン３３からは上記再生音楽が出力されることになり、ユーザは、上記所望の音楽ファイル（楽曲データコンテンツ）の音楽を楽しむことが可能となる。
【００４２】
さらに、制御部１０は、上記ステップＳ４の処理を実行中、ステップＳ５の処理として当該音楽ファイルの再生が終了したか、若しくは制御部１４を通じてユーザから再生終了等の指示が入力されたか否か判断しており、当該音楽ファイルの再生が終了したか若しくはユーザから再生終了等の指示入力がなされた時には図２のフローチャートの処理を終了する。
【００４３】
〔音漏れ対策フロー（再生音声側処理）〕
また、図２に示したフローチャートの処理がスタートした時、制御部１０は、少なくとも図２のステップＳ３の処理以前に、図３のフローチャートのステップＳ１１の処理として、例えばヘッドフォン３３から音楽等を出力する際に音漏れ対策のための機能（音漏れ検出及び音漏れ是正の機能）を有効にしておく設定が予めなされているか否か判定し、音漏れ対策設定がＯＮ（有効）になされていると判定した場合にのみステップＳ１２以降へ処理を進め、それ以外の場合にはこの図３のフローチャートの処理を終了する。
【００４４】
ステップＳ１１において、音漏れ対策設定がＯＮ（有効）になされていると判定されてステップＳ１２の処理に進むと、制御部１０は、メモリ部１６の音漏れ検知用パラメータ格納部１９から「最低音量」のパラメータを読み出すと共に、携帯電話端末の現在の音声出力用のボリュームの現在の設定値から、当該現在のボリューム設定による出力音量が「最低音量」の閾値以上になるか否か判定する。当該ステップＳ１２の判定処理により、現在のボリューム設定による出力音量が上記「最低音量」の閾値より低いと判定された場合、そのボリューム設定にて音声出力がなされたとしても音漏れにより周囲の人に不快な思いをさせることが少ないと考えられるため、制御部１０は、当該図３のフローチャートの処理を終了する。一方、当該ステップＳ１２の判定処理により、現在のボリューム設定による出力音量が上記「最低音量」の閾値以上であると判定された場合には、そのボリューム設定にて音声出力がなされると音漏れにより周囲の人に不快な思いをさせる可能性があるため、制御部１０は、ステップＳ１３以降へ処理を進める。
【００４５】
ステップＳ１３の処理に進むと、制御部１０は、音楽ファイルの再生処理を実行すること、すなわち図２のフローチャートのステップＳ４の処理を行う。
【００４６】
また、制御部１０は、ステップＳ１３の処理が開始されると、ステップＳ１４の処理として、メモリ部１６の音漏れ検知用パラメータ格納部１９から「音漏れし易い周波数」のパラメータを読み出し、当該「音漏れし易い音声周波数」のパラメータを基に、ステップＳ１３での音楽ファイル再生処理による再生音声データから、上記「音漏れし易い音声周波数」部分を抽出する処理を行う。
【００４７】
次に、制御部１０は、ステップＳ１５の処理として、メモリ部１６の音漏れ検知用パラメータ格納部１９から「音声到達遅延時間」のパラメータを読み出し、上記ステップＳ１４の処理により得られた抽出音声データに対して当該「音声到達遅延時間」を加味した時間変換処理、つまり抽出音声データに付随する時刻情報を上記「音声到達遅延時間」分だけ遅延させる時間変換処理を行う。
【００４８】
そして、制御部１０は、ステップＳ１６の処理として、上記ステップＳ１５による時間変換処理後の抽出音声データ（抽出・変換後再生音声データ）を、メモリ部１６の抽出・変換後再生音声データ格納部２０へ格納する。なお、当該抽出・変換後再生音声データ格納部２０へ格納されるデータは、最新の一定時間分の抽出・変換後再生音声データのみとし、古いデータについては新しいデータにより上書きされるようにすることが望ましい。すなわち、抽出・変換後再生音声データを全て格納するようなことを行うと、メモリ部１６の容量を圧迫してしまうことになるため、後述する図４のフローチャートのステップＳ２６にて周辺音声データとの比較により音漏れ対策を実行するか否か判断するために必要な或る一定時間分のデータだけを格納するようにして、メモリ部１６の容量を無駄に消費してしまわないようにすることが望ましい。
【００４９】
この図３に示したフローチャートの処理は、図２のフローチャートのステップＳ５において、当該音楽ファイルの再生が終了したか、若しくは制御部１４を通じてユーザから再生終了等の指示が入力されるまで繰り返されることになる。
【００５０】
なお、図３のフローチャートにおいて、ステップＳ１４とステップＳ１５の処理は何れが先に行われても良い。すなわち、再生音声データに対して先に時間変換処理を行い、その後、周波数部分の抽出を行うようにしても良い。
【００５１】
〔音漏れ対策フロー（周辺音声側処理）〕
また、制御部１０は、図３のフローチャートの処理の実行と並行して、図４のフローチャートの処理を実行する。なお、図４のフローチャートのステップＳ２１，ステップＳ２２は、図３のフローチャートのステップＳ１１，ステップＳ１２と同じ処理で且つ同時に行われる処理であり、それらステップＳ１１，ステップＳ１２とは別に行われる処理ではないが、説明の都合上、図４ではステップＳ２１，ステップＳ２２として記述している。
【００５２】
図４のフローチャートにおいて、制御部１０は、少なくとも図２のステップＳ３の処理以前に、図４のフローチャートのステップＳ２１の処理として、例えばヘッドフォン３３から音楽等を出力する際に音漏れ対策のための機能（音漏れ検出及び音漏れ是正の機能）を有効にしておく設定が予めなされているか否か判定し、音漏れ対策設定がＯＮ（有効）になされていると判定した場合にのみステップＳ２２以降へ処理を進め、それ以外の場合にはこの図４のフローチャートの処理を終了する。
【００５３】
また、ステップＳ２１において、音漏れ対策設定がＯＮ（有効）になされていると判定されてステップＳ２２の処理に進むと、制御部１０は、メモリ部１６の音漏れ検知用パラメータ格納部１９から「最低音量」のパラメータを読み出すと共に、携帯電話端末の現在の音声出力用のボリュームの現在の設定値から、当該現在のボリューム設定による出力音量が「最低音量」の閾値以上になるか否か判定し、当該ステップＳ２２の判定処理により、現在のボリューム設定による出力音量が上記「最低音量」の閾値より低いと判定された場合には当該図４のフローチャートの処理を終了し、一方、現在のボリューム設定による出力音量が上記「最低音量」の閾値以上であると判定された場合にはステップＳ２３以降へ処理を進める。
【００５４】
ステップＳ２３の処理に進むと、制御部１０は、外部マイクロフォン３４を有効（ＯＮ）に設定した後、ステップＳ２４へ処理を進める。
【００５５】
ステップＳ２４の処理に進むと、制御部１０は、上記外部マイクロフォン３４により取得された周辺の音声データを取り込み、ステップＳ２５へ処理を進める。
【００５６】
ステップＳ２５の処理に進むと、制御部１０は、メモリ部１６の音漏れ検知用パラメータ格納部１９から「音漏れし易い周波数」のパラメータを読み出し、当該「音漏れし易い音声周波数」のパラメータを基に、上記ステップＳ２４で外部マイクロフォン３４により取得した周辺音声データから、上記「音漏れし易い音声周波数」部分を抽出する処理を行う。
【００５７】
次に、制御部１０は、ステップＳ２６の処理として、メモリ部１６の抽出・変換後再生音声データ格納部２０に格納されている抽出・変換後再生音声データの中から、上記外部マイクロフォン３４が取得した周辺音声の中に含まれている再生音声（音漏れした再生音声）と同じ時間情報を持ったデータ、つまりヘッドフォン３３から出力されて外部マイクロフォン３４へ到達するまでの遅延時間分が加味された抽出・変換後再生音声データを読み出し、上記ステップＳ２５により得られた抽出後周辺音声データに上記抽出・変換後再生音声データが含まれているか否か分析する。なお、当該分析処理は、一例として、両データのパターンマッチング等による一致判定処理により実現することができる。
【００５８】
そして、制御部１０は、ステップＳ２６にて上記抽出後周辺音声データに抽出・変換後再生音声データが含まれていると判定した場合、すなわち、外部マイクロフォン３４が集積した周辺音声の中に、ヘッドフォン３３から外部へ漏れ出した音漏れし易い周波数部分で且つヘッドフォン３３から外部マイクロフォン３４までの到達遅延時間を加味した音声成分が含まれていると判定した場合には、音漏れが発生していると判断し、ステップＳ２７へ処理を進める。
【００５９】
ステップＳ２７の処理に進むと、制御部１０は、音漏れしている状態を改善するための音漏れ対策処理を行う。具体的には、ヘッドフォン３３から出力される音量を音漏れしないレベルまで自動的に下げる処理や、音漏れし易い周波数部分を自動的に減衰させる処理、音漏れにより外部へ漏れる再生音声波形に対して逆位相の音声波形をヘッドフォン３３にて発生させる処理、音漏れ状態である旨を表示部１３の画面表示させたり、アラーム音の出力やバイブレータ３７の振動などにより、ユーザが認識できるように通知するなどの処理を行う。なお、画面表示やアラーム音出力，バイブレータ振動などによるユーザへの通知は、当該ユーザ自身による音漏れ是正措置（例えばボリュームを操作して音量を下げるなど）を促すための通知となされる。これにより、本実施形態の携帯電話端末では、音漏れ状態を改善することができることになる。
【００６０】
この図４に示したフローチャートの処理は、図２のフローチャートのステップＳ５において、当該音楽ファイルの再生が終了したか、若しくは制御部１４を通じてユーザから再生終了等の指示が入力されるまで繰り返されることになる。
【００６１】
なお、本実施形態では、図３のステップＳ１６にて上記抽出・変換後再生音声データを抽出・変換後再生音声データ格納部２０に一旦格納し、図４のステップＳ２６にて上記抽出・変換後再生音声データ格納部２０から読み出した抽出・変換後再生音声データと、抽出後周辺音声データとの比較を行うようにしているが、例えば、図３のステップＳ１５における時間変換処理をディレイ回路による時間遅延処理とし、当該ディレイ回路にて時間遅延された再生音声データと上記抽出後周辺音声データとを直接比較することで、音声データの一時的な格納を行わないようにしても良い。
【００６２】
〔まとめ〕
以上説明したように、本発明実施形態の携帯電話端末においては、ヘッドフォン３３を用いて音楽等の音声を出力する場合、外部マイクロフォン３４にて周辺の音声を監視し、当該外部マイクロフォン３４にて集積した周辺音声の中に、ヘッドフォン３３から漏れ出した音声が含まれているか否かの音漏れ検知を行い、音漏れが検知された時には、その音漏れを是正するための対策処理を行うか、若しくはユーザに音漏れを是正する措置を求めるようにしている。これにより、本実施形態の携帯電話端末によれば、ヘッドフォンからの音漏れにより周囲の人に不快感を与えてしまう状態になることを防止でき、また、ヘッドフォンで音楽等を聴いている本人が気づき難い音漏れを本人自身に容易に気づかせて、音漏れの是正措置を取り易くなっている。
【００６３】
なお、上述した本発明の各実施形態の説明は、本発明の一例である。このため、本発明は上述した実施形態に限定されることなく、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることはもちろんである。
【００６４】
本実施形態の音声処理装置は、携帯電話端末に限定されず、楽曲データコンテンツの保存及び再生機能を備えたＰＤＡ（Personal Digital Assistant）やパーソナルコンピュータ、携帯型テレビゲーム装置、携帯型ディジタルテレビジョン受信機、カーナビゲーション装置など様々な端末や、据え置き型の動画像再生装置などにも適用可能である。
【図面の簡単な説明】
【００６５】
【図１】本発明実施形態の携帯電話端末の概略的な内部回路構成を示すブロック図である。
【図２】音声再生処理のメインのフローチャートである。
【図３】音漏れ対策時の再生音声側の処理を示すフローチャートである。
【図４】音漏れ対策時の周辺音声側の処理を示すフローチャートである。
【符号の説明】
【００６６】
１０  制御部、１１  通信回路、１２  通信アンテナ、１３  表示部、１４  操作部、１５  時計部、１６  メモリ部、１７  プログラム蓄積部、１８  コンテンツ蓄積部、１９  音漏れ検知用パラメータ格納部、２０  抽出・変換後再生音声データ格納部、３０  スピーカ、３１  マイクロホン、３２  外部オーディオ端子、３３  ヘッドフォン、３４  外部マイクロフォン、３５  音声処理部、３６  画像処理部、３７  バイブレータ、３８  ディジタル放送受信部、３９  ディジタル放送受信用のアンテナ
【図１】
2009044365.tif 000003
【図２】
2009044365.tif 000004
【図３】
2009044365.tif 000005
【図４】
2009044365.tif 000006