(57)【要約】【課題】音響入出力拡張システムを提供する。【解決手段】本発明による音響入出力拡張システムは、第１スピーカ２１１，２１２と、レシーバ２１３と、第１マイク２１４と、を備えるモバイル機器１００と、入力された音響を音響信号に変換するコーデック２２０、音響信号を第２スピーカ２３１，２３２を通じて出力する出力部２３０、周囲で発生する音響を受信して入力する第２マイク２１５、第１スピーカ２１１，２１２から出力される音響、レシーバ２１３から出力される受話音、第１マイク２１４から出力される音声信号、及び第２マイク２１５から出力される音響を入力される入力部２１０、音響信号処理を支持する制御部２４０、モバイル機器１００と連結されて、処理された音響信号をモバイル機器１００へ送信するインターフェース部２５０、を備える音響入出力拡張装置２００とで構成されている。【選択図】図２
2007053748.tif 000002
【特許請求の範囲】
【請求項１】
音響入出力拡張装置とモバイル機器を備える音響入出力拡張システムであって、
前記モバイル機器は、
前記モバイル機器で発生する音響を出力する第１スピーカと、
受話音を出力するレシーバと、
ユーザの音声信号を受信して入力する第１マイクと、
を備え、
前記音響入出力拡張装置は、
入力された音響をデジタル信号に変換し、前記変換されたデジタル信号を音響信号に変換するコーデックと、
前記変換された音響信号を第２スピーカを通じて出力する出力部と、
ユーザの周囲で発生する音響を受信して入力する第２マイクと、
前記第１スピーカから出力されるモバイル機器で発生する音響、前記レシーバから出力される受話音、前記第１マイクから出力されるユーザの音声信号、及び前記第２マイクから出力されるユーザの周囲で発生する音響を入力される入力部と、
前記入力部により入力された音響信号の処理を指示する制御部と、
前記モバイル機器とデータ通信インターフェースで連結されて、前記コーデックにより変換された音響信号を前記モバイル機器へ送信するインターフェース部と、
を備えることを特徴とする音響入出力拡張システム。
【請求項２】
前記制御部で処理された音響信号についてのデータを保存するデータ保存部をさらに備えることを特徴とする請求項１に記載の音響入出力拡張システム。
【請求項３】
第１マイク、レシーバ及び第１マイクを備えるモバイル機器と連結され、第２マイクを備え、複数のモードが設定可能であり、前記モード間転換が可能な音響入出力拡張装置における音響入出力拡張方法であって、
前記モバイル機器から前記モバイル機器のモード状態を受信する第１ステップと、
前記受信したモード状態によって前記第１マイクから入力された送話音、前記レシーバから出力された受話音、前記第２マイクから入力された周辺音及び前記モバイル機器で発生する第１スピーカ出力音を受信して測定する第２ステップと、
前記測定結果によって前記送話音、前記受話音、前記周辺音及び前記第１スピーカ出力音の入出力を前記受信したモード状態に合わせて制御する第３ステップと、
を含むことを特徴とする音響入出力拡張方法。
【請求項４】
前記モード状態は、スピーカ通話モード、ハンズフリー通話モード、待機モード及び音響出力モード状態のうち少なくとも一つを含むことを特徴とする請求項３に記載の音響入出力拡張方法。
【請求項５】
前記モード状態が前記スピーカ通話モード状態の場合、
前記第３ステップは、
前記測定された送話音と周辺音との大きさを比較するステップと、
前記周辺音が前記送話音より大きい場合には前記第１マイクのゲインをアップさせ、前記周辺音が前記送話音より小さい場合には前記第１マイクのゲインをダウンさせるように制御するステップと、
を含むことを特徴とする請求項４に記載の音響入出力拡張方法。
【請求項６】
前記モード状態が前記ハンズフリー通話モード状態の場合、
前記第３ステップは、
前記測定された周辺音と受話音の大きさを比較するステップと、
前記周辺音が前記受話音より大きいときには、前記レシーバのボリュームをアップさせ、前記周辺音が前記受話音より小さいときには、前記レシーバのボリュームをダウンさせるように制御するステップと、
を含むことを特徴とする請求項４に記載の音響入出力拡張方法。
【請求項７】
前記モード状態が前記待機モード状態の場合、
前記第３ステップは、
前記モバイル機器の受信設定がベルモードであるかどうかを判断するステップと、
前記ベルモードである場合には、前記周辺音と前記ベルの特定レベルでのボリュームとを比較して、前記周辺音が前記ベルの特定レベルより大きいときには、前記ベル音のボリュームをアップさせ、前記周辺音が前記ベルの特定レベルより小さいときには、前記ベル音のボリュームをダウンさせるように制御し、前記ベルモードではない場合には、振動またはライト受信設定状態を制御するステップと、
を含むことを特徴とする請求項４に記載の音響入出力拡張方法。
【請求項８】
前記モード状態が前記音響出力モード状態の場合、
前記第３ステップは、
前記周辺音と前記第１スピーカ出力音との大きさを比較するステップと、
前記周辺音が前記第１スピーカ出力音より大きいときには、前記第１スピーカ出力音のボリュームをアップさせ、前記周辺音が前記第１スピーカ出力音より小さいときには、前記第１スピーカ出力音のボリュームをダウンさせるように制御するステップと、
を含むことを特徴とする請求項４に記載の音響入出力拡張方法。
【請求項９】
第１スピーカを通じて音響を出力するモバイル機器と連結された音響入出力拡張装置における音響入出力拡張方法であって、
多重音響支援機能の開始命令を前記モバイル機器から受信するステップと、
前記モバイル機器から出力される第１スピーカ出力音を測定するステップと、
前記測定された第１スピーカ出力音に対する多重音響として出力可能な音源を検索して選択するステップと、
前記選択された音源を前記第１スピーカ出力音と同時に出力するステップと、
を含むことを特徴とする音響入出力拡張方法。
【請求項１０】
前記選択された音源を前記第１スピーカ出力音と同時に出力するステップは、
前記選択された音源を前記音響入出力拡張装置に備わった第２スピーカを通じて出力するステップ、前記モバイル機器に備わった第１スピーカを通じて出力するステップ、または前記第１スピーカと前記第２スピーカとを通じて同時に出力するステップのうちの少なくとも一つを含むことを特徴とする請求項９に記載の音響入出力拡張方法。
【請求項１１】
前記選択された音源を前記第１スピーカ出力音と同時に出力するステップは、
前記音源を前記第１スピーカ出力音とミキシングして出力するステップを含むことを特徴とする請求項１０に記載の音響入出力拡張方法。
【請求項１２】
前記ミキシングは、ハードウェアミキシングまたはソフトウェアミキシングであることを特徴とする請求項１１に記載の音響入出力拡張方法。
【請求項１３】
第１マイク、レシーバ及び第１マイクを備え、複数のモード設定が可能であると共に、前記モード間転換が可能なモバイル機器と連結された音響入出力拡張装置における音響入出力拡張方法であって、
前記第１マイクから入力された送話音、前記モバイル機器の第１スピーカから発生する第１スピーカ出力音、第２マイクから入力される周辺音を測定するステップと、
前記測定された送話音、前記第１スピーカ出力音及び前記周辺音のデータから特異状況発生状態であるかどうかを判断するステップと、
前記判断結果、特異状況発生状態である場合、前記送話音、前記第１スピーカ出力音及び前記周辺音のデータと、前記モバイル機器に対するウェークアップ信号を前記モバイル機器に伝送するステップと、
前記モバイル機器は、前記特異状況発生状態を知らせる信号を出力するステップと、
を含むことを特徴とする音響入出力拡張方法。
【請求項１４】
前記特異状況発生状態を知らせる信号は、ユーザにより設定された音響信号またはユーザにより設定された他のモバイル機器に対する発信信号を含むことを特徴とする請求項１３に記載の音響入出力拡張方法。
【請求項１５】
前記ユーザにより設定された音響信号は、前記モバイル機器に備わった前記第１スピーカを通じて出力するか、前記音響入出力拡張装置に備わった第２スピーカを通じて出力するか、または前記第１スピーカと前記第２スピーカとを通じて同時に出力するか、であることを特徴とする請求項１４に記載の音響入出力拡張方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音響入出力拡張方法及び音響入出力拡張システムに係り、より詳細には、モバイル機器の動作とは独立的な別個の制御部を使用することによって、モバイル機器の性能に影響を与えずに機器自体で、多様な経路で発生する音響とユーザによる音響及びユーザ周辺の音響を同時に処理し、その処理結果による特定の音響を出力できる音響入出力拡張方法及びシステムに関する。
【背景技術】
【０００２】
本発明の音響入出力拡張方法及び音響入出力拡張装置と関連する発明については、特許文献１及び特許文献２などの発明が開示されている。特許文献１を示したものが図１Ａであり、特許文献２を示したものが図１Ｂである。図面を参照して、従来技術について簡略に説明する。
【０００３】
図１Ａは、従来技術におけるノイズ測定機能を持つ端末機の、一実施形態の構成を示す図面である。当該実施形態においては、ノイズ測定器を端末機に装着し、測定されたノイズ値によってスピーカのレベルを決定する回路で構成されている。図１Ａを参照して簡単に説明する。
【０００４】
マイク１は、外部のノイズを入力し、ノイズを電圧信号に変換する。次いで、プリアンプ２は、マイク１で変換された電圧信号を増幅させる。次いで、ノイズ検出部３が、プリアンプ２から入力された増幅信号のＲＭＳ値及び尖頭値を検出する。そして、ＭＳＭ４は、ノイズ検出部３からＲＭＳ値及び尖頭値を入力され、ユーザの要求に応じて適した単位で換算し、それを映像信号に変換してＬＣＤ６に出力する。また、換算された値に応じて音声レベル制御信号を生成し、スピーカ５に出力する。スピーカ５は、ＭＳＭ４から音声レベル制御信号が入力され、入力された制御信号によって出力レベルを調整する。
【０００５】
しかし、外部のノイズを入力する用途で使われる別途のマイクは、携帯電話が出す音やユーザが通話中に出す音及びユーザ周辺の音をいずれも一つの重畳された音源と処理し、あらゆる音をノイズと感知する。そのため、効果的にノイズを測定するためには、携帯電話とユーザとも静かな環境にいなければならないという問題がある。
【０００６】
図１Ｂは、従来技術における音声認識ハンズフリーシステムの、一実施形態の構成を示す図面である。当該実施形態においては、ユーザの音声をデジタル信号に変換し、既保存されているデータ値と比較検索して認識した結果を、通信ポートを通じてテキスト情報を携帯電話に伝送するシステム運用方法である。図１Ｂを参照して簡単に説明する。
【０００７】
マイクは、アナログ信号であるユーザの音声信号を受信及び増幅して出力する。コーデック１１は、マイクからの音声信号をデジタル信号に変換する。音声認識エンジン１４は、デジタル信号に変換されたユーザの音声信号を認識し、その結果を既定の形態に変換してプロッセッサー１５へ出力する。データ変換部１２は、携帯電話２０の電話番号情報のうち、後述するプロセッサーから伝送された名前に関する情報を、音声認識エンジン１４から出力されるデータ形態と同じ形態に変換する。変換されたデータは、プロセッサーによりデータ保存部１３に保存される。連結ポート１６は、ハンズフリーシステム１０と携帯電話２０との通信を可能にする通信ポートである。プロセッサー１５は、携帯電話２０の電話番号情報のうち、名前に関する情報をデータ変換部１２に伝送して、音声認識結果と同じ形態に変換させる。また、プロセッサー１５は、音声認識エンジン１４から音声認識結果を受信すれば、これをデータ変換部１２により変換されてデータ保存部１３に保存されたデータと比較し、一致するデータがあるかどうかを判断し、その結果によって電話通話のためのデータを携帯電話２０に伝送する。
【０００８】
しかし、このようなハンズフリーシステム１０は、システムの動作を可能にするためには、音声認識を行なうための別途マイクとプロセッサー１５を使用しなければならない。また、音響出力結果に対する方法及び別途スピーカがないために、他の付加的な音響処理作業を行えない回路構成となっている。そのため、音声認識の用途でしか活用できず、機能が制限的である。
【特許文献１】大韓民国公開特許２００４−００３９５１６号明細書
【特許文献２】大韓民国公開特許２００３−００６０３６５号明細書
【発明の開示】
【発明が解決しようとする課題】
【０００９】
本発明は、前記のような問題点を鑑みてなされたものであり、モバイル機器の機能使用中にモバイル機器の主機能とは関係ない制御部を使用することによって、モバイル機器の性能に影響を与えず、またモバイル機器の性能に影響されずに、ユーザの音声とユーザ周囲の音響及び機器自体で発生する音響をそれぞれ別個の入力経路を通じて同時に処理し、処理結果によって特定の音響を出力可能にする音響入出力拡張方法及び音響入出力拡張システムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
前記目的を達成するための本発明による音響入出力拡張システムは、音響入出力拡張装置とモバイル機器を備える音響入出力拡張システムであって、前記モバイル機器は、前記モバイル機器で発生する音響を出力する第１スピーカと、受話音を出力するレシーバと、前記ユーザの音声信号を受信して入力する第１マイクと、を備え、前記音響入出力拡張装置は、前記入力された音響をデジタル信号に変換し、前記変換されたデジタル信号を音響信号に変換するコーデックと、前記変換された音響信号を第２スピーカを通じて出力する出力部と、ユーザの周囲で発生する音響を受信して入力する第２マイクと、前記第１スピーカから出力されるモバイル機器で発生する音響、前記レシーバから出力される受話音、前記第１マイクから出力されるユーザの音声信号、及び前記第２マイクから出力されるユーザの周囲で発生する音響を入力される入力部と、前記入力部により入力された音響信号を処理する制御部と、モバイル機器とデータ通信インターフェースで連結されて、前記制御部により処理された音響信号を前記モバイル機器へ送信するインターフェース部と、を備える。
【００１１】
また、前記目的を達成するための本発明による音響入出力拡張方法は、第１マイク、レシーバ及び第１マイクを備えるモバイル機器と連結され、第２マイクを備え複数のモードが設定可能であり、前記モード間転換が可能な音響入出力拡張装置における音響入出力拡張方法であって、前記モバイル機器から前記モバイル機器のモード状態を受信する第１ステップと、前記受信したモード状態によって前記第１マイクから入力された送話音、前記レシーバから出力された受話音、前記第２マイクから入力された周辺音及び前記モバイル機器で発生する第１スピーカ出力音を受信して測定する第２ステップと、前記測定結果によって前記送話音、前記受話音、前記周辺音及び前記第１スピーカ出力音の入出力を前記受信したモード状態に合わせて制御する第３ステップと、を含む。
【００１２】
また、前記目的を達成するための本発明による音響入出力拡張方法は、第１スピーカを通じて音響を出力するモバイル機器と連結された音響入出力拡張装置における音響入出力拡張方法であって、多重音響支援機能の開始命令を前記モバイル機器から受信するステップと、前記モバイル機器から出力される第１スピーカ出力音を測定するステップと、前記測定された第１スピーカ出力音に対する多重音響として出力可能な音源を検索して選択するステップと、前記選択された音源を前記第１スピーカ出力音と同時に出力するステップと、を含む。
【００１３】
また、前記目的を達成するための本発明による音響入出力拡張方法は、第１マイク、レシーバ及び第１マイクを備え、複数のモード設定が可能であると共に、前記モード間転換が可能なモバイル機器と連結された音響入出力拡張装置における音響入出力拡張方法であって、前記第１マイクから入力された送話音、前記モバイル機器の第１スピーカから発生する第１スピーカ出力音、前記第２マイクから入力される周辺音を測定するステップと、前記測定された送話音、前記第１スピーカ出力音及び前記周辺音のデータから特異状況発生状態であるかどうかを判断するステップと、前記判断結果、特異状況発生状態である場合、前記送話音、前記第１スピーカ出力音及び前記周辺音のデータと、前記モバイル機器に対するウェークアップ信号を前記モバイル機器に伝送するステップと、前記モバイル機器は、前記特異状況発生状態を知らせる信号を出力するステップと、を含む。
その他の実施形態の具体的な事項は詳細な説明及び図面に含まれている。
【発明の効果】
【００１４】
本発明によれば、モバイル機器で発生するあらゆる音響を、モバイル機器の設計を変更する必要なく、別途に備わった制御部が感知して処理できる。
【００１５】
本発明によれば、ユーザが作る音やユーザ周辺のノイズやモバイル機器で発生する音を、音源別に別途の音響経路を持って別途の信号処理を行うことによって、新たな音響を原音響に追加して出力できる多様な音響処理を行える。
【００１６】
本発明によれば、既存の機器従属的であった音響及び音声を、モバイル機器と独立的に収集及び処理できる装置に拡張具現することによって、音響及び音声処理機能がモバイル機器の主機能及び性能に影響を及ぼさない。同様に、モバイル機器の特定サンプリング及びコーディングフォーマットに従属されずに、音響及び音声処理の性能を大幅に高めうる。
【発明を実施するための最良の形態】
【００１７】
本発明の最良の実施形態について図面を参照して詳細に説明する。なお、明細書全体に亘って同一の参照符号は同一の構成要素を示す。
【００１８】
以下、本発明の望ましい実施形態について添付された図面を参照し、さらに詳細に説明する。なお、同一の構成要素には同一の符号をつけ、重複する説明は省略する。
【００１９】
図２は、本発明の一実施形態に係る音響入出力拡張システムを示す図である。本発明の音響入出力拡張システムは、音響入出力拡張装置と、音響入出力拡張装置が連結されたモバイル機器とから構成されている。図２を参照して、音響入出力拡張装置２００と、音響入出力拡張装置２００とが連結されたモバイル機器１００との構成を説明する。
【００２０】
まず、モバイル機器１００は、アンテナを通じてＲＦ信号を送受信するＲＦ送受信部１１０、プロセッサー１２０、第１スピーカ２１１、２１２、レシーバ２１３及び第１マイク２１４を備える。プロセッサー１２０は、音響入出力拡張装置２００と連結されるインターフェース部１２２と、アナログ信号をデジタル信号に変換するコーデック１２４と、を備える。本実施形態に係るモバイル機器１００は、本実施形態に係る装置である音響入出力拡張装置２００と連結される補助的機能を行う構成以外は、従来の公知技術と同じ構造を持つ。したがって、モバイル機器１００の各構成については詳細な説明を省略する。
【００２１】
一方、音響入出力拡張装置２００は、入力部２１０、第２マイク２１５、コーデック２２０、出力部２３０、制御部２４０、インターフェース部２５０及びデータ保存部２６０を備える。
【００２２】
入力部２１０は、音響を受信して入力する役割を担うものである。入力部２１０は、第１スピーカ２１１，２１２から出力されるモバイル機器１００で発生する音響と、レシーバ２１３から出力される受話音と、第１マイク２１４から出力されるユーザの音声信号と、第２マイク２１５から出力されるユーザの周囲で発生する音響とが、入力される。このとき、第１スピーカ２１１、２１２とレシーバ２１３及び第１マイク２１４は、後述するコーデック２２０と電気的に連結される。
【００２３】
コーデック２２０は、入力部２１０と連結されて、入力部２１０から入力された音響をデジタル信号に変換し、変換されたデジタル信号を音響信号に変換する役割を担う。
【００２４】
出力部２３０は、コーデック２２０で変換された音響信号の伝達を制御部２４０から受け、伝達された音響信号を第２スピーカ２３１、２３２に伝達し、出力する役割を担う。
【００２５】
制御部２４０は、入力部２１０、コーデック２２０及び出力部２３０を制御し、入力部２１０に入力された音響を、コーデック２２０で最終的に音響信号に変換処理させ、出力部２３０に出力させるなどの、多様な信号処理を行う役割を担う。
【００２６】
インターフェース部２５０は、制御部２４０により制御され、モバイル機器１００とデータ通信インターフェースで連結されて、制御部２４０の制御により信号処理された音響信号または特定処理結果信号を、モバイル機器１００と送受信する役割を担う。
【００２７】
ここで、特定処理とは、多様なＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ）を意味し、例えば、信号を変形させる例としては、ＦＩＲフィルタリング（Ｆｉｎｉｔｅ  Ｉｍｐｕｌｓｅ  Ｒｅｓｐｏｎｓｅ  Ｆｉｌｔｅｒｉｎｇ）がある。ＦＩＲフィルタは、特定の周波数の大きさ（ｇａｉｎ，ｅｎｅｒｇｙ）を増幅したり減少したりすることができる。つまり、ＬＰＦ（Ｌｏｗ  Ｐａｓｓ  Ｆｉｌｔｅｒ）を通過させれば、「通常処理結果信号」の低周波数成分はそのままであり、高周波数成分は減殺された音響を出すことができる。
【００２８】
データ保存部２６０は、コーデック２２０で処理された音響信号を連結された制御部２４０から伝達され、データを保存する役割を担う。
【００２９】
なお、本実施形態に係る音響入出力拡張装置２００が具体的にいかなる方法で実施されるかについて、図３ないし図６を参照して説明する。
【００３０】
図３に示すように、左側のフローチャートがモバイル機器１００の動作を示し、右側のフローチャートが本発明の音響入出力拡張装置２００の動作を示している。
【００３１】
まず、モバイル機器１００でモード選択を行なう。例えば、スピーカ通話モード、ハンズフリー通話モード、待機モード及び音響出力モードの４モードのうち一つのモードを選択する（Ｓ１１０）。この時、音響入出力拡張装置２００の制御部２４０には、インターフェース部２５０を通じてモバイル機器１００のモード状態が伝送される（Ｓ２１０）。
【００３２】
制御部２４０は、モバイル機器１００のモード状態が伝送された後、モバイル機器１００内に備わっている第１マイク２１４から入力された送話音と、モバイル機器１００内に備わっているレシーバ２１３から出力された受話音と、音響入出力拡張装置２００内に備わっている第２マイク２１５から入力された周辺音及びモバイル機器１００で発生する第１スピーカ出力音とを受信して、送話音、受話音、周辺音及び第１スピーカ２１１，２１２の出力音を測定する（Ｓ２２０）。
【００３３】
測定の結果によって、送話音、受話音、周辺音及び第１スピーカ出力音の入出力を選択されたモード状態に合わせて制御するか、特定処理を通じて信号を変形させるか、または特定情報を抽出し（Ｓ２３０）、その結果をインターフェース部２５０を通じてモバイル機器１００のプロセッサー１２０に伝送する。
【００３４】
一方、モバイル機器１００側では一つのモードが選択されれば、そのモード状態で音響入出力動作を行う（Ｓ１２０）。ステップＳ２３０で、制御部２４０から制御信号がモバイル機器１００に伝送されれば、モバイル機器１００のプロセッサー１２０は、第１マイク２１４のゲインを制御する信号の有無を判断する（Ｓ１３０）。第１マイク２１４のゲインを制御する制御信号がある場合（ステップＳ１３０で「はい」）には第１マイク２１４のゲインを調整する（Ｓ１４０）。一方、制御信号のない場合（ステップＳ１３０で「いいえ」）には、直ちに音響出力レベルの制御信号の有無を判断する（Ｓ１５０）。
【００３５】
制御部２４０から伝送された制御信号に音響出力レベルの制御信号がある場合（ステップＳ１５０で「はい」）には、音響出力レベルを調整する（Ｓ１６０）。制御信号に音響出力レベルの制御信号がない場合（ステップＳ１５０で「いいえ」）には、選択されたモードの動作を終了するかどうかを判断して（Ｓ１７０）、終了しない場合（ステップＳ１７０で「いいえ」）にはステップＳ１１０に再び戻るか、終了する。
【００３６】
そして、ステップＳ２３０で送話音、受話音、周辺音及び第１スピーカ出力音の入出力を選択されたモード状態に合わせて制御し、その制御結果をモバイル機器１００のプロセッサー１２０に伝送するが、このようなモード状態の種類は、スピーカ通話モード、ハンズフリー通話モード、待機モード及び音響出力モード状態を含む。このような制御過程を、図４Ａないし図４Ｄを参照してそれぞれのモード別に詳細に説明する。
【００３７】
図４Ａ，図４Ｂ，図４Ｃ及び図４Ｄは、本発明の第１実施形態に係る音響入出力拡張方法のフローチャートのうち、モード状態に応じた制御ステップを示す図面である。
【００３８】
図４Ａはモード状態がスピーカ通話モードである場合の制御ステップを示すフローチャートである。
まず、スピーカ通話モードＳ２４０を図４Ａを参照して説明する。
制御部２４０は、ステップＳ２２０において測定された周辺音が、Ｓ２２０において測定された送話音よりも大きいか否かを判断する（Ｓ２４２）。周辺音が送話音より大きい場合（ステップＳ２４２で「はい」）には、第１マイク２１４のゲインをアップさせる（Ｓ２４４ａ）。周辺音が送話音より小さな場合（ステップＳ２４２で「いいえ」）には、第１マイク２１４のゲインをダウンさせる（Ｓ２４４ｂ）。そして、制御部２４０は、第１マイク２１４のゲインをアップまたはダウンさせる制御信号を、インターフェース部２５０を通じてモバイル機器１００に伝送する（Ｓ２４６）。
【００３９】
図４Ｂはモード状態がハンズフリー通話モードである場合の制御ステップを示すフローチャートである。
ハンズフリー通話モードＳ２５０を図４Ｂを参照して説明する。
制御部２４０は、ステップＳ２２０において測定された周辺音が、ステップＳ２２０において測定された受話音よりも大きいか否かを判断する（Ｓ２５２）。周辺音が受話音より大きい場合（ステップＳ２５２で「はい」）には、レシーバ２１３のボリュームをアップさせる（Ｓ２５４ａ）。周辺音が受話音より小さな場合（Ｓ２５２で「いいえ」）には、レシーバ２１３のボリュームをダウンさせる（Ｓ２５４ｂ）。そして、制御部２４０は、レシーバ２１３のボリュームをアップまたはダウンさせる制御信号を、インターフェース部２５０を通じてモバイル機器１００に伝送する（Ｓ２５６）。
【００４０】
図４Ｃはモード状態が待機モードである場合の制御ステップを示すフローチャートである。
待機モードＳ２６０を図４Ａを参照して説明する。
制御部２４０はステップ２１０において伝送されたモバイル機器１００の受信設定が、ベルモードであるか否か（受信設定がベルモード、振動またはライトモードであるか）を判断する（Ｓ２６１）。もし、受信設定がベルモードではない場合（ステップＳ２６１で「いいえ」）には、振動またはライト受信設定に対する制御信号をインターフェース部２５０を通じてモバイル機器１００に伝送する（Ｓ２６２）。受信設定がベルモードである場合（ステップＳ２６１で「はい」）には、ステップＳ２２０で測定された周辺音とベルの特定レベルでのボリュームとを比較し（Ｓ２６３）、周辺音が特定レベル音のボリュームより大きい場合（ステップＳ２６３で「はい」）には、ベル音のボリュームをアップさせ（Ｓ２６４ａ）、周辺音が特定レベル音のボリュームより小さな場合（ステップＳ２６３で「いいえ」）には、ベル音のボリュームをダウンさせる（Ｓ２６４ｂ）。そして、ベル音のボリュームをアップまたはダウンさせる制御信号を、インターフェース部２５０を通じてモバイル機器１００に伝送する（Ｓ２６５）。
【００４１】
図４Ｄはモード状態が音響出力モードである場合の制御ステップを示すフローチャートである。
最後に、音響出力モードＳ２７０を図４Ｄを参照して説明する。
制御部２４０は、ステップＳ２２０で測定された周辺音が、ステップＳ２２０で測定された第１スピーカ出力音よりも大きいか否かを判断する（Ｓ２７２）、周辺音が第１スピーカ出力音より大きい場合（ステップＳ２７２で「はい」）には、第１スピーカ出力音のボリュームをアップさせる（Ｓ２７４ａ）。周辺音が第１スピーカ出力音より小さな場合（ステップＳ２７２で「いいえ」）には第１スピーカ出力音のボリュームをダウンさせる（Ｓ２７４ｂ）。そして、第１スピーカ２１１、２１２ボリュームをアップまたはダウンさせる制御信号を、インターフェース部２５０を通じてモバイル機器１００に伝送する（Ｓ２７６）。
【００４２】
図５は、本発明の第２実施形態に係る音響入出力拡張方法を示すフローチャートである。図３のように、左側のフローチャートが、モバイル機器１００の動作を示し、右側のフローチャートが、本発明の音響入出力拡張装置２００の動作を示している。
【００４３】
まず、モバイル機器１００が第１スピーカ２１１、２１２を通じて音響を出力する（Ｓ３０２）。そして、ユーザは多重音響支援機能を選択するか否かを判断する（Ｓ３０４）。ここで、第１スピーカ２１１、２１２を通じて出力される第１スピーカ出力音としては、ｍｐ３ファイルの音楽を例として挙げることができる。また、多重音響支援機能の代表的な例としては、ビートボックス機能を挙げることができる。
【００４４】
一方、多重音響支援機能を選択しない場合（ステップＳ３０４で「いいえ」）には、音響出力を終了するか否かを判断するステップ（Ｓ３１２）へ進み、多重音響支援機能を選択する場合（ステップＳ３０４で「はい」）には、多重音響支援機能の開始命令をインターフェース部２５０を通じて音響入出力拡張装置２００に伝送する（Ｓ３０６）。
音響入出力拡張装置２００の制御部２４０は、インターフェース部２５０を通じて、多重音響支援機能の開始命令をモバイル機器１００から伝送される（Ｓ４０２）。そして、制御部２４０は、モバイル機器１００の第１スピーカ２１１、２１２を通じて出力される、第１スピーカ出力音を測定する（Ｓ４０４）。
【００４５】
測定の結果、制御部２４０は、第１スピーカ出力音とよく合う、例えば、ビートボックス音や和音などの多重音響を出力可能にするため、測定された第１スピーカ出力音に対する多重音響に出力可能な音源をモバイル機器１００やデータ保存部２６０（図２参照）等から検索して選択する（Ｓ４０６）。そして、制御部２４０により選択された音源を、第１スピーカ出力音と同時に出力する（Ｓ４０８）。このとき、音源を出力する方法は色々あるが、例えば、選択された音源を複数の第２スピーカ２３１、２３２を通じて出力してもよく、モバイル機器１００に備わった複数の第１スピーカ２１１、２１２を通じて出力してもよい。さらに、第１スピーカ２１１、２１２と第２スピーカ２３１、２３２とを通じて同時に出力してもよい。一方、第１スピーカ出力音とミキシングして出力してもよい（Ｓ４１０）。この時、ミキシングはハードウェア的にミキシングするか、ソフトウェア的にミキシングする方法いずれも可能である。
【００４６】
ここでハードウェアミキシングとは、互いに異なる２個の音源のそれぞれの「電気的出力（図２のコーデック１２４出力と出力部２３０の出力）をハードウェアミキシング回路を通して一つの音源として合致させる方法をいう。一方、ソフトウェアミキシングとは、個別のハードウェアなしで互いに異なる２個の「データ」をＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ）ソフトウェアを通し１個の「データ」に一つの音源として合致させる方法をいう。
【００４７】
一方、ステップＳ３０６で、モバイル機器１００側が多重音響支援機能の開始命令を、インターフェース部２５０を通じて音響入出力拡張装置２００に伝送した後、ユーザは多重音響支援機能を終了するかどうかを選択する（Ｓ３０８）。ユーザが終了選択（ステップＳ３０８で「はい」）をすれば、モバイル機器１００側で多重音響支援機能の終了命令を、インターフェース部２５０を通じて音響入出力拡張装置２００に伝送する（Ｓ３１０）。
【００４８】
音響入出力拡張装置２００の制御部２４０は、インターフェース部２５０を通じて多重音響支援機能の終了命令をモバイル機器１００から伝送される（Ｓ４１２）。これにより、音響入出力拡張装置２００は多重音響支援機能を終了する。
【００４９】
一方、ステップＳ３１０でモバイル機器１００側が多重音響支援機能の終了命令を、音響入出力拡張装置２００に伝送した後、ユーザはモバイル機器１００で発生する第１スピーカ出力音の出力を終了するかどうかを判断し（Ｓ３１２）、終了する場合（ステップＳ３１２で「はい」）には音響がそれ以上出力されず、終了しない場合（ステップＳ３１２で「いいえ」）には再びステップＳ３０２に戻る。
【００５０】
図６は、本発明の第３実施形態に係る音響入出力拡張方法のフローチャートを示す図面である。図６の第３実施形態とは、本発明の装置である音響入出力拡張装置２００がモバイル機器１００の動作モードとは独立的にモニタリング機能を行なう点である。例えば、モバイル機器１００がスリープモード状態であるか、または特定動作モード状態である時、モバイル機器１００の電源及びプロセッサー１２０状態とは関係なく、音響入出力拡張装置２００は、周期的にまたは持続的にモバイル機器１００の出力音とユーザ音声及び周辺環境の音響状態をモニタリングまたはレコーディングして多様な付加処理を行うことができる。
【００５１】
まず、モバイル機器１００内に備わっている第１マイク２１４から入力される送話音と、音響入出力拡張装置２００内に備わっている第２マイク２１５から入力されるユーザー周囲の周辺音及びモバイル機器１００から発生して第１スピーカ２１１、２１２を通じて出力される第１スピーカ出力音を、音響入出力拡張装置２００が測定する（Ｓ６０２）。そして、制御部２４０は、測定された第１スピーカ出力音及び周辺音のデータから特異状況発生状態であるかどうかを判断する（Ｓ６０４）。ここで、特異状況とは、例えば、ユーザがモバイル機器１００を地面に落とす音や、モバイル機器がユーザの危急状況でユーザの悲鳴またはユーザが静かな場所から騒々しい場所に移動する場合のように、音響環境の異なる場所へ移動する時の周辺音などを、第２マイク２１５により周辺音として入力される状況をあげることができる。また、任意の状況でユーザが発声する特定音声命令が第１マイク２１４により入力される状況も含まれる。
なお、特定音声命令とは、例えばユーザの悲鳴によって、モバイル機器が自動的に、警察や救急センター、あるいは家族に電話をかけるようにすることをいう。
【００５２】
一方、特異状況発生状態と判断された場合（ステップＳ６０４で「はい」）は、測定された第１スピーカ出力音及びユーザ音声及び周辺音の関連データ及びウェークアップ信号などを、モバイル機器１００に伝送し（Ｓ６０６）、このようなデータ及び信号はモバイル機器１００の各該当モードに伝送される。もし、モバイル機器１００が待機モードにあるか、スリープモードにある場合であっても、ウェークアップ信号によりモニタリング機能が適用できる。
【００５３】
すなわち、伝送されたモバイル機器１００は、自身がいかなるモードにあるかに関係なく、特異状況発生を知らせる信号を出力する。ここで、特異状況発生を知らせる信号は、第１スピーカ２１１、２１２または第２スピーカ２３１、２３２を通じて送出されてもよく、第１スピーカ２１１、２１２と第２スピーカ２３１、２３２両側を通じて同時に送出されてもよい。また、モバイル機器１００に装着された多様な出力装置、例えば、ＬＣＤ画面や振動モータ、ライトなどにより出力されてもよい。
【００５４】
一方、送出される音響は、ユーザによりあらかじめ設定された音響信号になり、またはユーザにより設定された他のモバイル機器に対する発信信号になる。
なお、他のモバイル機器とは、例えば、本実施形態のモバイル機器１００と連結される他人のモバイル機器をいう。また、他のモバイル機器に対する発信信号とは、例えば、特定音声命令の音声信号により自動的に発信することをいう。
【００５５】
一方、特異状況発生状態でないと判断された場合（ステップＳ６０４で「いいえ」）には、モニタリング機能を終了するか否かを判断する（Ｓ６０８）。モニタリング機能を終了する信号が発生しなければ改めてステップＳ６０２の過程から遂行するようになり、モニタリング機能を終了する信号が発生すればモニタリング機能を終了する。
【００５６】
そして、本発明の装置である音響入出力拡張装置２００は、モバイル機器１００に装着されたコーデック１２４とは関係なく目的機能に適したサンプリング方式及びエンコーディング方式を採用できる。例えば、モバイル機器１００のコーデック１２４は、８ｂｉｔ８ｋＨｚのサンプリング及びＡＤＰＣＭ方式のエンコーディングを行っても、音響入出力拡張装置２００のコーデック２２０は、１６ｂｉｔ１６ｋＨｚサンプリング及びＰＣＭエンコーディングをモバイル機器１００の動作とは別個に行うので、モバイル機器１００のエンコーディング方式と別個の独立的なエンコーディング機能を持ち、制御部２４０は、高品質の音響処理性能を持つようになり、データ保存部２６０は、高音質の音響情報を保存する。
【００５７】
以上、添付図を参照して本発明の実施形態を説明したが、本発明が属する技術分野で当業者ならば本発明がその技術的思想や必須特徴を外れない範囲内で変形及び置換、変形及び変更が可能なので他の具体的な形に実施されうるということが理解できるであろう。したがって、前述した実施形態はすべての面で例示的なものであって、本発明の技術的範囲は、特許請求の範囲に基づいて定められ、発明を実施するための最良の形態によって制限されない。
【産業上の利用可能性】
【００５８】
本発明は、音響入出力拡張装置の関連技術分野に好適に用いられる。
【図面の簡単な説明】
【００５９】
【図１Ａ】従来技術によるノイズ測定機能を持つ端末機の一実施形態による構成を示す図面である。
【図１Ｂ】従来技術による音声認識ハンズフリーシステムの一実施形態による構成を示す図面である。
【図２】本発明の一実施形態に係る音響入出力拡張システムを示す図である。
【図３】本発明の第１実施形態による音響入出力拡張方法の全体フローを示す図面である。
【図４Ａ】本発明の第１実施形態による音響入出力拡張方法のフローのうち、スピーカー通話モードの制御ステップを示す図面である。
【図４Ｂ】本発明の第１実施形態による音響入出力拡張方法のフローのうち、ハンズフリー通話モード制御ステップを示す図面である。
【図４Ｃ】本発明の第１実施形態による音響入出力拡張方法のフローのうち、待機モードの制御ステップを示す図面である。
【図４Ｄ】本発明の第１実施形態による音響入出力拡張方法のフローのうち、音響出力モードの制御ステップを示す図面である。
【図５】本発明の第２実施形態による音響入出力拡張方法のフローを示す図面である。
【図６】本発明の第３実施形態による音響入出力拡張方法のフローを示す図面である。
【符号の説明】
【００６０】
１００    モバイル機器
２００    音響入出力拡張装置
２１０    入力部
２２０    コーデック
２３０    出力部
２４０    制御部
２５０    インターフェース部
２６０    データ保存部
【図１Ａ】
2007053748.tif 000003
【図１Ｂ】
2007053748.tif 000004
【図２】
2007053748.tif 000005
【図３】
2007053748.tif 000006
【図４Ａ】
2007053748.tif 000007
【図４Ｂ】
2007053748.tif 000008
【図４Ｃ】
2007053748.tif 000009
【図４Ｄ】
2007053748.tif 000010
【図５】
2007053748.tif 000011
【図６】
2007053748.tif 000012