(57)【要約】【課題】通話時において、音響情報を通話に支障を来たすことなく通話者の音声信号とともに送信することができる移動電話端末及びプログラムを提供する。また、通話時において、通話先の移動電話端末が有する機能を多彩な手段により遠隔制御することができる移動電話端末及びプログラムを提供する。【解決手段】本発明に係るディジタル携帯電話機１は、音響情報格納手段と、格納されている音響情報の中から選択された音響情報の音量を、入力された通話者の音声信号の音量に基づいて調整する音響情報調整手段と、通話者の音声信号と音量が調整された音響情報とを重畳して送信する重畳送信手段とを備える。また、本発明に係るディジタル携帯電話機１は、通話先の移動電話端末が有する機能に対する制御内容を通話者に選択させる選択手段と、通話先の移動電話端末を制御内容にしたがって動作させる制御情報を生成して送信する制御情報生成送信手段とを備える。【選択図】      図１
2004343566.tif 000002
【特許請求の範囲】
【請求項１】
音響情報を格納する音響情報格納手段と、
格納されている前記音響情報の中から選択された前記音響情報の音量を、入力された通話者の音声信号の音量に基づいて調整する音響情報調整手段と、
前記通話者の音声信号と、音量が調整された前記音響情報とを重畳し、前記音声信号と前記音響情報とが重畳された信号を通話先に送信する重畳送信手段と
を備えることを特徴とする移動電話端末。
【請求項２】
前記通話者の音声信号に含まれているノイズを抑制するノイズ抑制手段をさらに備え、
前記音響情報調整手段は、前記ノイズ抑制手段によってノイズが抑制された前記通話者の音声信号の音量に基づいて、前記音響情報の音量を調整し、
前記重畳送信手段は、前記ノイズ抑制手段によってノイズが抑制された前記通話者の音声信号と、音量が調整された前記音響情報とを重畳することを特徴とする請求項１に記載の移動電話端末。
【請求項３】
前記音響情報調整手段は、前記通話者の音声信号の音量と、前記通話先から受信した受信音声信号の音量とに基づいて、前記音響情報の音量を調整することを特徴とする請求項１に記載の移動電話端末。
【請求項４】
前記音響情報調整手段は、少なくとも前記通話者の音声信号または通話先から受信した受信音声信号の音量の時間的な変化の過程に基づいて、前記音響情報の音量を調整することを特徴とする請求項１に記載の移動電話端末。
【請求項５】
前記音響情報調整手段によって音量が調整された前記音響情報を再生する音響情報再生手段をさらに備えることを特徴とする請求項１に記載の移動電話端末。
【請求項６】
通話先の移動電話端末が有する機能に対する制御内容を通話者に選択させる選択手段と、
選択された前記制御内容に基づいて、前記通話先の移動電話端末を、前記制御内容にしたがって動作させる制御情報を生成し、通話中において、生成した前記制御情報を前記通話先の移動電話端末に送信する制御情報生成送信手段と
を備えることを特徴とする移動電話端末。
【請求項７】
選択された前記制御内容に基づいて、前記通話先の移動電話端末において行われる動作と同一の動作を行うことを特徴とする請求項６に記載の移動電話端末。
【請求項８】
選択された前記制御内容に基づいて、前記通話先の移動電話端末において行われる動作を示す映像を表示することを特徴とする請求項６に記載の移動電話端末。
【請求項９】
移動電話端末に実行させるプログラムであって、
前記移動電話端末が、
音響情報を格納し、
格納されている前記音響情報の中から選択された前記音響情報の音量を、入力された通話者の音声信号の音量に基づいて調整し、
前記通話者の音声信号と、音量が調整された前記音響情報とが重畳された信号を通話先に送信する
ように機能させることを特徴とするプログラム。
【請求項１０】
移動電話端末に実行させるプログラムであって、
前記移動電話端末が、
制御の対象とする通話先の移動電話端末の機能に対する制御内容を通話者に選択させ、
選択された前記制御内容とに基づいて、前記通話先の移動電話端末を前記制御内容にしたがって動作させる制御情報を生成し、
通話中において、生成した前記制御情報を前記通話先の移動電話端末に送信する
ように機能させることを特徴とするプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、移動電話端末及びプログラム、特に、楽曲や効果音等の音響情報を送信する移動電話端末及びプログラムに関する。
【０００２】
また、本発明は、通話先の移動電話端末が有する機能を遠隔制御する移動電話端末及びプログラムに関する。
【０００３】
【従来の技術】
従来、通話者の音声以外の情報を通話先に送信し、通話の雰囲気を向上させるとともに、通話者の意思や感情の伝達に資する方法が提案、実現されている。
【０００４】
このような方法のひとつとして、楽曲や効果音等の音響情報を通話者の音声信号とともに送信する方法がある。
【０００５】
例えば、通話者が所望のタイミングで効果音等を送出することのできる移動電話端末が知られている（特許文献１参照）。この移動電話端末は、記憶部に格納された楽曲や効果音等の音響情報と、マイクによって取得された通話者の音声信号とを重畳して、通話先に送信するものである。また、通話者の電話端末間に設定された通信路と分岐接続されたサーバコンピュータから、通話者が指定した楽曲や効果音等の音響情報を通話先の電話端末に送信させる方法が知られている（特許文献２参照）。
【０００６】
また、他の方法として、通話者の音声以外の手段によって、通話者の意思や感情を伝達する方法がある。
【０００７】
例えば、移動電話端末が有するバイブレーション機能を通話元の移動電話端末から遠隔制御することにより、通話者の意思や感情等を伝達する方法が知られている（特許文献３参照）。また、通話に関するものではないが、送信者からの電子メールを中継するサーバコンピュータが、当該電子メールに含まれている特定のキーワード、例えば、「楽しい」、「さみしい」、「怒る」等を検出し、検出したキーワードに相応しいアニメーションを付加して当該電子メールを宛先に送信する「感性メール」サービスが提供されている。
【０００８】
特に、第３世代のディジタル携帯電話システムでは、ＴＶ電話サービスにより、通話者の表情を動画像により確認できるが、それ故、多彩な手段によって、通話者の意思や感情を伝達し、通話の雰囲気を向上させることが要求されている。
【０００９】
【特許文献１】
特開２００２−５１１１６号公報（第３−５頁、第２図）
【００１０】
【特許文献２】
特開２００２−２７１４９４号公報（第２−５頁、第１図）
【００１１】
【特許文献３】
特開２００１−３２０７７５号公報（第４−５頁、第５−６図）
【００１２】
【発明が解決しようとする課題】
しかしながら、上述した従来技術には、次に示すような課題があった。
【００１３】
まず、楽曲や効果音等の音響情報を通話者の音声信号とともに送信する従来の方法では、通話者が会話しているか否かに拘わらず、楽曲や効果音等の音響情報が常に一定の音量によって通話先に送信されるため、円滑な通話に支障を来たす場合があるという問題があった。
【００１４】
また、従来の移動電話端末は、繁華街や車中等の喧騒な場所においても明瞭な通話を確保するため、通話者の音声信号以外の情報（背景雑音）を抑制（ノイズキャンセリング技術）するようになっている。このため、従来の移動電話端末を用いて音声以外の信号、すなわち楽曲や効果音等の音響情報を送信すると、受信側において歪んで再生されたり、雑音のように聞こえるといった問題があった。
【００１５】
また、通話先の移動電話端末のバイブレーション機能を通話元から遠隔制御する方法は、単純なバイブレーション機能の動作のみによって、通話者の意思や感情を伝達するものであり、多彩な手段によって、通話者の意思や感情を伝達し、通話の雰囲気を向上させるとの要求に応えるには充分でないという問題があった。
【００１６】
さらに、電子メールにアニメーションを付加して送信する方法は、リアルタイム性を有する通話には、そのまま適用することができないという問題があった。
【００１７】
そこで、本発明は、通話時において、音響情報を通話に支障を来たすことなく通話者の音声信号とともに送信することができる移動電話端末及びプログラムを提供することをその目的とする。
【００１８】
また、本発明は、通話時において、通話先の移動電話端末が有する機能を多彩な手段により遠隔制御することができる移動電話端末及びプログラムを提供することをその目的とする。
【００１９】
【課題を解決するための手段】
上述した課題を解決するため、本発明は、次のような特徴を有している。まず、本発明の第１の特徴は、音響情報を格納する音響情報格納手段と、格納されている前記音響情報の中から選択された前記音響情報の音量を、入力された通話者の音声信号の音量に基づいて調整する音響情報調整手段と、前記通話者の音声信号と、音量が調整された前記音響情報とを重畳し、前記音声信号と前記音響情報とが重畳された信号を通話先に送信する重畳送信手段とを備える移動電話端末であることを要旨とする。
【００２０】
かかる特徴によれば、音響情報調整手段が、通話者の音声信号の音量に基づいて、通話者の音声信号とともに送信される楽曲や効果音等の音響情報の音量を調整するため、通話に支障を来たすことなく音響情報を送信することができる。
【００２１】
本発明の第２の特徴は、本発明の第１の特徴における移動電話端末であって、前記通話者の音声信号に含まれているノイズを抑制するノイズ抑制手段をさらに備え、前記音響情報調整手段が、前記ノイズ抑制手段によってノイズが抑制された前記通話者の音声信号の音量に基づいて、前記音響情報の音量を調整し、前記重畳送信手段が、前記前記ノイズ抑制手段によってノイズが抑制された前記通話者の音声信号と、音量が調整された前記音響情報とを重畳することを要旨とする。
【００２２】
かかる特徴によれば、ノイズ抑制手段によってノイズの抑制された通話者の音声信号と、ノイズ抑制手段を経由しない音響情報とが重畳されるため、通話者の背景雑音の抑制する効果を損なうことなく、音響情報を通話先に送信することができる。
【００２３】
本発明の第３の特徴は、本発明の第１の特徴における移動電話端末であって、前記音響情報調整手段が、前記通話者の音声信号の音量と、前記通話先から受信した受信音声信号の音量とに基づいて、前記音響情報の音量を調整することことを要旨とする。
【００２４】
かかる特徴によれば、送信される通話者の音声信号と、通話先から受信した受信音声信号とに基づいて音響情報の音量が調整されるため、送信方向のみならず、受信方向の通話の状態に基づいて、通話先に送信される音響情報の音量を調整することができる。
【００２５】
本発明の第４の特徴は、本発明の第１の特徴おける移動電話端末であって、前記音響情報調整手段が、少なくとも前記通話者の音声信号または通話先から受信した受信音声信号の音量の時間的な変化の過程に基づいて、前記音響情報の音量を調整することを要旨とする。
【００２６】
かかる特徴によれば、音響情報調整手段が、通話者から取得した音声信号の音量の時間的な変化の過程に基づいて、音響情報の音量を調整するため、例えば、音声信号の音量が、所定の音量を超える状態が継続した場合、通話者の気分が高揚していると推定し、音響情報の音量も上昇または下降させるといったような、通話の状況に応じて、効果的に音響情報の音量を調整することができる。
【００２７】
本発明の第５の特徴は、本発明の第１の特徴における移動電話端末であって、前記音響情報調整手段によって音量が調整された前記音響情報を再生する音響情報再生手段をさらに備えることを要旨とする。
【００２８】
かかる特徴によれば、音響情報再生手段が、音響情報調整手段によって音量が調整された音響情報を再生するため、移動電話端末の通話者は、通話先において再生される音響情報によって創出される雰囲気を共有することができる。
【００２９】
本発明の第６の特徴は、通話先の移動電話端末が有する機能に対する制御内容を通話者に選択させる選択手段と、選択された前記制御内容に基づいて、前記通話先の移動電話端末を、前記制御内容にしたがって動作させる制御情報を生成し、通話中において、生成した前記制御情報を前記通話先の移動電話端末に送信する制御情報生成送信手段とを備える移動電話端末であることを要旨とする。
【００３０】
かかる特徴によれば、選択手段が、通話先の移動電話端末が有する機能に対する制御内容を通話者に選択させ、制御情報生成送信手段が、選択された制御内容に基づいて、通話先の移動電話端末を制御内容にしたがって動作させる制御情報を生成する。このため、例えば、通話先の移動電話端末が有するバイブレーション機能の起動、ＬＥＤの点滅、またはディスプレイに映像を表示させるといった制御内容の中から、制御内容を選択して制御することにより、通話者は、音声以外の多彩な手段により、意思や感情を伝達することができる。
【００３１】
本発明の第７の特徴は、本発明の第６の特徴における移動電話端末であって、選択された前記制御内容に基づいて、前記通話先の移動電話端末において行われる動作と同一の動作を行うことを要旨とする。
【００３２】
かかる特徴によれば、通話先の移動電話端末と、通話元の移動電話端末との双方において、選択された制御情報に基づく動作が行われるため、通話者は、選択した制御内容に基づく動作を容易に確認することができる。
【００３３】
本発明の第８の特徴は、本発明の第６の特徴における移動電話端末であって、選択された前記制御内容に基づいて、前記通話先の移動電話端末において行われる動作を示す映像を表示することを要旨とする。
【００３４】
かかる特徴によれば、移動電話端末が、選択された制御情報に基づいて、通話先の移動電話端末において行われる動作を示す映像を表示するため、通話者は、選択した制御内容を容易に確認することができる。
【００３５】
本発明の第９の特徴は、移動電話端末に実行させるプログラムであって、前記移動電話端末が、音響情報を格納し、格納されている前記音響情報の中から選択された前記音響情報の音量を、入力された通話者の音声信号の音量に基づいて調整し、前記通話者の音声信号と、音量が調整された前記音響情報とが重畳された信号を通話先に送信するよう機能させることを要旨とする。
【００３６】
本発明の第１０の特徴は、移動電話端末に実行させるプログラムであって、前記移動電話端末が、制御の対象とする通話先の移動電話端末の機能に対する制御内容を通話者に選択させ、選択された前記制御内容とに基づいて、前記通話先の移動電話端末を前記制御内容にしたがって動作させる制御情報を生成し、
通話中において、生成した前記制御情報を前記通話先の移動電話端末に送信するように機能させることを要旨とする。
【００３７】
【発明の実施の形態】
以下、図面を参照して、本発明の実施形態について説明する。図１は、本発明の実施形態に係る移動電話端末を含む全体構成図である。
【００３８】
同図に示すように本実施形態に係る移動電話端末であるディジタル携帯電話機１は、所定の無線周波数を用い、ディジタル携帯電話網３を介して無線通信を行うものである。また、ディジタル携帯電話機２も、ディジタル携帯電話機１と同様に、ディジタル携帯電話網３を介して無線通信を行うものである。
【００３９】
また、ディジタル携帯電話機１，２は、第３世代のディジタル携帯電話システムにおいて用いられるディジタル携帯電話機であって、ＴＶ電話サービス等を通話者に提供することができる。さらに、ディジタル携帯電話機１，２は、ＩＥＥＥ８０２．１５等の規格に準拠した近距離無線通信と、赤外線通信（ＩｒＤＡ）を行うことができる。さらに、ディジタル携帯電話機１，２は、ＩＣカードインターフェースを備えている。
【００４０】
ＩＰ通信網４は、インターネットを含むＩＰプロトコル群をベースとする通信網である。本実施形態では、ＩＰ通信網４には、音響情報提供サーバ５と、アプリケーションプログラム提供サーバ６と、パーソナルコンピュータ３５，４４とが接続されている。
【００４１】
音響情報提供サーバ５は、ディジタル携帯電話機１，２及びパーソナルコンピュータ３５，４４に対して、音響情報を提供するものである。なお、音響情報提供サーバ５において提供される音響情報としては、例えば、ＭＩＤＩ（Ｍｕｓｉｃａｌ  Ｉｎｓｔｒｕｍｅｎｔｓ  Ｄｉｇｉｔａｌ  Ｉｎｔｅｒｆａｃｅ）規格に基づいて記述された楽曲や効果音等のデータを用いることができる。
【００４２】
アプリケーションプログラム提供サーバ６は、ディジタル携帯電話機１，２において動作させるアプリケーションプログラムを提供するものである。
【００４３】
ディジタル携帯電話機１，２は、ディジタル携帯電話網３と、ＩＰ通信網４とを介して音響情報提供サーバ５やアプリケーションプログラム提供サーバ６に接続し、音響情報やアプリケーションプログラムを取得することができる。
【００４４】
また、パーソナルコンピュータ３５，４４も、ＩＰ通信網４を介して、音響情報提供サーバ５と、アプリケーションプログラム提供サーバ６とに接続し、音響情報やアプリケーションプログラムを取得することができる。パーソナルコンピュータ３５，４４によって取得された音響情報またはアプリケーションプログラムは、近距離無線通または赤外線通信により、ディジタル携帯電話機１，２に提供することもできる。また、ディジタル携帯電話機１，２が備えているＩＣカードインターフェースを介して音響情報またはアプリケーションプログラムを提供することもできる。
【００４５】
［第１の実施形態］
次に、本発明の第１の実施形態について説明する。第１の実施形態に係るディジタル携帯電話機１，２は、通話者の音声信号の音量に基づいて、音響情報の音量を調整し、音量が調整された音響情報を音声信号とともに通話先に送信するものである。
【００４６】
（移動電話端末の構成）
図２は、ディジタル携帯電話機１，２の機能ブロック構成を示す図である。なお、ディジタル携帯電話機１，２は、同様の構成を有するため、以下、ディジタル携帯電話機１の構成について説明する。
【００４７】
ディジタル携帯電話機１は、無線信号の送受信等を行うため、無線受信部７と、無線送信部８と、発着信制御部１０と、パケット通信制御部１１と、多重化部３０と、多重分離部３１とを有している。
【００４８】
また、ディジタル携帯電話機１は、音響情報やアプリケーションプログラムを取得するため、ＩＣカードインタフェース部１３と、近距離無線通信部１４と、赤外線通信部１５とを有している。
【００４９】
さらに、ディジタル携帯電話機１は、通話者とのインターフェースとして、操作キー部１６と、可動部１７と、スピーカ２６と、マイク１９と、ディスプレイ３４と、カメラ２８とを有している。
【００５０】
操作キー部１６は、ディジタル携帯電話機１，２の筐体に配置されたテンキーやファンクションキー等から構成される。また、可動部１７は、ディジタル携帯電話機１，２に設けられている折り曲げ部等の可動部分であり、当該可動部分が操作されたことを検出することができる。
【００５１】
次に、音声信号及び音響情報の処理を行う機能ブロックについて説明する。ディジタル携帯電話機１は、音声信号及び音響情報の処理を行うため、ディジタルデータ格納部１２と、音響情報再生部１８と、ノイズキャンセリング回路２０と、音声・音響情報重畳部２１と、送信音量・変化検出部２２と、受信音量・変化検出部２３と、音量決定部２４と、受信音響合成増幅部２５とを有している。なお、音響情報再生部１８と、ノイズキャンセリング回路２０と、音声・音響情報重畳部２１と、送信音量・変化検出部２２と、受信音量・変化検出部２３と、音量決定部２４と、受信音響合成増幅部２５とは、ダウンロード可能なプログラムとして提供することができる。
【００５２】
ディジタルデータ格納部１２は、音響情報を格納するものであり、本実施形態では、音響情報格納手段を構成する。また、ディジタルデータ格納部１２は、アプリケーションプログラムを格納することもできる。
【００５３】
音響情報再生部１８は、ディジタルデータ格納部１２に格納されている音響情報の中から、通話者によって選択された音響情報を再生するものである。
【００５４】
具体的には、音響情報再生部１８は、操作キー部１６または可動部１７からの指示に基づいて、選択された音響情報をディジタルデータ格納部１２から読み出し、音量決定部２４によって決定された音量に基づいて、当該音響情報の音量を調整して再生する。
【００５５】
また、通話者は、操作キー部１６を用いて、音響情報再生部１８に対し、スピーカ２６から再生される音響情報の音量を指示することができる。
【００５６】
ノイズキャンセリング回路２０は、マイク１９によって取得された通話者の音声信号に含まれている背景雑音を抑制するものであり、本実施形態では、ノイズ抑制手段を構成する。ノイズキャンセリング回路２０は、背景雑音を抑制した通話者の音声信号を音声・音響情報重畳部２１と、送信音量・変化検出部２２とに送出する。
【００５７】
送信音量・変化検出部２２は、ノイズキャンセリング回路２０によって背景雑音が抑制された通話者の音声信号の音量と、検出した音量の時間的な変化の過程とを検出するものである。
【００５８】
受信音量・変化検出部２３は、広帯域音声・音響情報復号化部３２を介して通話先、すなわち本実施形態では、ディジタル携帯電話機２から受信した音声信号（受信音声信号）の音量と、検出した音量の時間的な変化の過程とを検出するものである。
【００５９】
音量決定部２４は、送信音量・変化検出部２２によって検出された通話者の音声信号の音量と、受信音量・変化検出部２３によって検出されたディジタル携帯電話機２から受信した受信音声信号の音量とに基づいて、音響情報再生部１８によって再生される音響情報の音量を決定するものである。なお、本実施形態では、音響情報再生部１８と、音量決定部２４とによって、音響情報調整手段を構成する。
【００６０】
音量決定部２４は、例えば、送信音量・変化検出部２２によって検出された通話者の音声信号の音量が、所定の音量以上である場合、音響情報再生部１８によって再生される音響情報の音量を低下させ、通話に支障を来たさないように、音響情報の音量を調整することができる。
【００６１】
また、音量決定部２４は、送信音量・変化検出部２２と、受信音量・変化検出部２３とによって検出された双方の音量に基づいて、音響情報再生部１８によって再生される音響情報の音量を決定することができる。このため、送信方向のみならず、受信方向の通話の状態に基づいて、ディジタル携帯電話機２に送信される音響情報の音量を調整することができる。
【００６２】
また、音量決定部２４は、送信音量・変化検出部２２または受信音量・変化検出部２３によって検出された音声信号の音量の時間的な変化の過程に基づいて、音響情報の音量を決定することができる。
【００６３】
例えば、音量決定部２４は、送信音量・変化検出部２２または受信音量・変化検出部２３によって検出された声信号の音量が、所定の音量を超える状態が継続した場合、通話者の気分が高揚していると推定し、音響情報の音量も上昇または下降させるといったような、通話の状況に応じて、効果的に音響情報の音量を調整することができる。
【００６４】
また、通話者は、操作キー部１６または可動部１７を用いて、音量決定部２４に対し、音声信号に重畳される音響情報の音量を指示することができる。
【００６５】
音量決定部２４は、操作キー部１６からの音量の指示に基づいて、再生する音響情報の基準となる音量を設定し、設定された音量に基づいて、音響情報再生部１８から再生する音響情報の音量を調整することができる。
【００６６】
音声・音響情報重畳部２１は、ノイズキャンセリング回路２０から送出された通話者の音声信号と、音響情報再生部１８によって再生された音響情報とを重畳するものである。
【００６７】
具体的には、音声・音響情報重畳部２１は、音響情報再生部１８によって再生された音響情報をノイズキャンセリング回路２０から送出された音声信号に重畳し、音響情報が重畳された音声信号を広帯域音声・音響情報符号化部２７に送出する。
【００６８】
受信音響合成増幅部２５は、音響情報再生部１８によって再生された音響情報、すなわち音量決定部２４によって決定された音量に基づいて、音量が調整された音響情報を、広帯域音声・音響情報復号化部３２から送出された受信音声信号、すなわちディジタル携帯電話機２から受信した音声信号に重畳し、スピーカ２６に対して送出するものである。本実施形態では、受信音響合成増幅部２５とスピーカ２６とによって、音響情報再生手段を構成する。
【００６９】
このように、受信音響合成増幅部２５とスピーカ２６とが、音響情報再生部１８によって音量が調整された音響情報を再生するため、ディジタル携帯電話機１の通話者は、通話先に送信されている音響情報によって創出される雰囲気を共有することができる。
【００７０】
また、ディジタル携帯電話機１は、音声信号及び動画像信号の符号化処理を行うため、広帯域音声・音響情報符号化部２７と、広帯域音声・音響情報復号化部３２と、動画像符号化部２９と、動画像復号化部３３とを有している。
【００７１】
広帯域音声・音響情報符号化部２７は、音響情報が重畳された音声信号を所定の音声符号化則に基づいて符号化するものである。なお、本実施形態では、音声・音響情報重畳部２１と、広帯域音声・音響情報符号化部２７とによって、重畳送信手段を構成する。
【００７２】
広帯域音声・音響情報復号化部３２は、符号化された受信音声信号を復号し、復号された受信音声信号を受信音響合成増幅部２５に送出するものである。
【００７３】
また、広帯域音声・音響情報符号化部２７及び広帯域音声・音響情報復号化部３２は、音響情報が有する帯域幅または周波数特性に応じた符号化則（所定の符号化則）を用いることができる。これにより、音声信号のみを送受信する場合よりも広帯域を用いた音響情報の送受信が可能となり、高音質な音響情報を送受信することができる。なお、当該符号化則は、ディジタル携帯電話機１とディジタル携帯電話機２とにおいて同一であれば、任意のものを用いることができる。
【００７４】
動画像符号化部２９は、カメラ２８によって取得された動画像信号を所定の動画像符号化則に基づいて符号化する。一方、動画像復号化部３３は、符号化された動画像信号を復号し、復号化された動画像信号をディスプレイ３４に表示させるものである。
【００７５】
（移動電話端末の動作）
次に、図３を参照して、上述した第１の実施形態に係るディジタル携帯電話機１，２の動作について説明する。
【００７６】
ここで、ディジタル携帯電話機１には、予め音響情報提供サーバ５等から取得した音響情報が格納されているものとする。なお、ディジタル携帯電話機１に格納される音響情報は、ディジタルデータ格納部１２の容量に応じて、複数格納してもよい。
【００７７】
まず、ディジタル携帯電話機１は、ディジタル携帯電話機２に対して発信する（Ｓ１０）。ディジタル携帯電話機２は、ディジタル携帯電話機１からの着信に応答する（Ｓ２０）。
【００７８】
ディジタル携帯電話機２が、ディジタル携帯電話機１からの着信に応答することにより、ディジタル携帯電話機１とディジタル携帯電話機２との間において通話が開始される（Ｓ３０）。なお、ステップＳ３０において、ディジタル携帯電話機１とディジタル携帯電話機２とは、音声及び動画像を送受信し、ＴＶ電話サービスを行ってもよい。
【００７９】
次いで、ディジタル携帯電話機１の通話者は、送信する音響情報を選択する（Ｓ４０）。
【００８０】
なお、ディジタルデータ格納部１２に複数の音響情報が格納されている場合には、音響情報のリストをディスプレイ３４に表示し、ディジタル携帯電話機１の通話者に選択させることもできる。また、ステップＳ３０においてＴＶ電話を行っており、通話者の動画像がディスプレイ３４に表示されている場合には、音響情報のリストを表示する画面を選択時のみ、動画像に代えて表示させて表示させてもよいし、ディスプレイ３４のエリアを分割して、音響情報のリストを表示する画面と、通話者の動画像とを表示させてもよい。
【００８１】
さらに、選択された音響情報が、楽曲のように継続的にディジタル携帯電話機２の通話者に聴取させるものである場合、ステップＳ３０における通話開始の時点から、選択された音響情報を送信するようにしてもよい。
【００８２】
次いで、ディジタル携帯電話機１は、選択された音響情報の音量をディジタル携帯電話機１の通話者の音声信号に基づいて調整する（Ｓ５０ａ）。さらに、ディジタル携帯電話機１は、ディジタル携帯電話機２から受信した、受信音声信号に基づいて、音響情報の音量を調整することもできる。
【００８３】
ディジタル携帯電話機１は、指定された音響情報の音量と、通話者の音声信号とに基づいて、音響情報の音量を調整する。
【００８４】
ディジタル携帯電話機１は、音声信号の音量に基づいて、音量を調整した音響情報と、通話者の音声信号とを重畳し、重畳した信号をディジタル携帯電話機２に送信する（Ｓ５０ｂ）。
【００８５】
ここで、図４は、ディジタル携帯電話機１からディジタル携帯電話機２に対して送信される音響情報の音量が、通話者の音声信号の音量に基づいて調整される概念を示している。
【００８６】
音響情報（Ｓ）は、ステップＳ４０において選択された、音量が調整される前における音響情報の波形を示している。
【００８７】
音声信号（Ｖｔ）は、ディジタル携帯電話機１の通話者から取得した音声信号の波形を示している。なお、音声信号（Ｖｔ）は、ノイズキャンセリング回路２０によって背景雑音が抑制された音声信号である。
【００８８】
音声信号（Ｖｒ）は、ディジタル携帯電話機２から受信した、受信音声信号の波形を示している。
【００８９】
そして、重畳後信号（Ｃ）は、音量が調整された音響情報（Ｓ）と、音声信号（Ｖｔ）
が重畳された後の波形を示している。
【００９０】
ここで、重畳後信号（Ｃ）を参照すると、時間（ｔ１）においては、音声信号（Ｖｔ）及び音声信号（Ｖｒ）の双方の音量が低い状態（すなわち、会話がされていない状態）にあるため、音響情報（Ｓ）の音量は、Ｌ１（Ｌ１’）に調整されている。次いで、時間（ｔ２）においては、音声信号（Ｖｒ）の音量は低い状態にあるが、音声信号（Ｖｔ）の音量が高い状態にあるため、会話が行われていると推定され、通話に支障を来たさないよう、音響情報（Ｓ）の音量が、Ｌ２（Ｌ２’）に調整されている。
【００９１】
さらに、時間（ｔ３）においては、音声信号（Ｖｔ）の音量は、低い状態にあるが、音声信号（Ｖｒ）の音量が高い状態にあるため、時間（ｔ２）と同様に、音響情報（Ｓ）の音量が、Ｌ２（Ｌ２’）に調整されている。
【００９２】
次いで、時間（ｔ４）においては、音声信号（Ｖｔ）及び音声信号（Ｖｒ）の双方の音量が、再び低い状態になったため、音響情報（Ｓ）の音量が、Ｌ１（Ｌ１’）に調整されている。
【００９３】
なお、上述した音響情報の音量の調整手法は、本発明に係る音響情報の調整の概念を示す一例であり、音量決定部２４に対して、所定の条件を設定することにより、音声信号の音量や、その変化の過程に基づいて、音響情報の音量を様々な手法により、調整することができる。
【００９４】
なお、音響情報は、ステップＳ４０において音響情報が選択され次第、音声信号に重畳して送信するか、ディジタル携帯電話機１の通話者が、操作キー部１６または可動部１７に対する所定の操作を行った場合に重畳して送信するようにしてもよい。
【００９５】
ディジタル携帯電話機２は、上述のように調整された音響情報と、音声信号が重畳された信号をディジタル携帯電話機１から受信して再生する（Ｓ５０ｃ）。
【００９６】
また、ディジタル携帯電話機１は、ステップＳ５０ａにおいて音量が調整された音響情報をスピーカ２６にから再生する（Ｓ５０ｄ）。これにより、ディジタル携帯電話機１の通話者は、ステップＳ５０ｃにおいて再生されている音響情報によって、ディジタル携帯電話機２側において創出される雰囲気を共有することができる。
【００９７】
また、ディジタル携帯電話機１と、ディジタル携帯電話機２とは、ステップＳ５０ａからＳ５０ｄまでの処理を繰り返し実行し、音声信号と、音響情報との送受信を行う。
【００９８】
（作用・効果）
本実施形態によれば、音響情報再生部１８と、音量決定部２４とが、ディジタル携帯電話機１の通話者から取得した音声信号の音量に基づいて、当該通話者の音声信号とともに送信される楽曲や効果音等の音響情報の音量を調整するため、通話に支障を来たすことなく音響情報を送信することができる。
【００９９】
本実施形態によれば、ノイズキャンセリング回路２０によってノイズの抑制されたディジタル携帯電話機１の通話者の音声信号と、ノイズキャンセリング回路２０を経由しない音響情報とが重畳されるため、当該通話者の背景雑音の抑制する効果を損なうことなく、音響情報を通話先に送信することができる。
【０１００】
本実施形態によれば、送信されるディジタル携帯電話機１の通話者の音声信号と、ディジタル携帯電話機２から受信した受信音声信号とに基づいて音響情報の音量が調整されるため、送信方向のみならず、受信方向の通話の状態に基づいて、ディジタル携帯電話機２に送信される音響情報の音量を調整することができる。
【０１０１】
本実施形態によれば、音響情報再生部１８と、音量決定部２４とが、ディジタル携帯電話機１の通話者から取得した音声信号の音量の時間的な変化の過程に基づいて、音響情報の音量を調整するため、例えば、当該音声信号の音量が、所定の音量を超える状態が継続した場合、当該通話者の気分が高揚していると推定し、音響情報の音量も上昇または下降させるといったような、通話の状況に応じて効果的に音響情報の音量を調整することができる。
【０１０２】
本実施形態によれば、受信音響合成増幅部２５と、スピーカ２６とが、音響情報再生部１８によって音量が調整された音響情報を再生するため、ディジタル携帯電話機１の通話者は、ディジタル携帯電話機２において再生される音響情報によって創出される雰囲気を共有することができる。
【０１０３】
さらに、本実施形態によれば、ＴＶ電話サービスの利用時において、通話の相手との会話の内容、通話の相手の顔色、周辺状況に応じて、会話の雰囲気を盛り上げ、活性化させることができる。
【０１０４】
［第２実施形態］
次に、本発明の第２の実施形態について説明する。第２の実施形態に係るディジタル携帯電話機１は、通話中において、ディジタル携帯電話機２が有する機能を多彩な手段により遠隔制御するものである。
【０１０５】
なお、ディジタル携帯電話機１は、ディジタル携帯電話機２に備えられているバイブレーション機能、ＬＥＤ、ディスプレイに表示される映像等を遠隔制御することができる。
【０１０６】
（移動電話端末の構成）
図５は、本実施形態に係るディジタル携帯電話機１の機能ブロック構成を示す図である。なお、第１の実施形態に係るディジタル携帯電話機１，２と同様の機能を有するブロックについては、同一の符号を付与し、その説明を省略する。
【０１０７】
ディジタル携帯電話機１は、ディジタル携帯電話機２が有する機能を遠隔制御するため、ディジタルデータ格納部１２と、制御情報生成部３６と、制御情報符号化部３７と、映像合成部３８とを有している。なお、制御情報生成部３６と、制御情報符号化部３７と、映像合成部３８とは、ダウンロード可能なプログラムとして提供することができる。
【０１０８】
ディジタルデータ格納部１２は、ディジタル携帯電話機２に対して送信する制御情報を生成するために用いられる制御情報変換テーブルを格納するものである。なお、制御情報変換テーブルは、図１に示したアプリケーションプログラム提供サーバ６によって提供することができる。
【０１０９】
また、制御情報変換テーブルは、ＩＣカードインタフェース部１３、近距離無線通信部１４または赤外線通信部１５を介して取得することもできる。
【０１１０】
制御情報生成部３６は、ディジタル携帯電話機２が有する機能に対する制御内容を通話者に選択させるものであり、本実施形態では、選択手段を構成する。具体的には、制御情報生成部３６は、図８に示すような制御情報変換テーブルの内容をリストとしてディスプレイ３４に表示することができる。
【０１１１】
同図に示すように、制御情報変換テーブルは、ディジタル携帯電話機１の操作キー部１６のテンキーやファンクションキー等の操作キー、または筐体の折り曲げ部分等、動作が検出可能な可動部１７等の「操作情報」と、遠隔制御の対象とするディジタル携帯電話機２の機能である「制御対象」と、当該機能の「制御内容」とが対応付けられたものである。
【０１１２】
なお、制御情報変換テーブルは、遠隔制御されるディジタル携帯電話機２の仕様（アプリケーションプログラム）に対応し、かつディジタル携帯電話機１の操作キー部１６や可動部１７と対応しているものを用いる。
【０１１３】
また、制御情報生成部３６は、通話者によって選択された制御情報変換テーブルに基づいて、ディジタル携帯電話機２を、当該制御情報変換テーブルに規定される制御内容にしたがって動作させる制御情報を生成するものである。
【０１１４】
具体的には、制御情報生成部３６は、ディジタル携帯電話機１の通話者によって、操作キー部１６または可動部１７の操作が行われると、制御情報変換テーブルに基づいて、ディジタル携帯電話機２を動作させる制御情報、すなわち、本実施形態では、スクリプトを生成する。
【０１１５】
例えば、図８に示した制御情報変換テーブルを用いる場合、ディジタル携帯電話機１の通話者が、テンキー“１”を操作することによって、特定の制御内容が選択されると、制御情報生成部３６は、当該制御情報変換テーブルに基づいて、ディジタル携帯電話機２のバイブレーション機能を起動させるスクリプトを生成する。
【０１１６】
また、制御情報生成部３６は、選択された制御内容に基づいて、ディジタル携帯電話機２において行われる動作を示す映像を生成し、映像合成部３８に送出する。
【０１１７】
さらに、制御情報生成部３６は、選択された制御内容に基づいて、制御情報変換テーブルを参照し、ＬＥＤランプ４１または振動モータ・アクチュエータ４２を動作させたり、ディスプレイ３４に映像を表示させたりすることもできる。これによれば、ディジタル携帯電話機２において、受信した制御内容に基づいて行われる動作と同一の動作が、ディジタル携帯電話機１において行われるため、通話者は、選択した制御内容に基づいて行われる動作を容易に確認することができる。
【０１１８】
制御情報符号化部３７は、制御情報生成部３６によって生成された制御情報を多重化部３０において多重可能な信号に符号化し、多重化部３０に送出する。なお、本実施形態では、制御情報生成部３６と、制御情報符号化部３７とによって、制御情報生成送信手段を構成する。
【０１１９】
映像合成部３８は、制御情報生成部３６によって生成された、ディジタル携帯電話機２において行われる動作を示す映像と、動画像復号化部３３から送出された映像とを合成するものである。また、映像合成部３８は、合成された映像をディスプレイ３４に表示させる。
【０１２０】
また、ディジタル携帯電話機１は、ＬＥＤランプ４１と、振動モータ・アクチュエータ４２を有している。
【０１２１】
ＬＥＤランプ４１は、ディジタル携帯電話機１の筐体に設けられている着信表示用等の独立したＬＥＤや操作キー部１６の各キーに組み込まれているＬＥＤである。本実施形態では、ＬＥＤランプ４１は、制御情報生成部３６からの指示に基づいて、点灯や点滅することができる。また、振動モータ・アクチュエータ４２は、バイブレーション機能及びディジタル携帯電話機１の筐体の変形を実現するものであり、本実施形態では、制御情報生成部３６からの指示に基づいて、動作することができる。
【０１２２】
図６は、ディジタル携帯電話機２の機能ブロック構成を示す図である。なお、図５に示したディジタル携帯電話機１と同様の機能を有するブロックについては、同一の符号を付与し、その説明を省略する。
【０１２３】
ディジタル携帯電話機２は、ディジタル携帯電話機１から制御情報を受信し、当該制御情報に基づいて、ディジタル携帯電話機１の通話者によって選択された制御内容にしたがって動作するために、制御情報復号化部３９と、アプリケーションプログラム実行部４０と、ディスプレイ３４と、ＬＥＤランプ４１と、振動モータ・アクチュエータ４２と、映像合成部４３とを有している。
【０１２４】
制御情報復号化部３９は、ディジタル携帯電話機１から受信した、符号化された制御情報を復号し、アプリケーションプログラム実行部４０に送出する。
【０１２５】
アプリケーションプログラム実行部４０は、制御情報復号化部３９から送出された制御情報、すなわちスクリプトを読み込み、実行するものである。具体的には、アプリケーションプログラム実行部４０は、受信したスクリプトを実行し、ディジタル携帯電話機２の筐体に設けられている着信表示用等の独立したＬＥＤ及び操作キー部１６の各キーに組み込まれているＬＥＤであるＬＥＤランプ４１や、振動モータ・アクチュエータ４２に対して、制御内容に応じた動作を指示する。また、アプリケーションプログラム実行部４０は、受信したスクリプトを実行し、ディスプレイ３４に表示させる映像を生成することができる。
【０１２６】
映像合成部４３は、アプリケーションプログラム実行部４０によって生成された映像と、動画像復号化部３３から送出された映像とを合成するものである。また、映像合成部４３は、合成された映像をディスプレイ３４に表示させる。
【０１２７】
なお、上述した第２の実施形態に係るディジタル携帯電話機１と、ディジタル携帯電話機２とは、一体のディジタル携帯電話機として構成してもよい。すなわち、双方のディジタル携帯電話機において、通話先の携帯電話機を制御できるように構成してもよい。
【０１２８】
（移動電話端末の動作）
次に、図７を参照して、上述した本実施形態に係るディジタル携帯電話機１，２の動作について説明する。
【０１２９】
ここで、ディジタル携帯電話機１には、複数の制御情報変換テーブルが格納されているものとする。また、ディジタル携帯電話機２には、ディジタル携帯電話機１から受信した制御情報に基づいて、バイブレーション機能やＬＥＤ等を動作させることのできるアプリケーションプログラムが格納されているものとする。
【０１３０】
まず、ディジタル携帯電話機１は、ディジタル携帯電話機２に対して発信する（Ｓ１０）。ディジタル携帯電話機２は、ディジタル携帯電話機１からの着信に応答する（Ｓ２０）。
【０１３１】
ディジタル携帯電話機２が、ディジタル携帯電話機１からの着信に応答することにより、ディジタル携帯電話機１とディジタル携帯電話機２との間において通話が開始される（Ｓ３０）。なお、ステップＳ３０において、ディジタル携帯電話機１とディジタル携帯電話機２とは、音声及び動画像を送受信し、ＴＶ電話サービスを行ってもよい。
【０１３２】
次いで、ディジタル携帯電話機２の通話者は、ディジタル携帯電話機１から送信される制御情報（スクリプト）を実行するためのアプリケーションプログラムを起動する（Ｓ４０）。ディジタル携帯電話機２の通話者によって、当該アプリケーションプログラムが起動されると、ディスプレイ画面Ｄ１に示すように、ディジタル携帯電話機２のディスプレイ３４に起動が完了した旨のメッセージが表示される。
【０１３３】
次いで、ディジタル携帯電話機１の通話者は、ディスプレイ画面Ｄ２に示すように、複数の制御情報変換テーブルの中から、ディジタル携帯電話機２に格納されているアプリケーションプログラムと対応した制御情報変換テーブルを選択する（Ｓ５０）。
【０１３４】
次いで、ディジタル携帯電話機１の通話者は、ステップＳ５０において選択した制御情報変換テーブルにおいて対応付けられている操作キー部１６の所定の操作キーまたは可動部１７を操作する（Ｓ６０）。ここでは、図８に示した制御情報変換テーブルを用いて、ディジタル携帯電話機２のバイブレーション機能を起動させる、テンキー“１”に対して操作が行われたものとする。
【０１３５】
ディジタル携帯電話機１は、ステップＳ６０におけるディジタル携帯電話機１の通話者の操作に基づいて、選択された制御情報変換テーブルを参照し、当該テーブルに規定されている制御内容にしたがってディジタル携帯電話機２を動作させる制御情報（スクリプト）を生成する（Ｓ７０）。
【０１３６】
次いで、ディジタル携帯電話機１は、生成した制御情報をディジタル携帯電話機２に送信する（Ｓ８０）。なお、制御情報は、音声信号を送受する通話チャネルを用いて送信してもよいし、呼の接続のために設けられている制御チャネルを用いて送信してもよい。
【０１３７】
また、ディジタル携帯電話機１は、ディスプレイ画面Ｄ３に示すように、選択された制御内容に基づいて、ディジタル携帯電話機２において行われる動作を示す映像を表示する（Ｓ９０）。ディスプレイ画面Ｄ３は、バイブレーション機能を動作させる制御内容が選択された場合に表示される映像を示している。また、ディジタル携帯電話機１は、ディスプレイ画面Ｄ３のような動作を示す映像の表示に代えて、ステップＳ８０において送信した制御情報に基づいて、ディジタル携帯電話機２において行われる動作と同一の動作を行うこともできる。
【０１３８】
ディジタル携帯電話機２は、ステップＳ８０においてディジタル携帯電話機１から送信された制御情報を、ステップＳ４０において起動したアプリケーションプログラムにより実行し、制御内容にしたがった動作を行う（Ｓ１００）。ここでは、ディジタル携帯電話機２は、受信した制御内容に基づいて、バイブレーション機能を起動させる。
【０１３９】
なお、以上説明した本実施形態に係る移動電話端末の動作は、一例であり、図８に示した制御情報変換テーブルを用いて制御情報、すなわちスクリプトを適宜生成することにより、バイブレーション機能に限らず、ＬＥＤの点滅、ディスプレイ３４に表示させる映像等の多彩な手段により、ディジタル携帯電話機２、すなわち通話先の移動電話端末を遠隔制御することができる。
【０１４０】
（作用・効果）
本実施形態によれば、ディジタル携帯電話機１の制御情報生成部３６が、ディジタル携帯電話機２が有する機能に対する制御内容をディジタル携帯電話機１の通話者に選択させ、選択された制御内容に基づいて、ディジタル携帯電話機２を制御内容にしたがって動作させる制御情報を生成する。このため、例えば、ディジタル携帯電話機２が有するバイブレーション機能の起動、ＬＥＤの点滅、またはディスプレイに映像を表示させるといった制御内容の中から、制御内容を選択して制御することにより、ディジタル携帯電話機１の通話者は、音声以外の多彩な手段により、意思や感情を伝達することができる。
【０１４１】
本実施形態によれば、ディジタル携帯電話機２と、ディジタル携帯電話機１との双方において、選択された制御情報に基づく動作が行われるため、通話者は、選択した制御内容に基づいて行われる動作を容易に確認することができる。
【０１４２】
本実施形態によれば、ディジタル携帯電話機１が、選択された制御情報に基づいて、ディジタル携帯電話機２において行われる動作を示す映像を表示するため、ディジタル携帯電話機１の通話者は、選択した制御内容を容易に確認することができる。
【０１４３】
さらに、本実施形態によれば、ＴＶ電話サービスの利用時において、通話の相手との会話の内容、通話の相手の顔色、周辺状況に応じて、通話時の雰囲気を盛り上げ、活性化させることができる。
【０１４４】
（変更例）
以上、第１の実施形態と第２の実施形態に分けて、本発明に係る移動電話端末について説明したが、第１の実施形態に係るディジタル携帯電話機１と、第２の実施形態に係るディジタル携帯電話機１とは、一体のディジタル携帯電話機として構成してもよい。
【０１４５】
さらに、第１の実施形態に係るディジタル携帯電話機１，２と、第２の実施形態に係るディジタル携帯電話機１，２とを、一体のディジタル携帯電話機として構成してもよい。
【０１４６】
【発明の効果】
以上説明したように本発明によれば、通話時において、音響情報を通話に支障を来たすことなく通話者の音声信号とともに送信することができる移動電話端末及びプログラムを提供することができる。
【０１４７】
また、本発明によれば、通話時において、通話先の移動電話端末が有する機能を多彩な手段により遠隔制御することができる移動電話端末及びプログラムを提供することができる。
【図面の簡単な説明】
【図１】本発明の実施形態に係る移動電話端末を含む全体構成図である。
【図２】本発明の第１の実施形態に係る移動電話端末のブロック構成を示す図である。
【図３】本発明の第１の実施形態に係る移動電話端末の動作を示す図である。
【図４】本発明の第１の実施形態に係る移動電話端末による音響情報の調整方法の概念図である。
【図５】本発明の第２の実施形態に係る移動電話端末のブロック構成を示す図である。
【図６】本発明の第２の実施形態に係る移動電話端末のブロック構成を示す図である。
【図７】本発明の第２の実施形態に係る移動電話端末の動作を示す図である。
【図８】本発明の第２実施形態に係る制御情報変換テーブルの一例を示す図である。
【符号の説明】
１…ディジタル携帯電話機
２…ディジタル携帯電話機
３…ディジタル携帯電話網
４…ＩＰ通信網
５…音響情報提供サーバ
６…アプリケーションプログラム提供サーバ
７…無線受信部
８…無線送信部
１０…発着信制御部
１１…パケット通信制御部
１２…ディジタルデータ格納部
１３…ＩＣカードインタフェース部
１４…近距離無線通信部
１５…赤外線通信部
１６…操作キー部
１７…可動部
１８…音響情報再生部
１９…マイク
２０…ノイズキャンセリング回路
２１…音声・音響情報重畳部
２２…送信音量・変化検出部
２３…受信音量・変化検出部
２４…音量決定部
２５…受信音響合成増幅部
２６…スピーカ
２７…広帯域音声・音響情報符号化部
２８…カメラ
２９…動画像符号化部
３０…多重化部
３１…多重分離部
３２…広帯域音声・音響情報復号化部
３３…動画像復号化部
３４…ディスプレイ
３５，４４…パーソナルコンピュータ
３６…制御情報生成部
３７…制御情報符号化部
３８，４３…映像合成部
３９…制御情報復号化部
４０…アプリケーションプログラム実行部
４１…ＬＥＤランプ
４２…振動モータ・アクチュエータ
Ｄ１，Ｄ２，Ｄ３…ディスプレイ画面
【図１】
2004343566.tif 000003
【図２】
2004343566.tif 000004
【図３】
2004343566.tif 000005
【図４】
2004343566.tif 000006
【図５】
2004343566.tif 000007
【図６】
2004343566.tif 000008
【図７】
2004343566.tif 000009
【図８】
2004343566.tif 000010