(57)【特許請求の範囲】
【請求項１】
複数の通話端末から各々の通話相手の画像または音声を送受信するデータ送受信手段と、
前記各々の通話相手の画像を表示する画像表示手段と、
前記各々の通信相手の音声を出力する音声出力手段と、
前記画像表示手段と連携して操作者に通話相手を選択させることができる選択手段と、
前記選択手段からの指示に基づいて前記データ送受信手段を介して受信した複数の通話相手の音声の一部を選択する切換手段と、を具備し、
前記画像表示手段が、前記切換手段によって音声が選択された通話相手については音声を送受信し、前記複数の通話相手の全員の画像を一度に表示するハンズフリー電話装置であって、
前記選択手段が通話相手を選択したとき、前記データ送受信手段が全ての通話相手との間で画像を送受信する第１の回線とは別に第２の回線を介して通信を行い、前記選択された一部の通話相手との通話終了後、前記切換手段が前記画像を表示した状態で前記第２の回線から前記第１の回線に切換え、前記複数の通話相手の全員の音声による通話に復帰させる指示を行うことを特徴とするハンズフリー電話装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、インターネット等の通信ネットワークを利用した音声電話装置において、話者の顔画像を見ながら通話することができるハンズフリー電話装置に関するものである。
【０００２】
【従来の技術】
インターネット等の通信ネットワークを利用したハンズフリー電話装置、いわゆるＩＰ電話では、一対一の通話以外に、複数のポイントを接続して複数人による会話を行うことが可能である。
【０００３】
【発明が解決しようとする課題】
しかしながら、上記のようなハンズフリー電話装置では、誰が会話に参加しているのかを知る方法としては、参加者が自己紹介するしかなく、また相手の顔が見えないために話をしにくいという問題点を有していた。
【０００４】
相手の顔を見ながら話をするには、テレビ会議システム等で実現されているが、装置が大規模であり、また動画の送受信を行うために通信データ量が大きいという問題があった。
【０００５】
複数人による通話中には特定の相手とだけ会話をすることができなかった。または、特定の相手と抜け出して別の会話を行うことができなかった。
【０００６】
さらに、このような装置の操作キーはテンキー＋αの電話機ベースとなっているものが多く、少ないキーの組み合わせを使用するため、設定操作等が複雑であった。
【０００７】
本発明は、複数人による音声会話中でも操作者が通話相手を特定することのできるハンズフリー電話装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】
この問題を解決するために本発明は、複数の通話端末から各々の通話相手の画像または音声を送受信するデータ送受信手段と、各々の通話相手の画像を表示する画像表示手段と、各々の通信相手の音声を出力する音声出力手段と、画像表示手段と連携して操作者に通話相手を選択させることができる選択手段と、選択手段からの指示に基づいてデータ送受信手段を介して受信した複数の通話相手の音声の一部を選択する切換手段と、を具備し、画像表示手段が、切換手段によって音声が選択された通話相手については音声を送受信し、複数の通話相手の全員の画像を一度に表示するハンズフリー電話装置であって、選択手段が通話相手を選択したとき、データ送受信手段が全ての通話相手との間で画像を送受信する第１の回線とは別に第２の回線を介して通信を行い、選択された一部の通話相手との通話終了後、切換手段が画像を表示した状態で第２の回線から第１の回線に切換え、複数の通話相手の全員の音声による通話に復帰させる指示を行う構成とした。
【０００９】
これにより、複数人による会話中に全員の顔を一度に表示しながら特定の相手と別回線で会話を行い、会話終了後元の回線を使った全員の会話に復帰することができる。
【００１０】
【発明の実施の形態】
本願の請求項１に係る発明は、複数の通話端末から各々の通話相手の画像または音声を送受信するデータ送受信手段と、各々の通話相手の画像を表示する画像表示手段と、各々の通信相手の音声を出力する音声出力手段と、画像表示手段と連携して操作者に通話相手を選択させることができる選択手段と、選択手段からの指示に基づいてデータ送受信手段を介して受信した複数の通話相手の音声の一部を選択する切換手段と、を具備し、画像表示手段が、切換手段によって音声が選択された通話相手については音声を送受信し、複数の通話相手の全員の画像を一度に表示するハンズフリー電話装置であって、選択手段が通話相手を選択したとき、データ送受信手段が全ての通話相手との間で画像を送受信する第１の回線とは別に第２の回線を介して通信を行い、選択された一部の通話相手との通話終了後、切換手段が画像を表示した状態で第２の回線から第１の回線に切換え、複数の通話相手の全員の音声による通話に復帰させる指示を行う構成としたことにより、複数人による会話中に全員の顔を一度に表示するか又は所定数ずつ時間毎に変更させてこれを見ながら特定の相手と別回線で会話を行い、会話終了後元の回線を使った全員の会話に復帰することができる。
【００１３】
以下、本発明の各実施の形態について、図面を参照しながら説明する。
【００１４】
（実施の形態１）
本発明の実施の形態１について説明する。
【００１５】
図１は、本発明の実施の形態１におけるハンズフリー電話装置の構成図であり、ハンズフリー電話装置はインターネット等のデータ通信可能なネットワーク１０１を経由して複数の相手端末と接続されている。
【００１６】
図１において、ネットワーク１０１経由により複数の相手端末からの音声信号は、音声データとしてデータ送受信手段１０２に入力される。本実施の形態の通信方式としてはＴＣＰ／ＩＰプロトコルが用いられている。
【００１７】
データ送受信手段１０２で受信した複数端末からの音声データは、それぞれ復号化される。本実施の形態では、相手端末として２台を想定し、一方からの音声データは音声復号化手段１０８へ、他方からの音声データは音声復号化手段１０９へ入力されるものとする。
【００１８】
音声復号化手段１０８、１０９によりそれぞれ復号化された音声信号は、スピーカ等の音声出力手段１１０から音波として操作者に出力される。また、操作者の発する音波は、マイク等の音声入力手段１１２から音声信号として入力され、音声符号化手段１１１で音声データに符号化され、データ送受信手段１０２によってネットワーク１０１に送信される。
【００１９】
デジタルカメラ等の画像入力デバイスである自画像入力手段１０４を用いて端末を使用する発声している人の顔画像データを登録する。顔画像データは自顔画像記憶手段１０３に記憶される。自顔画像記憶手段１０３に記憶された顔画像データは、通話相手への発信時にデータ送受信手段１０２からネットワーク１０１に送信される。
【００２０】
一方、受信時には、通話相手の音声データと顔画像データが送信されてくる。自画像データを送信処理とは逆に、相手端末の顔画像は接続時に送信されてくる。そして、通話相手の顔画像データは通信相手のＩＰアドレスと対応させて他顔画像記憶手段１０５に記憶する。
【００２１】
他顔画像選択手段１０７は、他顔画像記憶手段１０５で記憶された顔画像を通信相手の音声によってどれを選択するか選択する手段であり、選択した顔画像データを他顔画像表示手段１０６で表示する。
【００２２】
マイク等によって電気信号に変換された音声信号をオシロスコープ等で見ると波形として見え、振幅とはこのときの電気信号の波形の振幅のことで、パワーとは、振幅の二乗の値である。他顔画像選択手段１０７は、通話相手端末からの振幅もしくパワーの値に基づいて、振幅もしくはパワーの大きな端末に対応する顔画像データをＩＰアドレスを参照して他の顔画像データよりも大きく表示させるように制御する。
【００２３】
他顔画像選択手段１０７は、各通話相手端末より受信した音声信号の振幅あるいはパワーの値を計算して、ある閾値よりも大きく、最も大きな値を示す通話相手端末の音声信号に対する顔画像データを選択し、他顔画像表示手段１０６に大きく表示させる。ここでの閾値とは会話音声と思われるレベルを指す。
【００２４】
また、他顔画像選択手段１０７により選択された顔画像データを他顔画像表示手段１０６で大きさを変えて表示するのではなく、濃度を変えて表示するようにしても良い。
【００２５】
このように、発話者が誰であるのかを音声だけでなく、表示される顔画像からも判断することができ、円滑な会話を実現できる。
【００２６】
他顔画像選択手段１０７において、振幅やパワーの値がいずれの端末も閾値を超えなかったときは、全話者の顔画像データを一覧できる形で表示させる。
【００２７】
その表示形態として、他顔画像選択手段１０７が通話相手端末などの端末の振幅もしくはパワーの値も閾値を超えていないと判断したときは、他顔画像表示手段１０６に全端末に対する顔画像データを一度に表示させる。このとき表示画面との関係上全ての顔画像データが入りきれない場合は、顔画像データを縮小したり、サムネイル表示させても良い。
【００２８】
また、顔画像データを所定の枚数ずつ表示し、定期的に表示画像を変更し、ある時間毎にすべての顔画像データを表示させる構成であっても良い。
【００２９】
このように、振幅やパワーの値が閾値を超えないとき、すなわち音声レベルが低いときに参加者全員の顔画像データを表示させることで、会話の参加者を把握することができる。
【００３０】
（実施の形態２）
本発明の実施の形態２について説明する。
【００３１】
図２は、本発明の実施の形態２におけるハンズフリー電話装置の構成図であり、ハンズフリー電話装置はインターネット等のデータ通信可能なネットワーク２０１を経由して複数の相手端末と接続されている。
【００３２】
図２において、ネットワーク２０１経由により複数の相手端末からの音声信号は、音声データとしてデータ送受信手段２０２に入力される。本実施の形態の通信方式としてはＴＣＰ／ＩＰプロトコルが用いられている。
【００３３】
データ送受信手段２０２で受信した複数端末からの音声データは、それぞれ復号化される。本実施の形態では、相手端末として２台を想定し、一方からの音声データは音声復号化手段２０８へ、他方からの音声データは音声復号化手段２０９へ入力されるものとする。
【００３４】
音声復号化手段２０８、２０９によりそれぞれ復号化された音声信号は、スピーカ等の音声出力手段２１０から音波として操作者に出力される。また、操作者の発する音波は、マイク等の音声入力手段２１２から音声信号として入力され、音声符号化手段２１１で音声データに符号化され、データ送受信手段２０２によってネットワーク２０１に送信される。
【００３５】
デジタルカメラ等の画像入力デバイスである自画像入力手段２０４を用いて端末を使用する発声している人の顔画像データを登録する。顔画像データは自顔画像記憶手段２０３に記憶される。自顔画像記憶手段２０３に記憶された顔画像データは、通話相手への発信時にデータ送受信手段２０２からネットワーク２０１に送信される。
【００３６】
一方、受信時には、通話相手の音声データと顔画像データが送信されてくる。自画像データを送信処理とは逆に、相手端末の顔画像は接続時に送信されてくる。そして、通話相手の顔画像データは通信相手のＩＰアドレスと対応させて他顔画像記憶手段２０５に記憶する。他顔画像記憶手段２０５に記憶された他顔画像データは他顔画像表示手段２０６により表示される。
【００３７】
本実施の形態では、ひそひそ話選択手段２１３によって、現在の複数人による会話の回線とは別に会話をしたい話者を選択する。選択方法としては、他顔画像表示手段２０６に通話相手の全顔画像データが表示された状態で、ひそひそ話選択手段２１３により選択的にひそひそ会話をしたい話者の端末を指定する。
【００３８】
そして、指定した端末からの音声データを、これまで継続していた会話と別回線で準備したひそひそ会話回線との切り替えを発話先選択手段２１４により選択指示し、音声切替手段２１５で切り替えて、音声出力手段２１０から出力する。また、操作者の音声データは指定した端末に対してデータ送受信手段２０２よりネットワーク２０１に送信する。
【００３９】
上記構成では、複数端末の話者と通話している状態において、特定の話者と別回線で会話したいときに、他顔画像表示手段２０６と連携したひそひそ話選択手段２１３によって選択する。例えば、他顔画像表示手段２０６に表示された全話者の顔画像データをタッチパネル形式で操作者に選択させることが可能である。
【００４０】
次いで、複数人全体で会話したいのか、選択した端末とだけで会話したいのかを発話先選択手段２１４より選択指示し、選択した端末のみでの会話が指示されたときは、データ送受信手段２０２からの音声データの送信先を選択した端末のみにする。また、データ送受信手段２０２で受信した音声データは、音声切替手段２１５により選択した端末からの音声データのみを通過するように制御し、音声出力手段２１０より出力する。
【００４１】
これにより、複数人で会話している状態であっても、特定の話者とのひそひそ話を実現できる。なお、特定の話者とのひそひそ話が終了すると発話先選択手段２１４より全員での会話に戻るように指示することが可能であることは言うまでもない。
【００４２】
さらに、発話先選択手段２１４によって別回線での会話が選択されると、それまでの複数人による会話で使用していた回線を切断する切断手段を有する構成としても良い。これによって、複数人による同時会話状態から選択した相手端末とのみによる会話状態に移行させることができる。
【００４３】
（実施の形態３）
本発明の実施の形態３について説明する。
【００４４】
図３は、本発明の実施の形態３におけるハンズフリー電話装置の構成図であり、ハンズフリー電話装置はインターネット等のデータ通信可能なネットワーク３０１を経由して複数の相手端末と接続されている。
【００４５】
図３において、ネットワーク３０１経由により複数の相手端末からの音声信号は、音声データとしてデータ送受信手段３０２に入力される。本実施の形態の通信方式としてはＴＣＰ／ＩＰプロトコルが用いられている。
【００４６】
データ送受信手段３０２で受信した複数端末からの音声データは、それぞれ復号化される。本実施の形態では、相手端末として２台を想定し、一方からの音声データは音声復号化手段３０８へ、他方からの音声データは音声復号化手段３０９へ入力されるものとする。
【００４７】
音声復号化手段３０８、３０９によりそれぞれ復号化された音声信号は、スピーカ等の音声出力手段３１０から音波として操作者に出力される。また、操作者の発する音波は、マイク等の音声入力手段３１２から音声信号として入力され、音声符号化手段３１１で音声データに符号化され、データ送受信手段３０２によってネットワーク３０１に送信される。
【００４８】
実施の形態１では、電話装置自体に自顔画像データを入力する機能を備えていたが、本実施の形態では、ネットワーク３０１から自顔画像データを入力する自顔画像入力手段３０４を有している。
【００４９】
この自顔画像入力手段３０４は、同じくネットワーク３０１に接続されているパソコン等の外部端末より入力された自顔画像データを、ネットワーク３０１を介し、データ送受信手段３０２で受信し、取り込むものである。そして取り込んだ自顔画像データは自顔画像記憶手段３０３に記憶される。
【００５０】
自顔画像データの受信方法としては、ネットワーク３０１がインターネットの場合であれば、外部端末からＷｅｂブラウジング機能を用いて、ｈｔｔｐサーバ機能を経由して自顔画像データをサーバにアップロードしておき、当該サーバからダウンロードする形で受信することができる。
【００５１】
これによって、本実施の形態のハンズフリー電話装置では、装置自体に自分の顔画像データを持つ必要が無く、装置の小型化、操作インターフェースの簡素化を図ることができる。
【００５２】
自顔画像記憶手段３０３に記憶された顔画像データは、通話相手端末への発信時にデータ送受信手段３０２よりネットワーク３０１へ送信される。
【００５３】
通話相手端末からのデータ受信時には、通話相手から音声データと相手の顔画像データが送られてくるので、通話相手の顔画像データをＩＰアドレスと対応させて他顔画像記憶手段３０５に記憶させる。なお、他顔画像記憶手段３０５に記憶された顔画像データの表示形態は実施の形態１と同様である。
【００５４】
（実施の形態４）
本発明の実施の形態４について説明する。
【００５５】
図４は、本発明の実施の形態４におけるハンズフリー電話装置の構成図であり、ハンズフリー電話装置はインターネット等のデータ通信可能なネットワーク４０１を経由して複数の相手端末と接続されている。
【００５６】
図４において、ネットワーク４０１経由により複数の相手端末からの音声信号は、音声データとしてデータ送受信手段４０２に入力される。本実施の形態の通信方式としてはＴＣＰ／ＩＰプロトコルが用いられている。
【００５７】
データ送受信手段４０２で受信した複数端末からの音声データは、それぞれ復号化される。本実施の形態では、相手端末として２台を想定し、一方からの音声データは音声復号化手段４０８へ、他方からの音声データは音声復号化手段４０９へ入力されるものとする。
【００５８】
音声復号化手段４０８、４０９によりそれぞれ復号化された音声信号は、スピーカ等の音声出力手段４１０から音波として操作者に出力される。また、操作者の発する音波は、マイク等の音声入力手段４１２から音声信号として入力され、音声符号化手段４１１で音声データに符号化され、データ送受信手段４０２によってネットワーク４０１に送信される。
【００５９】
本実施の形態において、自顔画像データや他顔画像データの表示形態は実施の形態１と同様である。本実施の形態のハンズフリー電話装置が他の実施の形態と異なるのは、パソコン等の外部端末より入力され、ネットワーク４０１を介してデータ送受信手段４０２で受信した、相手端末との通信に必要な設定データを入力する端末設定データ入力手段４１６と、当該設定データを記憶する端末設定データ記憶手段４１７を備え、通信時には、端末設定データ記憶手段４１７に記憶された設定データを使用して通信を行う点である。なお、設定データとしては短縮ダイヤルやＩＰアドレスといったものが挙げられる。
【００６０】
これによって、本実施の形態のハンズフリー電話装置では、装置自体に自分の端末の設定データを入力する操作インターエースを持つ必要が無く、装置の小型化、操作インターフェースの簡素化を図ることができる。
【００６１】
【発明の効果】
以上のように本発明によれば、複数の通話端末から各々の通話相手の画像または音声を送受信するデータ送受信手段と、各々の通話相手の画像を表示する画像表示手段と、各々の通信相手の音声を出力する音声出力手段と、画像表示手段と連携して操作者に通話相手を選択させることができる選択手段と、選択手段からの指示に基づいてデータ送受信手段を介して受信した複数の通話相手の音声の一部を選択する切換手段と、を具備し、画像表示手段が、切換手段によって音声が選択された通話相手については音声を送受信し、複数の通話相手の全員の画像を一度に表示するハンズフリー電話装置であって、選択手段が通話相手を選択したとき、データ送受信手段が全ての通話相手との間で画像を送受信する第１の回線とは別に第２の回線を介して通信を行い、選択された一部の通話相手との通話終了後、切換手段が画像を表示した状態で第２の回線から第１の回線に切換え、複数の通話相手の全員の音声による通話に復帰させる指示を行うことにより、複数人による会話中に全員の顔を一度に表示するか又は所定数ずつ時間毎に変更させてこれを見ながら特定の相手と別回線で会話を行い、会話終了後元の回線を使った全員の会話に復帰することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１におけるハンズフリー電話装置の構成図
【図２】本発明の実施の形態２におけるハンズフリー電話装置の構成図
【図３】本発明の実施の形態３におけるハンズフリー電話装置の構成図
【図４】本発明の実施の形態４におけるハンズフリー電話装置の構成図
【符号の説明】
１０１  ネットワーク
１０２  データ送受信手段
１０５  他顔画像記憶手段
１０６  他顔画像表示手段
１０７  他顔画像選択手段
１０８、１０９  音声復号化手段
１１０  音声出力手段
１１１  音声符号化手段
１１２  音声入力手段
【図１】
0004238544.tif 000002
【図２】
0004238544.tif 000003
【図３】
0004238544.tif 000004
【図４】
0004238544.tif 000005