(57)【特許請求の範囲】
【請求項１】
テレビ電話端末装置の間で画像データ及び音声データを送受信するテレビ電話システムであって、
送信側のテレビ電話端末装置は、送信する画像データの画像種別を選択すると共に、選択した画像種別の情報を受信側のテレビ電話端末装置に送信し、
受信側のテレビ電話端末装置は、前記送信側のテレビ電話端末装置から前記選択した画像種別の情報を受信し、該受信した送信側の画像種別の情報に基づいて表示手段の表示レイアウトを決定する
ことを特徴とするテレビ電話システム。
【請求項２】
前記受信側のテレビ電話端末装置が選択している送信する画像データの画像種別の情報と、前記送信側のテレビ電話端末装置から受信した送信側の画像種別の情報とに基づいて、前記表示レイアウトを決定することを特徴とする請求項１に記載のテレビ電話システム。
【請求項３】
前記画像データの画像種別の情報は、前記テレビ電話端末装置により通信する通信者の自画像、風景画像、横長のパノラマ画像、代替画像のいずれかであることを特徴とする請求項１または２に記載のテレビ電話システム。
【請求項４】
前記表示レイアウトは、横向き全画面表示を含むことを特徴とする請求項１から３のいずれか一項に記載のテレビ電話システム。
【請求項５】
送信画像と受信画像を表示可能な表示手段と、
通話対象のテレビ電話端末装置から該通話対象のテレビ電話端末装置が送信する画像データの画像種別の情報を受信する受信手段と、
該受信手段により受信した通話対象側の画像種別の情報に基づいて、前記表示手段における送信画像及び受信画像の少なくとも一方の表示レイアウトを決定する変更手段と、
を有することを特徴とするテレビ電話端末装置。
【請求項６】
送信する画像データの画像種別を選択する選択手段を備え、前記選択手段が選択している送信する画像データの画像種別の情報と、前記受信手段により受信した通話対象側の画像種別の情報とに基づいて、前記表示レイアウトを決定することを特徴とする請求項５に記載のテレビ電話端末装置。
【請求項７】
テレビ電話端末装置間で画像データ及び音声データを送受信するテレビ電話画像表示方法であって、
送信する画像データの画像種別を選択すると共に、選択した画像種別の情報を通話対象のテレビ電話端末装置に送信する処理と、
前記通話対象のテレビ電話端末装置から画像データとともに通話対象側の画像種別の情報を受信し、該受信した通話対象側の画像種別の情報に基づいて表示手段の表示レイアウトを決定する処理と、
を有することを特徴とするテレビ電話画像表示方法。
【請求項８】
前記表示レイアウトを決定する処理は、
送信する画像データの画像種別の情報と、前記通話対象のテレビ電話端末装置から受信した通話対象側の画像種別の情報とに基づいて行うことを特徴とする請求項７に記載のテレビ電話画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、テレビ電話システム及びテレビ電話端末装置並びにテレビ電話画像表示方法に関する。
【背景技術】
【０００２】
近年、携帯通信端末装置を用いたテレビ電話システム（ａ  ｖｉｄｅｏ  ｔｅｌｅｐｈｏｎｅ  ｓｙｓｔｅｍ）の普及が進んでいる。テレビ電話システムは、遠隔地の通話相手との間で、テレビ電話通話機能を備えた携帯通信端末装置であるテレビ電話端末装置に搭載又は接続されたカメラにより撮像した撮像データを、音声データと共に送受信するものである。また、テレビ会議システム（ａ  ｖｉｄｅｏ  ｃｏｎｆｅｒｅｎｃｅ  ｓｙｓｔｅｍ）のように、複数人の音声データと撮像データを送受信するシステムもテレビ電話システムの一種である。
【０００３】
このテレビ電話システムには、電話網を利用した回線交換方式だけでなく、音声データ及び撮像データをインターネットを通じて送受信するパケット交換方式も開発されている。一般的に、パケット交換方式のテレビ電話システムは、ＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）テレビ電話と言われ回線交換方式に比べて通話料が安価なため、回線交換方式から移行する動きが顕著である。
【０００４】
このような、従来のテレビ電話システムによるテレビ電話通話を行った場合、表示画面は、通常、相手テレビ電話端末装置から受信中の画像及び自テレビ電話端末装置から送信中の画像の２つの画像を表示する表示レイアウトになるが、表示される画像の種別に関わらず表示レイアウトは一定である。
【０００５】
図１７は、従来のテレビ電話端末装置を用いてテレビ電話通話を行った場合の表示画面における表示例を示し、（ａ）は通話者Ａが自画像を送信した状態の通話者Ａの表示画面の説明図、（ｂ）は（ａ）の状態で受信した通話者Ｂの表示画面の説明図、（ｃ）は通話者Ａが風景を送信した状態の通話者Ａの表示画面の説明図、（ｄ）は（ｃ）の状態で受信した通話者Ｂの表示画面の説明図、（ｅ）は通話者Ａが代替画を送信した状態の通話者Ａの表示画面の説明図、（ｆ）は（ｅ）の状態で受信した通話者Ｂの表示画面の説明図である。
【０００６】
このような、従来のテレビ電話システムとして、例えば、「デジタル電子カメラ」（特許文献１参照）が知られている。
【特許文献１】特開平１１−１３６５５４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来のテレビ電話システムを用いてテレビ電話通話を行った場合の表示画面は、表示される画像の種別にかかわらず表示レイアウトは一定である。このため、風景画等を表示する場合、被写体迄の距離が遠いので表示領域が小さいと被写体を認識し難く、通話相手は詳細な情報を認識することが困難になる。特に、携帯電話機のように表示画面が小さい場合には顕著である。
この発明の目的は、表示画面に表示する画像の種類に応じて表示画面の表示レイアウトを決定することができるテレビ電話システム及びテレビ電話端末装置並びにテレビ電話画像表示方法を提供することである。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、この発明に係るテレビ電話システムは、テレビ電話端末装置の間で画像データ及び音声データを送受信するテレビ電話システムであって、送信側のテレビ電話端末装置は、送信する画像データの画像種別を選択すると共に、選択した画像種別の情報を受信側のテレビ電話端末装置に送信し、受信側のテレビ電話端末装置は、前記送信側のテレビ電話端末装置から前記選択した画像種別の情報を受信し、該受信した送信側の画像種別の情報に基づいて表示手段の表示レイアウトを決定することを特徴としている。
【０００９】
また、この発明に係るテレビ電話端末装置は、送信画像と受信画像を表示可能な表示手段と、通話対象のテレビ電話端末装置から該通話対象のテレビ電話端末装置が送信する画像データの画像種別の情報を受信する受信手段と、該受信手段により受信した通話対象側の画像種別の情報に基づいて、前記表示手段における送信画像及び受信画像の少なくとも一方の表示レイアウトを決定する変更手段と、を有することを特徴としている。
【００１０】
また、この発明に係るテレビ電話画像表示方法は、テレビ電話端末装置間で画像データ及び音声データを送受信するテレビ電話画像表示方法であって、送信する画像データの画像種別を選択すると共に、選択した画像種別の情報を通話対象のテレビ電話端末装置に送信する処理と、前記通話対象のテレビ電話端末装置から画像データとともに通話対象側の画像種別の情報を受信し、該受信した通話対象側の画像種別の情報に基づいて表示手段の表示レイアウトを決定する処理と、を有することを特徴としている。
【発明の効果】
【００１１】
この発明によれば、表示画面に表示する画像の種類に応じて表示画面の表示レイアウトを決定することができる。
【発明を実施するための最良の形態】
【００１２】
以下、この発明を実施するための最良の形態について図面を参照して説明する。
図１は、この発明の一実施の形態に係るテレビ電話システムの概略構成を示す図である。図１に示すように、テレビ電話システム１０は、複数（一例として、２個のみ図示）のテレビ電話端末装置１１と、例えば、ＳＩＰ（Ｓｅｓｓｉｏｎ  Ｉｎｉｔｉａｔｉｏｎ  Ｐｒｏｔｏｃｏｌ）サーバ等のサーバ１２とを有しており、各テレビ電話端末装置１１とサーバ１２は、基地局１３を介して通信（通話）情報が送受信される。本実施例では、テレビ電話端末装置１１は、撮像データ及び音声データを共に送受信することができる機能を備えた携帯通信端末装置である。サーバ１２には、代替画像データが格納されている。
【００１３】
テレビ電話端末装置１１は、例えば、第１筐体１１ａと第２筐体１１ｂを互いに離反・接近するように開閉することができる、折り畳み式構造、スライド構造、回転構造などを有しており、第１筐体１１ａには、アンテナ１５ａが装着されている。第１筐体１１ａは、表示手段（表示画面）１４を備え表示画面方向にカメラレンズを配置した第一撮像手段（第１カメラ）（図示しない）と、表示画面方向と反対方向にカメラレンズを配置した第二撮像手段（第２カメラ）（図示しない）の２個のカメラを有している。第１カメラは、表示画面方向を撮像することができ、第２カメラは、第１カメラの撮像方向とは逆向きの方向を撮像することができる。
【００１４】
図２は、図１のテレビ電話端末装置の構成を示すブロック図である。図２に示すように、テレビ電話端末装置１１は、表示手段１４、通信手段１５、操作手段１６、音声入力手段１７、音声出力手段１８、制御手段１９、第一撮像手段２０、第二撮像手段２１、及び記憶手段２２を有している。通信手段１５には、アンテナ１５ａが接続されている。
表示手段１４は、撮像データに基づき表示画面に画像を表示し、通信手段１５は、音声データ、撮像データ及び画像種別データを送受信する。操作手段１６は、通信者（ユーザ）からの入力を受け付け、音声入力手段１７は、音声入力を受け付け、音声出力手段１８は、相手テレビ電話端末装置（通信対象テレビ電話端末装置）から受信した音声データを出力する。第一撮像手段２０及び第二撮像手段２１は、撮像データを取得する。
【００１５】
制御手段１９は、送信データ生成手段２３、受信データ解析手段２４、表示制御手段２５、画像回転処理手段２６、画像種別選択手段２７、及び表示レイアウト決定手段２８を有しており、各手段の動作を制御する。
送信データ生成手段２３は、送信するデータを生成し、受信データ解析手段２４は、受信したデータを解析し、表示制御手段２５は、表示手段１４における表示状態を制御する。画像回転処理手段２６は、表示画像の回転処理を行い、画像種別選択手段２７は、表示画像の種別を選択し、表示レイアウト決定手段２８は、表示手段１４の表示レイアウトを決定する。
【００１６】
記憶手段２２は、代替画像データを格納した代替画像データ部２９、及びレイアウトテーブルデータを格納したレイアウトテーブル部３０を有している。
そして、通信手段１５は、受信データａを受信データ解析手段２４へ出力し、操作手段１６は、操作信号ｂを、音声入力手段１７は、音声データ（入力）ｃを、それぞれ制御手段１９へ出力する。音声出力手段１８には、制御手段１９からの音声データ（出力）ｄを入力する。第一撮像手段２０は、撮像画像データｅを、第二撮像手段２１は、撮像画像データｆを、代替画像データ部２９は、代替画像データｇを、それぞれ画像種別選択手段２７へ出力し、レイアウトテーブル部３０は、レイアウトテーブルデータｈを表示レイアウト決定手段２８へ出力する。
【００１７】
送信データ生成手段２３は、送信データｉを通信手段１５へ出力し、受信データ解析手段２４は、受信画像データｊを表示制御手段２５へ、受信画像種別情報ｋを表示レイアウト決定手段２８へ、それぞれ出力する。表示制御手段２５は、表示データｌを表示手段１４へ出力する。
画像回転処理手段２６は、送信画像データ（回転後）ｍを画像種別選択手段２７へ出力し、画像種別選択手段２７は、送信画像データｎを送信データ生成手段２３、表示制御手段２５及び画像回転処理手段２６へ、送信画像種別情報ｏを送信データ生成手段２３及び表示レイアウト決定手段２８へ、それぞれ出力する。表示レイアウト決定手段２８は、表示レイアウト情報ｐを表示制御手段２５及び画像種別選択手段２７へ、出力する。
【００１８】
つまり、通信手段１５を介して相手テレビ電話端末装置（通話対象のテレビ電話端末装置）から受信した画像種別情報、即ち、受信画像種別情報ｋに基いて、表示画面の表示レイアウトを決定し、決定した表示レイアウトになるように表示手段１４を制御する。
ここで、画像種別情報としては以下を想定し、それぞれの表示サイズレベルを設定する。表示サイズレベルは、例えば、テレビ電話端末装置により通信する通信者の「自画像」を３、テレビ電話端末装置の撮像手段により撮影された「風景画」を４、横長のパノラマ表示された「風景画（パノラマ）」を５、「自端末が用意した代替画（送信者）」を２、「相手端末が用意した代替画（受信者）」を１、「サーバが用意した代替画（サーバ）」を１とし、(小)１≦表示サイズレベル≦５(大)とする。
【００１９】
図３は、送信画像種別情報を送信する場合の送信制御手順を示すフローチャートである。図３に示すように、先ず、操作手段１６から得られる操作信号に基づきテレビ電話通話を開始するか否かを判断し（ステップＳ１０１）、判断の結果、テレビ電話通話を開始する（ｙｅｓ）場合、送信画像を設定（初期設定）する（ステップＳ１０２）。画像種別選択手段２７により、送信画像として、第一撮像手段２０からの撮像画像データｅ、第二撮像手段２１からの撮像画像データｆ、代替画像データ部２９からの代替画像データｇの何れかが設定される。以降、ループを開始し（ステップＳ１０３）、テレビ電話通話を終話するまで処理を繰り返す。
【００２０】
一方、ステップＳ１０１での判断の結果、テレビ電話通話を開始しない（ｎｏ）場合、判断を繰り返す。
次に、送信画像の切替操作があったか否かを判断し（ステップＳ１０４）、切替操作があった（ｙｅｓ）場合、送信画像設定を変更した（ステップＳ１０５）後、送信画像設定に応じた送信画像種別情報ｏを生成する（ステップＳ１０６）。その後、送信画像データｎと共に送信画像種別情報ｏを送信し（ステップＳ１０７）、テレビ電話通話の終話条件が満たされることにより、ループを終了して、処理を終了する。また、ステップＳ１０４において切替操作がない（ｎｏ）場合、その時点での送信画像設定に応じた送信画像種別情報を送信画像データと共に送信する。
【００２１】
図４は、受信画像種別情報を取得した場合の受信制御手順を示すフローチャートである。図４に示すように、先ず、操作手段１６から得られる操作信号に基づきテレビ電話通話を開始するか否かを判断し（ステップＳ２０１）、判断の結果、テレビ電話通話を開始する（ｙｅｓ）場合、表示モードを設定（初期設定）する（ステップＳ２０２）。以降、ループを開始し（ステップＳ２０３）、テレビ電話通話を終話するまで処理を繰り返す。
一方、ステップＳ２０１での判断の結果、テレビ電話通話を開始しない（ｎｏ）場合、判断を繰り返す。
【００２２】
次に、受信データａを解析して受信画像種別情報ｋを取得し（ステップＳ２０４）、受信画像種別情報ｋに応じた表示モードを設定する（ステップＳ２０５）。その後、表示モードに応じた表示レイアウトを決定し、決定した表示レイアウトに基づいて画面表示を行い（ステップＳ２０６）、テレビ電話通話の終話条件が満たされることにより、ループを終了して、処理を終了する。
【００２３】
図５は、送信画像種別情報の送信と受信画像種別情報の取得に伴う一連の制御手順を示すフローチャートである。図５に示すように、先ず、操作手段１６から得られる操作信号に基づきテレビ電話通話を開始するか否かを判断し（ステップＳ３０１）、判断の結果、テレビ電話通話を開始する（ｙｅｓ）場合、送信画像を設定（初期設定）し（ステップＳ３０２）、その後、表示モードを設定（初期設定）する（ステップＳ３０３）。以降、ループを開始し（ステップＳ３０４）、テレビ電話通話を終話するまで処理を繰り返す。
一方、ステップＳ３０１での判断の結果、テレビ電話通話を開始しない（ｎｏ）場合、判断を繰り返す。
【００２４】
次に、送信画像の切替操作があったか否かを判断し（ステップＳ３０５）、切替操作があった（ｙｅｓ）場合、送信画像設定を変更した（ステップＳ３０６）後、送信画像設定に応じた送信画像種別情報ｏを生成する（ステップＳ３０７）。その後、受信データａを解析して受信画像種別情報ｋを取得し（ステップＳ３０８）、送信画像種別情報ｏ及び受信画像種別情報ｋに応じた表示モードを設定する（ステップＳ３０９）。その後、表示モードに応じた表示レイアウトを決定し、決定した表示レイアウトに基づいて画面表示を行い（ステップＳ３１０）、送信画像データｎと共に送信画像種別情報ｏを送信する（ステップＳ３１１）。そして、テレビ電話通話の終話条件が満たされることにより、ループを終了して、処理を終了する。また、ステップＳ３０５において切替操作がない（ｎｏ）場合、その時点での送信画像設定に応じた送信画像種別情報と受信画像種別情報に基づいて表示レイアウトを行う。
【００２５】
続いて、表示画面に表示される画像が横向きの画像である場合について説明する。
図６は、横向きの表示画像がある場合の送信画像種別情報の送信と受信画像種別情報の取得に伴う一連の制御手順を示すフローチャートである。図６に示すように、先ず、操作手段１６から得られる操作信号に基づきテレビ電話通話を開始するか否かを判断し（ステップＳ４０１）、判断の結果、テレビ電話通話を開始する（ｙｅｓ）場合、送信画像を設定（初期設定）し（ステップＳ４０２）、その後、表示モードを設定（初期設定）する（ステップＳ４０３）。以降、ループを開始し（ステップＳ４０４）、テレビ電話通話を終話するまで処理を繰り返す。
【００２６】
一方、ステップＳ４０１での判断の結果、テレビ電話通話を開始しない（ｎｏ）場合、判断を繰り返す。
次に、送信画像の切替操作があったか否かを判断し（ステップＳ４０５）、切替操作があった（ｙｅｓ）場合、送信画像設定を変更した（ステップＳ４０６）後、送信画像設定に応じた送信画像種別情報ｏを生成する（ステップＳ４０７）。その後、受信データａを解析して受信画像種別情報ｋを取得し（ステップＳ４０８）、送信画像種別情報ｏ及び受信画像種別情報ｋに応じた表示モードを設定する（ステップＳ４０９）。その後、表示モードに応じた表示レイアウトを決定し、決定した表示レイアウトに基づいて画面表示を行う（ステップＳ４１０）。また、ステップＳ４０５において切替操作がない（ｎｏ）場合、その時点の送信画像設定に応じた送信画像種別情報と受信画像種別情報に基づいて表示レイアウトを行う。
【００２７】
次に、表示が横向きであるか否かを判断する（ステップＳ４１１）。判断の結果、横向きである（ｙｅｓ）場合、送信画像が代替画であるか否かを判断し（ステップＳ４１２）、代替画でない（ｎｏ）場合、表示の向きに応じて送信画像を回転処理した（ステップＳ４１３）後、送信画像データｎと共に送信画像種別情報ｏを送信する（ステップＳ４１４）。一方、ステップＳ４１１で、横向きでない（ｎｏ）場合、及びステップＳ４１２で、代替画である（ｙｅｓ）場合、送信画像データｎと共に送信画像種別情報ｏを送信する（ステップＳ４１４）。
その後、テレビ電話通話の終話条件が満たされることにより、ループを終了して、処理を終了する。
【００２８】
図７は、この発明に係るテレビ電話システムにおいて用いる画像の一例を示す説明図である。図７に示すように、送信者（通話者Ａ）及び受信者（通話者Ｂ）について、それぞれ自画像、風景画、風景画（パノラマ）、代替画があり、サーバについて代替画がある。
図８は、図１のテレビ電話端末装置の表示画面における表示比率を示す説明図である。図９は、図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その１）である。図８及び図９に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が自画像で送信画像種別が自画像である場合、受信画像と送信画像とガイド部の表示比率を３：２：５とし（図８、図９（ａ）参照）、受信画像種別が自画像で送信画像種別が風景画である場合、表示比率を３：２：５にする（図８、図９（ｂ）参照）。
【００２９】
同様に、受信画像種別が自画像である場合に、送信画像種別が風景画（パノラマ）である場合、表示比率を３：３：４（図８、図９（ｃ）参照）に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を３：２：５（図８、図９（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を５：０：５（図８、図９（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を５：０：５（図８、図９（ｆ）参照）にする。
【００３０】
図１０は、図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その２）である。図８及び図１０に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が風景画である場合に、送信画像種別が自画像である場合、表示比率を５：１：４（図８、図１０（ａ）参照）に、送信画像種別が風景画である場合、表示比率を５：１：４（図８、図１０（ｂ）参照）に、送信画像種別が風景画（パノラマ）である場合、表示比率を５：２：３（図８、図１０（ｃ）参照）に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を５：１：４（図８、図１０（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を５：０：５（図８、図１０（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を５：０：５（図８、図１０（ｆ）参照）にする。
【００３１】
図１１は、図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その３）である。図８及び図１１に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が風景画（パノラマ）である場合に、送信画像種別が自画像である場合、表示比率を４：２：４（図８、図１１（ａ）参照）に、送信画像種別が風景画である場合、表示比率を４：２：４（図８、図１１（ｂ）参照）に、送信画像種別が風景画（パノラマ）である場合、表示比率を４：３：３（図８、図１１（ｃ）参照）に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を４：２：４（図８、図１１（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を４：０：６（図８、図１１（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を４：０：６（図８、図１１（ｆ）参照）にする。
【００３２】
図１２は、図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その４）である。図８及び図１２に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が代替画（送信者、即ち、相手）である場合に、送信画像種別が自画像である場合、表示比率を３：２：５（図８、図１２（ａ）参照）に、送信画像種別が風景画である場合、表示比率を２：３：５（図８、図１２（ｂ）参照）に、送信画像種別が風景画（パノラマ）である場合、表示比率を２：４：４（図８、図１２（ｃ）参照）に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を３：２：５（図８、図１２（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を３：０：７（図８、図１２（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を３：０：７（図８、図１２（ｆ）参照）にする。
【００３３】
図１３は、図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その５）である。図８及び図１３に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が代替画（サーバ）である場合に、送信画像種別が自画像である場合、表示比率を２：３：５（図８、図１３（ａ）参照）に、送信画像種別が風景画である場合、表示比率を２：３：５（図８、図１３（ｂ）参照）に、送信画像種別が風景画（パノラマ）である場合、表示比率を２：４：４（図８、図１３（ｃ）参照）に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を２：２：６（図８、図１３（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を３：０：７（図８、図１３（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を３：０：７（図８、図１３（ｆ）参照）にする。
【００３４】
図１４は、図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その６）である。図８及び図１４に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が代替画（受信者、即ち、自分）である場合に、送信画像種別が自画像である場合、表示比率を２：３：５（図８、図１４（ａ）参照）に、送信画像種別が風景画である場合、表示比率を２：３：５（図８、図１４（ｂ）参照）に、送信画像種別が風景画（パノラマ）である場合、表示比率を２：４：４（図８、図１４（ｃ）参照）に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を３：０：７（図８、図１４（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を３：０：７（図８、図１４（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を３：０：７（図８、図１４（ｆ）参照）にする。
【００３５】
図１５は、図１のテレビ電話端末装置の表示画面における横向きレイアウトがある場合の表示比率を示す説明図である。図１６は、図１５の表示比率による送信者の表示画面における表示レイアウトの説明図である。
図１５に示すように、表示画像に横向きレイアウトがある場合は、送信画像種別が代替画（送信者）、代替画（サーバ）、代替画（受信者）で、受信画像種別が風景画、風景画（パノラマ）である場合に、面積比率を、表示画像に横向きレイアウトがない場合（図７参照）と異ならせている。
つまり、表示レイアウト変更により、表示画面１４の表示を横向き全画面による表示へと変更する。横向き全画面による表示レイアウトとした場合、右９０度の横向き全画面表示なら撮像手段にて撮像中の送信画像を左９０度回転処理して送信し、左９０度の横向き全画面表示なら撮像手段にて撮像中の送信画像を右９０度回転処理して送信する。
【００３６】
図１５及び図１６に示すように、送信者（通話者Ａ）の表示画面１４における表示レイアウトは、テレビ電話端末装置１１の表示画面１４における表示面積の合計を１０として、受信画像種別が風景画である場合に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を９：１：０（図１５、図１６（ａ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を１０：０：０（図１５、図１６（ｂ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を１０：０：０（図１５、図１６（ｃ）参照）にする。
【００３７】
同様に、受信画像種別が風景画（パノラマ）である場合に、送信画像種別が代替画（送信者、即ち、自分）である場合、表示比率を８：０．５：１．５（図１５、図１６（ｄ）参照）に、送信画像種別が代替画（サーバ）である場合、表示比率を８：０：２（図１５、図１６（ｅ）参照）に、送信画像種別が代替画（受信者、即ち、相手）である場合、表示比率を８：０：２（図１５、図１６（ｆ）参照）にする。
その他は、表示画像に横向きレイアウトがない場合（図７参照）と同様である。
このように、送信画像の種別と受信画像の種別に応じて、表示画面１４における画像の表示比率を変化させる（図７〜図１６参照）。なお、この表示比率は、テレビ電話端末装置１１の各ユーザが任意の比率に設定することができるようにしても良い。
また、図９〜１４，１６における表示画面の例において、表示画面にある「送信」、「受信」とは、本実施例の説明のために表記しているものであって、実際に表示しなくても良い。
【００３８】
上述したように、この発明に係るテレビ電話システムは、テレビ電話端末装置の間で画像データ及び音声データを送受信するテレビ電話システムであって、送信側のテレビ電話端末装置は、送信する画像データの画像種別を選択すると共に、選択した画像種別の情報を受信側のテレビ電話端末装置に送信し、受信側のテレビ電話端末装置は、前記送信側のテレビ電話端末装置から前記選択した画像種別の情報を受信し、該受信した画像種別の情報に基づいて表示手段の表示レイアウトを決定することを特徴とする。
また、前記受信側のテレビ電話端末装置が選択している送信する画像データの画像種別の情報と、前記送信側のテレビ電話端末装置から受信した画像種別の情報とに基づいて、前記表示レイアウトを決定することを特徴とする。
【００３９】
また、前記画像データの画像種別の情報は、前記テレビ電話端末装置により通信する通信者の自画像、風景画像、横長のパノラマ画像、代替画像のいずれかであることを特徴とする。
また、前記表示レイアウトは、横向き全画面表示を含むことを特徴とする。
この発明に係るテレビ電話端末装置は、送信画像と受信画像を表示可能な表示手段と、通話対象のテレビ電話端末装置から該通話対象のテレビ電話端末装置が送信する画像データの画像種別の情報を受信する受信手段と、該受信手段により受信した画像種別の情報に基づいて、前記表示手段における送信画像及び受信画像の少なくとも一方の表示レイアウトを決定する変更手段とを有することを特徴とする。
また、送信する画像データの画像種別を選択する選択手段を備え、前記選択手段が選択している送信する画像データの画像種別の情報と、前記受信手段により受信した画像種別の情報とに基づいて、前記表示レイアウトを決定することを特徴とする。
【００４０】
この発明に係るテレビ電話画像表示方法は、テレビ電話端末装置間で画像データ及び音声データを送受信するテレビ電話画像表示方法であって、送信する画像データの画像種別を選択すると共に、選択した画像種別の情報を通話対象のテレビ電話端末装置に送信する処理と、前記通話対象のテレビ電話端末装置から画像データとともに画像種別の情報を受信し、該受信した画像種別の情報に基づいて表示手段の表示レイアウトを決定する処理とを有することを特徴とする。
また、前記表示レイアウトを決定する処理は、送信する画像データの画像種別の情報と、前記通話対象のテレビ電話端末装置から受信した画像種別の情報とに基づいて行うことを特徴とする。
【００４１】
このように、この発明によれば、表示画面に表示する画像の種類に応じて表示画面の表示レイアウトを決定することができる。
つまり、本発明によれば、通信対象テレビ電話端末装置（相手テレビ電話端末装置）から受信中の画像の画像種別情報に基いて、表示画面の表示レイアウトを自動制御することにより、ユーザにとって見易い表示を行なうことができる。また、通信相手テレビ電話端末装置から受信中の画像の画像種別情報のみならず自テレビ電話端末装置から送信中の画像の画像種別情報に基いて、表示画面の表示レイアウトを自動制御することにより、より適切な見易い表示を行なうことが可能となる。更に、表示レイアウトの変更に伴って、撮像中の画像を適切に加工してから送信することにより、通話対象のテレビ電話端末装置においても快適なテレビ電話通話ができる。
なお、本発明は、上述した実施の形態により説明したが、この実施の形態に限定されるものではない。従って、本発明の趣旨を逸脱することなく変更態様として実施するものも含むものである。
【図面の簡単な説明】
【００４２】
【図１】この発明の一実施の形態に係るテレビ電話システムの概略構成を示すブロック図である。
【図２】図１のテレビ電話端末装置の構成を示すブロック図である。
【図３】送信画像種別情報を送信する場合の送信制御手順を示すフローチャートである。
【図４】受信画像種別情報を取得した場合の受信制御手順を示すフローチャートである。
【図５】送信画像種別情報の送信と受信画像種別情報の取得に伴う一連の制御手順を示すフローチャートである。
【図６】横向きの表示画像がある場合の送信画像種別情報の送信と受信画像種別情報の取得に伴う一連の制御手順を示すフローチャートである。
【図７】この発明に係るテレビ電話システムにおいて用いる画像の一例を示す説明図である。
【図８】図１のテレビ電話端末装置の表示画面における表示比率を示す説明図である。
【図９】図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その１）である。
【図１０】図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その２）である。
【図１１】図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その３）である。
【図１２】図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その４）である。
【図１３】図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その５）である。
【図１４】図８の表示比率による送信者の表示画面における表示レイアウトの説明図（その６）である。
【図１５】図１のテレビ電話端末装置の表示画面における横向きレイアウトがある場合の表示比率を示す説明図である。
【図１６】図１５の表示比率による送信者の表示画面における表示レイアウトの説明図である。
【図１７】従来のテレビ電話端末装置を用いてテレビ電話通話を行った場合の表示画面における表示例を示し、（ａ）は通話者Ａが自画像を送信した状態の通話者Ａの表示画面の説明図、（ｂ）は（ａ）の状態で受信した通話者Ｂの表示画面の説明図、（ｃ）は通話者Ａが風景を送信した状態の通話者Ａの表示画面の説明図、（ｄ）は（ｃ）の状態で受信した通話者Ｂの表示画面の説明図、（ｅ）は通話者Ａが代替画を送信した状態の通話者Ａの表示画面の説明図、（ｆ）は（ｅ）の状態で受信した通話者Ｂの表示画面の説明図である。
【符号の説明】
【００４３】
１０  テレビ電話システム
１１  テレビ電話端末装置
１１ａ  第１筐体
１１ｂ  第２筐体
１２  サーバ
１３  基地局
１４  表示手段
１５  通信手段
１５ａ  アンテナ
１６  操作手段
１７  音声入力手段
１８  音声出力手段
１９  制御手段
２０  第一撮像手段
２１  第二撮像手段
２２  記憶手段
２３  送信データ生成手段
２４  受信データ解析手段
２５  表示制御手段
２６  画像回転処理手段
２７  画像種別選択手段
２８  表示レイアウト決定手段
２９  代替画像データ部
３０  レイアウトテーブル部
ａ  受信データ
ｂ  操作信号
ｃ  音声データ（入力）
ｄ  音声データ（出力）
ｅ  撮像画像データ
ｆ  撮像画像データ
ｇ  代替画像データ
ｈ  レイアウトテーブルデータ
ｉ  送信データ
ｊ  受信画像データ
ｋ  受信画像種別情報
ｌ  表示データ
ｍ  送信画像データ（回転後）
ｎ  送信画像データ
ｏ  送信画像種別情報
ｐ  表示レイアウト情報
【図１】
0005154020.tif 000002
【図２】
0005154020.tif 000003
【図３】
0005154020.tif 000004
【図４】
0005154020.tif 000005
【図５】
0005154020.tif 000006
【図６】
0005154020.tif 000007
【図７】
0005154020.tif 000008
【図８】
0005154020.tif 000009
【図９】
0005154020.tif 000010
【図１０】
0005154020.tif 000011
【図１１】
0005154020.tif 000012
【図１２】
0005154020.tif 000013
【図１３】
0005154020.tif 000014
【図１４】
0005154020.tif 000015
【図１５】
0005154020.tif 000016
【図１６】
0005154020.tif 000017
【図１７】
0005154020.tif 000018