(57)【要約】【課題】多地点会議を行う際、画像サイズが互いに異なるテレビ会議端末を用いた場合であっても、それによる映像の合成処理の負荷の増加を抑える。【解決手段】テレビ会議端末２００−１，２００−２から送信されてきた映像を、合成部１３０が、テレビ会議端末２００−１，２００−２それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成し、送信部１４０が、合成映像をテレビ会議端末２００−１，２００−２それぞれへ送信し、その際、テレビ会議端末２００−１，２００−２のうち、代表画像サイズ以外の画像サイズが設定されたテレビ会議端末へは、合成映像を当該テレビ会議端末に設定された画像サイズへリサイズしてから送信する。【選択図】図２
2012074981.tif 000002
【特許請求の範囲】
【請求項１】
複数の通信端末と接続された多地点会議接続装置であって、
前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成する合成部と、
前記合成映像を前記複数の通信端末それぞれへ送信する送信部とを有し、
前記送信部は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信する多地点会議接続装置。
【請求項２】
請求項１に記載の多地点会議接続装置において、
前記合成部は、前記代表画像サイズとして、前記複数の通信端末それぞれに設定された画像サイズのうちの最大の画像サイズを用いることを特徴とする多地点会議接続装置。
【請求項３】
請求項１に記載の多地点会議接続装置において、
前記合成部は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末から送信されてきた映像を、前記代表画像サイズへリサイズしてから合成することを特徴とする多地点会議接続装置。
【請求項４】
請求項１に記載の多地点会議接続装置において、
前記合成部は、前記映像を所定のレイアウトで合成することを特徴とする多地点会議接続装置。
【請求項５】
請求項１に記載の多地点会議接続装置において、
前記複数の通信端末それぞれから送信されてきた呼制御信号に含まれる前記画像サイズを前記合成部と前記送信部とへ通知する制御部を有することを特徴とする多地点会議接続装置。
【請求項６】
請求項１に記載の多地点会議接続装置において、
前記合成部は、前記複数の通信端末それぞれにおける表示のアスペクト比に基づいて、前記映像を合成し、
前記送信部は、前記複数の通信端末それぞれにおける表示のアスペクト比に基づいて、前記合成映像をリサイズすることを特徴とする多地点会議接続装置。
【請求項７】
撮影機能および映像表示機能を具備した複数の通信端末と、該複数の通信端末と接続された多地点会議接続装置とから構成された多地点会議システムにおいて、
前記多地点会議接続装置は、前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成し、該合成映像を前記複数の通信端末それぞれへ送信し、その際、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信し、
前記複数の通信端末は、前記撮影機能を用いて撮影した映像を前記多地点会議接続装置へ送信し、前記多地点会議接続装置から送信されてきた前記合成映像を前記映像表示機能を用いて表示することを特徴とする多地点会議システム。
【請求項８】
多地点それぞれに位置する複数の通信端末を用いて会議を行うための多地点会議接続方法であって、
前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成する合成処理と、
前記合成映像を前記複数の通信端末それぞれへ送信する送信処理とを行い、
前記送信処理は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信する多地点会議接続方法。
【請求項９】
請求項８に記載の多地点会議接続方法において、
前記合成処理は、前記代表画像サイズとして、前記複数の通信端末それぞれに設定された画像サイズのうちの最大の画像サイズを用いることを特徴とする多地点会議接続方法。
【請求項１０】
請求項８に記載の多地点会議接続方法において、
前記合成処理は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末から送信されてきた映像を、前記代表画像サイズへリサイズしてから合成することを特徴とする多地点会議接続方法。
【請求項１１】
請求項８に記載の多地点会議接続方法において、
前記合成処理は、前記映像を所定のレイアウトで合成することを特徴とする多地点会議接続方法。
【請求項１２】
請求項８に記載の多地点会議接続方法において、
前記複数の通信端末それぞれから、前記画像サイズを取得する処理を行うことを特徴とする多地点会議接続方法。
【請求項１３】
請求項８に記載の多地点会議接続方法において、
前記合成処理は、前記複数の通信端末それぞれにおける表示のアスペクト比に基づいて、前記映像を合成し、
前記送信処理は、前記複数の通信端末それぞれにおける表示のアスペクト比に基づいて、前記合成映像をリサイズすることを特徴とする多地点会議接続方法。
【請求項１４】
複数の通信端末と接続された多地点会議接続装置に実行させるためのプログラムであって、
前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成する合成手順と、
前記合成映像を前記複数の通信端末それぞれへ送信する送信手順とを実行させ、
前記送信手順は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信するプログラム。
【請求項１５】
請求項１４に記載のプログラムにおいて、
前記合成手順は、前記代表画像サイズとして、前記複数の通信端末それぞれに設定された画像サイズのうちの最大の画像サイズを用いることを特徴とするプログラム。
【請求項１６】
請求項１４に記載のプログラムにおいて、
前記合成手順は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末から送信されてきた映像を、前記代表画像サイズへリサイズしてから合成することを特徴とするプログラム。
【請求項１７】
請求項１４に記載のプログラムにおいて、
前記合成手順は、前記映像を所定のレイアウトで合成することを特徴とするプログラム。
【請求項１８】
請求項１４に記載のプログラムにおいて、
前記複数の通信端末それぞれから、前記画像サイズを取得する手順を実行させるためのプログラム。
【請求項１９】
請求項１４に記載のプログラムにおいて、
前記合成手順は、前記複数の通信端末それぞれにおける表示のアスペクト比に基づいて、前記映像を合成し、
前記送信手順は、前記複数の通信端末それぞれにおける表示のアスペクト比に基づいて、前記合成映像をリサイズすることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、多地点に位置する複数の通信端末を用いて会議を行うための多地点会議接続装置、多地点会議システム、多地点会議接続方法およびプログラムに関する。
【背景技術】
【０００２】
近年、会議を行う際に、参加者全員が１つの会議室に集まることなく、複数の拠点に設けられた通信端末を用いて行う多地点会議システム（テレビ会議システム）が普及してきている。
【０００３】
この多地点会議システムで用いられる通信端末には、撮影機能および映像表示機能が具備されており、各拠点の映像が互いに送受信されて表示されることにより、あたかも１つの場所で行われている会議のように、当該会議を進行することができる。
【０００４】
図１７は、一般的な多地点会議システムの形態の一例を示す図である。
【０００５】
図１７に示した形態は、ＭＣＵ１０００と、テレビ会議端末２０００−１，２０００−２とから構成されている。ここでは、２台のテレビ会議端末２０００−１，２０００−２間でテレビ会議が行われる場合を例に挙げて示す。
【０００６】
ＭＣＵ（Ｍｕｌｔｉ  ｐｏｉｎｔ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）１０００は、互いに異なる拠点に設置されているテレビ会議端末２０００−１とテレビ会議端末２０００−２とを接続するための多地点会議接続装置である。
【０００７】
テレビ会議端末２０００−１，２０００−２は、撮影機能および映像表示機能が具備された、一般的な多地点会議システムで用いられる通信端末である。
【０００８】
図１８は、図１７に示したＭＣＵ１０００の内部構成の一例を示す図である。
【０００９】
図１７に示したＭＣＵ１０００には図１８に示すように、ポート１０１０−１，１０１０−２と、受信部１０２０と、合成部１０３０と、送信部１０４０とが設けられている。
【００１０】
ポート１０１０−１，１０１０−２は、テレビ会議端末２０００−１，２０００−２とそれぞれ接続され、テレビ会議端末２０００−１，２０００−２との間で、信号を送受信するためのポート（例えば、接続端子）である。なお、ここでは、ポート１０１０−１とテレビ会議端末２０００−１とが接続されており、またポート１０１０−２とテレビ会議端末２０００−２とが接続されている場合を例に挙げて説明する。
【００１１】
受信部１０２０は、テレビ会議端末２０００−１，２０００−２から送信されてきた映像信号を受信し、合成部１０３０が合成可能な信号形式にデコードする。また、受信部１０２０は、デコードした信号を合成部１０３０へ出力する。
【００１２】
合成部１０３０は、受信部１０２０から出力されてきた信号を合成する。この合成とは、テレビ会議端末２０００−１から送信されてきた映像と、テレビ会議端末２０００−２から送信されてきた映像とを、あらかじめ設定されたレイアウトで合成することである。
【００１３】
また、合成部１０３０は、合成した合成映像を送信部１０４０へ出力する。
【００１４】
送信部１０４０は、合成部１０３０から出力されてきた合成映像をエンコードし、テレビ会議端末２０００−１，２０００−２へ送信する。
【００１５】
このようなＭＣＵ１０００と接続できるテレビ会議端末は、それぞれの画像サイズが互いに同じであることが条件である。つまり、画像サイズが互いに異なるテレビ会議端末は、ＭＣＵ１０００とは接続することができない。
【００１６】
図１９は、画像サイズが互いに異なるテレビ会議端末を接続するために考えられる多地点会議接続装置の内部構成の一例を示す図である。ここでは、ポート１０１０−１と接続されたテレビ会議端末２０００−１の画像サイズが「１９２０×１０８０」であり、また、ポート１０１０−２と接続されたテレビ会議端末２０００−２の画像サイズが「１２８０×７２０」である場合を例に挙げて説明する。この「１９２０×１０８０」および「１２８０×７２０」として表わされる画像サイズは、一般的な画像（映像）の解像度を示すものでもある。なお、以下の説明において、画像サイズ「１９２０×１０８０」を「１０８０」と称し、また、画像サイズ「１２８０×７２０」を「７２０」と称する。
【００１７】
図１９に示すようにＭＣＵ１０１１には、ポート１０１０−１，１０１０−２と、受信部１０２０と、合成部１０３１−１，１０３１−２と、送信部１０４０とが設けられている。
【００１８】
ポート１０１０−１，１０１０−２、受信部１０２０および送信部１０４０は、図１８に示したものと同じものである。
【００１９】
合成部１０３１−１は、画像サイズ「１０８０」で、テレビ会議端末２０００−１から送信されてきた映像と、テレビ会議端末２０００−２から送信されてきた映像とを合成する。これは、合成した合成画像を、画像サイズが「１０８０」であるテレビ会議端末２０００−１にて表示するための処理である。
【００２０】
合成部１０３１−２は、画像サイズ「７２０」で、テレビ会議端末２０００−１から送信されてきた映像と、テレビ会議端末２０００−２から送信されてきた映像とを合成する。これは、合成した合成画像を、画像サイズが「７２０」であるテレビ会議端末２０００−２にて表示するための処理である。
【００２１】
また、各端末に応じたレイアウトや符号化を行うことにより、映像を合成する技術が考えられている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【００２２】
【特許文献１】特開２００９−１１７８９６号公報
【発明の概要】
【発明が解決しようとする課題】
【００２３】
しかしながら、上述した技術においては、画像サイズが互いに異なるテレビ会議端末が接続された場合、合成処理がその画像サイズの数（種類）分、必要となり、装置に大きな処理負荷がかかってしまうという問題点がある。
【００２４】
本発明の目的は、上述した課題を解決する多地点会議接続装置、多地点会議システム、多地点会議接続方法およびプログラムを提供することである。
【課題を解決するための手段】
【００２５】
本発明の多地点会議接続装置は、
複数の通信端末と接続された多地点会議接続装置であって、
前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成する合成部と、
前記合成映像を前記複数の通信端末それぞれへ送信する送信部とを有し、
前記送信部は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信する。
【００２６】
また、本発明の多地点会議システムは、
撮影機能および映像表示機能を具備した複数の通信端末と、該複数の通信端末と接続された多地点会議接続装置とから構成された多地点会議システムにおいて、
前記多地点会議接続装置は、前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成し、該合成映像を前記複数の通信端末それぞれへ送信し、その際、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信し、
前記複数の通信端末は、前記撮影機能を用いて撮影した映像を前記多地点会議接続装置へ送信し、前記多地点会議接続装置から送信されてきた前記合成映像を前記映像表示機能を用いて表示することを特徴とする。
【００２７】
また、本発明の多地点会議接続方法は、
多地点それぞれに位置する複数の通信端末を用いて会議を行うための多地点会議接続方法であって、
前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成する合成処理と、
前記合成映像を前記複数の通信端末それぞれへ送信する送信処理とを行い、
前記送信処理は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信する。
【００２８】
また、本発明のプログラムは、
複数の通信端末と接続された多地点会議接続装置に実行させるためのプログラムであって、
前記複数の通信端末から送信されてきた映像を、前記複数の通信端末それぞれにあらかじめ設定された画像サイズのうちのいずれか１つの代表画像サイズで合成映像として合成する合成手順と、
前記合成映像を前記複数の通信端末それぞれへ送信する送信手順とを実行させ、
前記送信手順は、前記複数の通信端末のうち、前記代表画像サイズ以外の前記画像サイズが設定された通信端末へは、前記合成映像を該通信端末に設定された画像サイズへリサイズしてから送信する。
【発明の効果】
【００２９】
以上説明したように、本発明においては、多地点会議を行う際、画像サイズが互いに異なるテレビ会議端末を用いた場合であっても、それによる映像の合成処理の負荷の増加を抑えることができる。
【図面の簡単な説明】
【００３０】
【図１】本発明の多地点会議システムの実施の一形態を示す図である。
【図２】図１に示したＭＣＵの内部構成の一例を示す図である。
【図３】図２に示した受信部の内部構成の一例を示す図である。
【図４】図２に示した合成部の内部構成の一例を示す図である。
【図５】図２に示した送信部の内部構成の一例を示す図である。
【図６】図２に示した記憶部に記憶された画像サイズの一例を示す図である。
【図７】本形態における多地点会議接続方法を説明するためのフローチャートである。
【図８】本形態における多地点会議接続方法を説明するためのフローチャートである。
【図９】図１に示したテレビ会議端末から送信されてきた映像の一例を示す図である。
【図１０】図１に示したテレビ会議端末から送信されてきた映像の他の例を示す図である。
【図１１】図９に示した映像と、図１０に示した映像とが合成された合成映像の一例を示す図である。
【図１２】図９に示した映像と、図１０に示した映像とが合成された合成映像の他の例を示す図である。
【図１３】アスペクト比が「１１：９」であるテレビ会議端末から送信されてきた映像の一例を示す図である。
【図１４】図９に示した映像と、図１３に示した映像とが合成された合成映像の一例を示す図である。
【図１５】アスペクト比が「１６：９」である合成映像を「１１：９」のアスペクト比にリサイズした映像の一例を示す図である。
【図１６】本発明の多地点会議システムの実施の形態の他の例を示す図である。
【図１７】一般的な多地点会議システムの形態の一例を示す図である。
【図１８】図１７に示したＭＣＵの内部構成の一例を示す図である。
【図１９】画像サイズが互いに異なるテレビ会議端末を接続するために考えられる多地点会議接続装置の内部構成の一例を示す図である。
【発明を実施するための形態】
【００３１】
以下に、本発明の実施の形態について図面を参照して説明する。
【００３２】
図１は、本発明の多地点会議システムの実施の一形態を示す図である。
【００３３】
本形態は図１に示すように、ＭＣＵ１００と、テレビ会議端末２００−１，２００−２とから構成されている。ここでは、２台のテレビ会議端末２００−１，２００−２間でテレビ会議が行われる場合を例に挙げて示すが、テレビ会議端末が３台以上であっても良い。
【００３４】
ＭＣＵ（Ｍｕｌｔｉ  ｐｏｉｎｔ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）１００は、互いに異なる拠点に設置されているテレビ会議端末２００−１とテレビ会議端末２００−２とを接続するための多地点会議接続装置である。
【００３５】
テレビ会議端末２００−１，２００−２は、撮影機能および映像表示機能が具備された、一般的な多地点会議システムで用いられる通信端末である。
【００３６】
図２は、図１に示したＭＣＵ１００の内部構成の一例を示す図である。
【００３７】
図１に示したＭＣＵ１００には図２に示すように、ポート１１０−１，１１０−２と、受信部１２０と、合成部１３０と、送信部１４０と、制御部１５０と、記憶部１６０とが設けられている。
【００３８】
ポート１１０−１，１１０−２は、テレビ会議端末２００−１，２００−２とそれぞれ接続され、テレビ会議端末２００−１，２００−２との間で、信号を送受信するためのポート（例えば、接続端子）である。なお、ここでは、ポート１１０−１とテレビ会議端末２００−１とが接続されており、またポート１１０−２とテレビ会議端末２００−２とが接続されている場合を例に挙げて説明する。また、図２に示した形態では、ポートの数が２つである場合を例に挙げて示しているが、３つ以上であっても良い。
【００３９】
受信部１２０は、テレビ会議端末２００−１，２００−２から送信されてきた映像信号を、ポート１１０−１，１１０−２を介して受信する。また、受信部１２０は、受信した映像信号を合成部１３０が合成可能な信号形式にデコードする。また、受信部１２０は、デコードした信号を合成部１３０へ出力する。
【００４０】
図３は、図２に示した受信部１２０の内部構成の一例を示す図である。
【００４１】
図２に示した受信部１２０には図３に示すように、上述したデコード処理を行うデコーダ１２１が設けられている。
【００４２】
デコーダ１２１は、デコード処理を行う際、受信した映像信号の画像サイズに応じたデコード処理を行う。この画像サイズは、テレビ会議端末２００−１，２００−２それぞれにあらかじめ設定されたものであり、テレビ会議端末２００−１，２００−２から送信されてきた呼制御信号に含まれる（呼制御信号を用いて取得した）情報にて示されているものを用いる。例えば、テレビ会議端末２００−１から送信されてきた呼制御信号に含まれる情報にて示されている画像サイズが「１０８０」である場合、テレビ会議端末２００−１からポート１１０−１を介して送信されてくる映像信号に対して、画像サイズ「１０８０」に応じたデコード処理を行う。また、テレビ会議端末２００−２から送信されてきた呼制御信号に含まれる情報にて示されている画像サイズが「７２０」である場合、テレビ会議端末２００−２からポート１１０−２を介して送信されてくる映像信号に対して、画像サイズ「７２０」に応じたデコード処理を行う。これらのデコード処理は、一般的に行われているもので良い。
【００４３】
また、このとき、デコーダ１２１は、呼制御信号に含まれている、テレビ会議端末２００−１，２００−２に設定されている映像品質の違いを示す規格として用いられる「ｉ（インターレース方式）」や「ｐ（プログレッシブ方式）」に応じたデコード処理を行う。例えば、テレビ会議端末２００−１に設定されている規格が「１０８０ｉ」である場合、テレビ会議端末２００−１から送信されてきた映像に対して、「１０８０ｉ」に応じたデコード処理を行う。また、テレビ会議端末２００−２に設定されている規格が「７２０ｐ」である場合、テレビ会議端末２００−２から送信されてきた映像に対して、「７２０ｐ」に応じたデコード処理を行う。
【００４４】
また、デコーダ１２１は、テレビ会議端末２００−１，２００−２から送信されてきた呼制御信号を制御部１５０へ出力する。
【００４５】
また、デコーダ１２１は、デコード処理を施した映像データを合成部１３０へ出力する。
【００４６】
合成部１３０は、受信部１２０から出力されてきた信号を合成する。この合成とは、テレビ会議端末２００−１から送信されてきた映像と、テレビ会議端末２００−２から送信されてきた映像とを、あらかじめ設定されたレイアウトで合成することである。
【００４７】
図４は、図２に示した合成部１３０の内部構成の一例を示す図である。
【００４８】
図２に示した合成部１３０には図４に示すように、リサイズ部１３１と、ミキシング部１３２とが設けられている。
【００４９】
リサイズ部１３１は、テレビ会議端末２００−１，２００−２に設定された画像サイズのうちのいずれか１つの画像サイズ（代表画像サイズ）以外の画像サイズが設定されたテレビ会議端末から送信されてきた映像を、代表画像サイズへリサイズしてミキシング部１３２へ出力する。一方、代表画像サイズが設定されたテレビ会議端末から送信されてきた映像については、リサイズは行わずに、ミキシング部１３２へ出力する。
【００５０】
なお、代表画像サイズは、テレビ会議端末２００−１，２００−２に設定された画像サイズのうち最大の画像サイズを用いることが望ましい。それは、この代表画像サイズは、ミキシング部１３２にて映像を合成する際にも使用するため、最大の画像サイズとしておけば、合成した映像の解像度が下がることによる画質の劣化を防ぐことができるからである。
【００５１】
例えば、テレビ会議端末２００−１に設定された画像サイズが「１０８０」であり、またテレビ会議端末２００−２に設定された画像サイズが「７２０」である場合、代表画像サイズは、「１０８０」が用いられる。
【００５２】
また、この画像サイズは、制御部１５０から通知されてきたものを使用する。
【００５３】
ミキシング部１３２は、リサイズ部１３１から出力されてきた映像を、代表画像サイズで合成映像として合成する。つまり、テレビ会議端末２００−１から送信されてきた映像と、テレビ会議端末２００−２から送信されてきた映像とを、最大の画像サイズで合成する。このとき、ミキシング部１３２は、これらの映像をあらかじめ設定されたレイアウトで合成する。そのレイアウトについては、後述する。また、ミキシング部１３２は、合成映像を送信部１４０へ出力する。
【００５４】
送信部１４０は、ミキシング部１３２から出力されてきた合成映像を、ポート１１０−１，１１０−２を介してテレビ会議端末２００−１，２００−２それぞれへ送信する。
【００５５】
図５は、図２に示した送信部１４０の内部構成の一例を示す図である。
【００５６】
図２に示した送信部１４０には図５に示すように、リサイズ部１４１と、エンコーダ１４２とが設けられている。
【００５７】
リサイズ部１４１は、代表画像サイズ以外の画像サイズが設定されたテレビ会議端末へ送信する合成映像を、当該テレビ会議端末に設定された画像サイズへリサイズしてエンコーダ１４２へ出力する。一方、代表画像サイズが設定されたテレビ会議端末へ送信する合成映像については、リサイズは行わずに、エンコーダ１４２へ出力する。なお、ここで用いる代表画像サイズは、合成部１３０にて用いた代表画像サイズと同じものである。
【００５８】
エンコーダ１４２は、リサイズ部１４１から出力されてきた合成画像を、テレビ会議端末２００−１，２００−２それぞれへ送信するためのエンコードを行う。例えば、テレビ会議端末２００−１の画像サイズが「１０８０」である場合、画像サイズ「１０８０」に応じたエンコード処理を行う。また、テレビ会議端末２００−２の画像サイズが「７２０」である場合、画像サイズ「７２０」に応じたエンコード処理を行う。これらのエンコード処理は、一般的に行われているもので良い。
【００５９】
また、このとき、エンコーダ１４２は、上述したデコーダ１２１と同様に、「ｉ（インターレース方式）」や「ｐ（プログレッシブ方式）」に応じたエンコード処理を行う。例えば、テレビ会議端末２００−１に設定されている規格が「１０８０ｉ」である場合、テレビ会議端末２００−１へ送信する合成映像に対して、「１０８０ｉ」に応じたエンコード処理を行う。また、テレビ会議端末２００−２に設定されている規格が「７２０ｐ」である場合、テレビ会議端末２００−２へ送信する合成映像に対して、「７２０ｐ」に応じたエンコード処理を行う。
【００６０】
また、エンコーダ１４２は、エンコード処理を行った合成画像を、ポート１１０−１，１１０−２を介してテレビ会議端末２００−１，２００−２それぞれへ送信する。
【００６１】
なお、リサイズ部１４１およびエンコーダ１４２で使用する画像サイズは、制御部１５０から通知されてきたものを使用する。
【００６２】
制御部１５０は、デコーダ１２１から出力されてきた、テレビ会議端末２００−１，２００−２それぞれから送信されてきた呼制御信号から、画像サイズを抽出し、抽出した画像サイズを合成部１３０および送信部１４０へ通知する。また、制御部１５０は、デコーダ１２１から出力されてきた、テレビ会議端末２００−１，２００−２それぞれから送信されてきた呼制御信号から、上述した規格を示す情報を抽出し、抽出した情報が示す規格を送信部１４０へ通知する。
【００６３】
また、制御部１５０は、呼制御信号から抽出した画像サイズをポート１１０−１，１１０−２ごとに記憶部１６０に記憶させておくものであっても良い。この場合、画像サイズを合成部１３０または送信部１４０へ通知する必要があるときに、記憶部１６０から読み出して通知する。
【００６４】
記憶部１６０は、ポート１１０−１，１１０−２ごとに画像サイズを記憶する。
【００６５】
図６は、図２に示した記憶部１６０に記憶された画像サイズの一例を示す図である。
【００６６】
図２に示した記憶部１６０には図６に示すように、ポート番号と画像サイズとが対応付けられて記憶されている。
【００６７】
ポート番号は、ポート１１０−１とポート１１０−２とを識別可能な識別情報である。このポート番号と画像サイズとが対応付けられることにより、当該ポート番号に相当するポートと接続されているテレビ会議端末の画像サイズを認識することができる。
【００６８】
例えば、図６に示すように、ポート番号「１１０−１」と、画像サイズ「１０８０」とが対応付けられて記憶されている。これは、ポート番号「１１０−１」であるポート１１０−１と接続されたテレビ会議端末（ここでは、テレビ会議端末２００−１）の画像サイズが「１０８０」であることを示している。また、ポート番号「１１０−２」と、画像サイズ「７２０」とが対応付けられて記憶されている。これは、ポート番号「１１０−２」であるポート１１０−２と接続されたテレビ会議端末（ここでは、テレビ会議端末２００−２）の画像サイズが「７２０」であることを示している。
【００６９】
制御部１５０は、このように記憶部１６０に記憶されている画像サイズを、ポート番号を検索キーとして読み出すことにより、合成部１３０および送信部１４０へ通知することができる。
【００７０】
以下に、本形態における多地点会議接続方法について説明する。なお、以下の説明においては、テレビ会議端末２００−１に設定されている画像サイズが「１０８０」、規格が「１０８０ｉ」であり、また、テレビ会議端末２００−２に設定されている画像サイズが「７２０」、規格が「７２０ｐ」である場合を例に挙げて説明する。また、それぞれの画像サイズが「１０８０」と「７２０」であるため、それらのうち最大の画像サイズである「１０８０」が代表画像サイズとなる。
【００７１】
まずは、本形態における多地点会議接続方法のうち、図１に示したテレビ会議端末２００−２から送信されてきた映像を受信してからテレビ会議端末２００−２へ送信するまでの処理方法について説明する。
【００７２】
図７は、本形態における多地点会議接続方法のうち、図１に示したテレビ会議端末２００−２から送信されてきた映像を受信してからテレビ会議端末２００−２へ送信するまでの処理方法を説明するためのフローチャートである。
【００７３】
まず、テレビ会議端末２００−２から送信されてきた映像が、ポート１１０−２にて受信されると（ステップＳ１）、受信した映像についてデコーダ１２１にてデコード処理が行われる（ステップＳ２）。この場合、テレビ会議端末２００−２から送信されてきた映像に対してデコード処理が行われるため、規格「７２０ｐ」に応じたデコード処理が行われる。
【００７４】
デコード処理された映像がデコーダ１２１からリサイズ部１３１へ出力されると、本映像は代表画像サイズ以外が設定されたテレビ会議端末２００−２から送信されてきた（ポート１１０−２にて受信した）ものであるため、リサイズ部１３１にて画像サイズ「１０８０」へリサイズされる（ステップ３）。
【００７５】
すると、ミキシング部１３２にて、当該映像と、テレビ会議端末２００−１から送信されてきて後述するステップＳ１１およびＳ１２の処理が行われた映像とが所定のレイアウトで合成される（ステップＳ４）。合成された合成映像はミキシング部１３２から送信部１４０へ出力される。
【００７６】
すると、この合成映像が送信部１４０からテレビ会議端末２００−１，２００−２へ送信されるわけだが、テレビ会議端末２００−２の画像サイズは代表画像サイズではないため、テレビ会議端末２００−２へ送信される合成映像は、リサイズ部１４１にて画像サイズ「７２０」へリサイズされる（ステップＳ５）。
【００７７】
リサイズされた合成映像は、エンコーダ１４２にて、テレビ会議端末２００−２に設定されている規格「７２０ｐ」に応じたエンコード処理が行われる（ステップＳ６）。
【００７８】
そして、エンコード処理された合成映像が、エンコーダ１４２からポート１１０−２を介してテレビ会議端末２００−２へ送信される（ステップＳ７）。
【００７９】
このように送信された合成映像は、テレビ会議端末２００−２の画像サイズおよび規格に応じたものとなっているため、テレビ会議端末２００−２にて表示することができる。
【００８０】
次に、本形態における多地点会議接続方法のうち、図１に示したテレビ会議端末２００−１から送信されてきた映像を受信してからテレビ会議端末２００−１へ送信するまでの処理方法について説明する。
【００８１】
図８は、本形態における多地点会議接続方法のうち、図１に示したテレビ会議端末２００−１から送信されてきた映像を受信してからテレビ会議端末２００−１へ送信するまでの処理方法を説明するためのフローチャートである。
【００８２】
まず、テレビ会議端末２００−１から送信されてきた映像が、ポート１１０−１にて受信されると（ステップＳ１１）、受信した映像についてデコーダ１２１にてデコード処理が行われる（ステップＳ１２）。この場合、テレビ会議端末２００−１から送信されてきた映像に対してデコード処理が行われるため、規格「１０８０ｉ」に応じたデコード処理が行われる。
【００８３】
デコード処理された映像がデコーダ１２１からリサイズ部１３１へ出力されると、本映像は代表画像サイズが設定されたテレビ会議端末２００−１から送信されてきた（ポート１１０−１にて受信した）ものであるため、リサイズ部１３１におけるリサイズ処理は行われない。
【００８４】
そして、ミキシング部１３２にて、当該映像と、テレビ会議端末２００−２から送信されてきて上述したステップＳ１〜Ｓ３の処理が行われた映像とが所定のレイアウトで合成される（ステップＳ１３）。合成された合成映像はミキシング部１３２から送信部１４０へ出力される。
【００８５】
すると、この合成映像が送信部１４０からテレビ会議端末２００−１，２００−２へ送信されるわけだが、テレビ会議端末２００−１の画像サイズは代表画像サイズであるため、テレビ会議端末２００−１へ送信される合成映像は、リサイズ部１４１におけるリサイズ処理は行われない。
【００８６】
その後、この合成映像は、エンコーダ１４２にて、テレビ会議端末２００−１に設定されている規格「１０８０ｉ」に応じたエンコード処理が行われる（ステップＳ１４）。
【００８７】
そして、エンコード処理された合成映像が、エンコーダ１４２からポート１１０−１を介してテレビ会議端末２００−１へ送信される（ステップＳ１５）。
【００８８】
このように送信された合成映像は、テレビ会議端末２００−１の画像サイズおよび規格に応じたものとなっているため、テレビ会議端末２００−１にて表示することができる。
【００８９】
図７に示したフローチャートを用いて説明した処理と、図８に示したフローチャートを用いて説明した処理とを比較すると、代表画像サイズ以外の画像サイズが設定されたテレビ会議端末２００−２に対しては、画像サイズを「リサイズ」する必要がある。しかし、背景技術で説明したような、それぞれの画像サイズに応じた合成処理を１つずつ設けるよりも、処理負担が軽いというメリットがある。
【００９０】
以下に、合成する映像のレイアウトについて説明する。
【００９１】
図９は、図１に示したテレビ会議端末２００−１から送信されてきた映像の一例を示す図である。
【００９２】
図９に示すように、テレビ会議端末２００−１からは、テレビ会議端末２００−１を用いて会議に参加している男性の映像が送信されてきている。
【００９３】
図１０は、図１に示したテレビ会議端末２００−２から送信されてきた映像の一例を示す図である。
【００９４】
図１０に示すように、テレビ会議端末２００−２からは、テレビ会議端末２００−２を用いて会議に参加している女性の映像が送信されてきている。
【００９５】
図１１は、図９に示した映像と、図１０に示した映像とが合成された合成映像の一例を示す図である。
【００９６】
図１１に示すように、合成映像を表示する領域が、互いに同じ大きさの４つの表示領域３００−１〜３００−４に分割されたレイアウトで、所定の位置に図９に示した映像と、図１０に示した映像とが合成される。ここでは、図９に示した映像が表示領域３００−１に、また図１０に示した映像が表示領域３００−２にレイアウトされて合成される。
【００９７】
図１２は、図９に示した映像と、図１０に示した映像とが合成された合成映像の他の例を示す図である。
【００９８】
図１２に示すように、合成映像を表示する領域が、１つの表示領域３０１−１と、表示領域３０１−１の大きさとは異なり、互いに同じ大きさの５つの表示領域３０１−２〜３０１−６とに分割されたレイアウトで、所定の位置に図９に示した映像と、図１０に示した映像とが合成される。ここでは、図９に示した映像が表示領域３０１−１に、また図１０に示した映像が表示領域３０１−２にレイアウトされて合成される。
【００９９】
なお、図１１および図１２に示した以外のレイアウトであっても良い。また、図１１および図１２に示したように、それぞれの映像が合成される領域があらかじめ設定されているものであっても良いし、外部から設定できるものであっても良い。
【０１００】
以上、画像サイズが「１０８０」や「７２０」である場合を例に挙げて説明した。これらの画像の表示のアスペクト比は「１６：９」である。
【０１０１】
近年、携帯端末等で使用されているＣＩＦ（Ｃｏｍｍｏｎ  Ｉｎｔｅｒｍｅｄｉａｔｅ  Ｆｏｒｍａｔ）という規格が存在する。このＣＩＦでは、映像をアスペクト比「１１：９」で表示を行う。このような「１６：９」とは異なるアスペクト比を持つテレビ会議端末が接続されている場合の合成部１３０における合成処理について、以下に説明する。以下の説明では、図１に示したテレビ会議端末２００−２のアスペクト比が「１１：９」である場合を例に挙げて説明する。
【０１０２】
図１３は、アスペクト比が「１１：９」であるテレビ会議端末２００−２から送信されてきた映像の一例を示す図である。
【０１０３】
図１３に示すように、テレビ会議端末２００−２からは、アスペクト比が「１１：９」である映像が送信されてきている。
【０１０４】
図１４は、図９に示した映像と、図１３に示した映像とが合成された合成映像の一例を示す図である。
【０１０５】
図１４に示すように、合成映像を表示する領域が、図１１と同様に互いに同じ大きさの４つの表示領域３００−１〜３００−４に分割されたレイアウトで、所定の位置に図９に示した映像と、図１３に示した映像とが合成される。ここでは、図９に示した映像が表示領域３００−１に、また図１３に示した映像が表示領域３００−２にレイアウトされて合成される。
【０１０６】
ここで、表示領域３００−１〜３００−４のそれぞれのアスペクト比は「１６：９」であるのに対して、図１３に示した映像のアスペクト比は「１１：９」である。そのため、アスペクト比が「１１：９」である映像を「１６：９」のアスペクト比の映像へ合わせる必要がある。
【０１０７】
アスペクト比が「１１：９」である映像を「１６：９」のアスペクト比の映像へ合わせるには、横方向に当該映像を引きのばす方法があるが、正確な映像を表示する意味では適切ではない。
【０１０８】
そこで、それぞれのアスペクト比を変更せずに維持したまま表示させるために、図１４に示すように、アスペクト比が「１１：９」である映像の左右に、「１６：９」のアスペクト比に合わせるための黒い帯を挿入して合成する。
【０１０９】
このように、接続されているテレビ会議端末それぞれのアスペクト比に基づいて、映像を合成する。その合成映像のアスペクト比は「１６：９」である。
【０１１０】
合成映像のアスペクト比が「１６：９」であるため、アスペクト比が「１１：９」であるテレビ会議端末２００−２へ当該合成映像を送信部１４０から送信するには、アスペクト比「１１：９」に基づいて当該合成映像をリサイズしてから送信する必要がある。
【０１１１】
図１５は、アスペクト比が「１６：９」である合成映像を「１１：９」のアスペクト比にリサイズした映像の一例を示す図である。
【０１１２】
図１４に示すようにアスペクト比が「１６：９」で合成された映像に、図１５に示すように、当該映像の上下に「１１：９」のアスペクト比に合わせるための黒い帯を挿入してリサイズする。これにより、当該映像を横方向に縮小させたり、縦方向に引きのばしたりすることなく、表示させることができる。
【０１１３】
このように、送信先のテレビ会議端末それぞれのアスペクト比に基づいて、映像をリサイズする。これにより、送信先のテレビ会議端末それぞれのアスペクト比で映像を表示させることが可能となる。
【０１１４】
図１６は、本発明の多地点会議システムの実施の形態の他の例を示す図である。
【０１１５】
本形態は図１６に示すように、図１に示した形態に加えて、予約サーバ４００が設けられている。
【０１１６】
予約サーバ４００は、会議の予約を受け付け、管理するサーバである。予約サーバ４００は、テレビ会議端末２００−１，２００−２からあらかじめ送信されてきた内容（会議を行う時間情報や会議を行う端末情報等）を登録して管理する。管理方法は、一般的なものであれば良く、互いに異なる複数の会議が重ならないように制御したり、会議のキャンセルや、時間の延長等を制御したりして管理する。
【０１１７】
なお、以上の説明において、送受信される音声信号については、一般的な多地点会議システムにおける音声処理と同じ処理が行われるものであり、本発明に特化したものではないため、記載を省略した。
【０１１８】
以上説明したように、本発明においては、画像サイズが互いに異なるテレビ会議端末を用いて多地点会議を行う場合であっても、それらのテレビ会議端末の画像サイズに応じたリサイズ処理を行うことにより、複数の映像合成処理を行う必要がなくなる。これにより、映像の合成処理の負荷の増加を抑えることが可能となる。
【０１１９】
上述したＭＣＵ１００に設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を手順として記述したコンピュータプログラム（以下、プログラムと称する）をＭＣＵ１００にて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムをＭＣＵ１００に読み込ませ、実行するものであっても良い。ＭＣＵ１００にて読取可能な記録媒体とは、フロッピー（登録商標）ディスク、光磁気ディスク、ＤＶＤ、ＣＤなどの移設可能な記録媒体の他、ＭＣＵ１００に内蔵された記憶部１６０、ＲＯＭ、ＲＡＭ等のメモリやＨＤＤ等を指す。この記録媒体に記録されたプログラムは、ＭＣＵ１００に設けられた制御部１５０にて読み込まれ、制御部１５０の制御によって、上述したものと同様の処理が行われる。ここで、制御部１５０は、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。
【符号の説明】
【０１２０】
１００    ＭＣＵ
１１０−１，１１０−２    ポート
１２０    受信部
１２１    デコーダ
１３０    合成部
１３１，１４１    リサイズ部
１３２    ミキシング部
１４２    エンコーダ
１４０    送信部
１５０    制御部
１６０    記憶部
２００−１，２００−２    テレビ会議端末
３００−１〜３００−４，３０１−１〜３０１−６    表示領域
４００    予約サーバ
【図１】
2012074981.tif 000003
【図２】
2012074981.tif 000004
【図３】
2012074981.tif 000005
【図４】
2012074981.tif 000006
【図５】
2012074981.tif 000007
【図６】
2012074981.tif 000008
【図７】
2012074981.tif 000009
【図８】
2012074981.tif 000010
【図９】
2012074981.tif 000011
【図１０】
2012074981.tif 000012
【図１１】
2012074981.tif 000013
【図１２】
2012074981.tif 000014
【図１３】
2012074981.tif 000015
【図１４】
2012074981.tif 000016
【図１５】
2012074981.tif 000017
【図１６】
2012074981.tif 000018
【図１７】
2012074981.tif 000019
【図１８】
2012074981.tif 000020
【図１９】
2012074981.tif 000021