(57)【要約】【課題】  画像を送信側で符号化し受信側で復号化して表示出力する画像通信システムにおいて、画像データに係る処理の処理量を低減する。【解決手段】  本発明は、画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムに関する。そして画像通信システムは、上記表示出力部と看者との相対的な位置に係る検知を行う看者検知手段と、看者距離測定手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定する符号化内容設定手段とを有することを特徴とする。【選択図】      図１
2010177777.tif 000002
【特許請求の範囲】
【請求項１】
画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムにおいて、
上記表示出力部と看者との相対的な位置に係る検知を行う看者検知手段と、
上記看者検知手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定する符号化内容設定手段と
を有することを特徴とする画像通信システム。
【請求項２】
上記看者検知手段は、少なくとも上記表示出力部から看者までの看者距離を検知し、
上記符号化内容設定手段は、少なくとも上記看者検知手段が検知した看者距離に応じて、上記符号化手段による符号化の内容を設定する
ことを特徴とする請求項１に記載の画像通信システム。
【請求項３】
上記符号化内容設定手段は、上記看者検知手段が検知した看者距離が長いほど、符号化に係る処理量が少なくなるように、上記符号化手段による符号化の内容を設定することを特徴とする請求項２に記載の画像通信システム。
【請求項４】
上記看者検知手段は、少なくとも上記表示出力部に対して上記看者が位置している看者方向を検知し、
上記符号化内容設定手段は、少なくとも上記看者検知手段により検知された看者方向に応じて上記符号化手段による符号化の内容を設定する
ことを特徴とする請求項１〜３のいずれかに記載の画像通信システム。
【請求項５】
画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムにおいて画像に係る処理内容を制御する画像処理制御装置において、
上記表示出力部と看者との相対的な位置に係る検知を行う看者検知手段と、
上記看者検知手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定する符号化内容設定手段と
を有することを特徴とする画像処理制御装置。
【請求項６】
画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムにおいて画像に係る処理内容を制御する画像処理制御方法において、
看者検知手段、符号化内容設定手段を有し、
上記看者検知手段は、上記表示出力部と看者との相対的な位置に係る検知を行い、
上記符号化内容設定手段は、上記看者検知手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定する
ことを特徴とする画像処理制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、画像通信システム、並びに、画像処理制御装置及び方法に関し、例えば、ライブ動画像を配信するシステムに適用し得る。
【背景技術】
【０００２】
従来、ライブ動画像などの画像を符号化する装置としては、特許文献１及び２に記載されている装置がある。
【０００３】
特許文献１に記載の装置では、動画像における動き量に応じて、符号化解像度を動的に変更することができる。
【０００４】
特許文献２に記載の装置では、視聴者と表示器の距離や位置関係を使用する従来システムが存在するが視聴者と表示器の距離は、表示器において映像を識別し難くする処理を実施するために使用していた。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平７−９５５６６号公報
【特許文献２】特開２００６−１４０７４７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の装置のように、視聴者と表示器の距離を考慮せずに符号化解像度を下げるだけでは視聴者が表示器より遠い場所から見ている場合でも近くで見ている場合と同様の解像度で符号化するため符号化器の処理負荷は必要以上に高いままという課題があった。
【０００７】
また、特許文献２に記載の装置では、視聴者と表示器の距離を判断基準として、表示器で映像を識別し難くする処理をすることは従来技術によると心理的な負担感が少ないコミュニケーションが実現できるものの符号化器の処理負荷は必要以上に高いままだった。
【０００８】
そのため画像を送信側で符号化し受信側で復号化して表示出力する画像通信システムにおいて、画像データに係る処理の処理量を低減することが望まれている。
【課題を解決するための手段】
【０００９】
第１の本発明の画像通信システムは、（１）画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムにおいて、（２）上記表示出力部と看者との相対的な位置に係る検知を行う看者検知手段と、（３）上記看者検知手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定する符号化内容設定手段とを有することを特徴とする。
【００１０】
第２の本発明の画像処理制御装置は、（１）画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムにおいて画像に係る処理内容を制御する画像処理制御装置において、（２）上記表示出力部と看者との相対的な位置に係る検知を行う看者検知手段と、（３）上記看者検知手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定する符号化内容設定手段とを有することを特徴とする。
【００１１】
第３の本発明の画像処理制御方法は、（１）画像を符号化し、符号化画像データを作成する符号化手段と、符号化画像データを復号化する復号化手段と、復号化された画像を看者に表示出力する表示出力部とを備える画像通信システムにおいて画像に係る処理内容を制御する画像処理制御方法において、（２）看者検知手段、符号化内容設定手段を有し、（３）上記看者検知手段は、上記表示出力部と看者との相対的な位置に係る検知を行い、（４）上記符号化内容設定手段は、上記看者検知手段が検知した結果に応じて、上記符号化手段による符号化の内容を設定することを特徴とする。
【発明の効果】
【００１２】
本発明によれば、画像を送信側で符号化し受信側で復号化して表示出力する画像通信システムにおいて、画像データに係る処理の処理量を低減することができる。
【図面の簡単な説明】
【００１３】
【図１】第１の実施形態に係る画像通信システム及び画像処理制御装置の全体構成を示すブロック図である。
【図２】第１の実施形態に係る画像処理制御装置における視聴距離について示した説明図である。
【図３】第１の実施形態に係る画像処理制御装置の動作について示したフローチャートである。
【図４】第２の実施形態に係る画像通信システム及び画像処理制御装置の全体構成を示すブロック図である。
【図５】第２の実施形態に係る画像処理制御装置における視聴距離及び視聴角度について示した説明図である。
【図６】第２の実施形態に係る画像処理制御装置の動作について示したフローチャートである。
【発明を実施するための形態】
【００１４】
（Ａ）第１の実施形態
以下、本発明による画像通信システム、並びに、画像処理制御装置及び方法の第１の実施形態を、図面を参照しながら詳述する。
【００１５】
（Ａ−１）第１の実施形態の構成
図１は、この実施形態の画像通信システム１及び画像処理制御装置４０の全体構成を示すブロック図である。
【００１６】
画像通信システム１は、カメラ１０、送信装置２０、受信装置３０、表示器５０を有している。また、送信装置２０は、キャプチャ２１、符号化器２２、符号化制御器２３を有しており、受信装置３０は、復号化器３１、表示制御部３２、画像処理制御装置４０を有している。
【００１７】
図１において画像処理制御装置４０は、少なくともセンサ４１及び判定部４２を有しているものとして図示しているが、符号化制御器２３を、画像処理制御装置４０側に搭載するようにしても良い。また、図１において画像処理制御装置４０は、受信装置３０側に搭載されているものとして図示しているが、独立した別個の装置として構築するようにしても良い。
【００１８】
カメラ１０は、撮影した動画像の信号を、送信装置２０に与えるものである。カメラ１０は、既存のＣＣＤカメラや、ビデオカメラなどであっても良く、その種類は限定されないものである。なお、カメラ１０が撮影する画像は、動画であっても静止画であっても良いが、第１の実施形態においては、カメラ１０が撮影する画像は動画であるものとして説明する。
【００１９】
送信装置２０は、カメラ１０から与えられた動画像の信号を、符号化し、符号化した動画データを受信装置３０に与える。送信装置２０と受信装置３０との間の通信は、例えば、インターネットや公衆電話網などのネットワークを介して行うようにしても良いし、直接接続するようにしても良く、その通信方法は限定されないものである。
【００２０】
受信装置３０は、送信装置２０から、符号化した動画データが与えられると、それを復号化し、動画像の信号を表示器５０に出力する。
【００２１】
表示器５０は、受信装置３０から与えられた動画像の信号に基づいて、視聴者（以下、「看者」ともいう）６０へ動画像を表示出力する。表示器５０は、既存のディスプレイ装置や、スクリーン表示する装置であっても良く、その種類は限定されないものである。なお、図１においては、図示を省略しているが、送信装置２０側で、カメラ１０による動画の撮影とともに、マイクにより音声を補足し、補足した音声を符号化して、受信装置３０側に送信し、視聴者６０に動画とともに音声出力するようにしても良い。
【００２２】
次に、送信装置２０の内部構成について説明する。送信装置２０は、キャプチャ２１、符号化器２２、符号化制御器２３を有している。
【００２３】
キャプチャ２１及び符号化器２２は、送信装置２０において、カメラ１０から出力される動画像の信号を取り込んで符号化する機能を担っている。キャプチャ２１は、カメラ１０から与えられた動画像の信号が、アナログ信号であった場合には、それをデジタル化し、カメラ１０から与えられた動画像の信号がデジタル信号である場合にはそのまま取り扱う。そして、キャプチャ２１は、動画データについて、符号化器２２に与える。そして、符号化器２２により符号化（例えば、ＭＰＥＧ４などの既存の符号化方式を用いることができる）して、受信装置３０に向けて送出する。図１においては、送信装置２０にキャプチャ２１を搭載しているが、カメラ１０からデジタルデータで動画データが与えられる場合には省略しても良いし、キャプチャも備えたカメラを用いるようにしても良い。
【００２４】
符号化制御器２３は、受信装置３０（後述する判定部４２）からの制御に応じて、キャプチャ２１及び符号化器２２が行う動画像の符号化処理の内容を制御する機能を担っている。符号化制御器２３による詳細な制御内容については後述する。
【００２５】
次に、受信装置３０の内部構成について説明する。受信装置３０は、復号化器３１、表示制御部３２、画像処理制御装置４０を有している。
【００２６】
復号化器３１は、送信装置２０から与えられる符号化された画像のデータを復号化して、表示制御部３２に与える。復号化器３１としては、例えば、既存の動画像を復号化する装置を適用することができる。
【００２７】
表示制御部３２は、復号化器３１から与えられた復号化された画像のデータについて、表示器５０が表示可能な表示サイズの画像信号に変換し、その表示サイズの画像信号を、表示器５０に与える。なお、表示制御部３２は、表示器５０側に搭載するようにしても良い。表示制御部３２としては、例えば、既存のディスプレイ装置やコンピュータにおいて、表示する画像データの解像度に応じて、表示出力するディスプレイが表示可能なサイズの画像信号に変換する手段を適用することができる。
【００２８】
次に、画像処理制御装置４０の構成について説明する。画像処理制御装置４０は、センサ４１、判定部４２を有している。
【００２９】
センサ４１は、視聴者６０と表示器５０との距離（以下、「視聴距離Ｄ」という）を測定し、測定結果を判定部４２に与える。なお、センサ４１を、表示器５０の周辺に配置して、表示器５０と視聴者６０との間の距離を、視聴距離Ｄとみなして測定するようにしても良い。
【００３０】
図２は、表示器５０と視聴者６０との距離である視聴距離Ｄの例について示した説明図である。
【００３１】
図２（ａ）は、表示器５０がディスプレイ装置である場合に、表示器５０（ディスプレイ装置）を前面から見た場合の例を示している。
【００３２】
図２（ｂ）は、図２（ａ）に示した表示器５０を上から見た場合の、表示器５０と視聴者６０との距離である視聴距離Ｄの例について示した説明図である。図２（ｂ）においては、視聴距離Ｄは、表示器５０の中央部から視聴者６０までの距離として説明しているが、表示器５０の他の部分から視聴者６０までの距離としても良い。
【００３３】
センサ４１において、視聴距離Ｄを測定する方法としては、例えば、特許文献２における「近接検知手段」のように、人感センサや無線ＩＣタグなどを用いるようにしても良い。
【００３４】
センサ４１において、視聴距離Ｄを測定する方法としては、例えば、視聴者６０に無線通信端末（例えば、表示器５０などを操作するためのリモコン端末や携帯電話端末などに搭載するようにしても良い）を所持させ、センサ４１を表示器５０の周辺に配置して、センサ４１が上述の無線通信端末と通信し、上述の無線通信端末とセンサ４１の間の距離を、視聴距離Ｄとして測定するようにしても良い。上述の無線通信端末とセンサ４１の間の距離は、例えば、受信信号強度や、送信遅延時間などに基づいて測定するようにしても良い。なお、上述の無線通信端末とセンサ４１の間の無線通信は、電波や赤外線などの光を用いたものであっても良く、視聴距離Ｄの測定が可能であれば、その通信方法は限定されないものである。
【００３５】
また、センサ４１において、視聴距離Ｄを測定する方法としては、例えば、表示器５０の周辺に人感センサを複数備え、それぞれの人感センサごとの視聴距離を予め登録しておき、いずれの人感センサが視聴者を検知したかに応じて、視聴者の距離を把握するようにしても良い。例えば、表示器５０から等間隔で人感知センサを配置しておいて、視聴者距離Lを測定するようにしても良い。なお、センサ４１において適用する人感センサとしては既存の人感センサを適用することができる。
【００３６】
このように、センサ４１では、視聴距離Ｄを測定することができれば、その測定方法は限定されないものである。
【００３７】
判定部４２は、センサ４１が測定した視聴距離Ｄに応じて、符号化制御器２３に、符号化の内容を制御する指示を与える。そして、符号化制御器２３は、判定部４２からの指示に応じて、キャプチャ２１及び符号化器２２による動画像の符号化処理の内容を制御する。判定部４２は、例えば、視聴距離Ｄが長いほど、符号化する処理量や、符号化後のデータ量が小さくなるように、符号化する内容を調節する。また、判定部４２は、センサ４１において視聴者６０が全く検知できない場合には、最も符号化する処理量や、符号化後のデータ量が小さくなるように、符号化する内容を調節するようにしても良い。
【００３８】
例えば、カメラ１０から与えられる動画像の信号がアナログ信号（例えば、ＮＴＳＣ信号等）で、キャプチャ２１でその信号を取り込む際に、所定の解像度の画像としてデジタル変換している場合には、その際の解像度を、符号化制御器２３の制御に応じて変化させるようにしても良い。また、例えば、符号化器２２において符号化する際に、符号化制御器２３の指示に応じた解像度で符号化するようにしても良い。
【００３９】
また、判定部４２は、その他にも例えば、視聴距離Ｄに応じて、フレームレート、量子化ステップサイズ、圧縮率などを調節する指示を、符号化制御器２３に与えようにしても良い。なお、視聴距離Ｄに応じて、解像度やフレームレート等を調節する方法としては、コーデックに適用するパラメータを変更することにより実現しても良いし、適用するコーデック自体を変更することにより実現するようにしてもよく、その調節方法は限定されないものである。この実施形態においては、判定部４２及び符号化制御器２３は、例として、視聴距離Ｄが長いほど、キャプチャ２１及び符号化器２２により符号化される画像の解像度がより低くなるように制御するものとして説明する。
【００４０】
（Ａ−２）第１の実施形態の動作
次に、以上のような構成を有する第１の実施形態の画像通信システム１における画像処理制御（実施形態の画像処理制御方法）の動作を説明する。
【００４１】
図３は、画像通信システムにおける動画処理制御に係る動作を説明したシーケンス図である。
【００４２】
図３においては、処理開始当初から、送信装置２０側で符号化された動画データが受信装置３０に与えられ。受信装置３０から表示器５０に出力されて、表示器５０において動画像が視聴者６０に供せられている状態であるものとする。
【００４３】
まず、センサ４１により視聴距離Ｄが測定される（Ｓ１０１）。
【００４４】
次に、センサ４１から視聴距離Ｄが与えられると、判定部４２では、視聴距離Ｄに応じて、送信装置２０（符号化制御器２３）へ向けて、符号化の内容を制御する信号が送出される（Ｓ１０２）。
【００４５】
判定部４２から、符号化の内容を制御する信号が与えられると、符号化制御器２３により、その信号に従ってキャプチャ２１及び符号化器２２が制御され、以降キャプチャ２１、符号化器２２による動画の符号化は、その内容に従って継続される（Ｓ１０３）。
【００４６】
ステップＳ１０３において、符号化制御器２３が直前の符号化解像度と同一の符号化解像度を受信した場合、キャプチャ２１及び符号化器２２に解像度変更指示を送信しないようにしても良い。また、符号化制御器２３が直前の符号化解像度と異なる符号化解像度を受信した場合、キャプチャ２１及び符号化器２２に新たな符号化解像度を送信するようにしても良い。
【００４７】
なお、上述のステップＳ１０１〜Ｓ１０３の動作は、連続的に処理を繰り返し行うようにしても良いし、定期的に行うようにしても良いし、センサ４１が視聴者６０の動きに応じて行うようにしても良く、処理を行うタイミングは限定されないものである。
【００４８】
（Ａ−３）第１の実施形態の効果
第１の実施形態によれば、以下のような効果を奏することができる。
【００４９】
センサ４１が測定した視聴距離Ｄに基づいて判定部４２が決定した解像度でキャプチャ２１及び符号化器２２において符号化され、復号化器３１で復号化され表示器５０で表示される。このとき、視聴者が認識できないレベルで動画の解像度等を下げ、符号化の処理量の低減することができる。また、符号化後のデータ量を低減することにより、送信装置２０（符号化器２２）から受信装置３０（復号化器３１）へ送信するデータ量も低減し、ネットワークに対する負荷を低減することができる。
【００５０】
また、符号化器２２において符号化解像度を下げた符号化データを、復号化器３１において復号化することにより、復号化器３１における復号化を行う処理量も低減することができる。
【００５１】
画像通信システム１は、例えば、複数の事業所を有する会社においてそれぞれの事業所の様子をカメラ撮影した画像を他の事業所に配信したり、河川や湾岸などを監視カメラで撮影した画像を監視センタに配信するなど、複数の拠点間でライブ動画を伝送するシステムに適用すると好適なものである。このような複数の拠点間でライブ動画を伝送するシステムの場合、動作している間、視聴者が常に表示器（ディスプレイ）の側にいるわけではないので、表示器（ディスプレイ）のすぐ近くに視聴者がいない場合には解像度等を下げた符号化及び復号化ができるので、効率的な画像処理を行うことができる。
【００５２】
（Ｂ）第２の実施形態
以下、本発明による画像通信システム、並びに、画像処理制御装置及び方法の第２の実施形態を、図面を参照しながら詳述する。
【００５３】
（Ｂ−１）第２の実施形態の構成
第１の実施形態では、センサ４１が視聴距離Ｄだけを測定し、視聴距離Ｄだけに基づいて判定部４２による処理を行っていたが、第２の実施形態では、視聴距離Ｄだけではなく、表示器５０に対して視聴者６０が位置している方向も符号化の内容を決定する要素として含んでいる点である。
【００５４】
図４は、この実施形態の画像通信システム１Ａ及び画像処理制御装置４０Ａの全体構成を示すブロック図である。
【００５５】
画像通信システム１Ａは、カメラ１０、送信装置２０、受信装置３０Ａ、表示器５０を有している。カメラ１０、送信装置２０、表示器５０については、第１の実施形態と同様のものであるので詳しい説明を省略する。
【００５６】
受信装置３０Ａは、復号化器３１、表示制御部３２、画像処理制御装置４０Ａを有している。復号化器３１及び表示制御部３２については、第１の実施形態と同様のものであるので詳しい説明を省略する。
【００５７】
画像処理制御装置４０Ａは、センサ４１Ａ及び判定部４２Ａを有している。
【００５８】
上述の通り、第１の実施形態のセンサ４１は、視聴距離Ｄだけを測定していたが、この実施形態のセンサ４１Ａは、表示器５０に対して視聴者６０が位置している方向（以下、「視聴方向」という）も測定する点において異なっている。
【００５９】
図５は、表示器５０と視聴者６０との距離である視聴距離Ｄ及び視聴者方向の例について示した説明図である。
【００６０】
図５（ａ）は、表示器５０がディスプレイ装置である場合に、表示器５０（ディスプレイ装置）を前面から見た場合の例を示している。
【００６１】
図５（ｂ）は、図５（ａ）に示した表示器５０を上から見た場合の、表示器５０と視聴者６０との距離である視聴距離Ｄと、視聴方向の例について示した説明図である。
【００６２】
センサ４１Ａにおける視聴距離Ｄの測定方法については、第１の実施形態と同様であるので詳しい説明を省略する。
【００６３】
センサ４１Ａでは、図５（ｂ）に示すように、表示器５０の中心を通り、かつ、表示器５０の正面に位置する線を基準線とし、その基準線と、上述の中心位置と視聴者６０の位置とを通る線との角度（以下、「視聴角度θ」という）を、視聴方向とみなして測定するものとして説明するが、それ以外の中心位置及び基準線に基づいて視聴角度を測定するようにしても良い。
【００６４】
センサ４１Ａにおいて、視聴角度θを測定する方法としては、視聴距離Ｄと同様に、例えば、特許文献２における「近接検知手段」のように、人感センサや無線ＩＣタグなどを用いて、視聴者６０と表示器５０との位置関係を把握し、その把握した位置関係に基づいて視聴角度θを求めるようにしても良い。図５においては、２次元的に表示器５０に対する視聴者６０の方向を検知する例について説明したが、３次元的（仰俯角も含む）に表示器５０に対する視聴者６０の方向を検知するようにしても良い。
【００６５】
例えば、視聴者６０に無線通信端末（例えば、表示器５０などを操作するためのリモコン端末や携帯電話端末などに搭載するようにしても良い）を所持させ、センサ４１Ａが上述の無線通信端末と通信し、センサ４１Ａが上述の無線通信端末から無線信号（例えば、電波や赤外線等）を補足した方向を視聴角度θとして測定するようにしても良い。なお、上述の無線通信端末とセンサ４１の間の無線通信は、電波や赤外線などの光を用いたものであっても良く、視聴角度θの測定が可能であれば、その通信方法は限定されないものである。
【００６６】
また、センサ４１Ａにおいて、視聴角度θを測定する方法としては、例えば、表示器５０の周辺に人感センサを複数備え、人感センサごとの視聴角度を予め登録しておき、いずれの人感センサが視聴者６０を検知したかに応じて、視聴者６０と表示器５０の位置関係を把握し、その把握した位置関係に基づいて視聴角度θを検知するようにしても良い。このように、センサ４１Ａでは、視聴角度θが測定することができれば、その測定方法は限定されないものである。
【００６７】
第１の実施形態の判定部４２Ａでは、視聴距離Ｄだけに基づいて判定していたが、上述の通り判定部４２Ａでは、視聴距離Ｄ及び視聴角度θも用いて判定する。
【００６８】
そして、符号化制御器２３は、判定部４２からの指示に応じて、キャプチャ２１及び符号化器２２による動画像の符号化処理の内容を制御する。判定部４２は、例えば、視聴角度θが大きいほど、符号化する処理量や、符号化後のデータ量が小さくなるように、符号化制御器２３に指示を与える。
【００６９】
判定部４２Ａでは、例えば、視聴角度θが３０°の場合には横方向（水平方向）の解像度を、視聴距離Ｄのみを用いて適用する解像度と比較して√３／２倍とし、視聴角度θが６０°の場合は１／２倍とすることなど、視聴角度θが大きくなるほど横方向（水平方向）の解像度を低下させる指示を符号化制御器２３に与えることなどが挙げられる。なお、３次元的（視聴者６０の方向に係る仰俯角も測定する）に表示器５０に対する視聴者６０の方向を検知している場合には、仰俯角が大きいほど、縦方向（垂直方向）の解像度を低下させる指示を符号化制御器２３に与えることなどが挙げられる。
【００７０】
（Ｂ−２）第２の実施形態の動作
次に、以上のような構成を有する第２の実施形態の画像通信システム１Ａにおける画像処理制御（実施形態の画像処理制御方法）の動作を説明する。
【００７１】
図６は、画像通信システム１Ａにおける動画処理制御に係る動作を説明したシーケンス図である。
【００７２】
図６においては、処理開始当初から、送信装置２０側で符号化された動画データが受信装置３０Ａに与えられ。受信装置３０Ａから表示器５０に出力されて、表示器５０において動画像が視聴者６０に供せられている状態であるものとする。
【００７３】
まず、センサ４１Ａにより視聴距離Ｄ及び視聴角度θが測定される（Ｓ２０１）。
【００７４】
次に、センサ４１Ａから視聴距離Ｄ及び視聴角度θが与えられると、判定部４２Ａでは、視聴距離Ｄ及び視聴角度θに応じて、送信装置２０（符号化制御器２３）へ向けて、符号化の内容を制御する信号が送出される（Ｓ２０２）。
【００７５】
判定部４２Ａから、符号化の内容を制御する信号が与えられると、符号化制御器２３により、その信号に従ってキャプチャ２１及び符号化器２２が制御され、以降キャプチャ２１、符号化器２２による動画の符号化は、その内容に従って継続される（Ｓ２０３）。
【００７６】
ステップＳ２０３では、上述の第１の実施形態のステップＳ１０３と同様に、符号化制御器２３が直前の符号化解像度と同一の符号化解像度を受信した場合、キャプチャ２１及び符号化器２２に解像度変更指示を送信しないようにしても良い。また、符号化制御器２３が直前の符号化解像度と異なる符号化解像度を受信した場合、キャプチャ２１及び符号化器２２に新たな符号化解像度を送信するようにしても良い。
【００７７】
また、ステップＳ２０１〜Ｓ２０３の動作は、第１の実施形態のステップＳ１０１〜Ｓ１０３と同様に、処理を行うタイミングは限定されないものである。
【００７８】
（Ｂ−３）第２の実施形態の効果
第２の実施形態によれば、第１の実施形態の効果に加えて、以下のような効果を奏することができる。
【００７９】
画像通信システム１Ａでは、視聴距離Ｄに加えて視聴角度θも考慮して、符号化器２２による符号化の内容を決定している。これにより、視聴距離Ｄが同じ場合でも、さらに視聴角度θを考慮して符号化の内容を決定することができるため、第１の実施形態と比較して、符号化に係る処理量や符号化後のデータ量をより低減することができる。
【００８０】
（Ｃ）他の実施形態
本発明は、上記の各実施形態に限定されるものではなく、以下に例示するような変形実施形態も挙げることができる。
【００８１】
（Ｃ−１）第１の実施形態では、センサにおいて視聴角度Ｄを検知して符号器による符号化の内容を決定し、第２の実施形態では、視聴角度Ｄ視聴角度θを検知して符号化器による符号化の内容を決定する例について説明したが、視聴角度θのみを検知し、符号化器による符号化の内容を決定するようにしても良い。
【００８２】
（Ｃ−２）上記の各実施形態では、画像通信システムにおいて視聴者は１人であるものとして説明したが、視聴者は複数人であっても良い。視聴者が複数人であっても、視聴者ごとの視聴距離Ｄ及び又は視聴角度θを測定する方法は、上記の実施形態と同様であるので詳しい説明を省略する。視聴者ごとの視聴距離Ｄ及び又は視聴角度θを測定する方法としては、例えば、以下のような３つの例のいずれかを適用するようにしても良い。
【００８３】
第１の例として、もっとも視聴距離Ｄの近い視聴者の距離から決定される解像度を採用する。
【００８４】
第２の例として、すべての視聴者の位置の重心にあたる位置に一人の視聴者がいるとみなして視聴距離Ｄ及び又は視聴角度θを適用する。
【００８５】
第３の例として、各視聴者の視聴距離Ｄ及び又は視聴方向θから計算される解像度のうち、もっとも高い解像度を採用する。
【００８６】
（Ｃ−３）上記の各実施形態において、符号化器ではカメラが撮影したライブ動画像を取り込んで符号化しているが、符号化器が符号化する対象は、カメラが撮影したライブ動画像に限らず、例えば、ビデオテープやＤＶＤなどの媒体に録画された動画像を受信装置に送信する形式に符号化するようにしても良い。
【００８７】
（Ｃ−４）上記の各実施形態では、画像通信システムにおいて受信装置及び表示器は１台であるものとして説明したが、送信装置から複数組の受信装置及び表示器に画像データを配信するようにしても良い。その場合、送信装置側の符号化制御器では、例えば、複数の受信装置（判定部）から指示される制御のうち、もっとも視聴距離Ｄの近い視聴者の距離から決定される解像度を採用するようにしても良い。
【００８８】
（Ｃ−５）上記の各実施形態では、画像通信システムは、送信装置及び受信装置を有するものとして説明したが、送信装置及び受信装置を一つの装置として構成しても良いし、送信装置及び受信装置の構成要素の一部又は全部を別個の装置として構成するようにしても良く、画像通信システムにおける装置の区分けの仕方は限定されないものである。
【符号の説明】
【００８９】
１…画像通信システム、１０…カメラ、２０…送信装置、２１…キャプチャ、２２…符号化器、２３…符号化制御器、３０…受信装置、３１…復号化器、３２…表示制御部、４０…画像処理制御装置、４１…センサ、４２…判定部、Ｄ…視聴距離、θ…視聴角度。
【図１】
2010177777.tif 000003
【図２】
2010177777.tif 000004
【図３】
2010177777.tif 000005
【図４】
2010177777.tif 000006
【図５】
2010177777.tif 000007
【図６】
2010177777.tif 000008