(57)【要約】【課題】  送信された画像が劣化している場合、その送信画像を自動的に調整して画像の劣化を確実に抑制することができ、良好な画像を送受信することができる。【解決手段】  画像送信系１０は、画像を圧縮して送信する画像圧縮部１１を有する他、画像受信系２０から劣化信号を受け取る劣化信号受信部１２と、劣化信号受信部１２が劣化信号を受け取った時点で、画像圧縮部１１に対して画像の圧縮度を変更させる画像調整部１３とからなる画像調整手段を備える。画像受信系２０は、画像送信系１０から送信された画像を展開する展開部２１と、展開された画像から、劣化している画像を判定する劣化画像判定部２２と劣化画像判定部２２が劣化画像を判定したとき、劣化信号を画像送信系に対して送信する劣化信号送信部２３とからなる判定手段とを備える。【選択図】  図２
2005286978.tif 000002
【特許請求の範囲】
【請求項１】
画像受信系に対し、画像送信系よりネットワーク伝送路を経た画像の送信時、
前記画像受信系は、画像送信系からの圧縮画像が送信された時点で、送信された前記画像に基づいて劣化画像の有無を判定すると共に、該判定結果、劣化画像が存在したときに前記画像送信系に対し劣化信号を送信し、
前記画像送信系は、前記画像受信系から前記劣化信号を受信した時点で、送信している圧縮画像の圧縮度を変更して該変更した圧縮画像を送信することを特徴とする画像通信制御方法。
【請求項２】
請求項１記載の画像通信制御方法において、
前記画像受信系は、送信された前記画像を展開した時点で、該展開した画像の輝度の大きさに基づいて劣化画像の有無を判定することを特徴とする画像通信制御方法。
【請求項３】
請求項１又は２記載の画像通信制御方法において、
前記画像送信系は、前記画像受信系から前記劣化信号を受信したとき、画像の圧縮ビットレートを小さくさせて画像を送信することを特徴とする画像通信制御方法。
【請求項４】
画像送信系からネットワーク伝送路を経て画像受信系に圧縮画像が送信されたとき、前記画像受信系が前記圧縮画像を展開して再生する画像通信制御装置であって、
前記画像受信系は、画像送信系からの圧縮画像を受信したとき、その圧縮画像を展開する画像展開部と、展開された画像に基づいて劣化画像の有無を判定すると共に、劣化画像が存在しているときに劣化信号を送信する画像判定手段とを備え、
前記画像送信系は、送信すべき画像を圧縮する画像圧縮部と、前記画像受信系から前記劣化信号を受信した時点で、送信している画像の輝度を変更させる画像調整手段とを備えることを特徴とする画像通信制御装置。
【請求項５】
請求項４記載の画像通信制御装置において、
前記画像判定手段は、展開された画像の輝度の大きさに基づいて劣化画像を判定する劣化画像判定部と、該劣化画像判定部が劣化画像を判定したとき、劣化信号を前記画像送信系に送信する劣化信号送信部とからなり、
前記画像調整手段は、前記劣化信号送信部からの劣化信号を受信する劣化信号受信部と、該劣化信号受信部が劣化信号を受信したとき、送信している画像の輝度を継続的に変更させる画像調整部とからなることを特徴とする画像通信制御装置。
【請求項６】
請求項４又は５記載の画像通信制御装置において、
前記画像調整部は、前記画像圧縮部に対して、画像の圧縮ビットレートを小さくさせることを特徴とする画像通信制御装置。
【請求項７】
請求項４〜６のいずれか記載の画像通信制御装置を備えてなることを特徴とする携帯通信装置。
【発明の詳細な説明】
【技術分野】
【０００１】  本発明は、画像通信制御方法及びその装置並びに携帯通信装置に係り、特に、劣化した画像（映像）が送信されるのを抑制する技術に関する。
【背景技術】
【０００２】  携帯電話やＰＨＳのような携帯通信装置の普及率が高まり、それにつれて種々の機能が付加されている。その中でも、今日では、静止画像や動画画像を取り込むと共に、その取り込んだ画像を送信できるようにもなっている。
ところが、このような画像の送受信を行える無線ネットワーク伝送路にあっては、帯域が不安定であるばかりでなく、通信速度も安定しにくいことから、帯域をぎりぎりまで利用して画像を送信しているのが実状であり、場合によっては画像が劣化する不具合がある。【０００３】  そこで、画像が劣化しているか否かを判定するため、画像の中に検出のための信号を、人間の目に見えない形で挿入し、その信号を検出できるか否かによって画像の劣化を検出するようにしたものが提案されている（例えば、特許文献１参照。）。
また、良好なストリーム配信映像（画像）を得るため、帯域を切り替えるときに、複数の論理回線で接続すると共に、不必要な論理回線を切断することで、映像が途切れることなくストリーム配信画像が得られるものが提案されている（例えば、特許文献２参照。）。
【特許文献１】  特開２００３−２０４５６１号公報（第２−５頁、図１−図１０）
【特許文献２】  特開２００３−２３０１２５号公報（第２−４頁、図１−図５）
【発明の開示】
【発明が解決しようとする課題】
【０００４】  ところで、上記に示す特許文献１においては、劣化した画像を検出するだけであり、特許文献２においては、劣化画像があるとき、映像が途切れることなく帯域を切り替えることができるようにするだけであり、送信された劣化画像をどのようにして防ぐことができるのか何等配慮されていなかった。
そのため、帯域不足によって画像が劣化した場合、例えば、ネットワーク伝送路全体を高機能の設備に作り変えたり、また、携帯通信装置の利用者が自ら設定を変えて調節したりすることで対処できることが考えられるものの、そのようにすると、設備費がかなり嵩んだり、また利用者の手間を要してそれだけ負担がかかるばかりでなく、使い勝手が低下するというおそれがあった。【０００５】  本発明は、上記事情に鑑み、送信された画像が劣化している場合、その送信画像を自動的に調整して画像の劣化を確実に抑制することができ、良好な画像を受信することができる画像通信制御方法を提供することことを目的とし、また、上記方法を的確に実施し得る画像通信制御装置及び携帯通信装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】  上記目的を達成するために、この発明は以下の構成を採用している。即ち、
請求項１に係る発明は、画像受信系に対し、画像送信系よりネットワーク伝送路を経た画像の送信時、前記画像受信系は、画像送信系からの圧縮画像が送信された時点で、送信された前記画像に基づいて劣化画像の有無を判定すると共に、該判定結果、劣化画像が存在したときに前記画像送信系に対し劣化信号を送信し、前記画像送信系は、画像受信系から前記劣化信号を受信した時点で、送信している圧縮画像の圧縮度を変更して該変更した圧縮画像を送信することを特徴とする。
請求項２に係る発明は、請求項１記載の画像通信制御方法において、前記画像受信系は、送信された前記画像を展開した時点で、該展開した画像の輝度の大きさに基づいて劣化画像の有無を判定することを特徴とする。
請求項３に係る発明は、請求項１又は２記載の画像通信制御方法において、前記画像送信系は、前記画像受信系から前記劣化信号を受信したとき、画像の圧縮ビットレートを小さくさせて画像を送信することを特徴とする。
請求項４に係る発明は、画像送信系からネットワーク伝送路を経て画像受信系に圧縮画像が送信されたとき、前記画像受信系が前記圧縮画像を展開して再生する画像通信制御装置であって、前記画像受信系は、画像送信系からの圧縮画像を受信したとき、その圧縮画像を展開する画像展開部と、展開された画像に基づいて劣化画像の有無を判定すると共に、劣化画像が存在しているときに劣化信号を送信する画像判定手段とを備え、前記画像送信系は、送信すべき画像を圧縮する画像圧縮部と、前記画像受信系から前記劣化信号を受信した時点で、送信している画像の輝度を変更させる画像調整手段とを備えることを特徴とする。
請求項５に係る発明は、請求項４記載の画像通信制御装置において、前記画像判定手段は、展開された画像の輝度の大きさに基づいて劣化画像を判定する劣化画像判定部と、該劣化画像判定部が劣化画像を判定したとき、劣化信号を前記画像送信系に送信する劣化信号送信部とからなり、前記画像調整手段は、前記劣化信号送信部からの劣化信号を受信する劣化信号受信部と、該劣化信号受信部が劣化信号を受信したとき、送信している画像の輝度を継続的に変更させる画像調整部とからなることを特徴とする。
請求項６に係る発明は、請求項４又は５記載の画像通信制御装置において、前記画像調整部は、前記画像圧縮部に対して、画像の圧縮ビットレートを小さくさせることを特徴とする。
請求項７に係る発明は、請求項４〜６のいずれか記載の画像通信制御装置を備えてなることを特徴とする。
【発明の効果】
【０００７】  請求項１に係る発明によれば、送信された画像が劣化している場合、それを速やかに判定して、劣化していない画像で送受信することができるように構成したので、送信すべき画像を自動的に調整して画像の劣化を確実に抑制することができ、良好な画像を送受信することができる効果がある。【０００８】  請求項２に係る発明によれば、劣化画像を的確に判定することができる効果がある。【０００９】  請求項３に係る発明によれば、送信画像が劣化するのを確実に抑制することができ、劣化していない画像を送信することができる効果がある。【００１０】  請求項４に係る発明によれば、送信された画像が劣化している場合、それを速やかに判定して、劣化していない画像で送受信することができるように構成したので、送信すべき画像を自動的に調整して画像の劣化を確実に抑制することができ、良好な画像を送受信することができる効果がある。【００１１】  請求項５に係る発明によれば、送信された画像が画像受信系によって劣化しているか否かを確実に判定することができる一方、画像送信系が、劣化した画像であることを確実に受信できるので、送信している画像が劣化するのを抑制することができる効果がある。【００１２】  請求項６に係る発明によれば、送信している画像の輝度を確実に変更することができ、画像受信系で受信した画像が劣化するのを確実に抑制することができる効果がある。【００１３】  請求項７に係る発明によれば、お互いに可及的に良好な画像が得られる携帯通信装置を実現することができる効果がある。
【発明を実施するための最良の形態】
【００１４】  以下、図面を参照し、この発明の実施の形態について説明する。図１及び図２は本発明の一実施の形態に係る画像通信制御装置を携帯通信装置に適用した図であって、図１は、双方の携帯通信装置がネットワーク伝送路を経て互いに通信している状態を示す概略図、図２は、携帯通信装置における画像通信制御装置を示す構成ブロック図である。
この実施形態の携帯通信装置は、例えば携帯電話に適用したものであって、図１に示すように、一方の携帯電話１と他方の携帯電話２とが無線式のネットワーク伝送路３を介して通信できるようになっている。【００１５】  これら携帯電話１と携帯電話２は、図１に示すように、複数のキーからなる操作部４と、液晶などからなるディスプレイ５と、通話用のマイクロフォン及びスピーカ（図示せず）とが設けられることで、音声で通信できるようになっている。これに加え、静止画像や動画画像を撮像するためのカメラ（図示せず）も携帯電話１及び２に設けられ、例えば携帯電話１において上記カメラによって画像が撮像されたとき、内蔵された画像送信系１０から、ネットワーク伝送路３を介して携帯電話２の画像受信系２０に画像が送信されると、携帯電話２ではその画像受信系２０によりディスプレイ５を介して画像が見られるようになっている。【００１６】  そのため、上記画像を送信するため携帯電話１に設けられた画像送信系１０と、送信された画像を受信ため携帯電話２に設けられた画像受信系２０とで画像通信制御装置３０が構築されている。このような画像通信制御装置３０では、上記カメラによって撮像された静止画像や動画画像のみならず、ストリーム配信された画像をも送受信できるようになっている。以下は、静止画像と動画画像とストリーム配信された画像との全てを、「画像」と称す。【００１７】  画像送信系１０としては、図２（ａ）に示すように、画像を圧縮して送信する画像圧縮部１１の他、画像受信系２０から画像の劣化信号を受信した時点で、送信している画像の輝度を変更させる画像調整手段（符示せず）を備えている。画像調整手段は、画像受信系２０からの劣化信号を受け取る劣化信号受信部１２と、劣化信号受信部１２が劣化信号を受け取った時点で、画像圧縮部１１に対して画像の輝度、つまり、画像圧縮度を変更させる画像調整部１３とからなっている。【００１８】  一方、画像受信系２０は、図２（ｂ）に示すように、画像送信系１０から送信された画像（圧縮画像）を展開する展開部２１と、展開された画像から、劣化画像の有無を判定すると共に、劣化画像が存在しているときに劣化信号を画像送信系１０に送信する判定手段（符示せず）とを備えている。該判定手段は、劣化画像の有無を判定する劣化画像判定部２２と、劣化画像判定部２２が劣化画像を判定したとき、劣化信号を画像送信系に対して送信する劣化信号送信部２３とからなっている。【００１９】  劣化画像判定部２２は、送信された画像が展開部２１によって展開されたとき、その展開した画像の輝度をそれぞれ検出すると共に、その検出した輝度の大きい画像と輝度の小さい画像とを比較することで、劣化画像の有無を判定するようになっている。なお、図３において、符号Ｋは複数に分割された画像全体を示し、その分割された各画像のうち、白抜き部分Ｋ１は輝度の大きい画像部、黒塗りの部分Ｋ２は輝度の小さい画像部を表しており、詳細は後述する。【００２０】  本実施形態の携帯通信装置は、上記のように構成されているので、次に、その具体的動作について図４及び図５を用いて以下に説明する。図４は、携帯電話１における画像送信系のフローチャートを示し、図５は、携帯電話２における画像受信系のフローチャートを示している。
図１に示すように、携帯通信装置１から無線ネットワーク３を介して携帯通信装置２に対し、例えばＭＰＥＧ−４からなる画像が送信される場合、携帯通信装置１においては送信に際し、送信系１０が図４に示すように画像の送信処理を行う（Ｓ４１）。その場合、送信系１０においては、送信すべき画像を、画像圧縮部１１が予め定められているビットレートで圧縮（エンコード）した後（Ｓ４２）、その圧縮された画像が転送されることとなる（Ｓ４３）。【００２１】  一方、携帯通信装置２においては、画像受信系２０が図５に示すように、圧縮された画像を受信すると（Ｓ５１）と、画像展開部２１が、受信した画像データに基づいて画像を展開処理し（Ｓ５２）、次いで展開した画像がディスプレイ５（図１参照）に表示されることとなる（Ｓ５３）。この受信時、ディスプレイ５にて表示されている状態にあるとき、画像受信系２０の劣化画像判定部２２では、展開した画像に基づいて画像チェック、つまり劣化した画像の有無を判定する（Ｓ５４）。【００２２】  その場合、劣化画像判定部２２は、展開した画像を図３に示すように、予め設定された数のブロックに分割すると共に、その分割したブロック毎に輝度を測定し、測定した各ブロックの輝度の大きさを比較して、その差がどれだけあるかを判定する。その結果、各ブロックの輝度の差が、予め設定された閾値の範囲内であれば、劣化画像が存在しないと判定し、また各ブロックの輝度の差が閾値を越えていると、劣化画像が存在していると判定する。【００２３】  このように図５に示す処理Ｓ５４において、劣化画像の有無をチェックし、劣化画像が存在しないと判定した場合には、ＯＫとして劣化信号送信部２３から送信することがなく（Ｓ５５）、また、劣化画像があると、劣化信号送信部２３から携帯通信装置１の画像送信系１０に対して劣化有りの旨である劣化信号を送信する（Ｓ５６）。【００２４】  他方、携帯通信装置１では、図４において、携帯通信装置２における画像受信系２０の劣化信号送信部２３から劣化信号を受信すると（Ｓ４４）、画像調整部１３が画像圧縮部１１に対し、送信している画像データの圧縮度を変更させる（Ｓ４５）。これにより、画像圧縮部１１では、画像の圧縮ビットレートを小さくし、小さな圧縮ビットレートで圧縮画像を生成することにより（Ｓ４２）、変更された圧縮画像を継続的に転送することとなる（Ｓ４３）。【００２５】  このように、携帯通信装置２の劣化画像判定部が、送信された画像を展開すると共に、展開した画像の輝度の大きさを比較することで劣化画像の有無を判定する一方、携帯通信装置１においては、画像の劣化信号を受け取ると、圧縮度を変更すると共に、変更した圧縮画像を継続的に送信し続けるので、画像が劣化するのを確実に抑制することができ、劣化した画像が送信され続けるのを回避することができる。
しかも、その際、携帯通信装置２では画像を継続的に受信できるので、画像が途切れることなく、つまりユーザーが通信速度の変化を意識することなく受信することができる。【００２６】  従って、本発明の画像通信制御方法によれば、送信された画像が劣化している場合、それを速やかに判定して、劣化していない画像で送受信することができるように構成したので、送信画像を自動的に調整して画像の劣化を確実に抑制することができ、良好な画像を送受信することができる。
その結果、特許文献１のように劣化した画像を単に検出だけでなく、また特許文献２のように劣化した画像をそのままにしておくことと異なり、画像の劣化を確実に抑制することができる。これにより、ネットワーク伝送路を高い設備費に交換することなく、画像を改善することができるばかりでなく、画像データ以外を利用しなくともネットワーク伝送路の状態を判定することができ、その上、ユーザ自身が画像をいちいち調整したりするということが不要になり、ユーザの負担が増えるのを防ぐことができる。【００２７】  しかも、画像受信系２０は、送信された画像を展開した時点で、該展開した画像の輝度の大きさに基づいて劣化画像の有無を判定するので、劣化画像を的確に判定することができる。一方、画像送信系１０は、画像受信系２０から劣化信号を受信したとき、画像の圧縮ビットレートを小さくさせて画像を送信するので、画像の輝度を容易に変更することができ、送信画像が劣化するのを確実に抑制することができ、劣化していない画像を送信することができる。【００２８】  そして、この画像通信制御装置３０によれば、画像受信系２０が、画像送信系１０からの圧縮画像を受信したとき、その圧縮画像を展開する画像展開部２１と、展開された画像に基づいて劣化画像の有無を判定する劣化画像判定部２２と、劣化画像が存在しているときに劣化信号を画像送信系１０に対して送信する劣化信号送信部２３とを備える一方、画像送信系１０が、送信すべき画像を圧縮する画像圧縮部１１と、劣化信号送信部２３からの劣化信号を受信した時点で、送信している画像の輝度を変更させる画像調整部１３とを備えるので、送信された画像が劣化しているか否かを確実に判定することができ、また送信している画像が劣化するのを抑制することができ、これにより、上記方法を的確に実施することができる。【００２９】  しかも、画像送信系１０の画像調整部１３は、画像の圧縮ビットレートを小さく変更させるので、送信する画像が劣化するのを確実に抑制することができる。
このような画像通信制御装置３０は、携帯電話１、２としての携帯通信装置に利用すれば、画像受信系２０で良好な画像を得ることができ、お互いに可及的に劣化しない画像の送受信を実現することができる。【００３０】  さらに、画像送信系１０によって変更された圧縮画像が、上述したように携帯通信装置２の画像受信系２０に対して転送されたとき、画像受信系２０の劣化画像判定部２２においては、新たに送信されてきている圧縮画像を図５に示す処理Ｓ５４にて判定し、その際、再び劣化画像が存在することで携帯通信装置１の画像送信系１０に劣化信号が送信されると、携帯通信装置１の画像送信系１０においては、今度は、画像調整部１３により図４の処理Ｓ４５にて示すように画像圧縮部１１の圧縮ビットレートさらに小さく変更され、その小さく変更された圧縮画像データが送信されようにすることが好ましい。【００３１】  即ち、画像送信系１０においては、画像の送信時、劣化信号が入力されることで画像の圧縮ビットレートを変更するが、それにも拘わらず劣化信号が入力されると、今度はその圧縮度をさらに段階的に小さく変更させると、携帯通信装置２の画像受信系２０では、最初送信された画像に比較し、その後に送信された画像の方向が良好な画像となり、さらにその後に送信された画像がいっそう良好となることから、送信される画像が劣化するのを確実に抑制することができる。【００３２】  なお、上記実施の形態では、携帯通信装置として携帯電話に適用した例を示したが、ＰＨＳにも適用することができる他、ＰＤＡ（携帯情報端末）等のように画像を送受信し得る電子装置を内蔵した他のものに適用しても、同様の作用効果を得ることができ、図示例に限定されるものではない。
また、画像受信系２０の劣化画像判定部２２が劣化画像を判定したとき、劣化信号送信部２３によって劣化信号を送信するように構成した例を示すと共に、画像送信系１０の劣化信号受信部１２が劣化信号を受信することで、画像調整部１３が作動するように構成した例を示したが、劣化画像判定部２２が劣化画像を判定した時点で劣化信号を送信させるようにすると共に、画像調整部１３が劣化信号を直接受信するように構成すれば、構成のより簡素化及び処理の迅速化を図ることも可能となる。
【図面の簡単な説明】
【００３３】
【図１】  本発明の一実施の形態に係る画像通信制御装置を適用した携帯通信装置を示す概略図である。
【図２】  （ａ）は携帯通信装置における画像送信系を示すブロック図、（ｂ）は同じく携帯通信装置における画像受信系を示すブロック図である。
【図３】  画像受信系の劣化画像判定部により、劣化した画像を判定するための説明図である。
【図４】  画像送信系が画像を送信するときのフローチャートである。
【図５】  画像受信系が画像を受信しているのフローチャートである。
【符号の説明】
【００３４】  １、２…携帯通信装置（携帯電話）
３…ネットワーク伝送路
１０…画像送信系
１１…画像圧縮部
１２…劣化信号受信部
１３…画像調整部
２０…画像受信系
２１…画像展開部
２２…劣化画像判定部
２３…劣化信号送信部
３０…画像通信制御装置
【図１】
2005286978.tif 000003
【図２】
2005286978.tif 000004
【図３】
2005286978.tif 000005
【図４】
2005286978.tif 000006
【図５】
2005286978.tif 000007