(57)【要約】【目的】帯域幅の制限がある場合でも、通信負荷を高めることなく画像を扱えるような処理を施すことによって高解像度カメラの入力画像を扱うことができる画像送信装置、画像受信装置及び画像送受信システムを提供すること。【構成】 ネットワークに接続された撮像手段と、前記撮像手段により撮像して得られた画像を電気信号に変換する変換手段と、送信帯域幅を検知する検知手段と、前記検知手段により検知した結果に基づいて可変な画像領域を切り出す切り出し手段と、全体の画像を複数に分割するといった処理を行う分割手段と、前記分割手段により分割処理された画像を送信する画像送信手段とで画像送信装置を構成する。【選択図】      図１
2004194187.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークに接続された撮像手段と、前記撮像手段により撮像して得られた画像を電気信号に変換する変換手段と、送信帯域幅を検知する検知手段と、前記検知手段により検知した結果に基づいて可変な画像領域を切り出す切り出し手段と、全体の画像を複数に分割するといった処理を行う分割手段と、前記分割手段により分割処理された画像を送信する画像送信手段とを有することを特徴とする画像送信装置。
制御信号を受信する手段を有する装置と、
【請求項２】
前記画像送信装置は、制御信号を受信する制御信号受信手段を更に有することを特徴とする請求項１記載の画像送信装置。
【請求項３】
前記切り出し手段は、前記検知手段により検知された送信帯域幅と、前記制御信号受信手段により受信した制御信号とにより画像を切り出す領域を決定して画像を切り出し、前記分割手段は前記切り出し手段により切り出された画像領域に基づき画像を複数に分割処理することを特徴とする請求項２記載の画像送信装置。
【請求項４】
送信された画像情報を受信する画像受信手段と、分割されて送信された画像情報を元の１枚の画像に復元する手段と、前記画像受信手段により受信した画像情報を表示する画像表示手段と、画像を送信する装置を制御する手段と、前記画像受信手段が受信する画像情報に関する制御信号を送信する制御信号送信手段とを有することを特徴とする画像受信装置。
【請求項５】
前記画像受信装置は、復元手段を更に有し、前記復元手段は、前記画像受信手段によって受信された複数の画像を１枚の画像に復元することを特徴とする請求項４記載の画像受信装置。
【請求項６】
前記制御信号送信手段により送信される制御信号は、前記画像受信装置で受信したい画像の位置を示す情報であることを特徴とする請求項４記載の画像受信装置。
【請求項７】
前記画像受信装置で受信したい画像の位置を示す前記情報は、全画面の中心点を基点に四方に全画面と同比率で均等に画角を決定する情報であることを特徴とする請求項６記載の画像受信装置。
【請求項８】
前記画像受信装置で受信したい画像の位置を示す前記情報は、全画面の左上部の隅を基点に全画面と同比率で均等に画角を決定する情報であることを特徴とする請求項６記載の画像受信装置。
【請求項９】
前記画像受信装置で受信したい画像の位置を示す前記情報は、全画面の左下部の隅を基点に全画面と同比率で均等に画角を決定する情報であることを特徴とする請求項６記載の画像受信装置。
【請求項１０】
前記画像受信装置で受信したい画像の位置を示す前記情報は、全画面の右上部の隅を基点に全画面と同比率で均等に画角を決定する情報であることを特徴とする請求項６記載の画像受信装置。
【請求項１１】
前記画像受信装置で受信したい画像の位置を示す前記情報は、全画面の右下部の隅を基点に全画面と同比率で均等に画角を決定する情報であることを特徴とする請求項６記載の画像受信装置。
【請求項１２】
前記画像受信装置で受信したい画像の位置を示す前記情報は、全画面の中で最も動きの大きいエリアの中心点を基点に四方に全画面と同比率で均等に画角を決定する情報であることを特徴とする請求項６記載の画像受信装置。
【請求項１３】
請求項１記載の画像送信装置と請求項４記載の画像受信装置から成ることを特徴とする画像送受信システム。
【請求項１４】
前記画像送信装置と前記画像受信装置は、ネットワークを介して接続されることを特徴とする請求項１３記載の画像送受信システム。
【請求項１５】
前記画像送信装置と前記画像受信装置は、インターネットサーバーを介して接続されることを特徴とする請求項１３記載の画像送受信システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ネットワーク接続されたカメラとその入力画像に処理を施す装置から成る画像送受信システムと方法に関するものである。
【０００２】
【従来の技術】
ネットワークに接続されたカメラは、光学撮像部で捉えた全画角を送信していた。
【０００３】
【発明が解決しようとする課題】
近年、高解像度の撮像素子が安価で入手できるようになったにも拘らず、主な接続手段となる電話回線等の帯域幅の制限から、上記従来の技術に記載したカメラにおいては、光学撮像部で捉えた全画角を送信するために、カメラの仕様を低解像度に抑えざるを得なかった。
【０００４】
この発明は上記事情に鑑みてなされたもので、その目的とする処は、帯域幅の制限がある場合でも、通信負荷を高めることなく画像を扱えるような処理を施すことによって高解像度カメラの入力画像を扱うことができる画像送信装置、画像受信装置及び画像送受信システムを提供することにある。
【０００５】
【課題を解決するための手段】
上記目的を達成するため、本発明は、ネットワークに接続された撮像手段と、前記撮像手段により撮像して得られた画像を電気信号に変換する変換手段と、送信帯域幅を検知する検知手段と、前記検知手段により検知した結果に基づいて可変な画像領域を切り出す切り出し手段と、全体の画像を複数に分割するといった処理を行う分割手段と、前記分割手段により分割処理された画像を送信する画像送信手段とで画像送信装置を構成したことを特徴とする。
【０００６】
又、本発明は、送信された画像情報を受信する画像受信手段と、分割されて送信された画像情報を元の１枚の画像に復元する手段と、前記画像受信手段により受信した画像情報を表示する画像表示手段と、画像を送信する装置を制御する手段と、前記画像受信手段が受信する画像情報に関する制御信号を送信する制御信号送信手段とで画像受信装置を構成したことを特徴とする。
【０００７】
【発明の実施の形態】
以下に本発明の実施の形態を添付図面に基づいて説明する。
【０００８】
図１に示すように、システムは、撮像部１と画像処理部２と記憶部３と通信部４とから成るカメラ装置１０１と、表示部５と処理部４と操作部６と復元部８から成るビューワー装置１０２で構成されている。更に、上記カメラ装置１０１の撮像部１は、撮影画像を電気信号に変換する変換部９を備え、通信部３は送信帯域幅を検知する通信帯域幅検知部７と、画像を送信する画像送信部１２と、制御信号を受信する制御信号受信部１３とを備え、又、画像処理部２は画像領域を切り出す切り出し部１０と、画像を分割する分割部１１を備える。一方、上記ビューワ装置１１０２の処理部４は、制御信号送信部１４と、画像受信部１５を備える。
【０００９】
又、上記カメラ装置１０１とビューワ装置１０２は電話回線等のネットワーク１６を介して接続されるものとする。
【００１０】
以下、各構成の役割を説明する。
【００１１】
先ず、カメラ装置１０１では、撮像部１で対象となる被写体の光学像を結像し、その結果を変換部９により電気的に変換し、変換された信号を画像処理部２へ送る。画像処理部２では、後述するビューワ装置１０２でなされた設定に基づいて送信すべき画角を計算し、その計算結果によって得られた画角の画像データを切り出し部１０によって切り出し、切り出した画像データを通信部３へ送る。
【００１２】
通信部３では、通信帯域幅検知部７により通信が行われている帯域幅を検知し、その結果を画像処理部２へ送る。又、通信部３は、電話回線等の通信手段を利用してビューワ装置１０２若しくはインターネット上のサーバー等の通信相手から送信された画像処理のための制御情報を制御信号受信部１３で受信し、画像処理部２へ送る。更に、通信部３の画像送信部１２は、画像処理部２で処理の施された画像データを電話回線等の通信手段を利用してビューワ装置１０２若しくはインターネット上のサーバー等の通信相手に送る。
【００１３】
記憶部４では、撮像部１で撮像した未処理の画像データや、必要に応じて画像処理部２で処理された画像データをハードディスクやメモリーカードといった記憶媒体に記憶する。
【００１４】
一方、ビューワ装置１０２では、処理部４は、ＰＣ（パソコン）のような通信手段を有するデータ処理装置であり、カメラ装置１０１から送信された画像データを画像受信部１５で受信し、復元部８へ送る。復元部８では処理部４から送られた画像データを元の画像に復元し、表示部５へ送る。表示部５では復元部８と処理部４から送られた画像データの表示を行う。ユーザーは表示部５に表示された結果に基づき、操作部６によって所望の画像領域を選択する。
【００１５】
図２に、帯域幅によってカメラ装置１０１が自動的に送信に適切な画像のサイズを計算して、画像のリサイズを行う際のカメラ装置１０１の動作の流れを示す。処理が開始されると（Ｓ２０１）撮像部１で撮影された画像データを変換部９により電気信号に変換する（Ｓ２０２）。未処理の画像データに対して、予め記憶された設定に基づいて記憶するか否かを判断する（Ｓ２０３）。記憶する場合もしない場合も、次に通信状態にあるか否かを通信部３により判断し（Ｓ２０３）、通信状態であれば通信帯域幅検知部７により通信帯域幅を検知する（Ｓ２０４）。
【００１６】
画像信号をＳ２０４の結果に基づき、通信の帯域幅が全画面をスムーズに送り出すことに適するレベルか否かを通信部３により判断する（Ｓ２０５）。全画面を送信するための十分な帯域幅がないと判断した場合には、ユーザーによって予め設定された内容に基づいて帯域幅に見合ったリサイズ処理を画像処理部２の切り出し部１０により施す（Ｓ２０６）。リサイズ処理を施した結果も、リサイズ処理を行なわなかった場合の全画面データ同様に通信部３の画像送信部１２により送信する（Ｓ２０７）。
【００１７】
図３にビューワ装置１０２の動作の流れを示す。
【００１８】
処理が開始されると（Ｓ３０１）、インターネット上のサーバー等を経由するか若しくは経由しないで処理部４の画像受信部１５により、カメラ装置１０１から画像データを受信しているかどうかを判断する（Ｓ３０２）。画像データを受信していれば、表示部５に表示する（Ｓ３０３）。ユーザーが表示されたデータを参照しながら操作部６を使用してカメラ装置を制御する操作をしたかどうかを判断し（Ｓ３０４）、操作がされれば制御信号を生成し（Ｓ３０５）、処理部４の制御信号送信部１４により送信する（Ｓ３０６）。
【００１９】
次に、Ｓ２０６でリサイズ処理を行うための設定について述べる。
【００２０】
先ず、ユーザーが見たい画像の位置を予め設定しておく必要がある。設定はユーザーがビューワー装置１０２の操作部６等から行い、設定情報は上述の制御信号としてビューワ装置１０２の処理部４の制御信号送信部１４によりカメラ装置１０１へ送られる（Ｓ３０５）。
【００２１】
本発明では、リサイズ処理を行うための設定は以下の７通りである。
【００２２】
図４は全画面の中心点を基点に四方に全画面と同比率で均等に画角を決定する場合である。
【００２３】
図５は全画面の左上部の隅を基点に全画面と同比率で均等に画角を決定する場合である。
【００２４】
図６は全画面の左下部の隅を基点に全画面と同比率で均等に画角を決定する場合である。
【００２５】
図７は全画面の右上部の隅を基点に全画面と同比率で均等に画角を決定する場合である。
【００２６】
図８は全画面の右下部の隅を基点に全画面と同比率で均等に画角を決定する場合である。
【００２７】
図９は全画面の中で最も動きの多いエリアの中心点を基点に四方に全画面と同比率で均等に画角を決定する場合である。図１０でその流れを説明する。
【００２８】
カメラ装置１０１が捉えている全画面の中で直前の画像と比較して動きがあるかを画像処理部２により判断し（Ｓ１００２）、動きがある場合、直前の画像と最も差が大きいエリアの中心点を決定し（Ｓ１００３）、その点を基点に全画面と同比率で均等に画角を決定する（Ｓ１００４）場合である。基点が理由で４辺の何れかが全体画角の中に収まり切れない場合は、全画面の四辺の何れかに接した時点で残りの距離を向かい合う辺に向かって取る（図１１）。
【００２９】
図１２は全画面をカメラ装置１０１の分割部１１で複数に分割し、ビューワー装置１０２側の復元部８によりで再度全画面に復元する場合である。この設定では全画面を、縦横比を固定して整数分割できる４ｎ 枚数に分割する。最小単位は４であり、以降１６，６４，…となる。但し、連続的に全部のコマを送信するのでは通信負荷を軽減したことにはならないので、前の時点に比べて動きのあったコマのみを送信するものである。初めの画像１２０１では、コマ２９３１、コマ３０３２、コマ３１３３、コマ３２３４を随時送信する。次の画像１２０２では、コマ３４３６のみに動きが認められるので、コマ３４３６のみが送信される。ビューワー側では、３４３６が３０３２を上書きするのみで最新画像の表示とする。
【００３０】
本実施の形態においては、カメラ装置１０１とビューワ装置１０２を電話回線等のネットワーク１６を介してダイレクトに接続する形態を説明したが、ネットワーク１６上の例えばインターネットのサーバー１７を経由して接続する場合も本発明の範疇である。その際、カメラ装置１０１の画像送信部１２から送信される画像データは一旦上記サーバー１７に蓄積され、サーバー１７に蓄積された画像データがビューワ装置１０２へ送信され、ビューワ装置１０２の画像受信部により受信されることとなる。
【００３１】
【発明の効果】
本発明によれば、帯域幅を検知することによって、通信状態に適したサイズの画角の画像を予め定められた位置に基づいて切り出すことにより、通信の負荷を軽減することが可能になる。
【００３２】
又、本発明によれば、帯域幅を検知することによって、通信状態に適したサイズのコマに画像を分割して送信し、受信側で元のサイズの画像を復元する。その際、前画面と比較したときに動きのあるコマのみを送信することで、通信の負荷を軽減することが可能になる。これによって、カメラ装置及びビューワ装置をネットワークを介して接続した際、カメラ装置が捉えた画像データをビューワ装置で素早く確認することが可能となる。
【図面の簡単な説明】
【図１】本発明の実施の形態のシステム構成ブロック図である。
【図２】本発明の実施の形態のカメラ装置に対する画像切り出しの際の動作フローチャートである。
【図３】本発明の実施の形態のビューワ装置に対する動作フローチャートである。
【図４】本発明の全画面の中心点を基点に画角を決定する場合の概念図である。
【図５】全画面の左上部の隅を基点に画角を決定する場合の概念図である。
【図６】全画面の左下部の隅を基点に画角を決定する場合の概念図である。
【図７】全画面の右上部の隅を基点に画角を決定する場合の概念図である。
【図８】全画面の右下部の隅を基点に画角を決定する場合の概念図である。
【図９】全画面の動きの多いエリアの中心点を基点に画角を決定する場合の概念図である。
【図１０】動きの多いエリアの中心点を基点に画角を決定する際のフローチャートである。
【図１１】画角を全画面の中に収める場合の概念図である。
【図１２】分割した画面の動きのあるコマだけを送受信する場合の概念図である。
【符号の説明】
１０１    カメラ装置
１０２    ビューワ装置
１１０１  全画面
１２０１  全画面の４分割
１２０２  １２０１の後に撮影された画像
１１    撮像部、
２      画像処理部
３      通信部
４      画像受信部
５      表示部
６      操作部
７      通信帯域幅検知部
８      復元部
９      変換部
１０    切出部
１１    分割部
１２    画像送信部
１３    制御信号受信部
１４    制御信号送信部
１５    画像受信部
１６    ネットワーク
１７    サーバー
【図１】
2004194187.tif 000003
【図２】
2004194187.tif 000004
【図３】
2004194187.tif 000005
【図４】
2004194187.tif 000006
【図５】
2004194187.tif 000007
【図６】
2004194187.tif 000008
【図７】
2004194187.tif 000009
【図８】
2004194187.tif 000010
【図９】
2004194187.tif 000011
【図１０】
2004194187.tif 000012
【図１１】
2004194187.tif 000013
【図１２】
2004194187.tif 000014