(57)【要約】  【課題】  ネットワークでの遅延やジッタやエンコード・デコード時の遅延などの影響を抑えて安定した表示再生を行なうことができ、さらにネットワークの経路が異なっても、同時に表示再生ができる画像伝送システムを提供すること。  【解決手段】  デコード表示装置２の通信処理部２３は、撮像装置１から送られてくる符号化画像データを、符号化画像データがネットワーク３に送出された時刻に表示再生時刻制御部２７に記憶されているネットワーク遅延時間を加算した時刻にデコーダ２５に出力し、表示部２６に表示させる。【選択図】  図１
2005057590.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークを介して受信した処理データを一時記憶しておくデータ記憶部と、前記処理データが前記ネットワークに送出された時刻が前記処理データに付加されていたとき、前記時刻に所定のネットワーク遅延時間を加算して算出された時刻に前記処理データを処理させる通信処理部とを備えることを特徴とするデコード表示装置。
【請求項２】
前記処理データはエンコードされた符号化データであり、前記通信処理部は、前記符号化データに前記符号化データが撮像された時刻である撮像時刻及び前記符号化データがエンコードされるのにかかった時間であるエンコード遅延時間が付加されていたとき、前記撮像時刻に前記エンコード遅延時間及び前記ネットワーク遅延時間を加算して算出された時刻に前記符号化データをデコードさせ表示再生させることを特徴とする請求項１に記載のデコード表示装置。
【請求項３】
計測された前記符号化データをデコードするのにかかる時間に基づいてデコード遅延時間を算出し記憶するデコード遅延記憶部を備え、前記通信処理部は、前記撮像時刻に前記エンコード遅延時間、前記ネットワーク遅延時間及び前記デコード遅延時間を加算して算出された時刻に前記符号化データを表示再生させることを特徴とする請求項２に記載のデコード表示装置。
【請求項４】
前記ネットワークから受信したデータから前記データが前記ネットワーク内を伝送されるのにかかる時間を計測し、計測した時間に基づいて前記ネットワーク遅延時間を算出するジッタ・遅延計測部を備えることを特徴とする請求項３に記載のデコード表示装置。
【請求項５】
前記通信処理部は、前記ネットワークから前記エンコード遅延時間、前記デコード遅延時間及び前記ネットワーク遅延時間を設定するデータを受信したとき、受信したエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間を前記エンコード遅延時間、前記デコード遅延時間及び前記ネットワーク遅延時間として使用することを特徴とする請求項４に記載のデコード表示装置。
【請求項６】
撮像したデータをエンコードした符号化データに前記符号化データをネットワークに送出する時刻を付加して送信する通信処理部を備えることを特徴とする撮像装置。
【請求項７】
計測された前記撮像したデータをエンコードするのにかかる時間に基づいてエンコード遅延時間を算出し記憶するエンコード遅延記憶部を備え、前記通信処理部は、前記符号化データに前記エンコード遅延時間と前記符号化データが撮像された時刻とを付加して送信することを特徴とする請求項６に記載の撮像装置。
【請求項８】
請求項１から請求項４のいずれかに記載のデコード表示装置と、請求項６または請求項７に記載の撮像装置とを備えることを特徴とする画像伝送システム。
【請求項９】
請求項５に記載のデコード表示装置と、請求項７に記載の撮像装置と、前記ネットワークを介して、前記デコード表示装置が算出した前記デコード遅延時間及び前記ネットワーク遅延時間、前記撮像装置が算出した前記エンコード遅延時間を収集し、収集したエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間に基づいてエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間を算出し、算出したエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間を前記デコード表示装置に設定する再生時刻制御装置とを備えることを特徴とする画像伝送システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像した情報を送信する撮像装置と撮像装置で撮像した情報をデコードして表示するデコード表示装置に関し、特にネットワークを介して接続された撮像装置及びデコード表示装置に関する。
【背景技術】
【０００２】
従来、監視システムなどの撮像装置で撮像した画像をデコード表示装置に伝送し表示する画像伝送システムでは、撮像装置とデコード表示装置を同軸ケーブルなどで接続してアナログ伝送により表示や記録を行なっているため、伝送路による遅延やジッタ等は非常に小さく気になるほどではなかった。
【０００３】
近年、撮像装置とデコード表示装置とをネットワークを介して接続しデジタル化された画像伝送システムも構築されてきており、このようなシステムでは、ネットワークで遅延やジッタなどが発生したり、エンコード・デコード時に遅延が発生したりして、撮像装置の制御に影響が出る場合がある。
【０００４】
このような遅延等の影響を小さくするために、撮像装置で送信するデータ量が大きくなる場合は圧縮率を高くして遅延を少なくするものがある（例えば、特許文献１参照）。
【０００５】
また、送信画像の解像度を低下させたり画像符号化の各フレームの量子化を粗くしたりして送信情報量を削減して遅延を少なくするものもある（例えば、特許文献２）。
【特許文献１】特開平１１−２３９３２９号公報
【特許文献２】特開平７−２５０３２２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかし、このような従来の画像伝送システムでは、撮像装置から送信するデータ量を制御して遅延を少なくしようとしているだけで、ネットワークでの遅延やジッタやデコード時の遅延などには対応できていない。
【０００７】
また、撮像装置からデコード表示装置までのネットワークの経路が異なると、それぞれの経路での遅延やジッタが異なるので、同一の撮像装置の情報をデコードしてもネットワークの経路の遅延やジッタの差によって、表示の切り換えが同時に行なわれなかったり、音声にエコーがかかったりするなどの問題があった。
【０００８】
本発明はこのような問題を解決するためになされたもので、ネットワークでの遅延やジッタやエンコード・デコード時の遅延などの影響を抑えて安定した表示再生を行なうことができ、さらにネットワークの経路が異なっても、同時に表示再生ができる画像伝送システムを提供するものである。
【課題を解決するための手段】
【０００９】
第１の発明のデコード表示装置は、ネットワークを介して受信した処理データを一時記憶しておくデータ記憶部と、前記処理データが前記ネットワークに送出された時刻が前記処理データに付加されていたとき、前記時刻に所定のネットワーク遅延時間を加算して算出された時刻に前記処理データを処理させる通信処理部とを備える構成を有している。
【００１０】
この構成により、受信された処理データが一時記憶され、この処理データがネットワークに送出された時刻に予め設定された時間が加算された時刻が算出され、この時刻に処理データが処理される。したがって、ネットワークの遅延やジッタが抑えられるとともに、異なるデコード表示装置でのネットワークの経路の違いによる遅延やジッタの違いが吸収されることとなる。
【００１１】
第２の発明のデコード表示装置は、第１の発明の構成に加え、前記処理データはエンコードされた符号化データであり、前記通信処理部は、前記符号化データに前記符号化データが撮像された時刻である撮像時刻及び前記符号化データがエンコードされるのにかかった時間であるエンコード遅延時間が付加されていたとき、前記撮像時刻に前記エンコード遅延時間及び前記ネットワーク遅延時間を加算して算出された時刻に前記符号化データをデコードさせ表示再生させる構成を有している。
【００１２】
この構成により、受信された符号化データが一時記憶され、この符号化データが撮像された時刻にエンコード遅延時間とネットワーク遅延時間が加算された時刻が算出され、この時刻に符号化データがデコードされて表示再生される。したがって、ネットワークの遅延やジッタや、エンコードによる遅延やジッタが抑えられるとともに、異なるデコード表示装置でのネットワークの経路の違いによる遅延やジッタの違いが吸収されることとなる。
【００１３】
第３の発明のデコード表示装置は、第２の発明の構成に加え、計測された前記符号化データをデコードするのにかかる時間に基づいてデコード遅延時間を算出し記憶するデコード遅延記憶部を備え、前記通信処理部は、前記撮像時刻に前記エンコード遅延時間、前記ネットワーク遅延時間及び前記デコード遅延時間を加算して算出された時刻に前記符号化データを表示再生させる構成を有している。
【００１４】
この構成により、受信された符号化データが一時記憶され、この符号化データが撮像された時刻にエンコード遅延時間とネットワーク遅延時間と計測されたデコード遅延時間とが加算された時刻が算出され、この時刻に符号化データが表示再生される。したがって、ネットワークの遅延やジッタや、エンコードによる遅延やジッタや、デコードによる遅延やジッタが抑えられるとともに、異なるデコード表示装置でのネットワークの経路の違いによる遅延やジッタの違いが吸収されることとなる。
【００１５】
第４の発明のデコード表示装置は、第３の発明の構成に加え、前記ネットワークから受信したデータから前記データが前記ネットワーク内を伝送されるのにかかる時間を計測し、計測した時間に基づいて前記ネットワーク遅延時間を算出するジッタ・遅延計測部を備える構成を有している。
【００１６】
この構成により、受信された符号化データが一時記憶され、この符号化データが撮像された時刻にエンコード遅延時間と計測されたネットワーク遅延時間と計測されたデコード遅延時間とが加算された時刻が算出され、この時刻に符号化データが表示再生される。したがって、ネットワークの遅延やジッタや、エンコードによる遅延やジッタや、デコードによる遅延やジッタが抑えられることとなる。
【００１７】
第５の発明のデコード表示装置は、第４の発明の構成に加え、前記通信処理部は、前記ネットワークから前記エンコード遅延時間、前記デコード遅延時間及び前記ネットワーク遅延時間を設定するデータを受信したとき、受信したエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間を前記エンコード遅延時間、前記デコード遅延時間及び前記ネットワーク遅延時間として使用する構成を有している。
【００１８】
この構成により、受信された符号化データが一時記憶され、この符号化データが撮像された時刻にネットワークを介して設定されたエンコード遅延時間とネットワーク遅延時間とデコード遅延時間とが加算された時刻が算出され、この時刻に符号化データが表示再生される。したがって、ネットワークの遅延やジッタや、エンコードによる遅延やジッタや、デコードによる遅延やジッタが抑えられるとともに、異なるデコード表示装置でのネットワークの経路の違いによる遅延やジッタの違いが吸収されることとなる。
【００１９】
第６の発明の撮像装置は、撮像したデータをエンコードした符号化データに前記符号化データをネットワークに送出する時刻を付加して送信する通信処理部を備える構成を有している。
【００２０】
この構成により、符号化データにこの符号化データがネットワークに送出された時刻が付加されて送出される。したがって、符号化データを受信した側でネットワークに送出された時刻からネットワークの遅延やジッタを制御することができる。
【００２１】
第７の発明の撮像装置は、第６の発明の構成に加え、計測された前記撮像したデータをエンコードするのにかかる時間に基づいてエンコード遅延時間を算出し記憶するエンコード遅延記憶部を備え、前記通信処理部は、前記符号化データに前記エンコード遅延時間と前記符号化データが撮像された時刻とを付加して送信する構成を有している。
【００２２】
この構成により、符号化データにこの符号化データが撮像された時刻とエンコード遅延時間とが付加されて送出される。したがって、符号化データを受信した側で撮像された時刻とエンコード遅延時間とからエンコードによる遅延やジッタを抑えるとともに、ネットワークの遅延やジッタを制御することができる。
【００２３】
第８の発明の画像伝送システムは、第１の発明から第４の発明のいずれかのデコード表示装置と、第６の発明または第７の発明の撮像装置とを備える構成を有している。
【００２４】
この構成により、撮像装置で撮像されたデータがデコード表示装置で一時記憶され、各遅延時間で表示再生時刻が制御され表示再生される。したがって、ネットワークの遅延やジッタや、エンコードによる遅延やジッタや、デコードの遅延やジッタなどを抑えて安定して表示再生させたり、複数のデコード表示装置で１つの撮像装置の画像を表示再生させる場合でも、ネットワークの経路の違いによる遅延やジッタを吸収して同時刻に表示再生させたりすることができる。
【００２５】
第９の発明の画像伝送システムは、第５の発明のデコード表示装置と、第７の発明の撮像装置と、前記ネットワークを介して、前記デコード表示装置が算出した前記デコード遅延時間及び前記ネットワーク遅延時間、前記撮像装置が算出した前記エンコード遅延時間を収集し、収集したエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間に基づいてエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間を算出し、算出したエンコード遅延時間、デコード遅延時間及びネットワーク遅延時間を前記デコード表示装置に設定する再生時刻制御装置とを備える構成を有している。
【００２６】
この構成により、ネットワークに接続されたデコード表示装置及び撮像装置から各遅延時間が収集され、収集された各遅延時間に基づいて算出された各遅延時間がデコード表示装置に設定され、設定された各遅延時間で表示再生時刻が制御され表示再生される。したがって、ネットワークの遅延やジッタや、エンコードによる遅延やジッタや、デコードの遅延やジッタなどを抑えて安定して表示再生させることができるとともに、複数のデコード表示装置で１つの撮像装置の画像を表示再生させる場合でも、ネットワークの経路の違いによる遅延やジッタを吸収して同時刻に表示再生させることができる。
【発明の効果】
【００２７】
本発明によれば、処理データを一時記憶し、遅延時間により処理データの処理時刻を制御することにより、ネットワークでの遅延やジッタやエンコード・デコード時の遅延などの影響を抑えて安定した表示再生を行なうことができ、さらにネットワークの経路が異なっても、同時に表示再生させることができる。
【発明を実施するための最良の形態】
【００２８】
以下、本発明の実施の形態について、図面を参照して説明する。
【００２９】
（第１の実施の形態）
図１は本発明の第１の実施の形態の画像伝送システムを示す概略構成ブロック図である。
【００３０】
図１に示すように、本実施の形態の画像伝送システムは、撮像した画像を伝送する撮像装置１と、撮像装置１から伝送された撮像情報から画像をデコードして表示するデコード表示装置２と、撮像装置１とデコード表示装置２との間を接続するネットワーク３とを備えている。
【００３１】
撮像装置１は、撮像装置１の各部を制御してその機能を実行するＣＰＵ（Central Processing Unit）１１と、撮像する方向やズームなどを制御して画像や音声を撮像する撮像制御部１２と、撮像制御部１２で撮像した画像データをエンコードするエンコード部１３と、ネットワーク３に接続されネットワーク３の通信プロトコルを制御してデータの送受信を行なう通信インターフェース部１４と、エンコード部１３がエンコードした符号化画像データを含む撮像情報を通信インターフェース部１４によりデコード表示装置２に伝送する通信処理部１５とを備えている。
【００３２】
デコード表示装置２は、デコード表示装置２の各部を制御してその機能を実行するＣＰＵ２１と、ネットワーク３に接続されネットワーク３の通信プロトコルを制御してデータの送受信を行なう通信インターフェース部２２と、通信インターフェース部２２で受信した撮像情報から符号化画像データ（処理データ）の取り出しなどの処理を行なう通信処理部２３と、通信処理部２３で取り出した符号化画像データを記憶しておくデータ記憶部２４と、通信処理部２３から入力される符号化画像データをデコードするデコーダ２５と、デコーダ２５でデコードした画像データを表示再生する表示部２６と、画像の表示再生時刻を制御する表示再生時刻制御部２７と、ユーザからの指示や操作入力を受け付けるユーザインターフェース部２８とを備えている。
【００３３】
このような撮像装置１及びデコード表示装置２を備えた画像伝送システムは、図２に示すように、ネットワーク３上に複数の撮像装置１ａ〜１ｃ及びデコード表示装置２ａ〜２ｃが接続されており、デコード表示装置２ａ〜２ｃから撮像装置１ａ〜１ｃのうち表示したい撮像装置を選択して、当該撮像装置からの画像を表示再生することができるようになっている。
【００３４】
なお、図２において、ネットワーク３には、ブリッジ３１ａ〜３１ｃにより支線３２ａ〜３２ｃが接続されており、これら支線３２ａ〜３２ｃ上に撮像装置１ａ〜１ｃ及びデコード表示装置２ａ〜２ｃが接続されている。
【００３５】
このような画像転送システムでは、同じ撮像装置の画像を表示再生する場合でも、デコード表示装置２と撮像装置１との間のネットワークの経路により遅延やジッタが異なる。
【００３６】
このため、本実施の形態では、撮像装置１ａ〜１ｃとデコード表示装置２ａ〜２ｃのそれぞれの間の遅延を計測器で測定し、その最悪値をそれぞれのデコード表示装置２ａ〜２ｃでユーザインターフェース部２８によりＣＰＵ２１にネットワーク遅延時間として設定し、ＣＰＵ２１が通信処理部２３を通じて表示再生時刻制御部２７にネットワーク遅延時間を設定しておき、表示再生するときに設定されたネットワーク遅延時間分だけ時間を取って表示再生を開始して、表示再生時刻を揃えるようになっている。
【００３７】
例えば、デコード表示装置２ｂが撮像装置１ａを選択した場合、撮像装置１ａの撮像制御部１２で撮像された画像は、予め設定された時間間隔で画像データにまとめられ、撮像時刻を付加されてエンコード部１３に出力され、エンコード部１３でエンコードされて符号化画像データにされる。
【００３８】
通信処理部１５は、エンコード部１３でエンコードされた符号化画像データに画像データに付加されていた撮像時刻や現在の時刻を設定した送出時刻や送出時刻に予め設定された標準のネットワークの遅延時間を加えて算出した再生時刻などを付加して撮像情報として通信インターフェース部１４によりネットワーク３を介してデコード表示装置２ｂに送信する。
【００３９】
デコード表示装置２ｂの通信インターフェース部２２は、データを受信すると、受信したデータを通信処理部２３に渡す。
【００４０】
通信処理部２３は、通信インターフェース部２２が受信したデータから撮像情報を取り出し、取り出した撮像情報からさらに符号化画像データを取り出してデータ記憶部２４に記憶し、送信時刻を取り出し、表示再生時刻制御部２７からネットワーク遅延時間を読み出し、送信時刻にネットワーク遅延時間を加算して再生開始時刻を求め、再生開始時刻になったら、データ記憶部２４から符号化画像データを読み出し、デコーダ２５に出力する。
【００４１】
デコーダ２５は、符号化画像データを入力されると、当該符号化画像データをデコードして画像データにし、当該画像データを表示部２６に出力して表示させる。
【００４２】
以上のように、本実施の形態によれば、撮像装置１から伝送される符号化画像データをデータ記憶部２４に一時記憶し、その表示再生時刻を表示再生時刻制御部２７に設定されたネットワーク遅延時間に従って制御しているので、ネットワークの遅延やジッタを抑え、ネットワークの経路の違いによる遅延やジッタの違いを吸収して、複数のデコード表示装置２で同時刻に安定して再生することができる。
【００４３】
なお、本実施の形態においては、画像データのみを伝送する場合を示したが、音声データも一緒に伝送してもかまわない。
【００４４】
また、本実施の形態においては、デコード表示装置２側でネットワーク遅延時間をもって表示再生時刻を調整したが、撮像装置１側にネットワーク遅延時間を持たせ、このネットワーク遅延時間に基づいて再生開始時刻を算出し、算出した再生開始時刻を再生時刻として撮像情報に設定して送信し、デコード表示装置２側で撮像情報に設定されている再生時刻に合わせて再生するようにしてもよい。
【００４５】
また、本実施の形態においては、撮像装置１から複数のデコード表示装置２に画像データや音声データなどを送信する場合について示したが、デコード表示装置２から複数の撮像装置１に撮像装置１を制御するデータを送信する場合も同様にして複数の撮像装置１の制御を同時刻に行なわせることができる。
【００４６】
（第２の実施の形態）
図３は本発明の第２の実施の形態の画像伝送システムを示す概略ブロック図である。なお、本実施の形態は、上述の実施の形態と略同様に構成されているので、同様な構成には同一の符号を付して特徴部分のみ説明する。
【００４７】
図３に示すように、本実施の形態においては、撮像装置４に、画像によって変化するエンコード部４３でのエンコードにかかる時間を計測するエンコード遅延計測部４１と、エンコード遅延計測部４１で計測したエンコードにかかる時間を記憶し、その最悪値を出力するエンコード遅延記憶部４２とを備えている。
【００４８】
このような撮像装置４において、撮像制御部１２で撮像された画像は、上述の実施の形態と同様に、撮像時刻を付加されて画像データとしてエンコード部４３に出力される。
【００４９】
エンコード部４３は、画像データのエンコードの開始と終了をエンコード遅延計測部４１に通知する。
【００５０】
エンコード遅延計測部４１は、入力されたエンコードの開始と終了の通知に基づいてエンコードにかかる時間を計測し、その時間をエンコード遅延記憶部４２に通知する。
【００５１】
エンコード遅延記憶部４２は、エンコード遅延計測部４１から入力された時間を記憶しているエンコード遅延時間と比較し、大きい方をエンコード遅延時間として記憶しておく。
【００５２】
エンコード部４３でエンコードされた符号化画像データは、通信処理部４４に出力される。
【００５３】
通信処理部４４は、エンコード部４３から符号化画像データを入力されると、エンコード遅延記憶部４２から読み出したエンコード遅延時間や符号化画像データに画像データに付加されていた撮像時刻や現在の時刻を設定した送出時刻や送出時刻に予め設定された標準のネットワークの遅延時間を加えて算出した再生時刻などを付加して撮像情報として通信インターフェース部１４によりネットワーク３を介してデコード表示装置５に送信する。
【００５４】
デコード表示装置５の通信インターフェース部２２は、データを受信すると、受信したデータを通信処理部５１に渡す。
【００５５】
通信処理部５１は、通信インターフェース部２２が受信したデータから撮像情報を取り出し、取り出した撮像情報からさらに符号化画像データを取り出してデータ記憶部２４に記憶し、撮像時刻とエンコード遅延時間を取り出し、表示再生時刻制御部２７からネットワーク遅延時間を読み出し、撮像時刻にエンコード遅延時間とネットワーク遅延時間を加算して再生開始時刻を求め、再生開始時刻になったら、データ記憶部２４から符号化画像データを読み出し、デコーダ２５に出力する。
【００５６】
デコーダ２５は、符号化画像データを入力されると、当該符号化画像データをデコードして画像データにし、当該画像データを表示部２６に出力して表示させる。
【００５７】
以上のように、本実施の形態によれば、撮像装置４から伝送される符号化画像データをデータ記憶部２４に一時記憶し、その再生時刻を撮像装置で計測されたエンコード遅延時間と表示再生時刻制御部２７に設定されたネットワーク遅延時間に従って制御しているので、ネットワークの遅延やジッタを抑え、ネットワークの経路の違いによる遅延やジッタの違いや、撮像装置４でのエンコードの遅延やジッタを吸収して、複数のデコード表示装置５で同時刻に安定して再生することができる。
【００５８】
なお、本実施の形態においては、画像データのみを伝送する場合を示したが、音声データも一緒に伝送してもかまわない。
【００５９】
また、本実施の形態においては、エンコード遅延記憶部４２でエンコード部４３でエンコードにかかった時間の最も大きい値（最悪値）をエンコード遅延時間として記憶したが、エンコード部４３でエンコードにかかった時間の平均値をエンコード遅延時間として記憶してもよい。
【００６０】
また、本実施の形態においては、デコード表示装置５側でネットワーク遅延時間をもって再生時刻を調整したが、撮像装置４側にネットワーク遅延時間を持たせ、このネットワーク遅延時間とエンコード遅延時間とに基づいて再生開始時刻を算出し、算出した再生開始時刻を再生時刻として撮像情報に設定して送信し、デコード表示装置５側で撮像情報に設定されている再生時刻に合わせて再生するようにしてもよい。
【００６１】
（第３の実施の形態）
図４は本発明の第３の実施の形態の画像伝送システムを示す概略ブロック図である。なお、本実施の形態は、上述の実施の形態と略同様に構成されているので、同様な構成には同一の符号を付して特徴部分のみ説明する。
【００６２】
図４に示すように、本実施の形態においては、デコード表示装置６に、画像によって変化するデコーダ６３でのデコードにかかる時間を計測するデコード遅延計測部６１と、デコード遅延計測部６１で計測したデコードにかかる時間を記憶し、その最悪値を出力するデコード遅延記憶部６２とを備えている。
【００６３】
このようなデコード表示装置６において、デコーダ６３は、符号化画像データのデコードの開始と終了をデコード遅延計測部６１に通知する。
【００６４】
デコード遅延計測部６１は、入力されたデコードの開始と終了の通知に基づいてデコードにかかる時間を計測し、その時間をデコード遅延記憶部６２に通知する。
【００６５】
デコード遅延記憶部６２は、デコード遅延計測部６１から入力された時間を記憶しているデコード遅延時間と比較し、大きい方をデコード遅延時間として記憶しておく。
【００６６】
このようにして、デコード遅延記憶部６２にはデコードにかかった時間の最悪値がデコード遅延時間として記憶される。
【００６７】
そして、上述の実施の形態と同様に、撮像装置４の撮像制御部１２で撮像された画像が、エンコード部４３でエンコードされ、通信処理部４４でエンコード遅延時間などを付加され、撮像情報として通信インターフェース部１４によりデコード表示装置６に送信される。
【００６８】
デコード表示装置６の通信インターフェース部２２は、データを受信すると、受信したデータを通信処理部６４に渡す。
【００６９】
通信処理部６４は、通信インターフェース部２２が受信したデータから撮像情報を取り出し、取り出した撮像情報からさらに符号化画像データを取り出してデータ記憶部２４に記憶し、撮像時刻とエンコード遅延時間を取り出し、表示再生時刻制御部２７からネットワーク遅延時間を読み出し、デコード遅延記憶部６２からデコード遅延時間を読み出し、撮像時刻にエンコード遅延時間とネットワーク遅延時間とデコード遅延時間とを加算して再生開始時刻を求め、データ記憶部２４から符号化画像データを読み出し、読み出した符号化画像データと算出した再生開始時刻とをデコーダ６３に出力する。
【００７０】
デコーダ６３は、符号化画像データと再生開始時刻を入力されると、当該符号化画像データをデコードして画像データにし、再生開始時刻になったらデコードした画像データを表示部２６に出力して表示させる。このデコードの開始と終了は、当然のことながら、デコード遅延計測部６１に通知され、デコード遅延時間の計測の対象となる。
【００７１】
以上のように、本実施の形態によれば、撮像装置４から伝送される符号化画像データをデータ記憶部２４に一時記憶し、その再生時刻を撮像装置４で計測されたエンコード遅延時間と表示再生時刻制御部２７に設定されたネットワーク遅延時間とデコード遅延記憶部６２に記憶されたデコード遅延時間に従って制御しているので、ネットワークの遅延やジッタを抑え、ネットワークの経路の違いによる遅延やジッタの違いや、撮像装置４でのエンコードの遅延やジッタや、デコード表示装置６でのデコードの遅延やジッタを吸収して、複数のデコード表示装置６で同時刻に安定して再生することができる。
【００７２】
なお、本実施の形態においては、画像データのみを伝送する場合を示したが、音声データも一緒に伝送してもかまわない。
【００７３】
また、本実施の形態においては、デコード遅延記憶部６２でデコーダ６３でデコードにかかった時間の最も大きい値（最悪値）をデコード遅延時間として記憶したが、デコーダ６３でデコードにかかった時間の平均値をデコード遅延時間として記憶してもよい。
【００７４】
また、本実施の形態においては、デコード表示装置６側でネットワーク遅延時間をもって再生時刻を調整したが、撮像装置４側にネットワーク遅延時間を持たせ、このネットワーク遅延時間とエンコード遅延時間とに基づいて再生開始時刻を算出し、算出した再生開始時刻を再生時刻として撮像情報に設定して送信し、デコード表示装置６側で撮像情報に設定されている再生時刻にデコード遅延時間を加えて再生開始時刻を求め、この再生開始時刻に合わせて再生するようにしてもよい。
【００７５】
（第４の実施の形態）
図５は本発明の第４の実施の形態の画像伝送システムを示す概略ブロック図である。なお、本実施の形態は、上述の実施の形態と略同様に構成されているので、同様な構成には同一の符号を付して特徴部分のみ説明する。
【００７６】
図５に示すように、本実施の形態においては、デコード表示装置７に、受信した撮像情報からネットワークの遅延時間を計測するジッタ・遅延計測部７１を備えている。
【００７７】
ジッタ・遅延計測部７１は、図６に示すように、撮像情報から撮像時刻を抽出する撮像時刻抽出部７１１と、撮像情報から送出時刻を抽出する送出時刻抽出部７１２と、撮像時刻抽出部７１１が抽出した撮像時刻から撮像装置４に時刻を同期させる時刻同期部７１３と、時刻同期部７１３で作成した時刻と送出時刻抽出部７１２の抽出した送出時刻とからネットワークの遅延時間を算出するジッタ・遅延算出部７１４とを備えている。
【００７８】
このようなデコード表示装置７において、ジッタ・遅延計測部７１は、通信インターフェース部２２が受信したデータから取り出した撮像情報を通信処理部７２から入力されると、撮像時刻抽出部７１１は、撮像情報から撮像時刻を抽出して時刻同期部７１３に出力する。
【００７９】
時刻同期部７１３は、入力された撮像時刻に時刻を同期させ、撮像装置４の時刻に同期した時刻をジッタ・遅延算出部７１４に出力する。
【００８０】
送出時刻抽出部７１２は、入力された撮像情報から送出時刻を抽出してジッタ・遅延算出部７１４に出力する。
【００８１】
ジッタ・遅延算出部７１４は、送出時刻抽出部７１２で抽出された送出時刻と時刻同期部７１３で撮像装置４と同期された現在時刻とから、撮像情報が撮像装置４から送出されてからデコード表示装置７に到着するまでにかかった時間を算出し、算出した時間を通信処理部７２を介して表示再生時刻制御部７３に入力する。
【００８２】
表示再生時刻制御部７３は、通信処理部７２から時間を入力されると、記憶しているネットワーク遅延時間と入力された時間とを比較し、値の大きい方をネットワーク遅延時間として記憶しておく。
【００８３】
そして、上述の実施の形態と同様に、撮像装置４の撮像制御部１２で撮像された画像が、エンコード部４３でエンコードされ、通信処理部４４でエンコード遅延時間などを付加され、撮像情報として通信インターフェース部１４によりデコード表示装置７に送信される。
【００８４】
デコード表示装置７の通信インターフェース部２２は、データを受信すると、受信したデータを通信処理部７２に渡す。
【００８５】
通信処理部７２は、通信インターフェース部２２が受信したデータから撮像情報を取り出し、取り出した撮像情報をジッタ・遅延計測部７１に出力するとともに、取り出した撮像情報からさらに符号化画像データを取り出してデータ記憶部２４に記憶し、撮像時刻とエンコード遅延時間を取り出し、表示再生時刻制御部７３からネットワーク遅延時間を読み出し、デコード遅延記憶部６２からデコード遅延時間を読み出し、撮像時刻にエンコード遅延時間とネットワーク遅延時間とデコード遅延時間とを加算して再生開始時刻を求め、データ記憶部２４から符号化画像データを読み出し、読み出した符号化画像データと算出した再生開始時刻とをデコーダ６３に出力する。
【００８６】
デコーダ６３は、符号化画像データと再生開始時刻を入力されると、当該符号化画像データをデコードして画像データにし、再生開始時刻になったらデコードした画像データを表示部２６に出力して表示させる。
【００８７】
以上のように、本実施の形態によれば、撮像装置４から伝送される符号化画像データをデータ記憶部２４に一時記憶し、その再生時刻を撮像装置４で計測されたエンコード遅延時間とジッタ・遅延計測部７１で計測されたネットワーク遅延時間とデコード遅延記憶部６２に記憶されたデコード遅延時間に従って制御しているので、ネットワークの遅延やジッタや、撮像装置４でのエンコードの遅延やジッタや、デコード表示装置７でのデコードの遅延やジッタを吸収して、安定して再生することができる。
【００８８】
本実施の形態の他の態様としては、図７に示すように、ジッタ・遅延計測部７４にＧＰＳ（Global Positioning System）から時刻を取得するＧＰＳ部７４１を設け、時刻同期部７４２は、このＧＰＳ部７４１が出力する時刻に同期させた時刻を出力するようにする。
【００８９】
この場合、撮像装置４側でもＧＰＳにより時刻を同期させていることが必要であることはいうまでもない。
【００９０】
なお、本実施の形態においては、画像データのみを伝送する場合を示したが、音声データも一緒に伝送してもかまわない。
【００９１】
また、本実施の形態においては、ジッタ・遅延計測部７１、７４でネットワークの伝送にかかった時間の最も大きい値（最悪値）をネットワーク遅延時間として記憶したが、ネットワークの伝送にかかった時間の平均値をネットワーク遅延時間として記憶してもよい。
【００９２】
（第５の実施の形態）
図８は本発明の第５の実施の形態の画像伝送システムを示す概略ブロック図である。なお、本実施の形態は、上述の実施の形態と略同様に構成されているので、同様な構成には同一の符号を付して特徴部分のみ説明する。
【００９３】
図８に示すように、本実施の形態においては、ネットワーク３上にある、撮像装置４及びデコード表示装置９から、それぞれの装置で計測したエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間を収集し、収集したそれぞれの遅延時間の最悪値を算出し、算出した各遅延時間をデコード表示装置９に通知する再生時刻制御装置８を備えている。
【００９４】
このような画像伝送システムにおいて、再生時刻制御装置８は、予め設定された周期毎に、ネットワーク３に接続されている予め設定された複数の撮像装置４及びデコード表示装置９から計測したエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間を収集する。
【００９５】
再生時刻制御装置８は、各遅延時間毎に、収集した遅延時間の中から一番時間の長い遅延時間を算出し、算出したエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間をネットワーク３を介して全てのデコード表示装置９に送信する。
【００９６】
デコード表示装置９の通信処理部９１は、通信インターフェース部２２から再生時刻制御装置８からの遅延時間を受けると、エンコード遅延時間、ネットワーク遅延時間、デコード遅延時間それぞれを表示再生時刻制御部９２に設定する。
【００９７】
表示再生時刻制御部９２は、通信処理部９１からエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間を入力されると、それぞれの遅延時間を記憶しておく。
【００９８】
そして、上述の実施の形態と同様に、撮像装置４の撮像制御部１２で撮像された画像が、エンコード部４３でエンコードされ、通信処理部４４でエンコード遅延時間などを付加され、撮像情報として通信インターフェース部１４によりデコード表示装置９に送信される。
【００９９】
デコード表示装置９の通信インターフェース部２２は、データを受信すると、受信したデータを通信処理部９１に渡す。
【０１００】
通信処理部９１は、通信インターフェース部２２が受信したデータから撮像情報を取り出し、取り出した撮像情報をジッタ・遅延計測部７１に出力するとともに、取り出した撮像情報からさらに符号化画像データを取り出してデータ記憶部２４に記憶し、撮像時刻を取り出し、表示再生時刻制御部９２からエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間を読み出し、撮像時刻にエンコード遅延時間とネットワーク遅延時間とデコード遅延時間とを加算して再生開始時刻を求め、データ記憶部２４から符号化画像データを読み出し、読み出した符号化画像データと算出した再生開始時刻とをデコーダ６３に出力する。
【０１０１】
デコーダ６３は、符号化画像データと再生開始時刻を入力されると、当該符号化画像データをデコードして画像データにし、再生開始時刻になったらデコードした画像データを表示部２６に出力して表示させる。
【０１０２】
以上のように、本実施の形態によれば、撮像装置４から伝送される符号化画像データをデータ記憶部２４に一時記憶し、その再生時刻を撮像装置４及びデコード表示装置９で計測されたエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間のそれぞれの最悪値に従って制御しているので、ネットワークの遅延やジッタを抑え、ネットワークの経路の違いによる遅延やジッタの違いや、撮像装置４でのエンコードの遅延やジッタや、デコード表示装置９でのデコードの遅延やジッタを吸収して、複数のデコード表示装置９で同時刻に安定して再生することができる。
【０１０３】
なお、本実施の形態においては、画像データのみを伝送する場合を示したが、音声データも一緒に伝送してもかまわない。
【０１０４】
また、本実施の形態においては、再生時刻制御装置８で各撮像装置４及びデコード表示装置９から収集したエンコード遅延時間、ネットワーク遅延時間、デコード遅延時間のうち、最も大きい値（最悪値）をそれぞれの遅延時間としてデコード表示装置９に送信したが、それぞれの遅延時間の平均値をそれぞれの遅延時間として送信してもよい。
【０１０５】
また、本実施の形態においては、撮像装置４から複数のデコード表示装置９に画像データや音声データなどを送信する場合について示したが、デコード表示装置９から複数の撮像装置４に撮像装置４を制御するデータを送信する場合も同様にして複数の撮像装置４の制御を同時刻に行なわせることができる。
【産業上の利用可能性】
【０１０６】
以上のように、本発明にかかるデコード表示装置、撮像装置及びそれらを備えた画像伝送システムは、ネットワークでの遅延やジッタやエンコード・デコード時の遅延などの影響を抑えて安定した表示再生を行なうことができ、さらにネットワークの経路が異なっても、同時に表示再生させることができるという効果を有し、ネットワークを介して接続された撮像装置及びデコード表示装置等として有用である。
【図面の簡単な説明】
【０１０７】
【図１】本発明の第１の実施の形態の画像伝送システムを示すブロック図
【図２】本発明の第１の実施の形態の画像伝送システムを示すシステム構成図
【図３】本発明の第２の実施の形態の画像伝送システムを示すブロック図
【図４】本発明の第３の実施の形態の画像伝送システムを示すブロック図
【図５】本発明の第４の実施の形態の画像伝送システムを示すブロック図
【図６】本発明の第４の実施の形態の画像伝送システムのジッタ・遅延計測部を示すブロック図
【図７】本発明の第４の実施の形態の他の態様の画像伝送システムのジッタ・遅延計測部を示すブロック図
【図８】本発明の第５の実施の形態の画像伝送システムを示すブロック図
【符号の説明】
【０１０８】
１、１ａ〜１ｃ  撮像装置
１１  ＣＰＵ（Central Processing Unit）
１２  撮像制御部
１３  エンコード部
１４  通信インターフェース部
１５  通信処理部
２、２ａ〜２ｃ  デコード表示装置
２１  ＣＰＵ
２２  通信インターフェース部
２３  通信処理部
２４  データ記憶部
２５  デコーダ
２６  表示部
２７  表示再生時刻制御部
２８  ユーザインターフェース部
３  ネットワーク
３１ａ〜３１ｃ  ブリッジ
３２ａ〜３２ｃ  支線
４  撮像装置
４１  エンコード遅延計測部
４２  エンコード遅延記憶部
４３  エンコード部
４４  通信処理部
５  デコード表示装置
５１  通信処理部
６  デコード表示装置
６１  デコード遅延計測部
６２  デコード遅延記憶部
６３  デコーダ
６４  通信処理部
７  デコード表示装置
７１  ジッタ・遅延計測部
７１１  撮像時刻抽出部
７１２  送出時刻抽出部
７１３  時刻同期部
７１４  ジッタ・遅延算出部
７２  通信処理部
７３  表示再生時刻制御部
７４  ジッタ・遅延計測部
７４１  ＧＰＳ部
７４２  時刻同期部
８  再生時刻制御装置
９  デコード表示装置
９１  通信処理部
９２  表示再生時刻制御部
【図１】
2005057590.tif 000003
【図２】
2005057590.tif 000004
【図３】
2005057590.tif 000005
【図４】
2005057590.tif 000006
【図５】
2005057590.tif 000007
【図６】
2005057590.tif 000008
【図７】
2005057590.tif 000009
【図８】
2005057590.tif 000010