(57)【特許請求の範囲】
【請求項１】
カメラ端末と受信端末とがネットワークを介して接続され、該カメラ端末で撮影映像から生成したビットストリームを該受信端末に配信する映像配信システムであって、
該カメラ端末は、撮像した映像信号をエンコード処理して、該カメラ端末の撮像範囲の一部の範囲であって該撮像範囲内を順次移動する抽出範囲の映像が抽出されて１画面の大きさの映像に拡大された狭帯域の映像信号の高圧縮率のエンコードによる低ビットレートの第１のビットストリームと該撮像範囲の該映像信号の低圧縮率のエンコードによる高ビットレートの第２のビットストリームとを生成し、該受信端末に、通常、該第１のビットストリームを配信するとともに、該受信端末からの視聴者の操作により生成された再送要求に応じて、該再送要求があった時点よりも所定時間前の映像からの該第２のビットストリームを配信し、
該受信端末は、
該ネットワークから該第１のビットストリームもしくは該第２のビットストリームを受け取り、デコードを行なって映像信号を出力するデコーダと、
該第１のビットストリームの受信中に、視聴者の操作により、該ネットワークを通じて該カメラ端末に該第２のビットストリームの該再送要求をするシステムコントローラと、
該デコーダがデコードした該映像信号を表示するディスプレイと
を備えたことを特徴とする映像配信システム。
【請求項２】
請求項１において、
前記カメラ端末は、前記第１のビットストリームと前記第２のビットストリームのエンコード処理を時分割で行なうプロセッサを備えたことを特徴とする映像配信システム。
【請求項３】
請求項１において、
前記ネットワークに複数の前記カメラ端末が接続され、視聴者が、前記受信端末により、複数の前記カメラ端末からの映像を視聴可能としたことを特徴とする映像配信システム。
【請求項４】
請求項１において、
前記第１，第２のビットストリームは、ＭＰＥＧに準拠した方式でエンコードされていることを特徴とする映像配信システム。
【請求項５】
請求項１において、
前記第２のビットストリームは、可逆のデータ圧縮が行なわれていることを特徴とする映像配信システム。
【請求項６】
請求項１において、
前記カメラ端末は、特定の画像もしくは音声を前記カメラ端末のカメラの出力から抽出する画像／音声認識回路と記録手段とを備え、
視聴者が予め前記画像／音声認識回路に設定した特定の画像もしくは音声が現われたとき、該記録手段が前記第２のビットストリームの記録媒体への書き込みを行ない、前記受信端末からの前記再送要求により、該記録手段が該記録媒体から前記第２のビットストリームを再生して前記受信端末に配信することを特徴とする映像配信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影した映像情報をネットワークに配信するカメラ機器及びネットワークから得られる映像情報を表示する受信機からなる映像配信システムに関する。
【背景技術】
【０００２】
従来、監視カメラシステムなどのように、複数台のカメラから得られた映像情報をネットワーク経由で受け取り、受信機の表示画面に表示するシステムが知られている。そして、映像情報の圧縮技術の進展やネットワークインフラの高速化に伴い、かかるシステムのカメラ部を放送局とし、画面表示部を各家庭の端末とした映像配信システムの構築も可能になってきている。
【０００３】
図１５はかかる映像配信システムの一従来例を示すブロック構成図であって、１０はカメラ端末、１１はカメラ、１２はエンコーダ、２０は受信端末、２１はデコーダ、２２はディスプレイ、２３はシステムコントローラ、２４は切替スイッチ、２５は記録媒体（記録再生装置）、３０はネットワークである。
【０００４】
同図において、この従来の映像配信システムは、カメラ端末１０と受信端末２０とがネットワーク３０を介して接続されている。カメラ端末１０はカメラ１１とエンコーダ１２とを有しており、受信端末２０はデコーダ２１とディスプレイ２２とシステムコントローラ２３と切替スイッチ２４と記録媒体２５とを有している。
【０００５】
次に、この従来例の動作について説明する。
【０００６】
カメラ端末１０においては、カメラ１１が撮影を行なって映像信号を生成する。この映像信号はエンコーダ１２で情報圧縮処理され、ビットストリームが生成され、このビットストリームがネットワーク３０を介して受信端末２０に供給される。このように、カメラ端末１０はビットストリームを配信するための最小単位となっており、１以上のカメラ端末１０がネットワーク３０に接続されて夫々からビットストリームが配信されている。
【０００７】
受信端末２０では、システムコントローラ２３によって各部の制御が行なわれる。この制御のもとに、ネットワーク３０を介して送信される所定のカメラ端末１０からのビットストリームが選択され、デコーダ２１で映像信号にデコードされる。このデコードされた映像信号は、記録媒体２５に記録されて保存されるとともに、システムコントローラ２３によってａ接点側に閉じている切替スイッチ２４を介してディスプレイ２２に供給され、そこで映像表示が行なわれる。
【０００８】
受信端末２０の視聴者が配信された映像を再度視聴したい場合には、視聴者がそのための所定の操作をすることにより、システムコントローラ２３は、切替スイッチ２４をｂ接点側に切り替えるとともに、記録媒体２５を動作させて映像信号を読み出させ、切替スイッチ２４を介してディスプレイ２２に供給させる。これにより、記録媒体２５に蓄えられた過去の映像信号をディスプレイ２２で再生できるようにする。
【発明の開示】
【発明が解決しようとする課題】
【０００９】
上記の従来例において、視聴者が巻き戻し再生を必要とするのは、ディスプレイ２２で映し出された映像に注意を喚起されたためであり、注意を喚起された部分の映像を詳細に見ることを望んでいるからである。このためには、カメラ端末１０から詳細な映像を配信することが必要である。しかし、このためには、エンコーダ１２側で圧縮率を下げてビット量を増やす必要がある。
【００１０】
ところで、監視カメラシステムを代表例とした映像配信システムでは、定常的に映像を配信することを必要としており、しかも、ネットワーク３０には、多数のカメラ端末１０が接続されて、それらからの映像信号のビットストリームが常に伝送されている。このため、各カメラ端末１０が出力するビットストリームのビット量を増やすと、ネットワーク３０で伝送されるビット量がこれに接続されるカメラ端末１０の台数に応じて増加する。
【００１１】
一方、ネットワーク３０にも、伝送可能な容量もあり、伝送可能なビット量にも制限がある。このため、各カメラ端末１０から低圧縮率で圧縮処理された詳細な(高画質の)映像ビットストリームをネットワーク３０を介して常時伝送しようとすると、おのずからこのネットワーク３０に接続されるカメラ端末１０の台数が制限されるし、また、数多くのカメラ端末１０を同じネットワーク３０に接続しようとすると、夫々のカメラ端末１０での映像信号の圧縮率を高くせざるを得ず、注意を監視する部分を高画質の映像で再度視聴するということもできない。
【００１２】
本発明はかかる問題に鑑みてなされたものであって、その目的は、ネットワークでの伝送ビット量を定常的に増加させることなく、再度視聴する同じ部分の映像を高画質で得ることができるようにした映像配信システムを提供することにある。
【課題を解決するための手段】
【００１３】
上記目的を達成するため、本発明は、カメラ端末と受信端末とがネットワークを介して接続され、カメラ端末で撮影映像から生成したビットストリームを受信端末に配信する映像配信システムであって、カメラ端末は、撮像した映像信号をエンコード処理して、カメラ端末の撮像範囲の一部の範囲であって該撮像範囲内を順次移動する抽出範囲の映像が抽出されて１画面の大きさの映像に拡大された狭帯域の映像信号の高圧縮率のエンコードによる低ビットレートの第１のビットストリームと撮像範囲の映像信号の低圧縮率のエンコードによる高ビットレートの第２のビットストリームとを生成し、受信端末に、通常、第１のビットストリームを配信するとともに、受信端末からの視聴者の操作により生成された再送要求に応じて、再送要求があった時点よりも所定時間前の映像からの第２のビットストリームを配信し、受信端末は、ネットワークから第１のビットストリームもしくは第２のビットストリームを受け取り、デコードを行なって映像信号を出力するデコーダと、第１のビットストリームの受信中に、視聴者の操作により、ネットワークを通じてカメラ端末に第２のビットストリームの再送要求をするシステムコントローラと、デコーダがデコードした映像信号を表示するディスプレイとを備えた構成とするものである。
【００１４】
また、本発明は、カメラ端末が、第１のビットストリームと第２のビットストリームのエンコード処理を時分割で行なうプロセッサを備えた構成とする。
【００１５】
さらに、本発明は、ネットワークに複数のカメラ端末が接続され、視聴者が、受信端末により、複数のカメラ端末からの映像を視聴可能とした構成とする。
【００１６】
さらに、本発明は、第１，第２のビットストリームが、ＭＰＥＧに準拠した方式でエンコードされているものである。
【００１７】
さらに、本発明は、第２のビットストリームが、可逆のデータ圧縮が行なわれているものである。
【００１８】
さらに、本発明は、カメラ端末が、特定の画像もしくは音声をカメラ端末のカメラの出力から抽出する画像／音声認識回路と記録手段とを備え、視聴者が予め画像／音声認識回路に設定した特定の画像もしくは音声が現われたとき、記録手段が第２のビットストリームの記録媒体への書き込みを行ない、受信端末からの再送要求により、記録手段が記録媒体から第２のビットストリームを再生して受信端末に配信するものである。
【発明の効果】
【００２４】
本発明による映像配信システムによると、カメラ端末と受信端末とがネットワークを介して接続され、該カメラ端末で撮影映像から生成したビットストリームを該受信端末に配信する映像配信システムであって、該カメラ端末は、撮像した映像信号をエンコード処理して、第１のビットストリームと該第１のビットストリームよりも高画質の映像をなす第２のビットストリームとを生成し、該受信端末に、通常、該第１のビットストリームを配信するとともに、該受信端末からの再送要求に応じて、該再送要求があった時点よりも所定時間前の映像からの該第２のビットストリームを配信するものであるから、通常時には、必要最低限の画質で受信してビット量を抑制できるし、再送要求したときには、ビット量は多くなるが、必要な時点まで遡って、巻き戻し再生のようにして、高画質の映像が表示され、鮮明な画像が得られることになり、再送するときだけビット量が多くなるだけで、定常的に得るビット量を増やすことなく、鮮明な映像を必要な部分から得ることができる。
【００２８】
本発明による映像配信システムによれば、カメラ端末は、ネットワークを介して映像情報を配信するカメラ端末であって、撮影した被写体の映像信号を出力するカメラと、該映像信号をエンコード処理して第１のビットストリームを生成する第１のエンコーダと、該映像信号をエンコード処理して該第１のビットストリームよりも高画質の映像の第２のビットストリームを生成する第２のエンコーダと、該第２のビットストリームを記録し、再生する記録媒体とを備え、該第１，第２のビットストリームを配信する映像情報とするものであるから、配信先からの要求に応じて、いずれの画質の映像も配信することができるし、定常的にネットワークから得るビット量を増加させることがない。
【００３０】
さらに、本発明による映像配信システムによると、カメラ端末は、撮影した被写体の映像信号を出力するカメラと、この映像信号から１フレーム毎に設定される抽出範囲内の映像部分を抽出し、抽出した該映像部分を１フレーム全体に拡張する信号処理部と、信号処理部の出力映像信号をエンコード処理して第１のビットストリームを生成する第１のエンコーダと、カメラから出力されるこの映像信号をエンコードし、第１のビットストリームムよりも高画質の映像の第２のビットストリームを生成する第２のエンコーダと、第２のビットストリームを記録し、再生する記録媒体とを備え、第１，第２のビットストリームを配信する映像情報とするものであるから、伝送するビット量を削減できて、必要なときに撮影映像を高画質で見ることができる。
【００３１】
さらに、本発明による映像配信システムによると、カメラ端末は、撮影した被写体の映像信号を出力するカメラと、この映像信号をエンコード処理して第１のビットストリームを生成する第１のエンコーダと、この映像信号をエンコード処理して該第１のビットストリームよりも高画質の映像の第２のビットストリームを生成する第２のエンコーダと、カメラから出力される映像信号に基づく画像認識とカメラに設けられたマイクロホンから出力される音声信号に基づく音声認識との少なくともいずれかを行なう画像／音声認識回路と、この画像／音声認識回路の認識結果に基づいて、第２のビットストリームを記録し、再生する記録媒体とを備え、第１，第２のビットストリームを配信する映像情報とするものであるから、必要なときにのみ記録媒体での記録が行なわれるので、記録媒体の記録容量を低減できるし、あるいはまた、記録媒体での長時間の記録が可能となる。
【００３３】
さらに、本発明による映像配信システムによれば、受信端末は、ネットワークを介して配信された映像のビットストリームを受信する受信端末であって、受信したビットストリームを映像信号にデコードするデコーダと、デコードされた映像信号が供給されて映像を表示するディスプレイと、映像の配信元にディスプレイに表示された映像について、高画質映像として再送を要求するためのシステムコントローラとを備えたものであるから、必要なときに、高画質の映像の再送を受けることができ、同じ映像を再度高画質で見ることができる。
【発明を実施するための最良の形態】
【００３４】
以下、本発明の実施形態を図面を用いて説明する。
図１は本発明による映像配信システムの第１の実施形態を示すブロック図であって、１０はカメラ端末、１１はカメラ、１２ａ，１２ｂはエンコーダ、１３は記録媒体（あるいは記録再生装置：但し、以下では、記録媒体として説明するが、記録再生装置であってもよい）、１４は切替スイッチ、２０は受信端末、２１はデコーダ、２２はディスプレイ、２３はシステムコントローラ、３０はネットワークである。
【００３５】
同図において、カメラ端末１０と受信端末２０とがネットワーク３０を介して接続され、映像配信システムを構成している。ここでは、カメラ端末１０と受信端末２０とを夫々１台ずつ示しているが、カメラ端末１０，受信端末２０は夫々２台以上ネットワーク３０に接続されていてもよい。カメラ端末１０はカメラ１１とエンコーダ１２ａ，１２ｂと切替スイッチ１４と記録媒体１３とを有しており、受信端末２０はデコーダ２１とシステムコントローラ２３とディスプレイ２２を有している。
【００３６】
次に、この第１の実施形態の動作について説明する。
【００３７】
カメラ端末１０においては、カメラ１１が撮影を行なって映像信号Ａを生成する。この映像信号Ａはエンコーダ１２ａで高圧縮率の、例えば、国際標準のＭＰＥＧ（Moving Picture Expert Group）に準拠した方式などに基づいて情報圧縮（エンコード）処理され、低ビットレートの、従って、低画質のビットストリーム（以下、低画質ビットストリームという）ＢLが生成される。また、カメラ１１で生成された映像信号Ａはエンコーダ１２ｂで低圧縮率の、例えば、ＭＰＥＧに準拠した方式などに基づいて情報圧縮処理され、高ビットレートの、従って、高画質のビットストリーム（以下、高画質ビットストリームという）ＢHが生成される。切替スイッチ１４は受信端末２０のシステムコントローラ２３によって切替制御されるが、通常ａ接点側に閉じている。このため、通常エンコーダ１２ａから出力される低画質ビットストリームＢL が切替スイッチ１４を介し、ネットワーク３０上を伝送される。
【００３８】
また、エンコーダ１２ｂから出力される高画質ビットストリームＢHは、記録媒体１３に常時供給されて記録される。この記録媒体１３は、例えば、半導体メモリであって、記録と同時に再生もできるものである。つまり、エンコーダ１２ｂから供給されるこの高画質ビットストリームＢHを順次記録するとともに、この記録時点よりも所定の時間Ｔだけ前に記録された部分を再生する。従って、記録媒体１３からは高画質ビットストリームＢHが所定の時間Ｔだけ遅延されて再生される。記録媒体１３からの再生高画質ビットストリームＢH'は切替スイッチ１４のｂ接点に供給されるが、通常切替スイッチ１４はａ接点側に閉じているので、この再生高画質ビットストリームＢH'はネットワーク３０に供給されない。
【００３９】
なお、記録媒体１３を半導体メモリとした場合、先頭アドレスから記録をしていくが、所定の時間Ｔ分の記録がなされると、その記録容量分の記録がなされたことになって、先頭アドレスから再び記録が行なわれることになり、既に記録されている内容が書き替えられることになる。また、この記録よりも所定の時間Ｔだけ遅れて再生がなされる。このようにして、記録と再生とが同時に行なわれることにより、常時記録が行なわれて所定の時間Ｔだけ遅延された高画質のビットストリームが再生されることになる。この場合、記録媒体１３は所定の時間Ｔよりも若干長い時間高画質ビットストリームを記録できる容量のメモリでよい。この所定の時間Ｔとしては、適宜任意に設定することができるが、この実施形態を監視カメラシステムに適用する場合には、注意を喚起させる場面よりもある程度前に遡った場面から高画質映像が見られるような時間にする必要がある。このことは、後述する他の実施形態においても、同様である。
【００４０】
また、ビットストリームＢL，ＢHがＭＰＥＧに準拠した方式でエンコードされる場合には、再送要求に対する高画質ビットストリームＢH'の配信は、フレーム内符号化されてフレームから、あるいはその直前から開始されることになる。
【００４１】
このようにして、カメラ１１から出力される映像信号Ａは、低画質ビットストリームＢL として、ネットワーク３０から受信端末２０に配信される。
【００４２】
受信端末２０では、ネットワーク３０を介して配信されるビットストリームが受信され、デコーダ２１でもとの映像信号にデコードされてディスプレイ２２に供給される。これにより、配信された映像がディスプレイ２２で表示される。
【００４３】
かかる表示状態で視聴者の注意を喚起する場面が表示され、視聴者が再度この場面をみたい場合、視聴者が受信端末２０側のリモコンや操作部などで所定の操作（これを、以下、再送の操作という）をすると、システムコントローラ２３が切替制御信号Ｃを発生し、ネットワーク３０を介してカメラ端末１０に送信する。これを受信したカメラ端末１０では、この切替制御信号Ｃによって切替スイッチ１４が制御され、ａ接点からｂ接点に切り替わる。これにより、記録媒体１３の再生高画質ビットストリームＢH'が切替スイッチ１４とネットワーク３０を介して受信端末２０に配信（再送）される。これにより、この再生高画質ビットストリームＢH'がデコーダ２１で高品質の映像信号にデコードされ、ディスプレイ２２に供給されて高画質の映像が表示される。
【００４４】
ここで、記録媒体１３の再生高画質ビットストリームＢH'は、エンコーダ１２ａから出力されて配信されていた低画質ビットストリームＢLよりも上記の所定の時間Ｔだけ遅延されたビットストリームであるから、受信端末２０でのディスプレイ２２では、現時点よりも所定時間Ｔだけ遡った時点からの高画質の映像が表示開始される。即ち、記録再生装置からの巻き戻し再生と同様の効果が高画質の映像でもって得られることになって、これにより、上記の視聴者の注意を喚起した場面が再度高画質で見ることができる。このとき、切替スイッチ１４がｂ接点側に切り替わっているので、エンコーダ１２ａからの低画質ビットストリームＢLはネットワーク３０で伝送されない。
【００４５】
なお、（イ）ビットストリームＢH'が上記の所定の時間Ｔ以上の或る設定時間Ｔ’だけ受信端末２０に配信されると、切替スイッチ１４は自動的にａ接点側に切り替わり、低画質ビットストリームＢLの配信に戻るようにしてもよいし、（ロ）受信端末２０側で低画質ビットストリームＢLの配信を要求しない限り（即ち、切換制御信号Ｃがシステムコントローラ２３から送信されない限り）、そのまま高画質ビットストリームＢH'が配信続けるようにしてもよい。
【００４６】
低画質ビットストリームＢLによる映像が表示されていて、注意を喚起する場面（シーン）が表示され出したときには、通常視聴者は、この場面を一通り見てから、再度この場面を見たいと思うものである。このような場合には、この場面を一通り見てからカメラ端末１０に再送を要求するものである。このような再送要求に対し、上記（イ），（ロ）のいずれの場合も、再送された高画質ビットストリームＢH'による高画質映像の表示は、少なくとも一通り見た上記の場面の少なくとも先頭から開始されなければならず、上記の所定の時間Ｔとしては、この場面の先頭まで遡れる時間以上に設定しなければならない。例えば、視聴者がこのような場面を一通り見たと認識する時間を２〜３分程度とすると、所定の時間Ｔとしてはかかる時間以上に設定すればよい。
【００４７】
また、上記（イ）の場合の高画質ビットストリームＢH'による高画質映像の表示期間（上記設定時間Ｔ’）としては、通常視聴者が要求する任意の時間に適宜設定可能である。また、上記（ロ）の場合には、視聴者は満足するまで高画質の映像を見続けることができる。
【００４８】
以上のことは、後述の実施形態についても、同様である。
【００４９】
図２は以上の動作を示すタイミング図であって、同図（ａ）はカメラ端末１０での低画質ビットストリームＢLと高画質ビットストリームＢHのタイミングを示し、同図（ｂ）は受信端末２０での低画質ビットストリームＢLによる低画質映像の表示タイミングと高画質ビットストリームＢHによる高画質映像の表示タイミングとを示す。
【００５０】
同図において、受信端末２０でカメラ端末１０からの配信を受けるように操作した時刻をｔ1とすると、受信端末２０では、低画質ストリームＢLが受信されてデコーダ２１で映像信号にデコードされ、時刻ｔ2から低画質の映像がディスプレイ２２で表示し始める。その後、この映像で時刻ｔ’に視聴者が注意を喚起される場面があり、これを再度見たいために視聴者が時刻ｔ3に高画質の映像再生のための操作をすると、システムコントローラ２３からネットワーク３０を介してカメラ端末１０に切替制御信号Ｃが送られ、カメラ端末１０では、切替スイッチ１４がｂ接点側に切り替わり、記録媒体１３から時刻ｔ1から記録された高画質ビットストリームＢH’が再生されて、切替スイッチ１４とネットワーク３０とを介して受信端末２０に配信される。受信端末２０では、この高画質ビットストリームＢH’がデコーダ２１で高画質の映像信号にデコードされ、時刻ｔ4からディスプレイ２２に時刻ｔ1からの高画質の映像信号が供給されて映像再生が行なわれる。
【００５１】
なお、エンコーダ１２ｂから時刻ｔ1に出力されて記録媒体１３に記録される部分は、これより上記の所定の時間Ｔだけ遅れて記録媒体１３から再生される。従って、図２に示す高画質ビットストリームＢHはこのエンコーダ１２ｂから出力される高画質ビットストリームＢH を示すものであって、その時刻ｔ1の部分は、これより所定の時間Ｔだけ遅れて受信端末２０に配信される。
【００５２】
また、低画質ビットストリームＢLの時刻ｔ1の部分がディスプレイ２２で表示開始されるまでの時間ｔ12（＝ｔ2−ｔ1）が、高画質ビットストリームＢHの時刻ｔ1の部分が配信開始（時刻ｔ3）されてからディスプレイ２２で表示開始（時刻ｔ4）されるまでの時間ｔ34（＝ｔ4−ｔ3）よりも長いのは、低画質ビットストリームＢL の方が、より情報圧縮されているため、もとの映像信号にデコードするのに時間が掛かるためである。
【００５３】
以上、この第１の実施形態によれば、カメラ端末１０は、視聴者が配信された映像に対して注意を喚起されて再度見直したいときに限って、高画質の映像を配信する。通常時には、必要最低限の画質のビットレートを持つ低画質ビットストリームＢLを伝送し、システムコントローラ２３からの要求時のみ、高画質ビットストリームＢHを伝送することにより、定常的にネットワーク３０が伝送するビット量を削減することが可能になる。また、高画質ビットストリームＢHを再送したときには、図１５に示した従来の技術に比べて、詳細な（即ち、高画質の）映像信号を得ることが可能になる。
【００５４】
この第１の実施形態では、説明の簡略化のため、ネットワーク３０に接続するカメラ端末を１台としたが、ネットワーク３０がビットストリームを伝送可能な範囲内でカメラ端末を増やし、受信端末で複数の画面を視聴できるようにしてもよい。例えば、多数のカメラによる監視を目的とした場合、通常時には、多数のカメラ端末を接続し、各カメラ端末が出力する画質を下げることにより、ネットワーク３０が伝送するビットレートを抑える。しかし、視聴者が注意を喚起される異常発生時には、他のカメラ端末の低画質ビットストリームを抑制もしくは排除して、着目したカメラ端末の映像のみ高画質ビットストリームとして配信し、これを受信端末で再度詳細に視聴することが可能になる。通常時には、必要最低限の低画質ビットレートでよいため、ネットワーク３０の最大伝送容量を変えることなく、カメラ端末の台数を増加させることが可能であり、異常発生時には、カメラ端末をその異常発生のものに限定して視聴することにより、詳細な映像を得ることが可能になる。
【００５５】
また、例えば、この第１の実施形態をテレビ放送を目的とした場合、ネットワーク３０で伝送可能な単位時間当りのデータ量は有限であるため、放送局は、視聴したデータ量に応じて、課金をなしもしくはＣＭを挿入することが想定される。視聴者は、通常時には、低画質ビットストリームによる視聴を行ない、視聴時の必要に応じて高画質ビットストリームを要求することにより、効率的にテレビ放送を視聴することが可能になる。
【００５６】
なお、以上の説明では、記録媒体１３から再生されて配信される高画質の映像は、ディスプレイ２２で１度しか見ることができないが、受信端末２０として、図１５に示した従来の受信端末２０のように、システムコントローラ２３で制御される記録媒体２５や切替スイッチ２４を設け、デコーダ２１でデコードした高画質の映像信号をディスプレイ２２で表示するとともに、この記録媒体２５に記録し、必要なときにこの記録媒体２５からこの高画質の映像信号を再生して、切替スイッチ２４を介して、ディスプレイ２２に供給できるようにしてもよい。このことは、後述する他の実施形態についても同様である。
【００５７】
また、図１における記録媒体１３を半導体メモリとしたが、記録再生可能なディスクや磁気テープなどの記録媒体であってもよい。この場合には、システムコントローラ２３から切替制御信号Ｃが供給されると、記録媒体１３も制御されて記録モードから再生モードに切り替えられ、その切替時点よりも所定の時間Ｔだけ前に記録されたところから高画質ビットストリームＢH’を再生開始するようにする。このことも、後述する他の実施形態についても同様である。
【００５８】
図３は本発明による映像配信システムの第２の実施形態を示すブロック図であって、１０ａ，１０ｂはカメラ端末、２０ａ，２０ｂ，２０ｃは受信端末、３０〜３２はネットワーク、４０，４１はローカルサーバであり、図１に対応する部分には同一符号を付けて重複する説明を省略する。
【００５９】
同図において、この実施形態では、ネットワーク３０を上位階層とし、ネットワーク３１，３２を下位階層として、ネットワークを階層的に構成しており、ネットワーク３０は上位階層の大容量のネットワークである。複数のカメラ端末１０ａ，１０ｂはこの上位階層のネットワーク３０を介して複数のローカルサーバ４０，４１と接続されている。下位階層のネットワーク３１はローカルサーバ４０と受信端末２０ａとの間を接続しており、下位階層のネットワーク３２はローカルサーバ４１と受信端末２０ｂ，２０ｃとの間を接続している。
【００６０】
カメラ端末１０ａ，１０ｂは、図１におけるカメラ端末１０とはその切換スイッチ１４が設けられていないことだけが構成が異なるものであり、従って、いずれのカメラ端末１０ａ，１０ｂも、エンコーダ１２から出力される低画質ビットストリームＢLと記録媒体１３で遅延された高画質ビットストリームＢH’とを常時ネットワーク３０を介してローカルサーバ４０，４１に送信する。従って、ローカルサーバ４０，４１には、ネットワーク３０に接続された全てのカメラ端末からの低画質ビットストリームと遅延された高画質ビットストリームとが格納されることになる。
【００６１】
一方、ローカルサーバ３１に接続されている受信端末２０ａも、また、ローカルサーバ３２に接続されている受信端末２０ｂ，２０ｃも、図１に示した受信端末２０と同じ構成をなしており、通常はローカルサーバ４０，４１からネットワーク３１，３２を介して低画質ビットストリームが配信されるが、ディスプレイ２２で表示される低画質ビットストリームによる映像を見て視聴者にとって注意を喚起する場面があり、その場面の再送を要求するための所定の操作が視聴者によって行なわれると、システムコントローラ２３から再送要求信号が形成されて出力され、ネットワーク３１，３２を介してローカルサーバ４０，４１に送信される。ローカルサーバ４０，４１は、この再送要求信号を受信すると、これまで送信していた低画質ビットストリームに対応する遅延された高画質ビットストリームを、低画質ビットストリームに代えて、ネットワーク３１，３２を介して受信端末２０ａや受信端末２０ｂ，２０ｃに配信する。
【００６２】
このように、上位階層のネットワーク３０では、各カメラ端末からの低画質ビットストリームＢLと高画質ビットストリームＢH'とが同時に伝送されるが、下位階層ネットワーク３１，３２では、低画質ビットストリームＢLと高画質ビットストリームＢH'とのいずれか一方しか伝送されない。
【００６３】
このようにして、夫々の受信端末２０ａ〜２０ｃでは、再送要求をすると、注意を喚起する場面を再度高画質の映像でみることができるし、また、ローカルサーバ４０，４１には夫々、同じカメラ端末１０ａ，１０ｂからの低画質ビットストリームと遅延された高画質ビットストリームとが格納されるから、夫々の受信端末２０ａ〜２０ｃがこれらカメラ端末１０ａ，１０ｂからの映像を取得することができるし、また、同じカメラ端末１０ａまたは１０ｂからの映像を同時に取得することもできる。
【００６４】
以上のように、この第２の実施形態においては、図１に示した第１の実施形態同様、通常時には、低ビットレートの低画質ビットストリームを伝送し、視聴者が配信された同じ映像を再度見るときには、高ビットレートの高画質ビットストリームが再送されるので、高画質の映像を得ることが可能である。
【００６５】
また、全ての受信端末から１つのカメラ端末に対して高画質ビットストリームの再送要求が出ても、カメラ端末は各ローカルサーバに対してこれを伝送すればよいため、ネットワーク３０の単位時間当たりの最大伝送容量を超えることがない。
【００６６】
また、例えば、この第２の実施形態をテレビ放送を目的とする場合、視聴者が１つのカメラ端末に集中して高画質ビットストリームを要求することが予想されるが、ネットワークを上位階層のネットワーク３０と下位階層のネットワーク３１，３２とに階層化することにより、このカメラ端末内の記録媒体１３に対する伝送の負荷を軽減し、受信端末へ連続して高画質ビットストリームを伝送することが可能となる。
【００６７】
図４は本発明による映像配信システムの第３の実施形態を示すブロック図であって、１５はプロセッサ、１６はメモリ、１６ａはエンコードプログラム、１６ｂはエンコードプログラムであり、図１に対応する部分には同一符号を付けて重複する説明を省略する。
【００６８】
同図において、プロセッサ１５は、メモリ１６に格納されているエンコードプログラム１６ａ，１６ｂを実行することにより、カメラ端末１０から出力される映像信号Ａをエンコード処理する。ここで、エンコードプログラム１６ａは、図１でのエンコーダ１２ａと同等の処理をプロセッサ１５で行なわせるものであり、エンコードプログラム１６ｂは、図１でのエンコーダ１２ｂと同等の処理をプロセッサ１５で行なわせるものである。これにより、プロセッサ１５では、低画質ビットストリームＢLと高画質ビットストリームＢHとが生成され、低画質ビットストリームＢL は切換スイッチ１４に供給され、高画質ビットストリームＢHは記録媒体１３に供給されて記録される。
【００６９】
図５は図４におけるプロセッサ１５の処理動作の一具体例を示すタイミング図であって、横軸を時間軸とし、時間ｔａ＋ｔｂをカメラ１１の１フレーム期間としている。
【００７０】
カメラ１１が１フレームの映像信号Ａ（図４）を出力する期間（１フレーム期間）毎に、プロセッサ１５は、エンコードプログラム１６ａ，１６ｂを時分割に実行するものであって、例えば、１フレーム期間の前期間ｔａにエンコードプログラム１６ａを実行して低画質ビットストリームＢLを生成し、この同じフレーム期間の後期間ｔｂにエンコードプログラム１６ｂを実行して高画質ビットストリームＢH を生成する。
【００７１】
ここで、プロセッサ１５はフレームメモリを備えており、カメラ１１から供給される映像信号Ａは一旦フレームメモリに格納され、まず、このフレームメモリから高速に読み出されて、エンコードプログラム１６ａにより、期間ｔａ内でエンコード処理されて低画質ビットストリームＢLが生成され、次に、再びこのフレームメモリから高速に読み出されて、エンコードプログラム１６ｂにより、期間ｔｂ内でエンコード処理されて高画質ビットストリームＢHが生成される。これら生成された低画質ビットストリームＢLと高画質ビットストリームＢHとは一旦別のフレームメモリに記録され、これらから夫々１フレーム期間の時間長となるように読み出されてプロセッサ１５から出力される。
【００７２】
このようにして、この第３の実施形態では、プロセッサ１５が時分割でエンコード処理を行なうことにより、カメラ端末１０を構成する部品点数を増やすことなく、異なる圧縮率のエンコード処理を行なうことができ、また、受信端末２０の要求に応じて高画質のビットストリームを再送することができる。また、部品点数の削減により、カメラ端末１０の軽量化や製造工程の削減が可能になる。
【００７３】
なお、図３に示した第２の実施形態においても、この第３の実施形態を適用可能であることはいうまでもない。
【００７４】
次に、本発明による映像配信システムの第４の実施形態について説明する。
この第４の実施形態の構成は、先の実施形態と同じであるが、以下では、図１に示した第１の実施形態の構成でもって説明する。
【００７５】
図１において、この第４の実施形態は、記録装置１３からの静止画像の再送も可能とするものである。このため、エンコーダ１２ｂは、カメラ１１からの映像信号Ａを各フレーム毎に可逆の圧縮（例えば、フレーム内符号化）を行なうものである。
【００７６】
受信端末２０側で視聴者が再送の操作を行なうと、図１に示した第１の実施形態と同様、システムコントローラ２３からの切換制御信号により、カメラ端末１０において、切換スイッチ１４がｂ接点側に切り替わり、記録媒体１３から高画質ビットストリームＢH'が受信端末２０に再送され、ディスプレイ２２に高画質の映像が表示されるが、視聴者が静止画再生の指示操作をすると、その指示制御信号がシステムコントローラ２３からカメラ端末１０に供給され、記録媒体１３が制御されてその時点での１フレームの高画質ビットストリームが繰り返し読み出されて受信端末２０に配信される。これにより、受信端末２０のディスプレイ２２では、１フレームの高画質ビットストリームの繰り返しにより、静止画像が表示される。
【００７７】
あるいは、受信端末２０には、図１５に示すような記録媒体２５またはフレームメモリなどの記録媒体や切替スイッチ２４が設けられており、この記録媒体にも高画質ビットストリームＢH'が順次記録され、上記の静止画再生の指示とともに、この時点に記録された１フレームの高画質ビットストリームをこの記録媒体から繰り返し再生してディスプレイ２２に供給するようにしてもよい。
【００７８】
ところで、ＭＰＥＧ方式に代表される映像圧縮方式は、映像信号の前後のフレームで相関が高いことから、大半のフレームで動き補償によるフレーム間符号化が行なわれている。動き補償によるフレーム間符号化が行なわれたフレームは、圧縮率向上のために、フレーム内符号化が行なわれたフレームに比べて、画質が低下するのが一般的である。このため、動き補償によるフレーム間符号化が行なわれたフレームで一時停止を行ない、静止画像を要求すると、ディスプレイ２２には、画質の悪い映像がそのまま停止して表示されることになる。
【００７９】
しかし、この第４の実施形態では、高画質ビットストリームは可逆の圧縮処理がなされているので、視聴者は配信された高画質の画像を一時停止で表示させたときも、受信端末２０でのデコーダ２１で高画質ビットストリームＢH'が高画質を保ったまま映像信号にデコードされるから、画質劣化を伴わない高画質の静止画が得られることになる。
【００８０】
次に、本発明による映像配信システムの第５の実施形態について説明する。
この第５の実施形態の構成は、先の実施形態と同じであるが、高画質のスローモーション画像（以下、スロー画像という）も得られるようにしたものであり、以下、図１に示す構成を例にして説明する。
【００８１】
以下、図６により、この第５の実施形態の動作について説明するが、同図（ａ）は図１でのエンコーダ１２ａが符号化処理するフレームを、同図（ｂ）は図１でのエンコーダ１２ｂが符号化処理するフレームを夫々示し、同図（ｃ）は受信端末２０内のディスプレイ２２に表示される映像のフレームを示すものである。
【００８２】
図１において、エンコーダ１２ａは、図６（ａ）に示すように、１フレーム期間毎にフレーム１，フレーム２，フレーム３，……の順で１フレームずつ低画質ビットストリームＢLを出力する。
【００８３】
また、エンコーダ１２ｂは、図６（ｂ）に示すように、スロー画像も可能なように、カメラから受け取る高いフレームレートの映像信号をエンコードする。ここで、図６（ｂ）において、フレーム１．５はフレーム１とフレーム２との中間の時間のフレームであり、フレーム２．５はフレーム２とフレーム３との中間の時間のフレームであって、以下、同様である。ここでは、２倍のスロー画像が得られるようにするものとして、各フレーム１，フレーム１.５，フレーム２，フレーム２.５，……は夫々１/２フレーム時間長に時間圧縮されたフレームの高画質ビットストリームＢHであり、これがエンコーダ１２ｂから出力されて記録媒体１３に記録される。
【００８４】
なお、一般に、ｎ（但し、ｎは２以上の整数）のスロー画像が得られるようにするためには、カメラ１１からの映像信号Ａでのフレーム間毎に、（ｎ−１）個の一方のフレームから他方のフレームへと順次内容が変化するフレームが間挿される。
【００８５】
記録媒体１３からは、フレーム周期で、各フレームの高画質ビットストリームＢH'が再生される。受信端末２０では、記録媒体１３からの再送として、通常の画像とともに、スロー画像（図６（ｂ）の高画質ビットストリームＢHの場合、２倍のスロー画像）の再生も要求することができる。
【００８６】
そこで、いま、図６（ｃ）に示すように、ディスプレイ２２で図６（ａ）に示す低画質ビットストリームＢLが配信されて画像表示される「（１）通常再生」の状態にあるとき、受信端末２０側でスロー再生の要求があると、上記のようにして切替スイッチ１４がｂ接点側に切り替わり、図６（ｂ）に示すように各フレームが１／２フレーム周期で記録媒体１３に記録された高画質ビットストリームＢHが各フレームが１フレーム周期の高画質ビットストリームＢH’として再生され、切替スイッチ１４からネットワーク３０を介して受信端末２０に再送される。これにより、ディスプレイ２２では、図６（ｃ）に示すように、時刻ｔｓから１フレーム時間長のフレームがフレーム０.５，フレーム１，フレーム１.５，フレーム２，……の順で表示されることになり、２倍の高画質スロー再生の「（２）スロー再生」状態となる。
【００８７】
なお、受信端末２０では、通常の高画質ビットストリームの再送も要求することができる。この場合には、この要求に応じて、記録媒体１３からは、１つおきのフレームの高画質ビットストリームがフレーム１，フレーム２，フレーム３，……の順で読み出され、受信端末２０に配信される。
【００８８】
以上のように、この第５の実施形態では、配信された画像に対し、スロー再生を選択したときのみ、フレームレートを上げて映像を観察することが可能になる。視聴者がスロー再生を必要とするのは、映像がすばやく変化するときである。エンコーダ１２ｂは、常時高フレームレートでエンコードしているので、エンコーダ１２ａからの出力からは見られないフレーム間（図６（ｃ）でのｄ，ｅ，ｆとして示すフレーム０．５，フレーム１．５，フレーム２．５）の動きを詳細に見ることが可能になり、詳細な動きを観察することができる。
【００８９】
なお、この第５の実施形態では、スロー再生用の高画質ビットストリームＢH'として、記録媒体１３に記録する前に入力映像信号Ａのフレーム間にフレーム間挿を行なうようにするものであったが、図１に示した第１の実施形態と同様にして、エンコーダ１２ｂからの高画質ビットストリームＢHを記録媒体１３に記録し、記録媒体１３から再生するとき、各フレームの高画質ビットストリームを複数回ずつ繰り返し再生することにより、高画質のスロー再生を行なうようにしてもよい。
【００９０】
次に、本発明による映像配信システムの第６の実施形態について説明する。
この第６の実施形態は、複数のカメラ端末から同時に配信されるものであって、これら配信される映像を同じ受信端末のディスプレイで同時に表示できるようにしたものである。図７は２個のカメラ端末から同じ受信端末に映像が同時に配信される場合のこの第６の実施形態を説明するためのブロック図であって、１０ａ，１０ｂは先の実施形態におけるカメラ端末１０と同じ構成をなすカメラ端末であるが、ここでは、図１に示したカメラ端末１０と同じ構成のものとして、図１に対応する部分には同一符号を付けて重複する説明を省略する。
【００９１】
同図において、受信端末２０からは、そのシステムコントローラ２３からの切替制御信号Ｃにより、カメラ端末１０ａ，１０ｂの切替スイッチ１４ａ，１４ｂを制御することができ、また、システムコントローラ２３が受信端末２０の図示しない受信部を制御することができる。これにより、受信端末２０では、カメラ端末１０ａ，１０ｂのいずれか一方から映像（低画質の映像や高画質の映像）の配信を受け、受信した映像をディスプレイ２２で表示させるようにすることができるし、カメラ端末１０ａ，１０ｂの両方から同時に映像の配信を受け、これら映像を同時にディスプレイ２２で表示させるようにすることもできる。
【００９２】
図８はこの第６の実施形態の動作を示すタイミング図であって、同図（ａ）はカメラ端末１０ａでの低画質ビットストリームＢLと高画質ビットストリームＢHとのタイミングを、同図（ｂ）はカメラ端末１０ｂでの低画質ビットストリームＢLと高画質ビットストリームＢHとのタイミングを夫々示し、同図（ｃ）は受信端末２０のディスプレイ２２での低画質ビットストリームＢLによる低画質映像の表示タイミングと高画質ビットストリームＢHによる高画質映像の表示タイミングとを示す。
【００９３】
同図において、受信端末２０側で視聴者がカメラ端末１０ａ，１０ｂから同時に映像の配信を希望する操作をすると（時刻ｔ１）、これらカメラ端末１０ａ，１０ｂからの低画質ビットストリームＢLが同時に受信され、これらが同時にデコーダ２１で映像信号にデコードされたディスプレイ２２に供給される。このとき、図示しない処理部により、これら映像信号に対して画面縮小の処理がなされ、これにより、ディスプレイ２２では、図９（ａ）に示すように、カメラ端末１０ａ，１０ｂからの映像１，２が縮小して同時に表示されるサムネイル表示がなされる（時刻ｔ２）。
【００９４】
その後、例えば、カメラ端末１０ｂからの映像に視聴者に注意を喚起させるような場面があり、これを見て視聴者が高画質の映像２の再送を要求する操作を行なうと（時刻ｔ３）、システムコントローラ２３は、図示しない受信部がカメラ端末１０ｂからのビットストリームのみを受信するようにし、また、切替制御信号Ｃにより、カメラ端末１０ｂでの切替スイッチ１４をｂ接点側に閉じさせる。これにより、カメラ端末１０ｂから高画質ビットストリームＢH'が配信されて受信端末２０で受信され、これがデコードされてディスプレイ２２に供給される。このときには、即ち、１つのカメラ端末から配信されるビットストリームのみを受信するときには、システムコントローラ２３の制御により、図９（ｂ）に示すように、受信した映像（この場合には、カメラ端末１０ｂからの高画質の映像）がディスプレイ２２の画面全体に表示されることになる（時刻ｔ４）。
【００９５】
なお、ここでは、２つのカメラ端末を対象としたが、３個以上の任意の個数のカメラ端末を対象とする場合も同様である。
【００９６】
このように、この第６の実施形態では、視聴者は複数のカメラ端末の映像をプレビューした後に、改めて最初から希望する所定のカメラ端末の映像を視聴することが可能になる。
【００９７】
また、この第６の実施形態をテレビ放送に応用した場合、記録媒体１３の容量を所定の時間Ｔ分とすると、視聴者は同時刻に放送される番組の冒頭部分を同時に視聴し、この所定の時間Ｔ内に興味の引かれた番組を選択すれば、それをその放送開始時点から見ることが可能になる。この場合、記録媒体１３では、番組の放送開始とともに、この番組を先頭アドレスから記録していくが、所定の時間Ｔ分の番組が記録されると、その記録容量の記録がなされたことになり、先頭アドレスから再び記録が行なわれることになり、既に記録されている内容が書き替えられることになる。また、受信端末２０のシステムコントローラ２３からこの記録媒体１３からの読み出し要求があると、記録媒体１３では、先頭アドレスから読み出しが開始されるようにする。これにより、番組の受信を開始してから所定の時間Ｔが経過しないうちに受信端末２０のシステムコントローラ２３からこの記録媒体１３からの読み出し要求があると、この番組の最初から読み出されて受信端末２０に配信されることになる。従って、この所定の時間Ｔとしては、図９（ａ）に示すサムネイル表示の複数の番組の中から所望とする１つの番組を視聴者が充分に選択できる程度の時間、例えば、１〜数分間程度であればよい。
【００９８】
このようにして、視聴者は実際に番組を視聴してから選択することが可能になり、ＥＰＧ(Electoronic Program Guide)などのプログラムガイドと比較して容易かつ効率的に番組を選択することができる。
【００９９】
図１０は本発明による映像配信システムの第７の実施形態を示すブロック図であって、１７は信号処理部であり、図１に対応する部分には同一符号を付けて重複する説明を省略する。
【０１００】
同図において、カメラ端末１０には、信号処理部１７が設けられており、カメラ１１から出力される映像信号Ａが、この信号処理部１７で処理された後、エンコーダ１２ａに供給されてエンコードされ、低画質ビットストリームＢL が生成される。これ以外は図１に示した第１の実施形態と同様であり、従って、エンコーダ１２ｂはカメラ１１からの映像信号Ａをそのままエンコード処理して高画質ビットストリームＢH を生成する。
【０１０１】
信号処理部１７は、カメラ１１が撮像する映像の一部を抽出するように、カメラ１１から出力される映像信号Ａの一部を抽出し、この抽出した部分を１画面の大きさとなるように拡大処理して、エンコーダ１２ａに供給するものである。
【０１０２】
これを図１１により説明すると、同図（ａ）において、範囲５０はカメラ１１の撮影範囲であって、この撮影範囲５０の映像信号Ａがカメラ１１から出力される。信号処理部１７は、かかる撮影範囲の映像信号Ａから、この撮影範囲５０の一部の範囲（以下、抽出範囲という）５１の部分を抽出し、この抽出範囲５１の映像を、受信端末２０のディスプレイ２２の画面全体で表示されるように、拡張処理する。この拡張処理では、１フレームのライン数が映像信号Ａのライン数と一致するように、ライン補間処理がなされる。
【０１０３】
このようにして、カメラ１１の撮影範囲５０の一部の抽出範囲５１の映像が拡張された映像信号Ａ’が信号処理部１７から出力され、これがエンコーダ１２ａに供給されてエンコード処理される。ここで、例えば、抽出範囲５１を撮影範囲５０の１／数倍〜１／１０倍程度とすることにより、この映像信号Ａ’は、もとの映像信号Ａに比べて、充分狭帯域化された映像信号であり、従って、エンコーダ１２ａでは、もとの映像信号Ａをエンコードするのに比べて、より大きい情報圧縮率でエンコードすることができる。
【０１０４】
エンコーダ１２ａから出力される低画質ビットストリームＢLが切替スイッチ１４からネットワーク３０を介して受信端末２０に供給されると、そのディスプレイ２２では、図１１（ｂ）に示すように、図１１（ａ）に示す抽出範囲５１の映像が画面全体にわたって拡大表示されることになる。
【０１０５】
ここで、図１１（ａ）において、抽出範囲５１は１フレーム毎に、矢印で示すように、撮影範囲５０内を移動するように、位置が変化される。このため、ディスプレイ２２に表示される画像も変化していく。そして、この抽出範囲５１内に人物５２などの視聴者に注意を喚起するような画像が入ってくると、ディスプレイ２２にも、その表示画面に、図１１（ｂ）に示すように、人物５２の画像が表われ始める。これをある程度見て視聴者が再送の要求操作を受信端末２０側ですると、図１に示した第１の実施形態度と同様、切替スイッチ１４がｂ接点側に閉じて記録媒体１３から高画質ビットストリームＢH'が配信され、ディスプレイ２２に図１１（ａ）に示す撮影範囲５０の高画質の映像が表示されることになる。  このようにして、この第７の実施形態では、通常時、カメラの撮影範囲内の限定された領域を視聴し、必要に応じて画面全体を視聴するものであるから、通常時の受信ビット量を大幅に削減しながら、再送を必要とする画像を認識可能な画像表示も可能である。また、通常時では、限定された領域（抽出範囲５１の映像）のみを配信するため、ネットワーク３０が定常的に伝送するビット量を大幅に削減できる。
【０１０６】
次に、図１２により、本発明による映像配信システムの第８の実施形態について説明する。
この第８の実施形態の構成も、図１に示した第１の実施形態と同様である。
【０１０７】
図１２（ａ）は、図１におけるエンコーダ１２ａから出力されるビットストリームＢLから得られる映像の解像度を示し、図１２（ｂ）は図１におけるエンコーダ１２ｂから出力されるビットストリームＢHから得られる映像の解像度を示すものである。図１２（ａ），（ｂ）での点線によって囲まれる格子は画素を表わしている。
【０１０８】
図１２（ａ），（ｂ）から明らかなように、エンコーダ１２ａから出力されるビットストリームＢLによる映像は、それを視聴するのに充分な解像度を有しているが、エンコーダ１２ｂから出力されるビットストリームＢH、従って、記録媒体１３から再生されるビットストリームＢH'による映像は、エンコーダ１２ａから出力されるビットストリームＢLによる映像に比べて、さらに高解像度の映像である。このため、視聴者は、通常時、このエンコーダ１２ａからのビットストリームＢL による映像を視聴すれば充分である。
【０１０９】
かかるビットストリームＢL による映像を視聴中に注意を喚起させる場面が表われ、視聴者がその再送を要求すると、先の実施形態と同様、記録媒体１３からビットストリームＢH'が再生されて受信端末２０に配信され、高解像度の映像がディスプレイ２２に表示される。この映像により、注意を喚起された部分の詳細、例えば、この部分を人物５３の顔の部分とすると、この顔の部分の画素数が多いため、その表情を明確に認識することができる。
【０１１０】
また、この第８の実施形態では、このように高解像度の映像が再送されるということになると、受信端末２０において、デコーダ２１でデコードされた映像信号をフレームメモリを介してディスプレイ２２に供給するように構成することにより、注意を喚起された部分を拡大して表示できるようにすることができる。
【０１１１】
いま、図１２（ａ）に示す映像の表示状態で視聴者に注意を喚起する場面があり、これに伴って視聴者が再送を要求すると、上記のように、カメラ端末１０での記録媒体１３から再生された高解像度の映像のビットストリームＢH'が受信端末２０に配信され、デコーダ２１でデコードされてフレームメモリを介しディスプレイ２２に供給される。これにより、図１２（ｂ）に示すような高解像度の映像がディスプレイ２２で表示されるが、ここで、この高解像度の映像画面で所定の部分をカーソル操作などによって指示すると、この指示部分を含む所定の大きさの領域が、フレームメモリの読み出し制御により、拡大表示される。この拡大表示領域は、例えば、図１２（ｂ）に示す映像に重なるようにして表示されるようにする。
【０１１２】
ここで、かかる拡大表示領域の映像の拡大率を、例えば、この拡大表示領域での映像の解像度が図１２（ａ）で示す映像の解像度以下とする値とすることにより、注目する映像を充分な解像度で拡大表示させることができる。従って、映像の一部を拡大表示させても、鮮明な映像が得られることになり、視聴者は映像の確認したい部分を明確に認識することが可能となる。
【０１１３】
図１３は本発明による映像配信システムの第９の実施形態を示すブロック図であって、１８は画像／音声認識回路であり、図１に対応する部分には同一符号を付けて重複する説明を省略する。
【０１１４】
同図において、カメラ端末１０には、画像／音声認識回路１８が設けられており、カメラ１１から得られた映像信号から特定の映像が、あるいはまた、このカメラ１１に備え付けられた図示しないマイクロホンから出力される音声信号から特定の音声がこの画像／音声認識回路１８によって検出されると、画像／音声認識回路１８がこの検出に応じて記録媒体１３を制御し、エンコーダ１２ｂからの高画質ビットストリームＢHが記録媒体１３に書き込まれるようにする。
【０１１５】
ここで、特定の映像とは、例えば、移動するものの映像であって、この実施形態を監視システムに適用する場合には、撮影場面に人物などが入り込んで来ると、これを画像／音声認識回路１８がこれを認識し、これを認識している期間記録媒体１３を制御してエンコーダ１２ｂからの高画質ビットストリームＢHを記録させる。また、画像／音声認識回路１８にいくつかの特定の映像を格納しておき、カメラ１１からの映像信号Ａからこれら格納されている特定の映像以外の映像が認識されると、あるいはこの特定の映像が認識されると、記録媒体１３を記録動作させるようにしてもよい。音声についても同様であり、上記のマイクロホンから音声が出力されると、画像／音声認識回路１８はこれを認識して記録媒体１３を記録動作させるようにしてもよいし、いくつかの特定の音声パターンを格納しておき、これら特定の音声パターン以外のパターンの音声がマイクロホンから出力されると、あるいはこれら特定の音声パターンがマイクロホンから出力されると、画像／音声認識回路１８はこれを認識して記録媒体１３を記録動作させるようにしてもよい。
【０１１６】
このようにして、この第９の実施形態では、画像／音声認識回路１８の認識結果に応じて記録媒体１３の書込みが行なわれるので、記録媒体１３が必要とする記憶容量を削減できるし、また、長時間の映像が記録媒体１３に保存できる。
【０１１７】
このように記録媒体１３に保存された情報は、システムコントローラ２３からの制御信号により、読み出されて受信端末２０に配信される。従って、視聴者は、必要なときに配信要求をすることにより、記録媒体１３に保存されている情報を取得してディスプレイ２２に表示させることができる。
【０１１８】
図１４は本発明による映像配信システムの第１０の実施形態を示すブロック図であって、１２ｃはエンコーダ、１３ａは記録媒体であり、図１に対応する部分には同一符号を付けて重複する説明を省略する。
【０１１９】
同図において、この第１０の実施形態は、図１に示した第１の実施形態に対し、エンコーダ１２ｃと記録媒体１３ａとが追加されたものであり、また、切替スイッチ１４は、エンコーダ１２ａの出力と記録媒体１３，１３ａの出力とのいずれか１つを選択するものである。
【０１２０】
即ち、受信端末２０のディスプレイ２２で映像の表示の仕方（画像再生の態様）としては、上記のように、低画質の映像や高画質の映像の通常再生（通常表示）ばかりでなく、スロー再生，静止画再生，高速再生などの種々の態様が考えられるものであり、これらを可能とするためには、配信されるビットストリームとして、かかる画像再生の態様に適した処理方法でエンコードされていなければならない（例えば、上記のように、ＭＰＥＧに準拠した処理方法でエンコードされたビットストリームから静止画再生する場合には、良好な静止画再生がなされるとは限らない）。この第６の実施形態では、このことからして、種々の処理方法でエンコードされたビットストリームが得られるようにしたものである。
【０１２１】
エンコーダ１２ｃはエンコーダ１２ａ，１２ｂとは異なるエンコード処理を行なうものであって、このエンコーダ１２ｃで生成された高画質ビットストリームＢHは、記録媒体１３ａに蓄積される。切替スイッチ１４は、通常、エンコーダ１２ａの低画質ビットストリームＢLを選択して出力するが、受信端末２０のシステムコントローラ２３から再送要求を受けたときには、記録媒体１３，１３ａに保存された高画質ビットストリームのうち最適なエンコード処理が行なわれたたビットストリームを選択して出力する。
【０１２２】
なお、ここでは、低画質用のエンコーダ１２ａ以外の互いに異なるエンコード処理をするエンコーダを２個設けたものとしたが、そのようなエンコーダを３個以上設けるようにしてもよい。
【０１２３】
このように、この第１０の実施形態では、カメラ端末１０内で複数のエンコードを行なうことにより、再送要求に応じて最適なエンコード処理がなされたビットストリームを選択できる。スロー再生や拡大再生のように、画像再生の形態に応じて最適なエンコード方法が異なるものであって、この第１０の実施形態では、画像再生の形態毎に夫々に最適な方法でエンコード処理を行なうエンコーダとこれらから出力されるビットストリームを蓄積する記録媒体が設けられており、これらエンコーダが同じカメラ１１からの映像信号を同時にエンコードして記録媒体に蓄積するものであるから、受信端末２０からの再生形態を指示した再送要求に対して、常に指示される再生形態に最適な方法でエンコード処理されたビットストリームの配信を受けることができ、再生形態にかかわらず、視聴者は常に鮮明な再生画像を受け取ることが可能である。
【図面の簡単な説明】
【０１２４】
【図１】本発明による映像配信システムの第１及び第４の実施形態を示すブロック図である。
【図２】図１に示す第１の実施形態での動作を示すタイミング図である。
【図３】本発明による映像配信システムの第２の実施形態を示すブロック図である。
【図４】本発明による映像配信システムの第３の実施形態を示すブロック図である。
【図５】図４におけるプロセッサの処理動作を示すタイミング図である。
【図６】本発明による映像配信システムの第５の実施形態の動作を示す図である。
【図７】本発明による映像配信システムの第６の実施形態を示すブロック図である。
【図８】図７に示す第６の実施形態の動作を示すタイミング図である。
【図９】図７における受信端末のディスプレイで表示される画面の一具体例を示す図である。
【図１０】本発明による映像配信システムの第７の実施形態を示すブロック図である。
【図１１】図１０に示す第７の実施形態での低画質用のエンコーダで得られるビットストリームによる表示画像の説明図である。
【図１２】本発明による映像配信システムの第８の実施形態での表示される映像の説明図である。
【図１３】本発明による映像配信システムの第９の実施形態を示すブロック図である。
【図１４】本発明による映像配信システムの第１０の実施形態を示すブロック図である。
【図１５】従来の映像配信システムの一例を示すブロック図である。
【符号の説明】
【０１２５】
１０  カメラ端末
１１  カメラ
１２ａ〜１２ｃ  エンコーダ
１３，１３ａ  記録媒体
１４  ビットストリーム切替スイッチ
１５  プロセッサ
１６  メモリ
１６ａ，１６ｂ  エンコードプログラム
１７  信号処理部
１８  画像／音声認識回路
２０  カメラ端末
２１  デコーダ
２２  ディスプレイ
２３  システムコントローラ
３０〜３２  ネットワーク
４０，４１  ローカルバス
５０  撮影範囲
５１  抽出範囲
５２，５３  人物
【図１】
0004695669.tif 000002
【図２】
0004695669.tif 000003
【図３】
0004695669.tif 000004
【図４】
0004695669.tif 000005
【図５】
0004695669.tif 000006
【図６】
0004695669.tif 000007
【図７】
0004695669.tif 000008
【図８】
0004695669.tif 000009
【図９】
0004695669.tif 000010
【図１０】
0004695669.tif 000011
【図１１】
0004695669.tif 000012
【図１２】
0004695669.tif 000013
【図１３】
0004695669.tif 000014
【図１４】
0004695669.tif 000015
【図１５】
0004695669.tif 000016