(57)【要約】  本発明は、少なくとも二つの異なる画像データ集合を作成することであって各画像データ集合が個々の画像のシーケンスを包含することと、少なくとも二つの画像データ集合の画像をタイムスライス多重化法により表示用高フレームレート（ＨＤＦＲ）で物理ディスプレイに表示することと、物理ディスプレイを含むシーンの少なくとも二つの映像ストリームを作成することであって、少なくとも二つの画像データ集合の一つの画像の表示と同時に捕捉される映像フレームから成る少なくとも一つの映像ストリームが、標準放送用フレームレート（ＳＢＦＲ）の整数倍であるスローモーション用フレームレート（ＳＭＦＲ）で作成されることと、映像ストリームを標準放送用フレームレート（ＳＢＦＲ）で視聴者の部分集合へ送信することとを包含する、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法およびシステムに関する。
2021532638.tif 000002
【特許請求の範囲】
【請求項１】
物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法であって、
少なくとも二つの異なる画像データ集合を作成することであって、各画像データ集合が個々の画像のシーケンスを包含することと、
前記少なくとも二つの画像データ集合の前記画像をタイムスライス多重化法により表示用高フレームレート（ＨＤＦＲ）で前記物理ディスプレイに表示することと、
前記物理ディスプレイを含むシーンの少なくとも二つの映像ストリームを作成することであって、前記少なくとも二つの画像データ集合の一方の画像の表示と同時に捕捉される映像フレームから成る少なくとも一つの映像ストリームが、標準放送用フレームレート（ＳＢＦＲ）の整数倍であるスローモーション用フレームレート（ＳＭＦＲ）で作成されることと、
前記映像ストリームを前記標準放送用フレームレート（ＳＢＦＲ）で前記視聴者の部分集合へ送信することと、
を包含する方法。
【請求項２】
前記少なくとも二つの画像データ集合の他の一つの画像の表示と同時に捕捉される映像フレームから成る前記少なくとも一つの他の映像ストリームが、標準放送用フレームレート（ＳＢＦＲ）の整数倍である異なるフレームレートで作成される、請求項１に記載の方法。
【請求項３】
ｍ個の画像データ集合からｎ個の映像ストリームが作成され、スローモーション係数ｆ（ｎ）の倍数により規定されるフレームレートと前記標準放送用フレームレート（ＳＢＦＲ）とにおいて、ｎ，ｍが２以上の整数であってｍがｎより大きいか等しく、前記スローモーション係数ｆ（ｎ）が１以上の整数であって前記スローモーション係数ｆ（ｎ）の少なくとも一つが２以上である、請求項２に記載の方法。
【請求項４】
方程式
【数１】
2021532638.tif 000007
により規定される録画用高フレームレート（ＨＲＦＲ）で前記映像フレームが捕捉され、前記ＳＢＦＲが前記標準放送用フレームレートであってｆ（ｉ）が前記スローモーション係数である、請求項３に記載の方法。
【請求項５】
前記表示用高フレームレート（ＨＤＦＲ）が前記録画用高フレームレート（ＨＲＦＲ）の整数倍であり、
【数２】
2021532638.tif 000008
においてｆＤが１以上の整数である、請求項４に記載の方法。
【請求項６】
前記少なくとも二つの映像ストリームが、直接視聴者と任意で放送視聴者により視聴される画像データ集合（Ｍ）と、前記放送視聴者のみに視聴される少なくとも一つの画像データ集合（Ｐ１，Ｐ２，Ｐ３）とを包含する、請求項５に記載の方法。
【請求項７】
前記ｆＤが２以上であって、前記放送視聴者のみに視聴される前記画像データ集合（Ｐ１，Ｐ２，Ｐ３）の画像の付加的な補完／反転画像が前記物理ディスプレイに表示されるが映像ストリームでは捕捉されない、請求項６に記載の方法。
【請求項８】
前記ｆＤが３以上であって、直接視聴者に視聴される前記画像データ集合（Ｍ）の付加的画像が前記物理ディスプレイに表示されるが前記映像ストリームでは捕捉されない、請求項７に記載の方法。
【請求項９】
前記画像データ集合（Ｍ）の前記付加的な非捕捉画像が、前記画像データ集合（Ｍ，Ｐ１，Ｐ２，Ｐ３）の前記捕捉画像よりも高い強度で前記物理ディスプレイに表示される、請求項８に記載の方法。
【請求項１０】
前記標準放送用フレームデータ（ＳＢＦＲ）が２５Ｈｚ（毎秒５０フレーム）、５０Ｈｚ（毎秒５０フレーム）、または６０Ｈｚ（毎秒６０フレーム）である、請求項１から請求項９のいずれか一項に記載の方法。
【請求項１１】
前記物理ディスプレイがＬＥＤディスプレイである、請求項１から請求項１０のいずれか一項に記載の方法。
【請求項１２】
前記ＬＥＤディスプレイが看板または掲示板である、請求項１１に記載の方法。
【請求項１３】
シーンがスポーツイベントまたはエンターテインメントイベントの一部である、請求項１から請求項１２のいずれか一項に記載の方法。
【請求項１４】
物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するためのシステムであって、
少なくとも一つの物理ディスプレイ（１２，１３）と、
少なくとも第１および第２の画像データ集合をタイムスライス多重化法で前記物理ディスプレイ（１２，１３）に表示するための制御インタフェース（１７）と、
前記第１画像データ集合に対応して前記物理ディスプレイ（１２，１３）を含むシーンを録画するための少なくとも一つのカメラ（Ｃ１，Ｃ２，Ｃ３，Ｃ４）と、
前記少なくとも一つのカメラ（Ｃ１，Ｃ２，Ｃ３，Ｃ４）により提供される映像データから少なくとも二つの映像ストリームを作成するための手段であって、前記少なくとも二つの画像データ集合の一つの画像の表示と同時に捕捉される映像フレームから成る少なくとも一つの映像ストリームが、標準放送用フレームレート（ＳＢＦＲ）の整数倍であるスローモーション用フレームレート（ＳＭＦＲ）で作成される、手段と、
前記映像ストリームを前記標準放送用フレームレート（ＳＢＦＲ）で前記視聴者の異なる部分集合へ送信するための手段と、
を包含するシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法およびシステムに関する。
【背景技術】
【０００２】
発光ダイオード（ＬＥＤ）ディスプレイのようなアクティブディスプレイは、情報または広告を視聴者に伝えるのに掲示板または看板で広く使用されている。一般的に、このようなディスプレイはスポーツまたはエンターテインメントのイベントで使用される。結果的に、このようなディスプレイは、テレビ放送（ＴＶ）、または多種多様な視聴者に向けられた映像ストリームに登場することが多く、一般的な例は、母国語が異なるか文化的背景が異なっている異なる国々の視聴者である。これらのディスプレイに示される情報／広告をこのような視聴者による特定の部分集合をターゲットとしたものにするため、テレビ放送または映像ストリームを介してディスプレイを見る視聴者の間でディスプレイのコンテンツを変化させる方法がすでに開発されている。例えば、特許文献１には、広告チャネルでのターゲット化広告をグループ分けするための方法および装置が記載されている。
【０００３】
より優れたアプローチは、映像シーケンスの一体的部分として広告を挿入すること、例えば、映像シーケンスに示される掲示板に広告を表示することである。特許文献２には、映像における掲示板の自動的な電子的置換のための装置が記載されている。同様に、特許文献３には、テレビ放送システムにおける使用のための電子掲示板置換システムが記載されている。しかしながら、良好な印象を作り出して構成後の画像に自然な見た目を維持するため、広告は映像シーケンスの残りのシーンに合わせて適応化される必要がある。一般的に、このアプローチは良好な品質という結果を得るのに人の介入を必要とする。概して、これらの電子的またはソフトウェアベースのアプローチは、掲示板を部分的に覆い隠す動的シーンが放送方式に含まれる時にはとりわけ、視聴者体験に関する限り満足できるものではないことが多い。
【０００４】
特許文献４には、テレビ放送の視聴者の間でのディスプレイのコンテンツの変化を可能にする方法が記載されている。この先行技術文献には、単一の映像ディスプレイに同時に表示される幾つかの映像ストリームの一つを多数の視聴者が視聴することを可能にする方法が記載されている。しかしながら、ディスプレイに示される映像ストリームの一つに同期化されたシャッタ付き視聴メガネを視聴者が使用する必要がある。このようなシステムは、ディスプレイ自体のテレビ放送には適していない。
【０００５】
これらの問題は、特許文献５に記載されている解決法によって緩和される。この先行技術文献には、テレビ放送のシーンの一部として登場する物理ディスプレイのコンテンツをテレビ放送の視聴者の間で変化させるための方法およびデバイスが記載されている。表示コンテンツは、イベント、例えばスポーツイベントに参加している視聴者に向けられた直接視聴者用表示画像と、テレビ視聴者に向けられた放送視聴者用表示画像とを包含する。物理ディスプレイは時間インターリーブされた二つ以上のデータコンテンツインスタンスを表示し、放送視聴者のための表示画像は、このデータコンテンツインスタンスの一つを示すように同期化される。看板のような物理ディスプレイを含むイベントのシーンを録画するのにカメラが使用され、カメラと看板とを同期化するのに制御システムが使用される。異なるデータコンテンツインスタンスをすべて包含してカメラにより録画される映像ストリームは、物理ディスプレイに示される特定のデータコンテンツインスタンスに対応する個々のチャネルを作成する逆多重化装置へ供給される。特許文献５に記載されている方法およびシステムでは、看板に表示される各画像を捕捉するのにカメラが必要とされるので、テレビまたは映像放送で使用される通常の（標準的な）フレームレートよりもはるかに高いフレームレートでの録画を可能にする専用のカメラ技術が必要である。また、個々の映像チャネルを作成する逆多重化装置の計算能力はこれに対応して高くなければならない。ゆえに、特許文献５に記載されている方法は新たな専用の機器を必要とし、スポーツおよびエンターテインメントのイベントでこのような技術を確立するための対応の費用は高い。また、特許文献５の方法では、画像が示される時間間隔が画像コンテンツを視聴者が意識的に認知するには短すぎる時でも、放送視聴者のための専用画像の挿入は看板の不安定なちらつきを生じるので、イベントの直接視聴者の視聴体験が低下する。
【０００６】
特許文献６および特許文献７において、本願の出願人は、例えばスポーツイベント中の競技場での物理ディスプレイのライフ視聴者と、放送視聴者、例えば異なる国々でインターネットまたはテレビ映像ストリームを介してイベントを見る視聴者とを含む異なる視聴者集合へ、物理ディスプレイの代替画像コンテンツを送信するための改良方法およびシステムを開示している。
【０００７】
特許文献６に記載されている改良は、タイムスライス多重化法で物理ディスプレイに表示される少なくとも二つの異なる画像データ集合を作成することと、物理ディスプレイを含むシーンの一つ以上の映像ストリームを作成することとに存し、映像ストリームは、物理ディスプレイに表示される対応の画像データ集合の画像の表示と同時に捕捉される映像フレームから成るのに対して、少なくとも一つの画像データ集合は画像と反転画像とのシーケンスを包含する。画像と反転画像とのシーケンスを包含する画像データ集合は、放送視聴者へ送信されることが想定される画像データを含む。放送映像ストリームには含まれず物理ディスプレイのみに提示される対応の反転画像は、結果的に、競技場にいる直接視聴者の視聴体験への妨害を最小にする。
【０００８】
特許文献７は、国内および国際スポーツイベントで既に使用されている既存のカメラおよび処理技術に組み込まれうるように、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法およびシステムを具現することに関する。タイムスライス多重化法で物理ディスプレイに表示される少なくとも二つの画像データ集合の画像は、通常は標準的な録画／表示用フレームレート（例えば５０Ｈｚの標準フレームレート）の整数倍である高いフレームレートで表示される。標準フレームレートのカメラ集合でシーンが録画され、放送される異なる映像ストリーム集合の画像を集合の各カメラが録画するようにカメラ集合が起動される。別の実施形態では、高フレームレートのカメラによりシーンが録画され、対応する高フレームレートの映像信号が、高フレームレート映像信号のための入力と複数の出力とを有する中間処理ユニットへ送信される。高フレームレート映像信号の連続フレームを中間処理ユニットの連続映像出力へ周期的に送信することにより、高フレームレート映像信号が多数の標準フレームレート映像信号に変換される。この方法では、結果的に、標準フレームレートを有する一つ以上の映像ストリームが映像出力の各々で得られる。
【０００９】
多くのスポーツイベントでは、あるシーンがスローモーションで放送視聴者に提示される、つまり標準フレームレートの倍数である高いフレームレートでシーンが録画されるが、映像ストリームは標準フレームレートで視聴者へ送信される。例えば、１５０Ｈｚの高フレームレートで録画されるが５０Ｈｚの標準フレームレートで再生されるシーンは、放送視聴者により視聴される際に３倍スローモーションとなる。物理ディスプレイの代替画像コンテンツを異なる放送視聴者へ送信するためのこの方法において、高フレームレートのスローモーションカメラによるシーンの録画は、特定の映像ストリームの放送視聴者を想定していない物理ディスプレイの画像フレーム、例えば直接視聴者を想定した画像データ集合または異なる映像ストリームを想定した画像データ集合の画像フレームをスローモーションカメラが捕捉する結果となる。ゆえに、出願人による特許文献６および特許文献７に記載されている方法では、スローモーションで録画されるシーンの一部である物理ディスプレイに表示される画像は、スローモーションで使用されるより高い録画周波数に同期化されており、その結果、例えば補完／反転画像を含むより複雑な画像シーケンスも採用される時にはとりわけ、今日利用可能なＬＥＤディスプレイ技術の限界に近い表示用高フレームレートとなる。それゆえ、出願人の特許文献６および特許文献７に記載されている方法により作成される各映像ストリームをスローモーションレートで送信することは必ずしも実行可能ではない。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】米国特許出願公開第２００２／０１４４２６３号明細書
【特許文献２】英国特許出願公開第２３０５０５１号明細書
【特許文献３】英国特許出願公開第２３０５０４９号明細書
【特許文献４】国際公開第２００５／１１２４７６号
【特許文献５】国際公開第２００７／１２５３５０号
【特許文献６】欧州特許出願公開第２０１８／０５２１７７号明細書
【特許文献７】欧州特許出願公開第２０１８／０５２１７８号明細書
【発明の概要】
【発明が解決しようとする課題】
【００１１】
それゆえ、本発明の元になった技術的問題は、直接視聴者の視聴体験への妨害を最小にして放送視聴者の少なくとも一つの部分集合へのスローモーション映像ストリームの送信を可能にする、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法およびシステムを提供することである。本発明の方法およびシステムは、放送視聴者の一つの部分集合への標準フレームレート映像ストリームと、放送視聴者の異なる部分集合へのスローモーション映像ストリームとを、一つ以上のカメラにより録画される同じ映像信号の中に含めることも可能にする。
【課題を解決するための手段】
【００１２】
この技術的問題は請求項１の方法により解決される。本発明の方法の好適な実施形態は従属請求項の主題である。
【００１３】
したがって、本発明は、少なくとも二つの異なる画像データ集合を作成することであって、各画像データ集合が個々の画像のシーケンスを包含することと、少なくとも二つの画像データ集合の画像をタイムスライス多重化法により表示用高フレームレート（ＨＤＦＲ）で物理ディスプレイに表示することと、物理ディスプレイを含むシーンの少なくとも二つの映像ストリームを作成することであって、少なくとも一つの映像ストリームが、標準放送用フレームレート（ＳＢＦＲ）の整数倍であるスローモーション用フレームレート（ＳＭＦＲ）で少なくとも二つの画像データ集合の一つの画像を表示するのと同時に捕捉される映像フレームから成ることと、映像ストリームを標準放送用フレームレート（ＳＢＦＲ）で視聴者の部分集合へ送信することとを包含する、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法に関する。スローモーション映像ストリームと見なされるには、整数倍は少なくとも２でなければならない。スローモーション映像ストリームに対応する画像データ集合の物理ディスプレイに表示される画像の数も、少なくともこの整数倍だけ増加されなければならない。
【００１４】
本発明によれば、物理ディスプレイに示される少なくとも二つの異なる画像データ集合は、静止画像または動画像、例えば映画を包含する。物理ディスプレイに静止画像が示される時に、一つの画像データ集合の画像は本質的に同一である。一つの画像データ集合が映画を包含する時には、動画シーケンスが表示されるように一つの画像データ集合の画像は互いに異なっている。したがって、以下の説明では、映像ストリームとテレビ放送の語は互換的に使用され、付加的な音声データを伴うか伴わない静止画像、動画像、映像を含む画像データを視聴者へ送信するための様々な方式を含むことが想定される。
【００１５】
本発明によれば、一般的にはビデオカメラでシーンを録画することにより、物理ディスプレイを含むシーンの少なくとも一つの映像ストリームが作成される。少なくとも二つの画像データ集合の一つの画像を物理ディスプレイに表示するのと同時に捕捉される映像フレームから映像ストリームが成るように、ビデオカメラが起動される。ゆえに、本発明の一実施形態によれば、文献ＷＯ２００７／１２５３５０に記載の方法とは対照的に、ビデオカメラは、物理ディスプレイに示されるすべての画像データ集合の画像をすべて捕捉する必要はなく、物理ディスプレイに示される画像データ集合の一つの画像を捕捉するだけでよい。したがって、本発明の方法で使用されるビデオカメラの最低フレームレートは、一つの画像データ集合のフレームレートと同じ高さであればよい。結果的に、当該技術で周知の従来のビデオカメラまたはスローモーションカメラが本発明の方法に採用されうる。
【００１６】
本出願の意味において、「画像データ集合」は特定の視聴者部分集合に示される画像（静止画像でも映画でも）に対応する。本発明によれば、少なくとも二つの画像データ集合が物理ディスプレイに示されるのに対して、二つの画像データ集合のうち一つの集合を包含する少なくとも一つの映像ストリームが作成される。最も単純な形において、本発明の方法は、イベントの直接視聴者、例えばスポーツまたはエンターテインメントイベントに実際に参加している視聴者を想定した一つの画像データ集合を包含する。第２の画像データ集合は映像ストリームの視聴者に向けられたものである。より大まかに記すと、物理デバイスに示される画像データ集合が直接視聴者のための画像データを含む場合には、作成される映像ストリームの数は画像データ集合の数から１を引いたものに対応する。
【００１７】
本発明の一実施形態において、「画像データ集合」は黒色画像、つまり物理ディスプレイに画像が表示されない時間間隔も含みうる。例えば、イベントの直接視聴者あるいはサッカーまたはバスケットボール選手のようなイベントの参加者が、物理ディスプレイに示されるコンテンツにより、つまり本実施形態では映像スクリーンを介して放送視聴者にのみ送信される広告により、注意散漫にされない場合には、これが望ましい。
【００１８】
本発明の別の実施形態において、「画像データ集合」は、従来のソフトウェアベースのキーイング技術を使用して映像ストリームの物理ディスプレイのエリアに所望の広告を挿入するために、映像ストリーム内の物理ディスプレイの場所を特定するのに使用されうるモノクロカラーのフレームを包含しうる。
【００１９】
直接視聴者のための専用の画像データ集合が必要とされない本発明のまた別の実施形態では、映像スクリーンの数は、物理ディスプレイに示される画像データ集合の数に対応する。結果的に、物理デバイスに表示される各画像データ集合について映像ストリームが作成される。本発明は最新のビデオカメラ技術を使用して具現されうるが、各映像ストリームに専用のビデオカメラが使用される。結果的に、本発明の方法を具現する時に、すべての視聴者部分集合のための画像データをすべて包含する単一の映像ストリームの逆多重化は必要とされない。
【００２０】
本発明の方法の好適な実施形態によれば、少なくとも二つの画像データ集合の一つの画像の表示と同時に捕捉される映像フレームから成る映像ストリームは、物理デバイスでの少なくとも一つの画像データ集合の画像の表示と、この画像データ集合と関連する映像ストリームの映像フレームの捕捉とを同時に起動させる同期化信号を作成することにより実現される。例えば、特定の画像データ集合の特定の画像の表示を起動させるトリガインパルスが物理ディスプレイの画像バッファへ送られ、同時インパルスがビデオカメラへ送られてビデオカメラを起動させ、シーンの映像フレームを捕捉する。
【００２１】
「標準放送用フレームレート」の語は、一つのチャネル、つまり物理的な映像出力の一つからの映像出力が送信される際のフレームレートを表す。一実施形態において、標準フレームレートは、映像信号が視聴者へ送信される際のフレームレートに対応する。
【００２２】
本発明の方法では、画像データ集合の数と映像ストリームの数と個々の映像ストリームのスローモーション速度とが互いから独立して変化して、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法が、帯域幅、物理ディスプレイのスイッチング時間、カメラユニットの録画速度等のような技術的制約に合わせて容易に適応化されうるので、出願人のＰＣＴ／ＥＰ２０１８／０５２１７７およびＰＣＴ／ＥＰ２０１８／０５２１７８に記載されている方法の容易な適応化が可能である。
【００２３】
とりわけ、映像ストリームは異なるフレームレートで捕捉されうる。それゆえ、一実施形態では、少なくとも二つの画像データ集合のうち他の集合の画像の表示と同期的に捕捉される映像フレームから成る少なくとも一つの他の映像ストリームは、標準放送用フレームレート（ＳＢＦＲ）の整数倍である異なるフレームレートで作成される。このケースで、この他の映像ストリームの整数倍は１である、つまり他の（第２）映像ストリームが標準放送用フレームレートで録画されるのに対して第１映像ストリームはスローモーションストリームの少なくとも２倍である。
【００２４】
大まかに記すと、本発明の方法によれば、ｎ個の映像ストリームがｍ個の画像データ集合から作成され、ｎ，ｍは２以上の整数であって、ｍはｎより大きいか等しい。したがって、少なくとも二つの映像ストリームが作成されるが、物理ディスプレイに示されるすべての画像データ集合が対応の映像ストリームになる必要はない。映像ストリームは、スローモーション係数ｆ（ｎ）と標準放送用フレームレート（ＳＢＦＲ）との倍数により規定されるフレームレートで捕捉され、スローモーション係数ｆ（ｎ）は１以上の整数であって、スローモーション係数ｆ（ｎ）の少なくとも一つは２以上である。
【００２５】
好適な実施形態によれば、方程式
【数１】
2021532638.tif 000003
により規定される録画用高フレームレート（ＨＲＦＲ）で映像フレームが捕捉され、ＳＢＦＲは標準放送用フレームレートであり、ｆ（ｉ）は個々の映像ストリームのスローモーション係数である。本発明によれば、少なくとも二つの映像ストリームが作成され、そのうち少なくとも一つは少なくとも二つのスローモーション係数を持つスローモーションストリームであり、本発明の方法で最低の録画用高フレームレート（ＨＲＦＲ）は標準放送用フレームの３倍である。すべてのストリームを録画するのに一つのカメラユニットのみが使用される場合には、カメラユニットは録画用高フレームレート（ＨＲＦＲ）が可能でなければならない。異なるストリームを録画するのにより多くのカメラが採用される場合には、カメラ自体の録画用フレームレートがこれに対応して低くなりうる。
【００２６】
録画対象の画像データが物理ディスプレイに提示される際の表示用高フレームレート（ＨＤＦＲ）は、録画用高フレームレート（ＨＲＦＲ）と少なくとも同じ高さである。大まかに記すと、表示用高フレームレート（ＨＤＦＲ）は録画用高フレームレート（ＨＲＦＲ）の整数倍であって、
【数２】
2021532638.tif 000004
であり、表示係数ｆＤは１以上の整数である。表示係数ｆＤ＝１では、物理ディスプレイに表示されるすべての画像データが録画される。より高い表示係数を使用すると、付加的な画像、または録画されない付加的な画像集合の導入も可能になる。
【００２７】
好適な実施形態において、少なくとも二つの映像ストリームは、直接視聴者により、そして任意で放送視聴者により視聴される画像データ集合（Ｍ）と、放送視聴者のみに視聴される少なくとも一つの画像データ集合（Ｐ１，Ｐ２，Ｐ３）とを包含する。直接視聴者の視聴体験を改善するため、表示係数ｆＤは少なくとも２以上に設定される。こうして放送視聴者のみに視聴される画像データ集合（Ｐ１，Ｐ２，Ｐ３）の画像の付加的な補完／反転画像が物理ディスプレイに表示されることが可能である。これらの付加的な反転画像は映像ストリームでは捕捉されない。放送視聴者のみにより視聴される画像データ集合（Ｐ１，Ｐ２，Ｐ３）と対応の反転画像とは、画像が直接視聴者により意識的に視聴されるには短すぎる時間にのみ表示される。画像と反転画像との急速シーケンスは、順序に関係なく、ニュートラル／グレーの合成画像となるので、画像と対応の反転画像とを組み合わせると、直接視聴者の視聴体験に対する妨害を最小にする。
【００２８】
一実施形態において、表示係数ｆＤは３以上であって、直接視聴者により視聴される画像データ集合（Ｍ）の付加的画像が物理ディスプレイに表示されることを可能にする。これらの付加的画像は映像ストリームで捕捉されず、直接視聴者により視聴される画像データと直接視聴者により視聴されることが想定されていない画像集合との正味の強度割当量を高める。画像データ集合（Ｍ）の付加的な非捕捉画像が、画像データ集合（Ｍ，Ｐ１，Ｐ２，Ｐ３）の捕捉画像よりも高い強度で物理ディスプレイに表示される場合には、この割当量がさらに高くなる。
【００２９】
一実施形態において、標準放送用フレームレート（ＳＢＦＲ）は２５Ｈｚ（毎秒５０フレーム（ｆｐｓ）、５０Ｈｚ（毎秒５０フレーム）、６０Ｈｚ（毎秒６０フレーム）である。しかしながら、スポーツイベントではとりわけ、１００Ｈｚ／ｆｐｓまたは１５０Ｈｚ／ｆｐｓのような高い標準フレームレートが採用されうる。
【００３０】
本発明は、少なくとも一つの物理ディスプレイと、少なくとも第１および第２の画像データ集合をタイムスライス多重化法で物理ディスプレイに表示するための制御インタフェースと、第１画像データ集合に対応して物理ディスプレイを含むシーンを録画するための少なくとも一つのカメラと、少なくとも一つのカメラにより提供される映像データから少なくとも二つの映像ストリームを作成するための手段であって、少なくとも二つの画像データ集合の一つの画像の表示と同時に捕捉される映像フレームから成る少なくとも一つの映像ストリームが、標準放送用フレームレート（ＳＢＦＲ）の整数倍であるスローモーション用フレームレート（ＳＭＦＲ）で作成される、手段と、映像ストリームを異なる視聴者部分集合へ標準放送用フレームレート（ＳＢＦＲ）で送信するための手段とを包含する、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するためのシステムにも関連する。
【００３１】
商用の映像放送機器が採用される時には、多くの標準ＳＤＩ出力は、カメラユニットにより捕捉されたＨＲＦＲ映像信号を送信するのに必要な帯域幅を提供しない。出願人のＰＣＴ／ＥＰ２０１８／０５２１７８に記載されているように、後続の映像ストリーム（映像チャネル）を中間処理ユニットの異なる物理的出力に送るのに従来の中間処理ユニット（基底帯域プロセスユニット）が採用されうる。
【００３２】
従来の専門的な映像放送技術では、カメラユニットはカメラ制御ユニット（ＣＣＵ）により制御され、カメラユニットからの映像信号はＣＣＵへ直接送信される。本発明のこの実施形態において、カメラからの映像信号は、カメラユニットとＣＣＵとの間に配置される中間処理ユニットへ送信される。中間処理ユニットは、カメラからの高フレームレート映像信号のための入力と複数の映像出力とを有する少なくとも一つのコネクトユニットを包含し、この複数の映像出力の数は少なくとも、高フレームレート映像信号が作成される際の標準フレームレートの整数倍に対応する。中間処理ユニットでは、高フレームレート入力映像信号の連続フレームを映像出力の整数倍の連続映像出力へ周期的に送信することにより、高フレームレート映像信号が標準フレームレート映像信号に変換されうる。したがって、標準フレームレートに対応する時間周期内での高フレームレート映像信号の各フレームは同じ物理的映像出力へ送信される。それゆえ、標準フレームレートの少なくとも一つの映像ストリームを映像出力の整数倍の一つで得ることが可能である。
【００３３】
本発明の特に好適な実施形態において、中間処理ユニットは、商用の基底帯域プロセスユニットである。
【００３４】
商用の基底帯域プロセスユニットは、高解像度（例えば４Ｋ）および／または高フレームレート（例えば１００Ｈｚ，１５０Ｈｚ，２００Ｈｚ，４００Ｈｚ，８００Ｈｚ等）の入力映像ストリームをカメラユニットから受信するための映像入力を有し、入力映像ストリームを二つ以上の３Ｇ−ＳＤＩまたはＨＤ−ＳＤＩの映像ストリームに変換するための映像プロセッサを包含する。したがって、基底帯域プロセスユニットは、標準的な３Ｇ−ＳＤＩおよび／またはＨＤ−ＳＤＩ出力として構成される対応数の映像出力を包含し、例えば、外部放送バンの標準的なＳＤＩ機器あるいはスポーツスタジアムで既に利用可能なＳＤＩ機器に４Ｋカメラユニットを接続することが可能である。
【００３５】
従来のＳＤＩ機器の帯域要件を満たすため、商用の中間処理ユニットは一般的に、４Ｋの高フレームレート映像信号の連続映像フレームが周期的に中間処理ユニットの連続的な物理的映像出力へ送信されるように構成されていることが意外にも判明した。例えば、５０Ｈｚ標準フレームレート映像信号の単一フレームの時間間隔中に録画される２００Ｈｚの高フレームレート映像信号の４個のフレームの各々は、中間処理ユニットの連続する４個の個別映像出力へ送信される。したがって、好適な実施形態において、基底帯域プロセスユニットは、少なくとも一つの４Ｋの高フレームレート映像入力と、少なくとも３Ｇ−ＳＤＩおよび／またはＨＤ−ＳＤＩの映像出力とを包含する。
【００３６】
出力の数は上述した整数倍より多いことに注意しなければならない。例えば、中間処理ユニットは、各映像信号について二つの物理出力を包含し、例えば各フレームが二つの映像出力へ移送されて、異なる映像処理経路を介して同じ映像信号が処理されることを可能にする。
【００３７】
ある実施形態において、基底帯域プロセスユニットはカメラユニットとカメラ制御ユニットとの間に配置される。通常、プロ用のカメラユニットは、その専用カメラ制御ユニット（ＣＣＵ）により制御される。ＨＤカメラユニットは通常、専用のＨＤ−ＣＣＵを有し、同様に、４Ｋカメラユニットは専用の４Ｋ−ＣＣＵを有する。低コストおよび相互運用性のため、ソニー株式会社のようなカメラ製造会社は、第１コネクトユニットおよび第２コネクトユニットを包含して「基底帯域プロセスユニット（ＢＰＵ）」と表される中間処理ユニットを開発した。第１コネクトユニットは、空間方向および／または時間方向の第１解像度を有するカメラユニットに接続される。第２コネクトユニットは、空間方向および／または時間方向の第２解像度を有するカメラ制御ユニットに接続される。中間処理ユニットは、第１コネクトユニットと第２コネクトユニットとの間に介在配置される情報ブリングユニットを包含する。情報ブリッジユニットにより、カメラユニットとカメラ制御ユニットとの間の情報交換が橋渡しされる。例えば、情報ブリッジユニットは、カメラユニットから第１コネクトユニットへの第１解像度入力の映像信号を第２解像度の映像信号に変換し、第２コネクトユニットへ信号を出力する。このケースで、情報ブリッジユニットは、カメラユニットから第１コネクトユニットへの第１解像度入力の映像信号が第２解像度の映像信号に変換される前に、第１解像度の映像信号に対するカメラ信号処理を実行しうる。結果的に、４Ｋ解像度カメラをＨＤカメラ制御ユニットに接続することが可能である。
【００３８】
一般的な中間処理ユニットは米国特許のＵＳ９，４１３，９２３Ｂ２に記載されている。このような中間処理ユニットは、例えば基底帯域プロセスユニットＢＰＵ４０００またはＢＰＵ４８００としてソニー株式会社により商品化されている。本質的に、これらソニーのデバイスは、ＨＤカメラ制御ユニットによる４Ｋカメラユニットの作動と、ＳＤＩ出力を介した高フレームレート４Ｋ信号の送信とを可能にする。ＳＤＩチャネルであれば、高フレームレート４Ｋ信号の帯域幅要件を満たさないので、ＢＰＵは、高フレームレート４Ｋを送信するため上記のように幾つかのＳＤＩ出力の組み合わせを可能にする。
【００３９】
他の会社も同様の機器を提供している。例えばカナダのモントリオールのＧｒａｓｓ  Ｖａｌｌｅｙ（グラスバレー）により商品化されたＸＣＵ  ＵＸＦ／ＸＦファイバベースステーションも、本発明のプロセスに同じく使用されうる。
【００４０】
したがって、本発明は、上記の方法において、カメラユニットからの高解像度および／または高フレームレートの映像信号のための入力を有する少なくとも第１のコネクトユニットと、高解像度および／または高フレームレートの入力映像信号を、二つ以上、例えば四つ以上の３Ｇ−ＳＤＩまたはＨＤ−ＳＤＩ映像ストリ−ムに変換するための映像プロセッサと、少なくとも二つの３Ｇ−ＳＤＩおよび／またはＨＤ−ＳＤＩ映像出力とを包含する、４Ｋ基底帯域プロセスユニットのような中間処理ユニットの使用も対象とする。
【００４１】
好ましくは、中間処理ユニットはさらに、カメラ制御ユニット、例えばＨＤカメラ制御ユニットを接続するための少なくとも第２のコネクトユニットを包含する。
【００４２】
好ましくは、中間処理ユニットは、少なくとも８個、特に好ましくは少なくとも１６個の３Ｇ−ＳＤＩおよび／またはＨＤ−ＳＤＩ映像出力を包含する。いずれにしても、映像出力の数は、標準フレームレートを高フレームレートカメラユニットと関係付ける整数倍より大きいか等しい。
【００４３】
特に好ましくは、中間処理ユニットは、ソニーＢＰＵ４０００またはソニーＢＰＵ４８００のようなソニー４Ｋ基底帯域プロセスユニット、あるいはＸＣＵ  ＵＸＦ／ＸＦファイバベースステーションのようなグラスバレー社のファイバベースステーションである。
【００４４】
本発明の一実施形態では、物理ディスプレイに表示される少なくとも二つの画像データ集合のために少なくとも二つの映像ストリームが作成される。
【００４５】
別の好適な実施形態では、物理ディスプレイに表示される各画像データ集合について映像ストリームが作成される。
【００４６】
二つ以上の映像ストリームが作成される時には、これらの映像ストリームがＨＤ、４Ｋ、および／またはスローモーションコンテンツを含有する場合にはとりわけ、これらの映像ストリームを送信するための帯域幅要件は実質的に高くなる。しかしながら、本発明の方法では、映像ストリームに録画される物理ディスプレイのコンテンツのみにおいて映像ストリームが異なっており、録画されるシーンへのわずかではあるが何らかのモーション効果は、採用される高フレームレートカメラユニットのフレームレートに応じたある遅延を伴って異なる映像ストリームの対応フレームが録画されるという事実に起因する。したがって、異なる出力チャネルでのフレーム間の差分符号化のような従来の映像圧縮技術、あるいは全映像情報を含む一つの出力チャネルの映像信号を移送できる一方で、元のチャネル信号の再構成を可能にする差分データのみが他の映像チャネルへ送信されるモーション補償技術を使用することが可能である。送信されるデータの量を削減するために変換符号化のような従来の圧縮技術もこのチャネルに適用されうるので、「全」送信される映像チャネルそのものが必ずしも非圧縮映像信号である必要はない。
【００４７】
好ましくは、同期化信号は、例えば上記標準フレームレートなど、映像ストリームのフレームレートに対応するマスタクロックに基づく。映像または映画製作に使用される従来のフレームレートが採用されうる。例えば、５０ｐの映像ストリーム（毎秒５０のフルフレーム）が作成される場合には、５０Ｈｚのマスタクロックが採用されうる。
【００４８】
従来、マスタクロック信号は、直接的に、またはＣＣＵを介して、カメラユニットへ供給される。
【００４９】
多数の異なる映像出力を発生させるのに単一のカメラユニットのみが使用される本発明の実施形態において、物理ディスプレイに表示される画像データを受信して、カメラユニットが映像信号を録画する際の上記の高フレームレートに対応するレートでトリガ信号を発生させるインタフェースへ、マスタクロック信号が供給される。トリガ信号にしたがって画像データが物理ディスプレイに表示される。
【００５０】
各映像ストリームに専用カメラユニットが使用される別の好適な実施形態によれば、個々の画像データ集合の各々に専用のスレーブクロックを発生させるのにマスタクロックが使用される。各映像スクリーンに固有の遅延だけマスタクロックをシフトさせることにより、スレーブクロックが得られる。例えば、ｎ個の画像データ集合が物理デバイスに表示される場合には、Ｄｉ＝（ｎ−１）・Δｔの遅延でマスタクロックをシフトさせることにより、スレーブクロックｉ（ｎ）が得られる。したがって、第１画像データ集合の同期化信号がマスタクロックに対応するのに対して、後続の画像データ集合のための同期化信号はマスタクロックの周期時間内で位相シフトされる。例えば、５０Ｈｚのフレームレートでは、対応の周期時間Ｔ＝１／フレームレート＝２０ｍｓである。特定の映像スクリーンに関連する各カメラの最小シャッタ時間は、物理ディスプレイに表示されて専用の映像ストリームを介して送信されうるチャネル（画像データ集合）の最大数を決定する。したがって、Δｓのシャッタ時間では、画像データ集合の最大数ｎは方程式ｎ・Δｓ≦１／ｆにより決定される。同様に、物理ディスプレイは、必要なｎ・ｆのフレームレートで画像を示すことが可能でなければならない。スポーツアリーナで使用される商用のディスプレイは、少なくとも２４個の画像データ集合が提示されうるように、１２００Ｈｚまたは２４００Ｈｚものフレームレートを有する。
【００５１】
本発明の一実施形態によれば、第１画像データ集合は、直接視聴者に提示される画像に対応する。この実施形態によれば、第１画像データ集合は、映像ストリームのための後続の同期化信号の間の遅延周期Δｔ内に示される。本発明の方法の特に好適な実施形態では、マスタクロックのフレーム周期内のおよそ９０パーセントの時間に直接視聴者に向けられた第１画像データ集合の画像が示されるように、シャッタ時間Δｓと遅延周期Δｔとが選択される（ｎ・Δｓ≦０．１・（ｎ−１）・Δｔ）。
【００５２】
本発明の別の実施形態によれば、少なくとも一つの画像データ集合は、実画像とそれぞれの実画像の反転または補完画像とのシーケンスを包含する。この好適な実施形態によれば、実画像とそれぞれの反転画像とは、人の眼による解像が不可能な周波数において即時継続状態で示される。したがって、直接視聴者は実画像および反転画像のシーケンスをニュートラルで目立たない画像として認知する。本発明によれば、映像ストリームを想定した各画像データ集合はこのように、つまり実画像および対応の反転／補完画像のシーケンスとして提示されるのに対して、直接視聴者を想定した画像データ集合は画像のみとして提示される。イベントに参加している視聴者は物理ディスプレイに示される全ての画像を視聴するので、画像および反転画像のシーケンスは本質的に相殺されるため映像ストリームを想定した挿入画像集合による妨害は少ない。
【００５３】
映像を録画するためのフレームレートは通常、人の眼の時間解像度より高い、例えば、２０Ｈｚ（毎秒２０フレーム）より高いので、各画像が物理ディスプレイに提示された後に反転／補完画像を挿入する必要はない。それゆえ、本発明の別の実施形態によれば、二つ以上の実画像を包含する実画像のグループに基づいて反転／補完画像が計算される。反転／補完画像の提示はこの実画像グループの提示と関連しており、例えば、実画像グループが提示される前か後に、あるいは実画像グループ内に示される。一実施形態において、実画像グループは、マスタクロックの一つの時間周期（１／（フレームレート））内に示されるすべての画像を包含するので、各時間周期内には一つの反転／補完画像のみが示される。
【００５４】
一実施形態によれば、ディスプレイがカラーディスプレイである時に、基本の画像とそのカラー反転画像とをピクセル単位で時間多重化することで、その結果としてディスプレイの直接視聴者にとって実質的に目立たない複合画像をディスプレイで作成することにより、画像および反転画像のシーケンスが確立される。各反転カラーデータコンポーネントは、基本の画像信号の対応のカラーデータコンポーネントから、そしてこれに相関して作成され、それゆえ基本画像の同じカラーコンポーネントを表す。信号振幅は、非線形ではあるが画像の色彩強度に直接関係するので、各反転カラーデータコンポーネントの振幅は、対応のカラーデータコンポーネントの振幅と相関して決定されるため、すべてのカラーデータコンポーネントの振幅に対応するとともに、反転カラーデータコンポーネントに対応する色彩強度の時間重み付き平均は、同じピクセルに対応する各複合カラーデータコンポーネントについて実質的に同じである。所与の表示フレーム中の各反転カラーデータコンポーネントについて計算される振幅は、結果的に得られる複合画像の各対応カラーコンポーネントの強度が他のカラーコンポーネントすべてについて実質的に同じであるように設定される。人の眼では見分けることができない充分に高い周波数で基本的な反転カラーデータコンポーネントが時間多重化されるので、複合画像信号により作成された結果である画像のすべてのカラーコンポーネントの強度は、各ピクセルについて実質的に同じように見える。結果として、ピクセルごとにカラーまたは強度に視認可能な変化はなく、その結果の複合画像は実質的に目立たないようである。ゆえに、基本の画像信号の個々のカラーデータコンポーネントを対応する反転カラーデータコンポーネントとピクセル単位で時間多重化することにより、基本画像は計算によるカラー反転画像と本質的に時間多重化されて、観察者の裸眼には実質的にニュートラルで目立たない複合画像が結果的に作成される。
【００５５】
この反転画像の提示についての好適な実施形態によれば、画像および反転画像の組み合わせの結果、均質な強度を有する認知画像が得られるように、各先行および／または後続画像の反転画像が作成される。
【００５６】
本発明のさらに好適な実施形態によれば、物理ディスプレイは発光ダイオード（ＬＥＤ）アレイ／ディスプレイである。好ましくは、ＬＥＤディスプレイは看板または掲示板である。
【００５７】
本発明のさらなる実施形態によれば、一つ以上の映像ストリームに録画されるシーンはスポーツイベントまたはエンターテインメントイベントの一部である。
【００５８】
本発明はさらに、本発明の方法を実行するように構成される制御インタフェースに関し、この制御インタフェースは、マスタクロック信号を受信するか発生させるための手段と、二つ以上の時間シフトスレーブクロック信号を発生させるための手段と、二つ以上の時間シフトスレーブクロック信号に対応してトリガ信号を発生させるための手段とを包含する。
【００５９】
好ましくは、制御インタフェースはさらに、外部マスタクロック信号を受信する少なくとも一つの入力と、スレーブクロック信号を一つ以上、一実施形態では二つ以上のカメラへ送信するための少なくとも二つのスレーブ出力と、異なる画像データ集合をタイムスライス多重化法で物理ディスプレイに表示するためにトリガ信号を物理ディスプレイへ送信するための少なくとも一つのトリガ出力とを包含する。
【００６０】
一実施形態によれば、制御インタフェースは専用のハードウェアインタフェースであり、マスタクロック信号を受信するか発生させるための手段と、二つ以上の時間シフトスレーブクロック信号を発生させるための手段と、二つ以上の時間シフトスレーブクロック信号に対応してトリガ信号を発生させるための手段とが、専用のマイクロ制御装置またはＦＰＧＡで少なくとも部分的にハードウェア具現化される。
【００６１】
別の実施形態によれば、制御インタフェースはソフトウェアで完全に具現される。したがって、マスタクロック信号を受信するか発生させるための手段と、二つ以上の時間シフトスレーブクロック信号を発生させるための手段、二つ以上の時間シフトスレーブクロック信号に対応してトリガ信号を発生させるための手段とは、汎用コンピュータまたはハードウェアコンポーネント（ＦＰＧＡ、マイクロ制御装置、送信カード、グラフィックカード等）で実行可能なプログラムとして具現される。
【００６２】
最後に、本発明は、少なくとも一つの物理ディスプレイと、少なくとも第１および第２の画像データ集合をタイムスライス多重化法で物理ディスプレイに表示するための上記の制御インタフェースと、第１画像データ集合に対応して物理ディスプレイを含むシーンを録画するための少なくとも一つのカメラと、少なくとも一つのカメラにより提供される映像データから少なくとも一つの映像ストリームを作成してこの映像ストリームを視聴者の部分集合へ送信するための手段とを包含する、物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するためのシステムを対象とする。
【図面の簡単な説明】
【００６３】
以下では、同封の図面を参照して本発明の好適な実施形態がより詳しく説明される。
【図１】本発明を実行するために使用されるシステムの概観図を示す。
【図２】マスタおよびスレーブクロックのタイムラインを示す。
【図３】スレーブクロックのタイムラインを示す。
【図４】本発明の方法の別の実施形態を実行するシステムの概観図を示す。
【図５】図４の実施形態で使用される単一のカメラユニットのフレームシーケンスを示す。
【図６】図５の映像ストリームから作成される映像ストリームのフレームシーケンスを示し、スローモーションは含まれない。
【図７】本発明の方法において物理ディスプレイとカメラとの同期化を実行するための三つの代替実施形態を示す。
【図８】本発明の方法を実行する異なるカメラを備えるシステムを示す。
【図９】本発明の方法に従って少なくとも一つの映像ストリームのスローモーション送信のために異なる画像データ集合を物理ディスプレイに提示するための方式を示す。
【図１０】本発明のスローモーション方法の代替実施形態を示す。
【図１１】図８の方式の変形を示す。
【図１２】図９の方式の変形を示す。
【発明を実施するための形態】
【００６４】
さて、一般的な例、すなわちスポーツイベントのテレビ放送について本発明がより詳しく説明される。
【００６５】
図１〜７は、出願人のＰＣＴ／ＥＰ２０１８／０５２１７８に記載の実施形態を示す。スローモーション映像ストリームを送信するための改良方法は、図８から１２に関連して説明される。
【００６６】
図１に描かれている本発明の実施形態では、各映像ストリームに専用のカメラユニットが使用される。したがって、（部分的に描かれている）サッカー競技場１０を例とするスポーツイベントの映像素材を提供するのに、多数のカメラＣ１，Ｃ２，Ｃ３，Ｃ４が使用される。競技場１０のサイドライン１１には、ＬＥＤディスプレイ１３を有する広告掲示板１２が設置されている。広告掲示板１２は、ＬＥＤアレイ１３への静止および／または動画像の送達を制御する制御装置１４を包含する。従来のマルチカメラ放送方式では、一つのカメラから別のカメラへのシームレスな切り替えを可能にするため、カメラＣ１，Ｃ２，Ｃ３，Ｃ４は同期化されなければならない。そのために、カメラＣ１，Ｃ２，Ｃ３，Ｃ４は、例えば外部放送ユニット（ＯＢユニット）、例えばＯＢバン１６に収容されるテレビ制御ユニットの一部であるマスタクロック１５から同期化信号を受信する。従来のＴＶ放送では、カメラＣ１，Ｃ２，Ｃ３，Ｃ４は同一のマスタクロック信号Ｍ１，Ｍ２，Ｍ３，Ｍ４（つまりＭ１＝Ｍ２＝Ｍ３＝Ｍ４）と同期化される。これらの同期化信号は、それぞれ回線Ｌ１，Ｌ２，Ｌ３，Ｌ４を介してカメラＣ１，Ｃ２，Ｃ３，Ｃ４へ送信されうる。矢印で記されているように、回線Ｌ１，Ｌ２，Ｌ３，Ｌ４は双方向性であって、カメラＣ１，Ｃ２，Ｃ３，Ｃ４への同期化信号の送信ばかりでなく、カメラからＯＢバン１６への映像信号の供給も可能にする。当然のことであるが、ＯＢバン１６とカメラＣ１，Ｃ２，Ｃ３，Ｃ４との間の双方向通信は、有線ベースでも無線でも、またはその両方の組み合わせでもよい。
【００６７】
従来のＴＶ放送では、カメラの映像チャネルが通常は組み合わされて、視聴者へ配信される単一の映像ストリームが作成される。対照的に、本発明による方法では、異なる視聴者部分集合、例えば異なる国々の視聴者のために異なる映像チャネルＶ１，Ｖ２，Ｖ３，Ｖ４を作成するのにカメラＣ１，Ｃ２，Ｃ３，Ｃ４が使用される。これらの異なる映像チャネルは本質的にはイベントの同じシーンを示すが、ＬＥＤアレイ１３に表示される情報が異なっている。ＬＥＤアレイに表示される異なる情報を異なるカメラが録画できるようにするため、マスタクロック１５から発出される同時マスタクロック信号Ｍ１，Ｍ２，Ｍ３，Ｍ４はそれぞれのカメラＣ１，Ｃ２，Ｃ３，Ｃ４へ直接的には供給されない。そうではなく、同時マスタクロック信号はインタフェース１７へ供給され、こうしてそれぞれのカメラへ送達される同期化信号の間に所定の時間遅延（位相シフト）を導入できる。位相シフト信号は、それぞれスレーブクロック信号Ｓ１，Ｓ２，Ｓ３，Ｓ４と呼ばれ、これらは双方向回線Ｌ１’，Ｌ２’，Ｌ３’，Ｌ４’を介してカメラＣ１，Ｃ２，Ｃ３，Ｃ４へ送信される。本ケースでは、スレーブ信号Ｓ１はマスタクロック信号Ｍ１に対応するのに対して、信号Ｓ２，Ｓ３，Ｓ４は、それぞれ対応のマスタクロック信号Ｍ２，Ｍ３，Ｍ４に関する遅延Δｔ，２・Δｔ，３・Δｔだけ位相シフトされる。
【００６８】
また、スレーブクロック信号Ｓ１，Ｓ２，Ｓ３，Ｓ４と同時に、インタフェース１７は、特定の視聴者部分集合に向けられた画像がカメラＣ１，Ｃ２，Ｃ３，Ｃ４のそれぞれの（位相シフト）トリガ時点で広告掲示板１２のＬＥＤアレイ１３に示されることを確実にするために、ＬＥＤアレイ１３の制御装置１４へ回線Ｌ５を介して送信されるトリガ信号Ｔ１，Ｔ２，Ｔ３，Ｔ４を発生させる。
【００６９】
本発明の一実施形態において、カメラの一つは、イベントに参加している直接視聴者を想定した同じ画像データ集合を示すのに使用されうる。このケースでは、画像データ集合の数は、互いに対して位相シフトされたカメラの数に対応するだろう。しかしながら、図に記載の例では、別の画像データ集合が直接視聴者に提示される。したがって、インタフェース１７により決定される特定の時点でＬＥＤアレイ１３に表示されうる合計５個の画像データ集合が、制御装置１４を介して提供される。そのために、インタフェース１７はトリガ信号Ｔ１，Ｔ２，Ｔ３，Ｔ４ばかりでなく、直接視聴者に向けられた画像データ集合の画像を示すのに使用されるトリガ信号Ｔ５も発生させる。
【００７０】
具体的には、スポーツイベントを視聴して専用の情報または広告をＬＥＤアレイ１３で受信できるそれぞれ四つの視聴者部分集合に専用の四つの画像データ集合が用意される。カメラＣ１は第１視聴者部分集合のための映像ストリームＶ１を作成するのに対して、カメラＣ２，Ｃ３，Ｃ４は第２、第３、第４の視聴者部分集合のためにそれぞれ映像チャネルＶ２，Ｖ３，Ｖ４を作成する。
【００７１】
スポーツイベントに参加している直接視聴者を想定した画像を示すのに第５画像データ集合が使用される。上記のように、本発明の好適な実施形態では、大半の時間には直接視聴者を想定した画像がＬＥＤアレイ１３に表示されるようにＬＥＤアレイが制御される。
【００７２】
図２には、本発明の方法で使用されるそれぞれの同期化信号が示されている。図２ａは、例えば毎秒５０フレームの映像録画を対象とする５０Ｈｚのレートで発出されるマスタクロック信号を示す。図２ｂ，２ｃ，２ｄ，２ｅは、インタフェース１７により発生されるスレーブクロック信号Ｓ１，Ｓ２，Ｓ３，Ｓ４に対応する。図２から分かるように、各スレーブ信号はｎ・Δｔの遅延で位相シフトされ、それぞれｎ＝０，１，２，３である。信号Ｓ１，Ｓ２，Ｓ３，Ｓ４はそれぞれのカメラＣ１，Ｃ２，Ｃ３，Ｃ４のシャッタ時間を開始させる。
【００７３】
カメラのシャッタが開いている間に、ＬＥＤアレイ１３は、それぞれトリガパルスＴ１，Ｔ２，Ｔ３，Ｔ４により起動されるとそれぞれの画像データ集合の画像を示す。
【００７４】
図２ｆは、直接視聴者に向けられた第５の画像データ部分集合のトリガパルスＴ５を示す。ここで説明される実施形態では、カメラが作動していない時にのみこれらの画像がＬＥＤアレイに示されるが、他の実施形態では、カメラが作動していてもよい。図２から分かるように、ＬＥＤアレイのフレームレートはカメラのフレームレートよりはるかに高い。
【００７５】
図３には、図２の同期化方式の変形が示されており、各スレーブクロックパルスについて、二つのＬＥＤアレイトリガパルスが発生される。先頭パルスＴ１，Ｔ２，Ｔ３，Ｔ４は、それぞれのカメラにより録画される実画像を起動させる。映像フレームが録画された直後に、つまりスレーブ信号Ｓ１，Ｓ２，Ｓ３，Ｓ４の終了後にそれぞれパルスＴ１ｉ，Ｔ２ｉ，Ｔ３ｉ，Ｔ４ｉが発生されて、Ｔ１，Ｔ２，Ｔ３，Ｔ４に示されているそれぞれの反転画像の表示を起動させる。画像および反転画像は裸眼では解像できないレートで示されることで、直接視聴者のスムーズな視聴体験をもたらす。
【００７６】
本発明において、各カメラＣ１，Ｃ２，Ｃ３，Ｃ４はカメラグループに相当し、グループの各カメラは同じ同期化信号により起動されることに注意すべきである。各カメラグループにより作成される映像ストリームＶ１，Ｖ２，Ｖ３，Ｖ４はそれゆえ、例えばイベントを異なる角度から示すマルチカメラフィードから成る。
【００７７】
また、同期化信号、マスタクロック信号、スレーブクロック信号、またはトリガ信号と、制御インタフェースでの対応の入力および出力の語は、広く解釈されるものとする。これらの信号は、アナログ信号、デジタル信号、または両方の組み合わせでもよい。これらの信号は有線ベースまたは無線の信号でありうる。デジタル信号が含まれる時にはとりわけ、これらの信号はタイミング／トリガ情報に加えて別の情報を伝えうる。例えば、トリガ信号は、特定の画像データ集合の特定の画像の表示に関連する情報を伝えうる。また、カメラＣ１，Ｃ２，Ｃ３，Ｃ４は専用回線を介してインタフェースに接続されるものとして示されたが、インタフェースのスレーブクロック出力が単一の出力、例えばデータバスにリンクされたカメラＣ１，Ｃ２，Ｃ３，Ｃ４へデジタル処理後のスレーブクロック信号Ｓ１，Ｓ２，Ｓ３，Ｓ４を送信するための単一のデータバスであってもよい。
【００７８】
図４には、本発明のさらなる実施形態で、サッカー競技場１０のサイドライン１１に配置された広告掲示板１２のＬＥＤディスプレイ１３を含むシーンの最初の高フレームレート映像ストリームを捕捉するのに単一のカメラユニットＣが使用されることを除いて、図１と同様の概略図でこの実施形態が概略的に描かれている。本実施形態で採用されうる一般的なカメラユニットＣは、ソニー株式会社から商品化された、高フレームレートでのシーンの録画を可能にするＨＤＣ４３００カメラである。高フレームレート映像ストリームＨＦＲ（図５参照）は、第１光ケーブル２０を介して中間処理ユニット２２の第１コネクト２１へ送信される。中間処理ユニット２２は、第２光ケーブル２５を介して中間処理ユニット２２をカメラ制御ユニット（ＣＣＵ）２６に接続するのに使用されうる第２コネクト２４に第１コネクト２１を接続する情報ブリッジ２３を包含する。カメラ制御ユニット２６は、外部カメラ制御部、得点、プロンプタ、リターン映像等のような信号のための付加的な入力／出力２８を有する。適当な中間処理ユニット２２は、例えば、ソニー株式会社により商品化されたＢＰＵ４０００のような基底帯域プロセスユニット（ＢＰＵ）である。中間処理ユニット２２はさらに、最初の高フレームレート映像ストリームを変換して複数の物理ＳＤＩ出力Ｏ１，Ｏ２、Ｏ３等へ送るための映像プロセッサ２７を包含する。ＳＤＩ出力Ｏ１，Ｏ２，Ｏ３等は、標準フレームレート映像ストリームＳＦＲを提供する（図６参照）。
【００７９】
カメラユニットＣは、直接的に（不図示）、あるいはマスタクロック１５をカメラ制御ユニット２６に接続する回線２９と、光ケーブル２５，２０とを介して、マスタクロック１７からマスタクロック信号Ｍを受信する。
【００８０】
マスタクロック信号Ｍは回線３０を介してインタフェース１７にも供給される。インタフェース１７は画像データ入力３１を介して画像データを受信してトリガ信号Ｔを発生させ、これに従って、画像データが回線３２を介してＬＥＤディスプレイ１３へ送信され、ここでトリガ信号Ｔに従って画像データが示される。カメラユニットにより録画される後続のフレームが、ＬＥＤディスプレイ１３に異なる画像が示される録画シーンを示すように、トリガ信号Ｔが選択される。言うまでもないが、画像データは送信されてディスプレイ１３および／またはインタフェース１７の記憶媒体に予め記憶される。また、インタフェース１７は広告掲示板１２の一部であって、回線３２が掲示板１２の内部回路の一部であってもよい。
【００８１】
しかしながら、カメラユニットＣが専用の制御ユニットを採用するか、必要な制御部がこれに具備されるので、本発明の方法にとってカメラ制御ユニット２６は不可欠ではないことに注意すべきである。中間処理ユニット２２の主な目的は、下でより詳しく説明するように、高フレームレートカメラユニットＣからのフレームを中間処理ユニット２２のＳＤＩ出力Ｏ１，Ｏ２，Ｏ３等での別々の映像ストリームに分割することである。
【００８２】
図５は、標準フレームレート（５０Ｈｚ）の３倍で、つまり１５０ＨｚでカメラユニットＣにより録画される高フレームレート映像ＨＦＲのフレームシーケンスを示す。したがって、１／５０秒（２０ｍｓ）の時間間隔の間に３個のフレームｆｉ．１，ｆｉ．２，ｆｉ．３が録画される。図５は、６０ｍｓの周期中に、つまりｉ＝１，２，３で録画されるフレームを示す。光ケーブル２０を介して中間処理ユニット２２（ＢＰＵ）へフレームが送信される。
【００８３】
図６に示されているように、ｎがＨＦＲ映像ストリームの連続フレームであるフレーム（ｆ  ｎ．ｉ）が出力Ｏｉ（ｉ＝１，２，３）へ送られるように、中間処理ユニット２２の映像プロセッサ２７はＨＦＲストリームを三つのＳＦＲストリームに分割して三つの異なるＳＤＩ出力Ｏ１，Ｏ２，Ｏ２へ送る。図６から分かるように、最初の高フレームレート映像スクリーンのフレーム１．１，２．１，３．１等がＳＤＩ出力Ｏ１において第１標準フレームレートストリームＳＦＲを５０Ｈｚのフレームレートで発生させる。類似のＳＦＲ映像ストリームが出力Ｏ２，Ｏ３で発生される。したがって、最初のＨＦＲ映像ストリームの帯域幅要件は、三つのＳＤＩ出力Ｏ１，Ｏ２，Ｏ３で三つのＳＦＲ映像ストリームに分散される。従来の放送方式では、標準ＳＤＩ送信回線を介した送信の後に三つのストリームが再び組み合わされる。しかしながら、本発明において、フレームｎ．１，ｎ．２，ｎ．３（ｎ＝１，２，３，４，５，．．．）がそれぞれ録画される時に異なるコンテンツがディスプレイに示されるように、掲示板のＬＥＤディスプレイが起動される。ゆえに、異なるＳＤＩ出力で発生されるＳＦＲストリームは、異なる聴衆のための異なる映像ストリームとして使用される。
【００８４】
図７には、本発明の方法において物理ディスプレイと一つ以上のカメラとの同期化を実行するための三つの代替方法が描かれている。図７ａ，７ｂ，７ｃに示されている実施形態では、図１および４の概略図に既に示されている幾つかの要素が再掲されている。図７の実施形態は、ＬＥＤディスプレイ１３と、ＬＥＤディスプレイ１３を含む方式を報告するためのカメラＣ（一つ以上のカメラを表す）とを示す。図１および４にもそれぞれ示されているように、データ回線３１を介してＬＥＤディスプレイ１３に示される画像データを受信するインタフェース１７が設けられる。図７の実施形態では、一つ以上のグラフィックカード４２を包含しうる処理・記憶コンポーネント４１と、一つ以上の制御ディスプレイ４３とを例えば含みうるコンピュータユニット４０により、画像データが提供される。コンピュータユニット４０は、処理・記憶コンポーネント４１のグラフィックカードから画像情報を受信してインタフェース１７の対応の受信カード１７ａへ画像データを送信する専用の送信カード４４も包含する。インタフェース１７はさらに、ＬＥＤディスプレイ１３の関連のＬＥＤドライバ１３ａへ部分的画像データを送るように構成されるフィールドプログラマブルゲートアレイ（ＦＰＧＡ）１７ｂを包含する。多数のディスプレイまたはパネル１３は、広告掲示板（図１および４の参照符号１２）の完成ディスプレイを形成する。
【００８５】
図７ａ〜７ｃの実施形態は、ＬＥＤディスプレイ１３に示される画像データのシーケンスがカメラＣと同期化される際の手法が異なっている。図７ａの実施形態において、マスタクロック１５はカメラＣとインタフェース１７のＦＰＧＡ１７ｂとを起動させる。各ＦＰＧＡ１７ｂがマスタクロック１５に接続されなければならないので対応する配線が高コストで複雑であることに注意しなければならない。図７ｂの好適な実施形態では、マスタクロック１５のトリガ信号がカメラＣおよび送信カード４４へ送られ、そして送信カードが画像データをインタフェース１７へ送信するばかりでなく、様々なＦＰＧＡ１７ｂにより受信される対応のトリガ信号をも送信する。したがって、クロック信号のための対応の配線ははるかに単純である。図７ｃに示されているように、コンピュータユニット４０の処理・記憶コンポーネント４１のグラフィックカード４２へマスタクロック信号を送ることも可能である。しかしながら、これは、画像データばかりでなく付加的なトリガ情報を送信カード４４へ送信できる特殊なグラフィックカードを必要とする。
【００８６】
図８には、異なるカメラ設定を使用して本発明の方法を具現する放送システム５０が描かれている。カメラ５１は、本発明の方法が具現されたカメラ制御ユニット（ＣＣＵ）／基底帯域処理ユニット（ＢＰＵ）５３へ送信回線５２を介して接続されるスローモーションカメラを表す。そのために、ユニット５３は、回線５４を介してＬＥＤディスプレイとの同期化のためのトリガ信号を受信する。回線５５により表される広帯域幅接続が、ＣＣＵ／ＢＰＵ５３と専用のスローモーションサーバ５６との間に確立される。スローモーション信号は、例えば１５０Ｈｚ信号（つまり３倍スローモーション信号）でありうる。例えばＥＶＳ放送機器により商品化されたスローモーションサーバでありうる専用のスローモーションサーバ５６は、選択されたシーンを標準的な５０Ｈｚ信号として回線５７を介してミキサ５８へ送信し、ミキサは例えば外部放送バン（ＯＢバン）に設けられる。回線５５が専用のスローモーションサーバ５６を迂回してミキサ５８へ直接に供給が行われてもよい。このケースで、高フレームレートで録画される別々のフィードがＬＥＤディスプレイで異なるコンテンツと同期化され、それゆえ、異なるユーザ部分集合のための標準フレームレートフィードとしても使用されうる。
【００８７】
カメラ５９は、回線６２を介してＬＥＤディスプレイにも同期化される専用のＣＣＵ／ＢＰＵユニット６１へ回線６０を介して映像信号を送信する従来の標準フレームレートカメラを表す。５０Ｈｚ映像信号は、回線６３を介してミキサ５８へ送信される。
【００８８】
ある設定では、あるイベントを非常に高いスローモーションレートで録画するのに専用の高速カメラ６４が採用される。これらのカメラ（例えば「Ｐｈａｎｔｏｍ（ファントム）」の商標名で商品化されているカメラ）は、本発明の方法で一般的に使用される表示用高フレームレートよりもはるかに高い録画用フレームレートを使用している。それゆえ、これらのカメラは、ＬＥＤディスプレイに示されるあるコンテンツフィードに同期化されない。カメラ６４の出力は回線６５を介して専用の制御ユニット６６に接続され、そして制御ユニットはケーブル６７を介してミキサ５８にリンクされている。上記の非同期化問題を以下のように解決するため、図８には専用の制御回路６８も示されている。例えば、回線６８は、カメラ６４が作動していることを示すトリガ信号をミキサ５８へ送るのに使用され、そしてトリガ信号はミキサ５８を起動させてカメラ６４の視野内のＬＥＤディスプレイでの代替画像コンテンツの表示を停止させる。したがって、高速カメラが採用されるという稀なケースでは、メインフィードまたは予選択された並列フィードのみがこれらのＬＥＤディスプレイに示される。代替的に、回線６８が使用されてもよく、ＬＥＤディスプレイが本発明の方法により作動することで、表示用高フレームレートに対応する最高速度で高速カメラ６４を作動させる必要があることを示唆している。このようなカメラには通常、周期的に表示用高フレームレートと同期化されうる内部クロックが採用されて、イベント中のこのようなカメラの比較的短い作動周期の過程で同期化が確実に維持される。それから、放送視聴者へ送信される適当なフィードがミキサ５８で選択されうる。
【００８９】
図９には、本発明の方法にしたがって映像ストリームのスローモーション送信のために異なる画像データ集合を物理ディスプレイに提示する方式が記されている。
【００９０】
この実施形態については、５０Ｈｚの標準放送用フレームレートＳＢＦＲつまり毎秒５０フレーム（ｆｐｓ）でテレビまたはインターネット放送の視聴者へ映像フィードが配信されると推定される。物理的なＬＥＤ広告ディスプレイ１３（図１参照）を含むシーンが、適当なカメラユニットにより録画用高フレームレートＨＲＦＲで録画される。この実施形態において、標準放送用フレームレートＳＢＦＲをスローモーション係数ｆＭと掛け合わせることにより規定されるスローモーション用フレームレートＳＭＦＲで、直接視聴者を想定したメイン画像データ集合（メインフィードＭ）を含むシーンを録画するようにカメラが適応化される。図９の実施形態において、メインフィードのスローモーション係数は３に等しい、つまりｆＭ＝３である。本実施形態では、メイン画像データ集合Ｍ（メインフィード）と本質的に並列に送信され（時間多重化され）、それゆえ放送視聴者のみを想定した「並列フィード」Ｐ１，Ｐ２，Ｐ３と表される三つの付加的な画像データ集合が、ＬＥＤスクリーンに示される。カメラは、標準放送用フレームレートＳＢＦＲでのスローモーションを含まずに、つまりスローモーション係数ｆｐ１＝ｆＰ２＝ｆＰ３＝１で、並列フィードＰ１，Ｐ２，Ｐ３を示すＬＥＤディスプレイを含むシーンを録画するようにも適応化される。したがって、上記のように、カメラユニットは
【数３】
2021532638.tif 000005
により規定される録画用高フレームレートＨＲＦＲで作動しなければならない、つまり３００Ｈｚ／ｆｐｓのフレームレートは５０Ｈｚ／ｆｐｓの標準フレームレートの６倍に相当する。
【００９１】
直接視聴者の視聴体験を改善するために、物理的なＬＥＤディスプレイは録画用高フレームレートＨＲＦＲよりも高い表示用高フレームレートＨＤＦＲで作動する。この例では、ディスプレイ係数ｆＤ＝３が選択され、こうして各録画画像について二つの付加的画像を物理ディスプレイに表示することが可能である。したがって、表示用高フレームレートＨＤＦＲは、
【数４】
2021532638.tif 000006
に、つまり５０Ｈｚ／ｆｐｓの標準フレームレートの１８倍に相当するフレームレートに設定される。
【００９２】
図９には、標準フレームレート５０Ｈｚ／ｆｐｓの単一の周期時間に相当する２０ｍｓの周期が描かれている。２０ｍｓの各周期時間は、２０ｍｓ周期の間に９００Ｈｚ／ｆｐｓのＨＤＦＲレートで物理ディスプレイに表示される１８個の画像を表す、持続時間が１／９００秒（つまりおよそ１．１ｍｓ）の１８個のスロットに細分される。２０ｍｓの周期の間に物理ディスプレイに表示される所与のフィードの画像は通常は同一である。続く２０ｍｓの周期（図９には不図示）では、パターンが反復されるが、フィード内の画像コンテンツは通常、変化する。
【００９３】
図９から分かるように、示されている２０ｍｓ周期では、３００Ｈｚで作動するカメラＣは、それぞれ異なる映像チャネルＣ１，Ｃ２，Ｃ３，Ｃ４，Ｃ５，Ｃ６となる表記の６個の画像を録画する。カメラＣのシャッタ時間は画像スロットの時間周期に合わせて調節される、つまりカメラＣにより録画される各映像フレームが物理ディスプレイに示される一つの画像のみに対応するように、シャッタ時間は１／９００秒（１．１ｍｓ）以下である。カメラ録画および物理ディスプレイは、第１スロットの始めに録画が開始するように同期化される。本実施形態では、四つの画像データ集合が表示される。画像データ集合Ｍの画像は、物理ディスプレイに示されるメイン画像フィードに対応し、シーンの直接視聴者により意識的に視聴されることが想定される。本実施形態において、画像データ集合Ｍの画像はまた、スローモーション映像ストリームを目的としてカメラＣにより録画される。この例では、３倍スローモーション映像ストリームが想定される。それゆえ、メインフィードＭの画像が表示され、各２０ｍｓ周期内においてスロット１および５に３倍で録画される。図９から分かるように、録画フレームＣ１，Ｃ３，Ｃ５は画像データ集合Ｍに対応する。したがって、所望の３倍スローモーション映像ストリームに対応する１５０Ｈｚのフレームレートでメイン画像データ集合Ｍが録画される。
【００９４】
メイン画像データ集合Ｍ（メインフィード）と本質的に並列に送信される（時間多重化される）三つの付加的な画像データ集合は並列フィードＰ１，Ｐ２，Ｐ３と表され、５０Ｈｚの標準フレームレートで録画される、つまり各２０ｍｓ周期時間内で一度のみ表示される。画像データ集合Ｐ１の画像はスロット４に、画像データ集合Ｐ２の画像はスロット１０に、画像データ集合Ｐ３の画像はスロット１６に示されるので、対応の画像はそれぞれカメラの映像フレームＣ２，Ｃ４，Ｃ６により捕捉される。およそ１．１ｍｓにのぼる物理ディスプレイでの画像Ｐ１，Ｐ２，Ｐ３の各々の表示時間は、直接視聴者により意識的に視聴されるには短すぎる。したがって、これらの画像データ集合は、それぞれＣ２，Ｃ４，Ｃ６から発生される映像ストリームを介して放送視聴者へ送信されることのみを想定している。ＰＣＴ／ＥＰ２０１８／０５２１７７に一層詳しく記載されているように、画像Ｐ１，Ｐ２，Ｐ３の各々の補完／反転画像、つまりそれぞれタイムスロット５，１１，１７の反転画像Ｉ１，Ｉ２，Ｉ３を付加的に表示することにより、残っている可能性のある直接視聴者への付加的画像データ集合の妨害作用が最小となりうるので、それぞれＰ１とＩ１、Ｐ２とＩ２、Ｐ３とＩ３の各対の直接視聴者により認知される合成画像は結果的に本質的にニュートラル／グレー画像となる。
【００９５】
Ｐ１ｌ，Ｐ２ｌ，Ｐ３ｌにより表される、放送視聴者を想定した低強度の画像を録画することにより、直接視聴者の視聴体験はさらに改善されうる。同様に、対応の補完／反転画像が低強度Ｉ１ｌ，Ｉ２ｌ，Ｉ３ｌで録画される。カメラユニットの利得が対応の低強度に合わせて適応化されなければならないので、並列フィードの画像とメインフィードの画像の録画の間でカメラ設定を変えないことが推奨される。したがって、直接視聴者を想定した画像データ集合Ｍは異なる強度レベルで、すなわち、カメラチャネルＣ１，Ｃ３，Ｃ５により録画されるスロット１，７，１３では低強度Ｍｌで、録画されたスロットの直後にあってそれ自体はカメラにより録画されないスロット２，８，１４では高強度Ｍｈで提示される。
【００９６】
ここに記載のパターンはディスプレイ係数ｆＤ＝２で実現されうる。上に明記したようにｆＤ＝３を使用すると、メインフィードの付加的な画像が高強度Ｍｈで提示される付加的なスロット３，６，９，１２，１５，１８が得られ、ゆえに直接視聴者の視聴体験をさらに向上させるためにメインフィードと並列フィードとの積分強度比が大きくなる。
【００９７】
図９から容易に推論されるように、この方式では、３倍スローモーションレートの二つの映像ストリーム、例えば映像ストリームＭおよびＰ１を送信することも可能であり、その結果、スロット１０，１１のＰ２，Ｉ２とスロット１６，１７の画像Ｐ３，Ｉ３とをそれぞれ画像Ｐ１，Ｉ１で単純に置き換えることになる。
【００９８】
図１０には、放送視聴者のみを想定した一つのフィードＰ１が３倍スローモーションフレームレートで録画されるのに対して直接視聴者および放送視聴者を想定したメインフィードＭと、放送視聴者のための二つの付加的なフィードＰ２，Ｐ３とが標準フレームレートで送信される実施形態が示されている。この並列フィード（図１０のＰ１）が実際の広告の画像ではなくモノクロ画像および／またはパターン画像を含有して、クロマキーイングのような技術を使用する映像後処理において映像フィード内の物理ディスプレイの場所を特定するとともに、特定されたエリアを所望の画像コンテンツで置換することを可能にする場合には、スローモーションでの並列フィードの送信は特に有利である。このような方法は、映像放送において仮想広告として知られる。
【００９９】
図９および１０の例では、録画用高フレームレートＨＲＦＲで作動する単一のカメラユニットが採用されている。しかしながら、チャネルＣ１，Ｃ２，Ｃ３等が二つ以上のカメラユニットにより録画される同様の方式も考えられる。
【０１００】
本発明のシステムは通常、本発明で得られる高フレームレートのスローモーション映像ストリームがスローモーションフレームレートで放送されるかどうかと、標準フレームレートでの送信が行われるようにフレームがドロップされるかどうかの判断を可能にするスローモーション制御装置および／またはサーバシステムを含む。通常は、あるイベントが完全にスローモーションで放送されることはなく、あるシーンのみが例えばスローモーションで再生される。イベントの場所からの送信帯域幅が制限されるのでこの種の前処理がイベント時に既に行われているべきである場合には、これは特に有利である。他の実施形態では、一つ以上の映像ストリームが完全に高フレームレートのスローモーション映像ストリームとして送信されて、離れた最終ユーザまたは中間ユーザ（例えば異なる国々の放送会社）は、ストリームのどの部分が標準フレームレートまたはスローモーションフレームレートで再放送されるかを選択することが可能である。スローモーション制御装置および／またはサーバは通常、数時間のスローモーション録画の記憶を可能にするリング記憶装置または高速ソリッドステート質量記憶装置を包含する。ライブ放送中にスローモーション制御装置／サーバを介してこの記憶装置にアクセスされて、放送ストリームへのあるイベントの挿入／再生を可能にする。
【０１０１】
再び図４を参照すると、ＳＤＩ出力Ｏ１，Ｏ２，Ｏ３等のみを有する従来の基底帯域プロセスユニット（ＢＰＵ）が使用される場合には、（例えば図９の１５０Ｈｚの映像ストリームのケースで）高フレームレートのスローモーション映像ストリームの一部が標準フレームレートで異なる出力Ｏ１，Ｏ２，Ｏ３へ送られて後続のスローモーション制御装置がＳＤＩサブフィードを高フレームレート映像ストリームに再度組み合わせるように、ＢＰＵが構成されうる。
【０１０２】
図１１には、図９の作動方式に代わる作動方式が描かれている。図１１では、標準フレームレート５０Ｈｚ／ｆｔｓの単一周期時間に相当する２０ｍｓの周期も示されている。図１１の実施形態では、ＨＤＦＲレートが１２００Ｈｚ／ｆｔｓである２０ｍｓ周期における物理ディスプレイでの２４個の画像表示を表す持続時間が１／１２００秒（つまりおよそ０．８３ｍｓ）の２４個のスロットに、２０ｍｓの各周期時間が細分される。図９の実施形態と同様に、カメラＣは３００Ｈｚで作動して、それぞれ異なる映像チャネルＣ１，Ｃ２，Ｃ３，Ｃ４，Ｃ５，Ｃ６のための６個の画像を録画する。ここでカメラＣのシャッタ時間は、各画像スロットの時間周期より短くなるように設定されている、つまりシャッタ時間は１／１２００秒以下である。やはり、メインフィードは３倍スローモーション映像ストリームとして録画されるが、メインフィードが高強度（Ｎｈ）で表示される（非録画）画像スロットは、メイン周波数が少なくとも１００Ｈｚであるように分散され、結果的にライブ聴衆にとってのちらつき体験全体が少なくなる。
【０１０３】
図１２は、図１０の方式と類似の方式であるが、第３並列フィードの代わりに、並列フィード１および２の両方が２倍スローモーションで示されている。やはり、強度変化の各基本周波数は少なくとも１００Ｈｚ以上であるので、ライブ聴衆にとってのＬＥＤディスプレイのちらつきがかなり軽減される。
【０１０４】
８００Ｈｚでの放送イベントの録画を可能にする最先端のカメラ技術では、図９〜１２の方式が例えば３２個のチャネルに容易に拡張され、例えば８倍スローモーションでの一つのフィード（チャネル）と５０Ｈｚの標準放送用フレームレートでの８個の並列フィード（チャネル）との送信を可能にする。
【図１】
2021532638.tif 000009
【図２】
2021532638.tif 000010
【図３】
2021532638.tif 000011
【図４】
2021532638.tif 000012
【図５】
2021532638.tif 000013
【図６】
2021532638.tif 000014
【図７ａ）】
2021532638.tif 000015
【図７ｂ）】
2021532638.tif 000016
【図７ｃ）】
2021532638.tif 000017
【図８】
2021532638.tif 000018
【図９】
2021532638.tif 000019
【図１０】
2021532638.tif 000020
【図１１】
2021532638.tif 000021
【図１２】
2021532638.tif 000022
【手続補正書】
【提出日】令和3年3月15日(2021.3.15)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するための方法であって、
少なくとも二つの異なる画像データ集合を作成することであって、各画像データ集合が個々の画像のシーケンスを包含することと、
前記少なくとも二つの画像データ集合の前記画像をタイムスライス多重化法により表示用高フレームレート（ＨＤＦＲ）で前記物理ディスプレイに表示することと、
前記物理ディスプレイを含むシーンの一つの映像ストリームを作成することであって、前記一つの映像ストリームを作成することは、標準放送用フレームレート（ＳＢＦＲ）の整数倍であるスローモーション用フレームレート（ＳＭＦＲ）で前記少なくとも二つの画像データ集合の一方の画像の表示と同時にカメラを用いて映像フレームを捕捉することを含み、
前記物理ディスプレイを含むシーンの少なくとも一つの他の映像ストリームを作成することであって、前記少なくとも一つの他の映像ストリームを作成することは、前記少なくとも二つの画像データ集合の他の画像の表示と同時に前記カメラを用いて映像フレームを捕捉することを含み、
ｍ個の画像データ集合からｎ個の映像ストリームが作成され、スローモーション係数ｆ（ｎ）の倍数により規定されるフレームレートと前記標準放送用フレームレート（ＳＢＦＲ）とにおいて、ｎ，ｍが２以上の整数であってｍがｎより大きいか等しく、前記スローモーション係数ｆ（ｎ）が１以上の整数であって前記スローモーション係数ｆ（ｎ）の少なくとも一つが２以上であり、
方程式
【数１】
2021532638.tif 000023
により規定される録画用高フレームレート（ＨＲＦＲ）で前記映像フレームが捕捉され、前記ＳＢＦＲが前記標準放送用フレームレートであってｆ（ｉ）が前記スローモーション係数であり、
前記表示用高フレームレート（ＨＤＦＲ）が前記録画用高フレームレート（ＨＲＦＲ）の整数倍であり、
【数２】
2021532638.tif 000024
においてｆＤが１より大きい整数であることと、
前記映像ストリームの各々を前記標準放送用フレームレート（ＳＢＦＲ）で前記視聴者の異なる部分集合へ送信することと、
を包含する方法。
【請求項２】
前記少なくとも二つの画像データ集合の他の一つの画像の表示と同時に捕捉される映像フレームから成る前記少なくとも一つの他の映像ストリームが、標準放送用フレームレートまたは前記標準放送用フレームレート（ＳＢＦＲ）の異なる整数倍であるスローモーション用フレームレート（ＳＭＦＲ）である異なるフレームレートで作成される、請求項１に記載の方法。
【請求項３】
前記少なくとも二つの映像ストリームが、直接視聴者と任意で放送視聴者により視聴される画像データ集合（Ｍ）と、前記放送視聴者のみに視聴される少なくとも一つの画像データ集合（Ｐ１，Ｐ２，Ｐ３）とを包含する、請求項１または請求項２に記載の方法。
【請求項４】
前記ｆＤが２以上であって、前記放送視聴者のみに視聴される前記画像データ集合（Ｐ１，Ｐ２，Ｐ３）の画像の付加的な補完／反転画像が前記物理ディスプレイに表示されるが映像ストリームでは捕捉されない、請求項３に記載の方法。
【請求項５】
前記ｆＤが３以上であって、直接視聴者に視聴される前記画像データ集合（Ｍ）の付加的画像が前記物理ディスプレイに表示されるが前記映像ストリームでは捕捉されない、請求項４に記載の方法。
【請求項６】
前記画像データ集合（Ｍ）の前記付加的な非捕捉画像が、前記画像データ集合（Ｍ，Ｐ１，Ｐ２，Ｐ３）の前記捕捉画像よりも高い強度で前記物理ディスプレイに表示される、請求項５に記載の方法。
【請求項７】
前記標準放送用フレームデータ（ＳＢＦＲ）が２５Ｈｚ（毎秒２５フレーム）、５０Ｈｚ（毎秒５０フレーム）、または６０Ｈｚ（毎秒６０フレーム）である、請求項１から請求項６のいずれか一項に記載の方法。
【請求項８】
前記物理ディスプレイがＬＥＤディスプレイである、請求項１から請求項７のいずれか一項に記載の方法。
【請求項９】
前記ＬＥＤディスプレイが看板または掲示板である、請求項８に記載の方法。
【請求項１０】
シーンがスポーツイベントまたはエンターテインメントイベントの一部である、請求項１から請求項９のいずれか一項に記載の方法。
【請求項１１】
物理ディスプレイの代替画像コンテンツを異なる視聴者へ送信するためのシステムであって、
少なくとも一つの物理ディスプレイ（１２，１３）と、
少なくとも第１および第２の画像データ集合をタイムスライス多重化法で前記物理ディスプレイ（１２，１３）に表示するための制御インタフェース（１７）と、
前記第１画像データ集合に対応して前記物理ディスプレイ（１２，１３）を含むシーンを録画するための少なくとも一つのカメラ（Ｃ１，Ｃ２，Ｃ３，Ｃ４）と、
請求項１から請求項１０のいずれか一項に記載の方法に従って前記カメラ（Ｃ１，Ｃ２，Ｃ３，Ｃ４）により提供される映像データから少なくとも二つの映像ストリームを作成するための手段と、
前記映像ストリームを前記標準放送用フレームレート（ＳＢＦＲ）で前記視聴者の異なる部分集合へ送信するための手段と、
を包含するシステム。
【国際調査報告】
2021532638.tif 000025
2021532638.tif 000026