(57)【特許請求の範囲】
【請求項１】
放送においてサーモグラフィー特性を表示する方法であって、
カメラを利用して放送を記録することと、
前記放送に対するサーモグラフィー特性を判定することと、
前記サーモグラフィー特性を表示する放送において、グラフィックを描画することと、を含み、
前記サーモグラフィー特性は環境状況に対して分析され、
前記サーモグラフィー特性を表示するグラフィックは前記放送にオーバーレイされる方法。
【請求項２】
サーモグラフィー特性は、会場における少なくとも１つの測定点で測定される、請求項１に記載された方法。
【請求項３】
サーモグラフィー特性は複数の測定点で測定され、該サーモグラフィー特性が前記放送において表示される、請求項２に記載された方法。
【請求項４】
前記サーモグラフィー特性は、前記放送に対して模擬的に示される、請求項３に記載された方法。
【請求項５】
サーモグラフィー特性は、前記放送の分析により判定される、請求項１に記載された方法。
【請求項６】
サーモグラフィー特性は、サーモグラフィー又は赤外線カメラ機器により判定される、請求項１に記載された方法。
【請求項７】
地面又は大気への影響に対してサーモグラフィーが分析される、請求項１に記載された方法。
【請求項８】
前記放送における、目標のサーモグラフィー特性が表示される、請求項１に記載された方法。
【請求項９】
前記特性は、ボール、車、選手の内の１つ以上に対する影響を含み、前記放送にオーバーレイされるグラフィックはサーモグラフィー特性を示す、請求項８に記載された方法。
【請求項１０】
サーモグラフィーを測定し、その後サーモグラフィーを示すグラフィックを前記放送にオーバーレイすることを更に含む、請求項８に記載された方法。
【請求項１１】
放送においてサーモグラフィー特性及び効果を表示するシステムであって、
放送を記録するように構成されたカメラと、
前記放送に対するサーモグラフィー特性を表示するように構成されたグラフィック描画部と、
前記サーモグラフィー特性が表示された放送に前記描画されたグラフィックを出力するように構成された出力部と、を備え、
前記サーモグラフィー特性は環境状況に対して分析され、
前記サーモグラフィー特性を表示するグラフィックは前記放送にオーバーレイされるシステム。
【請求項１２】
サーモグラフィー特性は、会場における少なくとも１つの測定部で測定される、請求項１１に記載されたシステム。
【請求項１３】
サーモグラフィー特性は複数の測定点で、複数の測定部を介して測定され、サーモグラフィー特性が前記放送において表示される、請求項１２に記載されたシステム。
【請求項１４】
前記サーモグラフィー特性は、前記放送に対して模擬的に示される、請求項１３に記載されたシステム。
【請求項１５】
サーモグラフィー特性は、前記放送を分析するように構成された、コンピュータ分析部により判定される、請求項１１に記載されたシステム。
【請求項１６】
サーモグラフィー特性は、サーモグラフィー又は赤外線カメラ機器により判定される、請求項１１に記載されたシステム。
【請求項１７】
地面又は大気への影響に対してサーモグラフィー特性が分析される、請求項１１に記載されたシステム。
【請求項１８】
前記放送における、目標のサーモグラフィー特性が表示される、請求項１１に記載されたシステム。
【請求項１９】
前記サーモグラフィー特性は、ボール、車、選手の内の１つ以上の特性を含み、前記放送にオーバーレイされるグラフィックはサーモグラフィー特性を示す、請求項１７に記載されたシステム。
【請求項２０】
サーモグラフィー測定部をさらに備え、その後サーモグラフィー特性を示すグラフィックを前記放送にオーバーレイすることをさらに含む、請求項１１に記載されたシステム。
【発明の詳細な説明】
【関連出願の相互参照】
【０００１】
本特許出願は、米国仮出願第６２／０９１，５０２号（２０１４年１２月１３日出願）の優先権を主張し、米国出願第１４／８０４，６３７号（２０１５年７月２１日出願）の一部継続出願であり、その全文は参照により本明細書に組み込まれる。
【背景技術】
【０００２】
本開示は、放送においてサーモグラフィー特性を表示するためのシステム及び方法に関する。本開示の例示的実施形態は、会場でのサーモグラフィー特性を測定するか放送を体系的に分析し、放送においてサーモグラフィー効果を表示するための改善した方法に関する。
【０００３】
放送において目標を特定する既知の一般的方法には改善の余地が認められる。例えば、本明細書で説明するように、放送においてサーモグラフィー特性を表示することが考えられる。
【０００４】
したがって、以下の開示では、放送においてサーモグラフィー特性を表示することを説明する。これは、サーモグラフィーセンサ又はレンズにより、又は放送を分析してそこにおけるサーモグラフィー特性を判定することで実現される。
【発明の概要】
【０００５】
本開示は、放送においてサーモグラフィー特性を表示するための改善されたシステム及び方法を提供する。本開示はまた、概してあらゆる種類の目標の追跡及びタグ付けに関する。追跡及びタグ付けは、目標のハイライトや、距離、投影軌跡、風、熱、地勢等の環境状態等の情報のオーバーレイ表示を含む。
【０００６】
例示的実施形態により、カメラを利用して放送を記録することと、前記放送に対するサーモグラフィー特性を判定することと前記サーモグラフィーコンテンツを表示する放送において、グラフィックを描画することとを含む、放送においてサーモグラフィー特性を表示するシステム及び方法が提供される。例示的実施形態において、サーモグラフィー特性は、会場における１つ以上の目標についてセンサ又はレンズにより判定され、放送においてサーモグラフィー特性が表示される。
【０００７】
別の例示的実施形態において、サーモグラフィー特性は、前記放送の分析により判定される。別の例示的実施形態において、サーモグラフィーコンテンツは地面又は大気への効果のような環境的状況に対して分析される。
【０００８】
別の実施形態では、ボール、車、選手に対する影響のような、放送における目標へのサーモグラフィー効果が表示され、前記放送にオーバーレイされるグラフィックはサーモグラフィー効果を示す。
【０００９】
例示的実施形態では、放送において１つ以上の目標が追跡され（追跡は位置探知又は特定を含む）情報がタグ付けされる。当該情報の例としては、競技場上のアスリートのプレー又は成績に関するものが挙げられる。
【００１０】
本発明の上述した、又はその他特徴及び効果は、以下の詳細な説明及び図面により当業者により理解可能となろう。  
【図面の簡単な説明】
【００１１】
以下の図を参照に、説明を展開するが、同様の要素に同様の参照符号が付される。
【００１２】
【図１】図１は、競技場での追跡対象アスリートの例を示す。
【００１３】
【図２】図２は、競技場での追跡対象アスリートの別の例を示す。
【００１４】
【図３】図３は、追跡対象アスリートの成績が半透明表示される例を示す。
【００１５】
【図４】図４は、追跡対象アスリートの追加的選手成績の例を示す。
【００１６】
【図５】図５は、追跡対象アスリートの成績が半透明表示される別の例を示す。
【００１７】
【図６】図６は、複数のアスリートが追跡された例を示す。
【００１８】
【図７】図７は、追跡されたアスリートの成績が部分的に表示された例を示す。
【００１９】
【図８】図８は、追跡されたアスリートに試合中の成績が付された例を示す。
【００２０】
【図９】図９は、追跡されたアスリートの成績が消えた例を示す。
【００２１】
【図１０】図１０は、リプレイ機能の例を示す。
【００２２】
【図１１】図１１は、グラフィック機能の例を示す。
【００２３】
【図１２】図１２は、オペレータのユーザーインターフェースの例を示す。
【００２４】
【図１３】図１３は、カメラとその構成の例を示す。
【００２５】
【図１４】図１４は、カメラと撮像の例を示す。
【００２６】
【図１５】図１５は、本開示の実施形態に係わるシステム構成の例を示す。
【００２７】
【図１６】図１６は、本開示の実施形態に係わる別のシステム構成の例を示す。
【００２８】
【図１７】図１７は、本開示の実施形態に係わるワークステーションの配置例を示す。
【００２９】
【図１８】図１８は、本開示の実施形態に係わるワークステーションの別の配置例を示す。
【００３０】
【図１９】図１９は、７２０ｐ選択可能抽出ウィンドウを含む４Ｋ撮像画像のグラフィカルユーザーインターフェースの例を示す。
【００３１】
【図２０】図２０は、相対的抽出の例示的実施形態を示す。
【００３２】
【図２１】図２１は、４Ｋ画像を撮像して、現場外プロセッサ及びグラフィカルユーザーインターフェースに送る第１システムの例を示す。
【００３３】
【図２２】図２２は、現場で４Ｋ画像を撮像して処理し、その後現場外でＨＤ画像の送信が生じる第２システムの例を示す。
【００３４】
【図２３】図２３は、ハイライトを含むゴルフのスクリーンショットの例を示す。
【００３５】
【図２４】図２４は、ハイライトと追加的オーバーレイ表示を含むゴルフのスクリーンショットの例を示す。
【００３６】
【図２５】図２５は、ハイライトと追加的オーバーレイ表示を含むゴルフのスクリーンショットの別の例を示す。
【００３７】
【図２６】図２６は、測距情報とその他オーバーレイ表示を含むゴルフのスクリーンショットの例を示す。
【００３８】
【図２７】図２７は、カメラシステムの例を示す。
【００３９】
【図２８】図２８は、測距及び環境情報を含むゴルフのスクリーンショットの例を示す。
【００４０】
【図２９】図２９は、風のオーバーレイ表示を含むレースコースのスクリーンショットの例を示す。
【００４１】
【図３０】図３０は、風のオーバーレイ表示を含むレースコースのスクリーンショットの別の例を示す。
【００４２】
【図３１】図３１は、風のオーバーレイ表示を含むフットボールのスクリーンショットの例を示す。
【００４３】
【図３２】図３２は、ゴルフホールハイライト効果の例を示す。
【００４４】
【図３３】図３３は、パターが入る直前の、図３２のハイライト効果の例を示す。
【００４５】
【図３４】図３４は、パターが入った後の、図３３のハイライト効果が縮まった例を示す。
【００４６】
【図３５】図３５は、例示的なマッピングされたグリーンを示す。
【００４７】
【図３６】図３６は、図３５のグリーンに実質的にシェーディングが施されていない状態を示す。
【００４８】
【図３７】図３７は、図３６のグリーンに部分的にシェーディングが施された状態を示す。
【００４９】
【図３８】図３８は、図３７のグリーンに更なるシェーディングが施された状態を示す。
【００５０】
【図３９】図３９は、図３８のグリーンに更なるシェーディングが施された状態を示す。
【００５１】
【図４０】図４０は、複数のライ領域が表示された例示的放送フレームを示す。
【００５２】
【図４１】図４１は、ホールがハイライト表示され、好ましい領域、好ましくない領域が表示された例示的グリーンを示す。
【００５３】
【図４２】図４２は、ホールがハイライト表示され、好ましい領域、好ましくない領域が表示された別の例示的グリーンを示す。
【００５４】
【図４３】図４３は、好ましい領域、好ましくない領域を示すオーバーレイを実現するための例示的フローチャートを示す。
【００５５】
【図４４】図４４は、フリースタイルスキー競技に対する例示的サーモグラフィー効果を示す。
【発明を実施するための形態】
【００５６】
上述のように、本開示は放送においてサーモグラフィー特性を表示するための、改善されたシステム及び方法に関する。以下の開示は、概してあらゆる種類の目標に対する追跡しタグ付けに関するが、特にサーモグラフィーコンテンツ表示に対処したものである。
目標追跡及びタグ付け概要
【００５７】
例示的実施形態では、放送において１つ以上の目標が追跡され、情報がタグ付けされる。当該情報の例としては、競技場上のアスリートのプレー又は成績に関するものが挙げられる。
【００５８】
放送において、１人以上の選手をオペレータがより容易に選択できるよう、自動システムにより競技場上の複数又は全ての選手を追跡してもよい。当該選択後、オペレータが１つ以上の予め選ばれた候補を提供又は提示可能としてもよい。候補の例としては、一般的な成績、又は所定のプレーについての成績（例えば、通常の状態又は所定の特殊状況におけるレシーバーの成功率）や、所定の選手についての成績が挙げられる。
【００５９】
別の例示的実施形態では、例えば選手に関する成績、名前等の情報の放送中（又は放送後）に、当該成績がオーバーレイ映像により提供される当該映像は固定されていても、移動可能であってもよく、完全に表示されても一部のみ表示されてもよく（例えば放送中の画像から選手が出た場合）、不透明でも、半透明でも、フェードイン又はアウト、色付け等されてもよい。
【００６０】
なお、情報を一部のみを表示することは、表示された放送画像に関連するタグ付けが特に必要ではなく、むしろ放送中に選択的に表示されるかに関わらず記録画像に関連するタグ付けが必要であるという考えに基づく。追跡及びタグ付け範囲は、放送中に表示部よりも大きくてもよく、放送画像そのものに対して適宜出入り可能である。さらに、遅延した追跡や放送も考えられる。これにより、リアルタイム放送がいずれの当事者又は任意の当事者にとって満足のいくものではない場合に、オペレータ又はアニメータが対象選手をタグ付けできる。このようなタグ付けは、一般的なネットワーク接続が確立された、又は特殊なネットワーク接続が確立された（例えば、特定のアニメータ又はオペレータ等に割り当てられた）、タブレットのような、接続端末又は無線装置を介して実現されてもよい。
【００６１】
例示的実施形態ではさらに、プレー中の選手を映像情報が完璧追跡に又はある程度追うようにして、競技場における１人又は複数の選手を追跡してもよい。ある程度追うということは、例えばタックルを躱したり、所定のカットを切る又はブレイクアウト動作を行ったりする場合に選手の動作を認識しやすくする等、特定の状況で望ましくあり得る。さらに、プレーの映り方を妨げることなく、放送コンテンツの視聴者に対して邪魔にならない補足情報を提供するよう、スタッツグラフィックが表示／非表示となるように上手く調整できる。添付の各種図面は、例えばアンドリュー・ホーキンズ（行われた試合でのシミュレーション用オーバーレイ表示とする）が一部映り込んだ状態のような、ある時点を示すものである。    
【００６２】
例えば、図１は、概して参照符号１００で表すアンドリュー・ホーキンズがパントリターンでフレーム右側にいる様子を示す。ここでは、ホーキンズが追跡されているが、概して参照符号１０２で表すオーバーレイ表示は、当該選手の情報の任意の一部のみを示している（フレームインしたばかりであるため）。図２に示すように、該選手がさらにフレーム内に進むと、ここではチーム名１０４、背番号１０６、そして選手名１０８を含む、該選手の情報１０２が完全に示される。図３では概して参照符号１１０で表すように、１０から１５ヤードの間でタックルが決まった様子を示す。そのため任意で該選手の情報が放送画像から消される。
【００６３】
同様の例を、図４、図５に示す。この例では（ディフェンスの配置につく以外）特に目立ったプレーがないままファーストダウン残り１０ヤードの状況で配置につくアントーン・スミス１００に、ここではチーム名１０４、背番号１０６、選手名１０８、ラッシング１１２、ヤード数１１４、という情報１０２が全て表示されており、当該アニメーションが動作直前に、概して図５の参照符号１１６で表すように一部消える。
【００６４】
図６、７は、概して参照符号１００及び１１８でそれぞれ表す複数（ここでは２人）の選手が追跡された様子を示す。ただし、追跡可能な目標（ボール、ライン、フィールドマーク、コーチ、その他）、選手の数は、本開示のものに限られるものではない。ここでは、アサンテ・サミュエル１００とＡ．Ｊグリーン１１８が向かい合っているが、図７では放送画像が動くことで、彼らのタグ付け情報１０２が、部分的に放送用画面から外れてしまっている。
【００６５】
図８及び９は、タグ付けの別の例を示す。ここでは、図８におけるシフトの際にグレッグ・ジェニングス１００に明確なタグ付けがされている。そして図９のスナップに際して、タグ付け情報１０２がプレー表示に邪魔にならないようにフェードアウトする。
【００６６】
ここで説明されたシステム及び方法は、任意の数の目標（例えば選手）が追跡できるという利点がある。一実施形態では、イベント（例えばバスケットボール）の各チームにおけるそれぞれの５選手が追跡される。別の実施形態では、各チームの５選手に加えて、特定の又は全てのファンや、コメンテーター（例えばディック・ビテール）のような「第６の選手」も追跡される。これにより、放送が盛り上がりそうな、コート外の面白い出来事を自動的又は手動で認識可能とすることができる。自動的に認識する場合、事前にわかっている成績又は重要度（例えば試合、シーズン等、成績、ＳＮＳでの注目度、有名人のステータス等）に応じて行われてもよい。
【００６７】
例示的な本システム及び方法は、複数のリプレイ用機能を有することが有利である。例えば、図１０に示すような、選手名識別子１０８、ハイライトリング１２６（ポストプロダクションで付されるリプレイ用リング）、選手の軌跡及び速度１２８である。さらに、図１１に示す選手名識別子１０８、試合中の成績１２０、シーズン成績１２２、選手又はコーチコメント又はその他情報１２４他、様々な表示機能等を採用してもよい。
【００６８】
その他例示的実施形態を、ゴルフへの適用を例として説明する。例えば、選手、ゴルフボール、ゴルフホール、地勢等が追跡又はタグ付けされてもよい。これらは、放送が見やすくなるよう、そしてプレーの追跡がしやすくなるよう、ハイライト又は別の方法にて強調されてもよい。図２３は、概して参照符号３００で示すゴルフコースのグリーン３０４上のホール３０２をハイライトした例を示す。
【００６９】
さらに、測距計情報、地勢勾配、風や気温情報のようなその他環境状況の情報のオーバーレイ表示を行ってもよい。図２４では、ホール３０２のハイライトとともに、例示的オーバーレイ表示情報３０６が追加されている。当該情報は、ゴルフボール３０８からホール３０２への距離や、ここでは右から左への地勢についての情報である地勢情報である。図２５は、さらに見やすくするため、ホール３０２にリング３１０がさらにオーバーレイ表示されている例を示す。
【００７０】
距離について、例示的実施形態において、ゴルフ選手（又はその他関心点）からゴルフコースの関心領域への距離を示すように、放送用カメラを較正してもよい。当該距離は、予め設定されていたり、特定のものをハイライトするように、生中継中に選択されていたりしてもよい。図２６は、ボール３０８からピン３１４への投影軌跡３１２と、概して参照符号３１６，３１８，３２０で表すような、ボール３０８からピン及び２つのバンカーへの距離を示す情報がオーバーレイ表示された状態を示す。図２６では、さらに何ホール目か、打数を示すオーバーレイ表示情報３２２が示されている。
【００７１】
別の例示的実施形態においては、ボール軌道又は軌跡がさらに表示されたり、元画像に対して人工的に生成及びオーバーレイ表示又は代入されてもよく、さらに二次的画面として供されたりしてもよい。例示的表示としては、選手のショットを含んでも含まなくてもよい、仮想的鳥瞰視あってもよく、それは動的又は手動で描写されてもよい。追跡は、ＧＰＳ、レーダー、複数のカメラ（高所カメラ、ドローン、ハイコントラストカメラ等）により補助されてもよく、さらに／或いは特定のコース又はコース上の地点に対して説明が結び付けられたり関連付けられたりしてもよい。図２７は、第１カメラ３２４が吊レール３２６から垂下し、第２カメラ３２８が車輪３３０により可動であるフェアウェイカメラの例を示す。
【００７２】
図２８は、カメラ（複数可）又はその他機器により提供可能なオーバーレイ表示情報３３２の例示的実施形態を示す。本実施形態では、選手名３３４、打数３３６、ピンへの距離３３８、フェアウェイ上の位置（様々な形態において概して参照符号３４０で表す）や、風等の環境的要素（様々な形態において概して参照符号３４２で表す）が挙げられる。
サーモグラフィー表示
【００７３】
図２９は、例示的な環境的オーバーレイ表示として、カーレースコース３４６上に風の影響３４４がさらにオーバーレイ表示された状態を示す。風（及び温度等のようなその他環境的要素）が測定又はシミュレーションされ、放送に対してオーバーレイされてもよい。風は、会場又はその一部の一端において測定され、その後競技場にオーバレイされた３次元世界のＶＩＺＲＴに出力されてもよい。    
【００７４】
サーモグラフィーについて、図４４は概して、フリースタイルスキー競技におけるサーモグラフィー効果３５０を示す。図示のように、映像中に異なるレベルの熱表示が確認できる。例えば高温部３５２と、比較的低温部３５４が表示されている。
【００７５】
現状をシミュレーションしたものをＶＩＺＲＴ又は任意の適した３Ｄレンダラに出力し、アニメーションとして競技場にオーバーレイ表示されてもよい。これらシミュレーションは、生映像に配置され、カメラ視点を追跡することで、その配置に留まるようにしてもよい。
【００７６】
さらに、多数の測定点を分析に組み込んでもよく、又は画像を例えば埃、熱波、及び波に対する動きのような風（又はその他環境的状況）の地面又は大気に対する影響について分析してもよい。    
【００７７】
図３０は、コース３４６上だけではなく、その周りの構造体やコースに対する風の影響３４４を示す。図３１は、フットボール場３４８に対する風の影響３４４を示す。    
【００７８】
さらに、当該情報は放送そのものへの影響や、例えばレースカーへの影響を示したり、試合中のボールへの影響等のような、放送における目標へオーバーレイ表示されるものであってもよい。    
【００７９】
サーモグラフィー（熱を検出するカメラ又はその他センサ）を利用すれば、熱を帯びた個所又は冷えた個所を検出し、表示できる。例えば、選手のケガの箇所や、車や表面の熱等を示すことができる。このようにサーモグラフィーにより、セーリング、野球、クリケット（熱がバットにボールが当たったことを示す）、サッカー、フットボール、レース、ボクシング、総合格闘技等の様々な放送で便利なものとなりうる。上述のように、放送用カメラとともに、サーモグラフィーや赤外線等用のカメラを使用して熱を検出してもよい。
【００８０】
例示的実施形態では、高度な編集ソフトを使用してもよい。それによりカメラ間の「フライ（ｆｌｙ）」バーチャルカメラ角度、ストップモーションアクション、高度なテレストレータ処理及び視覚的分析等が実現できるがこれらに限定されない。
本開示は、プリプロダクションパッケージ、スタジオ生放送、大規模なイベントにも適用できる。
【００８１】
上述のように、例示的実施形態では地勢、ゴルフホール等を追跡及びタグ付けできる。さらに、追跡は、特定のコース又はコースの特定箇所に結び付けられた又は関連付けられた説明によるものであってもよい。さらに、上述のように、特定のアニメータ、オペレータ、コーチ、選手等によりオーバーレイ表示情報が生成されてもよい。  
【００８２】
例示的実施形態において、専門家（例えばゴルフプロ）により入力として、地勢の好ましい及び／又は好ましくない箇所（例えばフェアウェイ、グリーン等における箇所）を示すグラフィックがゴルフコースにオーバーレイ表示される。例えば、当該ゴルフプロは、客観的要素及び任意で主観的要素（例えばゴルファーが次のショットを打つにあたり不利となり得る場所を含む）を考慮して、所定のゴルフコースのホールにおいて、ティーショットからのボールが着地する好ましい及び／又は好ましくない地点を特定してもよい。例示的実施形態において、「好ましい」場所及び「好ましくない」場所には、例えばそれぞれ緑及び赤い領域のグラフィックがオーバーレイ表示されてもよい。
【００８３】
例えば、図４０は、概して参照符号５００で表すゴルフホールの放送画像を示す。図中のゴルフホールの例示的要素として、例えば、ティーグランド５１０、フェアウェイ５１２、ピン５１６を含むグリーン５１４、各種バンカー５１８が示されている。図４０ではさらに、例えばステーション識別バナー５３０、ホール識別バナー５３２、風況バナー５３４、プレーヤーボードバナー５３６のような各種例示的バナー情報が示されている。例示的実施形態において、好ましいライに応じて、少なくとも１つ、ここでは２つの領域が該当箇所に示されている。    
【００８４】
図４０において、第１領域５２０（例えばグリーン上）は、ティーショットからの好ましいライを表す。図示のように、任意の表示された領域は望ましさの度合いを示すものであってもよい。この例では、同心円が図示されており、より内側の円がより好ましいことを示す。別の態様にて、任意のある領域内で、より好ましいライ又はより好ましくないライを示してもよい。例えば、限定的ではなく、あくまで例示的であるが、複数の異なる同心形状、英数字標記、対象表示等を採用してもよい。
【００８５】
図４０を再度参照すると、第２領域５２２（例えば赤で表示）は、好ましくないライを表す。ここでは、形状の全体に斜線を入れている。上述のように、任意のある領域内で、各種好ましさの度合いを表示できる。さらに、これら領域は、選手や、例えばプレー中の風況の変化のような状況に応じて、リアルタイム又は一定期間毎に調整又は移動できる。
【００８６】
図４１は、ピン５１６と、第１領域５２０及び第２領域５２２によるピンハイライト表示５３８とを含む例示的グリーン５１４を示す。この図はさらに、本稿記載の複数の要素を組み合わせることができるという本稿の教示を裏付けるものである。ここでは、ホールハイライトと、領域表示が組み合わされている。図４２は、ホールハイライト表示（ここでは可変的密度シェーディング）と領域表示の別の例示的組み合わせを示す。
【００８７】
図４３は、概して専門家、アナリスト等による入力、マップへの表示及び／又はオーバーレイを含む例示的フローチャートを示す。図４３は、想定され得るより具体的な実施形態を更に示す。図中、ボックス５４０においてゴルフプロ／アナリストの検討により、フェアウェイにおける好ましい箇所候補（好ましい領域候補。例えば緑で示す）と好ましくない箇所候補（より好ましくない領域候補。例えば赤で示す）が決定される。ボックス５４２において、当該情報の表示や特定が、コースの二次元マップに付される。ボックス５４４において、当該情報（例えば手書き表示）が、様々なソースの内、第三者の技術提供者等により提供され得る三次元モデルに落とし込まれる。ボックス５４６において、これら予め特定された領域を、生放送及び録画済みセグメントに対応する高性能カメラにマッピングされたレイヤとして表示される。
【００８８】
上述のように、任意のゴルフコース、ホール、グリーン等の表示、マップ等は、任意の多数の方法で取得されてもよく、任意の数のソースから取得されてもよい。一例示的実施形態では、ゴルフプロが、マッピングされた地勢に目を通し、「好ましい」場所及び「好ましくない」場所を割り当てる（例えばホール毎等）。これら割り当てられた場所は、直前のショットの飛距離、地勢の想定される状況、時刻、照明、風況、選手の身体能力又は技能等を考慮に入れられるように、任意の所望のサイズ又は形状であってもよい。さらに、これら場所は、地勢の状況、任意の特定の選手の性質、環境状況、不慮の障害等、任意の要素の変化に応じて更新されてもよい。
【００８９】
例示的実施形態において、このような場所の表示は、タブレットやその他携帯装置のようなユーザーインターフェースにより専門家が入力しても、その他編集者又はオペレータが入力してもよい。例示的実施形態において、ユーザーはコースマップから、コースの３Ｄ画像のデータを入力する。更なる例示的実施形態では、予め決まった特定のカメラ映像からの（当該カメラの視点からの）コースの３Ｄ画像が表示され、情報がそこにオーバーレイ表示される。
【００９０】
さらに、当該情報は放送そのものへの影響や、例えばレースカーへの影響を示したり、試合中のボールへの影響等のような、放送における目標へオーバーレイ表示されるものであってもよい。サーモグラフィー（熱を検出するカメラ又はその他センサ）を利用すれば、熱を帯びた個所又は冷えた個所を検出し、表示できる。例えば、選手のケガの箇所や、車や表面の熱等を示すことができる。このようにサーモグラフィーにより、セーリング、野球、クリケット（熱がバットにボールが当たったことを示す）、サッカー、フットボール、レース、ボクシング、総合格闘技等の様々な放送で便利なものとなりうる。上述のように、放送用カメラとともに、サーモグラフィーや赤外線等用のカメラを使用して熱を検出してもよい。
【００９１】
図３２は、ゴルフホールハイライト効果のオーバーレイ表示４１０の別の例を示す。この例示的実施形態では、グリーン上のグラフィックによりゴルフホールをハイライトする拡張現実の場合を示す。当該実施形態では、ゴルフホールを見る人にとって、ピンがなくなるとわかりにくくなりうる、グリーン上の方向を示すことができて有利である。別の例示的実施形態では、当該ハイライトは、グリーン上の相対的シェーディングを測定して、当該ハイライトが有効であるかを判定する（例えば、シェーディング又はその他特徴による何らかの差分閾値を超えるか否か）制御ソフトウェアを挟んで、自動的に実行されてもよい。
【００９２】
図３３は、パターが入る直前、ホールを拡大した状態の図３２のハイライト効果の例を示す。図３４は、パターが入った後、ハイライト表示を縮めることで、パターが入ったことを強調した状態の、図３３のハイライト効果の例を示す。
【００９３】
別の例示的実施形態では、ゴルフコースをライダースキャンすることにより、地形、距離、縮尺等についてのデータ（例示的実施形態では、精確なデータ）が得られる。当該データは、カメラ較正や画素追跡データに組み込まれてもよく、ホールハイライト、ヤードマーカー、選手識別子等を含むグラフィックのコースへのマッピングが行われる。別の例示的実施形態では、仮想的なスコアボードや、広告等の三次元物体の挿入が行われる。
【００９４】
ライダー又はその他本稿記載の例を利用した、ゴルフホールのハイライト表示の上述した例示的説明における方法及びシステムは、目標のハイライトが望ましい別の放送にも適用できる。当該放送の例としては、テニス、野球、フットボール、スキー等が挙げられるが、これに限られるものではない。
【００９５】
図３５に示すように、別の例示的実施形態では、以降の図でも示すようにグリーンの地形を強調するように影を表示することによる、グリーンのグラフィックによる強調が実現されるマッピングされたグリーン４２０の例を示す。この例示的実施形態では、所定の角度で伸びる影（白点によるグリーンマッピングは必須ではない）のグラフィックを表示することで、グリンーンの勾配の印象をより強く示そうとするものである。図３６は、図３５のグリーンに実質的にシェーディングが施されていない状態を示す。図３７は、図３６のグリーンに部分的にシェーディングが施された状態を示す。図３８は、図３７のグリーンに更なるシェーディングが施された状態を示す。図３９は、図３８のグリーンに更なるシェーディングが施された状態を示す。
【００９６】
上述の当該機構は手動又は自動で実現されてもよい。自動の場合、システムは例えばグリーン表面上のシェーディング又は色のレベルを比較することで、シェーディングのレベルが適切であるか判定する。
【００９７】
また、上述のようにゴルフコースをライダースキャンすることで、グリーンの当該データを得られる。ライダースキャンにより得られたコースの三次元モデルを合わせて、生中継映像に組み合わせることで、システムは濃淡効果の相対的強度や、グリーン上の仮想的光源の方向を調整できる。
【００９８】
ライダー又は別の方法、或いは本明細書記載の任意の別の例により、ゴルフコースの地形を取得する上述の例の方法及びシステムを、さらに目標のハイライトが望ましい別の放送にも適用できる。当該放送の例としては、テニス、野球、フットボール、スキー等が挙げられるが、これに限られるものではない。
ユーザーインターフェース
【００９９】
以下に説明するものを含む、各種構成において、各種説明した任意の機能を制御するためのインターフェースとしてタッチスクリーンが使用できることが理解されよう。
【０１００】
図１２は、概して参照符号１３０で表す例示的なユーザーインターフェース（ＵＩ）を示す。これにより、概して参照符号１３２で表される選択肢として表示されるイベントにおける各種カメラの、映像選択１３１、撮像、リプレイ１３３等が実行できる。図示の通り、この例示的実施形態では、１０人の選手が追跡され（攻撃１３４対守備１３６）、オペレータが１人以上選択できる。例示的実施形態では、複数のアスリートがより追跡しやすくなるよう、オペレータは１つ又は複数のモニターを利用可能であってもよい。さらに、図示のように、ＵＩの更なる要素として、よく使う項目１３８、自動モード１４０、手動モード１４２、ハイライト１４４、切り替え１４６、音声１４８、ディスク１５０、追加モード１５２、アニメーションコマンド１５４等が考えられる。追跡された選手に関して、限定的ではないが、この特定の実施形態では、概して参照符号１５６で表す（１人以上の）選手の成績として、関連する試合中成績１５８、シーズン成績１６０、テキスト１６２が選択しやすい。
【０１０１】
図１３は、例示的なカメラ構成を示す。概して参照符号１６４で表すカメラアレイと、概して参照符号１６６で示すフットボール用の吊りカメラ構成（例えばフィールドセンタ―ラインから２１フィートに設置）が利用される。図１４は、カメラ１７０からの撮像画像１６８を示す。
【０１０２】
図１５から１８は、当該システムの例示的制御設定を示す。該システムは、スタジアム内部材１７２、Ａユニット部材１７４、Ｂユニット部材１７６、Ｃユニット部材１７８を有する。図１５及び１６は、カメラアレイ１８０と、オペレータのノートＰＣ１８２と、Ａユニット内のルーター１８８及びファイヤウォール１９０へのＬ３ボックス１８４を介した接続１８６を示す。Ｂユニットは、制御エンジン１９２、Ｖｉｚエンジン１９４、ＶｉｚＴｒｅｏ１９６と、トップフロントカメラ処理システム１９８並びにＵＩコンピュータ２００を有する。ＣユニットはＳｐｏｒｔＶＩｓｉｏｎシステム２０２として示されている。Ｂユニットでは、さらにスタッツノートＰＣ２０４も示されている。
【０１０３】
図１７は、様々なスタジオステーションに囲まれたグラフィック用設備２０６を示す。設備は、オーディオサブミックス２０８、ＴＤ２１０、ディレクター２１２、プロデューサー２１４、８セカンドガイ（８  Ｓｅｃｏｎｄ  Ｇｕｙ）２１６、ＡＤ２１８、役員２２０、技術担当２２２、成績２２４、ＦｏｘＢｏｘオペレータ２２６、Ｔｏｐｆｏｎｔオペレータ２２８、スタッツオペレータ２３０、ＶｉｚＢＡ２３２、Ｖｉｚオペレータ２３４、並びに編集室２３８におけるＳｐｏｒｔＶｉｓｉｏｎ  １ｓｔ＆Ｔｅｎ２３６、４Ｋオペレータ２４０、ゲームエディット２４２を含む。
【０１０４】
例示的実施形態では、ネットワーク接続性対システムのクローズドネットワークは、Ｃａｔ５からカメラ、ファイバーからカメラ又はファイバーからフィールドの妨げのない展望が得られるトラック、全てのレンダラのプレビューを示すモニター、プログラムモニター、ＩｓｏからＴｏｐＦｏｎｔオペレータ（例えば２チャネルベルトパック又はＫＰパネル）を有するＰＬステーションを含む。２つ以上のシングルモードファイバーを、ＲＶＯＮ  ＫＰパネルに３番目に取り付けられ得るモニタリング用信号供給に利用してもよい。
【０１０５】
例示的実施形態において、光学追跡により、競技場の移動体を追跡する。これは、画像認識、可能な追跡を示す動作感知型指示等の任意の追跡を含む。
【０１０６】
例示的システムを以下に例１として示す。
例１  概要
【０１０７】
この処理は、＼「Ａ」クルー（「Ａ」Ｃｒｅｗ）に該当するが、ＴｒａｃＡＢが望ましい任意の放送に広く適用できる。  
【０１０８】
これは現場での動作に適用される。関係団体間でのやり取りは全て問題なかったものとする。
例１  担当
【０１０９】
ＴｒａｃＡＢオペレータ：主にＴｒａｃＡＢカメラのフィールドに対する調整、及びイベント中の選手のタグ付けを担当。現在追跡中の目標の成績についてＴｏｐＦｒｏｎｔオペレータと協議する。フィールドを遮るものなく見えるようなスタジアム内の場所にいる。建物内の利用可能なファイバーを取得するために、部署と協働する。操作位置にて、インターカムを設定するように、スポーツオーディオ部署と協働する。必要であればＴｒａｃＡＢシステムのトラブルシューティングを行う。機材の設定、操作について何らかの問題があれば適時技術担当に伝達する。
【０１１０】
ＴｏｐＦｏｎｔオペレータ：主に、会社により提供されたタッチスクリーンインタフェースを使用して、放送中にＴｏｐＦｏｎｔ挿入を担当。プロデューサー、ディレクター、スタッツ担当、グラフィックＢＡと協議の上、いつどのようなグラフィックが必要かを決定。さらに、リプレイ質向上のため、テープルームと協働する。シーズン毎にタグ付け要な主要選手についてＴｒａｃＡＢオペレータと協議する。必要であればＴｏｐＦｏｎｔシステムのトラブルシューティングを行う。機材の設定、操作について何らかの問題があれば適時技術担当に伝達する。
【０１１１】
１ｓｔ＆Ｔｅｎオペレータ：４つのカメラ位置において、三脚及び雲台を建てる。１ｓｔ＆Ｔｅｎシステム及びＴｏｐＦｏｎｔシステムでの使用に合わせて、当該雲台やカメラを較正する。ＴｏｐＦｏｎｔシステムとの接続を確認。試合中に１ｓｔ＆Ｔｅｎシステムを操作。必要に応じて、１ｓｔ＆Ｔｅｎシステム及びＰＴＺデータのトラブルシューティングを実施。機材の設定、操作について何らかの問題があれば適時技術担当、技術監督、担当技術者に伝達。  
【０１１２】
ＥＶＳオペレータ：ＲＰ−１８８タイムコードに合わせて記録再生が行われるように、全ての機器が設定されていることを確認。設営日に技術監督と、ＴｏｐＦｏｎｔオペレータとテスト、確認を行う。機材の設定、操作について何らかの問題があれば適時技術監督、担当技術者に伝達。  
【０１１３】
モバイルユニットエンジニア：映像、ネットワークによる放送にシステムを組み込む。全ての信号が存在し、アクセス可能であることを確認。適宜、ＴｒａｃＡＢオペレータ、ＴｏｐＦｏｎｔオペレータ、１ｓｔ＆Ｔｅｎオペレータのトラブルシューティングを補佐。  
例１  定義及び用語
【０１１４】
ＴｒａｃＡＢ：２つのカメラアレイ、処理用コンピュータ、追跡用コンピュータから成る光学追跡システム。この場合、情報用グラフィックを挿入するために、三次元空間における目標（選手）の情報の配置に利用される。該装置同士は、それらのクローズドネットワークにおいて、ギガビットイーサネットスイッチを使用して、ネットワーク接続される。処理用コンピュータは、グラフィックネットワークに対して、第２ＮＩＣを介して接続される。  
【０１１５】
ＴｏｐＦｏｎｔ：４つの個別のレンダラにより、４つのカメラの内の１つの合成ＨＤ−ＳＤＩ版として提供されるＴｏｐＦｏｎｔ。本システムは、タッチスクリーン付きのユーザーインターフェースコンピュータと、４つの描画コンピュータから成る。これら５つのコンピュータは、グラフィックネットワークに対するギガビットイーサネットスイッチを使用して互いにネットワーク接続される。  
【０１１６】
１ｓｔ＆Ｔｅｎ：ダウン及び距離（黄線）を挿入するために現状使用されているシステム。  
【０１１７】
メディアコンバータ：光電変換器。この場合、スタジアム内のイーサネットからファイバーへの変換そして、トラックの位置でのファイバーからイーサネットへの変換のために使用される。  
【０１１８】
ＢＤＮ：ＮＦＬの試合におけるグラフィックネットワークに使用される、ＦＯＸブロードキャストデータネットワーク。
【０１１９】
光ファイバーケーブル：本稿では、あらゆる光ファイバーケーブルは、特に別途記載がない限り、単一モードファイバであるものとする。
【０１２０】
ＧＢＥスイッチ：ポート間で１ｇｂｐｓ送信が可能な管理スイッチ。
例１  処理ステップ
例１  初期統合
【０１２１】
処理コンピュータの４つのＲＵ用の空間を特定。設備に処理コンピュータを設置。クローズドネットワーク用のＧＢＥスイッチを設置。各処理コンピュータからのＮＩＣ１を、クローズドネットワーク用のＧＢＥスイッチに接続。処理コンピュータがグラフィックネットワークに対してＩＰ情報を使用する場合、システムのＮＩＣ２にＩＰアドレス情報を設定。    
【０１２２】
ＨＤ−ＳＤＩ入力及び出力を、各レンダラに接続し、プロダクションスイッチャー及びルーティングスイッチャーで利用可能とする必要がある。スキャン変換出力により、各ＴｏｐＦｒｏｎｔレンダラのプレビュー出力が提供される。これは、ルーティングスイッチャーで利用可能にする必要がある。    
【０１２３】
１ｓｔ＆Ｔｅｎシステムを通常の方法で設置する。１ｓｔ＆Ｔｅｎシステムは２０個のＲＵに含まれない。    
【０１２４】
設置されたコンピュータ（レンダリングエンジン、ユーザーインターフェースコンピュータ）のそれぞれに、グラフィックネットワーク用のＩＰ情報を使用してＩＰアドレス情報を設定する（機器出荷前にＩＰアドレス情報が提供されていることが望ましいが、必ずしもそうとは限らない）。    
【０１２５】
グラフィックネットワークを含むギガビットイーサネットスイッチに設置されたコンピュータを接続する。ＴｏｐＦｏｎｔオペレータのユーザーインターフェース位置を接続。全てのコンピュータを起動し、トラック内の全装置間のネットワーク接続を確認する。  
例１  週毎のＴｒａｃＡＢ設定
【０１２６】
ＴｒａｃＡＢが設置される場所は、スタジアムスタッフ及び技術監督により協議される。ＴｒａｃＡＢカメラをＣユニットから積み下ろし、スタジアム内に運ぶ。ＴｒａｃＡＢカメラアレイを設置する。
【０１２７】
各ＴｒａｃＡＢカメラアレイに沿って基準映像を撮影する。各ＴｒａｃＡＢアレイに電力を送る必要がある。ＴｒａｃＡＢアレイ同士を、イーサネットケーブルにより接続する。  
【０１２８】
ＧＢＥ信号が通過するには距離が長すぎる場合、或いはカメラ間をＣＡＴ−５ケーブルでつなぐことが物理的に不可能である場合、カメラ間にＧＢＥ対応メディアコンバータ群を使用してもよい。１つのＴｒａｃＡＢアレイが、トラック内のクローズドＨｅｇｏ社システムネットワークにギガビット対応メディアコンバータを介して接続される。別のＴｒａｃＡＢアレイは、イーサネットケーブルを介して、ＴｒａｃＡＢオペレータのノートＰＣに接続される。ＧＢＥ信号が通過するには距離が長すぎる場合、或いはカメラと操作位置とを、ＣＡＴ−５ケーブルでつなぐのが物理的に不可能であれば、カメラと操作位置、又はトラックと操作位置との間にＧＢＥ対応メディアコンバータ群を使用してもよい。
【０１２９】
ＴｒａｃＡＢオペレータが、ビデオモニタ、ノートＰＣ、インカムから成る操作位置を設営する。ＴｒａｃＡＢオペレータが、アレイを較正し、ＴｒａｃＡＢシステムに関する全てが正しく機能しているかを確認する。全て機能していれば、ＴｒａｃＡＢオペレータが技術監督に報告する。  
【０１３０】
選手をタグ付けするために使用され得る例示的ユーザーインターフェース（ＵＩ）を次に説明する。
【０１３１】
例示的カメラにより、選手を追跡し、コンピュータに情報を送る。コンピュータのオペレータは、手動で選手をタグ付けするか、自動タグを見るか、自動タグを確認する。このデータをコンピュータに送れば、オペレータは適切なグラフィックを放送用に描画できる。
【０１３２】
光学追跡により競技場の移動体を追跡するが、それは正しい移動体に適切な選手を割り当てる、比較的手動寄りの処理であってもよい。  ただし、以下のような更なる例示的実施形態を採用してもよい。
【０１３３】
例示的な処理やワークフローにより、より早く選手のタグ付けを可能とする。これは、物理的タグ付け処理を、スタンドにおいて、或いはカメラで行うのではなく、トラックに移転することを含んでもよい。本開示は、ゲームカメラを使用して選手をタグ付けする様々な手法を提案する。その例として、よりタグ付けが効率的にできるよう、適切なゲームカメラをオペレータにルーティングしてもよい。
【０１３４】
本開示ではさらに、上記と完全に異なる選手追跡方法が記載されている。当該方法としては、グラフィックオペレータが、自身のタッチスクリーンのようなインターフェースを使用して、選手をタグ付け可能とする方法が挙げられる。    
【０１３５】
本開示はさらに、逆タグ付け方法も含む。具体的には、フィールド画面の選手を特定し、別のコンピュータでタッチされたフィールドの位置に最も近い選手をタグ付け用コンピュータに問い合わせてもよい。  そして、フィールド上の最も近い目標に適切な選手をタグ付けしてもよい。
【０１３６】
さらに、この技術を、特に関心領域ハイライトについて、ＨＤよりも高解像度の技術に使用することも有利となり得る。例えば、本稿で説明したＨＤよりも高解像度の技術は、選手追跡等と組み合わせて使用してもよい。例示的実施形態は、以下に記載されるものに加えて、追跡データを利用してパン、スキャン、及び／又はズームする予め設定され制御される抽出ウィンドウを考慮するものである（すなわち、追跡データを利用した抽出ウィンドウの制御）。
【０１３７】
例示的な処理は以下の通りとなる。
【０１３８】
例えば４Ｋ映像のような、ＨＤ映像よりも高解像度なフルラスターで開始する。
【０１３９】
関心のある領域を表すボック又はカーソルグラフィックを表示してもよい。
【０１４０】
そしてボックスを埋めるように表示を拡大する。
【０１４１】
ＨＤよりも高解像度の技術の例示的実施形態におけるシステム及び方法は以下の通りとなる。第１の解像度で、第１画像又は映像を撮影する。当該解像度は、ＨＤよりも高く、所定の放送表示解像度よりも高い。第１画像又は映像の所望の箇所を、その後第２のより低い解像度で表示する。当該低い解像度は、所定の放送表示解像度より低く、近似する。その結果、撮像画像の選択部分は、所定の放送表示解像度で、又はそれに近い解像度で表示できる（即ち、所定の放送表示解像度に対して、画像の詳細部が失われることをなくすか、最小限にする）。
【０１４２】
この例を、図１９に示す。ここでは、フルラスター４Ｋ動画像１０のスクリーンショットを示す。そして、提示用に７２０ｐ選択可能抽出ウィンドウ１２として図示される４Ｋ画像の一部を選択する。そして、元画像はＨＤよりも高解像度で取得され、そのＨＤよりも高解像度の画像の部分が、７２０ｐ抽出ウィンドウにより、提示用に選択される。図１７では、４Ｋ撮像と、７２０ｐ抽出ウィンドウによる具体例を示すが、撮像画像と抽出ウィンドウの一方又は両方は、別の解像度で提示又は切り取られてもよいことが理解されよう。図２０は、概して参照符号１３で表す、相対的抽出を示す同様の図である。
【０１４３】
また、図１９では抽出ウィンドウが１つ示されているが、本開示は、１つの撮像画像に同時に複数の抽出ウィンドウを表示することも含む。
【０１４４】
更なる例示的実施形態では、選択用抽出ウィンドウ（図１９における１２）により、オペレータが撮像画像内を操作し、提示用に撮像画像内の部位を選択可能とするグラフィックユーザーインターフェース（「ＧＵＩ」）（図２１及び２２の１４）が提供される。例示的実施形態において、抽出ウィンドウは、オペレータがそのサイズと位置を調整できるように構成される。別の例示的実施形態では、抽出ウィンドウは、例えばスポーツイベント中に関心プレー又は被写体を追うように、抽出ウィンドウが動画像中を追跡又は走査するように構成される。別の例示的実施形態において、複数のオペレータは、同一又は複数のＧＵＩから、同じ画像を抽出してもよい。
【０１４５】
図２１と２２を参照すると、撮像画像の処理は、現場外（図２１）又は現場（図２２）で実行してもよい。図２１は、カメラ１６が例えばスポーツイベントの競技場（概して参照符号１８で表す）で４Ｋ画像を撮像する例示的システムを示す。例えば４Ｋ動画の全帯域を送信可能なファイバーのような送信機構２０により、撮像画像を例えばフィールド１８から離れた中継用トラックのような操作拠点（「ＯＢ」）（概して参照符号２２で表す）に送る。
【０１４６】
画像レコーダ２４は、例えばサーバー上のデータストリームとして撮像画像を記録し、さらにオペレータに記録画像の時間を遡り、上述のように撮像画像の選択部位を精査可能とするように構成される。当該制御は、ＧＵＩ１４とレコーダ２４との間のインターフェースとなるプロセッサ２６を通じて、ＧＵＩ１４を介してオペレータに提供される。例示的実施形態において、レコーダ、プロセッサ、ＧＵＩは、オペレータに提示用の記録画像の部位を選択するように即時又はほぼ即時遡ることを可能とする。    
【０１４７】
例えば、図２１に示すように、トラック内のオペレータは、ＧＵＩを利用して、関心領域を選択するために、カーソルの場合と同様に、フルラスター４Ｋ画像を操作し、選択用１６：９抽出ウィンドウを操作する。例示的実施形態において、ＧＵＩは、抽出ウィンドウにより生中継画像及び記録画像の一方又は両方において関心領域が選択可能となるように構成される。さらに、上述のように、本開示は抽出ウィンドウのサイズを調整、拡縮する機能を含む。別の例示的実施形態では、システムはキーフレームをマーキングし、例えば画像周りのパンやズーム等の所望の動作用にマッピングを行うように構成される。
【０１４８】
再び図２２を参照すると、例示的実施形態において、システム出力２８（例えば４Ｋ撮像画像に対する７２０ｐ／５９．９４出力）が、ルーター３０に提供されて、生中継用にスイッチャー３２に出力されるか、後に再生されるようにサーバー３４（「ＥＶＳ」）に取り込まれることを可能とする。さらに、例示的実施形態において、必要であれば得られた画像をスロー再生用又は静止画になるように、サーバー３４又はオペレータ位置で（プロセッサ２６を介して）処理されてもよい。
【０１４９】
図２２に、別の例示的実施形態を示す。ここでは元画像（この例では４Ｋ画像）の撮像、画像送信、記録は、例えばスポーツイベントのフィールド１８のような現場で実行される。現場プロセッサ２６は、操作拠点２２（例えばトラック。なお、任意の適切な地点からＧＵはアクセス可能である）のオペレータＧＵＩ１４を提供するか、それに対するインターフェースとなり、さらにオペレータが抽出ウィンドウにより画像を指示することが可能となるように、上記画像の基準映像３８を提供する。そして出力２８が、フィールドから現場外ルーター３０に送信される。  
【０１５０】
別の実施形態では、少なくとも１つのＧＵＩに、システムのナビゲーションツールとしてのタブレットコントローラでアクセスされる。当該タブレットコントローラは無線及び携帯式であることで、柔軟な主要又は補助ナビゲーションツールとなり得る。
【０１５１】
別の例示的実施形態では、複数のカメラが異なる視点から画像を撮影するように配置され、抽出ウィンドウが、異なる視点から元画像の部位を選択的に表示するための、システムにおける多数の撮像に対して提供されてもよい。    
【０１５２】
更なる例示的実施形態では、関心対象がリアルタイム又は略リアルタイムで追跡される（例えば、特定、選択、事前タグ付けされた関心選手又は試合中のボールの自動追跡）。更なる例示的実施形態では、さらに完全生放送に割り込むために操作された又は自動追跡関心対象の仮想的な指示が行われる。ここでは、バックエンドソフトウェアや追跡技術により、人間のカメラオペレータと同様に動作する仮想的なビューファインダーが提供される。当該処理は、例えば単一の特定目標等の単純な追跡に対して人工的技術を利用してもよい。或いは、例えば人間のオペレータと同様の抽出ウィンドウのＰＴＺのような、人間のカメラオペレータが採用する動作に近似したより複雑な動作に利用してもよい。４Ｋ（等）の撮像を利用した例では、カメラによる撮像は特別に設計された４Ｋカメラによって行われてもよい。さらに、対象をより詳細に撮像するようにより広いレンズをカメラに利用して、ポストプロダクションにおける再構成や平坦化を行ってもよい。さらに、異なる用途に専用の異なるレンズを利用してもよい。
【０１５３】
当該処理は、上述のように複数のカメラや、複数の抽出ウィンドウを利用してもよく、単一のカメラや単一の抽出ウィンドウに対して特別に実行されてもよい。これにより、ＡＩが抽出ウィンドウ（複数可）を仮想的なビューファインダーとして利用して、放送用素材を自動的に撮像、抽出、表示できる。
【０１５４】
更なる例示的実施形態では、例えば２つのウィンドウ出力を有する単一の４Ｋ又は８Ｋカメラで仮想的な３Ｄ抽出が実現される。
【０１５５】
別の例示的実施形態では、上述のように、撮像解像度の向上に合わせて又はその代わりに、放送フレームレートに対して撮像フレームレートを上げてもよい。
【０１５６】
当該実施形態では、第１映像が所定の放送フレームレートよりも高い第１フレームレートで撮像される。そして第１映像の所望の箇所が、所定の放送フレームレートよりも低く近似する第２のより低いフレームレートで表示される。第１映像の所望の箇所は、元撮像画像全体で、フレームを抽出する抽出ウィンドウにより取得される。これにより、エッジの多い又はぼやけたフレームのない、滑らかでクリアな映像が抽出される。このように撮像された第１映像は、所定の放送フレームレートを超える任意のフレームレートであってもよい。
【０１５７】
更なる例示的実施形態では、第１映像はスーパーモーション又はハイパーモーションの第１フレームレートで撮像される。従前の映像では、これはプログレッシブ式フレームレートにて、毎秒約１８０（「スーパーモーション」）フレーム、又はそれ以上（「ハイパーモーション」又は「ウルトラモーション」）を意味する。例示的実施形態において、ハイパーモーションはプレーバック用カメラのトリガ時点で撮像するのに十分な離散時間で記録される。別の例示的実施形態では、本システムはカメラのハイパーモーションで、フルタイム記録が実現される。これは例えば、１５分超、３０分超、１時間超、１時間半超、又は２時間超等のリプレイ再生に十分な長さとなる。
【０１５８】
別の実施形態では、少なくとも１つのカメラからの生データが操作され、画質を調整して放送要件に合うようにする（「ペインタブル」にする）。例示的実施形態では、放送「ハンドル」をシステムに組み込んで、生データが放送の色温度や色調及びガンマ変数をより反映するようにしてもよい。
【０１５９】
したがって、本開示は放送画像プロダクション又はその他用途のため、元画像の一部を選択的に取得して提示するシステム及び方法を提供するという利点がある。ＧＵＩを介して選択可能な抽出ウィンドウを使用する例示的実施形態により、オペレータは提示したいと思う、元画像中の部位を完全に制御できる。さらに、ＨＤ以上の解像度の撮像（例えば４Ｋ）を利用した例示的実施形態により、オペレータにより選択された画像の所望の箇所が、ＨＤ画質で、又はそれに近い解像度で（即ち、画質の相対的劣化なく）提示できる。さらに、所定の放送フレームレートを超えるフレームレートで撮像を行う例示的実施形態により、エッジの多い又はぼやけたフレームのない、滑らかでクリアな映像が撮像から抽出される。最後に、関心対象の自動追跡のような高度なＧＵＩ特徴を利用した各種例示的実施形態により、１つ又は（異なる視点の）複数の撮像用の複数のＧＵＩ又は抽出ウィンドウで、プロダクションが柔軟かつ有利になるという利点が得られる。
【０１６０】
例示的実施形態を図示、説明したが、本発明の精神又は範囲から逸脱しない限り、本明細書で開示された本発明を各種修正及び変更してもよいことが、当業者には理解されよう。さらに、上述の例示的な形態は、構成及び方法について、非限定的なものとして解されるべきである。したがって、上述の各種実施形態は、例示的に説明したもので、限定的ではないと理解されよう。
【図１】
0006719466.tif 000002
【図２】
0006719466.tif 000003
【図３】
0006719466.tif 000004
【図４】
0006719466.tif 000005
【図５】
0006719466.tif 000006
【図６】
0006719466.tif 000007
【図７】
0006719466.tif 000008
【図８】
0006719466.tif 000009
【図９】
0006719466.tif 000010
【図１０】
0006719466.tif 000011
【図１１】
0006719466.tif 000012
【図１２】
0006719466.tif 000013
【図１３】
0006719466.tif 000014
【図１４】
0006719466.tif 000015
【図１５】
0006719466.tif 000016
【図１６】
0006719466.tif 000017
【図１７】
0006719466.tif 000018
【図１８】
0006719466.tif 000019
【図１９】
0006719466.tif 000020
【図２０】
0006719466.tif 000021
【図２１】
0006719466.tif 000022
【図２２】
0006719466.tif 000023
【図２３】
0006719466.tif 000024
【図２４】
0006719466.tif 000025
【図２５】
0006719466.tif 000026
【図２６】
0006719466.tif 000027
【図２７】
0006719466.tif 000028
【図２８】
0006719466.tif 000029
【図２９】
0006719466.tif 000030
【図３０】
0006719466.tif 000031
【図３１】
0006719466.tif 000032
【図３２】
0006719466.tif 000033
【図３３】
0006719466.tif 000034
【図３４】
0006719466.tif 000035
【図３５】
0006719466.tif 000036
【図３６】
0006719466.tif 000037
【図３７】
0006719466.tif 000038
【図３８】
0006719466.tif 000039
【図３９】
0006719466.tif 000040
【図４０】
0006719466.tif 000041
【図４１】
0006719466.tif 000042
【図４２】
0006719466.tif 000043
【図４３】
0006719466.tif 000044
【図４４】
0006719466.tif 000045