(57)【要約】      （修正有）【課題】簡易な構成でありながら、当該手書き画像情報入力手段の利用者が直感的にビデオ画像情報表示手段に表示されているビデオ画像情報上の任意の部位に対して、当該手書き画像情報入力手段を介して、所望の手書き画像情報を容易に且つ直感的に書き込む事が可能な手書き画像情報入力手段及び手書き画像情報入力方法を提供する。【解決手段】ビデオ画像記録手段２、ビデオ画像情報表示手段３、手書き画像情報入力手段４が演算制御手段５を介して相互に接続されている画像情報表示装置１に於いて、当該ビデオ画像記録手段２により記録された画像情報を当該ビデオ画像情報表示手段２の画像情報表示部３１に表示している状態で、当該手書き画像情報入力手段４により出力される手書き画像情報を、当該ビデオ画像情報表示手段３の当該画像情報表示部３１に表示しているビデオ画像情報の上に書込み表示する様に構成されている。【選択図】図１
2010015212.tif 000002
【特許請求の範囲】
【請求項１】
ビデオ画像情報記録手段、ビデオ画像情報表示手段、手書き画像情報入力手段、当該ビデオ画像情報記録手段の配設状態を検出する配設状態検出手段、手書き入力画像情報３次元化手段、記憶手段及び画像情報合成手段とからなる画像情報表示装置に於いて、当該ビデオ画像記録手段により記録されたビデオ画像情報を当該ビデオ画像情報表示手段の画像情報表示部に表示している状態で、当該手書き画像情報入力手段より出力される手書き入力画像情報を、当該ビデオ画像情報表示手段の当該ビデオ画像情報表示部に表示しているビデオ画像情報の上に３次元画像情報として書込み表示する様に構成されている事を特徴とする画像情報表示装置。
【請求項２】
当該ビデオ画像情報表示部に表示されているビデオ画像情報と当該ビデオ画像情報上に書き込まれた３次元手書き入力画像情報との相対位置は、当該ビデオ画像情報記録手段が変位、移動、旋回、上下動しても変わらないように構成されている事を特徴とする請求項１に記載の画像情報表示装置。
【請求項３】
当該記憶手段は、少なくとも当該手書き入力画像情報３次元化手段及び当該手書き画像情報入力手段と接続されており、且つ当該記憶手段には、解説者が予め解説する事を予定している当該ビデオ画像情報表示手段の画像情報表示部に表示されているビデオ画像情報のうちで、解説者が予め解説する事を予定している手書による書き込み操作に使用する所定の画像情報の少なくとも一部の画像情報に対応する複数種の３次元ＣＧ画像情報が予め記憶されていると共に、当該３次元ＣＧ画像情報にそれぞれ対応する複数種の２次元展開図が予め記憶されている事を特徴とする請求項１又は２に記載の画像情報表示装置。
【請求項４】
当該３次元ＣＧ画像情報に係る位置情報データーの原点と当該展開図に係る位置情報の原点は一致している事を特徴とする請求項３に記載の画像情報表示装置。
【請求項５】
当該３次元ＣＧ画像情報に係る位置情報データーの原点と当該展開図に係る位置情報の原点とは、当該ビデオ画像記録手段に係る位置情報データーの原点と一致している事を特徴とする請求項３又は４に記載の画像情報表示装置。
【請求項６】
当該手書き画像情報入力手段は、当該表示部に入力された適宜の手書き入力画像情報に応答して当該手書き入力画像情報に対応するフィル（ＦＩＬＬ）信号及びキー（ＫＥＹ）信号を発生するフィル信号／キー（ＫＥＹ）信号発生手段と接続されている事を特徴とする請求項１乃至５の何れかに記載の画像情報表示装置。
【請求項７】
当該記憶手段は、複数の記憶手段から構成されており、少なくとも第１の記憶手段は、当該手書き入力画像情報３次元化手段と接続されており、且つ当該複数種の３次元ＣＧ画像情報を予め記憶しているものであり、第２の記憶手段は、当該手書き画像情報入力手段と接続されており、且つ複数種の２次元展開図を予め記憶している事を特徴とする請求項３に記載の画像情報表示装置。
【請求項８】
当該手書き入力画像情報３次元化手段は、当該フィル信号／キー信号発生手段及び当該配設状態検出手段と接続されており、且つ、該手書き入力画像情報３次元化手段は、当該フィル信号／キー信号発生手段から入力される当該２次元フィル信号及びキー信号を当該記憶手段に記憶されている当該選択された展開図に対応する選択された所定の３次元ＣＧ画像情報の位置情報及び当該配設状態検出手段から入力される当該ビデオ画像情報記録手段の配設情報を参照して３次元的表示が可能となる様にフィル信号／キー信号を変換し、当該変換されたフィル信号／キー信号を含むビデオ画像情報を描画して当該画像情報合成手段に出力する事を特徴とする請求項６に記載の画像情報表示装置。
【請求項９】
ビデオ画像情報記録手段、ビデオ画像情報表示手段、手書き画像情報入力手段、当該ビデオ画像情報記録手段の配設状態検出手段、手書き入力画像情報３次元化手段、複数種の所望の展開図を記憶していると同時に当該展開図に対応する複数種の所望の３次元ＣＧ画像情報を記憶している記憶手段及び画像情報合成手段とからなる画像情報表示装置に於いて、当該ビデオ画像情報記録手段により記録されたビデオ画像情報が当該ビデオ画像情報表示手段のビデオ画像情報表示部に表示されている状態に於いて、当該ビデオ画像情報表示部に表示されている所定のビデオ画像情報の少なくとも一部に手書き入力画像情報を挿入するに際し、当該手書き画像情報入力手段に表示されている所望の展開図上に所望の手書き画像情報が入力されると、当該手書き画像情報入力手段から出力される当該手書き入力画像情報に関する２次元手書入力画像出力情報から２次元ＦＩＬＬ信号とＫＥＹ信号とが生成され、次いで、当該２次元ＦＩＬＬ信号とＫＥＹ信号を当該手書き入力画像情報３次元化手段に於いて、当該記憶手段から選択された当該展開図に対応する当該３次元ＣＧ画像情報と当該配設状態検出手段から出力される当該ビデオ画像情報記録手段の配設情報とから３次元的表示が可能となる様にＦＩＬＬ信号とＫＥＹ信号を変換し、その後、当該変換されたＦＩＬＬ信号とＫＥＹ信号を含む当該３次的に表示された手書き入力画像情報に関するビデオ画像情報を描画し、次いで、当該ビデオ画像情報記録手段から出力されている当該ビデオ画像情報と当該３次元的に表示された手書き画像情報とを画像情報合成手段に於いて合成した後、当該合成された画像情報を当該ビデオ画像情報表示手段の画像情報表示部に表示する事を特徴とする手書き画像情報入力方法。
【請求項１０】
当該ビデオ画像情報表示手段の画像情報表示部に表示されている画像情報の中で、移動可能な物体を選択指定することによって、当該移動可能な物体を当該展開図中に表示される様に構成されている事を特徴とする請求項１乃至８の何れかに記載の画像情報表示装置。
【請求項１１】
当該移動可能な物体を選択指定する事によって当該移動可能な物体の３次元位置情報を取得する位置情報取得手段が更に設けられている事を特徴とする請求項１０に記載の画像情報表示装置。
【請求項１２】
当該ビデオ画像情報表示手段の画像表示部若しくは当該手書き画像情報入力手段の表示部に表示されている当該移動可能な物体の存在位置の近傍に、当該移動可能な物体に関する特性に関する情報を表示されるように構成されている事を特徴とする請求項１０又は１１に記載の画像情報表示装置。
【請求項１３】
当該解説者が、当該移動可能な物体の存在する位置から当該手書き書き込み画像情報を入力できる様に構成されている事を特徴とする請求項１０乃至１２の何れかに記載の画像情報表示装置。
【請求項１４】
当該画像情報表示装置は、当該ビデオ画像情報表示手段の画像表示部に表示されている当該移動可能な物体の存在する位置情報を当該ビデオ画像情報表示手段の画像表示部に表示されている背景画像と対応する３次元ＣＧ画像情報から読み取り、当該読み取った当該移動可能な物体の３次元位置情報を２次元位置情報に変換する移動可能な物体位置情報変換手段を更に有している事を特徴とする請求項１０乃至１３の何れかに記載の画像情報表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像情報表示装置及び手書き書込み画像情報入力方法に関するものであり、特に詳しくは、カメラ等の画像情報記録手段で撮影し或は記録した画像情報を所定の画像情報表示手段上に表示している状態に於いて、当該画像情報表示手段上に表示されている画像情報上の所定の部位に手書きの画像情報を上書きする為の手書き書込み画像情報入力手段を含む画像情報表示装置及び手書き書込み画像情報の入力方法に関するものである。
【背景技術】
【０００２】
従来から、一般に、放送用テレビ或はモニター用テレビ等において、当該テレビ等の表示手段に表示されている画像情報に対して、適宜の手書き画像情報入力手段、例えば、スタイラスペンを使用するタブレット等を介して、任意の手書情報を入力して、当該テレビ等の表示手段に表示されている静止画像或は動画像上に当該手書情報を重ね合わせて表示する方法及び装置は、例えば特開平５-１８１９５２号公報（特許文献１）或は、特開平８-１６１１４３号公報（特許文献２）等が知られている。
【０００３】
然しながら、従来の手書き画像情報入力手段は、２次元的な画像情報しか得られないので、３次元の画像情報信号を有するテレビカメラにより記憶されている当該表示手段上に表示されて画像情報の上の適宜の部位に当該手書き画像情報入力手段で形成されている当該手書き画像情報を上書き或は重ね合わせ又はオーバーレイ等の方法を使用して合成し、当該合成処理結果の合成画像を表示する事が難しく、或は仮に合成表示が出来たとしても、その表示状態は、２次元の信号で構成されているので、背景となるビデオ画像が奥行きのある立体的な画像を表示しているのに対し、扁平状、のっぺりした線、符号、文字、図形等の画像情報のみが当該ビデオ画像上に示されるのみであるから、当該手書画像情報が、当該背景となるビデオ画像と分離した見苦しい形でしかなく、当該手書画像情報が、当該ビデオ画像と一体的に融和した画像を得る事が不可能であった。
【０００４】
更に、従来に於いては、当該手書き画像情報入力手段から得られる書込み画像情報は、当該テレビカメラの位置情報、移動情報等を含む配設情報と連動していないので、或は別途ＣＧによって構成された３次元オブジェクトが移動した場合には、仮に、当該テレビの表示手段上に表示されている当該ビデオ画像の少なくとも一部に当該手書入力画像が一旦表示されたとしても、カメラが移動した場合には、当該カメラによって表示されているビデオ画像の移動に当該手書入力画像が付いてゆけず、従って両者の画像は分離し、一致しなくなるので、書込み要素として成立しえない画像となってしまうという問題があった。
【０００５】
一方、カメラの雲台から当該カメラの配設情報に応じて、画像を描写する方法も知られて入るが、この方法に於いて当該手書き画像情報を入力するには、３次元の知識が必要であり、且つその操作は煩雑であるので、その当該手書き画像情報入力手段の使用者、例えば、テレビ放送の解説者等が自己の好みの手書画像情報を直感的に入力する事は不可能であった。
【特許文献１】特開平５−１８１９５２号公報
【特許文献２】特開平８−１６１１４３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
従って、本発明の目的は、上記したこれら従来の問題点を除くためになされたものであって、簡易な構成でありながら、当該手書き書込み画像情報入力手段の利用者がビデオ画像情報表示手段に表示されているビデオ画像情報（ＣＧによって構成された３次元オブジェクトの場合も含む）上の任意の部位に対して、当該手書き書込み画像情報入力手段を介して、所望の手書き書込み画像情報を容易に且つ直感的に書き込む事が可能で、然も手書書込み入力画像情報を立体的に表示可能な画像情報表示装置及び手書き画像情報の入力方法を提供するものである。
【０００７】
更に、本発明は、解説者が書込みした手書き書込み画像情報が極めて現実性を持った立体的形状で表示することによって、テレビの視聴者に対し理解し易い画像の提供とリアルチィー性や臨場感を与える事が可能な画像情報を提供する手書き画像情報入力手段及び手書き書込み画像情報入力方法を提供するものである。
【課題を解決するための手段】
【０００８】
本発明に係る当該係止具は、上記目的を達成するために、以下に示す様な基本的な技術構成を採用するものである。
【０００９】
即ち、本発明に係る当該画像表示装置の第１の態様としては、ビデオ画像情報記録手段、ビデオ画像情報表示手段、手書き画像情報入力手段、当該ビデオ画像情報記録手段の配設状態を検出する配設状態検出手段、手書き入力画像情報３次元化手段、記憶手段及び画像情報合成手段とからなる画像情報表示装置に於いて、当該ビデオ画像記録手段により記録されたビデオ画像情報を当該ビデオ画像情報表示手段の画像情報表示部に表示している状態で、当該手書き画像情報入力手段より出力される手書き入力画像情報を、当該ビデオ画像情報表示手段の当該ビデオ画像情報表示部に表示しているビデオ画像情報の上に３次元画像情報として書込み表示する様に構成されている事を特徴とする画像情報表示装置である。
【００１０】
又、本発明に於ける第２の態様としては、ビデオ画像情報記録手段、ビデオ画像情報表示手段、手書き画像情報入力手段、当該ビデオ画像情報記録手段の配設状態検出手段、手書き入力画像情報３次元化手段、複数種の所望の展開図を記憶していると同時に当該展開図に対応する複数種の所望の３次元ＣＧ画像情報を記憶している記憶手段及び画像情報合成手段とからなる画像情報表示装置に於いて、当該ビデオ画像情報記録手段により記録されたビデオ画像情報が当該ビデオ画像情報表示手段のビデオ画像情報表示部に表示されている状態に於いて、当該ビデオ画像情報表示部に表示されている所定のビデオ画像情報の少なくとも一部に手書き入力画像情報を挿入するに際し、当該手書き画像情報入力手段に表示されている所望の展開図上に所望の手書き画像情報が入力されると、当該手書き画像情報入力手段から出力される当該手書き入力画像情報に関する２次元手書入力画像出力情報から２次元ＦＩＬＬ信号とＫＥＹ信号とが生成され、次いで、当該２次元ＦＩＬＬ信号とＫＥＹ信号を当該手書き入力画像情報３次元化手段に於いて、当該記憶手段から選択された当該展開図に対応する当該３次元ＣＧ画像情報と当該配設状態検出手段から出力される当該ビデオ画像情報記録手段の配設情報とから３次元的表示が可能となる様にＦＩＬＬ信号とＫＥＹ信号を変換し、その後、当該変換されたＦＩＬＬ信号とＫＥＹ信号を含む当該３次的に表示された手書き入力画像情報に関するビデオ画像情報を描画し、次いで、当該ビデオ画像情報記録手段から出力されている当該ビデオ画像情報と当該３次元的に表示された手書き画像情報とを画像情報合成手段に於いて合成した後、当該合成された画像情報を当該ビデオ画像情報表示手段の画像情報表示部に表示する事を特徴とする手書き画像情報入力方法である。
【発明の効果】
【００１１】
本発明は、上記した様な基本的な技術構成を採用しているので、簡易な構成でありながら、当該手書き画像情報入力手段を有する画像情報表示装置の利用者が直感的にビデオ画像情報表示手段に表示されているビデオ画像（ＣＧによって構成された３次元オブジェクトの場合も含む）上の任意の部位に対して、当該手書き画像情報入力手段を介して、所望の手書き画像情報を容易に且つ直感的に書き込む事が可能な画像情報表示装置及び手書き画像情報の画像情報入力方法を提供するものである。
【００１２】
又、本発明に於いては、カメラ等のビデオ画像記録手段が移動したり、その配設状態(例えばカメラの位置情報或はパン情報やチルト情報等の何れかが変化して、当該ビデオ画像情報表示手段に表示されているビデオ画像が変位したり、移動したりした場合でも、当該手書入力画像情報も当該ビデオ画像情報の動きに完全に追随して移動し、又変形するので、視聴者に画像情報に対する混乱と違和感を与える事が全くないと言う手書き画像情報入力手段を含む画像情報表示装置及び手書き画像情報入力方法を提供するものである。
【００１３】
つまり、本発明による３次元実時間画像手書き入力装置は、今まで成しえなかった３次元画像情報に対し、直感的な入力を可能とし、入力者の負担を増す事なく、理解し易い映像を提供する事が出来るのである。
【００１４】
更に、本発明は、解説者が書き込みした手書画像情報が極めて現実性を持った立体的形状で表示されることによって、テレビの視聴者に対し理解し易い画像情報の提供とリアルチィー性を与える事が可能な解説付き画像情報を提供する画像情報表示装置及び手書き画像情報入力方法を提供するものである。
【発明を実施するための最良の形態】
【００１５】
以下に、本発明に係る画像情報表示装置の一具体例の構成を、図面を参照しながら詳細に説明する。
【００１６】
即ち、図１は、本発明に係る画像情報表示装置１の一具体例の構成を示すブロックダイアグラムであり、図中、ビデオ画像情報記録手段２、ビデオ画像情報表示手段３、手書き書込み画像情報入力手段４、当該ビデオ画像情報記録手段２の配設状態を検出する配設状態検出手段６、手書き書込み入力画像情報３次元化手段５、記憶手段１４及び画像情報合成手段７とからなる画像情報表示装置１に於いて、当該ビデオ画像記録手段２により記録されたビデオ画像情報を当該ビデオ画像情報表示手段３の画像情報表示部３１に表示している状態で、当該手書き画像情報入力手段４より出力される手書き書き込み入力画像情報を、当該ビデオ画像情報表示手段３の当該ビデオ画像情報表示部３１に表示しているビデオ画像情報の上に３次元画像情報として書込み表示する様に構成されている画像情報表示装置１が示されている。
【００１７】
本発明では、上記した各手段は、適宜の演算制御手段（ＣＰＵ）５０により必要により適宜制御される様に構成されている。
【００１８】
更に、本発明に係る当該画像表示装置１の構成を詳細に説明するならば、当該手書き入力画像情報３次元化手段５には、解説者が予め解説する事を予定している当該ビデオ画像情報表示手段３の画像情報表示部３１に表示されているビデオ画像情報のうちで、解説者が予め解説する事を予定している手書による書き込み操作に使用する所定の画像情報の少なくとも一部の画像情報に対応する複数種の３次元ＣＧ画像情報を予め記憶している記憶手段１４が接続されており、当該手書き画像情報入力手段４にも、当該３次元ＣＧ画像情報にそれぞれ対応する複数種の２次元展開図を、３次元ＣＧ画像情報とは別個に、予め記憶している記憶手段１４が接続されている事が望ましい。
【００１９】
尚、本発明に於いては、当該記憶手段１４は、当該３次元ＣＧ画像情報と当該２次元展開図とを別々に格納する第１の格納部１５と第２の格納部１１とを有するものであっても良く、或いは、当該３次元ＣＧ画像情報を専ら格納する当該手書き書込み入力画像情報３次元化手段５に接続された第１の記憶手段１５と当該展開図を専ら格納する当該手書き書込み画像情報入力手段４に接続されている第２の記憶手段１１とで構成されているものであっても良い。
【００２０】
処で、本発明に於いて使用される当該３次元ＣＧ画像情報は、所定のテレビ放送が放映される場合に、当該放映されるビデオ画像情報の中で或る解説者が解説しようとする１乃至複数の画面を予め選定されているので、当該選定された１乃至複数種類の当該ビデオ画像情報の特定の部位に対応して別途作成された３次元ＣＧ画像である。
【００２１】
本発明に於いては、当該３次元ＣＧ画像は、予め別途作成する事も出来るが、既に完成している３次元ＣＧ画像を利用する事も可能である。
【００２２】
当該用意した当該３次元ＣＧ画像は、例えば、当該第１の記憶手段１５内に予め格納しておく。
【００２３】
一方、本発明に於いて使用される当該展開図は、上記によって作成された個々の３次元ＣＧ画像情報を２次元空間に展開して形成された２次元位置情報を持つ画像情報であり、当該一種或は複数種の当該展開図を予め用意して、例えば当該第２の記憶手段１１内に格納しておく。
【００２４】
本発明に於ける例えば、当該第１の記憶手段１５に記憶されている当該３次元ＣＧ画像情報と例えば、当該第２の記憶手段１１に記憶されている当該展開図とは、正に一対一に対応しており、少なくとも一方の記憶手段１４或は個別の記憶手段（１５又は１１）から所定の展開図若しくは３次元ＣＧ画像情報の何れかが選択された場合には、当該選択された一方の展開図若しくは３次元ＣＧ画像情報に対応する他方の３次元ＣＧ画像情報若しくは展開図が同時に同一の記憶手段１４或は他方の記憶手段（１１又は１５）から選択される様に構成されている事が望ましい。
【００２５】
本発明に於いては、上記構成を採用することによって、解説者が予め解説する事を予定していた所定のビデオ画像情報がモニターテレビに表示された時点で、適宜の入力手段、例えば入力手段１２を使用して、例えば、当該記憶手段１４あるいは当該第１の記憶手段１５から予め、予定していた３次元ＣＧ画像情報を選択すると、当該３次元ＣＧ画像情報に対応した所定の展開図が自動的に当該記憶手段１４或いは第２の記憶手段１１から選択される様に構成する事が出来る。
【００２６】
そして、当該解説者が更に、例えば当該入力手段１２に指示することによって、当該手書き画像情報入力手段４の表示部４１には、解説時に、必要に応じて例えば当該第２の記憶手段１１に記憶されている複数種の展開図の中から選択された一つの所定の展開図が表示される事になる。
【００２７】
本発明に於ける当該ビデオ画像記録手段２は、一般的なテレビカメラ、ビデオカメラを使用する事が可能であり、その構造、構成は、特に限定されるものではなく、従来周知のテレビカメラ或いはビデオカメラ等を使用する事が出来る。
【００２８】
又、本発明に於いては、当該ビデオ画像記録手段２は、特定の場所に固定されているものであっても良く、可動式或いは移動式のシステムを有するものであっても良い。
【００２９】
当該ビデオ画像情報記録手段２、例えばテレビカメラ等が固定式である場合には、当該ビデオ画像情報記録手段２の上下動、左右旋回動、ズーミング等の操作は、当該ビデオ画像情報記録手段２を直接操作しているカメラマンが実行するものであっても良く、或いは遠隔操作によって、自動的に所定のカメラ位置に当該カメラを向ける事が可能であり、係る遠隔操作システムは既に公知であるからその詳細は省略する。
【００３０】
又、当該ビデオ画像情報記録手段２の上記した変位或は移動状況は、当該カメラ等の配設状態と総称され、その変位状態を検出する為の、配設状態検出手段６によって逐次検出する事が可能である。
【００３１】
本発明に於いて、当該ビデオ画像情報記録手段２の配設状態を示す情報の例としては、例えば、少なくとも、当該カメラの実在位置情報、当該カメラの移動距離、移動方向、当該カメラのパン情報（水平方向の動き）、チルト情報（上下方向の動き）、ロール情報（左右の傾斜角度）、ハイト情報（床面からの高さ）、ポジション情報（平面位置）、ズーム情報（レンズの焦点距離）、フォーカス情報（レンズの焦点）等を含むものである。
【００３２】
尚、当該ビデオ画像情報記録手段２が移動式である場合には、例えば、当該ビデオ画像記録手段２がカメラマンが携行することによって移動する場合には、ＧＰＳシステムを利用して当該カメラの位置を特定する事が可能であり、又、当該ビデオ画像情報記録手段２がホイールを利用して移動する場合には、当該ホイールの回転数及び移動方向の各情報から当該ビデオ画像情報記録手段２の実在位置を特定する事が可能である。
【００３３】
係る当該ビデオ画像情報記録手段２の位置情報は、後述する手書により入力された画像情報を、撮影中の或いは再生中のビデオ画像表示手段３の当該表示部３１に表示されている当該画像情報と重畳させて合成する際に重要な要素となる。
【００３４】
つまり、ビデオ画像表示手段３のビデオ画像情報表示部３１に継続して表示されているビデオ画像情報上の所定の部位に、適宜の手書入力手段４２による書き込み用の画像情報を正確に重畳させ、立体的且つ一体的に合成表示させる為には、当該ビデオ画像情報記録手段２の位置情報と当該書き込み用手書き入力画像情報の位置情報とが正確に一致している必要がある。
【００３５】
係る構成を採用することによって、当該ビデオ画像情報表示部３１に表示されているビデオ画像情報と当該ビデオ画像情報上に書き込まれた３次元手書き書込み入力画像情報との相対位置は、当該ビデオ画像情報記録手段２が変位、移動、旋回、上下動しても変わらないように構成される事になる。
【００３６】
そのための具体例としては、所定のテレビ放送が開始される以前に、放映時に記録される画像情報を記録するテレビカメラ２の位置を予め決定しておく必要があり、この場合、例えば、所定のゴルフ場の所定のナンバーのグリーン周りを放映するとした場合に、当該グリーンに１台或は複数台のテレビカメラを所定の場所に固定する際に、例えば、ホールの位置、又は固定されている放水口或は樹木の一つを当該テレビカメラ等のビデオ画像情報記録手段２の位置情報の原点として設定しておく必要がある。
【００３７】
より具体的には、当該３次元ＣＧ画像情報に係る位置情報データーの原点と当該展開図に係る位置情報の原点は一致している事が必要であり、更には、当該３次元ＣＧ画像情報に係る位置情報データーの原点と当該展開図に係る位置情報の原点とは、当該ビデオ画像記録手段２に係る位置情報データーの原点と一致している事が必要である。
【００３８】
又、図１中、ブロック１３は、当該ビデオ画像情報記録手段２が記録したビデオ画像情報を当該画像情報合成手段７に送信する為の画像情報送信手段であって、当該ビデオ画像情報記録手段２から出力される当該カメラ等が記録した或いは記録中のビデオ画像情報は、直接当該画像合成手段７に入力される。
【００３９】
又、当該演算制御手段５０に接続されているブロック１２は、前記したものの他に、オペレータが当該ビデオ画像情報記録手段２に対して、現在の配設状態を変更させる場合に、変更条件を指示するための入力手段としても使用可能である。
【００４０】
次に、本発明に於いて使用される当該手書き画像情報入力手段４に付いて説明する。
【００４１】
即ち、本発明に於ける当該手書き画像情報入力手段４は、平面状の手書き書込みによる適宜の画像情報を入力できる入力部を兼ねた表示手段４１と、手書による適宜の画像情報を入力する為のスタイラスペン等４２とが一対となっているタブレットが使用されるものである。
【００４２】
即ち、本発明に於いて使用される当該手書き画像情報入力手段４の構成は特に限定されるものではなく周知のタブレット、タブレットＰＣ等を使用する事は可能である。
【００４３】
処で、当該ビデオ画像表示手段３に表示されている所定のビデオ画像情報を見ながら、適宜の解説者等がタイムリーに、適宜の手書き画像情報を当該ビデオ画像情報上に瞬時に表示しながら所定の解説を行いたい状況が頻繁に求められるが、従来でも、上記した画像情報合成手段により、適宜の手書き画像情報を当該ビデオ画像情報上に表示する事が出来てはいた。
【００４４】
然しながら、当該従来の手書き書込み画像情報入力手段４から入力された手書き書込み入力画像情報は、２次元の画像情報でしかないので、元々、奥行き情報、つまり３次元位置情報を有する当該ビデオ画像情報上に重ね合わせたとしても、画像上では、当該手書き書込み入力画像情報は、平面的が画像としてしか表示されないので、当該ビデオ画像情報と一体化された画像としては表現されず、相互に分離した状態の画像情報しか得られず、視聴者は不快感や違和感を感じると言う問題が存在していた。
【００４５】
更に、上記したとおり、従来では、当該手書き画像情報と当該ビデオ画像情報とは、個別に画像情報を形成しているので、双方の画像情報に於ける位置情報が相互に関連性を有していないので、ビデオ画像情報記録手段２が移動して或は変位して、表示されている画像情報が移動したり撮影のアングルが変更された場合、当該手書き書込み入力画像情報は、当該ビデオ画像情報のビデオ画像表示手段３での動きに追随する事が不可能であり、双方の画像情報が、分離してしまうと言う問題もあった。
【００４６】
これに対し、本発明に於いては、当該ビデオ画像情報記録手段２により記録された画像情報を当該ビデオ画像情報表示手段２の画像情報表示部３１に表示している状態で、当該手書き書込み画像情報入力手段４により出力される２次元情報を含む手書き書込み入力画像情報を、原点位置情報を基準として、当該ビデオ画像情報表示手段３の当該画像情報表示部３１に表示されているビデオ画像情報の上に３次元空間に沿って重畳し、書込み表示する様に構成されている事に特徴がある。
【００４７】
次に、本発明に於ける、従来周知のタブレット等からなる当該手書き書込み画像情報入力手段４から出力される２次元による位置情報から、上記した３次元的に表示される手書き書込入力画像のＣＧオブジェクトを描画する方法の一例を以下に説明する。
【００４８】
即ち、テレビ解説者等が画像情報表示手段３、例えばモニターテレビ画面を見ながら、その場で当該画像情報表示手段３に表示されている画像情報の所定の部位に所望の手書入力画像情報を書き込みたい場合には、先ず、解説者が当該手書き画像情報入力手段４に表示されている予め選択されている展開図の所定の画像情報上に適宜のスタイラスペン等４２を使用して適宜の書込み画像情報を入力すると、当該手書き画像情報入力手段４から、当該入力された手書書込み入力画像情報に関する２次元位置情報を含む画像情報が出力される。
【００４９】
この時点で、後述する当該手書き入力画像情報３次元化手段５には、当該記憶手段１４或いは当該第１の記憶手段１５から当該展開図に対応する当該３次元ＣＧ画像情報が選択されている。
【００５０】
その後、当該手書き画像情報入力手段４から出力された当該２次元手書書込み入力画像情報から、適宜の当該フィル（ＦＩＬＬ）信号／キー（ＫＥＹ）信号発生手段９を使用して、ＦＩＬＬ信号とキー信号を逐次発生させる。
【００５１】
即ち、当該手書き画像情報入力手段４は、当該表示部に入力された適宜の手書き書込み入力画像情報に応答して当該手書き入力画像情報に対応するフィル（ＦＩＬＬ）信号及びキー（ＫＥＹ）信号を発生するフィル信号／キー（ＫＥＹ）信号発生手段９と接続されている事が望ましい。
【００５２】
当該フィル（ＦＩＬＬ）信号は、書込みされる手書き書込み入力画像情報に関連する前景を表すテクスチャーであり、当該キー（ＫＥＹ）信号は、当該手書書込み入力画像情報を当該前景から切り取る為のテクスチャーであり、係る両テクスチャーを加算する事によって、所定の書込み用手書き入力画像情報が描画される。
【００５３】
本発明に於いて使用される当該フィル信号／キー信号発生手段９は、特に限定されるものではないが、例えばスキャンコンバータ等を使用する事が可能である。
【００５４】
尚、本発明に於いては、当該フィル信号／キー信号発生手段９は、当該手書き画像情報入力手段４内に内蔵されているものであっても良い。
【００５５】
当該フィル信号／キー信号発生手段９から出力された当該２次元化されたフィル信号とキー信号は、直接、或は必要によって適宜の増幅手段１０を通過した後、当該手書き入力画像情報３次元化手段５に送信され、そこで、当該２次元位置情報を持つフィル信号及びキー信号が、当該既に選択されている、当該展開図に対応した３次元ＣＧ画像情報及び当該配設状態検出手段６から入力される当該ビデオ画像情報記録手段２の配設情報とを参照しながら２次元位置情報のままで、３次元的表示が可能となる様にフィル信号及びキー信号が変換されるのである。
【００５６】
係る手書き入力画像情報３次元化手段５は、２次元位置情報を持つ当該フィル信号及びキー信号を、３次元化された画像情報が認識される様に、例えば、各ピクセルの色或いは濃度を異ならせる様な情報を持つ様に、当該フィル信号及びキー信号を変換する機能を有するものであれば特に限定されるものではなく、如何なる手段でも使用出来る。
【００５７】
例えば、本発明に於いては、当該展開図を適宜の第２の記憶手段１１から選択する際に、当該展開図に対応する３次元ＣＧ画像情報も同時に当該第１の記憶手段１５から選択されているので、当該選択された３次元ＣＧ画像情報を当該３次元化手段５に逐次送信し、当該２次元位置情報を持つ当該フィル信号及びキー信号を、３次元的表示が可能となる様にフィル信号及びキー信号を変換するに際し、当該２次元位置情報を持つ当該フィル信号及びキー信号の位置情報を呼び出した際に、当該２次元フィル信号及びキー信号の位置情報に対応する当該３次元位置情報をもつ３次元ＣＧ画像情報の位置情報を参照して読み出し、当該位置情報に含まれる高さ方向の位置情報を読み出して、当該高さ方向の位置情報を使用して更には、当該配設状態検出手段６によって検出された当該ビデオ画像情報記録手段２に関する配設情報を参照して、当該２次元位置情報を持つ当該フィル信号及びキー信号を、３次元的表示が可能となる様にフィル信号及びキー信号に変換する事が可能である。
【００５８】
即ち、本発明に於いては、具体的には、当該２次元フィル信号及びキー信号を３次元ＣＧ画像情報と配設情報を元に描画される手書き入力画像情報を表示するそれぞれのピクセルの色或いは濃度を変える様な信号情報を持つ様に変換するものである。
【００５９】
つまり、本発明に於いては、当該手書き入力画像情報を表示するそれぞれのピクセルの色或いは濃度を変更する事によって外観上３次元位置情報をもつ３次元手書き入力画像情報が認識できる事になる。
【００６０】
係る変換処理の他の例としては、例えば、従来公知のテクスチャーマッピング方式を利用する事も可能である。
【００６１】
次に、本発明に於いて使用される当該手書き入力画像情報３次元化手段５の具体的な構成に関して以下に説明する。
【００６２】
即ち、本発明に於いて使用される当該手書き入力画像情報３次元化手段５は、当該フィル信号／キー信号発生手段９及び当該配設状態検出手段６とそれぞれ接続されており、且つ、該手書き入力画像情報３次元化手段５は、当該フィル信号／キー信号発生手段９から入力される当該２次元フィル信号及びキー信号を、当該第１の記憶手段１５に記憶されている当該選択された展開図に対応する選択された所定の３次元ＣＧ画像情報の位置情報及び当該配設状態検出手段６から入力される当該ビデオ画像情報記録手段２の配設情報を参照して、３次元的表示が可能となる様にフィル信号／キー信号を変換させ、当該３次元的表示が可能な情報をもつフィル信号／キー信号に基づく手書き書込み入力画像情報のビデオ画像情報を描画して当該画像情報合成手段７に出力する様に構成されているものである。
【００６３】
処で、当該手書き入力画像情報３次元化手段５の構成の１具体例の構成を説明するならば、例えば、図１に例示されている様に、当該手書き入力画像情報３次元化手段５は３次元表示化手段５１と３次元ＣＧオブジェクト描画手段５２とから構成されており、当該手書き入力画像情報３次元化手段５は、当該演算制御手段５０により適宜に制御されている。
【００６４】
当該手書き入力画像情報３次元化手段５の動作の一例を説明するならば、先ず、当該ＦＩＬＬ信号／ＫＥＹ信号発生手段９から出力された当該ＦＩＬＬ信号／ＫＥＹ信号は、当該３次元ＣＧオブジェクト描写手段５２に入力される。
【００６５】
当該３次元ＣＧオブジェクト描画手段５２は、グラフィックボード或いは描画ボードと称される機能を有するものであって、例えば、ＡＶＣＧＰ−１５０等が使用できる。
【００６６】
当該３次元ＣＧオブジェクト描画手段５２に入力された当該２次元位置情報を持ったＦＩＬＬ信号／ＫＥＹ信号は、当該３次元表示化手段５１に転送される。
【００６７】
当該３次元表示化手段５１は、当該手書き入力画像情報３次元化手段５に接続されている例えば当該第１の記憶手段１５から当該展開図と対応する３次元ＣＧ画像情報を読み出すと同時に、当該手書き入力画像情報３次元化手段５に接続されている当該配設情報検出手段６から出力されている当該ビデオ画像情報記録手段２の配設情報情報を読み出して、当該両情報を関連的に使用して、入力された当該２次元位置情報を持ったＦＩＬＬ信号／ＫＥＹ信号を、３次元的表示が可能となる様にピクセルの色或いは濃度を変化せる信号情報を持ったＦＩＬＬ信号／ＫＥＹ信号に変換し、その結果を当該３次元ＣＧオブジェクト描画手段５２に戻す事になる。
【００６８】
尚、本発明に於いては、当該配設状態検出手段６が検出した当該ビデオ画像情報記録手段２の配設状態情報は、適宜のフォーマット、例えば、ＲＳ４２２等のフォーマットの形で直接当該３次元ＣＧオブジェクト描画手段５２に入力される。
【００６９】
当該３次元表示化手段５１としては、例えばブレーンストームと称されるソフト或いは当該ソフトを使用する適宜のデバイスを使用する事が可能である。
【００７０】
当該３次元ＣＧオブジェクト描画手段５２では、当該３次元表示化手段５１から送信された当該３次元的表示を可能とする情報を持ったＦＩＬＬ信号／ＫＥＹ信号を元に、当該手書き入力画像情報に関する３次元化された３次元ＣＧオブジェクトが描画され、その後、当該３次元的表示を可能とする様に変換された当該ＦＩＬＬ信号／ＫＥＹ信号に基づく当該３次元化された手書き入力画像情報ＣＧオブジェクトが当該画像情報合成手段７に対して出力される。
【００７１】
つまり、当該手書き書き込み入力画像情報に関する３次元ＣＧ画像情報（オブジェクト）が当該画像合成手段７に送信され、そこで当該ビデオ画像情報と合成され、元々３次元位置情報を有している当該ビデオ画像情報の上に当該手書き書き込み画像情報がオーバーレイされた状態の重ね合わせ画像情報が形成され（プログラムアウト）その後、当該プログラムアウトされた合成画像情報が、当該ビデオ画像表示手段３に表示される事になるのである。
【００７２】
本発明に於ける当該画像情報合成手段７は、当該手書き入力画像情報３次元化手段５から出力される当該手書き入力画像情報に関する３次元の位置情報を持つフィル信号／キー信号に基づくビデオ画像情報と当該画像情報記録手段２から出力されるビデオ画像情報と合成して画像情報表示手段３に出力するものである。
【００７３】
更に、付言するならば、本発明に於いて使用される当該画像情報合成手段７は、当該ビデオ画像情報記録手段２から出力されるビデオ画像情報と、当該手書き入力画像情報３次元化手段５に於いて、適宜の演算制御手段（ＣＰＵ）５０の制御の下で、当該３次元ＣＧオブジェクト描画手段５２が自ら描き出す当該ＦＩＬＬ信号／ＫＥＹ信号に基づく３次元ＣＧ（コンピュータグラフィック）画像とを、重ね合わせ、オーバーレイ等の手法を使用して合成し、その合成画像情報を放送用テレビ或いはモニターテレビ等の当該ビデオ画像表示手段３に表示するものである。
【００７４】
従って、本発明に於いて使用される当該画像合成手段７は、特に限定されるものではなく、従来周知の画像合成器を使用する事が可能であり、例えば、キーヤー（例えば、朋栄株式会社製のＶＲＰ−７０ＨＳ）等を使用する事が可能である。
【００７５】
尚、上記画像情報合成手段７に於いては、当該画像情報記録手段２から出力されるビデオ画像情報と当該３次元ＣＧ画像情報との間でアスペクト調整を行う事望ましい。
【００７６】
又、ブロック１０は、適宜の増幅手段である。
【００７７】
本発明に於いては、当該演算制御手段（ＣＰＵ）５０の制御の下で、当該３次元ＣＧオブジェクト描画手段５２が自ら描き出すＣＧ（コンピュータグラフィック）画像としては、当該手書き画像情報入力手段４に於いて、例えば、テレビの解説者等が、手書きにより描いた適宜の画像情報、例えば、線、点、符号、記号、マーク、図形、イラスト、数値、文字等を３次元化して描き出したＣＧ画像である。
【００７８】
本発明に於いては、係る操作を連続的に実行することによって、当該画像情報表示手段３の画像表示部３１に表示されている所定の３次元情報を有するビデオ画像情報の少なくとも一部の画像情報上に３次元的に表示された手書き書き込み入力画像情報が重畳して表示される事になる。
【００７９】
そして、本発明に於いては、上記一連の操作は、当該解説者が当該手書き画像情報入力手段４上で、所望する手書き画像情報の書き込み動作が完了するまで、繰り返される。
【００８０】
上記した様に、本発明に於いては、当該画像情報表示部に表示されているビデオ画像情報と当該ビデオ画像情報上に書き込まれた手書き画像情報の相対位置は、当該ビデオ画像情報記録手段が変位、移動、旋回、上下動しても変わらないように構成されているので、当該カメラの撮影条件が変化した場合でも、当該ビデオ画像情報の動きに当該手書き画像情報が追随する事が出来る。
【００８１】
上記した本発明に係る手書き書き込み画像情報の書込み操作を実行する為には、上記した手書による書き込み操作に使用する所定の画像情報の少なくとも一部の画像情報に対応する３次元ＣＧ画像情報及び、当該３次元ＣＧ画像情報に対応する２次元展開図とが予め用意され、それらが予め当該手書き入力画像情報３次元化手段５に接続された当該第１の記憶手段１５及び当該手書き画像情報入力手段７に接続された適宜の第１の記憶手段１１内にそれぞれ個別に格納されているものであっても良い。
【００８２】
即ち、本発明に於ける上記予備操作の例としては、或る特定のテーマに関するテレビ放送スケジュールが決定された後でかつ放映乃至収録される時点より前に、先ず、テレビカメラが配置される場所の位置情報に関する原点を決定しておく。
【００８３】
次いで、当該放映されるビデオ画像情報の中で解説者が解説しようとする１乃至複数の画面を選定し、当該選定された画面の特定の部位に対応する３次元ＣＧ画像を用意する。
【００８４】
当該３次元ＣＧ画像は、別途作成する事も出来るが、既に完成している３次元ＣＧ画像を利用する事も可能である。
【００８５】
当該用意した当該３次元ＣＧ画像は、例えば当該第１の記憶手段１５内に格納しておく。
【００８６】
更に、当該３次元ＣＧ画像情報を２次元空間に展開した位置情報を持つ画像情報である展開図を用意する。
【００８７】
当該展開図は当該第２の記憶手段１１内に格納しておく。
【００８８】
一方、当該３次元ＣＧ画像情報と当該２次元展開図のそれぞれの位置情報に関する原点と当該テレビカメラの位置情報に関する原点とを一致させる操作を実行しておく事が必要である。
【００８９】
具体的には、例えば、本発明に係る当該手書き入力画像情報３次元化手段５には当該第１の記憶手段１５が接続されており、又当該手書画像情報入力手段４には、当該第２の記憶手段１１が接続されており、当該第１の記憶手段１５には、当該ビデオ画像情報表示手段３の画像情報表示部３１に表示されているビデオ画像情報のうちで、手書による書き込み操作に使用する所定の画像情報の少なくとも一部の画像情報に対応する３次元ＣＧ画像情報が予め格納されており、又当該第２の記憶手段１１には、当該３次元ＣＧ画像情報に対応する２次元展開図とが予め格納されている事が必要である。
【００９０】
そして、本発明に於いて、解説者が解説を行う際には、当該手書き画像情報入力手段４の表示部４１には、解説時に必要に応じて当該第２の記憶手段１１から所定の３次元ＣＧ画像情報に対応する展開図が選択されると同時に、当該選択された所定の展開図が表示される事が望ましい。
【００９１】
尚、上記展開図が選択される場合には、当該３次元ＣＧ画像情報も当該第１の記憶手段１５から選択され、当該手書き入力画像情報３次元化手段５内に常駐させる事が可能である。
【００９２】
本発明に於いては、その逆、つまり、当該手書き入力画像情報３次元化手段５が当該第１の記憶手段１５から当該３次元ＣＧ画像情報を選択した場合には、当該第２の記憶手段１１から当該展開図が同時に選択される事も可能である。
【００９３】
又、本発明に於ける具体例の実施に際しては、上記した通り、当該３次元ＣＧオブジェクト描画手段５２が自ら描き出すＣＧ（コンピュータグラフィック）画像は、その位置情報が当該ビデオ画像情報の位置情報と一致している事が必要であり、そのためには、当該ビデオ画像情報に位置情報の原点と、前記した当該３次元ＣＧ画像情報に係る位置情報データーの原点と当該展開図に係る位置情報の原点は一致している事が必要であると同時に、当該３次元ＣＧ画像情報に係る位置情報データーの原点と当該展開図に係る位置情報の原点とは、何れも当該ビデオ画像記録手段に係る位置情報データーの原点と一致しているが必要である。
【００９４】
次に、本発明の当該画像情報表示装置１を使用して、手書入力による画像情報を当該ビデオ画像情報上に重ね合わせて表示するための具体的構成例の一具体例を以下に説明する。
【００９５】
例えば、図２（Ａ）に示す様に、ビデオ画像表示手段３に回転する地球儀の画像情報が表示されているとする。
【００９６】
そして、ある解説者が、当該地球儀の中に、海流の流れの方向と「エルニーニョ」と言う文字を手書き画像情報として当該ビデオ画像表示手段３で表示されている地球儀の中に手書き入力をしたい場合を考える。
【００９７】
係る場合、先ず、解説者が当該ビデオ画像情報記録手段３に現在表示されている地球儀の画像情報に着目し、当該地球儀に対応する３次元位置情報を含む３次元ＣＧ（コンピュータグラフィック）画像情報を予め準備しておき、それを当該手書き入力画像情報３次元化手段５に接続されている適宜の第１の記憶手段１５に格納しておく。
【００９８】
その際、当該用意された当該３次元ＣＧ画像情報の３次元位置情報の原点を、当該ビデオ画像表示手段３に表示される当該地球儀の位置情報の原点と予め一致させておく。
【００９９】
その後、当該３次元ＣＧ画像情報に対応して、図２（Ｂ）に示す様な、当該３次元ＣＧ画像情報の位置情報を２次元位置情報で表した世界地図を表す展開図を作成し、当該展開図を当該手書き書込み画像情報入力手段４に接続されている第２の記憶手段１１の中に記憶させておく。
【０１００】
同時に、当該展開図の位置情報の原点を、当該ビデオ画像表示手段３に表示される当該地球儀の位置情報の原点と予め一致させておく。
【０１０１】
当該地球儀に対応する当該展開図は、特に限定されるものではないが、例えば、メルカトール図法により作成された世界地図を展開図として使用する事が可能である。
【０１０２】
上記の様な、予備処理操作を実行した後に、本発明に係る解説者による所定の表示画像情報上に手書による画像情報を書き込み形式で表示する操作が行われる。
【０１０３】
即ち、本発明に於いては、解説者が当該地球儀を使用して所定の自然現象を科学的に解説する場合に、当該地球儀上に所定の情報を手書きで入力するに当たり、先ず図２（Ａ）に示す様な当該地球儀が当該画像情報表示手段３上に表示されている間に、図２（Ｂ）に示す様な、当該世界地図を示した展開図を当該第２の記憶手段１１から選択して当該展開図を当該手書き画像情報入力手段４の入力部兼画像情報表示部４１に表示する。
【０１０４】
又、本発明に於いては、当該選択された展開図に対応する３次元ＣＧ画像情報は、予め当該手書き入力画像情報３次元化手段５でも同時に選択されている事が望ましい。
【０１０５】
上記した通り、当該手書き画像情報入力手段４は、元々、２次元の画像情報を表示する機能を有するものであるから、当該展開図を表示する事は、問題はない。
【０１０６】
係る展開図が当該手書き画像情報入力手段４に表示された段階で、当該解説者がスタイラスペン等を使用して、当該手書き画像情報入力手段４に表示されている当該地球儀を表わす展開図の上に、上記した所望の手書きの画像情報を、図２（Ｂ）に示す様に書き込むものである。
【０１０７】
本発明に於いては、当該解説者は、当該３次元で表示されているＣＧによる地球儀の立体湾曲面の存在を意識せずに、又何らそれを考慮せずに、当該平面状の２次元状の展開図の上に、通常のペーパーに手書きする様な間隔で直感的に、自己が所望する手書き画像情報を書き込む事が可能となる。
【０１０８】
即ち、上記具体例では、解説者が図２（Ｂ）の様な手書入力画像情報を展開図上に書き込むと、その書込み画像情報が、当該画像情報表示手段３上に表示されている地球儀の表面湾曲状態を表す３次元位置情報に一致した３次元位置情報を含んだ立体的画像情報となっているので、当該手書き書込み画像情報を合成して当該画像情報表示手段３上に表示した場合には、当該手書き書込み画像情報が当該地球儀の湾曲面に沿って一体的に表示されるので、視聴者が当該手書書込み画像情報に対して、違和感を全く感じることがなく、快適に視聴することが出来る。
【０１０９】
更に、本具体例では、当該画像表示手段３に表示されている画像情報の位置情報の原点と当該展開図と当該３次元ＣＧ画像情報の位置情報の原点は予め一致させてあるので、当該地球儀の画像部分が回転して表示画面が変化した場合でも、当該手書き書込み画像情報も当該地球儀の回転に同期して移動する事が出来るので、当該手書き書込み画像情報と当該地球儀の所定部位との間にずれが発生する事はない。
【０１１０】
更に、係る３次元変換処理に関連して、出力される画像情報のデータフォーマットが、ＨＤシステム系のビデオ画像表示手段と、ＳＤシステム系のビデオ画像表示手段の何れにも対応出来る様にドロー系のデータ変換プログラム、例えば、アドビ・フラッシュ（登録商標）のソフトウェアを使用する事が出来る。
【０１１１】
即ち、ドロー系のデータ変換プログラムは、表示画像情報のサイズの変更には、制約がなく、自由に表示画像情報のサイズを変更できるから、特にＨＤシステム系のビデオ画像表示手段に、本発明を適用するのに都合が良い。
【０１１２】
本発明に於いては、当該ＦＩＬＬ信号は、当該解説者が所定の手書き書込み画像情報を当該画像表示手段３に表示されている画像情報に表示する際の色を決定する為の前景情報であり、例えば、図３（Ａ）に示す様に、当該解説者が例えば、黄色の湾曲線を書き込み画像情報として書き込みたい場合に、前景として当該湾曲線を黄色で表した状態のテクスチャーを作成するか、或は図３（Ｂ）に示す様に、当該湾曲線を使用せずに全面を黄色であらわしたものであっても良い。
【０１１３】
但し、当該前景は、３次元位置情報を反映させる事が望ましく、例えば、ゴルフ場の所定のグリーンのアンジュレーションに応じて所定の部分の明度を変化させることが望ましい。
【０１１４】
一方、本発明に於ける当該ＫＥＹ信号は、図３（Ｃ）に示す通り、背景として全体が黒で当該湾曲線を描きたい部分のみを白ぬきとして形成した状態の３次元位置情報を含むテクスチャーを作成するものである。
【０１１５】
そして、当該ＦＩＬＬ信号とＫＥＹ信号により生成されたそれぞれのテクスチャーを重ね合わせることによって、図３（Ｄ）に示す通り、透明な背景に黄色の湾曲線が配置されたＣＧ画像（バーチャルアウト）が得られる事になる。
【０１１６】
その後、従来の方法に従って、当該曲線が配置されたＣＧ画像（バーチャルアウト）と当該ビデオ画像表示手段３に表示されている当該ビデオ画像情報とを、キーヤー等の画像合成手段７で合成して重ね合わせ画像情報(プログラムアウト)を発生させ、当該重ね合わせ画像情報を当該ビデオ画像表示手段３に送信して表示させる事になる。
【０１１７】
尚、本発明に於いては、当該図３（Ｄ）に示すＣＧ画像（バーチャルアウト）は、直接当該画像情報合成手段７内で形成されるようにしても良い。
【０１１８】
此処で、本発明に於けるＦＩＬＬ信号とＫＥＹ信号の発生方法について説明する。
【０１１９】
当該ＫＥＹ信号の発生方法に関しては、例えば、手書きの画像情報が含まれた３次元ＣＧ画像情報を２５６段階の輝度信号で表示すると共に当該２５６段の適宜の輝度レベル、例えば１２８段に、閾値を設定しておき、当該手書き入力画像情報の信号部分を当該閾値以下の輝度レベルで描画するようにしておき、その他の背景画像情報部分を当該閾値以上の輝度レベルで描画するようしておき、当該ＫＥＹ信号の発生時には、当該３次元ＣＧ画像情報を、当該閾値以下の輝度レベルで検出するように処理することによって、当該ＫＥＹ信号が容易に得られる。
【０１２０】
一方、ＦＩＬＬ信号の発生方法は、例えば、当該展開図の特定部位をトリミングしてスキャンする様な方法を使用して得る事が出来る。
【０１２１】
次に、本発明の別の実施例として、図４（Ａ）に示す様に、ゴルフ場の所定のグリーンに於いて、解説者が当該グリーン上のアンジュレーションを考慮してカップの位置とパットされたゴルフボールの動きの予想図を手書き入力により当該グリーンの表示画像情報上に書き込む場合に付いて説明する。
【０１２２】
基本的な操作手順は、上記した実施例と同一であるので、要点のみを説明すると、先ず、当該所定のＸゴルフ場で開催される所定のトーナメントに関してテレビ放映が決定され、解説者が所定のグリーンのある部位にあるゴルフボールをパットした際の当該ゴルフボールの走りの方向に関する予想経路を、当該グリーンのアンジュレーションの状況を考慮して、手書き入力画像情報によって説明することを予定した場合、先ず、予め当該ゴルフ場の全ホールの配置位置、周辺の地形状況、高低差、グリーン形状、カップ位置、アンジュレーション、傾斜状態、風向き等の条件を３次元位置情報として記憶した複数の３次元ＣＧ画像情報を作成し、その全てをデータベースとして当該第１の記憶手段１５に記憶させておくと同時に、それぞれのホールの当該グリーンに関する当該３次元ＣＧ画像情報に対応する２次元位置情報からなる展開図を作成し、かかる複数の展開図も当該第２の記憶手段１１に記憶させておく。
【０１２３】
又、当該３次元ＣＧ画像情報に関しては、予め、全国の或は所定のゴルフ場に於ける各ホールの配置位置、周辺の地形状況、高低差、グリーン形状、カップ位置、アンジュレーション、傾斜状態、風向き等の条件を３次元位置情報として記憶した既成の複数の３次元ＣＧ画像情報が市販されているか、何らかの形で利用可能である場合には、それらを利用する事が可能である。
【０１２４】
そして、当該テレビ放映以前に、当該ゴルフ場の各ホールに何台のテレビカメラを何処に配置するかを決定し、且つそれぞれのテレビカメラの固定位置の位置情報を、当該グリーン上のホール或いは当該グリーンに近接して固定的に配置されている例えば放水栓、立ち木、排水孔等の固定物を原点として定め、当該原点を基準にして当該各ホールの位置情報を決定する。
【０１２５】
同様に当該記憶手段１１内に格納された当該３次元ＣＧ画像情報及び当該展開図の位置情報の原点を当該テレビカメラの位置情報の原点と一致させておく。
【０１２６】
当該ゴルフトーナメントのテレビ放映が開始された後、当該解説者が解説を行う様に予め定めておいた映像である画像情報、例えば、当該所定のゴルフ場の第Ｘホールの映像がモニターテレビ等の画像情報表示手段３に表示された時点で、適宜の指示信号を介して、当該第１の記憶手段１５から当該所定のゴルフ場の第Ｘホールに関する３次元ＣＧ画像情報を選択すると共に、当該選択された３次元ＣＧ画像情報に対応する展開図も同時に当該第２の記憶手段１１から選択し、当該選択された当該展開図を当該手書き画像情報入力手段４の画像表示部４１に、図４（Ｂ）に示す様に表示する。
【０１２７】
尚、当該展開図は、当該３次元ＣＧ画像情報が選択されると自動的に所定のプログラムを用いて選択される様に構成されていても良い。
【０１２８】
一方、当該選択された３次元ＣＧ画像情報は、当該手書き入力画像情報３次元化手段５に常駐させておき、上記した２次元フィル信号／キー信号の３次元的表示可能に変換する処理に利用する。
【０１２９】
その後、解説者がスタイラスペン４２を使用して当該展開図上で、図４（Ｂ）に示す様にゴルフボールの予想通過経路とカップ位置を手書き入力書込み画像情報として記入する。
【０１３０】
尚、此処で当該解説者は、当該手書き入力書込み画像情報を黄色で表現したいとする。
【０１３１】
その後、上記した具体例と同様に、当該手書き画像情報入力手段４から出力された手書き入力書込み画像情報から２次元フィル信号／キー信号を発生させ、当該２次元フィル信号／キー信号を当該手書き入力画像情報３次元化手段５に於いて３次元的表示を可能とするフィル信号／キー信号に変換する処理が実行される。
【０１３２】
この場合、当該グリーンにＰで示す様な傾斜部分があったとすると、当該フィル信号を発生させる際には、図３（Ａ）に示す前景テクスチャーを作成する場合には、手書き入力部分の画像情報を黄色で表示すると共に、例えば、当該グリーンの傾斜部分に係る当該手書きき入力部分の色を少し濃くする様に処理する事が望ましい。
【０１３３】
又、他の例としては、前景テクスチャーを作成する場合には、図３（Ｂ）に示す様に、手書き入力画像情報は入力せず、単に全面を黄色のみで描き、当該グリーンの傾斜部分に係る当該手書きき入力部分の色を少し濃くする様に処理する様に処理する事も可能である。
【０１３４】
係る処理を行うことによって、当該手書き入力画像情報を当該画像情報表示手段３に表示されている当該グリーンの画像情報上に書き込まれた際に、より立体的で且つリアル感のある手書き入力画像情報となる。
【０１３５】
一方、本発明に於ける当該ＫＥＹ信号は、図３（Ｃ）に示す通り、背景として全体が黒で当該湾曲線を描きたい部分のみを白ぬきとして形成した状態の３次元位置情報を含むテクスチャーを作成するものである。
【０１３６】
そして、当該ＦＩＬＬ信号とＫＥＹ信号により生成されたそれぞれのテクスチャーを重ね合わせることによって、図３（Ｄ）に示す通り、透明な背景に黄色の湾曲線が配置されたＣＧ画像（バーチャルアウト）が得られる事になる。
【０１３７】
係る画像は、実際には、図３（Ｅ）で示される様なグリーンの実写画像がテレビモニター上で表示されている場合には、上記した合成処理操作によって、図３（Ｆ）で示す様に、テレビモニター上で実写画像と合成されて表示される。
【０１３８】
その後、当該３次元的表示可能に変換されたフィル信号／キー信号と配設状態検出手段から入力されるテレビカメラの位置情報を含む配設情報から当該手書き入力画像情報３次元化手段５に於ける当該３次元ＣＧオブジェクト描写手段５２で３次元的に表示された手書き入力書込み画像情報が出力され、その情報が画像情報合成手段７で放映中の当該ホールに関するビデオ画像情報と重畳的に合体されて、先の例では、図４（Ａ）に示す様な状態で当該及手書き入力画像情報が当該グリーンのアンジュレーションに合わせた立体的形状で表示されることになる。
【０１３９】
従って、本具体例では、当該解説者が上記した手書き画像情報を入力している間中、上記実施例で説明したと同様の処理、操作が行われ、図４（Ａ）に示す様に、当該手書き画像情報が描かれて行く状態が、当該ビデオ画像表示手段３に表示されている当該Ｘゴルフ場のＮｏ．Ｚのホールの表示画像情報上に重ねあわされた状態で表示される事になる。
【０１４０】
然も、当該カメラによる撮影アングルが変化した場合でも、その変化状態に追随して当該手書き入力画像情報も立体的に変化することになる。
【０１４１】
又、テレビカメラが移動する場合でも、車輪の回転数と移動方向を検出して、位置情報を変化させる事が可能である。
【０１４２】
次に、本発明に於ける別の態様である画像情報表示方法に付いて説明する。
【０１４３】
上記したことから明らかな通り、本発明に係る当該画像情報表示方法は、基本的には、図５及び図６に示すフローチャートに沿った操作処理を実行するものであり、具体的には、例えば、ビデオ画像情報記録手段２、ビデオ画像情報表示手段３、複数種の所望の展開図を記憶している第２の記憶手段１１を含む手書き画像情報入力手段４、当該ビデオ画像情報記録手段２の配設状態検出手段６、当該展開図に対応する複数種の所望の３次元ＣＧ画像情報を記憶している第１の記憶手段１５を含む手書き入力画像情報３次元化手段５及び画像情報合成手段７とから構成されている画像情報表示装置１に於いて、先ず以下に示す様な予備的な操作を実行しておく。
【０１４４】
即ち、所定のテーマに関するテレビ放送スケジュールが決定された時点で
（１）テレビカメラの位置情報に関する原点を決定する。
（２）放映されるビデオ画像の中で解説者が解説する１乃至複数の画面を選定し、当該選定された画面の特定の部位に関する３次元ＣＧ画像を用意する。
（３）当該３次元ＣＧ画像に対応する２次元展開図を用意する。
（４）当該３次元ＣＧ画像と当該２次元展開図のそれぞれの位置情報に関する原点と当該テレビカメラの位置情報に関する原点とを一致させる。
（５）当該３次元ＣＧ画像と当該２次元展開図を記憶手段に格納させておく。
【０１４５】
上記した予備操作を完了した後に、所定のテレビ放映が開始されることになる。
【０１４６】
本発明に係る当該画像情報表示方法は、
当該ビデオ画像情報記録手段２により記録された画像情報を当該ビデオ画像情報表示手段３の画像情報表示部３１に表示する工程、
当該画像情報が当該ビデオ画像情報表示手段３の画像情報表示部３１に表示されている間に、当該画像情報表示部３１に表示されている当該画像情報の内、手書入力情報を書き込む必要のある画像情報に対応する別途に形成された３次元ＣＧ画像に関する展開図を手書き画像情報入力手段４に表示する工程
当該展開図上に、適宜の手書き画像情報入力装置４によって、適宜の手書き入力画像情報を記入する工程、
当該手書き画像情報入力手段４から出力された、当該２次元位置情報を持った当該手書入力画像情報に関する、ＦＩＬＬ信号とＫＥＹ信号とを生成する工程、
当該２次元位置情報を持つＦＩＬＬ信号とＫＥＹ信号を、当該展開図に対応する選択された３次元ＣＧ画像情報及び当該配設状態検出手段６から主力される当該ビデオ画像情報記録手段２に関する配設状態データーとを参照しながら、３次元的表示を可能とする情報をもつＦＩＬＬ信号とＫＥＹ信号に変換すると同時に、当該３次元化されたＦＩＬＬ信号とＫＥＹ信号から当該手書き入力画像情報の３次元手書き入力画像情報（ＣＧオブジェクト画像）を描画する工程、
当該３次元手書き入力画像情報を、当該画像情報合成手段７によって、当該ビデオ画像情報記録手段が記録しているビデオ画像情報上に重ね合わせて、合成画像情報を形成する工程、
当該手書き入力画像情報が重畳された合成画像情報をビデオ画像情報表示手段３に送信して、当該ビデオ画像情報表示手段３に当該合成画像情報を表示する工程
とから構成されている事を特徴とする手書き画像情報入力方法である。
【０１４７】
本発明に於ける他の態様としては、上記した手書き画像情報入力方法に於ける各工程をコンピューターによって実行させるためにプログラムであっても良い。
【０１４８】
更に、本発明に係る当該手書き画像情報入力方法をより詳細に説明するならば、
本発明に係る当該画像情報表示方法は、基本的には、図５に示すフローチャートに沿った操作処理を実行するものであり、具体的には、例えば、ビデオ画像情報記録手段２、ビデオ画像情報表示手段３、複数種の所望の展開図を記憶している第２の記憶手段１１を含む手書き画像情報入力手段４、当該ビデオ画像情報記録手段２の配設状態検出手段６、当該展開図に対応する複数種の所望の３次元ＣＧ画像情報を記憶している第１の記憶手段１５を含む手書き入力画像情報３次元化手段５及び画像情報合成手段７とから構成されている画像情報表示装置１に於いて、先ず前記した様な予備的な操作を実行しておく。
【０１４９】
上記した予備操作を完了した後に、所定のテレビ放映が開始されることになる。
【０１５０】
そして、本発明に係る当該画像情報表示方法は、
ビデオ画像情報記録手段、ビデオ画像情報表示手段、複数種の所望の展開図を記憶している第２の記憶手段を含む手書き画像情報入力手段、当該ビデオ画像情報記録手段の配設状態検出手段、当該展開図に対応する複数種の所望の３次元ＣＧ画像情報を記憶している第１の記憶手段を含む手書き入力画像情報３次元化手段及び画像情報合成手段とからなる画像情報表示装置に於いて、
当該ビデオ画像情報記録手段２により記録された画像情報を当該ビデオ画像情報表示手段３の画像情報表示部３１に表示する第１の工程、
当該画像情報が当該ビデオ画像情報表示手段３の画像情報表示部３１に表示されている間に、当該画像情報表示部３１に表示されている当該画像情報の内、解説を必要とし、手書き入力画像情報を書き込む必要のある画像情報が表示されているか否かを判断する第２の工程、
当該手書き入力画像情報を書き込む必要のある該画像情報が当該ビデオ画像情報表示手段３の画像情報表示部３１に表示された場合、当該画像情報が表示されて画像情報表示部３１に表示されている当該画像情報の内、手書き入力画像情報を書き込む必要のある少なくとも一部の画像情報に関連する３次元ＣＧ画像情報を当該第１の記憶手段１５に予め記憶されている複数種の３次元ＣＧ画像情報の中から選択する第３の工程、
当該選択された３次元ＣＧ画像情報に対応する展開図を当該第２の記憶手段１１に予め記憶されている複数種の展開図の中から選択する第４の工程、
当該展開図を当該手書き画像情報入力手段４の画像情報表示部４１に表示する第５の工程、
当該展開図上に、解説者により、適宜の手書き入力装置によって、適宜の手書き書込み入力画像情報が逐次記入されていく第６の工程、
当該手書き画像情報入力手段４より出力される当該手書き書込み入力画像情報に関する画像情報から逐次２次元位置情報を持ったフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号とを生成する第７の工程、
当該２次元位置情報を持ったフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号を、当該選択されている３次元ＣＧ画像情報の位置情報と当該配設状態検出手段６から出力されている当該ビデオ画像情報記録手段２の配設状態データーとから、逐次３次元表示を可能にする情報を持つフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号に変換し、当該３次元表示を可能にする情報を持つフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号を含む３次元手書き入力画像情報を逐次描画する第８の工程、
当該３次元手書き入力画像情報を、当該画像情報合成手段７に於いて、当該ビデオ画像情報記録手段２が記録しているビデオ画像情報上に重ね合わせて、合成画像情報を形成する第９の工程、
当該手書き画像情報が重畳された合成画像情報を逐次ビデオ画像情報表示手段３に送信して、当該ビデオ画像情報表示手段３に当該合成画像情報を表示する第１０の工程、
とから構成されている手書き画像情報入力方法である。
【０１５１】
上記した本発明に係る当該手書き画像情報入力方法のより詳細な操作手順、換言すればソフトウェアの具体例を、図５及び図６のフローチャートに沿って説明するならば、
先ず、前記した様な、予備的な操作を予め実行しておく事を前提に、スタート後、ステップ１（Ｓ−１）に於いて、予め定められた当該所定のテーマに関するテレビの放映が開始されたか否かが判断され、ＮＯの場合には、当該ステップ１（Ｓ−１）が繰り返され、ＹＥＳの場合には、ステップ２（Ｓ−２）で、当該ビデオ画像情報表示手段２に当該解説者が解説を行う予定の画像情報が表示されているか否かが判断され、ＮＯの場合には、当該ステップ２（Ｓ−２）が繰り返され、ＹＥＳの場合には、ステップ３（Ｓ−３）に進んで、当該解説者が当該表示画像情報に対して所定の解説を行うか否かが判断される。
【０１５２】
当該ステップ３（Ｓ−３）に於いて、ＮＯの場合には、何らかの理由で解説が出来ない場合に対応するものでステップ２（Ｓ−２）に戻って、上記の各工程が繰り返される。
【０１５３】
次に、ステップ３（Ｓ−３）で、ＹＥＳの場合には、ステップ４（Ｓ−４）に進んで、解説に必要な当該画像情報の特定部位に関連する３次元ＣＧ画像情報を、例えば当該第１の記憶手段１５より選択する。
【０１５４】
その後、ステップ５（Ｓ−５）に進んで、当該３次元ＣＧ画像情報が選択されたか否かが判断され、ＮＯの場合には、当該ステップ５が繰り返され、ＹＥＳの場合には、ステップ６（Ｓ−６）に進んで、選択された当該３次元ＣＧ画像情報に対応する展開図を、例えば当該第２の記憶手段１１から選択する。
【０１５５】
その後、ステップ７（Ｓ−７）に進んで、当該３次元ＣＧ画像情報に対応する展開図が選択されたか否かが判断され、ＮＯの場合には、当該ステップ７が繰り返され、ＹＥＳの場合には、ステップ８（Ｓ−８）に進んで、当該展開図を当該手書き画像情報入力手段４の表示部４１に表示し、ステップ９（Ｓ−９）に進んで、当該表示されているビデオ画像情報に対して解説を開始するか否かが判断され、ＮＯの場合には、ステップ２（Ｓ−２）に戻って、上記の各工程が繰り返される。
【０１５６】
次に、ステップ９（Ｓ−９）で、ＹＥＳの場合には、ステップ１０（Ｓ−１０）に進んで、当該解説者の所望の手書き書き込み入力画像情報を展開図の上に書き込む。
【０１５７】
その後、ステップ１１（Ｓ−１１）に進み、当該手書き書き込み入力画像情報に関して、２次元の位置情報を含む画像情報であるＦＩＬＬ信号とＫＥＹ信号を発生させた後、ステップ１２（Ｓ−１２）に於いて、当該２次元化されているＦＩＬＬ信号とＫＥＹ信号を手書き入力画像情報３次元化手段５に送信し、ステップ１３（Ｓ−１３）に於いて、当該手書き入力画像情報３次元化手段５で、当該２次元化されているＦＩＬＬ信号とＫＥＹ信号を当該３次元ＣＧ画像情報の３次元位置情報及び当該配設情報検出手段から入力されている当該配設情報情報とを参照して、３次元的表示を可能とする情報を含むＦＩＬＬ信号とＫＥＹ信号に変換すると共に、当該２次元の状態でありながら３次元的な表示を可能とするピクセル変更情報を含む当該ＦＩＬＬ信号とＫＥＹ信号から手書き入力画像情報の３次元ＣＧ画像（オブジェクト）を描画する。
【０１５８】
その後、ステップ１４（Ｓ−１４）に進んで、当該３次元化された当該ＦＩＬＬ信号とＫＥＹ信号に基づく手書き入力画像情報の３次元ＣＧ画像（オブジェクト）を合成処理手段７に送信し、ステップ１５（Ｓ−１５）に於いて、放映中の画像情報の特定部位の画像情報と当該手書き入力画像情報の３次元ＣＧ画像とを合成処理する。
【０１５９】
次いで、ステップ１６（Ｓ−１６）に進んで、当該合成処理された画像情報を画像情報表示手段３に表示し、続いてステップ１７（Ｓ−１７）に進んで、手書き入力画像情報の書き込み操作が終了したか否かが判断され、ＮＯの場合には、ステップ１０（Ｓ−１０）に戻り上記した各工程が繰り返され、ＹＥＳの場合には、ステップ１８（Ｓ−１８）に進んで、カメラの配設情報が変更されたか否かが判断され、ＹＥＳの場合には、ステップ１９（Ｓ−１９）に進んで、当該ビデオ画像と当該３次元ＣＧ画像（オブジェクト）双方の画像情報の配設情報を変更した後、ステップ１３（Ｓ−１３）に戻り上記した各工程が繰り返される。
【０１６０】
そして、ステップ１８（Ｓ−１８）でＮＯの場合には、ステップ２０（Ｓ−２０）に進み、解説操作が終了したか否かが判断され、ＮＯの場合には、ステップ２（Ｓ−２）に戻り上記した各工程が繰り返され、ＹＥＳの場合には、ステップ２１（Ｓ−２１）に進み、解説操作を終了しＥＮＤとなる。
【０１６１】
従って、本発明に於ける更に別の具体例としては、ビデオ画像情報記録手段、ビデオ画像情報表示手段、複数種の所望の展開図を記憶している記憶手段を含む手書き画像情報入力手段、当該ビデオ画像情報記録手段の配設状態検出手段、当該展開図に対応する複数種の所望の３次元ＣＧ画像情報を記憶している記憶手段を含む手書き入力画像情報３次元化手段及び画像情報合成手段とからなる画像情報表示装置に於いて、
当該ビデオ画像情報記録手段により記録された画像情報を当該ビデオ画像情報表示手段の画像情報表示部に表示する第１の工程、
当該画像情報が当該ビデオ画像情報表示手段の画像情報表示部に表示されている間に、当該画像情報表示部に表示されている当該画像情報の内、解説を必要とし、手書き入力画像情報を書き込む必要のある画像情報が表示されているか否かを判断する第２の工程、
当該手書き入力画像情報を書き込む必要のある該画像情報が当該ビデオ画像情報表示手段の画像情報表示部に表示された場合、当該画像情報が表示されて画像情報表示部に表示されている当該画像情報の内、手書き入力画像情報を書き込む必要のある少なくとも一部の画像情報に関連する３次元ＣＧ画像情報を当該記憶手段に予め記憶されている複数種の３次元ＣＧ画像情報の中から選択する第３の工程、
当該選択された３次元ＣＧ画像情報に対応する展開図を当該記憶手段に予め記憶されている複数種の展開図の中から選択する第４の工程、
当該展開図を当該手書き画像情報入力手段の画像情報表示部に表示する第５の工程、
当該展開図上に、解説者により、適宜の手書き入力装置によって、適宜の手書き書込み入力画像情報が逐次記入されていく第６の工程、
当該手書き画像情報入力手段より出力される当該手書き書込み入力画像情報に関する画像情報から逐次２次元位置情報を持ったフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号とを生成する第７の工程、
当該２次元位置情報を持ったフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号を、当該選択されている３次元ＣＧ画像情報の位置情報と当該配設状態検出手段から出力されている当該ビデオ画像情報記録手段の配設状態データーとから、逐次２次元位置情報のままで、３次元的表示を可能とするピクセル変更情報を持つフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号に変換し、当該３次元的表示を可能とするフィル（ＦＩＬＬ）信号とキー（ＫＥＹ）信号から３次元手書き入力画像情報を逐次描画する第８の工程、
当該３次元手書き入力画像情報を、当該画像情報合成手段に於いて、当該ビデオ画像情報記録手段が記録しているビデオ画像情報上に重ね合わせて、合成画像情報を形成する第９の工程、
当該手書き画像情報が重畳された合成画像情報を逐次ビデオ画像情報表示手段に送信して、当該ビデオ画像情報表示手段に当該合成画像情報を表示する第１０の工程、
とから構成されている手書き書込み画像情報入力方法に於ける各工程をコンピューターに実行させる為のプログラムであっても良い。
【０１６２】
上記した具体例から明らかな様に、本発明に於いては、解説者が解説を行おうとする画像情報が立体的な位置情報を有し、具体的には、当該画像情報の少なくとも一部が適宜の立体的なアンジュレーションを有するか、曲面、湾曲状面、起伏、段差、高低差、凹凸を有するものとして表示されている場合に適用されるものである。
【０１６３】
従って、本発明に於ける当該画像情報としては、少なくともその一部に３次元の位置情報が含まれているものであることが望ましく、当該３次元位置情報の内、高さ方向軸（Ｚ軸）の位置情報は、０及び限りなく０に近接しているものであっても使用可能である。
【０１６４】
つまり、本発明が属する技術分野では、通常、高さ方向軸が０に近い画像情報であっても３次元位置情報を持つ３次元画像情報として取り扱われている。
【０１６５】
従って、本発明に於いては、上記した様な、地球儀の例やゴルフ場の例の他、例えば、スキー、野球、サッカー、ラグビー、バレーボール、アメリカンフットボール、水面上の競技(ボート或いは飛行物体の移動等)、自転車競技、Ｆ１競技等に適用可能である。
【０１６６】
次に、本発明に於ける更に別の具体例を説明する。
【０１６７】
即ち、本具体例では、上記した様な具体例に於いて、当該ビデオ画像情報表示手段３の画像表示部３１に表示されている画像情報に適宜の移動可能な物体が存在する場合、当該移動可能な物体の位置情報を検出して、当該移動可能な物体の現在時点での存在位置を当該展開図上に表示させ、当該解説者が当該移動可能な物体の存在位置を当該手書き入力画像情報の書き込み始点とする様に構成したものであり、更には、当該ビデオ画像情報表示手段３の画像表示部３１に表示されている当該移動可能な物体若しくは当該展開図上に表示されている当該移動可能な物体の近傍に、当該移動可能な物体に関する特性情報を表示する様に構成したものである。
【０１６８】
即ち、本具体例では、例えば、当該ビデオ画像情報表示手段３の画像表示部３１に表示されている画像情報で、解説者が解説をする必要のある背景が、少なくとも立体的なアンジュレーション、段差、起伏、高低差等を含む面状の領域を含んでいて、当該面上の領域に適宜の移動可能な物体が存在する様な場合に使用可能である。
【０１６９】
従って、本具体例では、上記した具体例に於ける当該画像情報表示装置に於いて、更に、当該ビデオ画像情報表示手段の画像情報表示部に表示されている画像情報の中で、移動可能な物体を選択指定することによって、当該移動可能な物体を当該展開図中に表示される様に構成されている画像情報表示装置であって、当該移動可能な物体を選択指定する移動可能物体選択手段と当該移動可能な物体の３次元位置情報を取得する位置情報取得手段と当該移動可能な物体の３次元位置情報を当該展開図に対応するように２次元化する２次元化手段とが更に設けられている画像情報表示装置である。
【０１７０】
具体的には、当該移動可能物体選択手段は、ビデオ画像情報表示手段３の画像表示部３１に表示されている画像情報に含まれている適宜の移動可能な物体、例えばゴルフボール６１等を画像表示部３１上でクリックする手段であれば良く、例えば、図１に於ける当該入力手段１２がこれに相当する。
【０１７１】
一方、当該位置情報取得手段としては、当該移動可能な物体６１が存在する位置の３次元位置情報は、当該画像表示部３１をクリックすることによって、当該画像表示部３１に表示されている当該画像に対応する当該３次元ＣＧ画像情報と当該配設情報情報とから求めることが可能であり、具体的には、当該入力手段１２の操作によって、例えば当該第１の記憶手段１５と当該配設状態検出手段６とに接続された位置情報取得手段５５を設けるものである。
【０１７２】
本発明に於ける当該位置情報取得手段５５としては、上記した当該手書き入力画像情報３次元化手段５に設けるものであっても良く、特に当該手書き入力画像情報３次元化手段５に於けるブレーンストームを含む回路である３次元表示化手段５１を利用するものであっても良い。
【０１７３】
又、当該位置情報取得手段５５に接続され且つ当該手書き画像情報入力手段４と接続されている３次元ＣＧ画像位置情報２次元化手段６０が設けるものである。
【０１７４】
即ち、本具体例では、当該画像情報表示装置は、当該ビデオ画像情報表示手段の画像表示部に表示されている当該移動可能な物体の存在する位置情報を当該ビデオ画像情報表示手段の画像表示部に表示されている背景画像と対応する３次元ＣＧ画像情報から読み取り、当該読み取った当該移動可能な物体の３次元位置情報を２次元位置情報に変換する移動可能な物体位置情報変換手段を更に有している事を特徴とする画像情報表示装置である。
【０１７５】
係る構成により、当該移動可能な物体６１の存在位置が当該展開図上に表示されることになり、解説者は、当該移動可能な物体６１の存在位置から容易に所望の手書き入力画像情報を書き込む事が可能となる。
【０１７６】
一方、本具体例では、上記した様に、当該移動可能な物体６１の存在位置の位置情報を確認できるので、予め用意された当該移動可能な物体に関する特性情報を記録したルックアップテーブルを利用して、当該移動可能な物体の存在する位置の近傍に当該特性情報を表示する様に構成することが出来る。
【０１７７】
本具体例における当該移動可能な物体６１に関する特性情報としては、例えば、当該移動可能な物体６１に関する名称、写真或いは簡単な解説文等が考えられる。
【０１７８】
以下に、本具体例を例えば、テレビ放送が、所定のゴルフ場に於ける特定のゴルフトーナメントの状況を実況中継している場合について、その操作手順を説明する。
【０１７９】
即ち、図９に示す様に当該ビデオ画像情報表示手段３の画像表示部３１に表示されている当該所定のゴルフ場の所定のホールに於けるグリーンの形状を表示している際に、当該グリーン上或いはグリーン周りに到達してそこに留っているそれぞれのプレーヤーのゴルフボール６１（つまり、移動可能な物体）が表示されている時に、当該それぞれのゴルフボール６１が表示されている近傍に当該ゴルフプレーヤーの個人名６２或はゴルフプレーヤーの個人名と顔写真６３を当該画像表示部３１に表示すると共に、当該解説者が、当該展開図を使用して所望の解説をおこなう時に、当該解説者は、それぞれのゴルフボール６１が存在する位置を手書き入力画像情報の書き込み開始点とするようにしたものである。
【０１８０】
つまり、例えばそれぞれのゴルフボールの停止位置からホール迄のグリーンのアンジュレーションを考慮して当該それぞれのゴルフボールの望ましい転がり経路を手書き入力で書き込む様にするもので、かかる表示によって視聴者は、ゴルフプレーヤーのパッティングをより高い興味を持って見守る事が出来る。
【０１８１】
次に、本発明に於ける上記具体例について説明する。
【０１８２】
本具体例では、上記した具体例のシステムが実質的に稼動している事が前提となるもので、上記具体例において、所定のグリーン上或いはグリーン周りに所定のゴルフボール６１がオンされた時点で、当該ゴルフボールの存在位置情報を確認する操作と、当該それぞれのゴルフボール６１が、どのプレーヤーのものであるかを表示する為に、当該ゴルフボール６１とそれを使用しているプレーヤーとの関連付けをするルックアップテーブルを事前に作成しておく操作が必要である。
【０１８３】
より具体的な手順を以下に説明する。
【０１８４】
先ず、図７及び図８に示すフローチャートに於いて、前記具体例の手順を示すフローチャートの図５に於けると同様のステップ１（Ｓ−１）とステップ２（Ｓ−２）が実行された後に、ステップ４０（Ｓ−４０）に於いて、現在表示されている画像情報がゴルフ場の画像情報か否かが判断され、ＮＯであれば、そのまま図５に示すステップ３（Ｓ−３）に進み、前記した具体例での各工程が実行される。
【０１８５】
係る判断は、当該テレビ中継を実施しているテレビ局の所定のオペレータがモニターテレビを見ながら判断する事になる。
【０１８６】
一方、ステップ４０でＹＥＳである場合には、当該本具体例の操作が実行されることになる。
【０１８７】
即ち、ステップ４１（Ｓ−４１）に於いて、所定のグリーン上に所定数のゴルフボール６１がオンされているか否かが判断され、ＮＯであれば、そのままステップ３（Ｓ−３）に進み、前記した具体例での各工程が実行される。
【０１８８】
係る判断も、解説者或いは当該テレビ中継を実施しているテレビ局の所定のオペレータがモニターテレビを見ながら判断する事になる。
【０１８９】
一方、ステップ４１（Ｓ−４１）でＹＥＳである場合には、ステップ４２（Ｓ−４２）に進み当該ゴルフボール６１の存在位置を手書き入力画像情報の始点とするか否かが判断され、ＮＯの場合には、ステップ３（Ｓ−３）にもどるが、ＹＥＳの場合には、ステップ４３（Ｓ−４３）で、当該画像情報表示手段３の画像情報表示部３１に実写映像として表示されている当該所定のグリーン上に存在している所定のゴルフボール６１の３次元位置情報（座標）を取得するか否かが判断される。
【０１９０】
ステップ４３（Ｓ−４３）で、ＮＯの場合には、ステップ３（Ｓ−３）にもどるが、ＹＥＳの場合には、ステップ４４（Ｓ−４４）で、表示されているグリーンに対応する３次元ＣＧ画像情報を第１の記憶手段１５から選択する。
【０１９１】
その後、ステップ４５（Ｓ−４５）に進み、実写表示されているグリーンに関する画像情報と選択された当該３次元ＣＧ画像情報とを合成してその結果を図９（Ａ）に示す様にビデオ画像情報表示手段３の画像情報表示部３１に表示する。
【０１９２】
次いで、ステップ４６（Ｓ−４６）に於いて、表示された当該合成画像情報上に示された当該でゴルフボール６１をクリックする。
【０１９３】
その後、ステップ４７（Ｓ−４７）に進み、当該ゴルフボール６１がクリックされたか否かが判断され、ＮＯの場合には、ステップ４７（Ｓ−４７）が繰り返されるが、ＹＥＳの場合には、ステップ４８（Ｓ−４８）で、当該ゴルフボール６１の３次元位置情報（３次元座標値）を取得する。
【０１９４】
係るクリック操作によって、当該第１の記憶手段１５に接続されている当該位置情報取得手段５５を介して当該３次元ＣＧ画像情報が持っている３次元位置情報から容易に当該ゴルフボール６１の３次元位置情報を取得できる。
【０１９５】
更に、ステップ４９（Ｓ−４９）に進み、図１に示す様に、例えば、当該位置情報取得手段５５に接続された３次元ＣＧ画像位置情報２次元化手段６０等を使用して、当該ゴルフボール６１の３次元位置情報を２次元位置情報に変換した後、ステップ５０（Ｓ−５０）に於いて、第１の記憶手段から選択された３次元ＣＧ画像情報と対応する展開図を第２の記憶手段１１から選択する。
【０１９６】
尚、既に当該表示部４１に当該所定の展開図が表示されている場合には、このステップ５０は省略されても良い。
【０１９７】
次いで、ステップ５１（Ｓ−５１）に進み、当該ゴルフボール６１の２次元位置情報に基づいて、当該選択された展開図に当該ゴルフボール６１の位置を含めた状態で当該表示部４１に表示する。
【０１９８】
その後、ステップ５２（Ｓ−５２）に於いて、ビデオ画像情報表示手段３の画像情報表示部３１に表示されている当該それぞれのゴルフボール６１に対して、当該ゴルフボールの所有者（プレーヤー）名６２を（場合によっては当該プレーヤーの顔写真６３も合わせて）当該ゴルフボール６１の近傍に表示するか否かが判断され、ＹＥＳの場合には、ステップ５３（Ｓ−５３）に進んで、当該ゴルフボール６１と当該プレーヤー名６２との対応を示すルックアップテーブルから於いて当該ゴルフボール６１の所有者である当該プレーヤー名６２を読み出して、当該ゴルフボール６１の近傍に当該プレーヤー名６２を表示し、図５に示すステップ９（Ｓ−９）に進み、前記した具体例での図５に示す各工程が実行される。
【０１９９】
係る操作も上記したオペレータが当該実況テレビ放映画像を見ながら、どのプレーヤーのゴルフボール６１が当該グリーンのどの位置に止まったかを確認した後、例えば図１に示す入力手段１２を使用して、当該ゴルフボール６１に対応する当該プレーヤー名６２をルックアップテーブルから読み出して、当該ゴルフボール６１の近傍に当該プレーヤー名６２を表示するものである。
【０２００】
尚、ステップ５２（Ｓ−５２）で、ＮＯの場合には、直接図５に示すステップ９（Ｓ−９）に進むことになる。
【０２０１】
本具体例に於いては、係るゴルフボール６１の位置座標は、当該所定のグリーンに関する実写映像画像の位置情報の原点と当該選択された３次元ＣＧ画像情報の位置情報の原点とは、前記した通り、予め一致させてあるので、当該画像情報表示部３１に表示されている当該合成画像中に示されている何れかのゴルフボール６１をクリックすることによって、当該ゴルフボール６１の位置情報は、当該３次元ＣＧ画像情報に於ける３次元位置情報として取得されることになる。
【０２０２】
ここまでの各操作は、当該解説者とは別のオペレータが実行するものであっても良いが、当該解説者が自ら所定のパソコンを操作して実行する事も可能である。
【０２０３】
一方、当該解説者が所定のグリーンの実写映像が当該画像情報表示手段３に表示されている状態でかつゴルフボールが当該グリーン上或いはグリーン周りに存在している状態で、所望の解説を行おうとしている場合に、既に説明した通り、それぞれのゴルフボール６１に関する２次元位置情報に基づいてそれぞれのゴルフボール６１の当該グリーン上の位置或いはゴルフボール６１の当該グリーン上或いはグリーン周りの位置及びプレーヤー名６２が当該展開図上に表示されている。
【０２０４】
従って、その後、解説者は、図５に示すステップ９（Ｓ−９）の工程に移り、当該展開図上で、当該手書き書込み入力画像情報の始点を当該ゴルフボール６１の存在している位置に設定して、そこから、例えば、当該所定のゴルフボール６１がホール或はカップに向かって転がっていく理想的なラインの予想線６４を、立体的に或は３次元画像として描くことが出来る。
【図面の簡単な説明】
【０２０５】
【図１】図１は、本発明に係る画像情報表示装置１の一具体例に於ける構造の概要を示すブロック図である。
【図２】図２は、本発明に係る画像情報表示装置１を用いた画像情報表示方法の一具体例に於ける表示方法の概要を示す図である。
【図３】図３は、本発明に係るＫＥＹ信号の発生方法に関する一具体例を説明する図である。
【図４】図４は、本発明に係る画像情報表示装置１を用いた画像情報表示方法の他の具体例に於ける表示方法の概要を示す図である。
【図５】図５は、本発明に係る画像情報表示方法の一具体例を示すフローチャートである。
【図６】図６は、本発明に係る画像情報表示方法の一具体例を示すフローチャートである。
【図７】図７は、本発明に係る画像情報表示装置１を用いた画像情報表示方法の更に他の具体例に於けるフローチャートを示す図である。
【図８】図８は、本発明に係る画像情報表示装置１を用いた画像情報表示方法の更に他の具体例に於けるフローチャートを示す図である。
【図９】図９は、本発明に係る画像情報表示装置１を用いた画像情報表示方法の更に他の具体例に於ける表示方法の概要を示す図である。
【符号の説明】
【０２０６】
１      画像情報表示装置
２      ビデオ画像情報記録手段
３      ビデオ画像表示手段
４      手書き画像情報入力手段
５    手書き入力画像情報３次元化手段
６      配設状態検出手段
７      画像合成手段
８      ３次元変換手段
９      ＦＩＬＬ信号とＫＥＹ信号発生手段
１０    増幅手段
１１    第２の記憶手段
１２    入力手段
１３    画像情報送信手段
１４    記憶手段
１５    第１の記憶手段
４１    表示部
４２    スタイラスペン
５０      演算制御手段
５１    ３次元表示化手段
５２    ３次元ＣＧオブジェクト描画手段
５５    位置情報取得手段
６０    ３次元ＣＧ画像位置情報２次元化手段
【図１】
2010015212.tif 000003
【図２】
2010015212.tif 000004
【図３】
2010015212.tif 000005
【図４】
2010015212.tif 000006
【図５】
2010015212.tif 000007
【図６】
2010015212.tif 000008
【図７】
2010015212.tif 000009
【図８】
2010015212.tif 000010
【図９】
2010015212.tif 000011