(57)【要約】【課題】ボウリング場において使用されるボールのレーン上面における挙動に応じてレーン上面に表示される映像を変化させることにより、競技者や観客などに大きな驚きや感動等を与えることができるボウリング場の映像表示システム及びそれを用いた映像表示方法を提供する。【解決手段】  画像データ１００を記憶する記憶手段５２と、前記画像データ１００に基づく映像をボウリングのレーン上面７０ａに映す第１映像出力手段４４と、前記レーン上面７０ａの一定領域内を撮影するカメラセンサ４２と、前記カメラセンサ４２が撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボール６２の挙動を抽出し、この挙動に対応して前記第１映像出力手段４４が映す映像を変化させるようにする制御手段５０とを備えた。【選択図】図１
2011128768.tif 000002
【特許請求の範囲】
【請求項１】
画像データを記憶する記憶手段と、
前記画像データに基づく映像をボウリングのレーン上面に映す第１映像出力手段と、
前記レーン上面の一定領域内を撮影するカメラセンサと、
前記カメラセンサが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動を抽出し、この挙動に対応して前記第１映像出力手段が映す映像を変化させるようにする制御手段とを備えた
ことを特徴とするボウリング場の映像表示システム。
【請求項２】
前記制御手段は、前記第１映像出力手段が映す映像をリアルタイムに、かつ連続的に変化させるように制御することを特徴とする請求項１に記載のボウリング場の映像表示システム。
【請求項３】
前記制御手段は、前記第１映像出力手段が映す映像内に仮想流体が存在するものと仮定して、この仮定流体中を前記変化が伝播することをシミュレーションすることにより、前記第１映像出力手段が映す映像を制御することを特徴とする請求項１又は２に記載のボウリング場の映像表示システム。
【請求項４】
前記制御手段は、前記カメラセンサが撮影した映像から抽出された前記ボウリングのボールの挙動に基づき、前記カメラセンサで撮影後のボールの挙動をシミュレーションすると共に、そのシミュレーション情報におけるボールの挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することを特徴とする請求項１ないし３のいずれかに記載の映像表示システム。
【請求項５】
レーン上面の一定領域内を撮影するカメラセンサと、
ピンデッキに載置されたピンを撮影するピンカメラと、
画像データを記憶すると共に、前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像を記憶する記憶手段と、
前記画像データに基づく映像を前記レーン上面に映す第１映像出力手段と、
前記記憶手段に記憶された前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動及びピンの状態を抽出し、このボールの挙動及びピンに対応して前記第１映像出力手段が映す映像を変化させるようにする制御手段とを備えた
ことを特徴とするボウリング場の映像表示システム。
【請求項６】
前記記憶手段は、前記カメラセンサが撮影した映像から抽出された前記ボウリングのボールの挙動に基づき、シミュレーションされた前記カメラセンサで撮影後のボールの挙動を記憶し、
前記制御手段は、シミュレーションされた前記カメラセンサで撮影後のボールの挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することを特徴とする請求項５に記載の映像表示システム。
【請求項７】
前記第１映像出力手段は、前記レーン上面より上方の所定の高さに配置されたことを特徴とする請求項１ないし６のいずれかに記載の映像表示システム。
【請求項８】
前記カメラセンサは、前記レーン上面より上方の所定の高さに配置されたことを特徴とする請求項１ないし７のいずれかに記載のボウリング場の映像表示システム。
【請求項９】
前記第１映像出力手段及び前記カメラセンサのそれぞれは、前記レーン上面の長さ方向に間隔をおいて複数並んで配置されていることを特徴とする請求項１ないし８のいずれかに記載のボウリング場の映像表示システム。
【請求項１０】
前記制御手段は、複数の前記第１映像出力手段により映し出される映像が、全体として
１つの映像となるように映し出されるように制御することを特徴とする請求項９に記載の映像表示システム。
【請求項１１】
前記第１映像出力手段は、前記画像データに基づく映像を複数のレーンのレーン上面に映し出し、
前記カメラセンサは、複数のレーンのレーン上面の一定領域を撮影することを特徴とする請求項１ないし１０のいずれかに記載の映像表示システム。
【請求項１２】
前記第１映像出力手段は、前記画像データに基づく映像を前記レーン上面のみに映し出すことを特徴とする請求項１から１１のいずれかに記載の映像表示システム。
【請求項１３】
前記レーン上面とは別の場所に表示画面を有し、この表示画面上に前記画像データに基づく映像を映す第２映像出力手段を備え、
前記第２映像出力手段が映す映像は、前記第１映像出力手段が映す映像と連動していることを特徴とする請求項１から１２のいずれかに記載の映像表示システム。
【請求項１４】
画像データを記憶する記憶手段と、
前記画像データに基づく映像をボウリングのレーン上面に映す第１映像出力手段と、
前記レーン上面の一定領域内を撮影するカメラセンサと、
前記第１映像出力手段が映す映像を制御する制御手段とを用いて、
前記制御手段が、前記カメラセンサが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動を抽出し、この挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することができるようにした
ことを特徴とするボウリング場の映像表示方法。
【請求項１５】
前記制御手段が、前記第１映像出力手段が映す映像をリアルタイムに、かつ連続的に変化させるように制御することができるようにしたことを特徴とする請求項１２に記載のボウリング場の映像表示方法。
【請求項１６】
レーン上面の一定領域内を撮影するカメラセンサと、
ピンデッキに載置されたピンを撮影するピンカメラと、
画像データを記憶すると共に、前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像を記憶する記憶手段と、
前記画像データに基づく映像を前記レーン上面に映す第１映像出力手段と、
前記第１映像出力手段が映す映像を制御する制御手段とを用いて、
前記制御手段が、前記記憶手段に記憶された前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動及びピンの状態を抽出し、このボールの挙動及びピンに対応して前記第１映像出力手段が映す映像を変化させるようにする制御することができるようにした
ことを特徴とするボウリング場の映像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ボウリング場の映像表示システム及びそれを用いた映像表示方法、特に、ボウリングに使用されるボールのレーン上における挙動に応じて表示される映像が変化するボウリング場の映像表示システム及びそれを用いた映像表示方法に関するものである。
【背景技術】
【０００２】
図８は、従来のボウリング場の映像表示システム２（例えば、特許文献１参照）を示す図である。この従来のボウリング場の映像表示システム２は、その表示手段として、ピン４が並べて載置されるピンデッキ６の上方に位置するピンセッタ８の壁面８ａ（マスキング）部分にマスキングディスプレイ１０が設けられていた。さらに、このマスキングディスプレイ１０の上方から天井にかけて、天井ディスプレイ１２が配列されていた。
【０００３】
また、この従来の映像表示システム２には、その検出手段として、ピンセッタ８の下方に配置されたピン４の撮像をするピンカメラ１４と、レーン１６とファールライン１８より手前に位置するアプローチ２０において競技者のボールを投げる投球フォームを撮像する投球フォームカメラ２２とが設置されていた。
【０００４】
検出手段としてはさらに、レーン１６の途中に第１ボール通過センサ２４、ピンデッキ６の手前に第２ボール通過センサ２６、ファールライン１８にファールセンサ２８及びアプローチ２０に競技者が立ったことを検出する競技者センサ３０が設置されていた。
【０００５】
そして、この従来のボウリング場の映像表示システム２は、上記ピンカメラ１４等の検出手段により、検出された競技者やピンの状態が予め定められた状態になったときに、表示手段である上記マスキングディスプレイ１０及び上記天井ディスプレイ１２に、予め画像記憶手段に記憶されている静止画又は動画を読み出して表示する制御を行なうようになっていた。
【０００６】
このため、この従来のボウリング場の映像表示システム２は、例えばアプローチ２０にいる競技者や、その後方の通路等にいる観客に対して、広大な表示範囲を持つ上記マスキングディスプレイ１０及び上記天井ディスプレイ１２を利用することで迫力のある表示を行なうことができると共に、ボウリングゲームに関する情報量が豊富で視認性の高いメッセージを与えることができるようになっていた。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特許第３４１１７９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上記従来のボウリング場の映像表示システム２においては、表示手段において、予め画像記憶手段に記憶されている静止画又は動画を読み出して表示しているだけにすぎず、レーン上面の映像や、レーン上面に接触して動くボールの位置や大きさ等に応じて映像を、変化させるようなことはできなかった。
【０００９】
そのため、競技者は表示手段に表示される映像等と自己の動作との一体感を得ることができず、また、観客もその表示手段に表示される映像等によっては大きな驚きや感動を受けることはなかった。また、表示手段としてレーン上面を利用するようにはなっていなかった。
【００１０】
そこで本発明は、上記問題点に鑑みて、ボウリング場において使用されるボールのレーン上面における挙動に応じてレーン上面に表示される映像を変化させることにより、競技者や観客などに大きな驚きや感動等を与えることができるボウリング場の映像表示システム及びそれを用いた映像表示方法を提供することを課題とするものである。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、本発明によるボウリング場の映像表示システムは、
画像データを記憶する記憶手段と、
前記画像データに基づく映像をボウリングのレーン上面に映す第１映像出力手段と、
前記レーン上面の一定領域内を撮影するカメラセンサと、
前記カメラセンサが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動を抽出し、この挙動に対応して前記第１映像出力手段が映す映像を変化させるようにする制御手段とを備えた
ことを特徴とするものである。
【００１２】
また、本発明によるボウリング場の映像表示システムは、
前記制御手段は、前記第１映像出力手段が映す映像をリアルタイムに、かつ連続的に変化させるように制御する
ことを特徴とするものである。
【００１３】
また、本発明によるボウリング場の映像表示システムは、
前記制御手段は、前記第１映像出力手段が映す映像内に仮想流体が存在するものと仮定して、この仮定流体中を前記変化が伝播することをシミュレーションすることにより、前記第１映像出力手段が映す映像を制御する
ことを特徴とするものである。
【００１４】
また、本発明によるボウリング場の映像表示システムは、
前記制御手段は、前記カメラセンサが撮影した映像から抽出された前記ボウリングのボールの挙動に基づき、前記カメラセンサで撮影後のボールの挙動をシミュレーションすると共に、そのシミュレーション情報におけるボールの挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御する
ことを特徴とするものである。
【００１５】
また、上記課題を解決するために、本発明によるボウリング場の映像表示システムは、  レーン上面の一定領域内を撮影するカメラセンサと、
ピンデッキに載置されたピンを撮影するピンカメラと、
画像データを記憶すると共に、前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像を記憶する記憶手段と、
前記画像データに基づく映像を前記レーン上面に映す第１映像出力手段と、
前記記憶手段に記憶された前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動及びピンの状態を抽出し、このボールの挙動及びピンに対応して前記第１映像出力手段が映す映像を変化させるようにする制御手段とを備えた
ことを特徴とするものである。
【００１６】
また、本発明によるボウリング場の映像表示システムは、
前記記憶手段は、前記カメラセンサが撮影した映像から抽出された前記ボウリングのボールの挙動に基づき、シミュレーションされた前記カメラセンサで撮影後のボールの挙動を記憶し、
前記制御手段は、シミュレーションされた前記カメラセンサで撮影後のボールの挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御する
ことを特徴とするものである。
【００１７】
また、本発明によるボウリング場の映像表示システムは、
前記第１映像出力手段は、前記レーン上面より上方の所定の高さに配置された
ことを特徴とするものである。
【００１８】
また、本発明によるボウリング場の映像表示システムは、
前記カメラセンサは、前記レーン上面より上方の所定の高さに配置された
ことを特徴とするものである。
【００１９】
また、本発明によるボウリング場の映像表示システムは、
前記第１映像出力手段及び前記カメラセンサのそれぞれは、前記レーン上面の長さ方向に間隔をおいて複数並んで配置されている
ことを特徴とするものである。
【００２０】
また、本発明によるボウリング場の映像表示システムは、
前記制御手段は、複数の前記第１映像出力手段により映し出される映像が、全体として
１つの映像となるように映し出されるように制御する
ことを特徴とするものである。
【００２１】
また、本発明によるボウリング場の映像表示システムは、
前記第１映像出力手段は、前記画像データに基づく映像を複数のレーンのレーン上面に映し出し、
前記カメラセンサは、複数のレーンのレーン上面の一定領域を撮影する
ことを特徴とするものである。
【００２２】
また、本発明によるボウリング場の映像表示システムは、
前記第１映像出力手段は、前記画像データに基づく映像を前記レーン上面のみに映し出す
ことを特徴とするものである。
【００２３】
また、本発明によるボウリング場の映像表示システムは、
前記レーン上面とは別の場所に表示画面を有し、この表示画面上に前記画像データに基づく映像を映す第２映像出力手段を備え、
前記第２映像出力手段が映す映像は、前記第１映像出力手段が映す映像と連動している  ことを特徴とするものである。
【００２４】
また、上記課題を解決するために、本発明によるボウリング場の映像表示方法は、
画像データを記憶する記憶手段と、
前記画像データに基づく映像をボウリングのレーン上面に映す第１映像出力手段と、
前記レーン上面の一定領域内を撮影するカメラセンサと、
前記第１映像出力手段が映す映像を制御する制御手段とを用いて、
前記制御手段が、前記カメラセンサが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動を抽出し、この挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することができるようにした
ことを特徴とするものである。
【００２５】
また、本発明によるボウリング場の映像表示方法は、
前記制御手段が、前記第１映像出力手段が映す映像をリアルタイムに、かつ連続的に変化させるように制御することができるようにした
ことを特徴とするものである。
【００２６】
また、上記課題を解決するために、本発明によるボウリング場の映像表示方法は、
レーン上面の一定領域内を撮影するカメラセンサと、
ピンデッキに載置されたピンを撮影するピンカメラと、
画像データを記憶すると共に、前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像を記憶する記憶手段と、
前記画像データに基づく映像を前記レーン上面に映す第１映像出力手段と、
前記第１映像出力手段が映す映像を制御する制御手段とを用いて、
前記制御手段が、前記記憶手段に記憶された前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動及びピンの状態を抽出し、このボールの挙動及びピンに対応して前記第１映像出力手段が映す映像を変化させるようにする制御することができるようにした
ことを特徴とするものである。
【発明の効果】
【００２７】
このような本発明のボウリング場の映像表示システムによれば、
画像データを記憶する記憶手段と、
前記画像データに基づく映像をボウリングのレーン上面に映す第１映像出力手段と、
前記レーン上面の一定領域内を撮影するカメラセンサと、
前記カメラセンサが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動を抽出し、この挙動に対応して前記第１映像出力手段が映す映像を変化させるようにする制御手段とを備えたことにより、
ボウリング場において使用されるボールのレーン上面における挙動に応じてレーン上面に表示される映像を変化させることにより、競技者や観客などに大きな驚きや感動等を与え、来客の来場リピート率を向上させることができる。
【００２８】
また、本発明のボウリング場の映像表示システムによれば、
前記制御手段は、前記第１映像出力手段が映す映像をリアルタイムに、かつ連続的に変化させるように制御することにより、
第１映像出力手段に表示される映像等により、競技者や観客などに大きな驚きや感動を与えることができる。
【００２９】
また、本発明のボウリング場の映像表示システムによれば、
前記制御手段は、前記第１映像出力手段が映す映像内に仮想流体が存在するものと仮定して、この仮定流体中を前記変化が伝播することをシミュレーションすることにより、前記第１映像出力手段が映す映像を制御することにより、
第１映像出力手段に表示される映像等が変化することにより、競技者や観客などに、より大きな驚きや感動を与えることができる。
【００３０】
また、本発明のボウリング場の映像表示システムによれば、
前記制御手段は、前記カメラセンサが撮影した映像から抽出された前記ボウリングのボールの挙動に基づき、前記カメラセンサで撮影後のボールの挙動をシミュレーションすると共に、そのシミュレーション情報におけるボールの挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することにより、
カメラセンサを安価なものにすることができる。
【００３１】
また、このような本発明のボウリング場の映像表示システムによれば、
レーン上面の一定領域内を撮影するカメラセンサと、
ピンデッキに載置されたピンを撮影するピンカメラと、
画像データを記憶すると共に、前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像を記憶する記憶手段と、
前記画像データに基づく映像を前記レーン上面に映す第１映像出力手段と、
前記記憶手段に記憶された前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動及びピンの状態を抽出し、このボールの挙動及びピンに対応して前記第１映像出力手段が映す映像を変化させるようにする制御手段とを備えたことにより、
ボウリング場において使用されるボールのレーン上面における挙動に応じてレーン上面に表示される映像を変化させることにより、競技者や観客などに大きな驚きや感動を与えることができる。また、競技者は表示される映像に基づいてボールの投球をすることができると共に、ボウリングの練習をすることもできる。
【００３２】
また、本発明のボウリング場の映像表示システムによれば、
前記記憶手段は、前記カメラセンサが撮影した映像から抽出された前記ボウリングのボールの挙動に基づき、シミュレーションされた前記カメラセンサで撮影後のボールの挙動を記憶し、
前記制御手段は、シミュレーションされた前記カメラセンサで撮影後のボールの挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することにより、
カメラセンサを安価なものにすることができる。
【００３３】
また、本発明のボウリング場の映像表示システムによれば、
前記第１映像出力手段は、前記レーン上面より上方の所定の高さに配置されたことにより、
第１映像出力手段の取付け作業及び取外し作業を容易にすることができる。
【００３４】
また、本発明のボウリング場の映像表示システムによれば、
前記カメラセンサは、前記レーン上面より上方の所定の高さに配置されたことにより、
カメラセンサの取付け作業及び取外し作業を容易にすることができる。
【００３５】
また、本発明のボウリング場の映像表示システムによれば、
前記第１映像出力手段及び前記カメラセンサのそれぞれは、前記レーン上面の長さ方向に間隔をおいて複数並んで配置されていることにより、
第１映像出力手段及びカメラセンサのそれぞれを安価なものにすることができる。
【００３６】
また、本発明のボウリング場の映像表示システムによれば、
前記制御手段は、複数の前記第１映像出力手段により映し出される映像が、全体として
１つの映像となるように映し出されるように制御することにより、
第１映像出力手段を安価なものにすることができると共に、競技者や観客などに、より大きな驚きや感動を与えることができる。
【００３７】
また、本発明のボウリング場の映像表示システムによれば、
前記第１映像出力手段は、前記画像データに基づく映像を複数のレーンのレーン上面に映し出し、
前記カメラセンサは、複数のレーンのレーン上面の一定領域を撮影することにより、
第１映像出力手段とカメラセンサのそれぞれを設置する数を少なくすることができる。
【００３８】
また、本発明のボウリング場の映像表示システムによれば、
前記第１映像出力手段は、前記画像データに基づく映像を前記レーン上面のみに映し出すことにより、
第１映像出力手段に表示される映像等により、競技者や観客などに、より大きな驚きや感動を与えることができる。
【００３９】
また、本発明のボウリング場の映像表示システムによれば、
前記レーン上面とは別の場所に表示画面を有し、この表示画面上に前記画像データに基づく映像を映す第２映像出力手段を備え、
前記第２映像出力手段が映す映像は、前記第１映像出力手段が映す映像と連動していることにより、
第１映像出力手段と第２映像出力手段に表示される映像等により、競技者や観客などに、より大きな驚きや感動を与えることができる。
【００４０】
また、このような本発明のボウリング場の映像表示方法によれば、
画像データを記憶する記憶手段と、
前記画像データに基づく映像をボウリングのレーン上面に映す第１映像出力手段と、
前記レーン上面の一定領域内を撮影するカメラセンサと、
前記第１映像出力手段が映す映像を制御する制御手段とを用いて、
前記制御手段が、前記カメラセンサが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動を抽出し、この挙動に対応して前記第１映像出力手段が映す映像を変化させるように制御することができるようにしたことにより、
ボウリング場において使用されるボールのレーン上面における挙動に応じてレーン上面に表示される映像を変化させることにより、競技者や観客などに大きな驚きや感動を与え、来客の来場リピート率を向上させることができる。
【００４１】
また、本発明のボウリング場の映像表示方法によれば、
前記制御手段が、前記第１映像出力手段が映す映像をリアルタイムに、かつ連続的に変化させるように制御することができるようにしたことにより、
第１映像出力手段に表示される映像等により、競技者や観客などに大きな驚きや感動を与えることができる。
【００４２】
また、このような本発明のボウリング場の映像表示方法によれば、
レーン上面の一定領域内を撮影するカメラセンサと、
ピンデッキに載置されたピンを撮影するピンカメラと、
画像データを記憶すると共に、前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像を記憶する記憶手段と、
前記画像データに基づく映像を前記レーン上面に映す第１映像出力手段と、
前記第１映像出力手段が映す映像を制御する制御手段とを用いて、
前記制御手段が、前記記憶手段に記憶された前記カメラセンサが撮影した映像及び前記ピンカメラが撮影した映像に基づいて前記一定領域内に入り込んだボウリングのボールの挙動及びピンの状態を抽出し、このボールの挙動及びピンに対応して前記第１映像出力手段が映す映像を変化させるようにする制御することができるようにしたことにより、
ボウリング場において使用されるボールのレーン上面における挙動に応じてレーン上面に表示される映像を変化させることにより、競技者や観客などに大きな驚きや感動を与えることができる。また、競技者は表示される映像に基づいてボールの投球をすることができると共に、ボウリングの練習をすることもできる。
【図面の簡単な説明】
【００４３】
【図１】本発明の第１及び第２の実施の形態に係るボウリング場の映像表示システム４０、１４０のハードウェアの構成を示す図である。
【図２】本発明の第１及び第２の実施の形態に係るボウリング場の映像表示システム４０、１４０のボウリング場内のレーン近傍の斜面図である。
【図３】本発明の第１及び第２の実施の形態に係るボウリング場の映像表示システム４０、１４０のカメラセンサ４２の位置及び撮像範囲、プロジェクター４４ａの位置及び映像投影範囲を示す上面図である。
【図４】本発明の第１及び第２の実施の形態に係るボウリング場の映像表示システム４０、１４０のソフトウェアの動作を説明する図である。
【図５】図２中のレーン上面７０ａに表示される映像１２８とその上のボール６２をあわせて示す図である。
【図６】図２中のディスプレイ装置４６の表示画面４６ａに表示される映像１３０を示す図である。
【図７】図２中のレーン７０のレーン上面７０ａに表示される映像１４２を示す図である。
【図８】従来のボウリング場の映像表示システム２を示す図である。
【発明を実施するための形態】
【００４４】
以下、本発明に係るボウリング場の映像表示システム及びボウリング場の映像表示方法の実施の形態について、図面に基づいて具体的に説明する。図１ないし図６は、本発明の第１の実施の形態に係るボウリング場の映像表示システム４０及びボウリング場の映像表示方法について説明するために参照する図である。
【００４５】
図１は、本発明の第１の実施の形態に係るボウリング場の映像表示システム４０のハードウェアの構成図である。このボウリング場の映像表示システム４０は、カメラセンサ４２と、プロジェクター４４（第１映像出力手段）と、ディスプレイ装置４６（第２映像出力手段）と、音響装置４８と、コンピュータ５０とを備えて構成されている。すなわち、カメラセンサ４２と、プロジェクター４４と、ディスプレイ装置４６と、音響装置４８のそれぞれは、コンピュータ５０に配線接続されている。
【００４６】
コンピュータ５０は、記憶装置５２（記憶手段）、演算処理装置５４（制御手段）、及びキーボードやマウス、タッチパネル等の入力装置５６（入力手段）を備えて構成されている。このコンピュータ５０は、記憶装置５２に後述する図４の素材ファイル５８と映像演出用プログラム６０とを記憶するようになっている。
【００４７】
また、図１に示すコンピュータ５０の演算処理装置５４は、記憶装置５２に読み込まれる後述の映像演出用プログラム６０に従って動作し、プロジェクター４４と、ディスプレイ装置４６に表示する映像を制御するための制御手段として動作するようになっている。
【００４８】
図２は、本発明の第１の実施の形態に係るボウリング場の映像表示システム４０のレーン７０近傍の斜面図である。ボウリングのボール６２（図５参照）は、アプローチ６４において競技者によって投げられて、ピン６６が並べて載置されているピンデッキ６８に向かってレーン７０のレーン上面７０ａの上を回転しながら移動するようになっている。
【００４９】
このレーン７０は、競技者から見てピンデッキ６８の手前に位置し、その表面形状が長細い矩形に形成されている。また、レーン７０は、そのレーン上面７０ａをボール６２が回転しながら移動しても破損したり傷付いたりすることがないように一定の強度及び硬さを有している。
【００５０】
レーン７０の幅方向の両端部にはガータ７２が凹状に形成されており、そして、隣合う２つのレーン７０が挟みこむ２本のガータ７２間には凸状のボールリターン７６が形成されている。この隣合う２つのレーン７０の中央に位置するボールリターン７６の上方には、カメラセンサ４２とプロジェクター４４と音響装置４８（図２中には不図示）が一体となって構成され、それぞれ４台ずつレーン上面７０ａの長さ方向に間隔をおいて並んで配置されている。
【００５１】
プロジェクター４４は、コンピュータ５０から映像信号を受信して、その映像をレーン上面７０ａに向かって投影するようになっている。このため、競技者や観客からは、レーン上面７０ａに投影された映像が、そのままレーン上面７０ａに表示されたように見えるようになっている。
【００５２】
カメラセンサ４２とプロジェクター４４が、隣合う２つのレーン７０の中央に位置するボールリターン７６の上方に設置されていることにより、まだそれらが設置されてないレーン７０に対しても後からカメラセンサ４２とプロジェクター４４を上方に設置することができる。また、それらの設置の際には他の機器と干渉することがないので、取付け、取外しを容易にできるようになっている。
【００５３】
図２に示すように、ディスプレイ装置４６は、ピンデッキ６８の上方に位置するピンセッタ７４の壁面７４ａ（マスキング）部分に設けられ、その表面に表示画面４６ａを有している。また、ディスプレイ装置４６は、コンピュータ５０から映像信号を受信して、表示画面４６ａに表示するようになっている。また、このディスプレイ装置４６には、不図示のスピーカーが内蔵されている。
【００５４】
そして、図２に示すように、競技者がファールライン８０よりレーン７０側に入ったことを検出するファールセンサ８２が設置されている。また、図示されてないが、ピンセッタ７４の下方に配置されたピン６６を撮像するピンカメラと、ファールライン８０より手前に位置するアプローチ６４において競技者のボール６２を投げる投球フォームを撮像する投球フォームカメラと、アプローチ６４に競技者が立ったことを検出する競技者センサとが併せて設置されている。
【００５５】
図３に示すように、カメラセンサ４２は、それぞれ図中の点線で囲まれる一定領域内を撮影するようになっている。すなわち、レーン７０の長さ方向については、４台のカメラセンサ４２が、レーン７０の長さ方向の全てをほぼ均等に４分割して、互いに隣合うカメラセンサ４２と若干重なり合う程度の領域までを撮影するようになっている。そして、４台合わせてレーン７０の長さ方向の全領域を撮影することができるようになっている。なお、図中斜線部は撮影領域が重なりあう部分である。
【００５６】
また、レーン７０の長さ方向とは垂直な幅方向については、カメラセンサ４２は、隣合う２つのレーン７０の互いの幅方向に離れたそれぞれの外側のガータ７２をも覆うような程度の、２つのレーン７０を含む領域を撮影することができるようになっている。
【００５７】
このような配置にしたため、４台のカメラセンサ４２を組み合わせてレーン７０の長さ方向全てを撮影することにより、レーン７０の長さ方向全てを撮影することができる１台のカメラセンサのように高性能でなくてもよいので、カメラセンサ４２の購入費を抑えることができる。また、４台のカメラセンサ４２のいずれかが故障した場合においては故障した１つのカメラセンサ４２のみを交換するだけで済むので、カメラセンサ４２の修理費又は新規購入費を抑えることができる。
【００５８】
また、互いに隣合う２つのレーン７０を４つのカメラセンサ４２で撮影することにより、１つのレーン７０ごとに４台ずつカメラセンサ４２を設置する必要がないので、レーン７０の幅方向に設置するカメラセンサ４２の数を少なくすることができる。
【００５９】
次に、プロジェクター４４は、図３に示すように、カメラセンサ４２が撮影する範囲とほぼ同じ範囲に、それぞれ図中の点線で囲まれる一定領域内に映像を投影するようになっている。すなわち、レーン７０の長さ方向については、４台のプロジェクター４４が、レーン７０の長さ方向の全てをほぼ均等に４分割して、互いに隣合うプロジェクター４４と若干重なり合う程度の領域まで映像を投影するようになっている。そして、４台合わせてレーン７０の長さ方向の全領域に映像を投影することができるようになっている。なお、図中斜線部は映像を投影する領域が重なりあう部分である。
【００６０】
また、レーン７０の長さ方向とは垂直な幅方向については、それぞれのプロジェクター４４が、隣合う２つのレーン７０の互いの幅方向に離れたそれぞれの外側のガータ７２をも覆うような程度の、２つのレーン７０を含む領域に映像を投影することができるようになっている。
【００６１】
ここで、プロジェクター４４のそれぞれは、映像を投影する領域が重なりあう部分の輝度を周端部に近付くにつれて少しずつ落として、２つのプロジェクター４４が映像を投影した際の重なりあう部分の輝度が、他の重なり合わない部分の輝度と同じになるようになっている。また、プロジェクター４４のそれぞれが、映像を投影する領域が重なりあう部分には、同じ映像を投影するようになっている。そのため、４つのプロジェクター４４がそれぞれ投影する映像を繋ぎ合わせて、１つの大きな映像とすることができるようになっている。
【００６２】
このため、レーン７０のレーン上面７０ａの長さ方向全てを１台のプロジェクター４４で映像を投影しなくてもよく、４台のプロジェクター４４を組み合わせてレーン上面７０ａの長さ方向全てに映像を投影することができるため、レーン上面７０ａの長さ方向の全てに映像を投影することができる１台のプロジェクター４４のように高性能でなくてもよいので、プロジェクター４４の購入費を抑えることができる。また、４台のプロジェクター４４のいずれかが故障した場合においては故障した１つのプロジェクター４４のみを交換するだけで済むので、プロジェクター４４の修理費又は新規購入費を抑えることができる。
【００６３】
また、互いに隣合う２つのレーン７０を４台のプロジェクター４４で映像を投影することにより、１つのレーン７０ごとに４台ずつプロジェクター４４を設置する必要がないので、レーン７０の幅方向に設置するプロジェクター４４の数を少なくすることができる。
【００６４】
図４は、本発明の第１の実施の形態に係るボウリング場の映像表示システム４０を作動させるためのソフトウェア８８の動作を説明する図である。このボウリング場の映像表示システム４０を動作させるためのソフトウェア８８は、素材ファイル５８と映像演出用プログラム６０とを備えて構成されている。この素材ファイル５８と映像演出用プログラム６０は、図１に示すコンピュータ５０の記憶手段５２に記憶されている。
【００６５】
素材ファイル５８は、動画データ９０、静止画データ９２、３Ｄモデルデータ９４（三次元モデルデータ）、音声データ９６、及びテキストデータ９８をそれぞれ、映像を映すのに必要な個数だけ、任意に備えて構成されている。素材ファイル５８は、ソフトウェア８８内に複数備えられており、それぞれ異なる映像を映すための素材データになっている。
【００６６】
ここで、素材ファイル５８の動画データ９０、静止画データ９２、及び３Ｄモデルデータ９４のそれぞれを、便宜上まとめて、画像データ１００と呼ぶこととする。
【００６７】
次に、映像演出用プログラム６０は、センサモジュール１０２、挙動シミュレーションモジュール１０６、映像演出モジュール１０４、演出制御モジュール１２２、演出構成モジュール１２４及び演出設定ファイル１２６を備えている。ここで、モジュールとは何らかの機能を発揮するように組まれた小さいプログラムのことをいう。
【００６８】
映像演出用プログラム６０のセンサモジュール１０２は、図３に示すカメラセンサ４２が撮影した映像（実世界の映像）をリアルタイムに取得し、前フレーム差分法により、映像内に映っている何らかの動く物体について、その大きさ、形状、移動方向、速さ及び位置の情報を抽出できるようになっている。
【００６９】
すなわち、センサモジュール１０２は、カメラセンサ４２から１秒間当たりに約３０フレーム取得する映像のそれぞれを、随時、グレースケールに変換し、前後のフレーム間の差異を検出することにより動いた箇所だけを抽出して、映像内に映っている何らかの動く物体の大きさ、形状及び位置を抽出するようになっている。また、センサモジュール１０２は、このように抽出した動く物体の大きさと形状と位置に基づいて、その中心位置の座標を求め、この中心位置の座標の変化量からその移動方向と速さを抽出できるようになっている。
【００７０】
センサモジュール１０２が、このような抽出作業の対象とする撮影映像内の動く物体としては、例えば、カメラセンサ４２が撮影する一定領域内に入り込んだボウリングに使用されるボール６２が該当する。
【００７１】
センサモジュール１０２は、図４に示すように、カメラセンサ４２が撮影した映像内のボール６２から抽出した、その大きさ、形状、移動方向、速さ、及び位置の情報を、挙動シミュレーションモジュール１０６及び映像演出モジュール１０４に連続的に出力するようになっている。
【００７２】
次に、映像演出用プログラム６０の挙動シミュレーションモジュール１０６は、カメラセンサ４２から連続的に出力されたボール６２の大きさ、形状、移動方向、速さ、及び位置の情報に基づいて、センサモジュール１０２で抽出後のボール６２の大きさ、形状、移動方向、速さ、及び位置のシミュレーションをすることができるようになっている。
【００７３】
挙動シミュレーションモジュール１０６は、図４に示すように、ボール６２のセンサモジュール１０２で抽出後の大きさ、形状、移動方向、速さ、及び位置についてシミュレーションをしたシミュレーション情報を、映像演出モジュール１０４に連続的に出力するようになっている。
【００７４】
このような挙動シミュレーションモジュール１０６を備えることで、レーン７０上をボール６２が高速で動作した際に、カメラセンサ４２がボール６２の挙動の全てを認識できなくても、挙動シミュレーションモジュール１０６によりボール６２の挙動を予測することができるようになっている。
【００７５】
このため、使用するカメラセンサ４２をボール６２の高速動作に対応して、ボール６２の挙動の全てを認識することができるような高性能なものにしなくても良いので、使用するカメラセンサ４２を高価なものではなく、安価なものにすることができる。
【００７６】
次に、映像演出用プログラム６０内の演出設定ファイル１２６には、複数の素材ファイル５８のうちのいずれかを選択して使用するか等についての設定データ、及び映像演出用プログラム６０内のセンサモジュール１０２、挙動シミュレーションモジュール１０６の動作等に必要な設定データ、並びに複数の映像演出モジュール１０４のうちのいずれを選択して動作させるようにするかの設定データ等が、まとめて登録されている。
【００７７】
また演出設定ファイル１２６には、選択して動作させる映像演出モジュール１０４のうちのいずれかにおける、流体シミュレーションモジュール１０８、映像再生モジュール１１０、映像効果モジュール１１２、ＣＧ合成モジュール１１４（コンピュータグラフィック合成モジュール）、音声再生モジュール１１６、音声効果モジュール１１８、及び音声合成モジュール１２０のそれぞれをどのように動作させるか等についての設定データ等が、まとめて登録されている。
【００７８】
この演出設定ファイル１２６内の各種の設定データは、映像演出の開始前または映像演出の停止後のメンテナンスモード時において、メンテナンス作業員による図１に示すコンピュータ５０の入力装置５６からの操作入力が行なわれた場合に、このような操作入力に基づいて、図４に示す演出構成モジュール１２４が変更するようになっている。
【００７９】
演出制御モジュール１２２は、映像演出を開始させるための起動操作の後であって実際に映像演出を開始する前に、演出設定ファイル１２６の設定データに基づいて、複数の素材ファイル５８のうちのいずれを使用するかについて、及び複数の映像演出モジュール１０４のうちのいずれを動作させるか等について、実際に選択したり制御したりするようになっている。
【００８０】
次に、映像演出用プログラム６０内の映像演出モジュール１０４は、流体シミュレーションモジュール１０８、映像再生モジュール１１０、映像効果モジュール１１２、ＣＧ合成モジュール１１４、音声再生モジュール１１６、音声効果モジュール１１８、及び音声合成モジュール１２０を備えて構成されている。映像演出モジュール１０４は、映像演出用プログラム６０に複数備えられており、それぞれ異なる映像演出を行なうようになっている。
【００８１】
映像演出モジュール１０４内の流体シミュレーションモジュール１０８は、図３に示すプロジェクター４４の表示画面であるレーン上面７０ａの内側に広がって空気等の流体が存在するような仮想空間を設定し、この仮想空間内に生じる流体の流れをシミュレーションするようになっている。
【００８２】
この仮想空間内に生じる流体は、映像演出モジュール１０４ごとに異なっていてもよく、例としては空気や水などである。本実施の形態に係る映像演出モジュール１０４内の流体シミュレーションモジュール１０８は、仮想空間内に空気が充填していると仮定して、この仮定の下における風（空気の流れ）をシミュレーションするようになっている。
【００８３】
すなわち、流体シミュレーションモジュール１０８は、プロジェクター４４の表示画面であるレーン上面７０ａの一定領域内で動くボール６２が生じさせる風が、プロジェクター４４の表示画面であるレーン上面７０ａを突き抜けて、このレーン上面７０ａ内の仮想空間にまで伝播するものと仮定している。
【００８４】
その上で、図４に示すセンサモジュール１０２により抽出された、カメラセンサ４２が撮影した実映像内のボール６２についての大きさ、形状、移動方向、速さ、及び位置の情報、及び挙動シミュレーションモジュール１０６によりシミュレーションされた、ボール６２のその後の大きさ、形状、移動方向、速さ、及び位置についてのシミュレーション情報を、連続的に取得して、これらの情報に基づいて、仮想空間内において風がどのように伝播するかをシミュレーションするようになっている。
【００８５】
このとき流体シミュレーションモジュール１０８は、仮想空間内を伝播する風の強さをある程度誇張してシミュレーションするようになっている。また、流体シミュレーションモジュール１０８は、このようなシミュレーション情報を、映像再生モジュール１１０、映像効果モジュール１１２、ＣＧ合成モジュール１１４、音声再生モジュール１１６、音声効果モジュール１１８、及び音声合成モジュール１２０のそれぞれに、連続的に出力するようになっている。
【００８６】
映像演出モジュール１０４の映像再生モジュール１１０は、素材ファイル５８内の動画データ９０及び静止画データ９２の中から、複数の任意のものを同時に又は個別に読み込んで再生するようになっている。
【００８７】
ここで、映像再生モジュール１１０は、素材ファイル５８のうちの演出制御モジュール１２２により選択されたものの中に、動画データ９０及び／又は静止画データ９２が複数ある場合に、これらを同時かつ別個に再生するか、又は順番に再生していくか等について、演出制御モジュール１２２の制御の下で決定するようになっている。
【００８８】
また、映像再生モジュール１１０は、演出制御モジュール１２２の制御の下で、センサモジュール１０２から送られてくる情報や、挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報や、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報に基づいて、映像再生の開始又は停止のタイミングの変更、再生速度の変化、再生する動画データ９０及び／又は静止画データ９２の切換えなどを行うようになっている。
【００８９】
この映像再生モジュール１１０が演出制御モジュール１２２の制御の下で、再生する動画データ９０及び静止画データ９２のそれぞれが、図２に示すプロジェクター４４の表示画面であるレーン上面７０ａ内、又はディスプレイ装置４６の表示画面４６ａ内の、いずれの範囲にどのように表示されるようになるのかについては、後述するＣＧ合成モジュール１１４のマッピングの処理により決定されるようになっている。
【００９０】
図４に示すように、映像再生モジュール１１０で再生された動画データ９０及び／又は静止画データ９２の映像は、映像効果モジュール１１２に送られるようになっている。
【００９１】
映像演出モジュール１０４の映像効果モジュール１１２は、演出制御モジュール１２２の制御の下で、センサモジュール１０２から送られてくる情報や、挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報や、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報に基づいて、映像再生モジュール１１０から受取った映像に対して、例えば、この映像を波紋状に歪ませるなどの変形を与えるエフェクト、又は映像を回転若しくは拡大縮小するエフェクト、又は、映像の一部の範囲だけを拡大した後にこの拡大範囲を移動させていくようにするエフェクト、或いは、映像の色彩や明度を変化させるエフェクト等をリアルタイムに加えるようになっている。
【００９２】
映像効果モジュール１１２は、映像再生モジュール１１０によって再生された動画データ９０及び／又は静止画データ９２の映像に対して、上記のような映像効果を加えた後に、これをＣＧ合成モジュール１１４に送り出すようになっている。
【００９３】
映像演出モジュール１０４のＣＧ合成モジュール１１４は、演出制御モジュール１２２の制御の下で、素材ファイル５８のうち演出制御モジュール１２２により選択されたものの中の３Ｄモデルデータ９４を読み込んで、この３Ｄモデルデータ９４に基づく仮想物体のオブジェクトを生成したり、又は、独自に仮想物体のオブジェクトを生成したりするようになっている。
【００９４】
また、ＣＧ合成モジュール１１４は、素材ファイル５８のうち演出制御モジュール１２２により選択されたものの中のテキストデータ９８を読み込んで、デザイン化された特殊文字を２次元のＣＧとして生成するようになっている。
【００９５】
また、ＣＧ合成モジュール１１４は、演出制御モジュール１２２の制御の下で、生成したＣＧ、及び映像再生モジュール１１０や映像効果モジュール１１２から受取った映像等を、仮想空間内の所定の位置に配置するようになっている。
【００９６】
このようなＣＧ合成モジュール１１４の配置作業の中には、このＣＧ合成モジュール１１４が生成した仮想物体のオブジェクトの表面、又は２次元又は３次元の仮想空間内の任意の領域に、映像再生モジュール１１０や映像効果モジュール１１２から受取った映像をテクスチャ（ｔｅｘｔｕｒｅ）として、マッピング(ｍａｐｐｉｎｇ)するような作業が含まれる。
【００９７】
また、ＣＧ合成モジュール１１４は、演出制御モジュール１２２の制御の下で、センサモジュール１０２から送られてくる情報や、挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報や、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報に基づいて、任意に、仮想空間内における新たなＣＧの生成、ＣＧ同士の合成、ＣＧと映像との合成、ＣＧの変形、及び／又はテクスチャの入れ替えなどをリアルタイムに行うようになっている。
【００９８】
また、ＣＧ合成モジュール１１４は、完成した映像をプロジェクター４４に出力するようになっている。また、ＣＧ合成モジュール１１４は、プロジェクター４４に出力する完成した映像と連動するような完成した映像をディスプレイ装置４６に出力するようになっている。
【００９９】
この際にＣＧ合成モジュール１１４は、プロジェクター４４が複数ある場合などには、それに対応するように複数の映像の切り出しや分割を行い、お互いに重なり合う部分が同じとなるように映像を生成し、出力された際に映像が繋ぎ合わされて１つの映像にすることができるようになっている。また、ＣＧ合成モジュール１１４は、プロジェクター４４の複数台で１つの映像となるような映像を出力する際には、繋ぎ目が目立たないように調整するように動作するようにもなっている。
【０１００】
図４に示すように、映像演出モジュール１０４の音声再生モジュール１１６は、演出制御モジュール１２２の制御の下で、センサモジュール１０２から送られてくる情報や、挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報や、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報に基づいて、素材ファイル５８のうちの演出制御モジュール１２２により選択されたものの中の音声データ９６を読み込んで、これを再生するようになっている。
【０１０１】
また、音声再生モジュール１１６は、映像再生モジュール１１０、映像効果モジュール１１２及びＣＧ合成モジュール１１４が作成する映像に対応する音声データ９６の割り当て(アサイン)、再生のタイミング及び速度等を制御するようになっている。
【０１０２】
映像演出モジュール１０４の音声効果モジュール１１８は、演出制御モジュール１２２の制御の下で、センサモジュール１０２から送られてくる情報や、挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報や、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報に基づいて、音声再生モジュール１１６が再生した音声データ９６に対してリアルタイムに、リバーブやディレイ等のエフェクト(効果)を加えたり、ピッチ（周波数）を変更したりするようになっている。また、音声効果モジュール１１８は、ノイズを除去するフィルタ処理も行なうようになっている。
【０１０３】
映像演出モジュール１０４の音声合成モジュール１２０は、演出制御モジュール１２２の制御の下で、各種のサウンドシンセシスのアルゴリズムを用い、センサモジュール１０２から送られてくる情報や、挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報や、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報に基づいて、電子音データを生成するようになっている。音声合成モジュール１２０は、音のオシレーター(発振器)を複数有していることにより、様々な波形を組み合わせた電子音の生成・合成(シンセシス)が可能になっている。
【０１０４】
また、音声合成モジュール１２０は、このように生成した電子音データを、音声再生モジュール１１６又は音声効果モジュール１１８から受取った音声データに合成するようになっている。また、音声合成モジュール１２０は、合成した音声データに対するエフェクトの付加も行なうようになっている。
【０１０５】
また、音声合成モジュール１２０は、このように生成した電子音データや音声効果モジュール１１８から受け取った音声を、音響装置４８やディスプレイ装置４６の内蔵スピーカーに出力するようになっている。
【０１０６】
図５の（ａ）から（ｃ）は、本発明の第１の実施の形態に係るボウリング場の映像表示システム４０のレーン上面７０ａに表示される映像１２８と、そのレーン上面７０ａ上のボール６２を合わせて示す図である。図中、下側から上側に向かってレーン上面７０ａの上をボール６２が通過するものとする。
【０１０７】
レーン上面７０ａに表示される映像１２８は、４台のプロジェクター４４により出力される前の段階で、ＣＧ合成モジュール１１４によって重なりあう部分を有する４つの映像に分割されるようになっている。この４つの映像はそれぞれ、４台のプロジェクター４４に出力される段階で、お互いに重なりあう部分が目立たないように調整されて、繋ぎ合わされて１つの映像１２８になっている。
【０１０８】
また、４台のプロジェクター４４が映像を投影することができる領域は、レーン上面７０ａだけではないので、レーン上面７０ａ以外のボールリターン７６、ファールライン８０等に映像が投影される部分は予め黒色に設定されて、４台のプロジェクター４４が映像を出力する際に黒色設定部分の映像が表示されないようになっている。
【０１０９】
このため、プロジェクター４４により映像を投影されるのはレーン上面７０ａのみになるので、競技者や観客に、上記のような表示方法をとらない場合よりも大きな驚きや感動を与えることができるようになっている。
【０１１０】
図５（ａ）に示すように、レーン上面７０ａに表示される映像１２８は、演出制御モジュール１２２により素材ファイル５８、映像演出モジュール１０４が選択されており、雲が流れていく様子の空１３２が映し出されている。この映像１２８は、その基礎となる素材ファイル５８の動画データ９０を、映像演出モジュール１０４における映像再生モジュール１１０が読み込んで継続的にループ再生すると共に、この映像に対して映像効果モジュール１１２が画像処理を行ない、ＣＧ合成モジュール１１４が、この映像をテクスチャとして映像１２８の枠内の領域全体にマッピングすることにより作成されている。
【０１１１】
レーン上面７０ａに表示される映像１２８は、図５（ｂ）、（ｃ）に示すように、レーン上面７０ａの下側から上側に向かってボール６２が移動すると、図４に示すカメラセンサ４２が撮影する一定領域内でのボール６２の挙動に基づいて、ボール６２の後方に飛行機雲１３４が映し出されるようになっている。
【０１１２】
このようなボール６２の後方（図中下方）に飛行機雲１３４が映し出される映像をＣＧ合成モジュール１１４が生成する際に必要となる基礎データは、素材ファイル５８の３Ｄモデルデータ９４内にその一部として用意されている。
【０１１３】
図４の流体シミュレーションモジュール１０８は、センサモジュール１０２により抽出された、カメラセンサ４２が撮影した実映像内のボール６２についての大きさ、形状、移動方向、速さ、及び位置の情報、及び挙動シミュレーションモジュール１０６によりシミュレーションされた、ボール６２のその後の大きさ、形状、移動方向、速さ、及び位置についてのシミュレーション情報を、連続的に取得して、これらの情報に基づいて、仮想空間内においてボール６２に対応する仮想物体の挙動により風がどのように伝播するかをシミュレーションするようになっている。
【０１１４】
ＣＧ合成モジュール１１４は、流体シミュレーションモジュール１０８から送られてくる情報に基づいて、仮想空間内においてボール６２に対応する仮想物体の後方に、飛行機雲１３４を生成するようになっている。
【０１１５】
このような処理動作はリアルタイムで行なわれるため、競技者や観客にとっては、図５（ａ）から（ｃ）に示すように、ボール６２が後方に飛行機雲１３４を生成しながら移動しているように見えるようになっている。
【０１１６】
また、このようなボール６２が飛行機雲１３４を生成しながら移動している様子にあわせて、映像演出モジュール１０４の音声再生モジュール１１６は飛行機のエンジン音の基礎となる音声データ９６を読み込んで再生するようになっている。
【０１１７】
音声効果モジュール１１８は、流体シミュレーションモジュール１０８から送られてくるシミュレーション情報の中におけるボール６２の速度に基づいて、音声再生モジュール１１６が再生した飛行機のエンジン音について、その周波数を変えることにより、速く動くときと、ゆっくり動くときの差異を出すようになっている。
【０１１８】
また、音声合成モジュール１２０は、音声効果モジュール１１８から受け取った音声を、音響装置４８に出力するようになっている。
【０１１９】
このような処理動作もリアルタイムで行なわれるため、競技者や観客にとっては、ボール６２が後方に飛行機雲１３４を生成しながら移動しているように見えると共に、それと同時に飛行機のエンジン音も聞こえるようになっている。
【０１２０】
図６は、本発明の第１の実施の形態に係るボウリング場の映像表示システム４０のディスプレイ装置４６の表示画面４６ａに表示される映像１３０を示す図である。
【０１２１】
ＣＧ合成モジュール１１４は、プロジェクター４４に出力する映像１２８と連動するような映像１３０をディスプレイ装置４６に出力するようになっている。すなわち、ディスプレイ装置４６に表示される映像１３０は、図６に示すように、ボール６２が図３中の右のレーン７０においてセンサカメラ４２で撮影されるようになったときに、右のレーン７０に対応して、その映像の右半分に図５に示す映像１２８と似たような、雲が流れていく様子の空１３６が映し出される。
【０１２２】
また、ボール６２が図３中の右のレーン７０において図中一番右のセンサカメラ４２で撮影されなくなったときに、映像１３０の右半分のその中央に、下から上に飛行機１３８が後方に飛行機雲を作りながら移動する映像が映し出されるようになっている。
【０１２３】
この映像１３０内の飛行機１３８とその後方の飛行機雲は、その基礎となる素材ファイル５８の静止画データ９２を、映像演出モジュール１０４における映像再生モジュール１１０が読み込んで継続的にループ再生すると共に、この映像に対して映像効果モジュール１１２が画像処理を行ない、ＣＧ合成モジュール１１４が、この映像をテクスチャとして映像１３０の枠内にマッピングすることにより作成されている。
【０１２４】
また、飛行機１３８が飛行機雲を生成しながら移動している様子にあわせて、飛行機のエンジン音の基礎となる音声データ９６を、映像演出モジュール１０４の音声再生モジュール１１６が読み込んで再生し、音声効果モジュール１１８において加工し、音声合成モジュール１２０により合成され、ディスプレイ装置４６に内蔵されている不図示のスピーカーで出力されるようになっている。
【０１２５】
このような本実施の形態に係るボウリング場の映像表示システム４０及びその映像表示方法によれば、カメラセンサ４２でボール６２の挙動を撮影するために、そのボール６２の挙動に対応してプロジェクター４４がレーン７０のレーン上面７０ａに映す映像をリアルタイムに、かつ連続的に変化させることができるので、競技者や観客などに大きな驚きや感動を与えることができる。
【０１２６】
また、本実施の形態に係るボウリング場の映像表示システム４０及びその映像表示方法によれば、コンピュータ５０の演算処理装置５４が、レーン７０のレーン上面７０ａに表示される映像内に仮想流体が存在するものと仮定して、この仮定流体中を変化が伝播することをシミュレーションすることにより、第１映像出力手段に表示される映像等が変化することができるので、競技者や観客などに、より大きな驚きや感動を与えることができる。
【０１２７】
また、本実施の形態に係るボウリング場の映像表示システム４０及びその映像表示方法によれば、ＣＧ合成モジュール１１４が、プロジェクター４４に出力する映像１２８とディスプレイ装置４６に出力する映像１３０とを連動させるようになっているので、競技者や観客に、より大きな驚きや感動を与えることができる。
【０１２８】
次に、図１ないし図７は、本発明の第２の実施の形態に係るボウリング場の映像表示システム１４０及びその映像表示方法について説明するために参照する図である。
【０１２９】
本実施の形態に係るボウリング場の映像表示システム１４０のハードウェア構成は、図１に示すように、前記第１の実施の形態に係るボウリング場の映像表示システム４０のハードウェア構成と、全く同様に構成されている。また、本実施の形態に係るボウリング場の映像表示システム１４０の各装置の配置も、図２、３に示すように、前記第１の実施の形態に係るボウリング場の映像表示システム４０の各装置の配置と、全く同様に構成されている。
【０１３０】
また、本実施の形態に係るボウリング場の映像表示システム１４０のソフトウェア構成も、図４に示すように、前記第１の実施の形態に係るボウリング場の映像表示システム４０のソフトウェア構成と、全く同様に構成されている。
【０１３１】
本実施の形態に係るボウリング場の映像表示システム１４０は、コンピュータ５０の記憶装置５２に、センサモジュール１０２により抽出された、カメラセンサ４２が撮影した実映像内のボール６２についての大きさ、形状、移動方向、速さ、及び位置の情報、及び挙動シミュレーションモジュール１０６によりシミュレーションされた、ボール６２のその後の大きさ、形状、移動方向、速さ、及び位置についてのシミュレーション情報を、記憶するようになっている。
【０１３２】
このコンピュータ５０の記憶装置５２は、センサモジュール１０２の情報及び挙動シミュレーションモジュール１０６のシミュレーション情報とあわせて、ピンセッタ７４の下方に配置されたピン６６を撮像するピンカメラにより取得した、ピンデッキ６８上に立っているピン６６の本数、配置等をも記憶するようになっている。
【０１３３】
そして、図７の（ａ）、（ｂ）に示すように、センサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンカメラの情報に基づいて、レーン上面７０ａに、ピン６６に向かう複数の矢印１４４が表示された映像１４２が表示されるようになっている。
【０１３４】
すなわち、演出制御モジュール１２２により素材ファイル５８と、映像演出モジュール１０４が選択されるようになっている。そして、演出制御モジュール１２２により選択された映像演出モジュール１０４の映像再生モジュール１１０により、矢印１４４の基礎となる素材ファイル５８の静止画９２が再生されるようになっている。
【０１３５】
そして、映像演出モジュール１０４の映像効果モジュール１１２が、演出制御モジュール１２２の制御の下で、センサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンカメラの情報に基づいて、それぞれの矢印１４４のレーン７０の長さ方向に対する傾きを変更するようになっている。
【０１３６】
そして、映像演出モジュール１０４のＣＧ合成モジュール１１４が、演出制御モジュール１２２の制御の下で、映像効果モジュール１１２から受取ったそれぞれの矢印１４４の
映像等を、演出制御モジュール１２２の制御の下で、センサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンカメラの情報に基づいて、映像１４４の所定の位置に配置するようになっている。
【０１３７】
そして、図７（ａ）に示すように、ピンが１０本載置されている場合には、レーン上面７０ａの映像１４２は、正面のピンの中央右側に向かって右にカーブを描くような複数の矢印１４４が表示されるようになっている。
【０１３８】
また、図７（ｂ）に示すように、ピンが図中左側に４本載置されている場合には、レーン上面７０ａの映像１４２は、図中レーン上面７０ａの左側に向かって右にカーブを描くような複数の矢印１４４が表示されるようになっている。
【０１３９】
このように、記憶装置５２に記憶されているこれまでのセンサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンデッキ６８に立っているピン６６の本数、配置によって、映像１４２が変化するようになっている。
【０１４０】
このため、競技者は、レーン上面７０ａに表示された映像１４２の複数の矢印１４４を目印にしてボールを投球することができるようになっている。そして、競技者はピン６６のみを目標にして投げるよりも、ピン６６より近いレーン上面７０ａに表示された複数の矢印１４４を目標にして投げるほうが、コントロールがつきやすい。このため、徐々に狙ったところにボールがいくようになるので、ボウリングの練習に最適である。
【０１４１】
また、レーン上面７０ａに表示された映像１４２の複数の矢印１４４は、ピンデッキ６８に立っているピン６６の本数、配置によって変化するので、それを見た競技者は、ピン６６の本数、配置によってどのようにボールを投球すればいいのかがわかるようになっている。この点においても、ボウリングの練習に役立つようになっている。
【０１４２】
このような本実施の形態に係るボウリング場の映像表示システム１４０及びその映像表示方法によれば、カメラセンサ４２とピンカメラでボール６２の挙動とピン６６の状態を撮影して、それを記録しておくために、記憶装置５２に記憶されたそれらの情報に基づいて、プロジェクター４４がレーン７０のレーン上面７０ａに映す映像１４２を変化させることができるので、競技者や観客などに、より大きな驚きや感動を与えることができる。
【０１４３】
また、競技者はレーン上面７０ａに表示される映像１４２の複数の矢印１４４に基づいてボールの投球をすることができる。そのため、競技者はレーン上面７０ａに表示される映像１４２に基づいてボウリングの練習もすることができる。
【０１４４】
なお、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、カメラセンサ４２とプロジェクター４４と音響装置４８は、一体となって構成され、隣合う２つのレーン７０の中央に位置するボールリターン７６の上方に、それぞれ４台ずつレーン上面７０ａの長さ方向に間隔をおいて並んで配置されていたが、カメラセンサ４２とプロジェクター４４と音響装置４８は、一体となって構成されていなくてもよく、それぞれの性能等によって、それぞれの台数や位置が変わってもよい。
【０１４５】
また、レーン上面７０ａの上のボール６２の挙動を検出できるのならば、カメラセンサ４２は上方に配置されていなくてもよく、また、カメラセンサ４２ではなく他の検出手段を用いてもよい。同様にして、レーン７０のレーン上面７０ａに映像を表示できるのであれば、プロジェクター４４は上方に配置されていなくてもよく、また、プロジェクター４４ではなく他の表示手段を用いてもよい。
【０１４６】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、プロジェクター４４が映像投影の対象とするレーン７０は２つであり、その２つのレーン７０の全面に常時プロジェクター４４が映像を投影するようになっていたが、プロジェクター４４は周囲の状況に応じて映像を投影しないようになっていてもよく、プロジェクター４４は周囲の状況に応じて映像を投影する範囲の中の一部分のみに映像を投影するようになっていてもよい。例えば、２つのレーン７０の内の片方のレーン７０が使用されていないときは、使用されていないレーン７０のレーン上面７０ａには映像を投影しないようになっていてもよい。
【０１４７】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、カメラセンサ４２及びプロジェクター４４が撮影、映像投影の対象とするレーン７０は２つであったが、１つであってもよく、また３つ以上であってもよい。
【０１４８】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、プロジェクター４４が出力する映像１２８、及びディスプレイ装置４６に出力される映像１３０には、空１３２，１３６、飛行機雲１３４、飛行機１３８が映し出されていたが、これらに限定されるものではなく、ソフトウェア８８の構成によって表示することができるものであれば、どのようなものであってもよい。
【０１４９】
例えば、レーン上面７０ａに水面が表示されて、ボール６２が通った後にレーン上面７０ａの幅方向の外側に波紋が広がっていく状態が表示されたり、レーン上面７０ａに海面が表示されて、ボール６２の後を追うイルカが表示されたり、或いは、レーン上面７０ａに構造物が表示されて、ボール６２が通った軌跡及びその周辺の構造物だけが壊されていくような状態が表示されるようにしてもよい。
【０１５０】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、プロジェクター４４が出力する映像１２８とディスプレイ装置４６に出力される映像１３０とは連動するようになっていたが、常時連動していなくてもよく、また、全く連動していなくてもよい。また、プロジェクター４４が出力する映像１２８は、ディスプレイ装置４６に出力される映像１３０以外の他の表示装置等に出力される映像と連動するようになっていてもよい。
【０１５１】
また、前記第１の実施の形態に係るボウリング場の映像表示システム４０においては、そのコンピュータ５０の記憶装置５２には素材ファイル５８、映像演出用プログラム６０を記憶するようになっており、前記第２の実施の形態に係るボウリング場の映像表示システム１４０においては、そのコンピュータ５０の記憶装置５２には素材ファイル５８、映像演出用プログラム６０、センサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンカメラの情報を記憶するようになっていたが、これらの情報を光ディスク、メモリカード等の外部記憶媒体に記憶するようになっていてもよい。
【０１５２】
また、前記第２の実施の形態に係るボウリング場の映像表示システム１４０においては、そのコンピュータ５０の記憶装置５２にはセンサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンカメラの情報を記憶するようになっていたが、それらの情報を競技者ごとに分けて記憶するようになっていてもよい。また、前記第２の実施の形態に係るボウリング場の映像表示システム１４０については、前記競技者ごとの情報に基づいて、プロジェクター４４がレーン７０のレーン上面７０ａ上に映す映像を変化させるようになっていてもよい。
【０１５３】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、センサカメラ４２と不図示のピンカメラから送られる映像に基づいて、表示される映像が変化するようになっていたが、他のファールセンサ８２や不図示の投球フォームカメラや競技者センサ、競技者のスコア等の情報に基づいて、表示される映像が変化するようになっていてもよい。
【０１５４】
また、コンピュータ５０の記憶装置５２に外部記憶媒体や不図示の通信手段等を介して、新たな素材ファイル５８や映像演出用プログラム６０を追加することができるようになっていてもよし、不用な素材ファイル５８や映像演出用プログラム６０は削除することができるようになっていてもよい。
【０１５５】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、映像演出用プログラム６０のセンサモジュール１０２は、図３に示すカメラセンサ４２で撮影した実際の映像から、グレースケール変換、前フレーム差分法の画像処理を行なうようになっていたが、背景差分法等の画像処理を行なうようになっていてもよい。
【０１５６】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、映像演出用プログラム６０のセンサモジュール１０２は、図３に示すカメラセンサ４２で撮影した実際の映像から、この映像内の物体等について、その大きさ、形状、移動方向、速さ、及び位置の情報を抽出するようになっていたが、大きさ、形状、移動方向、及び速さの情報の中からいずれかだけを抽出するようになっていてもよい。また、色等の他の情報を抽出するようになっていてもよい。
【０１５７】
さらに、挙動シミュレーションモジュール１０６は、映像内の物体等について、その大きさ、形状、移動方向、速さ、及び位置の情報のシミュレーションをするようになっていたが、大きさ、形状、移動方向、及び速さの情報の中からいずれかだけのシミュレーションをするようになっていてもよい。また、色等の他の情報のシミュレーションをするようになっていてもよい。
【０１５８】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、センサモジュール１０２が、前フレーム差分法の画像処理を行なうか又は背景差分法等の画像処理を行なうかについて、或いは、図３に示すカメラセンサ４２で撮影する映像内の物体等について、その大きさ、形状、移動方向、速さ、色、位置等の情報のいずれを抽出するかについて、映像演出用プログラム６０内の演出設定ファイル１２６に設定が記憶されておくようにし、演出制御モジュール１２２が、このような演出設定ファイル１２６の設定に基づいて、センサモジュール１０２を制御するようになっていてもよい。また、このような演出設定ファイル１２６の設定に基づいて、センサモジュール１０２と同様に、挙動シミュレーションモジュール１０６を制御するようになっていてもよい。
【０１５９】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、センサモジュール１０２から送られてくる情報と挙動シミュレーションモジュール１０６から送られてくるシミュレーション情報に基づいて、映像が変化するようになっているが、カメラセンサ４２がボール６２の挙動を十分に捉えることができるのであれば、挙動シミュレーションモジュール１０６はなくてもよい。
【０１６０】
また、前記第１及び第２の実施の形態に係るボウリング場の映像表示システム４０，１４０においては、センサモジュール１０２の情報、挙動シミュレーションモジュール１０６のシミュレーション情報及びピンカメラの情報に基づいて、レーン上面７０ａ上に映像１４２が表示されるようになっているが、予めピンデッキ６８上に立っているピン６６の本数、位置ごとに対応した映像を用意していて、それを表示するようになっていてもよい。
【符号の説明】
【０１６１】
２  ボウリング場の映像表示システム
４  ピン
６  ピンデッキ
８  ピンセッタ
１０  マスキングディスプレイ
１２  天井ディスプレイ
１４  ピンカメラ
１６  レーン
１８  ファールライン
２０  アプローチ
２２  投球フォームカメラ
２４  第１ボール通過センサ
２６  第２ボール通過センサ
２８  ファールセンサ
３０  競技者センサ
４０  ボウリング場の映像表示システム
４２  カメラセンサ
４４  プロジェクター
４６  ディスプレイ装置
４６ａ  表示画面
４８  音響装置
５０  コンピュータ
５２  記憶装置
５４  演算処置装置
５６  入力装置
５８  素材ファイル
６０  映像演出用プログラム
６２  ボール
６４  アプローチ
６６  ピン
６８  ピンデッキ
７０  レーン
７０ａ  レーン上面
７２  ガータ
７４  ピンセッタ
７４ａ  壁面
７６  ボールリターン
８０  ファールライン
８２  ファールセンサ
８８  ソフトウェア
９０  動画データ
９２  静止画データ
９４  ３Ｄモデルデータ
９６  音声データ
９８  テキストデータ
１００  画像データ
１０２  センサモジュール
１０４  映像演出モジュール
１０６  挙動シミュレーションモジュール
１０８  流体シミュレーションモジュール
１１０  映像再生モジュール
１１２  映像効果モジュール
１１４  ＣＧ合成モジュール
１１６  音声再生モジュール
１１８  音声効果モジュール
１２０  音声合成モジュール
１２２  演出制御モジュール
１２４  演出構成モジュール
１２６  演出設定ファイル
１２８，１３０，１４２  映像
１３２，１３６  空
１３４  飛行機雲
１３８  飛行機
１４０  ボウリング場の映像表示システム
１４４  矢印
【図１】
2011128768.tif 000003
【図２】
2011128768.tif 000004
【図３】
2011128768.tif 000005
【図４】
2011128768.tif 000006
【図５】
2011128768.tif 000007
【図６】
2011128768.tif 000008
【図７】
2011128768.tif 000009
【図８】
2011128768.tif 000010