(57)【要約】【課題】車両の乗員に対して車両による移動に娯楽性を提供する。【解決手段】車内演出装置は、車両上の乗員が行うゲームを演出する車内演出装置であって、車両の運転とは無関係な前記乗員の動作を検出する動作検出部と、前記乗員が視認可能な画像を表示する表示部と、前記動作検出部が検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を前記表示部に表示するとともに、所定の規則に基づくゲームの結果を出力する表示制御部と、を備える。【選択図】図１
2020089744.tif 000002
【特許請求の範囲】
【請求項１】
車両上の乗員が行うゲームを演出する車内演出装置であって、
車両の運転とは無関係な周囲環境の物体を指示する動作を検出する動作検出部と、
前記周囲環境を撮像し、生成した周囲環境画像を示す画像情報を取得する撮像部と、  前記撮像部により取得された画像情報に基づき、特定の物体および属性を抽出する抽出部と、
前記乗員が視認可能な画像を表示する表示部と、
前記指示する動作の方向および前記物体の位置情報との比較、前記抽出部により抽出した前記特定の物体の属性、および前記動作検出部が検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を前記表示部に表示するとともに、所定の規則に基づくゲームの結果を出力する表示制御部と、
を備える車内演出装置。
【請求項２】
前記表示制御部は、
前記車両の周囲環境の物体に前記応答画像を重畳させて前記表示部に表示させる、
請求項１に記載の車内演出装置。
【請求項３】
前記表示制御部は、
前記動作検出部が検出した方向に基づいて、指示する方向の特定の物体と重なるように前記応答画像を前記表示部に表示させる、
請求項２に記載の車内演出装置。
【請求項４】
前記動作検出部が特定の物体を指示する動作を検出した回数を有効得点として算出する得点算出部
を更に備え、
前記表示制御部は、
所定のタイミングにおいて、前記得点算出部が算出した前記得点を示す画像を前記表示部に表示させる、
請求項２又は請求項３のいずれか一項に記載の車内演出装置。
【請求項５】
目的地を示す目的地情報を取得する目的地情報取得部を備え、
前記抽出部は、前記周囲環境画像のうち、前記目的地情報が示す前記目的地までの道路標識を前記特定の物体として抽出し、
前記得点算出部は、
前記抽出部が抽出した前記道路標識に対応する位置を指示する前記乗員の動作を前記動作検出部が検出した回数を有効得点として算出する、
請求項４に記載の車内演出装置。
【請求項６】
前記抽出部は、
前記周囲環境画像のうち、車両の近傍を走行する他の車両を前記特定の物体として抽出し、
前記得点算出部は、
前記抽出部が抽出した前記他の車両に対応する位置を指示する前記乗員の動作を前記動作検出部が検出した回数を有効得点として算出する、
請求項５に記載の車内演出装置。
【請求項７】
前記抽出部は、
前記周囲環境画像のうち、前記車両の周囲に存在する店舗の看板を前記特定の物体として抽出し、
前記得点算出部は、
前記抽出部が抽出した前記看板に対応する位置を指示する前記乗員の動作を前記動作検出部が検出した回数を有効得点として算出する、
請求項５又は請求項６に記載の車内演出装置。
【請求項８】
前記表示制御部は、
前記得点算出部が算出した前記得点の合計を示す画像を前記表示部に表示させる、
請求項４から請求項７のいずれか一項に記載の車内演出装置。
【請求項９】
請求項４から請求項８のいずれかに記載の車内演出装置を複数備える車内演出システムであって、
前記車内演出装置は、
前記得点算出部が算出した前記得点を示す情報を他の車内演出装置に送信する送信部と、
前記他の車内演出装置が算出した前記得点を示す得点情報を受信する受信部と、
を備え、
前記表示制御部は、
前記得点算出部が算出した前記得点を示す画像と、前記受信部が受信した前記得点情報の前記得点を示す画像とを前記表示部に表示させる、
車内演出システム。
【請求項１０】
前記表示制御部は、
自装置と同一のチームに属する車両に搭載される前記車内演出装置から受信した前記得点情報の前記得点を示す画像と、他のチームに属する車両に搭載される前記車内演出装置から受信した前記得点情報の前記得点を示す画像とを比較して前記表示部に表示させる、  請求項９に記載の車内演出システム。
【請求項１１】
前記表示制御部は、
自装置を搭載する車両の行動を示す情報、及び他の車内演出装置を搭載する車両の行動を示す情報に基づいて、移動を促す画像を表示させる、
請求項９又は請求項１０に記載の車内演出システム。
【請求項１２】
表示部を備え、車両上の乗員が行うゲームを演出するコンピュータが、
車両の運転とは無関係な前記乗員の動作を検出し、
前記乗員が視認可能な画像を表示し、
検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を表示するとともに、所定の規則に基づくゲームの結果を出力する、
車内演出方法。
【請求項１３】
表示部を備え、車両上の乗員が行うゲームを演出するコンピュータに、
車両の運転とは無関係な前記乗員の動作を検出させ、
前記乗員が視認可能な画像を表示させ、
検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を表示させるとともに、所定の規則に基づくゲームの結果を出力させる、
プログラム。
【請求項１４】
車両の乗員の動作を検出する動作検出部と、
前記乗員の視点位置を検出する視線検出部と、
前記動作検出部によって検出された前記乗員の指示動作と、前記視線検出部によって検出された前記乗員の視点位置とに基づいて、前記乗員の指示動作による指示方向の実空間の三次元点群を取得する座標取得部と、
三次元点群が示す実空間に存在する対象物を示す情報を供給するインタフェースから、前記座標取得部によって取得された前記三次元点群に対応付けられた対象物を示す情報を取得する対象物情報取得部と、
対象物に対応付けられるサービス提供者を示すサービサー情報に基づいて、前記対象物情報取得部によって取得された情報が示す対象物に対応付けられるサービス提供者を特定するサービス提供者特定部と、
前記サービス提供者特定部によって特定された前記サービス提供者と、前記対象物情報取得部によって取得された情報が示す対象物とを対応付けた履歴情報を生成する履歴情報生成部と、
を備える指示計測装置。
【請求項１５】
前記履歴情報には、前記指示動作が行われた時期と、前記乗員を示す情報とが更に対応付けられる、
請求項１４に記載の指示計測装置。
【請求項１６】
周囲環境を撮像し、周囲環境画像を生成する撮像部と、
前記撮像部によって撮像された前記周囲環境画像に基づいて、前記周囲環境の属性を特定する属性特定部と、を更に備え、
前記座標取得部は、
前記属性特定部によって特定された前記周囲環境の属性に基づいて、前記乗員の指示動作による指示方向の実空間の三次元点群を取得する、
請求項１４又は請求項１５に記載の指示計測装置。
【請求項１７】
前記履歴情報に示される前記サービス提供者に対し、前記指示動作が行われたことを通知する通知部、
を更に備える請求項１４から請求項１６のいずれか一項に記載の指示計測装置。
【請求項１８】
前記通知部は、前記履歴情報を前記乗員に通知する、
請求項１７に記載の指示計測装置。
【請求項１９】
周囲環境を撮像し、周囲環境画像を生成する撮像部を更に備え、
前記座標取得部は、
周囲環境画像に基づいて三次元点群を供給するインタフェースから、前記撮像部によって撮像された前記周囲環境画像に基づく三次元点群を示す情報を取得する、
請求項１４から請求項１８のいずれか一項に記載の指示計測装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車内演出装置、車内演出システム、車内演出方法、プログラムおよび指示計測装置に関する。
本願は、２０１７年６月１６日に、日本に出願された特願２０１７‐１１９０２５号に基づき優先権を主張し、その内容をここに援用する。
【背景技術】
【０００２】
従来、車両の運転者の運転技術の得点を算出する技術が知られている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−９０６７６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来の技術は、車両の乗員に対して娯楽性を提供するものではなかった。本発明は、上記問題に鑑みて為されたものであり、車両の乗員に対して車両による移動に娯楽性を提供することを目的とする。
【課題を解決するための手段】
【０００５】
この発明に係る車内演出装置、車内演出システム、車内演出方法およびプログラムは、以下の構成を採用した。
（１）この発明の一態様は、車両上の乗員が行うゲームを演出する車内演出装置であって、車両の運転とは無関係な前記乗員の動作を検出する動作検出部（３０）と、前記乗員が視認可能な画像を表示する表示部（６０）と、前記動作検出部が検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を前記表示部に表示するとともに、所定の規則に基づくゲームの結果を出力する表示制御部（１８）と、を備える車内演出装置である。
【０００６】
（２）は、（１）の態様の車内演出装置であって、前記表示制御部は、前記車両の周囲環境の物体に前記応答画像を重畳させて前記表示部に表示させてもよい。
【０００７】
（３）は、（２）の態様の車内演出装置であって、前記乗員の動作とは、前記周囲環境の物体を指示する動作であって、前記動作検出部は、前記乗員が指示する方向を検出し、前記表示制御部は、前記動作検出部が検出した方向に基づいて、指示する方向の特定の物体と重なるように前記応答画像を前記表示部に表示させてもよい。
【０００８】
（４）は、（２）又は（３）の態様の車内演出装置であって、の車内演出装置は、前記動作検出部が特定の物体を指示する動作を検出した回数を有効得点として算出する得点算出部（１７）を更に備え、前記表示制御部は、所定のタイミングにおいて、前記得点算出部が算出した前記得点を示す画像を前記表示部に表示させてもよい。
【０００９】
（５）は、（４）の態様の車内演出装置であって、前記特定の物体とは、目的地までの前記特定の道路標識であって、目的地を示す目的地情報を取得する目的地情報取得部（１４）と、前記周囲環境を撮像し、周囲環境画像を生成する撮像部（４０）と、前記周囲環境画像のうち、前記目的地情報が示す前記目的地までの前記特定の道路標識を抽出する抽出部（１６）と、を更に備え、前記得点算出部は、前記抽出部が抽出した前記道路標識に対応する位置を指示する前記乗員の動作を前記動作検出部が検出した回数を有効得点として算出してもよい。
【００１０】
（６）は、（５）の態様の車内演出装置であって、前記特定の物体とは、車両の近傍を走行する他の車両であって、前記抽出部は、前記周囲環境画像のうち、前記他の車両を抽出し、前記得点算出部は、前記抽出部が抽出した前記他の車両に対応する位置を指示する前記乗員の動作を前記動作検出部が検出した回数を有効得点として算出してもよい。
【００１１】
（７）は、（５）又は（６）の態様の車内演出装置であって、前記特定の物体とは、前記車両の周囲に存在する店舗の看板であって、前記抽出部は、前記周囲環境画像のうち、前記看板を抽出し、前記得点算出部は、前記抽出部が抽出した前記看板に対応する位置を指示する前記乗員の動作を前記動作検出部が検出した回数を有効得点として算出してもよい。
【００１２】
（８）は、（４）から（７）のいずれか１つの態様の車内演出装置であって、前記表示制御部は、前記得点算出部が算出した前記得点の合計を示す画像を前記表示部に表示させてもよい。
【００１３】
（９）は、（４）から（８）のいずれか１つの態様の車内演出装置を複数備える車内演出システムであって、前記車内演出装置は、前記得点算出部が算出した前記得点を示す情報を他の車内演出装置に送信する送信部（８０）と、前記他の車内演出装置が算出した前記得点を示す得点情報を受信する受信部（８０）と、を備え、前記表示制御部は、前記得点算出部が算出した前記得点を示す画像と、前記受信部が受信した前記得点情報の前記得点を示す画像とを前記表示部に表示させる、車内演出システムである。
【００１４】
（１０）は、（９）の態様の車内演出システムにおいて、前記表示制御部は、自装置と同一のチームに属する車両に搭載される前記車内演出装置から受信した前記得点情報の前記得点を示す画像と、他のチームに属する車両に搭載される前記車内演出装置から受信した前記得点情報の前記得点を示す画像とを比較して前記表示部に表示させてもよい。
【００１５】
（１１）は、（９）又は（１０）の態様の車内演出システムにおいて、前記表示制御部は、自装置を搭載する車両の行動を示す情報、及び他の車内演出装置を搭載する車両の行動を示す情報に基づいて、移動を促す画像を表示させてもよい。
【００１６】
（１２）は、表示部を備え、車両上の乗員が行うゲームを演出するコンピュータが、車両の運転とは無関係な前記乗員の動作を検出し、前記乗員が視認可能な画像を表示し、検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を表示するとともに、所定の規則に基づくゲームの結果を出力する、車内演出方法である。
【００１７】
（１３）は、表示部を備え、車両上の乗員が行うゲームを演出するコンピュータに、車両の運転とは無関係な前記乗員の動作を検出させ、前記乗員が視認可能な画像を表示させ、検出した前記乗員の動作に基づいて、前記乗員の動作に応じた応答画像を表示させるとともに、所定の規則に基づくゲームの結果を出力させる、プログラムである。
【００１８】
（１４）この発明の一態様は、車両の乗員の動作を検出する動作検出部と、前記乗員の視点位置を検出する視線検出部と、前記動作検出部によって検出された前記乗員の指示動作と、前記視線検出部によって検出された前記乗員の視点位置とに基づいて、前記乗員の指示動作による指示方向の実空間の三次元点群を取得する座標取得部と、三次元点群が示す実空間に存在する対象物を示す情報を供給するインタフェースから、前記座標取得部によって取得された前記三次元点群に対応付けられた対象物を示す情報を取得する対象物情報取得部と、対象物に対応付けられるサービス提供者を示すサービサー情報に基づいて、前記対象物情報取得部によって取得された情報が示す対象物に対応付けられるサービス提供者を特定するサービス提供者特定部と、前記サービス提供者特定部によって特定された前記サービス提供者と、前記対象物情報取得部によって取得された情報が示す対象物とを対応付けた履歴情報を生成する履歴情報生成部と、を備える指示計測装置である。
【００１９】
（１５）は、（１４）の態様の指示計測装置において、前記履歴情報には、前記指示動作が行われた時期と、前記乗員を示す情報とが更に対応付けられるものである。
【００２０】
（１６）は、（１４）または（１５）の態様の指示計測装置において、周囲環境を撮像し、周囲環境画像を生成する撮像部と、前記撮像部によって撮像された前記周囲環境画像に基づいて、前記周囲環境の属性を特定する属性特定部と、を更に備え、前記座標取得部は、前記属性特定部によって特定された前記周囲環境の属性に基づいて、前記乗員の指示動作による指示方向の実空間の三次元点群を取得するものである。
【００２１】
（１７）は、（１４）から（１６）のいずれか１つの態様の指示計測装置において、前記履歴情報に示される前記サービス提供者に対し、前記指示動作が行われたことを通知する通知部、を更に備えるものである。
【００２２】
（１８）は、（１７）の指示計測装置において、前記通知部は、前記履歴情報を前記乗員に通知するものである。
【００２３】
（１９）は、（１４）から（１８）のいずれか１つの態様の指示計測装置において、周囲環境を撮像し、周囲環境画像を生成する撮像部を更に備え、前記座標取得部は、周囲環境画像に基づいて三次元点群を供給するインタフェースから、前記撮像部によって撮像された前記周囲環境画像に基づく三次元点群を示す情報を取得するものである。
【発明の効果】
【００２４】
上述した（１）〜（１９）の態様によれば、車両の乗員に対して車両による移動に娯楽性を提供することができる。
【図面の簡単な説明】
【００２５】
【図１】第１の実施形態に係る車内演出装置の概要を示す図である。
【図２】第１の実施形態に係る車内演出装置の構成の一例を示す機能構成図である。
【図３】射撃動作を検出したことを示す応答画像の一例を示す図である。
【図４】射撃したことを示す応答画像の一例を示す図である。
【図５】得点情報の得点を示す応答画像の一例を示す図である。
【図６】第１の実施形態に係る車内演出装置の動作の一例を示す流れ図である。
【図７】第２の実施形態に係る車内演出装置の構成の一例を示す機能構成図である。
【図８】第２の実施形態に係る他の車内演出装置が表示した応答画像の表示の一例を示す図である。
【図９】走行経路に基づくテリトリー面積ルールによる射撃ゲームの結果の一例を示す図である。
【図１０】テリトリー面積ルールによる射撃ゲームの勝敗の一例を示す図である。
【図１１】第３の実施形態に係る車内演出装置の構成の一例を示す機能構成図である。
【図１２】履歴情報の内容の一例を示す図である。
【図１３】サービス提供者情報の内容の一例を示す図である。
【発明を実施するための形態】
【００２６】
［第１の実施形態］
以下、図を参照して本発明の第１の実施形態について説明する。図１は、第１の実施形態に係る車内演出装置１の概要を示す図である。車内演出装置１は、車両（以下、車両Ｖ）によって移動する当該車両Ｖの乗員（以下、乗員ＰＳ）に対して、娯楽を提供する装置である。車内演出装置１は、例えば、車両Ｖの移動中に、車両Ｖの周囲環境に存在する物体を射撃対象とする射撃ゲームを演出する。本実施形態の一例において、車両Ｖは、自動運転によって走行する。車内演出装置１は、車両Ｖ内に配置される。また、車両Ｖには、音検出部２０、動作検出部３０、撮像部４０、入力部５０およびディスプレイ６０が配置される。
【００２７】
音検出部２０は、乗員ＰＳが発する音声を検出する。音検出部２０とは、例えば、マイクロフォンである。動作検出部３０は、乗員ＰＳの動作を検出する。動作検出部３０とは、例えば、モーションセンサである。撮像部４０は、車両Ｖが走行する周囲環境を撮像する。入力部５０は、入力デバイスを備え、乗員ＰＳの入力操作を受け付ける。この入力デバイスには、キーボード等の文字情報を入力するデバイス、マウス、タッチパネル等のポインティングデバイス、ボタン、ダイヤル、ジョイスティック、タッチセンサ、タッチパッド等が含まれる。ディスプレイ６０は、車内演出装置１の制御に基づいて、各種情報を表示する。本実施形態の一例において、ディスプレイ６０は、透過型ディスプレイであって、車両Ｖのフロントウィンドウに接して配置される。乗員ＰＳは、フロントウィンドウから車両Ｖの周囲環境と、ディスプレイ６０が表示する画像とを視認可能である。なお、車両Ｖは、フロントウィンドウを備えていなくてもよい。この場合、ディスプレイ６０は、撮像部４０が撮像する車両Ｖの周囲環境画像と、応答画像とを重畳して表示する。なお、ディスプレイ６０は、ＨＵＤ（Head-Up Display）であってもよい。
【００２８】
車内演出装置１は、音検出部２０および動作検出部３０が検出した検出結果と、入力部５０に入力された情報とに基づいて、乗員ＰＳの動作に応じた応答画像を、ディスプレイ６０に表示する。車内演出装置１は、例えば、乗員ＰＳが、車両Ｖの周囲環境に存在する物体を射撃する動作（以下、射撃動作）に基づいて、応答画像を提示したり、当該射撃動作に伴う得点を算出したりする。以下、車内演出装置１の具体的な構成について説明する。
【００２９】
［車内演出装置の機能構成について］
図２は、第１の実施形態に係る車内演出装置１の構成の一例を示す機能構成図である。
車内演出装置１は、制御部１０と、音検出部２０と、動作検出部３０と、撮像部４０と、入力部５０と、ディスプレイ６０と、記憶部５００とを備える。記憶部５００には、応答画像を示す情報（以下、応答画像情報５００−１）が記憶される。
【００３０】
制御部１０は、例えば、ＣＰＵ（Central Processing Unit）などのプロセッサが記憶部５００に記憶されたプログラムを実行し、音声情報取得部１１と、動作情報取得部１２と、画像情報取得部１３と、目的地情報取得部１４と、ゲーム管理部１５と、抽出部１６と、得点算出部１７と、表示制御部１８とをその機能部として実現する。これらの機能部は、ＬＳＩ（Large Scale Integration）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）等のハードウェアによって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。
【００３１】
音声情報取得部１１は、音検出部２０が検出した乗員ＰＳの音声を示す音声情報を取得する。動作情報取得部１２は、動作検出部３０が検出した乗員ＰＳの動作を示す動作情報を取得する。本実施形態の一例において、乗員ＰＳは、射撃音を模倣する音声を発し、かつ車両Ｖの周囲環境に存在する物体（射撃対象）を指で指示する動作を、射撃動作として行う。したがって、音声情報には、射撃音を模倣する音声が含まれる。図１に示す「バン！」は、乗員ＰＳが射撃音を模倣する音声の内容を示している。また、動作情報には、射撃対象を指示する指示動作が含まれる。音声情報取得部１１は、取得した音声情報を表示制御部１８と、得点算出部１７とに出力する。また、動作情報取得部１２は、取得した動作情報を表示制御部１８と、得点算出部１７とに出力する。
【００３２】
画像情報取得部１３は、撮像部４０が車両Ｖの走行する周囲環境を撮像し、生成した周囲環境画像を示す情報（以下、画像情報）を取得する。画像情報取得部１３は、取得した画像情報を抽出部１６に出力する。目的地情報取得部１４は、入力部５０に入力された操作によって示される目的地を示す情報（以下、目的地情報）を取得する。車両Ｖは、例えば、目的地情報取得部１４が取得した目的地情報が示す目的地に向かって、自動運転によって走行する。また、目的地情報取得部１４は、目的地情報を表示制御部１８に出力する。
【００３３】
ゲーム管理部１５は、車内演出装置１が演出する射撃ゲームを管理する。ゲーム管理部１５は、例えば、射撃ゲームの開始および終了を管理する。ゲーム管理部１５は、例えば、入力部５０に入力された操作が射撃ゲームの開始を示す場合、射撃ゲームを開始させる処理を実行する。また、ゲーム管理部１５は、入力部５０に入力された操作が射撃ゲームの終了を示す場合、射撃ゲームを終了させる処理を実行する。射撃ゲームを開始させる処理とは、抽出部１６、得点算出部１７および表示制御部１８に各種処理の実行を許可する処理（以下、イネーブル処理）である。また、射撃ゲームを終了させる処理とは、抽出部１６、得点算出部１７および表示制御部１８に各種処理の実行を許可しない処理（以下、ディスエイブル処理）である。抽出部１６、得点算出部１７および表示制御部１８は、ゲーム管理部１５がイネーブル処理を実行する場合、各種処理を実行し、ゲーム管理部１５がディスエイブル処理を実行する場合、各種処理を実行しない。
【００３４】
なお、上述では、ゲーム管理部１５が、入力部５０に入力された操作に基づいて、射撃ゲームの開始および終了を示す情報を取得する場合について説明したが、これに限られない。射撃ゲームの開始および終了は、乗員ＰＳの音声によって指示されてもよい。この場合、ゲーム管理部１５は、音検出部２０の検出結果に基づいて、射撃ゲームの開始および終了を管理してもよい。また、ゲーム管理部１５は、音検出部２０や動作検出部３０の検出結果に基づいて、車両Ｖの車内環境の盛り上がり度を判定する構成であってもよい。ゲーム管理部１５は、車両Ｖの車内環境の盛り上がり度が低い場合、自動的にイネーブル処理を実行してもよい。この場合、車内演出装置１は、車内が盛り上がっていない時に射撃ゲームを演出し、車内を盛り上げることができる。また、ゲーム管理部１５は、車両Ｖの車内環境の盛り上がり度が低い場合、自動的にディセエイブル処理を実行してもよい。この場合、車内演出装置１は、演出した射撃ゲームによって車内が盛り上がっていない時に射撃ゲームを終了することができる。
【００３５】
抽出部１６は、画像情報取得部１３から画像情報が入力される。抽出部１６は、画像情報が示す周囲環境画像に対して画像認識処理を行い、乗員ＰＳの射撃対象の物体を抽出する。抽出部１６は、例えば、車両Ｖの近傍を走行する前方車両、後方車両、並走車両および対向車両や、車両Ｖの周囲に存在する店舗の看板や、道路標識等の物体を乗員ＰＳの射撃対象として抽出する。また、抽出部１６は、周囲環境画像に基づいて、車両Ｖの周囲に存在する実際の物体の位置と、抽出した物体（射撃対象）の位置とをマッチングし、射撃対象の位置を示す情報を得点算出部１７に出力する。
【００３６】
具体的には、抽出部１６は、周囲環境画像に対して画像認識処理を行い、周囲環境画像に撮像される各種物体の当該周囲環境画像上における位置を認識する。また、抽出部１６は、フロントウィンドウに周囲環境画像を実物大に提示した場合のフロントウィンドウ上の位置と、抽出した物体（射撃対象）の周囲環境画像上における位置とをマッチングする。抽出部１６は、フロントウィンドウの位置を、射撃対象の仮想的な位置を示す仮想位置情報として、得点算出部１７と、表示制御部１８とに出力する。
【００３７】
得点算出部１７は、音声情報取得部１１から入力された音声情報と、動作情報取得部１２が取得した動作情報と、抽出部１６から入力された仮想位置情報とに基づいて、乗員ＰＳの動作に対する得点を算出する。例えば、音声情報が射撃音を模倣する音声を示し、かつ動作情報が示す指示動作の指示方向が、仮想位置情報が示す射撃対象の位置の方向である場合、得点算出部１７は、乗員ＰＳの動作に対して高い得点を算出する。また、音声情報が射撃音を模倣する音声を示し、かつ動作情報が示す指示動作の指示方向が、仮想位置情報が示す射撃対象の位置の方向ではない場合、得点算出部１７は、乗員ＰＳの動作に対して低い得点を算出する。得点算出部１７は、算出した得点を示す得点情報を表示制御部１８に出力する。
【００３８】
表示制御部１８は、音声情報取得部１１から入力された音声情報と、動作情報取得部１２から入力された動作情報と、目的地情報取得部１４から入力された目的地情報と、抽出部１６から入力された仮想位置情報と、得点算出部１７から入力された得点情報とに基づいて、応答画像をディスプレイ６０に表示する。以下、表示制御部１８がディスプレイ６０に表示する応答画像の具体例について説明する。
【００３９】
［射撃動作を検出したことを示す応答画像の例］
図３は、射撃動作を検出したことを示す応答画像ＧＰ１Ａの一例を示す図である。表示制御部１８は、音声情報が射撃音を模倣する音声を示し、かつ動作情報が指示動作を示す場合、射撃動作を検出したことを示す応答画像（図示する応答画像ＧＰ１Ａ）をディスプレイ６０に表示する。図３に示す通り、応答画像ＧＰ１Ａとは、例えば、射撃が射撃対象に命中したことを示す画像である。表示制御部１８は、応答画像ＧＰ１Ａを提示し、乗員ＰＳに対して、射撃動作を検出したことを明示する。
【００４０】
［射撃したことを示す応答画像の例］
図４は、射撃したことを示す応答画像ＧＰ１Ｂの一例を示す図である。表示制御部１８は、射撃したことを示す応答画像ＧＰ１Ｂ（図示する応答画像ＧＰ１Ｂ−１〜ＧＰ１Ｂ−４）をディスプレイ６０に表示する。図４に示す通り、応答画像ＧＰ１Ｂとは、例えば、所定の領域にインクが塗布されたような画像である。表示制御部１８は、動作情報が示す指示方向に応答画像ＧＰ１Ｂを提示し、乗員ＰＳに対して射撃動作が行われたことを明示する。また、表示制御部１８は、射撃対象に重畳するように応答画像ＧＰ１Ｂを表示してもよい。具体的には、表示制御部１８は、対向車両に重畳するように応答画像（図示する応答画像ＧＰ１Ｂ−１）を表示してもよい。また、表示制御部１８は、道路標識に重畳するように応答画像（図示する応答画像ＧＰ１Ｂ−２）を表示してもよい。また、表示制御部１８は、車両Ｖの周辺に存在する店舗の看板に重畳するように応答画像（図示する応答画像ＧＰ１Ｂ−３）を表示してもよい。また、表示制御部１８は、指示動作が示す方向に射撃対象が存在しない場合、当該方向の路面上に応答画像（図示する応答画像ＧＰ１Ｂ−４）を表示してもよい。
【００４１】
なお、表示制御部１８は、車両Ｖの移動に伴い、射撃対象が接近又は離隔することに応じて、応答画像ＧＰ１Ｂが示す所定の領域を拡大又は縮小して表示する構成であってもよい。具体的には、表示制御部１８は、応答画像ＧＰ１Ｂが示す所定の領域が、所定の面積を示すように拡大又は縮小する構成であってもよい。
【００４２】
［得点を示す応答画像の例］
図５は、得点情報の得点を示す応答画像ＧＰ１Ｃの一例を示す図である。表示制御部１８は、得点情報が示す得点であって、乗員ＰＳの動作に基づいて算出された得点を示す応答画像（図示する応答画像ＧＰ１Ｃ）をディスプレイ６０に表示する。図５に示す通り、応答画像ＧＰ１Ｃとは、例えば、得点を数値によって示す画像である。表示制御部１８は、応答画像ＧＰ１Ｃを提示し、乗員ＰＳに対して当該乗員ＰＳの射撃動作に対する評価を明示する。なお、応答画像ＧＰ１Ｃは、得点をレベルによって示す画像であってもよい。
具体的には、応答画像ＧＰ１Ｃは、得点に応じて乗員ＰＳのレベルを示す画像（例えば、「初心者」、「一人前」、「玄人」、「名人」、「達人」」等）を提示してもよい。
【００４３】
［車内演出装置の動作について］
図６は、第１の実施形態に係る車内演出装置１の動作の一例を示す流れ図である。音声情報取得部１１は、音検出部２０から音声情報を常時、又は所定の時間間隔において取得する（ステップＳ１１０）。動作情報取得部１２は、動作検出部３０から動作情報を常時、又は所定の時間間隔において取得する（ステップＳ１２０）。画像情報取得部１３は、撮像部４０から画像情報を常時、又は所定の時間間隔において取得する（ステップＳ１３０）。目的地情報取得部１４は、入力部５０に入力された操作によって示される目的地情報を取得する（ステップＳ１４０）。乗員ＰＳは、例えば、車両Ｖの走行を開始させる際等に、入力部５０によって目的地情報を入力する。
【００４４】
ゲーム管理部１５は、ゲームの開始および終了を管理する（ステップＳ１４５）。ゲーム管理部１５は、入力部５０に入力された操作が射撃ゲームの開始を示す場合、処理をステップＳ１５０に進める。また、ゲーム管理部１５は、入力部５０に入力された操作が射撃ゲームの開始を示さない場合および、既に開始された射撃ゲームの終了を示す場合、処理を終了する。
【００４５】
抽出部１６は、動作情報取得部１２が取得した画像情報が示す周囲環境画像に対して画像処理を行い、射撃対象を抽出し、仮想位置情報を生成する（ステップＳ１５０）。抽出部１６は、例えば、画像情報取得部１３が画像情報を取得する毎に射撃対象を抽出し、仮想位置情報を生成する。得点算出部１７は、音声情報取得部１１が取得した音声情報と、動作情報取得部１２が取得した動作情報とに基づいて、乗員ＰＳが射撃動作を行ったか否かを判定する（ステップＳ１６０）。得点算出部１７は、乗員ＰＳが射撃動作を行ったと判定する場合、動作情報と、画像情報取得部１３が取得した画像情報および抽出部１６が生成した仮想位置情報に基づいて、乗員ＰＳの動作に対する得点を算出する（ステップＳ１７０）。また、得点算出部１７は、乗員ＰＳが射撃動作を行っていないと判定する場合、乗員ＰＳの動作に対する得点を算出せず、処理をステップＳ１８０に進める。表示制御部１８は、音声情報、動作情報、目的地情報および仮想位置情報に基づいて、応答画像をディスプレイ６０に表示する（ステップＳ１８０）。
【００４６】
なお、上述では、射撃動作が、射撃音を模倣する音声を発し、かつ車両Ｖの周囲環境に存在する射撃対象を指で指示する動作である場合について説明したが、これに限られない。射撃動作は、例えば、射撃音を模倣する音声を発する動作、又は車両Ｖの周囲環境に存在する射撃対象を指示する動作のいずれか一方であってもよい。この場合、車内演出装置１は、射撃動作として用いない情報を検出する検出部（音検出部２０、又は動作検出部３０）を備えていなくてもよい。
【００４７】
［第１の実施形態のまとめ］
以上説明したように、本実施形態の車内演出装置１は、車両Ｖの乗員ＰＳの動作を検出する動作検出部３０と、動作検出部３０が検出した乗員ＰＳの動作に基づいて、乗員ＰＳの動作に応じた応答画像（この一例では、応答画像ＧＰ１Ａ−１）の表示を制御する表示制御部１８とを備える。したがって、本実施形態の車内演出装置１は、車両Ｖによって移動する乗員ＰＳに対して、娯楽を提供することができる。
【００４８】
また、本実施形態の車内演出装置１は、表示制御部１８が、車両Ｖの周囲環境の物体（射撃対象）に応答画像（この一例では、応答画像ＧＰ１Ｂ−１〜ＧＰ１Ｂ−３）を重畳して表示する。また、本実施形態の車内演出装置１において、射撃対象とは、周囲環境の物体を指示する動作であって、動作検出部３０は、乗員ＰＳが指示する方向（この一例では、動作情報）を検出し、表示制御部１８は、動作検出部３０が検出した動作情報に基づいて、応答画像（この一例では、応答画像ＧＰ１Ｂ−１〜ＧＰ１Ｂ−４）を表示する。また、本実実施形態の車内演出装置１は、動作情報と、仮想位置情報とに基づいて、得点を算出する得点算出部１７を更に備え、表示制御部１８は、得点算出部１７が算出した得点を示す応答画像（この一例では、応答画像ＧＰ１Ｃ）を更に表示する。これにより、本実施形態の車内演出装置１は、応答画像をより娯楽性の高い演出によってディスプレイ６０に表示し、乗員ＰＳの射撃動作に対する意欲を向上させることができる。
【００４９】
［射撃ゲームのルールと得点について］
なお、上述では、得点算出部１７が、動作情報が示す指示動作の方向と、射撃対象の位置とに基づいて、得点を算出する構成について説明したが、これに限られない。得点算出部１７は、車内演出装置１が演出する射撃ゲームのルールに則して得点を算出する構成であってもよい。射撃ゲームのルールとは、例えば、目的地情報が示す目的地方向の道路標識を射撃対象とするルール、ある特定の車種の車両を射撃対象とするルール、店舗の看板を射撃対象とするルール等である。このルールの場合、抽出部１６が抽出した射撃対象のうち、ルールに則した射撃対象を指示する射撃動作に対して、高得点を算出する。
【００５０】
また、得点算出部１７は、応答画像ＧＰ１Ｂ（所定の領域にインクが塗布されたような画像）が表示される面積に基づいて、得点を算出する構成であってもよい。以降の説明において、応答画像ＧＰ１Ｂが表示される面積に基づいて得点を算出するルールを、テリトリー面積ルールと記載する。テリトリー面積ルールにおいて、得点算出部１７は、応答画像ＧＰ１Ｂによって示されるインクの面積に応じて得点を算出する。これにより、本実施形態の車内演出装置１は、応答画像をより娯楽性の高い演出によってディスプレイ６０に表示し、乗員ＰＳの射撃動作に対する意欲を向上させることができる。
【００５１】
なお、上述では、ゲーム管理部１５がディスエイブル処理を行う場合、抽出部１６、得点算出部１７および表示制御部１８が各種処理を実行しない場合について説明したが、これに限られない。例えば、ゲーム管理部１５がディスエイブル処理を行う場合、表示制御部１８のみが各種処理を実行しない構成であってもよい。この場合、各種機能部は処理を実行するが、ディスプレイ６０には、各種画像が表示されない。
【００５２】
［第２の実施形態］
以下、図を参照して本発明の第２の実施形態について説明する。第２の実施形態では、車両Ｖの位置に応じて画像を表示する車内演出装置２について説明する。また、他の車両Ｖに搭載される車内演出装置２が表示する画像を、自装置のディスプレイ６０に表示する車内演出装置２について説明する。なお、上述した実施形態と同様の構成については、同一の符号を付して説明を省略する。
【００５３】
図７は、第２の実施形態に係る車内演出装置２の構成の一例を示す機能構成図である。車内演出装置２は、制御部１０Ａと、音検出部２０と、動作検出部３０と、撮像部４０と、入力部５０と、ディスプレイ６０と、位置検出部７０と、通信部８０と、記憶部５００とを備える。
【００５４】
位置検出部７０は、車両Ｖが走行する位置を検出する。位置検出部７０は、例えば、ＧＰＳ（Global Positioning System）などの全地球航法衛星システム（Global Navigation Satellite System(s)：ＧＮＳＳ）を利用した方法や、準天頂衛星（quasi-zenith satellites：ＱＺＳ）などの地域的衛星測位システム（Regional Navigation Satellite System：ＲＮＳＳ）を利用した方法によって車両Ｖの位置を検出する。位置検出部７０は、車両Ｖの位置を示す位置情報を制御部１０Ａに出力する。
【００５５】
通信部８０は、車内演出装置２の処理に用いられる情報を集約するサーバ（不図示）と無線通信によって通信する。無線通信とは、例えば、Ｗｉ−Ｆｉ（登録商標）による近距離無線通信や、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）などの移動体通信網を介した無線通信等である。なお、車両Ｖ間で直接通信を行ってもよい。この場合、車両Ｖ間は、ＤＳＲＣ（Dedicated Short Range Communications）等のアドホックネットワークを用いて通信を行う。
【００５６】
制御部１０Ａは、記憶部５００に記憶されたプログラムを実行し、音声情報取得部１１と、動作情報取得部１２と、画像情報取得部１３と、目的地情報取得部１４と、ゲーム管理部１５と、抽出部１６と、得点算出部１７と、表示制御部１８と、位置情報取得部１９とをその機能部として実現する。
【００５７】
位置情報取得部１９は、位置検出部７０から位置情報を取得する。位置情報取得部１９は、常時、又は所定の時間間隔において位置情報を取得する。位置情報取得部１９は、取得した位置情報を表示制御部１８と、通信部８０とに出力する。また、本実施形態の表示制御部１８は、ディスプレイ６０に表示させる応答画像を常時、又は所定の時間間隔において通信部８０に出力する。
【００５８】
通信部８０は、位置情報取得部１９から入力された位置情報と、表示制御部１８から入力された応答画像とを対応付けて、サーバに送信する。以降の説明において、位置情報と、応答画像とが対応付けられた情報を位置画像情報と記載する。また、通信部８０は、他の車内演出装置２がサーバに送信した位置画像情報を受信する。具体的には、通信部８０は、位置情報取得部１９から入力される位置情報に基づいて、当該位置情報が対応付けられた位置画像情報を受信する。換言すると、通信部８０は、車両Ｖの現在の位置を示す位置情報が対応付けられた位置画像情報をサーバから受信する。通信部８０は、受信した位置画像情報を表示制御部１８に出力する。
【００５９】
本実施形態の表示制御部１８は、通信部８０から位置画像情報が入力される。表示制御部１８は、位置情報取得部１９から入力された位置情報と合致する位置情報が対応付けられた位置画像情報の応答画像を、ディスプレイ６０に表示する。つまり、表示制御部１８は、他の車内演出装置２が現在の車両Ｖの位置において過去に表示した応答画像を、ディスプレイ６０に表示させる。
【００６０】
［他の車内演出装置が表示した応答画像の表示の例］
図８は、第２の実施形態に係る他の車内演出装置２が表示した応答画像の表示の一例を示す図である。表示制御部１８は、自装置の処理に基づく応答画像（図示する応答画像ＧＰ１Ｂ−１〜ＧＰ１Ｂ−３）と、他の車内演出装置２が現在の位置で過去に表示した応答画像（図示する応答画像ＧＰ２−１〜ＧＰ２−３および応答画像ＧＰ３−１〜ＧＰ３−２）とを表示する。図示する応答画像ＧＰ２−１〜ＧＰ２−３は、他の車内演出装置２が、現在の車両Ｖの位置において過去に表示した応答画像である。また、図示する応答画像ＧＰ３−１〜ＧＰ３−２は、さらに他の車内演出装置２が、現在の車両Ｖの位置において過去に表示した応答画像である。
【００６１】
［第２の実施形態のまとめ］
以上説明したように、本実施形態の車内演出装置２は、位置検出部７０が車両Ｖの位置を検出し、通信部８０は、位置画像情報の送受信を行い、表示制御部１８は、自装置の処理に基づく応答画像（図示する応答画像ＧＰ１Ｂ−１〜ＧＰ１Ｂ−３）と、他の車内演出装置２が、現在の車両Ｖの位置において過去に表示した応答画像（図示する応答画像ＧＰ２−１〜ＧＰ２−３および応答画像ＧＰ３−１〜ＧＰ３−２）を表示する。これにより、本実施形態の車内演出装置２は、乗員ＰＳ以外の他者が射撃ゲームを行った応答画像をディスプレイ６０に表示し、乗員ＰＳの競争心を向上させ、射撃動作に対する意欲を向上させることができる。
【００６２】
［テリトリー面積ルールによる対決］
なお、車内演出装置２が演出する射撃ゲームは、位置画像情報に基づいて、乗員ＰＳと、他者との間においてテリトリー面積ルールによる対決を行う構成であってもよい。具体的には、得点算出部１７は、位置画像情報に示される他者の応答画像（図８に示す応答画像ＧＰ２−１〜ＧＰ２−３および応答画像ＧＰ３−１〜ＧＰ３−２）の面積に基づいて、得点を算出する。また、得点算出部１７は、自装置の処理に基づいて表示する応答画像（図８に示す応答画像ＧＰ１Ｂ−１〜ＧＰ１Ｂ−３）の面積に基づいて、得点を算出する。
車内演出装置２は、高い得点の応答画像を表示した車内演出装置２（車両Ｖ）の乗員ＰＳを勝者として判定する。
【００６３】
［テリトリー面積ルールによる対決：チーム戦］
また、テリトリー面積ルールによる射撃ゲームをチーム戦によって行う構成であってもよい。例えば、テリトリー面積ルールによる射撃ゲームが複数チーム（赤チーム、青チームおよび黄チーム等）によって行われる構成であってもよい。この場合、得点算出部１７は、位置画像情報の応答画像のうち、自装置の応答画像のインクの色と合致する色の応答画像の面積と、自装置の処理に基づいて表示する応答画像の面積との和を、自チームの得点として算出する。また、車内演出装置２は、得点の高いチームを勝者として判定する。
【００６４】
［走行経路に基づくテリトリー面積ルール］
また、上述では、乗員ＰＳの射撃動作に応じた応答画像の面積に基づいて、テリトリー面積ルールの射撃ゲームを行う場合について説明したが、これに限られない。車内演出装置２は、位置情報取得部１９が取得する位置情報に基づいて、車両Ｖが走行した経路の面積に基づいて、テリトリー面積ルールの射撃ゲームを行ってもよい。この場合、表示制御部１８は、自装置を搭載する車両Ｖが走行した経路と、経路幅を示す所定の値とを乗じて面積を算出し、当該面積に応じた得点を算出する。また、通信部８０は、他の車内演出装置２を搭載する車両が走行した経路を示す走行経路情報を受信する。得点算出部１７は、受信した走行経路情報が示す他の車両が走行した経路と、経路幅を示す所定の値とを乗じて面積を算出し、当該面積に応じた得点を算出する。車内演出装置２は、得点が高い車両Ｖの乗員ＰＳを勝者として判定する。
【００６５】
［走行経路に基づくテリトリー面積ルールの表示］
また、表示制御部１８は、車両Ｖが走行した経路の面積を示す画像および受信した走行経路情報が示す経路の面積を示す画像をディスプレイ６０に表示する構成であってもよい。図９は、走行経路に基づくテリトリー面積ルールによる射撃ゲームの結果の一例を示す図である。この場合、表示制御部１８は、位置情報取得部１９に基づいて、車両Ｖが走行した経路を示す画像（図示する画像Ｐ１）を生成する。また、通信部８０は、他の車内演出装置２を搭載する車両Ｖが走行した経路を示す走行経路情報を受信する。表示制御部１８は、通信部８０が受信した走行経路情報を示す画像（図示する画像Ｐ２および画像Ｐ３）を生成する。表示制御部１８は、生成した画像Ｐ１〜画像Ｐ３を、所定の範囲の地図を示す画像（図示する画像Ｐ５）に重畳して配置し、ディスプレイ６０に表示する。これにより、本実施形態の車内演出装置２は、乗員ＰＳ以外の他者が移動した経路をディスプレイ６０に表示し、乗員ＰＳの競争心を向上させ、車両Ｖによる移動の意欲を向上させることができる。
【００６６】
なお、テリトリー面積ルールに勝利することを目的として、乗員ＰＳが車両Ｖを所定の範囲内において長時間移動させる場合、当該範囲内において交通渋滞が生じる可能性がある。この場合、車両Ｖの自動運転機能は、目的地情報が示す目的地に移動させる、又は長時間当該範囲に滞在しないように移動させるように車両Ｖの走行を制御してもよい。
【００６７】
［テリトリー面積ルールによる射撃ゲームの勝敗を示す画像］
また、表示制御部１８は、走行経路に基づくテリトリー面積ルールの射撃ゲームがチーム戦によって行われる場合、当該ゲームの勝敗を示す画像をディスプレイ６０に表示してもよい。図１０は、テリトリー面積ルールによる射撃ゲームの勝敗の一例を示す図である。表示制御部１８は、位置情報および走行経路情報に基づいて、自チームの面積と、他チームの面積とを算出する。また、表示制御部１８は、走行経路に基づくテリトリー面積ルールの射撃ゲームが行われている範囲（図示する、日本全国）において、自チームの面積と、他チームの面積との割合を示す画像（図示する画像Ｐ６）を生成し、ディスプレイ６０に表示する。なお、表示制御部１８は、走行経路に基づくテリトリー面積ルールの射撃ゲームが行われている範囲のうち、所定の範囲（例えば、関東甲信越の範囲）において画像Ｐ６を生成し、表示する構成であってもよい。これにより、本実施形態の車内演出装置２は、乗員ＰＳの競争心を向上させ、車両Ｖによる移動の意欲を向上させることができる。
【００６８】
［射撃ゲームと現実との関連について］
また、車内演出装置２は、得点算出部１７が算出した得点や、テリトリー面積ルールの結果に基づいて、乗員ＰＳにサービスやコンテンツ等を提供する構成であってもよい。例えば、乗員ＰＳが車両Ｖの周囲に存在する店舗の看板に射撃動作を行った場合、車内演出装置２は、当該店舗のサーバ装置に射撃動作が行われたことを示す情報を送信する。店舗のサーバ装置は、乗員ＰＳに対して当該店舗の商品を購入する際に使用可能なクーポンを付与する。また、車両Ｖがカーシェアリングサービスによって利用される車両である場合、車内演出装置２は、得点算出部１７が算出した得点を、当該サービスを提供する事業者のサーバ装置に送信する。事業者のサーバ装置は、高い得点を獲得した乗員ＰＳに対して、次回のカーシェアリングサービス時に使用可能なクーポンを付与する。また、テリトリー面積ルールに勝利した乗員ＰＳまたは勝利チームに所属する乗員ＰＳに対して、各種クーポンを付与する構成であってもよい。
【００６９】
また、車内演出装置２は、各車両Ｖの行動を示す情報（以下、行動情報）に基づいて、ある射撃対象への移動を促すような処理を行ってもよい。この場合、行動情報とは、例えば、各車内演出装置２が取得した位置画像情報、位置情報および走行経路情報等である。
車内演出装置２は、行動情報を記憶するサーバ（以下、行動情報サーバ）から他の車内演出装置２から取得した行動情報を取得する。車内演出装置２は、例えば、取得した行動情報に基づいて、多くの他者が射撃動作を行った射撃対象や、店舗のクーポンが付与される射撃対象等を強調して表示する構成であってもよい。具体的には、車内演出装置２は、ディスプレイ６０のうち、当該射撃対象の位置に重畳するように強調画像を表示する構成であってもよい。また、車内演出装置２は、他者の車両Ｖに搭載されている撮像部が、当該射撃対象を過去に撮像した画像をディスプレイ６０に表示する構成であってもよい。また、車内演出装置２は、当該射撃対象の位置に移動する移動方向を示す画像をディスプレイ６０に表示する構成であってもよい。
【００７０】
ここで、乗員ＰＳは、強調された射撃対象、多くの他者が射撃動作を行った射撃対象および店舗のクーポンが付与される射撃対象の方向に車両Ｖを移動させる場合がある。したがって、車内演出装置２は、行動情報に基づいて、車内演出装置２（車両Ｖ）をある射撃対象への移動を促すことができる。車内演出装置２は、例えば、行動情報が示す他の車内演出装置２（車両Ｖ）が存在する位置に基づいて、混雑状態を検出する。車内演出装置２は、混雑している位置（方向）に移動しないように、当該位置とは異なる位置の射撃対象への移動を促すことにより、混雑を回避するように車両Ｖを移動させることができる。
【００７１】
なお、車内演出装置２が、行動情報に基づいてある射撃対象への移動を促す処理を行う構成に代えて、行動情報サーバが、行動情報に基づいてある射撃対象への移動を促す処理を行う構成であってもよい。この場合、行動情報サーバは、各車内演出装置２から取得した行動情報に基づいて、車内演出装置２（車両Ｖ）の移動を促す画像や、移動を促す情報を当該車内演出装置２に送信する。車内演出装置２は、例えば、行動情報サーバから取得した画像をディスプレイ６０に表示させる。
【００７２】
また、射撃対象には、各車内演出装置２から取得した行情報に基づいて、射撃動作が行われた頻度を示す指標が付されてもよい。車内演出装置２、又は行動情報サーバは、例えば、各車内演出装置２から取得した行動情報に基づいて、射撃動作が行われた指標を算出する。車内演出装置２は、指標に基づいて、応答画像や射撃対象を強調する表示を行う構成であってもよい。
【００７３】
車内演出装置２は、例えば、高い指標が付された射撃対象は、周囲に車内演出装置２（車両Ｖ）が多く存在する、つまり混雑していると判定する。この場合、車内演出装置２は、当該射撃対象を強調しない、又は当該射撃対象を射撃対象とみなさない（フィルタリング）処理を行ってもよい。また、車内演出装置２（又は行動情報サーバ）は、高い指標が付された射撃対象が、店舗のクーポンが付与される射撃対象である場合、当該射撃対象の店舗の系列店のうち、低い指標が付された射撃対象（看板）の店舗等にクーポンを付与する機能を持たせる処理を行ってもよい。また、車内演出装置２は、低い指標が付された射撃対象は、周囲に車内演出装置２（車両Ｖ）が多く存在しない、つまり混雑していないと判定する。この場合、車内演出装置２は、当該射撃対象を強調する処理を行ってもよい。
これらの処理により、車内演出装置２は、行動情報（指標）に基づいて、車内演出装置２（車両Ｖ）をある射撃対象への移動を促すことができる。
【００７４】
［画像以外の出力方法について］
また、上述では、表示制御部１８が、各種画像を表示することにより、射撃ゲームの結果を出力する場合について説明したが、これに限られない、表示制御部１８は、例えば、音によって射撃ゲームの結果を出力してもよい。具体的には、車両Ｖは、スピーカを備え、表示制御部１８は、応答画像を表示しつつ、かつ射撃音を当該スピーカから出力する構成であってもよい。また、表示制御部１８は、画像Ｐ５や画像Ｐ６によって示される射撃ゲームの結果や勝敗を、ディスプレイ６０に表示しつつ、かつ射撃ゲームの結果や勝敗を知らせる音声をスピーカから出力する構成であってもよい。
【００７５】
［ディスプレイ以外の画像の表示方法について］
また、上述では、ディスプレイ６０に各種画像を表示する場合について説明したが、これに限られない。例えば、オープンカーや、フロントウィンドウを有していない車両の場合、車両上の乗員ＰＳがヘッドマウント装置を用いる構成であってもよい。この場合、ヘッドマウント装置は、撮像部４０が撮像する車両の周囲環境画像と、応答画像とを重畳して表示する。また、車両Ｖは、フロントウィンドウの他、サイドウィンドウにディスプレイ６０を備える構成であってもよい。この場合、抽出部１６は、周囲環境画像に対して画像認識処理を行い、周囲環境画像に撮像される各種物体の当該周囲環境画像上における位置を認識する。また、抽出部１６は、サイドウィンドウに周囲環境画像を実物大に提示した場合のサイドウィンドウ上の位置と、抽出した物体（射撃対象）の周囲環境画像上における位置とをマッチングする。抽出部１６は、フロントウィンドウの位置を、射撃対象の仮想的な位置を示す仮想位置情報として、得点算出部１７と、表示制御部１８とに出力する。なお、フロントウィンドウと比較してサイドウィンドウの大きさが小さい場合、サイドウィンドウから行われる射撃動作の対象は、体積や面積が大きい射撃対象、つまり小さい領域（サイドウィンドウ）において射撃動作がしやすい射撃対象であることが好ましい。
【００７６】
［車両の情報に基づく画像の表示方法について］
また、車内演出装置１および車内演出装置２（以下、単に「車内演出装置」と記載する。）は、車両Ｖの状態を検出する構成を有していていもよい。この場合、車内演出装置は、車両状態取得部を備える。車両状態取得部は、車両Ｖの速度、舵角、ピッチ・ロール角等の運動パラメータを取得する。表示制御部１８は、例えば、車両状態取得部が取得した運動パラメータに基づいて、各種画像を表示する。具体的には、表示制御部１８は、車両Ｖの速度に基づいて、ディスプレイ６０に表示する画像のリフレッシュ処理を行う。より具体的には、表示制御部１８は、車両Ｖの速度に基づいて、車両Ｖの移動に伴う周囲環境の変化より十分に速い時間間隔においてディスプレイ６０に表示する画像のリフレッシュ操作を行う。
【００７７】
また、表示制御部１８は、取得した運動パラメータのうち、車両Ｖの舵角およびピッチ・ロール角等に基づいて、車両Ｖの進行方向側に応じた画像をディスプレイ６０に表示する。ここで、車両Ｖは、制御に基づいて、直進以外の方向に旋回（右折や左折）する場合がある。この場合、乗員ＰＳは、車両Ｖの正面ではなく、進行方向、つまり回頭方向に目線を向ける場合がある。表示制御部１８は、運動パラメータに基づいて、車両Ｖの進行方向側に応じた画像をディスプレイ６０に表示することにより、乗員ＰＳの目線に応じた画像を表示することができる。
【００７８】
また、表示制御部１８は、車両Ｖに振動に基づいて、ディスプレイ６０に各種画像を表示する構成であってもよい。表示制御部１８は、例えば、車両Ｖに与えられた振動に応じて、振動に伴って車両Ｖが移動する距離および方向とは逆の距離および方向に各種画像を表示する。これにより、車内演出装置２は、ディスプレイ６０に表示される画像が振動に伴って揺れることを抑制することができる。したがって、車内演出装置２は、乗員ＰＳがディスプレイ６０の画像を視認することによって車酔いになることを抑制することができる。なお、表示制御部１８は、車両Ｖに与えられる振動と、乗員ＰＳに与えられる振動との相対的な移動距離および方向に基づいて、ディスプレイ６０に各種画像を表示する構成であってもよい。
【００７９】
［第３の実施形態］
以下、図を参照して本発明の第３の実施形態について説明する。第３の実施形態では、乗員ＰＳの指示動作によって指示される方向の実空間の三次元点群に基づいて指示対象を特定し、乗員ＰＳの指示動作の履歴を生成する車内演出装置３について説明する。なお、上述した実施形態と同様の構成については、同一の符号を付して説明を省略する。ここで、車内演出装置３とは、「指示計測装置」の一例である。
【００８０】
図１１は、第３の実施形態に係る車内演出装置３の構成の一例を示す機能構成図である。本実施形態の車内演出装置３（通信部８０）は、サービス提供者の端末（以下、サービス提供者端末装置ＴＭ）、及びインタフェース装置８００と、ネットワークＮＷを介して、情報を送受信する。
【００８１】
インタフェース装置８００は、制御部８１０と、記憶部８２０とを備える。記憶部８２０には、対象物情報８２０−１と、サービサー情報８２０−２とが記憶される。対象物情報８２０−１は、三次元点群が示す実空間に存在する対象物を示す情報と、三次元点群を示す情報とが対応付けられた情報である。サービサー情報８２０−２は、対象物を示す情報と、対象物に関連するサービス提供者を示す情報とが対応付けられた情報である。
【００８２】
制御部８１０は、車内演出装置３から受信した情報に基づいて、対象物情報８２０−１やサービサー情報８２０−２を検索し、対象物を示す情報や、サービス提供者を示す情報を車内演出装置３に送信する。
【００８３】
車内演出装置３は、音検出部２０と、動作検出部３０と、撮像部４０と、入力部５０と、ディスプレイ６０と、位置検出部７０と、通信部８０と、視線検出部９０とを備える。また、車内演出装置３は、制御部１０、或いは制御部１０Ａに代えて（、或いは加えて）制御部１０Ｂを備え、記憶部５００に代えて（、或いは加えて）記憶部５００Ａを備える。記憶部５００Ａには、応答画像情報５００−１と、履歴情報５００−２と、サービス提供者情報５００−３とが記憶される。各情報の詳細については、後述する。
【００８４】
制御部１０Ｂは、記憶部５００Ａに記憶されたプログラムを実行し、音声情報取得部１１と、動作情報取得部１２と、画像情報取得部１３と、表示制御部１８と、位置情報取得部１９と、乗員情報取得部１１１と、視線情報取得部１１２と、座標取得部１１３と、対象物情報取得部１１４と、サービス提供者特定部１１５と、履歴情報生成部１１６と、通知部１１７と、属性特定部１１８とをその機能部として実現する。
【００８５】
乗員ＰＳは、入力部５０に乗員を識別可能な情報（以下、乗員ＩＤ）を入力し、乗員情報取得部１１１は、入力部５０に入力された乗員ＩＤを取得する。乗員ＰＳは、例えば、車両Ｖに乗車した際に、入力部５０に乗員ＩＤを入力する。
【００８６】
視線検出部９０は、例えば、車両Ｖの内部を撮像する撮像部（不図示）によって撮像された乗員ＰＳが視認する実空間上の位置（以下、視点位置）を検出する。視線情報取得部１１２は、視線検出部９０によって検出された乗員ＰＳの視点位置を示す情報を取得する。
【００８７】
座標取得部１１３は、撮像部４０が撮像する車両Ｖの周囲環境画像に基づいて、動作情報取得部１２によって取得された乗員ＰＳの指示動作と、視線情報取得部１１２によって取得された乗員ＰＳの視点位置とに基づいて、乗員ＰＳの指示動作による指示方向の実空間の三次元点群を取得する。座標取得部１１３は、例えば、撮像部４０が撮像する車両Ｖの周囲環境画像に示される物体であって、指示方向の実空間に存在する物体の特徴点を検出し、検出された特徴点の集合を指示方向の実空間の三次元点群として取得する。なお、この場合、撮像部４０は、ステレオカメラである。
【００８８】
対象物情報取得部１１４は、座標取得部１１３によって特定された指示方向の実空間の三次元点群を示す情報に基づいて、当該実空間に存在する対象物を示す情報を取得する。対象物情報取得部１１４は、例えば、座標取得部１１３によって特定された指示方向の実空間の三次元点群を示す情報を、ネットワークＮＷを介してインタフェース装置８００に送信する。インタフェース装置８００の制御部８１０は、車内演出装置３から三次元点群を示す情報を受信した場合、当該情報を検索キーとして対象物情報８２０−１を検索し、当該情報が示す三次元点群が対応付けられた対象物を特定する。制御部８１０は、特定した対象物を示す情報を、ネットワークＮＷを介して車内演出装置３に送信する。対象物情報取得部１１４は、インタフェース装置８００から受信した対象物を示す情報を取得する。
【００８９】
サービス提供者特定部１１５は、対象物情報取得部１１４によって取得された対象物に対応付けられたサービス提供者を特定する。サービス提供者特定部１１５は、例えば、対象物情報取得部１１４によって取得された対象物を示す情報を、ネットワークＮＷを介してインタフェース装置８００に送信する。インタフェース装置８００の制御部８１０は、車内演出装置３から対象物を示す情報を取得した場合、当該情報を検索キーとしてサービサー情報８２０−２を検索し、当該情報が示す対象物に対応付けられたサービス提供者を特定する。制御部８１０は、特定した対象物を示す情報を、ネットワークＮＷを介して車内演出装置３に送信する。サービス提供者特定部１１５は、インタフェース装置８００から受信したサービス提供者を示す情報を取得する。
【００９０】
履歴情報生成部１１６は、乗員ＰＳが指示動作によって指示した指示対象の履歴を示す履歴情報５００−２を生成する。
【００９１】
図１２は、履歴情報５００−２の内容の一例を示す図である。図１２に示される通り、履歴情報５００−２は、乗員ＩＤと、乗員ＰＳが指示動作を行った日時（以下、指示日時）と、乗員ＰＳの指示動作によって指示された指示対象と、指示対象に対応するサービス提供者とが乗員ＩＤ毎に互いに対応付けられた情報である。履歴情報生成部１１６は、例えば、動作情報取得部１２によって乗員ＰＳの指示動作が取得された指示日時と、対象物情報取得部１１４によって取得された情報が示す対象物であり、当該指示動作によって指示された対象物と、サービス提供者特定部１１５によって取得された情報が示すサービス提供者であり、指示された対象物に対応するサービス対象者と、当該乗員ＰＳの乗員ＩＤとを対応付け、履歴情報５００−２を生成し、記憶部５００Ａに記憶させる。なお、対象物と、サービス提供者との関係性については、任意に設定することができ、例えば、対象物がサービス提供者の所有物であることは、必須でない。また、事業性のない対象物（例えば、第１の実施例における標識や信号など）を、サービス提供者と関連する対象物として定義してもよい。
【００９２】
通知部１１７は、乗員ＰＳによって指示された対象物に対応付けられたサービス提供者に、指示対象が乗員ＰＳによって指示されたことを通知する。
【００９３】
図１３は、サービス提供者情報５００−３の内容の一例を示す図である。図１３に示される通り、サービス提供者情報５００−３は、サービス提供者を示す情報（図示するサービス提供者名）と、通知先とが互いに対応付けられた情報である。通知部１１７は、サービス提供者特定部１１５によって特定されたサービス提供者を検索キーとしてサービス提供者情報５００−３を検索し、当該サービス提供者が対応付けられた通知先に、乗員ＰＳが指示動作を行ったこと、つまり、乗員ＰＳが、サービス提供者が対応付けられた対象物に対して興味関心があることを通知する。通知先には、例えば、サービス提供者端末装置ＴＭ（例えば、サーバ装置）のアドレスが示される。
【００９４】
通知部１１７は、例えば、乗員ＰＳが指示動作を行う度にサービス提供者に通知してもよく、所定の期間の履歴情報５００−２のうち、対応付けられているサービス提供者毎に抽出し、当該サービス提供者に通知してもよい。また、通知部１１７は、履歴情報５００−２をサービス提供者に通知する他、乗員ＰＳに通知してもよい。これにより、乗員ＰＳは、自身の興味関心を示す情報として履歴情報５００−２を用いることができる。また、乗員ＰＳは、通知された履歴情報５００−２を参照することにより、指示動作を行ったサービス提供者に関する情報を取得することができる。
【００９５】
［第３の実施形態のまとめ］
以上説明したように、本実施形態の車内演出装置３は、車両Ｖの乗員ＰＳの動作を検出する動作検出部３０と、乗員ＰＳの視点位置を検出する視線検出部９０と、動作検出部３０によって検出された乗員ＰＳの指示動作と、視線検出部９０によって検出された乗員ＰＳの視点位置とに基づいて、乗員ＰＳの指示動作による指示方向の実空間の三次元点群を取得する視線情報取得部１１２と、三次元点群が示す実空間に存在する対象物を示す情報を供給するインタフェース装置８００から、座標取得部１１３によって取得された三次元点群に対応付けられた対象物を示す情報を取得する対象物情報取得部１１４と、対象物に対応付けられるサービス提供者を示すサービサー情報８２０−２に基づいて、前記対象物情報取得部によって取得された情報が示す対象物に対応付けられるサービス提供者を特定するサービス提供者特定部１１５と、
サービス提供者特定部１１５によって特定されたサービス提供者と、対象物情報取得部１１４によって取得された情報が示す対象物とを対応付けた８００-２を生成する履歴情報生成部１１６と、を備え、乗員ＰＳが指示動作を行った履歴を取得することにより、乗員ＰＳの興味関心に関する情報を収集することができる。また、本実施形態の車内演出装置３によれば、指示動作が行われた対象物に対応付けられたサービス提供者に対して、指示動作が行われたことを通知することができる。
【００９６】
［インタフェース装置８００に送信する三次元点群について］
なお、上述では、座標取得部１１３によって取得された三次元点群を示す情報を、いずれもインタフェース装置８００に送信する場合について説明したが、これに限られない。座標取得部１１３は、例えば、車両Ｖの周囲環境の属性に基づいて、取得した三次元点群のうち、インタフェース装置８００に送信する三次元点群を選択し、送信する構成であってもよい。
【００９７】
この場合、属性特定部１１８は、撮像部４０が撮像する車両Ｖの周囲環境画像に基づいて、車両Ｖの周囲環境の属性を特定する。この属性は、例えば、高速道路や、店舗密集地域等の、車両Ｖの周囲環境の性質（特徴）である。属性特定部１１８は、例えば、撮像部４０が撮像する車両Ｖの周囲環境画像に高速道路の交通道路標識が撮像されているか、或いは店舗の看板が多数撮像されているか等を解析し、車両Ｖの周囲環境の属性を特定する。ここで、「属性」の一例として、周囲環境の性質（特徴）を挙げたが、これに限られるものではない。「属性」は、識別可能な対象物の属性の一部あるいは全部を、座標や方向等に対し列挙した形式で複数特定するようにしても良い。
【００９８】
なお、属性特定部１１８は、撮像部４０が撮像する車両Ｖの周囲環境画像を、ネットワークＮＷを介してインタフェース装置８００に送信し、インタフェース装置８００が車両Ｖの周囲環境の属性を特定する構成であってもよい。この場合、属性特定部１１８は、ネットワークＮＷを介して撮像部４０が撮像する車両Ｖの周囲環境画像を送信し、インタフェース装置８００から車両Ｖの周囲環境の属性を示す情報を取得することにより、属性を特定する。
【００９９】
また、属性特定部１１８は、例えば、位置情報と、属性とが対応付けられた位置属性情報に基づいて、車両Ｖの周囲環境の属性を特定する構成であってもよい。この場合、位置属性情報は、記憶部５００Ａに記憶されていてもよく、記憶部８２０に記憶されていてもよい。位置属性情報が記憶部８２０に記憶されている場合、属性特定部１１８は、ネットワークＮＷを介して車両Ｖの現在位置を示す情報を送信し、インタフェース装置８００から車両Ｖの周囲環境を示す情報を取得することにより、属性を特定する。
【０１００】
座標取得部１１３は、属性特定部１１８によって特定された属性に基づいて、三次元点群を示す情報をインタフェース装置８００に送信する。ここで、車両Ｖが「高速道路」を高速で移動する場合、指示動作中に取得される三次元点群のデータ量が増える可能性がある。このため、座標取得部１１３は、例えば、特定された属性が「高速道路」である場合、指示動作によって指示された範囲であり、三次元点群を取得する範囲を通常より狭くし、インタフェース装置８００に送信するデータ量を抑えることができる。
【０１０１】
また、車両Ｖが「店舗密集地域」を移動する場合、指示動作によって指示される対象物（つまり、看板）が複数存在する場合がある。このため、座標取得部１１３は、例えば、特定された属性が「店舗密集地域」である場合、指示動作によって指示された範囲であり、三次元点群を取得する範囲を通常より広くし、インタフェース装置８００から対象物を示す情報を多く取得することができる。これにより、車内演出装置３は、情報が充実した履歴情報５００−２を生成することができる。すなわち、発明の一側面として指示計測装置の計測した、運転とは無関係な乗員の動作を含む指示動作をもとに、第１の実施例において説明した如く、乗員に対し多様な表示・演出を行うことができる一方、指示動作およびその履歴を適切に記録、保持することで、情報の再利用および別用途での活用を図ることができる。
【０１０２】
以上、本発明の実施形態を、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更を加えることができる。上述した各実施形態に記載の構成を組み合わせてもよい。
【図１】
2020089744.tif 000003
【図２】
2020089744.tif 000004
【図３】
2020089744.tif 000005
【図４】
2020089744.tif 000006
【図５】
2020089744.tif 000007
【図６】
2020089744.tif 000008
【図７】
2020089744.tif 000009
【図８】
2020089744.tif 000010
【図９】
2020089744.tif 000011
【図１０】
2020089744.tif 000012
【図１１】
2020089744.tif 000013
【図１２】
2020089744.tif 000014
【図１３】
2020089744.tif 000015