(57)【要約】      （修正有）【課題】キャラクタとユーザとの間のコミュニケーションを向上させることができる表示システムを提供する。【解決手段】表示システム１０において、オブジェクトを表示する表示装置１１と、ユーザの動作を検出するセンサ（近接検出センサ１２、動作検出センサ１３）と、ユーザの動作に対応してオブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算装置と、を備える。演算装置は、ユーザの動作に対応する準備が完了した場合に、表示装置へ動作指示表示を表示する。【選択図】図４
2020198565.tif 000002
【特許請求の範囲】
【請求項１】
表示システムにおいて、
前記表示システムは、オブジェクトを表示する表示装置と、ユーザの動作を検出するセンサと、前記ユーザの動作に対応して前記オブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算装置と、を備え、
前記演算装置は、前記ユーザの動作に対応する準備が完了した場合に、前記表示装置へ動作指示表示を表示することを特徴とする表示システム。
【請求項２】
前記センサは、複数の異なるセンサを備えることを特徴とする請求項１に記載の表示システム。
【請求項３】
前記複数の異なるセンサは、それぞれ異なる動作を検出し、当該動作に対応した前記プログラム処理または前記プログラム処理に付随する表示を実行することを特徴とする請求項２に記載の表示システム。
【請求項４】
前記複数の異なるセンサのうち一のセンサは、画像センサであり、当該画像センサは、ユーザの動作を検出する請求項２または３のいずれかに記載の表示システム。
【請求項５】
前記複数の異なるセンサのうち一のセンサは、測域センサであり、当該測域センサは、ユーザの位置を検出する請求項２乃至４に記載の表示システム。
【請求項６】
前記オブジェクトは、キャラクタであり、
前記演算装置は、前記ユーザの動作に対応した動作を前記キャラクタに実行させることを特徴とする請求項１乃至６に記載の表示システム。
【請求項７】
前記オブジェクトは、表示装置上に表示されたボタンであり、
前記演算装置は、前記キャラクタに所定の動作を実行させることを特徴とする請求項１乃至６に記載の表示システム。
【請求項８】
表示システムにおいて、
前記表示システムは、オブジェクトを表示する表示装置と、ユーザの動作を検出するセンサと、前記ユーザの動作に対応して前記オブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算装置と、を備え、
前記センサは、複数の異なるセンサを備えることを特徴とする表示システム。
【請求項９】
オブジェクトの表示方法において、
オブジェクトを表示するステップと、ユーザの動作を検出するステップと、前記ユーザの動作に対応して前記オブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行するステップと、を含み、
前記ユーザの動作に対応する準備が完了した場合に、動作指示表示を表示することをさらに含む表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示システム、特に、オブジェクトを表示する表示装置と、ユーザの動作を検出するセンサと、前記ユーザの動作に対応して前記オブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算装置を備え、前記演算装置は、前記ユーザの動作に対応する準備が完了した場合に、前記表示装置へ動作指示表示を表示する表示システムに関する。
【背景技術】
【０００２】
例えば、広告等の情報を提示するデジタルサイネージや、子供向けのアトラクションなどにおいて、キャラクタをディスプレイなどに表示させることが一般的に行われている。
【０００３】
特許文献１には、キャラクタデータ及び案内情報を含む表示データを生成し、その表示データを表示パネルに表示する表示制御装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１８−２０５５３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１に開示の技術では、操作ボタンにより案内情報を表示させることが記載されているが、操作として単調なものであった。
【０００６】
また、キャラクタデータは単に提示されているものにすぎず、ユーザの動作とキャラクタとの関連については考慮されていない、または、単調なものであった。
【０００７】
本発明は、上記事情に鑑みてなされたものであり、ユーザの動作とオブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示との間に関連性を持たせて、操作の単調さを改善するとともに、ユーザがストレスなく円滑に演算装置にてプログラム処理またはプログラム処理に付随する表示を実行することができる表示システムを提供することを課題とするものである。
【課題を解決するための手段】
【０００８】
上記課題を達成するための、本発明に係る表示システムにおいて、前記表示システムは、オブジェクトを表示する表示装置と、ユーザの動作を検出するセンサと、前記ユーザの動作に対応して前記オブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算装置と、を備え、前記演算装置は、前記ユーザの動作に対応する準備が完了した場合に、前記表示装置へ動作指示表示を表示することを特徴としている。
【発明の効果】
【０００９】
この発明によれば、特に、ユーザの動作を検出可能な状態であることが表示装置に表示されるため、ユーザがストレスなく円滑に演算装置にてプログラム処理またはプログラム処理に付随する表示を実行することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施の形態に係る表示システムの構成の概略を説明する図である。
【図２】本発明の実施の形態に係る表示システムの概略を説明するブロック図である。
【図３】本発明の実施の形態に係る表示システムにおける動作検出センサによるユーザ動作の検出の概略を説明する図である。
【図４】本発明の実施の形態に係る表示システムにおける接近検出センサによるユーザ動作の検出の概略を説明する図である。
【図５】本発明の実施の形態による表示システムに係るフローチャート図である。
【発明を実施するための形態】
【００１１】
次に、図１〜図５に基づいて、本発明の実施の形態に係る表示システムについて説明する。
【００１２】
図１は、本実施の形態に係る表示システムの構成の概略を説明する図である。図示のように、表示システム１０は、少なくとも一つのオブジェクト１ａまたはオブジェクト１ｂを表示する表示装置１１、表示装置１１に対するユーザ２の接近動作を検出する接近検出センサ１２、ユーザ２の動作（例えば、ジェスチャなど）を検出する動作検出センサ１３を備える。また、後述する図示されていない演算処理部２１を備える。なお、オブジェクト１ａは、人、動物、ロボットなどのキャラクタであってもよいし、オブジェクト１ｂは、撮影ボタン、スクロールバーなどの表示装置操作オブジェクトであってもよい。
【００１３】
表示装置１１は、本実施の形態では、例えば室内または室外に配置されるモニタ、カメラにより映像が投影されるスクリーン、ＨＭＤなどの着用型ディスプレイ、スマートフォンなどの移動体通信端末の表示部、ＡＲを提供する装置などであり、オブジェクト１ａ、１ｂが表示される。なお、表示装置１１には、オブジェクトに限らず、広告情報等の情報などが表示されてもよい。
【００１４】
さらに、表示装置１１は、本実施の形態では、表示システム１０（特に、後述の演算処理部２１）がユーザ２の動作に対応する準備が完了した場合に、動作指示表示１４が表示される。なお、動作指示表示１４は、図示の形に限らず、種々の形状やイラストなどが表示されてもよいし、静止画に限らず、時間の経過に合わせて変化するものなどでもよい。
【００１５】
接近検出センサ１２は、本実施の形態では、表示装置１１の前面上方に配置され、表示装置１１に沿って放射状にレーザを照射する汎用の測域センサであり、動作検出センサ１３は、本実施の形態では、ユーザ２を撮影して画像からユーザ動作を認識する汎用の画像センサである。なお、各センサの具体的な種類はこれに限らず、同様の動作が検出できるものであれば、他の種類のセンサであってもよい。
【００１６】
図２は、本実施の形態に係る表示システム１０の概略を説明するブロック図である。図示のように、表示システム１０は、演算処理部２１、前述の表示装置１１、接近検出センサ１２、及び動作検出センサ１３を備える。
【００１７】
演算処理部２１は、本実施の形態では、演算部２１ａ、出力部２１ｂ、ストレージ２１ｃを備え、表示装置１１、接近検出センサ１２、及び動作検出センサ１３にそれぞれ接続される。
【００１８】
演算部２１ａは、本実施の形態では、ストレージ２１ｃに格納されるオブジェクトに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算処理を行うものであり、例えば動作検出センサ１３が検出したユーザ２の動作に基づいて、オブジェクト１ｂ、１ｂに関連するプログラム処理または当該プログラム処理に付随する表示を設定する。
【００１９】
出力部２１ｂは、本実施の形態では、演算部２１ａで演算処理されたオブジェクトデータを表示装置１１に出力するものである。
【００２０】
ストレージ部２１ｃは、本実施の形態では、オブジェクトに関するデータを格納する。オブジェクトに関するデータは、例えばキャラクタの３Ｄモデルデータ、ボタンの画像データ、動作指示表示データ、及びキャラクタの所定の動作に関するデータなどを含んでもよい。
【００２１】
なお、本実施の形態では、例えば画像処理部２１はＣＰＵ等の演算処理装置として表示システム１０に組み込まれているものであるが、これに限らず、画像処理部２１は、例えばネットワーク上に存在してもよい。
【００２２】
図３は、本実施の形態に係る表示システムにおける動作検出センサによるユーザ動作の検出の概略を説明する図である。図示のように、動作検出センサ１３は、本実施の形態では、表示装置１１前方の撮影範囲３１の画像データを取得し、ユーザ２の動作を検出して、これに基づいて、オブジェクト１ａ、１ｂに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算処理を演算処理部２１にて行う。
【００２３】
図４は、本実施の形態に係る表示システムにおける近接検出センサによるユーザ動作の検出の概略を説明する図である。図示のように、近接検出センサ１２は、本実施の形態では、当該近接検出センサ１２から表示装置１１に沿って放射状に照射されるセンサ範囲４１内において定義されるｘｙ平面とした座標でユーザ２の近接位置を検出して、これに基づいて、オブジェクト１ａ、１ｂに関連するプログラム処理または当該プログラム処理に付随する表示を実行する演算処理部２１にて演算処理を行う。
【００２４】
図５は、本実施の形態に係る表示システム１０の動作の概略を説明するフローチャート図である。
【００２５】
まず、表示システム１０はスタンバイ状態で開始される。スタンバイ状態では、オブジェクト１ａ、１ｂがスタンバイ動作（例えば、キャラクタが動作をせずに立ち止まっている、ボタンを表示するなど）を実行するように演算処理を行う（Ｓ１０１）。
【００２６】
次に、演算処理部２１は、少なくとも動作検出センサ１２または近接検出センサ１３の一方によってユーザ２が検出されたか否かを判定する（Ｓ１０２）。検出されないと判定した場合には、通常スタンバイ動作の実行を継続し（Ｓ１０１）、検出されたと判定した場合には、演算処理部２１においてオブジェクト１ａ、１ｂに関連するプログラム処理または当該プログラム処理に付随する表示する演算処理のための準備動作を行う（Ｓ１０３）。
【００２７】
また、ユーザ２が検出されないと判定した場合において、定期的（例えば、所定時間経過など）にユーザに何らかの感情を想起するようなアプローチ動作（例えば、キャラクタが深く寝て椅子からずり落ちそうになるなどの驚きの感情や、ボタンが点滅するなどの好奇心の感情などを想起させる動作）を実行するように演算処理し（Ｓ１０４）、その後スタンバイ動作を実行する（Ｓ１０１）。これにより、ユーザに本表示システムへのアクセスを一層促すことができる。
【００２８】
次に、演算処理部２１は、準備動作が完了されたか否かを判定する（Ｓ１０５）。完了していないと判定した場合には、準備動作の実行を継続し、完了したと判定した場合には、表示装置１１に動作指示表示１４を表示する（Ｓ１０６）。該動作指示表示１４を表示することにより、ユーザが動作を行うタイミングが明確になり、ユーザがストレスなく円滑に演算装置にてプログラム処理またはプログラム処理に付随する表示を実行することができる。
【００２９】
次に、演算処理部２１は、少なくとも動作検出センサ１２または近接検出センサ１３の一方によってユーザ２の動作（例えば、手を振る動作や振り向く動作、撮影ボタンへの近接動作など）が検出されたか否かを判定する（Ｓ１０７）。検出されないと判定した場合には、ユーザ２の動作の検出確認を再度実行し、検出されたと判定した場合には、オブジェクト１ａ、１ｂに関連するプログラム処理または当該プログラム処理に付随する表示する演算処理を実行する（例えば、キャラクタにユーザ動作に対応した動作や、撮影のためのポーズなどの所定動作を実行させるなど）（Ｓ１０８）。
【００３０】
そして、当該演算処理を実行中に、さらにユーザ２の動作が検出された否かを判定する（Ｓ１０９）。検出された場合には、現在処理中の演算処理の実行を中断し、次の演算処理へとなめらかに繋がるよう、所定の中間動作を挟んだ上で次の演算処理を実行する（Ｓ１１０）。このように、動作指示表示が提示されていない場合においても、ユーザ動作を受け付けることで、ユーザがストレスなく円滑に演算装置にてプログラム処理またはプログラム処理に付随する表示を実行することができる。
【００３１】
また、演算処理を実行中に、さらなるユーザ２の動作が検出されなかった場合は、該演算処理を実行後にユーザが検出されたか否かを再度判定し（Ｓ１０２）、検出されないと判定した場合には、スタンバイ状態とする（Ｓ１０１）。
【００３２】
なお、本発明は上記実施の形態に限定されることはなく、発明の趣旨を逸脱しない範囲で種々変更可能である。例えば、図５のフローチャート図のいずれかのステップにおいて、オブジェクト１ａ、１ｂや動作指示表示１４だけでなく広告情報等の情報が表示されてもよい。
【符号の説明】
【００３３】
１ａ、１ｂ  オブジェクト    
２      ユーザ
１０    表示システム
１１    表示装置
１２    近接検出センサ
１３    動作検出センサ
１４    動作指示表示
２１    演算処理部
２１ａ    演算部
２１ｂ    出力部
２１ｃ    ストレージ
３１    撮影範囲
４１    センサ範囲
【図１】
2020198565.tif 000003
【図２】
2020198565.tif 000004
【図３】
2020198565.tif 000005
【図４】
2020198565.tif 000006
【図５】
2020198565.tif 000007