(57)【要約】【課題】操作者がボタンを確実に押すことができるということが、ボタンを押した後のアクションよりもはるかに前から認知することができ、不安を解消することができる情報表示装置を提供する。【解決手段】座標入力装置１１０付き表示装置１０９に対して操作者の操作を受け付けるボタンが配置された操作画面Ｄに接近する操作者の手（操作体）の３次元空間位置に基づき、操作体が操作画面Ｄに上のどの位置に向かい、かつ、操作体が操作画面Ｄからどのくらい離れているのかを報知する。これにより、操作者が操作画面Ｄ上のボタンを確実に押すことができるということが、ボタンを押した後のアクションよりもはるかに前から認知することができ、不安を解消することができる。【選択図】図６
2010244422.tif 000002
【特許請求の範囲】
【請求項１】
座標入力装置付き表示装置に対して操作者の操作を受け付けるボタンが配置された操作画面を表示するボタン表示手段と、
前記ボタン表示手段により前記表示装置に表示された前記操作画面に接近する操作体の３次元空間位置を検出する３次元空間位置検出手段と、
前記３次元空間位置検出手段で検出された前記３次元空間位置に基づき、前記操作体が前記操作画面上のどの位置に向かい、かつ、前記操作体が前記操作画面からどのくらい離れているのかを報知する報知手段と、
を備えることを特徴とする情報表示装置。
【請求項２】
前記報知手段は、前記操作体が画面に投影されたイメージであって前記操作体が前記操作画面上のどの位置に向かい、かつ、前記操作体が前記操作画面からどのくらい離れているのかを示す影画像を生成し、生成した前記影画像を前記操作画面上に表示する、
ことを特徴とする請求項１記載の情報表示装置。
【請求項３】
前記報知手段が生成する前記影画像は、円形状であって、前記３次元空間位置のＺ座標位置が円の大きさとなって反映され、前記３次元空間位置のＸ−Ｙ座標位置が円の中心である前記操作体の進行方向として反映される、
ことを特徴とする請求項２記載の情報表示装置。
【請求項４】
前記報知手段は、前記操作体が画面に投影されたイメージであって前記３次元空間位置のＸ−Ｙ座標位置が前記操作体の進行方向を示す円形状の中心として反映された影画像を前記操作画面上に表示するとともに、前記３次元空間位置のＺ座標位置が音の周期の間隔として反映された音を鳴らす、
ことを特徴とする請求項１記載の情報表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報表示装置に関する。
【背景技術】
【０００２】
例えばファミリーレストランや居酒屋等の多くの飲食店では、飲食メニューの注文から会計までを一元的に管理することが可能な注文管理システムが構築されている（特許文献１参照）。特許文献１に開示されているシステムは、代金の会計場所であるレジに設置された電子式キャッシュレジスタまたはＰＯＳ（Point  Of  Sales）端末等の会計装置と、会計装置から送信された各種情報の管理等を実行するステーションと、会計装置に接続されていて注文伝票を印字発行する伝票発行用プリンタと、調理指示票を印刷出力するキッチンプリンタと、から構成されている。ステーションと、伝票発行機、キッチンプリンタ及び会計装置とは、ＬＡＮ（Local  Area  Network）等の通信回線を介して接続されている。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
ところで、特許文献１に開示されている会計装置によれば、注文入力画面中のメニュー品目欄の各メニューボタンに対するタッチによって、注文の入力を行うようにしている。
【０００４】
一般に、ポインティングデバイスであるマウスはマウスカーソルを持ち、今どこにポインタがあるのか容易に判断できるようになっている。また、キーボードにもカーソルがあり、どこに入力するのかを容易に判断することができるようになっている。
【０００５】
ところが、特許文献１に開示されている会計装置のようなタッチ入力式の端末には、カーソル表示がない。そのため、一画面上に多数のボタンが存在するＧＵＩ（Graphic  User  Interface）を採用する画面上のボタンをタッチして選択する際、タッチ後のアクションが起こるまでボタンを押すことができたかどうかの判断がつかない、という問題がある。すなわち、ボタンを押せたかどうかについての結果が、実際にボタンに対するタッチ入力後のアクションを待つまで判断できないとともに、突発的であるため、画面上のボタンを押そうとする際に適切な場所を押すことができるかどうかという不安感を操作者に抱かせてしまう、という問題がある。
【０００６】
本発明は、上記に鑑みてなされたものであって、操作者がボタンを確実に押すことができるということが、ボタンを押した後のアクションよりもはるかに前から認知することができ、不安を解消することができる情報表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明の情報表示装置は、座標入力装置付き表示装置に対して操作者の操作を受け付けるボタンが配置された操作画面を表示するボタン表示手段と、前記ボタン表示手段により前記表示装置に表示された前記操作画面に接近する操作体の３次元空間位置を検出する３次元空間位置検出手段と、前記３次元空間位置検出手段で検出された前記３次元空間位置に基づき、前記操作体が前記操作画面上のどの位置に向かい、かつ、前記操作体が前記操作画面からどのくらい離れているのかを報知する報知手段と、を備えることを特徴とする。
【発明の効果】
【０００８】
本発明によれば、操作者がボタンを確実に押すことができるということが、ボタンを押した後のアクションよりもはるかに前から認知することができ、不安を解消することができる。
【図面の簡単な説明】
【０００９】
【図１】図１は、本発明の実施の一形態にかかる情報表示装置を正面側から見た外観形態を示す斜視図である。
【図２】図２は、情報表示装置の電気的接続を示すブロック図である。
【図３】図３は、コンピュータプログラムによって実現されるモジュール構成を示す模式図である。
【図４】図４は、注文処理の流れを概略的に示すフローチャートである。
【図５】図５は、注文メニュー入力画面の一例を示す正面図である。
【図６】図６は、注文メニュー入力画面に影画像が表示された状態を示す斜視図である。
【発明を実施するための形態】
【００１０】
以下に添付図面を参照して、この発明にかかる情報表示装置の最良な実施の形態を詳細に説明する。
【００１１】
本発明の実施の一形態を図１ないし図６に基づいて説明する。本実施の形態は、来店したお客様を接客フロアに配備されているテーブルへ案内し、注文を受け付け、給仕（配膳）するという接客の全ての流れの中で、そのような接客業務を支援する接客支援システムの情報端末を情報表示装置として適用した例である。
【００１２】
図１は、本発明の実施の一形態にかかる情報表示装置１００を正面側から見た外観形態を示す斜視図である。図１に示すように、情報表示装置１００は、本体部１０８の上面に表示装置としての液晶ディスプレイ１０９が載置されて構成されている。液晶ディスプレイ１０９には、その表示面の上に座標入力装置としてのタッチパネル１１０が積層配置されている。また、情報表示装置１００は、客面表示装置１０７も備えている。情報表示装置１００の近傍にはプリンタ１０６が隣接設置されており、例えばＵＳＢ等のインターフェースを介して情報表示装置１００に接続されている。
【００１３】
このような情報表示装置１００は、接客フロア及びチェックアウトカウンタに設置されている。情報表示装置１００は、接客フロアに設置されているものであってもチェックアウトカウンタに設置されているものであっても、その基本的な構造及び機能は変わらない。相違するのは、その使用態様である。つまり、接客フロアに設置されている情報表示装置１００は、お客様の案内業務、注文の受け付け業務及び給仕（配膳）業務という各業務を支援するのに対して、チェックアウトカウンタに設置されている情報表示装置１００は、それらの業務に加えて会計業務をも支援する。つまり、チェックアウトカウンタに設置されている情報表示装置１００は、いわゆるＰＯＳ端末としても機能する。
【００１４】
加えて、本実施の形態の情報表示装置１００には、３次元空間位置検出手段として機能する３次元空間位置検出装置１２０（図２参照）が設けられている。３次元空間位置検出装置１２０は、液晶ディスプレイ１０９の周囲に配された複数台のテレビカメラ１２１を含む。３次元空間位置検出装置１２０は、後述する利用者の動作の立体的な像の検出に用いられる。本実施の形態においては、２台のテレビカメラ１２１が液晶ディスプレイ１０９の両側面側に水平に配置されている。
【００１５】
３次元空間位置検出装置１２０は、例えば特開平１１−１７４９４８号公報に開示されている手法により利用者の動作の立体的な像を認識する。概略的には、操作者の動作を複数台のテレビカメラ１２１で異なる角度から撮影する。各テレビカメラ１２１から出力される画像データは、所定のサンプリング周期で格納される。その後、格納された画像データから操作者の手（操作体）などの肌色の色データである特徴画像を抽出し、各テレビカメラ１２１からの画像データから抽出された特徴画像が有する視差を利用して手に対応するブロブ（１つの塊として把握される画像）の３次元空間位置を計算する。なお、操作体は操作者の手ではなく、操作者が手に持っている指示棒などの場合には、指示棒の色データである特徴画像を抽出する。
【００１６】
図２は、情報表示装置１００の電気的接続を示すブロック図である。図２に示すように、情報表示装置１００には、マイクロコンピュータ２０１が備えられており、このマイクロコンピュータ２０１が各部を駆動制御する。マイクロコンピュータ２０１は、各部を集中的に制御するＣＰＵ２０２に、バスライン２０３を介して制御プログラム等の固定的情報を予め記憶するＲＯＭ２０４と、各種情報を書き換え自在に記憶してワークエリア等として機能するＲＡＭ２０５とが接続されて構成されている。したがって、マイクロコンピュータ２０１は、情報処理を実行する情報処理部を構成する。
【００１７】
マイクロコンピュータ２０１には、バスライン２０３を介して、タッチパネルコントローラ２０６、表示コントローラ２０７、ＨＤＤ２０８、インターフェース２０９及び通信インターフェース２１０が接続されている。また、マイクロコンピュータ２０１には、３次元空間位置検出装置１２０が接続されている。タッチパネルコントローラ２０６は、タッチパネル１１０からの入力信号をマイクロコンピュータ２０１に取り込む。表示コントローラ２０７は、画像データに基づいて液晶ディスプレイ１０９を駆動制御し、画像データに応じた画像を液晶ディスプレイ１０９に表示させる。インターフェース２０９は、プリンタ１０６や客面表示装置１０７をマイクロコンピュータ２０１に接続させるためのインターフェースであり、前述したように、ＵＳＢ等によって構成されている。通信インターフェース２１０は、マイクロコンピュータ２０１をＬＡＮ経由で他の機器とデータ通信可能にするためのインターフェースである。
【００１８】
ＨＤＤ２０８には、ＯＳ、コンピュータプログラム、各種ファイル等がインストールされている。これらのＯＳ、コンピュータプログラム、各種ファイル等は、情報表示装置１００の起動時にその全部又は一部がＲＡＭ２０５にコピーされてＣＰＵ２０２にアクセスされる。ＣＰＵ２０２は、こうしてコピーされたＯＳ及びコンピュータプログラムに従った処理を実行する。
【００１９】
次いで、情報表示装置１００のＨＤＤ２０８にインストールされたＯＳおよびコンピュータプログラムによりマイクロコンピュータ２０１が実行する処理の内、本実施の形態の情報表示装置１００が有している特徴的な処理について説明する。
【００２０】
本実施の形態にかかる情報表示装置１００で実行されるコンピュータプログラムは、図３に示すような各部（ボタン表示手段１０、報知手段２０）を含むモジュール構成となっており、実際のハードウェアとしてはマイクロコンピュータ２０１のＣＰＵ２０２がＨＤＤ２０８からコンピュータプログラムを読み出して実行することにより上記各部がＲＡＭ２０５上にロードされ、ボタン表示手段１０、報知手段２０がＲＡＭ２０５上に生成されるようになっている。
【００２１】
次に、ＨＤＤ１８に格納された制御プログラムがＰＯＳ制御部１７のＣＰＵに実行させる機能について説明する。なお、従来から行なわれている処理と同様の処理についてはその説明を省略する。
【００２２】
図４は、注文処理の流れを概略的に示すフローチャートである。図４に示すように、情報表示装置１００のマイクロコンピュータ２０１のＣＰＵ２０２は、ＨＤＤ２０８にインストールされたＯＳおよびコンピュータプログラムにより、図５に示すような操作画面である注文メニュー入力画面Ｄを液晶ディスプレイ１０９に表示する（ステップＳ１）。注文メニュー入力画面Ｄには、部門タグＤ１１、メニュー品目欄Ｄ１２、注文リストＤ１３、業務指定キーＤ１４、ファンクションキーＤ１５などが表示されている。
【００２３】
このような注文メニュー入力画面Ｄにおいて、メニュー品目を入力するに際しては、所望の部門タグＤ１１のタッチ指定によって、「ドリンク」、「デザート」、「和膳」、「和洋食」、「丼もの」、「鍋もの」、「うどん＆そば」、「一品料理」、「健菜とサラダ」のうちから所望の部門の選択が可能である。例えば、部門タグＤ１１のうち、「一品料理」の部門ボタンＤ１１ａをタッチ指定した場合には、図５に例示するような「一品料理」についての注文メニュー入力画面Ｄが表示される。
【００２４】
上述のようにして表示された注文メニュー入力画面Ｄを見て、何れかのボタンに対して操作者がタッチ指定しようと手（操作体）を動かした場合、３次元空間位置検出装置１２０はテレビカメラ１２１で撮影した手の動きを察知して手に対応するブロブの３次元空間位置を計算する。３次元空間位置検出装置１２０は、計算した３次元空間位置をＣＰＵ２０２に送信する。なお、操作体は操作者の手に限定されるものではなく、操作者が手に持っている指示棒などでも良い。
【００２５】
ＣＰＵ２０２は、３次元空間位置検出装置１２０から操作者の手の３次元空間位置を取得すると（ステップＳ２）、当該３次元空間位置に基づいて操作者の手が画面に投影されたイメージである影画像を生成し（ステップＳ３）、生成した影画像を注文メニュー入力画面Ｄ上に表示する（ステップＳ４）。図６に示すように、影画像Ｓは円形状である。より詳細には、３次元空間位置のＺ座標位置（注文メニュー入力画面Ｄからの距離）が円の大きさとなって反映され、Ｘ−Ｙ座標位置（操作者の手の進行方向、すなわち操作者がタッチ指定しようとしているボタンの位置）が円の中心となって反映される。影は、光あるところに常に存在し、物体の存在の象徴である。注文メニュー入力画面Ｄ上に影画像Ｓが表示されることで、自分が押そうしている場所が存在するということを操作者に明示することができる。
【００２６】
上述したステップＳ２およびステップＳ３の処理は継続的に実行され、影画像Ｓは手の位置に応じて画面の場所と大きさが変化することになる。つまり、図６に示すように、操作者の手が注文メニュー入力画面Ｄ上の所望のボタンから遠い場合には影画像Ｓは大きく、操作者の手が注文メニュー入力画面Ｄ上の所望のボタンに近づくほど影画像Ｓは小さくなる。これにより、注文メニュー入力画面Ｄ上に操作者自身が押そうとしている目標（ボタン）に対するカーソル的な影画像Ｓが目標（ボタン）と操作者との位置関係に応じて表示されるので、操作者は注文メニュー入力画面Ｄ上のボタンを確実に押すことができるということが、ボタンを押した後のアクションよりもはるかに前から認知することができ、心理的にもタッチ式ＰＯＳ端末の欠点である押せるかどうかという不安が解消され、ストレスの低減にもつながる。また、これにより、入力精度の向上と、入力速度の短縮が可能になると予測される。さらに、ステップＳ２およびステップＳ３の処理は継続的に実行されることにより、目標を継続的に判断することができるので、逐一目標に対して手の位置の修正が可能になる。また、目標と手の位置の認識が容易になることで、タッチするという動作が速くなる。
【００２７】
その後、ＣＰＵ２０２は、注文メニュー入力画面Ｄの何れか一つのボタンがタッチされたことを示す接触情報をタッチパネル１１０から取得すると（ステップＳ５）、タッチされたボタンに応じた適切なアクション（メニュー表示など）を実行する（ステップＳ６）。
【００２８】
このように本実施の形態によれば、タッチパネル１１０付き液晶ディスプレイ１０９に対して操作者の操作を受け付けるボタンが配置された注文メニュー入力画面Ｄに接近する操作者の手（操作体）の３次元空間位置に基づき、操作体が注文メニュー入力画面Ｄに上のどの位置に向かい、かつ、操作体が注文メニュー入力画面Ｄからどのくらい離れているのかを報知することにより、操作者がボタンを確実に押すことができるということが、ボタンを押した後のアクションよりもはるかに前から認知することができ、不安を解消することができる。
【００２９】
なお、本実施の形態においては、３次元空間位置検出装置１２０はテレビカメラ１２１から出力される画像データから操作者の手の３次元空間位置を計算するようにしたが、これに限るものではなく、画面側に設けられた複数の光線センサが受信する光の強弱から、手の位置を把握するようにしても良いし、ＲＦＩＤタグを使用して操作者の手の３次元空間位置を計算するようにしても良い。
【００３０】
また、本実施の形態においては、円形状であって、３次元空間位置のＺ座標位置が円の大きさとなって反映され、３次元空間位置のＸ−Ｙ座標位置が円の中心である操作体の進行方向として反映される影画像Ｓを注文メニュー入力画面Ｄ上に表示するようにしたが、これに限るものではない。例えば、操作体が画面に投影されたイメージであって３次元空間位置のＸ−Ｙ座標位置が操作体の進行方向を示す円形状の中心として反映された影画像Ｓを注文メニュー入力画面Ｄ上に表示するとともに、３次元空間位置のＺ座標位置が音の周期の間隔として反映された音をスピーカ（図示せず）を介して鳴らすようにしても良い。この場合、例えば操作者の手が注文メニュー入力画面Ｄ上の所望のボタンから遠い場合には「音の周期」は長く、操作者の手が注文メニュー入力画面Ｄ上の所望のボタンに近づくほど「音の周期」は短くなる。
【符号の説明】
【００３１】
１０      ボタン表示手段
２０      報知手段
１００    情報表示装置
１０９    表示装置
１１０    座標入力装置
１２０    ３次元空間位置検出手段
Ｄ        操作画面
Ｓ        影画像
【先行技術文献】
【特許文献】
【００３２】
【特許文献１】特開２００８−２９９８２１号公報
【図１】
2010244422.tif 000003
【図２】
2010244422.tif 000004
【図３】
2010244422.tif 000005
【図４】
2010244422.tif 000006
【図５】
2010244422.tif 000007
【図６】
2010244422.tif 000008