(57)【要約】【課題】ユーザーに応じた迷いの検出を行う。【解決手段】操作パネル１０はタッチパネルを備え、複数の操作キーを表示するとともに操作キーに対する操作を受け付ける。視線検出部１１は、タッチパネルに対するユーザーの視線を検出する。計時部１２は、視線検出部１１により視線が検出されてから操作キーが操作されるまでのユーザーの迷い時間を計測する。迷い判定部１４１は、計時部１２で計測中の迷い時間が特定の正方向のばらつき許容範囲を超えた場合に、ユーザーが操作に迷っていると判定する。【選択図】図１
2015184698.tif 000002
【特許請求の範囲】
【請求項１】
複数の操作キーを表示し、前記操作キーに対する操作を受け付けるタッチパネルと、
該タッチパネルに対する視線を検出する視線検出部と、
該視線検出部が検出してから前記操作キーが操作されるまでの迷い時間をユーザー毎に計測する計時部と、
該計時部で計測中の迷い時間が正方向のばらつき許容範囲を超えた場合に、前記ユーザーが操作に迷っていると判定する迷い判定部とを備えた
ことを特徴とする電子機器。
【請求項２】
前記計時部は、
前記タッチパネルの画面に対する視線が検出されてから前記操作キーが操作されるまでの第１の迷い時間を計測する第１の計時部と、
前記操作キーに対する視線が検出されてから前記操作キーが操作されるまでの第２の迷い時間を計測する第２の計時部とを有し、
前記迷い判定部は、前記計測中の迷い時間が前記第１の迷い時間である場合には、正方向の第１のばらつき許容範囲を超えた場合に、前記ユーザーが前記画面の操作に迷っていると判定し、前記計測中の迷い時間が前記第２の迷い時間である場合には、正方向の第２のばらつき許容範囲を超えた場合に、前記ユーザーが前記操作キーの操作に迷っていると判定する
ことを特徴とする請求項１に記載の電子機器。
【請求項３】
前記迷い判定部は、画面階層毎に計測された前記迷い時間に基づいて前記ユーザーが操作に迷っているか判定する
ことを特徴とする請求項１又は２に記載の電子機器。
【請求項４】
前記迷い判定部は、機能毎に計測された前記迷い時間に基づいて前記ユーザーが操作に迷っているか判定する
ことを特徴とする請求項１から３までのいずれか１項に記載の電子機器。
【請求項５】
前記迷い判定部は、直近の特定回数の前記迷い時間に基づいて前記ユーザーが操作に迷っているか判定する
ことを特徴とする請求項１から４までのいずれか１項に記載の電子機器。
【請求項６】
前記タッチパネルは、前記第１の迷い時間か前記第２の迷い時間かに応じて、表示するヘルプ情報を異ならせる
ことを特徴とする請求項２から５までのいずれか１項に記載の電子機器。
【請求項７】
電子機器に、
複数の操作キーを表示し、前記操作キーに対する操作を受け付ける操作受付ステップと、
タッチパネルに対する視線を検出する視線検出ステップと、
該視線検出ステップが検出してから前記操作キーが操作されるまでの迷い時間をユーザー毎に計測する計時ステップと、
前記計時ステップで計測中の迷い時間が特定の正方向のばらつき許容範囲を超えた場合に、前記ユーザーが操作に迷っていると判定する迷い判定ステップとを
実行させるための操作支援プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザーが操作に迷っている場合にヘルプ情報を表示する電子機器及び操作支援プログラムに関する。
【背景技術】
【０００２】
近年、電子機器においては、操作方法や機能の説明などのヘルプ情報を表示する機能を備えたものがあり、ユーザーが迷っている場合にアシストする技術が開発されている。例えば、視線検出部を用いてユーザーの視線による迷い動作を検出し、ヘルプ情報を表示する技術が提案されている（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平０８−３２８７１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、ユーザーによって迷っているかどうかの閾値があいまいであり、従来の技術では、ユーザーに応じた迷いの検出を行うことができなかった。
【０００５】
本発明は上記課題に鑑みてなされたものであり、上記課題を解決することができる技術を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の電子機器は、複数の操作キーを表示し、前記操作キーに対する操作を受け付けるタッチパネルと、該タッチパネルに対する視線を検出する視線検出部と、該視線検出部が検出してから前記操作キーが操作されるまでの迷い時間をユーザー毎に計測する計時部と、該計時部で計測中の迷い時間が正方向のばらつき許容範囲を超えた場合に、前記ユーザーが操作に迷っていると判定する迷い判定部とを備えたことを特徴とする。
また、前記計時部は、前記タッチパネルの画面に対する視線が検出されてから前記操作キーが操作されるまでの第１の迷い時間を計測する第１の計時部と、前記操作キーに対する視線が検出されてから前記操作キーが操作されるまでの第２の迷い時間を計測する第２の計時部とを有し、前記迷い判定部は、前記計測中の迷い時間が前記第１の迷い時間である場合には、正方向の第１のばらつき許容範囲を超えた場合に、前記ユーザーが前記画面の操作に迷っていると判定し、前記計測中の迷い時間が前記第２の迷い時間である場合には、正方向の第２のばらつき許容範囲を超えた場合に、前記ユーザーが前記操作キーの操作に迷っていると判定してもよい。
また、前記迷い判定部は、画面階層毎に計測された前記迷い時間に基づいて前記ユーザーが操作に迷っているか判定してもよい。
また、前記迷い判定部は、機能毎に計測された前記迷い時間に基づいて前記ユーザーが操作に迷っているか判定してもよい。
また、前記迷い判定部は、直近の特定回数の前記迷い時間に基づいて前記ユーザーが操作に迷っているか判定してもよい。
また、前記タッチパネルは、前記第１の迷い時間か前記第２の迷い時間かに応じて、表示するヘルプ情報を異ならせてもよい。
本発明の操作支援プログラムは、電子機器に、複数の操作キーを表示し、前記操作キーに対する操作を受け付ける操作受付ステップと、タッチパネルに対する視線を検出する視線検出ステップと、該視線検出ステップが検出してから前記操作キーが操作されるまでの迷い時間をユーザー毎に計測する計時ステップと、前記計時ステップで計測中の迷い時間が正方向のばらつき許容範囲を超えた場合に、前記ユーザーが操作に迷っていると判定する迷い判定ステップとを実行させることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、ユーザーに応じた迷いの検出を行うことができる。
【図面の簡単な説明】
【０００８】
【図１】本発明に係る実施形態の画像形成装置の構成を示すブロック図である。
【図２】図１に示す計時部が計測する第１の迷い時間と第２の迷い時間とを示すイメージ図である。
【図３】図１に示す迷い判定部が第１の迷い時間と第２の迷い時間とに基づいて、ユーザーの迷いを判定するイメージ図である。
【図４】図１に示す操作パネルに表示されるヘルプ情報の画面例である。
【図５】図１に示す操作パネルに表示されるヘルプ情報の画面例である。
【図６】図１に示す画像形成装置におけるユーザーに応じた迷い検出処理の流れを示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、図を参照して本発明の実施形態を詳細に説明する。なお、以下の実施形態において、同様の機能を示す構成には、同一の符号を付してある。
【００１０】
図１に示すように、画像形成装置１００は、操作パネル１０と視線検出部１１と計時部１２と通信部１３と制御部１４と記憶部１５と原稿読取部１６と画像処理部１７と印刷部１８とを備えている。
【００１１】
操作パネル１０は、タッチパネルと操作ボタンとを備えている。タッチパネルは、各種操作キーや画像形成状況を表示する表示部の表面に透明の感圧センサーが設けられており、表示手段及び入力手段として機能する。タッチパネルは、表示面へのタッチ操作を検知して、タッチ操作が検知された位置に対応する信号を出力することで、表示部に表示した操作キーへの操作を受け付ける。操作ボタンは、印刷枚数等の数値を入力するためのテンキー、設定情報を初期化させる指示を入力するためのリセットキー、複写動作を停止させるためのストップキー、印刷動作を開始させる出力指示を入力するためのスタートキー等の各種操作キーを備えている。
【００１２】
視線検出部１１は、ユーザーの視線を検出する機能を有する。具体的には、視線検出部１１は、タッチパネルの画面に対するユーザーの視線と、タッチパネルの画面内の操作キーに対するユーザーの視線を検出する。例えば、視線検出部は、カメラで撮像した画像データからユーザーの目を検出し、ユーザーの視線とタッチパネルとの交点である注目点を算出する。この注目点がタッチパネルの画面内にあるか否か、注目点に操作キーがあるか否かにより、視線検出部１１は、タッチパネルの画面に対するユーザーの視線と、タッチパネルの画面内の操作キーに対するユーザーの視線を検出してもよい。
【００１３】
計時部１２は、視線検出部１１で視線が検出されてから操作キーが操作されるまでにおけるユーザーの迷い時間を計測する。具体的には、計時部１２は、第１の計時部１２１と第２の計時部１２２とを有している。図２に示すように、第１の計時部１２１は、タッチパネルの画面に対する視線が検出されてから画面内の操作キーが操作されるまでの迷い時間（第１の迷い時間）を計測する。第２の計時部１２２は、画面内の操作キーに対する視線が検出されてからその操作キーが操作されるまでの迷い時間（第２の迷い時間）を計測する。つまり、第１の迷い時間は画面全体における迷い時間であり、第２の迷い時間は操作キーにおける迷い時間である。第１の計時部１２１と第２の計時部１２２は、それぞれ計測した第１の迷い時間と第２の迷い時間とを記憶部１５に蓄積する。
【００１４】
通信部１３は、ＬＡＮ（Local Area Network）等のネットワークを介して、外部端末と各種データを送受信する機能を有する。
【００１５】
記憶部１５は、半導体メモリーやＨＤＤ（Hard Disk Drive）等の記憶手段であり、原稿読取部１６によって読み取られた画像データや、通信部１３を介して受信された画像データが蓄積される記憶手段である。
【００１６】
原稿読取部１６は、図示しない原稿給紙装置により給紙されてきた原稿や、ユーザーによってプラテンガラスに載置された原稿に対して光を照射し、その反射光等を受光して原稿画像を読み取って画像データを出力するスキャナーである。
【００１７】
画像処理部１７は、画像データに対して画像処理を行う手段である。画像処理部１７では、例えば、拡大縮小処理や、濃度調整、階調調整等の画像改善処理が行われる。
【００１８】
印刷部１８は、画像データを印刷する印刷手段である。印刷部１８は、例えば、記憶部１５から読み出した画像データに基づき感光体ドラムの表面に潜像を形成し、トナーによってその潜像をトナー像とする画像形成を行い、図示しない給紙部から搬送されてきた記録紙に感光体ドラムのトナー像を転写させ、そのトナー像を記録紙に定着させて排紙する。
【００１９】
制御部１４は、操作パネル１０、視線検出部１１、計時部１２、通信部１３、記憶部１５、原稿読取部１６、画像処理部１７及び印刷部１８にそれぞれ接続され、操作パネル１０から入力された指示情報に応じて画像形成装置１００全体の動作制御を実行する。制御部１４は、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等を備えたマイクロコンピュータ等の情報処理部である。ＲＯＭには画像形成装置１００の動作制御を行うための制御プログラムが記憶されている。制御プログラムには、本実施形態におけるユーザーの操作に対する迷いを検出してヘルプ情報を表示するための操作支援プログラムが含まれている。制御部１４は、ＲＯＭに記憶されている制御プログラムを読み出し、制御プログラムをＲＡＭに展開させることで、操作パネル１０から入力された指示情報に応じて装置全体の制御を行う。なお、制御プログラムは、不図示のネットワーク又は不図示のコンピューター読取可能な記録媒体を介してＲＯＭに記憶されてもよい。
【００２０】
また、制御部１４は、記憶部１５に蓄積された迷い時間の標準偏差（σ）を算出し、計時部１２で計測中の迷い時間を監視して、計測中の迷い時間が正方向のばらつき許容範囲を超えたか否かを判定する迷い判定部１４１として機能する。正方向のばらつき許容範囲は、予め設定しておけばよく、例えば、迷い時間の平均値＋３σとしてもよい。また、ユーザーが正方向のばらつき許容範囲を設定可能であってもよい。計測中の迷い時間が正方向のばらつき許容範囲を超えた場合には、ユーザーが操作に迷っていると判定され、ヘルプ情報が表示される。なお、迷い判定部１４１は、第１の迷い時間、第２の迷い時間のそれぞれについて平均値および標準偏差（σ１、σ２）を算出し、図３（ａ）に示すように、計測中の第１の迷い時間が正方向のばらつき許容範囲（第１の迷い時間の平均値＋３σ１）（第１の許容範囲）を超えたか、図３（ｂ）に示すように、計測中の第２の迷い時間が正方向のばらつき許容範囲（第２の迷い時間の平均値＋３σ２）（第２の許容範囲）を超えたかを判定する。
【００２１】
計測中の迷い時間が正方向のばらつき許容範囲を超えた場合には、タッチパネルは、例えば図４に示すように、「ヘルプ情報を参照」ボタン８０を表示させたり、強調表示させたりして、ユーザーにヘルプの参照を推奨する。「ヘルプ情報を参照」ボタンが押された場合には、例えば図５に示すヘルプ画面８１が表示され、ユーザーは各種操作方法を確認することができる。他にも、例えば、ジョブ設定画面の場合に、設定手順に応じて画面が遷移するワークフロービューへの切換を推奨したり、機能が羅列した画面から実現イメージから選択できる画面への切換を推奨したり、プレビューや試しコピーを推奨したり、ファイル検索中の場合に、検索やフィルタリングの方法を表示するようにしてもよい。なお、ばらつき許容範囲を超えた迷い時間が、第１の迷い時間か第２の迷い時間かに応じて、タッチパネルは、ヘルプ情報の内容を異ならせて表示してもよい。画面全体の操作に迷っている時間を表す第１の迷い時間と、操作キーの操作に迷っている時間を表す第２の迷い時間とでは、迷っている内容が異なるからである。
【００２２】
次に、図６を参照して、ユーザーに応じた迷いを検出する処理の流れを説明する。なお、迷い判定部１４１は、記憶部１５に蓄積された第１の迷い時間と第２の迷い時間とに基づいて、第１の迷い時間の標準偏差σ１と第２の迷い時間の標準偏差σ２とを算出するとともに、第１の許容範囲（第１の迷い時間の平均値＋３σ１）と第２の許容範囲（第２の迷い時間の平均値＋３σ２）とを取得しているものとする。
【００２３】
まず、視線検出部１１により、ユーザーが画面を見たか否かが判定され（ステップｓ１１）、ユーザーが画面を見ていない場合（ステップｓ１１でＮｏ）、ステップｓ１１に処理が戻る。視線検出部１１によりユーザーが画面を見たことが検出されると（ステップｓ１１でＹｅｓ）、第１の計時部１２１が第１の迷い時間の計測を開始する（ステップｓ１２）。
【００２４】
つづいて、視線検出部１１により、ユーザーが操作キーを見たか否かが判定され（ステップｓ１３）、ユーザーが操作キーを見ていない場合（ステップｓ１３でＮｏ）、迷い判定部１４１は、計測中の第１の迷い時間が第１の許容範囲を超えたか判定する（ステップｓ１４）。
【００２５】
第１の迷い時間が第１の許容範囲を超えていない場合（ステップｓ１４でＮｏ）、視線検出部１１により画面から視線が外れたか判定される（ステップｓ１５）。画面から視線が外れていなければ（ステップｓ１５でＮｏ）、ステップｓ１３に処理が戻る。一方、画面から視線が外れた場合（ステップｓ１５でＹｅｓ）、第１の計時部１２１は、第１の迷い時間の計測を中止して計測値をリセットし（ステップｓ１７）、画面に対する視線を検出するステップｓ１１に処理を戻す。
【００２６】
一方、第１の迷い時間が第１の許容範囲を超えている場合（ステップｓ１４でＹｅｓ）、タッチパネルは、画面操作に関するヘルプ情報を表示する（ステップｓ１６）。タッチパネルがヘルプ情報を表示すると、第１の計時部１２１は、第１の迷い時間の計測を中止して計測値をリセットし（ステップｓ１７）、ステップｓ１１に処理を戻す。この場合、ユーザーが画面に視線を戻したときに、新たに第１の迷い時間が計測される。
【００２７】
一方、ユーザーが画面内の操作キーを見たことが視線検出部１１により検出されると（ステップｓ１３でＹｅｓ）、第２の計時部１２２により、第２の迷い時間の計測が開始され（ステップｓ１８）、タッチパネルにより操作キーが押下されたか判定される（ステップｓ１９）。
【００２８】
操作キーが押下されない場合（ステップｓ１９でＮｏ）、迷い判定部１４１は、計測中の第２の迷い時間が第２の許容範囲を超えたか判定する（ステップｓ２０）。第２の迷い時間が第２の許容範囲を超えていない場合（ステップｓ２０でＮｏ）、視線検出部１１により操作キーから視線が外れたか判定される（ステップｓ２１）。操作キーから視線が外れていなければ、すなわち操作キーが注視されている場合（ステップｓ２１でＮｏ）、操作キーが押下されたか判定するステップｓ１９に処理が戻る。一方、操作キーから視線が外れた場合（ステップｓ２１でＹｅｓ）、第２の計時部１２２は、第２の迷い時間の計測を中止して計測値をリセットし（ステップｓ２２）、第１の迷い時間が第２の許容範囲を超えたか判定するステップｓ１４に処理を戻す。
【００２９】
一方、第２の迷い時間が第２の許容範囲を超えている場合（ステップｓ２０でＹｅｓ）、タッチパネルは、操作キーに関するヘルプ情報を表示する（ステップｓ２３）。操作キーに関するヘルプ情報が表示されると、第１の計時部１２１による第１の迷い時間の計測と第２の計時部１２２による第２の迷い時間の計測とが中止されてそれぞれの計測値がリセットされ（ステップｓ２４）、画面に対する視線を検出するステップｓ１１に処理が戻る。
【００３０】
一方、タッチパネルにより操作キーが押下されたことが検出されると（ステップｓ１９でＹｅｓ）、第１の計時部１２１と第２の計時部１２２は、それぞれ第１の迷い時間の計測と第２の迷い時間の計測を終了して計測値をリセットし（ステップｓ２５）、計測した第１の迷い時間と第２の迷い時間とを記憶部１５に記憶させる（ステップｓ２６）。つづいて、制御部１４により、押下された操作キーに応じた処理が行われ（ステップｓ２７）、本処理が終了する。
【００３１】
このように、画像形成装置１００は、タッチパネルの画面又は操作キーに対する視線が検出されてから操作キーが押されるまでのユーザーの迷い時間をユーザー毎に計測して蓄積しており、計測中の迷い時間が正方向のばらつき許容範囲を超えた場合に、ユーザーが操作に迷っていると判定してヘルプ情報を表示する。そのため、本実施形態によれば、ユーザーが普段よりも迷っているかどうかを判断することができ、ユーザーの迷い時間に応じてヘルプ情報を表示させることができる。また、職場などで複数のユーザーが画像形成装置１００を利用する場合であっても、個々のユーザーに応じて操作に迷っているかどうかを判定することができる。なお、個々のユーザーの識別にはログイン認証を使えばよい。
【００３２】
本発明は上述した実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で種々様々に変更が可能であることは言うまでもない。
【００３３】
例えば、画像形成装置１００は、画面階層毎や機能毎にそれぞれ第１の迷い時間と第２の迷い時間とを計測して蓄積し、画面階層や機能に応じてユーザーが操作に迷っているかどうかを判定してもよい。画面階層や機能によって操作内容が変わるからである。なお、プレビュー等の長時間画像を確認する必要がある場合には、第１の迷い時間と第２の迷い時間との計測を中止するようにしてもよい。
【００３４】
また、迷い判定部１４１は、直近の特定回数、例えば、数回又は数十回分の第１の迷い時間と第２の迷い時間とに基づいて、ユーザーが操作に迷っているかどうかを判定してもよい。標本数が多くなりすぎると、ユーザーが普段操作しない機能を操作したときなどにユーザーが操作に迷っていることを検出しにくくなるからである。なお、初期操作やログインせずに画像形成装置１００を使用する場合のために、第１の迷い時間と第２の迷い時間それぞれのデフォルト値が記憶部１５に記憶されていてもよい。
また、上記実施形態では、正方向のばらつき許容範囲を迷い時間の平均値＋３σとしたが、迷い時間の平均値＋２σ、または迷い時間の平均値＋σとしてもよい。
【００３５】
なお、上記実施形態では、画像形成装置１００を電子機器の一例として挙げたが、スマートフォンやタブレット端末などのタッチパネルを備えた電子機器に適用してもよい。
【符号の説明】
【００３６】
１０  操作パネル
１１  視線検出部
１２  計時部
１３  通信部
１４  制御部
１５  記憶部
１６  原稿読取部
１７  画像処理部
１８  印刷部
８０  ボタン
８１  ヘルプ画面
１００  画像形成装置
１２１  第１の計時部
１２２  第２の計時部
１４１  迷い判定部
【図１】
2015184698.tif 000003
【図２】
2015184698.tif 000004
【図３】
2015184698.tif 000005
【図４】
2015184698.tif 000006
【図５】
2015184698.tif 000007
【図６】
2015184698.tif 000008