(57)【要約】【課題】操作者が見ている領域に複数の操作ボタンが存在している場合であっても、操作者が注目している操作ボタンを特定可能な画像形成装置を提供する。【解決手段】画像形成装置は、複数の操作ボタンを含む画面を、操作パネルに表示させる。画像形成装置は、操作者の視線に基づき、画面における操作者が見ている領域を特定する。画像形成装置は、特定された領域に２つ以上の操作ボタンが存在する場合、画像形成装置に入力された情報に基づいて、領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。【選択図】図９
2020129269.tif 000002
【特許請求の範囲】
【請求項１】
画像形成装置であって、
操作者による入力操作を受け付ける操作パネルと、
複数の操作ボタンを含む画面を、前記操作パネルに表示させる表示制御手段と、
前記操作者の視線に基づき、前記画面における前記操作者が見ている領域を特定する領域特定手段と、
特定された前記領域に２つ以上の前記操作ボタンが存在する場合、前記画像形成装置に入力された情報に基づいて、前記領域に存在する２つ以上の前記操作ボタンのうちから１つの前記操作ボタンを特定するボタン特定手段とを備える、画像形成装置。
【請求項２】
前記表示制御手段は、前記操作ボタンが特定されたことに基づき、特定された前記操作ボタンに対応するヘルプ内容を前記操作パネルに表示させる、請求項１に記載の画像形成装置。
【請求項３】
前記情報は、原稿の情報、用紙の情報、前記操作パネルに対する前記入力操作に基づいて設定された設定内容、前記画像形成装置に対する過去の操作履歴、および前記画像形成装置の使用地域を表す地域情報の少なくとも１つである、請求項１または２に記載の画像形成装置。
【請求項４】
前記原稿を読み取るスキャナをさらに備え、
前記スキャナによって前記原稿を読み取ることにより、前記原稿の情報を取得する、請求項３に記載の画像形成装置。
【請求項５】
前記原稿の情報は、前記原稿のサイズ、前記原稿の文字列、書字方向、前記文字列の色、および前記原稿の枚数の少なくとも１つである、請求項４に記載の画像形成装置。
【請求項６】
前記スキャナによる前記原稿の画像データをメモリに記憶し、
前記メモリに前記画像データが記憶された後に前記操作パネルが印刷動作の開始を指示する入力操作を受け付けると、前記メモリに記憶された前記画像データに基づく印刷を行なう、請求項４または５に記載の画像形成装置。
【請求項７】
前記スキャナによって再度の読み取り動作が行なわれた場合には、前記メモリに記憶されていた前記画像データを破棄する、請求項６に記載の画像形成装置。
【請求項８】
前記ボタン特定手段は、
前記領域に２つ以上の前記操作ボタンが存在する場合、各前記操作ボタンによって設定される内容が、現在の設定内容と禁則の関係となるか否かを判断し、
前記領域に２つ以上の前記操作ボタンのうちから前記禁則となる内容が設定される前記操作ボタンを除いた残りの前記操作ボタンのうちから、１つの前記操作ボタンを特定する、請求項１から７のいずれか１項に記載の画像形成装置。
【請求項９】
前記ボタン特定手段は、
前記領域に２つ以上の前記操作ボタンが存在する場合、前記過去の操作履歴に基づき、現在の設定内容とともに設定される確率が最も高い設定内容を判断し、
前記領域に存在する２つ以上の前記操作ボタンのうちから、判断された前記設定内容を行なうための前記操作ボタンを特定する、請求項３に記載の画像形成装置。
【請求項１０】
前記原稿のサイズを判断する判断手段をさらに備え、
前記ボタン特定手段は、前記原稿のサイズが定形サイズでない場合には、前記領域に存在する２つ以上の前記操作ボタンのうちから、前記原稿のサイズに応じた前記操作ボタンを特定する、請求項１から９のいずれか１項に記載の画像形成装置。
【請求項１１】
光学的文字認識によって前記原稿の文字列を認識する認識手段をさらに備え、
前記ボタン特定手段は、前記領域に存在する２つ以上の前記操作ボタンのうちから、前記原稿の文字列の情報に応じた前記操作ボタンを特定する、請求項１から１０のいずれか１項に記載の画像形成装置。
【請求項１２】
前記操作パネルは、撮像部を備え、
前記領域特定手段は、前記撮像部による撮像で得られたデータに基づき前記操作者の視線を認識する、請求項１から１１のいずれか１項に記載の画像形成装置。
【請求項１３】
前記表示制御手段は、前記領域特定手段で特定された前記領域を示す指標を、前記操作パネルに表示させる、請求項１から１２のいずれか１項に記載の画像形成装置。
【請求項１４】
画像形成装置の表示制御方法であって、
前記画像形成装置のコントローラーが、前記画像形成装置の操作パネルを介して操作者による入力操作を受け付けるステップと、
前記コントローラーが、複数の操作ボタンを含む画面を前記操作パネルに表示させるステップと、
前記コントローラーが、前記操作者の視線に基づき、前記画面における前記操作者が見ている領域を特定するステップと、
特定された前記領域に２つ以上の前記操作ボタンが存在する場合、前記コントローラーが、前記画像形成装置に入力された情報に基づいて、前記領域に存在する２つ以上の前記操作ボタンのうちから１つの前記操作ボタンを特定するステップとを備える、表示制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像形成装置および画像形成装置における表示制御方法に関する。
【背景技術】
【０００２】
従来、機器の操作方法や機能の説明などのヘルプ情報を表示する機能を備えた装置が知られている。たとえば、特許文献１には、視線検出部を用いてユーザーの視線による迷い動作を検出し、ヘルプ情報を表示する無人端末装置が提案されている。
【０００３】
また、特許文献２には、ユーザーに応じた迷いの検出を行うことを目的とした電子機器が開示されている。当該電子機器は、視線検出部により視線が検出されてから操作キーが操作されるまでのユーザーの迷い時間を計測し、かつ、迷い時間が特定の正方向のばらつき許容範囲を超えた場合にユーザーが操作に迷っていると判定する。
【０００４】
また、複写機、プリンター、ファクシミリまたはそれらの複合機である画像形成装置が知られている。このような画像形成装置は、操作パネルを有している。操作パネルには、選択可能な複数の操作ボタン（ソフトウェアキー）を有する操作画面が表示される。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平８−３２８７１５号公報
【特許文献２】特開２０１５−１８４６９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
画像形成装置の操作パネルでは、数多くの操作ボタンが一つの操作画面に表示されることが多い。また、操作パネルの表示領域は十分に広いとは言えない。それゆえ、画像形成装置では、操作ボタン同士を近くに配置せざるを得ない。
【０００７】
したがって、画像形成装置は、視線の先の領域が複数の操作ボタンに跨がっていると判定してしまうことがある。つまり、画像形成装置は、操作者（ユーザー）が見ている領域に複数の操作ボタンが存在していると判定してしまうことがある。このような場合には、画像形成装置は、操作者が着目している操作ボタンを特定できないため、当該操作ボタンのヘルプ情報のみを抽出して表示することはできない。
【０００８】
本開示は、上記の問題点に鑑みなされたものであって、その目的は、操作者が見ている領域に複数の操作ボタンが存在している場合であっても、操作者が注目している操作ボタンを特定可能な画像形成装置および表示制御方法を提供することにある。
【課題を解決するための手段】
【０００９】
本開示のある局面に従うと、画像形成装置は、操作者による入力操作を受け付ける操作パネルと、複数の操作ボタンを含む画面を、操作パネルに表示させる表示制御手段と、操作者の視線に基づき、画面における操作者が見ている領域を特定する領域特定手段と、特定された領域に２つ以上の操作ボタンが存在する場合、画像形成装置に入力された情報に基づいて、領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定するボタン特定手段とを備える。
【００１０】
好ましくは、表示制御手段は、操作ボタンが特定されたことに基づき、特定された操作ボタンに対応するヘルプ内容を操作パネルに表示させる。
【００１１】
好ましくは、情報は、原稿の情報、用紙の情報、操作パネルに対する入力操作に基づいて設定された設定内容、画像形成装置に対する過去の操作履歴、および画像形成装置の使用地域を表す地域情報の少なくとも１つである。
【００１２】
好ましくは、画像形成装置は、原稿を読み取るスキャナをさらに備える。画像形成装置は、スキャナによって原稿を読み取ることにより、原稿の情報を取得する。
【００１３】
好ましくは、原稿の情報は、原稿のサイズ、原稿の文字列、書字方向、文字列の色、および原稿の枚数の少なくとも１つである。
【００１４】
好ましくは、画像形成装置は、スキャナによる原稿の画像データをメモリに記憶する。画像形成装置は、メモリに画像データが記憶された後に操作パネルが印刷動作の開始を指示する入力操作を受け付けると、メモリに記憶された画像データに基づく印刷を行なう。
【００１５】
好ましくは、画像形成装置は、スキャナによって再度の読み取り動作が行なわれた場合には、メモリに記憶されていた画像データを破棄する。
【００１６】
好ましくは、ボタン特定手段は、領域に２つ以上の操作ボタンが存在する場合、各操作ボタンによって設定される内容が、現在の設定内容と禁則の関係となるか否かを判断する。ボタン手特定手段は、領域に２つ以上の操作ボタンのうちから禁則となる内容が設定される操作ボタンを除いた残りの操作ボタンのうちから、１つの操作ボタンを特定する。
【００１７】
好ましくは、ボタン特定手段は、領域に２つ以上の操作ボタンが存在する場合、過去の操作履歴に基づき、現在の設定内容とともに設定される確率が最も高い設定内容を判断する。ボタン特定手段は、領域に存在する２つ以上の操作ボタンのうちから、判断された設定内容を行なうための操作ボタンを特定する。
【００１８】
好ましくは、画像形成装置は、原稿のサイズを判断する判断手段をさらに備える。ボタン特定手段は、原稿のサイズが定形サイズでない場合には、領域に存在する２つ以上の操作ボタンのうちから、原稿のサイズに応じた操作ボタンを特定する。
【００１９】
好ましくは、画像形成装置は、光学的文字認識によって原稿の文字列を認識する認識手段をさらに備える。ボタン特定手段は、領域に存在する２つ以上の操作ボタンのうちから、原稿の文字列の情報に応じた操作ボタンを特定する。
【００２０】
好ましくは、操作パネルは、撮像部を備える。領域特定手段は、撮像部による撮像で得られたデータに基づき操作者の視線を認識する。
【００２１】
好ましくは、表示制御手段は、領域特定手段で特定された領域を示す指標を、操作パネルに表示させる。
【００２２】
本開示の他の局面に従うと、画像形成装置の表示制御方法は、画像形成装置のコントローラーが、画像形成装置の操作パネルを介して操作者による入力操作を受け付けるステップと、コントローラーが、複数の操作ボタンを含む画面を操作パネルに表示させるステップと、コントローラーが、操作者の視線に基づき、画面における操作者が見ている領域を特定するステップと、特定された領域に２つ以上の操作ボタンが存在する場合、コントローラーが、画像形成装置に入力された情報に基づいて、領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定するステップとを備える。
【発明の効果】
【００２３】
本開示によれば、操作者が見ている領域に複数の操作ボタンが存在している場合であっても、操作者が注目している操作ボタンを特定可能となる。
【図面の簡単な説明】
【００２４】
【図１】ＭＦＰである画像形成装置の外観を表した図である。
【図２】操作パネルの外観を表した図である。
【図３】画像形成装置の内部構造を示す概略図である。
【図４】画像形成装置の本体部のハードウェア構成の一例を説明するためのブロック図である。
【図５】画像形成装置の機能的構成を説明するための機能ブロック図である。
【図６】画像形成装置に入力された情報を説明するための図である。
【図７】記憶部に記憶されるデータを説明するための図である。
【図８】画像形成装置に原稿がセットされてからジョブが実行されるまでの一連の処理の流れを説明するためのフロー図である。
【図９】画像形成装置１０００で実行されるヘルプ表示処理（図８のステップＳ１００５）の詳細を説明するためのフローチャートである。
【図１０】第１の具体例を説明するための画面遷移図である。
【図１１】第１の具体例におけるステップＳ５の詳細を表したフロー図である。
【図１２】ステップＳ５の詳細の他の例を表したフロー図である。
【図１３】第２の具体例を説明するための画面遷移図である。
【図１４】第２の具体例におけるステップＳ５の詳細を表した図である。
【図１５】第３の具体例を説明するための画面遷移図である。
【図１６】第３の具体例におけるステップＳ５の詳細を表した図である。
【図１７】第４の具体例を説明するための画面遷移図である。
【図１８】第４の具体例における処理の流れの前半を説明するためのフロー図である。
【図１９】第４の具体例における処理の流れの後半を説明するためのフロー図である。
【発明を実施するための形態】
【００２５】
実施の形態における画像形成装置について、以下、図を参照しながら説明する。以下に説明する実施の形態において、個数、量などに言及する場合、特に記載がある場合を除き、本開示の範囲は必ずしもその個数、量などに限定されない。同一の部品、相当部品に対しては、同一の参照番号を付し、重複する説明は繰り返さない場合がある。
【００２６】
図面においては、実際の寸法の比率に従って図示しておらず、構造の理解を容易にするために、構造が明確となるように比率を変更して図示している箇所がある。なお、以下で説明される各実施の形態および各変形例は、適宜選択的に組み合わされてもよい。
【００２７】
また、以下では、カラープリンタとしての画像形成装置について説明するが、画像形成装置は、カラープリンタに限定されない。たとえば、画像形成装置は、モノクロプリンタであってもよいし、ＦＡＸであってもよいし、モノクロプリンタ、カラープリンタおよびＦＡＸの複合機（ＭＦＰ：Multi-Functional  Peripheral）であってもよい。
【００２８】
＜Ａ．画像形成装置１０００のハードウェア構成＞
（ａ１．画像形成装置１０００の外観）
図１は、ＭＦＰである画像形成装置１０００の外観を表した図である。図１を参照して、画像形成装置１０００は、操作パネル３４を有する。操作パネル３４は、ユーザー（操作者）による入力操作を受け付ける。
【００２９】
図２は、操作パネル３４の外観を表した図である。図２を参照して、操作パネル３４は、タッチスクリーン３４１と、カメラ３９と、複数の物理キーとを有する。タッチスクリーン３４１は、本例では、ディスプレイ上にタッチパネルが設置された構造を有している。
【００３０】
タッチスクリーン３４１には、画面が表示される。タッチスクリーン３４１には、操作画面が表示される。操作画面は、たとえば設定画面である。ある局面においては、１つの操作画面は、少なくなくとも１つの操作ボタンを有している。操作ボタンは、ソフトウェアキー、ソフトウェアボタン、選択可能なオブジェクト、アイコンとも称される。画像形成装置１０００のユーザーは、操作ボタンに対する操作によって、項目の設定、現在設定されている項目の変更等を行なうことができる。操作ボタンの具体例については、後述する（図１０，図１３，図１５参照）。
【００３１】
カメラ３９は、ユーザーを撮像する。詳しくは、カメラ３９は、操作パネル３４を見ているユーザーの顔（少なくとも目）を撮像可能な位置に設置されている。カメラ３９によって得られた画像に基づき、画像形成装置１０００は、ユーザーの視線検知を行なう。具体的には、画像形成装置１０００は、ユーザーの視線に基づき、操作画面におけるユーザーが見ている領域（以下、「視線領域」とも称する）を特定する。なお、視線検知については従来知られた技術であるため、ここでは詳しくは説明しない。
【００３２】
（ａ２．画像形成装置１０００の内部構造）
図３は、画像形成装置１０００の内部構造を示す概略図である。図３を参照して、画像形成装置１０００は、上述したように、本体部１０と、後処理装置２０とを備えている。
【００３３】
本体部１０は、画像形成ユニット１１と、スキャナユニット１２と、自動原稿搬送ユニット１３と、給紙トレイ１４Ａ，１４Ｂと、搬送路１５と、メディアセンサ１６と、反転搬送路１７と、給紙ローラー１１３とを備えている。なお、自動原稿搬送ユニットは、ＡＤＦ（auto document feeder）とも称される。
【００３４】
本体部１０は、画像形成装置１０００の動作を制御するコントローラー３１をさらに備えている。なお、本例では、本体部１０は、いわゆるタンデム方式のカラープリンタである。本体部１０は、印刷設定に基づいて画像形成を実行する。
【００３５】
自動原稿搬送ユニット１３は、原稿台上に載置された原稿を、原稿読取部の読取位置に自動的に搬送する。スキャナユニット１２は、自動原稿搬送ユニット１３により搬送された原稿の画像を読み取り、画像データを生成する。また、スキャナユニット１２は、自動原稿搬送ユニット１３を用いずにユーザーがプラテン上に置いた原稿の画像も読み取り、画像データを生成する。スキャナユニット１２による原稿の画像データは、メモリ（典型的には、図４に示す固定記憶装置３２）に記憶される。
【００３６】
給紙トレイ１４Ａ，１４Ｂには、用紙Ｐが収容される。給紙ローラー１１３は、用紙Ｐを搬送路１５に沿って上方へ送る。給紙トレイ１４Ａ，１４Ｂの各々は、底上げ板１４２と、センサ１４３とを備える。センサ１４３は、給紙トレイ内の規制板（図示せず）位置を検知し、かつ用紙のサイズを検知する。
【００３７】
搬送路１５は、片面印刷および両面印刷のときに使用される。反転搬送路１７は、両面印刷のときに使用される。
【００３８】
画像形成ユニット１１は、スキャナユニット１２が生成した画像データ、または、図示しないＰＣから取得した印刷データに基づいて、給紙トレイ１４Ａ，１４Ｂにより供給される用紙Ｐに対し画像形成を行なう。
【００３９】
画像形成ユニット１１は、中間転写ベルト１０１と、テンションローラー１０２と、駆動ローラー１０３と、イエローの画像形成部１０４Ｙと、マゼンタの画像形成部１０４Ｍと、シアンの画像形成部１０４Ｃ，ブラックの画像形成部１０４Ｋと、画像濃度センサ１０５と、１次転写装置１１１と、２次転写装置１１５と、レジストローラー対１１６と、加熱ローラー１２１と加圧ローラー１２２とからなる定着装置１２０とを有している。テンションローラー１０２と駆動ローラー１０３とで、中間転写ベルト１０１を保持し、かつ図のＡ方向に中間転写ベルト１０１を回転駆動させる。レジストローラー対１１６は、給紙ローラー１１３によって搬送された用紙Ｐをさらに下流に搬送する。
【００４０】
メディアセンサ１６は、搬送路１５に設置される。メディアセンサ１６によって、紙種自動検知機能が実現される。
【００４１】
なお、後処理装置２０は、パンチ処理装置２２０と、平綴じ処理部２５０と、中綴じ処理部２６０と、排出トレイ２７１と、排出トレイ２７２と、下部の排出トレイ２７３とをさらに備える。
【００４２】
（ａ３．本体部１０のハードウェア構成）
図４は、画像形成装置１０００の本体部１０のハードウェア構成の一例を説明するためのブロック図である。
【００４３】
図４を参照して、本体部１０は、コントローラー３１と、固定記憶装置３２と、短距離無線ＩＦ（Inter Face）３３と、カメラ３９と、スキャナユニット１２と、操作パネル３４と、給紙トレイ１４Ａ，１４Ｂと、メディアセンサ１６と、画像形成ユニット１１と、プリンタコントローラー３５と、ネットワークＩＦ３６と、ワイアレスＩＦ３７とを有する。コントローラー３１には、各部１１，１２，１４Ａ，１４Ｂ，１６，３２〜３７がバス３８を介して接続されている。
【００４４】
コントローラー３１は、ＣＰＵ（Central Processing Unit）３１１と、制御プログラムの格納されたＲＯＭ（Read Only Memory）３１２と、作業用のＳ−ＲＡＭ（Static Random Access Memory）３１３と、画像形成に関わる各種の設定を記憶するバッテリバックアップされたＮＶ−ＲＡＭ（Non-Volatile RAM：不揮発性メモリ）３１４と、時計ＩＣ（Integrated Circuit）３１５とを有する。各部３１１〜３１５は、バス３８を介して接続されている。
【００４５】
操作パネル３４は、各種の入力を行うキー、および表示部を有する。操作パネル３４は、典型的には、タッチスクリーンと、ハードウェアキーとで構成される。なお、タッチスクリーンは、ディスプレイの上にタッチパネルが重畳されたデバイスである。
【００４６】
カメラ３９は、上述したようにユーザーを撮像する。カメラ３９によって撮像された画像は、コントローラー３１に送られる。コントローラー３１は、当該画像に基づき、操作画面におけるユーザーが見ている領域（視線領域）を特定する。
【００４７】
ネットワークＩＦ３６は、ネットワークＮＷを介して接続されたＰＣ（図示せず）および他の画像形成装置（図示せず）をはじめとする外部装置との間で各種の情報を送受信する。
【００４８】
プリンタコントローラー３５は、ネットワークＩＦ３６により受信したプリントデータから複写画像を生成する。画像形成ユニット１１は、複写画像を用紙上に形成する。
【００４９】
なお、固定記憶装置３２は、典型的には、ハードディスク装置である。固定記憶装置３２には、各種のデータが記憶されている。
【００５０】
＜Ｂ．機能的構成＞
図５は、画像形成装置１０００の機能的構成を説明するための機能ブロック図である。  
【００５１】
図５を参照して、画像形成装置１０００は、制御部１１００と、原稿読取部１２００と、記憶部１３００と、撮像部３４１１と、表示部３４１２とを備えている。
【００５２】
撮像部３４１１は、カメラ３９に対応する。表示部３４１２は、タッチスクリーン３４１（図２参照）のディスプレイに対応する。原稿読取部１２００は、スキャナユニット１２に対応する。記憶部１３００は、典型的には、固定記憶装置３２に対応する。
【００５３】
制御部１１００は、コントローラー３１（図３参照）に対応する。典型的には、制御部１１００は、プロセッサー（ＣＰＵ３１１）がメモリに格納されたＯＳ（Operating System）および各種のプログラムを実行することにより実現される。
【００５４】
撮像部３４１１は、ユーザーの顔（少なくとも目）を撮像する。撮像部３４１１は、撮像により得られた画像データを、制御部１１００に送る。
【００５５】
表示部３４１２は各種の画面を表示する。表示部３４１２は、たとえばユーザーによって操作パネル３４が操作されたことに基づき、当該操作に基づいた画面を表示する。
【００５６】
記憶部１３００は、各操作ボタンに対応するヘルプ内容（以下、「ヘルプ情報」とも称する）を記憶している。また、記憶部１３００は、他の各種のデータを記憶している。記憶部１３００は、典型的には、固定記憶装置３２に対応する。なお、記憶部１３００が、コントローラー３１内のＲＡＭ，ＲＯＭを含むものであってもよい。
【００５７】
制御部１１００は、視線領域特定部１１０１と、操作ボタン特定部１１０２と、ヘルプ情報読出部１１０３と、表示制御部１１０４と、サイズ判断部１１０５と、文字認識部１１０６とを備える。
【００５８】
表示制御部１１０４は、表示部３４１２における表示を制御する。表示制御部１１０４は、操作パネル３４を介したユーザー操作を受け付けた場合、当該ユーザー操作に基づいた画面を表示部３４１２に表示させる。ある局面において、表示制御部１１０４は、複数の操作ボタンを含む画面を表示部３４１２に表示させる。
【００５９】
視線領域特定部１１０１は、操作者の視線に基づき、操作パネル３４に表示された操作画面における操作者が見ている領域（視線領域）を特定する。具体的には、視線領域特定部１１０１は、撮像部３４１１から送られてきた画像データに基づき、操作画面上の視線領域（視線位置）を特定する。視線領域特定部１１０１は、特定結果を、操作ボタン特定部１１０２に通知する。典型的には、視線領域特定部１１０１は、特定した領域を示す座標値を操作ボタン特定部１１０２に通知する。
【００６０】
操作ボタン特定部１１０２は、特定された視線領域に含まれる操作ボタンを特定する。典型的には、操作ボタン特定部１１０２は、操作ボタンの少なくとも一部が視線領域に含まれている場合、当該操作ボタンが視線領域に含まれているものとする。
【００６１】
操作ボタン特定部１１０２は、特定された視線領域に２つ以上の操作ボタンが存在する場合、画像形成装置１０００に入力された情報に基づいて、当該視線領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。「画像形成装置１０００に入力された情報」については、後述する。
【００６２】
詳しくは、操作ボタン特定部１１０２は、表示制御部１１０４から表示中の操作ボタンの情報を取得する。具体的には、操作ボタン特定部１１０２は、操作ボタンの位置と種別との情報を表示制御部１１０４から取得する。操作ボタン特定部１１０２は、表示制御部１１０４から取得した情報と、画像形成装置１０００に入力された情報とに基づいて、当該視線領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。
【００６３】
操作ボタン特定部１１０２は、特定された操作ボタンの情報（種別）を、ヘルプ情報読出部１１０３に通知する。
【００６４】
ヘルプ情報読出部１１０３は、操作ボタン特定部１１０２から通知された操作ボタンに対応するヘルプ情報を、記憶部１３００から読み出す。さらに、ヘルプ情報読出部１１０３は、記憶部１３００から読み出したヘルプ情報を、表示制御部１１０４に通知する。
【００６５】
表示制御部１１０４は、ヘルプ情報読出部１１０３から通知されたヘルプ情報を表した画面（以下、「ヘルプ画面」とも称する）を表示部３４１２に表示させる。すなわち、表示制御部１１０４は、操作ボタン特定部１１０２によって操作ボタンが特定されたことに基づき、特定された操作ボタンに対応するヘルプ画面を操作パネル３４に表示させる。
【００６６】
図６は、画像形成装置１０００に入力された情報を説明するための図である。
図６を参照して、画像形成装置１０００に入力された情報としては、たとえば、「原稿の情報」と、「用紙の情報」と、「操作パネルによる設定内容」と、「操作履歴」と、「地域情報」とが挙げられる。なお、「操作パネルによる設定内容」は、操作パネル３４に対する入力操作に基づいて設定された設定内容である。「操作履歴」は、画像形成装置１０００に対する過去の操作履歴である。
【００６７】
「原稿の情報」としては、原稿についての、「向き（縦方向/横方向）」、「画像の種類（文字、写真）」、「文書」、「書字方向（すなわち文字を書き進める方向）」、「枚数」、「色」、「サイズ」、「文字列」等が挙げられる。書字方向は、「縦書き」と「横書き」とである。なお、これらの情報は、原稿読取部１２００（スキャナユニット１２）を動作させることにより得られる情報である。なお、自動原稿搬送ユニット１３が使用される場合には、ユーザーが原稿を原稿トレイにセットした段階で、画像形成装置１０００が、サイド規制板の位置や、トレイに設けられたセンサの検知により、原稿の向きとサイズとを検知する。
【００６８】
「用紙の情報」としては、用紙についての、「サイズ」、「種類（厚紙、薄紙、普通紙）」、「トレイの情報」、「手差しの場合における向き」等が挙げられる。たとえば、どの供給トレイにどの種別の用紙が入っているのかも、用紙の情報に含まれるものとする。なお、これら用紙についての用紙の情報については、給紙トレイの近傍に設置されたセンサなどで検知することもできるし、操作パネル３４から予め指定して登録しておくこともできる。
【００６９】
「操作パネルによる設定内容」としては、片面/両面、カラー印字/モノクロ印字、集約コピー（２in１、４in1）、倍率設定、給紙トレイ選択、部数設定、「ホチキス（ステープルとも言う）」、「パンチ」等が挙げられる。
【００７０】
「地域情報」としては、たとえば、「国名」が挙げられる。地域情報は、典型的には、画像形成装置１０００の設置後に設定される。画像形成装置１０００の出荷先が事前に決定している場合には、デフォルトで設定されていてもよい。画像形成装置１０００は、設定された地域情報をＮＶ−ＲＡＭ３１４に記憶する。なお、画像形成装置１０００は、設定された地域情報を固定記憶装置３２に記憶してもよい。
【００７１】
再び、図５を参照して、サイズ判断部１１０５は、原稿読取部１２００が読み取った原稿のサイズを判断する。また、サイズ判断部１１０５は、原稿サイズが定形サイズか否かを判断する。また、サイズ判断部１１０５は、定形サイズの場合、サイズ種別（Ａ５，Ａ４，Ａ３，Ｂ４，Ｂ５等）も判断する。サイズ判断部１１０５は、判断結果を操作ボタン特定部１１０２に通知する。
【００７２】
この場合、操作ボタン特定部１１０２は、原稿のサイズが定形サイズでない場合には、視線領域に存在する２つ以上の操作ボタンのうちから、当該原稿のサイズ（画像形成装置１０００に入力された情報の一例）に応じた操作ボタンを特定する。
【００７３】
文字認識部１１０６は、原稿読取部１２００が読み取った原稿の文字列を、光学的文字認識（ＯＣＲ）によって認識する。文字認識部１１０６は、認識結果を操作ボタン特定部１１０２に通知する。
【００７４】
この場合、操作ボタン特定部１１０２は、視線領域に存在する２つ以上の操作ボタンのうちから、当該文字認識結果（画像形成装置１０００に入力された情報の一例）に応じた操作ボタンを特定する。
【００７５】
図７は、記憶部１３００に記憶されるデータＤ７を説明するための図である。
図７を参照して、データＤ７には、ジョブの操作履歴に基づくデータとして、設定内容同士の組み合わせの確率が記憶されている。一例として、２ｉｎ１の設定の場合に、ホチキスと、モノクロ、片面から両面への印刷の各々が行なわれた確率を表している。データＤ７には、２ｉｎ１のみの場合だけではなく、他の設定（たとえば、４ｉｎ１、両面、カラー等）がなされた場合における組み合わせの設定の各確率が記憶されている。このデータＤ７は、例えば過去に実行されたジョブの設定情報から、各設定の組み合わせで実行された回数が計数され、ジョブの実行回数に対する比率として算出される。
【００７６】
これらの確率は、画像形成装置１０００が使用される度に更新される。また、これらの確率は、画像形成装置１０００のユーザー認証が行なわれる構成である場合には、ユーザー毎に設定されてもよい。すなわち、画像形成装置１０００は、ユーザー毎にデータＤ７を記憶していてもよい。データＤ７を利用する構成例（具体例）については、後述する。なお、本例では操作履歴の情報として各設定の組み合わせの確率を記憶しているが、各ジョブの設定情報自体を操作履歴として記憶させておき、ヘルプ表示の操作ボタンの特定の際に、都度組み合わせの確率が算出されるようにしてもよい。
【００７７】
また、原稿読取部１２００によって再度の読み取り動作が行なわれた場合には、制御部１１００は、記憶部１３００に記憶されていた画像データ（出力候補画像）を破棄してもよい。たとえば、ヘルプ画面の表示後に再度の原稿の読み取りが実行された場合には、ジョブ（たとえば印刷）の実行ボタンが選択されると、制御部１１００は、当該出力候補画像を記憶部１３００から削除すればよい。これによれば、不要なデータを記憶部１３００に記憶しておく必要がなくなる。
【００７８】
＜Ｃ．制御構造＞
図８は、画像形成装置１０００に原稿がセットされてからジョブが実行されるまでの一連の処理の流れを説明するためのフロー図である。
【００７９】
図８を参照して、ステップＳ１００１において、ユーザー（画像形成装置１０００の操作者）が、原稿を画像形成装置１０００にセットする。ステップＳ１００２において、ユーザーによる、各種の設定入力（操作パネル３４に対する入力）が行なわれる。ステップＳ１００３において、画像形成装置１０００は、ユーザーの視線を検知する。ステップＳ１００４において、画像形成装置１０００は、視線が所定時間移動していないかを判断する。
【００８０】
視線が所定時間移動していないと判断された場合（ステップＳ１００４においてＹＥＳ）、画像形成装置１０００は、ステップＳ１００５において、ヘルプ表示処理を実行する。視線が所定時間内に移動していると判断された場合（ステップＳ１００４においてＮＯ）、画像形成装置１０００は、処理をステップＳ１００６に進める。
【００８１】
ステップＳ１００６において、画像形成装置１０００は、ジョブを実行するための実行ボタン（典型的には、スタートボタン）が押下されたか否かを判断する。実行ボタンが押下されたと判断された場合（ステップＳ１００６においてＹＥＳ）、画像形成装置１０００は、ステップＳ１００７において、出力候補画像があるか否かを判断する。実行ボタンが押下されていないと判断された場合（ステップＳ１００６においてＮＯ）、画像形成装置１０００は、一連の処理を終了する。
【００８２】
出力候補画像があると判断された場合（ステップＳ１００７においてＹＥＳ）、画像形成装置１０００は、ステップＳ１００８において、設定変更または原稿の再セットが行なわれたか否かを判断する。出力候補画像がないと判断された場合（ステップＳ１００７においてＮＯ）、画像形成装置１０００は、ステップＳ１０１２において、原稿読取部１２００を動作させて、原稿を読み取る。その後、画像形成装置１０００は、処理をステップＳ１０１１に進める。
【００８３】
ステップＳ１００８において肯定的な判断がなされた場合（ＹＥＳの場合）、画像形成装置１０００は、ステップＳ１００９において、出力候補画像を破棄する。ステップＳ１００８において否定的な判断がなされた場合（ＮＯの場合）、画像形成装置１０００は、処理をステップＳ１０１１に進める。
【００８４】
ステップＳ１０１０において、画像形成装置１０００は、原稿読取部１２００を動作させて、原稿を読み取る。ステップＳ１０１１において、画像形成装置１０００は、指定されたジョブを実行する。
【００８５】
図９は、画像形成装置１０００で実行されるヘルプ表示処理（図８のステップＳ１００５）の詳細を説明するためのフローチャートである。
【００８６】
図９を参照して、ステップＳ１において、コントローラー３１（すなわち、制御部１１００）は、カメラ３９による撮像により得られた画像データに基づいて、ユーザーが見ている視線領域を特定する。ステップＳ２において、コントローラー３１は、視線領域に含まれる操作ボタンを特定する。なお、特定された視線領域を操作パネル３４の表示部３４１２に表示するようにしてもよい。
【００８７】
ステップＳ３において、コントローラー３１は、視線領域に操作ボタンが存在するか否かを判断する。コントローラー３１は、視線領域に操作ボタンが存在しないと判断した場合（ステップＳ３においてＮＯ）には、処理をステップＳ１に戻す。コントローラー３１は、視線領域に操作ボタンが存在すると判断した場合（ステップＳ３においてＹＥＳ）には、ステップＳ４において、当該視線領域に複数の操作ボタンが存在するか否かを判断する。
【００８８】
コントローラー３１は、視線領域に複数の操作ボタンが存在すると判断された場合（ステップＳ４においてＹＥＳ）、ステップＳ５において、画像形成装置１０００に入力された情報に基づいて、視線領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。ステップＳ６において、コントローラー３１は、ステップＳ５において特定された操作ボタンに対応するヘルプ画面を操作パネル３４に表示する。具体的には、コントローラー３１は、操作パネル３４の表示部３４１２に表示する。その後、コントローラー３１は、処理をステップＳ７に進める。
【００８９】
コントローラー３１は、視線領域に存在する操作ボタンが１つであると判断された場合（ステップＳ４においてＮＯ）、ステップＳ８において、視線領域に存在する操作ボタン（１つの操作ボタン）に対応するヘルプ画面を操作パネル３４に表示する。その後、コントローラー３１は、処理をステップＳ７に進める。
【００９０】
ステップＳ７において、コントローラー３１が、ヘルプ画面を閉じるためのユーザー操作を受け付けたか否かを判断する。コントローラー３１は、当該ユーザー操作を受け付けた場合（ステップＳ７においてＹＥＳ）には、一連の処理を終了する。コントローラー３１は、当該ユーザー操作を受け付けていないと判断した場合（ステップＳ７においてＮＯ）には、処理をステップＳ７に戻す。
【００９１】
＜Ｄ．小括＞
以上のように、画像形成装置１０００は、ユーザーによる入力操作を受け付ける操作パネル３４と、複数の操作ボタンを含む操作画面を操作パネル３４に表示させる表示制御部１１０４と、ユーザーの視線に基づき、操作画面におけるユーザーが見ている視線領域を特定する視線領域特定部１１０１と、特定された視線領域に２つ以上の操作ボタンが存在する場合、画像形成装置１０００に入力された情報に基づいて、視線領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する操作ボタン特定部１１０２とを備える。また、表示制御部１１０４は、操作ボタンが特定されたことに基づき、特定された操作ボタンに対応するヘルプ画面を操作パネル３４に表示させる。
【００９２】
このような構成によれば、視線領域に複数の操作ボタンが存在している場合であっても、ユーザーが注目している操作ボタンを特定可能となる。したがって、ユーザーが注目している操作ボタンのヘルプ画面を表示可能となる。
【００９３】
画像形成装置１０００に入力された情報は、原稿の情報、用紙の情報、操作パネル３４に対する入力操作に基づいて設定された設定内容、画像形成装置１０００に対する過去の操作履歴、および画像形成装置１０００の使用地域を表す地域情報の少なくとも１つである。
【００９４】
画像形成装置１０００は、このような各種の情報を用いて、複数の操作ボタンから１つの操作ボタンを特定可能となる。また、画像形成装置１０００は、このような情報を適宜組み合わせて、複数の操作ボタンから１つの操作ボタンを特定することもできる。
【００９５】
＜Ｅ．具体例＞
以下では、「画像形成装置１０００に入力された情報に基づいて、視線領域に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する処理」について、複数の具体例を挙げて説明する。なお、以下に示す具体例は、一例であって、これらに限定されるものではない。各具体例の組み合わせも可能である。
【００９６】
（ｅ１．第１の具体例）
第１の具体例では、説明の便宜上、画像形成装置に入力された情報として、「操作パネルによる設定内容」に着目した処理を説明する。次いで、変形例として、「操作パネルにより設定内容」と「操作履歴」とに着目した処理について説明する。最後に、「操作履歴」に着目した処理について説明する。
【００９７】
（１）操作パネルによる設定内容に着目した処理
図１０は、第１の具体例を説明するための画面遷移図である。まず、ユーザーが画像形成装置１０００の自動原稿搬送ユニット１３に、原稿を複数枚載置する。次いで、ユーザーは、操作パネル３４を操作し、「ページ集約」に関する設定を変更することにより「２ｉｎ１」に設定を変更する。その後、ユーザー操作等に基づき、図１０の状態（Ａ）に示される操作画面が操作パネル３４に表示されたとする。当該操作画面は、複数の操作ボタン５１１，５１２，５１３等を含んでいる。
【００９８】
この場合において、視線領域特定部１１０１は、ユーザーの視線が止まると、当該視線に基づき、操作画面における操作者が見ている視線領域７０１を特定する。このとき、特定された視線領域を操作パネル３４の表示部３４１２に表示するようにしてもよい。
【００９９】
操作ボタン特定部１１０２は、視線領域７０１に、２つの操作ボタンが含まれていると判断する。詳しくは、操作ボタン特定部１１０２は、視線領域７０１に、ホチキスの設定を行う操作ボタン５１１と、拡大連写の設定を行う操作ボタン５１２とが存在すると判断する。
【０１００】
操作ボタン特定部１１０２は、画像形成装置１０００に入力された情報に基づいて、視線領域７０１に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。具体的には、操作ボタン特定部１１０２は、「２ｉｎ１」の設定を行うための入力に基づき、「２ｉｎ１」との組み合わせが禁止（禁則）となっている拡大連写を除する。これにより、操作ボタン特定部１１０２は、複数の操作ボタン５１１，５１２のうちから、ホチキスの設定を行う操作ボタン５１１を特定する。
【０１０１】
表示制御部１１０４は、操作ボタン５１１が特定されたことに基づき、図１０の状態（Ｂ）に示すように、ホチキスに関するヘルプ画面５９１を操作パネル３４に表示する。典型的には、表示制御部１１０４は、ヘルプ画面５９１をポップアップ表示する。
【０１０２】
図１１は、第１の具体例におけるステップＳ５の詳細を表したフロー図である。
図１１を参照して、ステップＳ５１１において、コントローラー３１は、記憶部１３００から画像形成装置１０００に現在設定されている設定内容を読み出す。ステップＳ５１２において、コントローラー３１は、読み出された設定情報に基づき操作ボタンを特定する。
【０１０３】
以上のように、操作ボタン特定部１１０２は、視線領域に２つ以上の操作ボタンが存在する場合、各操作ボタンによって設定される内容が、現在の設定内容と禁則の関係となるか否かを判断する。操作ボタン特定部１１０２は、視線領域に２つ以上の操作ボタンのうちから禁則となる内容が設定される操作ボタンを除いた残りの操作ボタンのうちから、１つの操作ボタンを特定する。
【０１０４】
このような構成によれば、禁則関係を利用しない場合に比べ得て、ユーザーが着目している操作ボタンの特定精度を向上させることができる。また、設定不可能な操作ボタン（項目）のヘルプ画面が表示されてしまうことを防止できるため、ユーザーに対する利便性が向上する。
【０１０５】
（２）操作パネルによる設定内容と操作履歴とに着目した処理
図１２は、ステップＳ５の詳細の他の例を表したフロー図である。
【０１０６】
図１２を参照して、ステップＳ５１１Ａにおいて、コントローラー３１は、記憶部１３００から操作履歴（データＤ７等）を読み出す。ステップＳ５１２Ａにおいて、コントローラー３１は、読み出された操作履歴に基づき操作ボタンを特定する。
【０１０７】
操作ボタン特定部１１０２は、データＤ７を参照して、複数の操作ボタンのうちから１つの操作ボタンを特定してもよい。たとえば、「２ｉｎ１」との組み合わせで最も確率の高い設定はホチキスであるため、操作ボタン特定部１１０２は、複数の操作ボタン５１１，５１２のうちからホチキスの設定を行う操作ボタン５１１を特定するようにしてもよい。このようなデータＤ７（過去の操作履歴）を用いることにより、特定の精度が高まる。
【０１０８】
（３）操作履歴に着目した処理
また、視線領域に複数の操作ボタンが存在しており、これらの操作ボタンによる設定が現在の設定と組み合わせが禁止されていない場合には、操作ボタン特定部１１０２は、データＤ７を用いて複数の操作ボタンのうちから１つの操作ボタンを特定してもよい。具体的には、操作ボタン特定部１１０２は、当該複数の操作ボタンのうちから、確率が最も高い操作ボタンを特定してもよい。たとえば、「２ｉｎ１」が設定されている状態において、「モノクロ」の操作ボタンと「片面から両面への印刷」の操作ボタンとが視線領域に含まれる場合、操作ボタン特定部１１０２は、両操作ボタンのうちから確率の高い方の「モノクロ」の操作ボタンを特定する。
【０１０９】
以上のように、操作ボタン特定部１１０２は、視線領域に２つ以上の操作ボタンが存在する場合、過去の操作履歴に基づき、現在の設定内容とともに設定される確率が最も高い設定内容を判断する。操作ボタン特定部１１０２は、視線領域に存在する２つ以上の操作ボタンのうちから、判断された設定内容を行なうための操作ボタンを特定する。このような構成によれば、確率データを利用しない場合に比べ得て、ユーザーが着目している操作ボタンの特定精度を向上させることができる。
【０１１０】
（ｅ２．第２の具体例）
図１３は、第２の具体例を説明するための画面遷移図である。まず、ユーザーが画像形成装置１０００のプラテン上に、免許証を載置する。その後、ユーザー操作等に基づき、図１３の状態（Ａ）に示される操作画面が操作パネル３４に表示されたとする。当該操作画面には、複数の操作ボタン５２１，５２２，５２３等を含んでいる。
【０１１１】
この場合において、視線領域特定部１１０１は、ユーザーの視線が止まると、当該視線に基づき、操作画面における操作者が見ている視線領域７０２を特定する。
【０１１２】
操作ボタン特定部１１０２は、視線領域７０２に、２つの操作ボタンが含まれていると判断する。詳しくは、操作ボタン特定部１１０２は、視線領域７０２に、カードコピーの設定を行う操作ボタン５２１と、インデックス原稿の設定を行う操作ボタン５２２とが存在すると判断する。
【０１１３】
操作ボタン特定部１１０２は、画像形成装置１０００に入力された情報に基づいて、視線領域７０２に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。具体的には、画像形成装置１０００は、原稿読取部１２００を動作させる。サイズ判断部１１０５が、プラテン上の原稿のサイズを判定する。操作ボタン特定部１１０２は、サイズ判断部１１０５から原稿のサイズの情報を取得する。操作ボタン特定部１１０２は、取得されたサイズの情報に基づいて、操作ボタンを特定する。本例の場合、原稿のサイズはカードサイズと判定されるため、複数の操作ボタン５１１，５１２のうちから、カードコピーの設定を行う操作ボタン５２１を特定する。
【０１１４】
表示制御部１１０４は、操作ボタン５２１が特定されたことに基づき、図１３の状態（Ｂ）に示すように、カードコピーに関するヘルプ画面５９２を操作パネル３４に表示する。典型的には、表示制御部１１０４は、ヘルプ画面５９２をポップアップ表示する。
【０１１５】
コントローラー３１は、原稿読取部１２００による原稿（本例の場合、免許証）の画像データを記憶部１３００に記憶しておく。画像データが、出力候補画像となる。画像形成装置１０００は、記憶部１３００に画像データが記憶された後に操作パネル３４が印刷動作の開始を指示する入力操作を受け付けると、記憶部１３００に記憶された画像データに基づく印刷を行なう。すなわち、本例の場合、画像形成装置１０００は、免許証の印刷を行なう。
【０１１６】
図１４は、第２の具体例におけるステップＳ５の詳細を表した図である。
図１４を参照して、ステップＳ５２１において、コントローラー３１は、原稿読取部１２００を動作させる。ステップＳ５２２において、コントローラー３１は、画像データを出力候補画像として記憶する。ステップＳ５２３において、コントローラー３１は、画像データに基づき操作ボタンを特定する。
【０１１７】
以上のように、画像形成装置１０００は、原稿を読み取る原稿読取部１２００と、原稿のサイズを判断するサイズ判断部１１０５とを備える。原稿読取部１２００が原稿を読み取ることにより、サイズ判断部１１０５は、原稿の情報としての原稿のサイズを判断（取得）する。操作ボタン特定部１１０２は、原稿のサイズが定形サイズでない場合には、視線領域に存在する２つ以上の操作ボタンのうちから、原稿のサイズに応じた操作ボタンを特定する。このような構成によれば、ユーザーが着目している操作ボタンの特定精度を向上させることができる。
【０１１８】
さらに、画像形成装置１０００は、原稿読取部１２００による原稿の画像データを記憶部１３００に記憶する。画像形成装置１０００は、記憶部１３００に画像データが記憶された後に操作パネル３４が印刷動作の開始を指示する入力操作を受け付けると、記憶部１３００に記憶された画像データに基づく印刷を行なう。このような構成によれば、印刷動作の開始を指示する入力操作の後に、原稿の読み取り動作を行なわなくてよいため、印刷を迅速に実行することができる。
【０１１９】
（ｅ３．第３の具体例）
図１５は、第３の具体例を説明するための画面遷移図である。まず、ユーザーが画像形成装置１０００の自動原稿搬送ユニット１３に、原稿を複数枚載置する。次いで、ユーザーが操作パネル３４を操作することにより、図１５の状態（Ａ）に示されるように、「ホッチキス」の設定に関する操作画面が操作パネル３４に表示されたとする。当該操作画面には、複数の操作ボタン５１１，５１２，５１３等を含んでいる。
【０１２０】
この場合において、視線領域特定部１１０１は、ユーザーの視線が止まると、当該視線に基づき、操作画面における操作者が見ている視線領域７０３を特定する。
【０１２１】
操作ボタン特定部１１０２は、視線領域７０３に、２つの操作ボタンが含まれていると判断する。詳しくは、操作ボタン特定部１１０２は、視線領域７０３に、原稿の右上をホチキスで留めるための操作ボタン５３１と、原稿の左上をホチキスで留めるための操作ボタン５３２とが存在すると判断する。
【０１２２】
この場合、コントローラー３１は、自動原稿搬送ユニット１３により原稿を搬送し、原稿を原稿読取部１２００に読み取らせる。文字認識部１１０６は、読み取られた原稿に対して文字認識処理を行なう。また、コントローラー３１は、記憶部１３００に記憶された地域情報を読み出す。このような処理を行なう理由は、ホキチスの位置は、書字方向および画像形成装置１０００が使用されている国によって異なるためである。
【０１２３】
操作ボタン特定部１１０２は、読み出された地域情報と、文字認識結果に基づく書字方向（縦書きまたは横書き）とに基づき、複数の操作ボタン５３１，５３２のうちから、１つの操作ボタンを特定する。たとえば、読み出された地域情報が日本であり、かつ書字方向が横書きの場合、操作ボタン特定部１１０２は、複数の操作ボタン５３１，５３２のうちから、左上にホチキス留めをするための操作ボタン５３２を特定する。
【０１２４】
表示制御部１１０４は、操作ボタン５３２が特定されたことに基づき、図１５の状態（Ｂ）に示すように、ヘルプ画面５９３を操作パネル３４に表示する。典型的には、表示制御部１１０４は、ヘルプ画面５９３をポップアップ表示する。
【０１２５】
図１６は、第３の具体例におけるステップＳ５の詳細を表した図である。なお、図１６では、まず、過去の操作履歴も参照して操作ボタンが特定する処理を実行し、操作ボタンが特定できなかった場合に、原稿の画像データおよび地域情報に基づいて操作ボタンを特定する構成について説明する。詳しくは、画像データに対して文字認識を実行することにより得られる書字方向の情報と、地域情報を用いて操作ボタンを特定する構成について説明する。なお、操作履歴に基づく処理は図１２の第１の実施例と同じである。
【０１２６】
ステップＳ５３１において、コントローラー３１は、記憶部１３００から操作履歴を読み出す。ステップＳ５３２において、コントローラー３１は、読み出された操作履歴に基づき操作ボタンが特定可能か否かを判断する。
【０１２７】
特定可能であると判断された場合（ステップＳ５３２においてＹＥＳ）、視線領域に含まれている複数の操作ボタンのうちから１つの操作ボタンを特定する。その後、ステップＳ５３４において、コントローラー３１は、原稿読取部１２００を動作させる。ステップＳ５３５において、コントローラー３１は、画像データを出力候補画像として記憶する。
【０１２８】
特定可能でないと判断された場合（ステップＳ５３２においてＮＯ）、ステップＳ５３６において、コントローラー３１は、原稿読取部１２００を動作させる。ステップＳ５３７において、コントローラー３１は、画像データを出力候補画像として記憶する。
【０１２９】
次いで、ステップＳ５３８において、コントローラー３１は、文字認識処理を行なって書字方向を特定する。さらに、ステップＳ５３９において、コントローラー３１は、ＮＶ−ＲＡＭ３１４から地域情報を読み出す。その後、ステップＳ５４０において、コントローラー３１は、画像データ（本例では書字方向）と地域情報とに基づいて、視線領域に含まれている複数の操作ボタンのうちから１つの操作ボタンを特定する。
【０１３０】
以上のように、以上のように、画像形成装置１０００は、原稿を読み取る原稿読取部１２００と、光学的文字認識によって原稿の文字列を認識する文字認識部１１０６とを備える。原稿読取部１２００が原稿を読み取ることにより、文字認識部１１０６が、読み取った原稿の文字認識を行なう。これより、コントローラー３１は、文字列の情報を取得することができる。たとえば、コントローラー３１は、書字方向を判断できる。
【０１３１】
操作ボタン特定部１１０２は、視線領域に存在する２つ以上の操作ボタンのうちから、原稿の文字列の情報に応じた前記操作ボタンを特定する。たとえば、操作ボタン特定部１１０２は、文字列の情報としての書字方向と、地域情報とに基づき、視線領域に含まれている操作ボタンのうちから１つの操作ボタンを特定する。このような構成によれば、ユーザーが着目している操作ボタンの特定精度を向上させることができる。
【０１３２】
（ｅ４．第４の具体例）
図１７は、第４の具体例を説明するための画面遷移図である。まず、ユーザーが画像形成装置１０００の自動原稿搬送ユニット１３に、原稿を複数枚載置する。その後、ユーザー操作等に基づき、図１７の状態（Ａ）に示される操作画面が操作パネル３４に表示されたとする。当該操作画面には、複数の操作ボタン５４１，５４２，５４３等を含んでいる。
【０１３３】
この場合において、視線領域特定部１１０１は、ユーザーの視線が止まると、当該視線に基づき、操作画面における操作者が見ている視線領域７０４を特定する。
【０１３４】
操作ボタン特定部１１０２は、視線領域７０４に、２つの操作ボタンが含まれていると判断する。詳しくは、操作ボタン特定部１１０２は、ホチキスの設定を行う操作ボタン５４１と、印刷の倍率を拡大設定するための操作ボタン５４２とが存在すると判断する。
【０１３５】
操作ボタン特定部１１０２は、画像形成装置１０００に入力された情報に基づいて、視線領域７０４に存在する２つ以上の操作ボタンのうちから１つの操作ボタンを特定する。たとえば、原稿のサイズがＡ４サイズであり、かつ全ての給紙トレイ１４Ａ，１４Ｂには、Ａ４サイズの用紙がセットされている場合、操作ボタン特定部１１０２は、原稿のサイズおよび用紙のサイズに基づき、拡大倍率を除する。これにより、操作ボタン特定部１１０２は、複数の操作ボタン５４１，５４２のうちから、ホチキスの設定を行う操作ボタン５４１を特定する。
【０１３６】
ここでの原稿サイズの検知は、自動原稿搬送ユニット１３の原稿トレイにセットした段階で、サイド規制板の位置や、トレイに設けられたセンサの検知により検知することができる。また、給紙トレイにセットされる用紙のサイズは、給紙トレイ近傍に設置されたセンサなどで検知することもできるし、操作パネルから予め指定して登録しておくこともできる。
【０１３７】
表示制御部１１０４は、操作ボタン５４１が特定されたことに基づき、図１７の状態（Ｂ）に示すように、ホチキスに関するヘルプ画面５９４を操作パネル３４に表示する。典型的には、表示制御部１１０４は、ヘルプ画面５９４をポップアップ表示する。
【０１３８】
なお、ホチキス処理は複数枚の用紙に対して実行されるものであるため、原稿も複数枚である必要がある。そこで、視線領域７０４に含まれる複数の操作ボタンのうちからホチキスの設定を行う操作ボタン５４１を特定する前に、原稿の枚数を確認する処理を行なってもよい。
【０１３９】
具体的には、コントローラー３１は、操作ボタンの最終特定に先立ち、自動原稿搬送ユニット１３により原稿を搬送し、原稿を原稿読取部１２００に読み取らせる。この際に、コントローラー３１は、原稿枚数をカウントしておく。操作ボタン特定部１１０２は、カウント値が２以上である場合、ホチキスの設定を行う操作ボタン５４１を特定（最終決定）する。
【０１４０】
図１８は、第４の具体例における処理の流れの前半を説明するためのフロー図である。図１９は、第４の具体例における処理の流れの後半を説明するためのフロー図である。
【０１４１】
図１８および図１９に示す一連の処理の流れは、ステップＳ５ＡをステップＳ５の代わりに備える点において、図９に示す処理の流れと異なる。また、図１８および図１９に示す一連の処理の流れは、ステップＳ９をさらに備える点において、図９に示した処理の流れとは異なる。したがって、以下では、ステップＳ５ＡおよびステップＳ９について説明する。
【０１４２】
図１８を参照して、ステップＳ５Ａは、ステップＳ５４１〜Ｓ５４５を含む。ステップＳ５４１において、コントローラー３１は、画像形成装置１０００に入力された情報に基づき、操作ボタンを絞り込む。ステップＳ５４２において、コントローラー３１は、１つの操作ボタンが特定できたか否かを判断する。
【０１４３】
特定できたと判断された場合（ステップＳ５４２においてＹＥＳ）、コントローラー３１は、処理をステップＳ６に進める。特定できなかったと判断された場合（ステップＳ５４２においてＮＯ）、コントローラー３１は、ステップＳ５４３において、原稿読取部１２００を動作させ、原稿を読み取る。ステップＳ５４４において、コントローラー３１は、画像データに基づき、操作ボタンを絞り込む。ステップＳ５４５において、コントローラー３１は、１つの操作ボタンが特定できたか否かを判断する。
【０１４４】
特定できたと判断された場合（ステップＳ５４５においてＹＥＳ）、図１９を参照して、コントローラー３１は、処理をステップＳ６に進める。特定できなかったと判断された場合（ステップＳ５４５においてＮＯ）、コントローラー３１は、ステップＳ９において、視線領域に存在する全ての操作ボタンに対応するヘルプ画面を操作パネルに表示する。なお、コントローラー３１は、一度に全てのヘルプ画面を操作パネル３４に表示してもよいし、あるいは、表示を順に切り替えることにより、全てのヘルプ画面を操作パネル３４に表示してもよい。
【０１４５】
上記においては、操作ボタンが特定されたことに基づき、画像形成装置１０００が当該特定された操作ボタンに対応するヘルプ内容を操作パネル３４に表示させる構成を例に挙げて説明した。しかしながら、これに限定されず、たとえば、画像形成装置１０００（詳しくは、表示制御部１１０４）は、特定された操作ボタンの表示色および／または大きさを変更したり、当該操作ボタンの選択設定を行ったり、当該操作ボタンに対してカーソルを表示してもよい。
【０１４６】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０１４７】
１０  本体部、１１  画像形成ユニット、１２  スキャナユニット、１３  自動原稿搬送ユニット、１４Ａ，１４Ｂ  給紙トレイ、１５  搬送路、１６  メディアセンサ、１７  反転搬送路、２０  後処理装置、３１  コントローラー、３２  固定記憶装置、３４  操作パネル、３８  バス、３９  カメラ、１０１  中間転写ベルト、１０２，１０３  レジストローラー、１０４Ｃ，１０４Ｋ，１０４Ｍ，１０４Ｙ  画像形成部、１０５  画像濃度センサ、１１１  １次次転写装置、１１５  ２次次転写装置、１１３  給紙ローラー、１２０  定着装置、２２０  パンチ処理装置、２５０  平綴じ処理部、２６０  中綴じ処理部、２７１，２７２，２７３  排出トレイ、３４１  タッチスクリーン、５１１，５１２，５２１，５２２，５３１，５３２，５４１，５４２  操作ボタン、５９１，５９２，５９３，５９４  ヘルプ画面、７０１，７０２，７０３，７０４  視線領域、１０００  画像形成装置、１１００  制御部、１１０１  視線領域特定部、１１０２  操作ボタン特定部、１１０３  ヘルプ情報読出部、１１０４  表示制御部、１１０５  サイズ判断部、１１０６  文字認識部、１２００  原稿読取部、１３００  記憶部、３４１１  撮像部、３４１２  表示部、Ｄ７  データ、ＮＷ  ネットワーク、Ｐ  用紙。
【図１】
2020129269.tif 000003
【図２】
2020129269.tif 000004
【図３】
2020129269.tif 000005
【図４】
2020129269.tif 000006
【図５】
2020129269.tif 000007
【図６】
2020129269.tif 000008
【図７】
2020129269.tif 000009
【図８】
2020129269.tif 000010
【図９】
2020129269.tif 000011
【図１０】
2020129269.tif 000012
【図１１】
2020129269.tif 000013
【図１２】
2020129269.tif 000014
【図１３】
2020129269.tif 000015
【図１４】
2020129269.tif 000016
【図１５】
2020129269.tif 000017
【図１６】
2020129269.tif 000018
【図１７】
2020129269.tif 000019
【図１８】
2020129269.tif 000020
【図１９】
2020129269.tif 000021