(57)【要約】      （修正有）【課題】操作者が認識している表示画面の領域に、操作者に呈示する優先度が高い画像を配列させ、画像を探す手間を抑制して操作性を向上させる制御装置を提供する。【解決手段】制御装置１は、操作者の眼を含む撮像領域を撮像して撮像情報Ｓ１を生成する撮像部１０と、撮像部１０から取得した撮像情報Ｓ１に基づいて、操作者の視界のうち、被制御装置の表示画面内において認識されている領域を判定して視界情報Ｓ２として生成する視界情報生成部１２と、視界情報生成部１２から取得した視界情報Ｓ２に基づいて認識されている領域に、表示画面に表示される他の画像よりも操作者に呈示する優先度が高い画像が入るように、被制御装置を制御して表示画面に表示された画像を再配列させる制御部１４と、を備えている。【選択図】図１
2016167119.tif 000002
【特許請求の範囲】
【請求項１】
操作者の眼を含む領域を撮像して撮像情報を生成する撮像部と、
前記撮像部から取得した撮像情報に基づいて、前記操作者の視界のうち、被制御装置の表示画面内において認識されている領域を判定して視界情報として生成する視界情報生成部と、
前記視界情報生成部から取得した前記視界情報に基づいて前記認識されている領域に、前記表示画面に表示される他の画像よりも前記操作者に呈示する優先度が高い画像が入るように、前記被制御装置を制御して前記表示画面に表示された画像を再配列させる制御部と、
を備えた制御装置。
【請求項２】
前記制御部は、前記優先度が高い画像のサイズを小さくして前記認識されている領域に入るように前記被制御装置を制御する、
請求項１に記載の制御装置。
【請求項３】
前記制御部は、前記優先度が高い画像とその周囲の画像のサイズを小さくし、少なくともサイズの小さくなった前記優先度の高い画像が前記認識されている領域に入るように前記被制御装置を制御する、
請求項１に記載の制御装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、制御装置に関する。
【背景技術】
【０００２】
従来の技術として、複数のアイコンを操作パネルに表示させる表示制御部と、複数のアイコンに対する選択の履歴を記憶する履歴記憶部と、を備えた情報機器が知られている（例えば、特許文献１参照。）。
【０００３】
この情報機器の表示制御部は、連続する仮想線に沿う列が過去に選択された特定アイコンによって構成されると共に選択し易いようにアイコンを配列することができるので、操作性が向上する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−８４０２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、従来の情報機器は、操作者の視界の中に、過去に選択された特定アイコンが位置しているとは限らないので、操作パネルを見ている場所によっては、特定アイコンが再配列されることで却って操作性が低下する可能性がある。
【０００６】
従って、本発明の目的は、操作者が認識している表示画面の領域に、操作者に呈示する優先度が高い画像を配列させ、当該画像を探す手間を抑制して操作性を向上させる制御装置を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の一態様は、操作者の眼を含む領域を撮像して撮像情報を生成する撮像部と、撮像部から取得した撮像情報に基づいて、操作者の視界のうち、被制御装置の表示画面内において認識されている領域を判定して視界情報として生成する視界情報生成部と、視界情報生成部から取得した視界情報に基づいて認識されている領域に、表示画面に表示される他の画像よりも操作者に呈示する優先度が高い画像が入るように、被制御装置を制御して表示画面に表示された画像を再配列させる制御部と、を備えた制御装置を提供する。
【発明の効果】
【０００８】
本発明によれば、操作者が認識している表示画面の領域に、操作者に呈示する優先度が高い画像を配列させ、当該画像を探す手間を抑制して操作性を向上させることができる。
【図面の簡単な説明】
【０００９】
【図１】図１（ａ）は、実施の形態に係る制御装置が搭載された車両内部の一例を示す概略図であり、図１（ｂ）は、制御装置のブロック図の一例を示している。
【図２】図２（ａ）は、実施の形態に係る制御装置の撮像部が撮像する撮像領域の一例を示す概略図であり、図２（ｂ）は、表示装置の表示画面の一例を示す概略図である。
【図３】図３（ａ）は、実施の形態に係る制御装置がシミュレーションして得た視界領域の一例を説明するための概略図であり、図３（ｂ）は、視界領域に入れるべき優先度が高いアイコンの一例を示した概略図である。
【図４】図４（ａ）及び図４（ｂ）は、実施の形態に係る制御装置が高優先度アイコンを再配列する動作の一例を説明するための概略図であり、図４（ｃ）は、再配置に関する変形例である。
【図５】図５は、実施の形態に係る制御装置の再配列動作に関するフローチャートである。
【発明を実施するための形態】
【００１０】
（実施の形態の要約）
実施の形態に係る制御装置は、操作者の眼を含む領域を撮像して撮像情報を生成する撮像部と、撮像部から取得した撮像情報に基づいて、操作者の視界のうち、被制御装置の表示画面内において認識されている領域を判定して視界情報として生成する視界情報生成部と、視界情報生成部から取得した視界情報に基づいて認識されている領域に、表示画面に表示される他の画像よりも操作者に呈示する優先度が高い画像が入るように、被制御装置を制御して表示画面に表示された画像を再配列させる制御部と、を備えて概略構成されている。
【００１１】
この制御装置は、操作者の視界のうち、被制御装置の表示画面内において認識されている領域を判定し、この認識されている領域に入るように、他の画像よりも操作者に呈示する優先度が高い画像を配列させるので、操作者が表示画面のどの領域を認識しているのかを判定しない場合と比べて、優先度が高い画像を探す手間を抑制し、操作性を向上させることができる。
【００１２】
[実施の形態]
（制御装置１の全体構成）
図１（ａ）は、実施の形態に係る制御装置が搭載された車両内部の一例を示す概略図であり、図１（ｂ）は、制御装置のブロック図の一例を示している。図２（ａ）は、実施の形態に係る制御装置の撮像部が撮像する撮像領域の一例を示す概略図であり、図２（ｂ）は、表示装置の表示画面の一例を示す概略図である。なお、以下に記載する実施の形態に係る各図において、図形間の比率は、実際の比率とは異なる場合がある。また図１（ｂ）では、主な信号や情報の流れを矢印で示している。
【００１３】
図１（ａ）に示すように、車両５のセンターコンソール５０には、表示装置６が配置されている。この表示装置６は、一例として、表示画面６０の上にタッチパネルを備えている。従って操作者は、例えば、表示画面６０に表示された画像に対してタッチ操作を行うことにより、当該画像に割り当てられた機能の実行を指示することができる。
【００１４】
表示装置６は、例えば、車両５に搭載された電子機器の表示部として機能するように構成されている。この電子機器は、一例として、ナビゲーション装置、空調装置、音楽再生装置及び映像再生装置などである。制御装置１は、これらの電子機器を制御して表示装置６に表示される複数の画像を再配列させるものである。
【００１５】
具体的には、制御装置１は、図１（ｂ）及び図２（ａ）に示すように、操作者９の眼９０を含む領域（撮像領域１００）を撮像して撮像情報Ｓ１を生成する撮像部１０と、撮像部１０から取得した撮像情報Ｓ１に基づいて、操作者９の視界のうち、被制御装置の表示画面６０内において認識されている領域を判定して視界情報Ｓ２として生成する視界情報生成部１２と、視界情報生成部１２から取得した視界情報Ｓ２に基づいて認識されている領域に、表示画面６０に表示される他の画像よりも操作者に呈示する優先度が高い画像が入るように、被制御装置を制御して表示画面６０に表示された画像を再配列させる制御部１４と、を備えて概略構成されている。
【００１６】
本実施の形態では、一例として、図２（ｂ）に示すように、表示画面６０に表示される表示画像６１として複数のアイコン６２が表示されている場合の再配列について説明する。
【００１７】
このアイコン６２は、例えば、タッチ操作されることで、割り当てられたコマンドを被制御装置に処理させるスイッチのように機能する画像である。図２（ｂ）では、一例として、表示画面６０に「ＳＷ１」アイコン６２〜「ＳＷ１５」アイコン６２が５行３列で等間隔に並んでいる状態を図示している。ここで被制御装置とは、車両５に搭載された上述の電子機器である。
【００１８】
なお再配列される画像は、機能が割り当てられたスイッチとして機能するようなアイコンに限定されず、テキストや選択することができない画像などでも良い。選択することができない画像とは、一例として、タッチ操作を受け付けない画像であり、近くに車両が接近している際の報知のための画像、メールの着信を報知する画像などである。
【００１９】
（撮像部１０の構成）
撮像部１０は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサ及びＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどの固体撮像素子を有して構成されている。
【００２０】
撮像部１０は、例えば、図１（ａ）に示すように、運転席５４に着座する操作者９を撮像するように、コラムカバー５１の上部に配置されている。この撮像部１０が撮像する撮像領域１００は、例えば、図２（ａ）に示すように、操作者９の眼９０を含んだ領域となる。従って撮像部１０は、例えば、ダッシュボード５２、メータパネル５３及び車両５の天井などの操作者９の眼９０を撮像領域１００に含む位置に配置されれば良い。
【００２１】
（視界情報生成部１２の構成）
図３（ａ）は、実施の形態に係る制御装置がシミュレーションして得た視界領域の一例を説明するための概略図であり、図３（ｂ）は、視界領域に入れるべき優先度が高いアイコンの一例を示した概略図である。
【００２２】
ヒトの視覚は、例えば、眼球、眼光学系、網膜、脳皮質などにより作り出されるものである。物の認識や視線の移動などの機能は、外界からの情報がこれらの部位で多階層的に処理されることで実現されている。またヒトの視界の範囲は、単眼視の場合、例えば、上方６０度、内方６０度、下方７０度、外方１００度であるとされているが、視線の方向に位置する中心視界は、はっきり見え、その周辺の周辺視界にあるものは、ぼやけて見えて像の存在を知ることができる程度であることが分かっている。
【００２３】
ヒトは、例えば、視線の方向にあっても意識の状態によっては、認識レベルが低いことがある。従って、例えば、視界に入っていても認識レベルが低い領域に存在する画像は、操作者が認識できていない可能性がある。
【００２４】
そこで視界情報生成部１２は、眼球運動に関する情報と外界画像に関する情報とを入力とし、ヒトの視覚をシミュレーションする数理モデルによって定量的に表されたヒトの視野イメージを可視化するように構成されている。
【００２５】
本実施の形態の視界情報生成部１２は、運転席５４に着座する操作者９を撮像して眼球運動の情報とし、表示装置６の表示画面６０の情報を外界画像の情報として、操作者９が表示画面６０のどの領域を認識しているのかを判定する。言い換えるなら、視界情報生成部１２は、眼球運動を計測するため、撮像部１０から撮像情報Ｓ１を取得し、外界画像として表示画面６０の情報である表示画面情報１２０を有している。なお変形例として、外界画像は、例えば、表示画面６０を撮像する撮像部を設け、この撮像部が撮像した画像を外界画像としても良い。
【００２６】
表示画面情報１２０は、操作者９が見ている領域が表示画面６０上のどの領域となるのかをシミュレーション可能な程度に、表示画面６０の大きさ、操作者９から表示画面６０までの距離などの情報を含んでいる。なおこの表示画面情報１２０は、被制御装置から取得しても良い。
【００２７】
視界情報生成部１２は、表示画面６０のどの領域が操作者９に認識されているのかのシミュレーションを行い、視界情報Ｓ２として制御部１４に出力する。図３（ａ）では、一例として、この認識されている領域（視界領域１２１）を表示画面６０の表示画像６１に重ね合わせて図示している。
【００２８】
（制御部１４の構成）
図４（ａ）及び図４（ｂ）は、実施の形態に係る制御装置が高優先度アイコンを再配列する動作の一例を説明するための概略図であり、図４（ｃ）は、再配置に関する変形例である。なお図３（ａ）、図３（ｂ）、図４（ａ）〜図４（ｃ）に示す視界領域１２１は、説明のために図示しているのであって表示装置６には表示されない。同様の理由により、高優先度アイコン６３に付された斜線、図４（ａ）〜図４（ｃ）において点線で示されたサイズ変更前のアイコン６２は、表示装置６に表示されない。
【００２９】
制御部１４は、例えば、記憶されたプログラムに従って、取得したデータに演算、加工等を行うＣＰＵ（Central Processing Unit）、半導体メモリであるＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）等から構成されるマイクロコンピュータである。このＲＯＭには、例えば、制御部１４が動作するためのプログラムが格納されている。ＲＡＭは、例えば、一時的に演算結果等を格納する記憶領域として用いられる。
【００３０】
制御部１４は、被制御装置から取得した配列情報Ｓ３に基づいて、複数のアイコン６２の中から、視界領域１２１に入れるべき優先度が高い高優先度アイコン６３を抽出するように構成されている。図３（ｂ）では、抽出された高優先度アイコン６３を図示している。
【００３１】
この配列情報Ｓ３は、例えば、表示画面６０に表示される画像の位置や大きさ、高優先度アイコン６３の情報などを含む情報である。
【００３２】
本実施の形態では、制御部１４は、高優先度アイコン６３として、図３（ｂ）に斜線で示す「ＳＷ２」アイコン６２〜「ＳＷ５」アイコン６２、及び「ＳＷ７」アイコン６２〜「ＳＷ１０」アイコン６２を抽出する。
【００３３】
制御部１４は、配列情報Ｓ３に基づいて、高優先度アイコン６３の配列を確認し、視界情報Ｓ２に基づく視界領域１２１と高優先度アイコン６３の配列とを比較し、視界領域１２１に入っていない高優先度アイコン６３を判定する。
【００３４】
この高優先度アイコン６３が視界領域１２１に入っていないことの判定は、操作者が高優先度アイコン６３を認識できる程度に、高優先度アイコン６３が視界領域１２１に入っていないことを基準にしてなされる。
【００３５】
従って高優先度アイコン６３が視界領域１２１に入っているとする判定は、一例として、高優先度アイコン６３の一部が視界領域１２１に入っていることでなされることが好ましく、高優先度アイコン６３の面積の半分以上が視界領域１２１に入っていることでなされることがより好ましい。本実施の形態の制御部１４は、高優先度アイコン６３の面積の半分以上が視界領域１２１に入っていることで、高優先度アイコン６３が視界領域１２１に入っていると判定する。
【００３６】
制御部１４は、視界領域１２１に入っていない高優先度アイコン６３を判定した後、高優先度アイコン６３を視界領域１２１に入れるように被制御装置を制御するための制御情報Ｓ４を生成して被制御装置に出力する。
【００３７】
制御部１４は、例えば、高優先度アイコン６３（優先度が高い画像）のサイズを小さくして視界領域１２１（認識されている領域）に入るように被制御装置を制御する制御情報Ｓ４を生成する。
【００３８】
具体的には、制御部１４は、視界領域１２１に入っていない高優先度アイコン６３がある場合、図４（ａ）及び図４（ｂ）に示すように、高優先度アイコン６３のサイズを小さくして、このサイズが小さくなった高優先度アイコン６３を視界領域１２１内に再配置するような制御情報Ｓ４を生成する。図４（ｂ）では、サイズを小さくした高優先度アイコン６３を、視界領域１２１側に寄せるように再配列する様子を示している。
【００３９】
制御部１４は、一例として、高優先度アイコン６３が視界領域１２１に入っていると判断する基準が満たされるように高優先度アイコン６３の再配列を行う。つまり再配列は、一例として、高優先度アイコン６３の一部が視界領域１２１に入るように行われることが好ましく、高優先度アイコン６３の面積の半分以上が視界領域１２１に入るように行われることがより好ましい。本実施の形態では、再配列は、高優先度アイコン６３の面積の半分以上が視界領域１２１に入るように行われる。
【００４０】
ここで変形例として、制御部１４は、高優先度アイコン６３（優先度が高い画像）とその周囲のアイコン６２（画像）のサイズを小さくし、少なくともサイズの小さくなった高優先度アイコン６３が視界領域１２１（認識されている領域）に入るように被制御装置を制御するように構成されても良い。
【００４１】
具体的には、図４（ｃ）に示すように、制御部１４は、例えば、高優先度アイコン６３の周辺の「ＳＷ１２」アイコン６２〜「ＳＷ１５」アイコン６２のサイズも小さくし、高優先度アイコン６３と等間隔に再配列する制御情報Ｓ４を生成する。なお、制御部１４は、全てのアイコン６２のサイズを小さくし、少なくとも高優先度アイコン６３が視界領域１２１に入るように再配列する制御情報Ｓ４を生成しても良い。
【００４２】
また制御部１４は、例えば、高優先度アイコン６３が離れて配置されている場合、視界領域１２１に近い高優先度アイコン６３のみを視界領域１２１に入れる制御情報Ｓ４を生成しても良いし、全ての高優先度アイコン６３を視界領域１２１に入れる制御情報Ｓ４を生成しても良い。
【００４３】
さらに制御部１４は、例えば、高優先度アイコン６３のサイズを小さくしなくても良い場合、高優先度アイコン６３のサイズを変更せずに、その間隔を調整することにより再配列しても良い。
【００４４】
以下に、本実施の形態の制御装置１の動作について図５のフローチャートに従って説明する。
【００４５】
（動作）
制御装置１の制御部１４は、車両５の電源が投入されると、撮像部１０から撮像情報Ｓ１を取得すると共に、被制御装置から配列情報Ｓ３を取得する（Ｓ１）。
【００４６】
視界情報生成部１２は、制御部１４を介して撮像情報Ｓ１を取得すると、撮像情報Ｓ１及び表示画面情報１２０に基づいて視界情報Ｓ２を生成し、制御部１４に出力する（Ｓ２）。
【００４７】
制御部１４は、配列情報Ｓ３に基づいて、表示画面６０に表示されている複数のアイコン６２から操作者に呈示する優先度が高い高優先度アイコン６３を抽出する（Ｓ３）。
【００４８】
制御部１４は、視界情報Ｓ２に基づく視界領域１２１と高優先度アイコン６３とを比較し（Ｓ４）、高優先度アイコン６３が視界領域１２１に入っているか否かを判定する。
【００４９】
制御部１４は、図３（ｂ）に示すように、視界領域１２１に入っていない高優先度アイコン６３が存在する場合（Ｓ５：Ｎｏ）、視界領域１２１に高優先度アイコン６３が入るように再配列する制御情報Ｓ４を生成して被制御装置に出力し（Ｓ６）、再配列の処理を終了する。
【００５０】
ここでステップ５において、制御部１４は、高優先度アイコン６３が視界領域１２１に入っている場合（Ｓ５：Ｙｅｓ）、再配列の処理を終了する。
【００５１】
（実施の形態の効果）
本実施の形態に係る制御装置１は、操作者が認識している表示画面の領域に、操作者に呈示する優先度が高い画像を配列させ、当該画像を探す手間を抑制して操作性を向上させることができる。具体的には、制御装置１は、操作者の視界のうち、被制御装置の表示画面６０内において認識されている視界領域１２１を判定し、この視界領域１２１に入るように、他の画像よりも操作者に呈示する優先度が高い高優先度アイコン６３を配列させるので、操作者が表示画面のどの領域を認識しているのかを判定しない場合と比べて、高優先度アイコン６３を探す手間を抑制し、操作性を向上させることができる。また制御装置１は、優先度の高い高優先度アイコン６３を操作者の視界領域１２１に呈示することができるので、操作者に対する報知などを効率良く行うことができる。
【００５２】
制御装置１は、再配列前の意匠を縮小して視界領域１２１内に配列することができるので、再配列前の意匠が継承され、操作者が抱く意匠の違いによる違和感が抑制される。
【００５３】
制御装置１は、高優先度アイコン６３の周囲のアイコン６２も小さくして再配列する場合、視界領域１２１の外側であっても、視界の周辺視界のようにぼやけているものの像の存在が分かるので、操作者が抱く意匠の違いによる違和感がさらに抑制される。
【００５４】
制御装置１は、アイコン６２の配列の順番を変えることなく、操作者の視界領域１２１に高優先度アイコン６３を配列するので、順番が異なることによる所望のアイコンを探す煩わしさが抑制される。
【００５５】
制御装置１は、操作者に呈示する優先度が高い画像を、認識レベルが高い視界領域１２１に配置することができるので、音などによって操作者の注意を促す場合などと比べて、操作者に不快な思いをさせることが抑制される。
【００５６】
上述の実施の形態及び変形例に係る制御装置１は、例えば、視界情報生成部１２が、コンピュータが実行するプログラム、ＡＳＩＣ（Application Specific Integrated Circuit）及びＦＰＧＡ（Field Programmable Gate Array）等によって実現されても良い。
【００５７】
以上、本発明のいくつかの実施の形態及び変形例を説明したが、これらの実施の形態及び変形例は、一例に過ぎず、特許請求の範囲に係る発明を限定するものではない。これら新規な実施の形態及び変形例は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更等を行うことができる。また、これら実施の形態及び変形例の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態及び変形例は、発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００５８】
１…制御装置、５…車両、６…表示装置、９…操作者、１０…撮像部、１２…視界情報生成部、１４…制御部、５０…センターコンソール、５１…コラムカバー、５２…ダッシュボード、５３…メータパネル、５４…運転席、６０…表示画面、６１…表示画像、６２…アイコン、６３…高優先度アイコン、９０…眼、１００…撮像領域、１２０…表示画面情報、１２１…視界領域
【図１】
2016167119.tif 000003
【図２】
2016167119.tif 000004
【図３】
2016167119.tif 000005
【図４】
2016167119.tif 000006
【図５】
2016167119.tif 000007