(57)【要約】【課題】接触位置を検出するセンサーを用いて撮像された画像から読みとれる情報を入力する情報入力装置および情報入力方法を提供する。【解決手段】接触位置検出部１０２は、所定の透明度を有する平板であり、当該平板に対して接触した位置を検出する。撮像部１０１は、平板の一方側に固設され、当該平板を介して当該平板の他方側を撮像する。画像判別部１０７は、撮像部１０１が撮像した画像を、平板の他方側に情報を印刷した情報印刷物が撮像された第１の画像と、平板の他方側に当該情報印刷物が撮像されていない第２の画像とに判別する。表示制御部１０８は、第１の画像に、第２の画像を重畳した重畳画像を表示部１１１に表示する。入力情報決定部１０９は、接触位置検出部１０２が検出した接触位置に対応する第１の画像上の位置を算出し、当該位置の第１の画像から読みとれる情報印刷物の情報を入力情報とする。【選択図】図１
2008027220.tif 000002
【特許請求の範囲】
【請求項１】
所定の透明度を有する平板に対して接触した位置を検出する接触位置検出部と、
前記平板の一方側に固設され、当該平板を介して当該平板の他方側を撮像する撮像部と、
前記撮像部が撮像した画像を、情報が印刷された情報印刷物が前記平板の他方側に撮像された第１の画像と、当該情報印刷物が前記平板の他方側に撮像されていない第２の画像とに判別する画像判別部と、
前記第１の画像に、前記第２の画像を重畳した重畳画像を表示部に表示する表示制御部と、
前記接触位置検出部が検出した接触位置に対応する前記第１の画像上の指示位置を算出し、当該指示位置における前記第１の画像から読みとれる前記情報印刷物の情報を入力情報とする入力情報決定部とを備える、情報入力装置。
【請求項２】
前記画像判別部は、第１の時点に前記撮像部が撮像した画像を前記第１の画像として判別し、前記第１の時点より後の第２の時点以降に前記撮像部が撮像した画像を前記第２の画像として判別する、請求項１に記載の情報入力装置。
【請求項３】
前記画像判別部は、前記撮像部が撮像した画像から前記情報印刷物が撮像された画像領域と当該情報印刷物が撮像されていない画像領域とを区分し、当該情報印刷物が撮像されていた画像領域に含まれる画像を前記第１の画像として判別し、当該情報印刷物が撮像されていない画像領域に含まれる画像を前記第２の画像として判別する、請求項１に記載の情報入力装置。
【請求項４】
前記接触位置検出部および他の入力装置の少なくとも一方からの入力を受け付ける入力受付部を、さらに備え、
前記画像判別部は、前記入力受付部が前記第１の時点を示す所定の入力を受け付けたとき、前記撮像部が撮像した画像を前記第１の画像として判別する、請求項２に記載の情報入力装置。
【請求項５】
前記画像判別部は、前記撮像部が撮像した画像内から手形形状を抽出する手形抽出部を含み、
前記画像判別部は、前記撮像部が撮像した画像内から前記手形抽出部が手形形状を抽出した時点を前記第２の時点とする、請求項２に記載の情報入力装置。
【請求項６】
前記画像判別部は、前記撮像部が撮像した画像から、前記情報印刷物が表示されている領域以外の画像領域を隙間領域として検出する隙間検出部を含み、
前記表示制御部は、前記撮像部が撮像した画像の隙間領域に前記第１の時点を示す入力を促す表示アイコンを配置し、当該表示アイコンが配置された前記撮像部が撮像した画像を、さらに前記表示部に表示し、
前記入力情報決定部は、前記接触位置検出部が検出した接触位置に対応する前記撮像部が撮像した画像上の指示位置を算出し、当該指示位置が前記表示アイコン上であるか否かを判断する指示位置受付部を含み、
前記画像判別部は、前記指示位置が前記表示アイコン上であると前記指示位置受付部が判断した時点を前記第１の時点とする、請求項４に記載の情報入力装置。
【請求項７】
前記入力情報決定部は、前記指示位置における前記情報印刷物の情報を文字情報として認識して前記入力情報とする文字認識部を含む、請求項１に記載の情報入力装置。
【請求項８】
前記接触位置検出部が連続して検出した接触位置を結んだ曲線で囲まれる接触領域に対応する前記第１の画像上の指示領域を算出する指示位置領域算出部を、さらに備え、
前記文字認識部は、前記指示領域内の前記第１の画像から読みとれる前記情報印刷物の情報を文字情報として認識する、請求項７に記載の情報入力装置。
【請求項９】
前記接触位置検出部が連続して検出した接触位置を結んだ接触直線に対応する前記第１の画像上の指示直線を算出する指示直線算出部を、さらに備え、
前記文字認識部は、前記指示直線の近傍の前記第１の画像から読みとれる前記情報印刷物の情報を文字情報として認識する、請求項７に記載の情報入力装置。
【請求項１０】
前記画像判別部は、前記情報印刷物が撮像されていない画像領域から手形形状を抽出する手形抽出部を含み、
前記画像判別部は、前記情報印刷物が撮像されていない画像領域から手形形状が抽出されたとき、当該画像領域に含まれる画像を前記第２の画像として判別する、請求項３に記載の情報入力装置。
【請求項１１】
前記表示制御部は、前記第２の画像から前記手形抽出部が抽出した手形形状に囲まれた画像を抜き出し、当該抜き出された手形形状画像を前記第１の画像に重畳した重畳画像を前記表示部に表示する、請求項１０に記載の情報入力装置。
【請求項１２】
前記表示制御部は、前記手形形状画像を半透明にして前記第１の画像に重畳した重畳画像を前記表示部に表示する、請求項１１に記載の情報入力装置。
【請求項１３】
前記接触位置検出部が連続して検出した接触位置を結んだ接触直線または接触曲線で示す画像を生成する接触線画像生成部を、さらに備え、
前記表示制御部は、前記重畳画像に、さらに前記接触線画像生成部が生成した画像を重畳して前記表示部に表示する、請求項１に記載の情報入力装置。
【請求項１４】
前記連続して撮像されて判別された複数の前記第１の画像を用いて、当該複数の第１の画像のそれぞれに含まれる特徴箇所を複数抽出し、当該複数の特徴箇所のそれぞれが一致するところをつなぎ合わせて、１つの第１の画像を生成する画像生成部を、さらに備え、
前記表示制御部は、前記画像生成部が生成した第１の画像に、前記第２の画像を重畳した重畳画像を前記表示部に表示し、
前記入力情報決定部は、前記接触位置検出部が検出した接触位置に対応する前記画像生成部が生成した第１の画像上の指示位置を算出し、当該指示位置における当該第１の画像から読みとれる前記情報印刷物の情報を入力情報とする、請求項１に記載の情報入力装置。
【請求項１５】
所定の透明度を有する平板に対して接触した位置を検出する接触位置検出ステップと、
前記平板の一方側から、当該平板を介して当該平板の他方側を撮像する撮像ステップと、
前記撮像ステップで撮像した画像を、情報が印刷された情報印刷物が前記平板の他方側に撮像された第１の画像と、当該情報印刷物が前記平板の他方側に撮像されていない第２の画像とに判別する画像判別ステップと、
前記第１の画像に、前記第２の画像を重畳した重畳画像を表示部に表示する表示制御ステップと、
前記接触位置検出ステップで検出した接触位置に対応する前記第１の画像上の指示位置を算出し、当該指示位置における前記第１の画像から読みとれる前記情報印刷物の情報を入力情報とする入力情報決定ステップとを備える、情報入力方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報入力装置および情報入力方法に関し、より特定的には、接触位置を検出するセンサーを用いて撮像された画像から読みとれる情報を入力する情報入力装置および情報入力方法に関する。
【背景技術】
【０００２】
従来、図２１に示すように、ユーザがアクセスしているかどうかを感知するための人感センサー２１０１と、操作している手の輪郭を取得する撮像手段２１０２と、操作手の指が接触した２次元座標位置を取得するマトリクススイッチ手段２１０３と、これら２１０１〜２１０３から得られた情報を入力する制御手段２１０４と、画像を表示するディスプレイ２１０５から構成され、マトリクススイッチ手段２１０３の下部に撮像手段２１０２を設置して、撮像手段２１０２は、ユーザの操作手の輪郭線を取得し、ディスプレイ２１０５に、表示されているグラフィカルユーザインターフェイスに撮像された手の輪郭線を示した操作手の画像を重ね合わせて表示する情報表示装置が提案されている（例えば、特許文献１参照）。この情報表示装置を適用した車載端末によれば、予め格納されている表示画面（例えば、メニュー画面など）にカメラで撮像されたユーザの操作手を重ね合わせることができる。さらに、表示画面のアイコンなどにユーザの操作手を重ね合わせることで、アイコンを選択することができる。
【特許文献１】特開平１０−２６９０１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記特許文献１に開示されている従来の情報表示装置においては、情報が印刷された情報印刷物を撮像手段で撮像した画像に、さらに撮像手段で撮像された画像（例えば、ユーザの操作手）を重ね合わせて、当該情報印刷物に記載された情報を入力情報とすることができなかった。
【０００４】
例えば、上述の情報入力装置を適用したカーナビゲーション端末において、施設情報が掲載されている雑誌などに載っている住所を目的地として入力する場合には、例えば文字入力画面を用いて目的地を入力する操作を行う必要があり、ユーザにとって不便であった。
【０００５】
それ故に、本発明は、雑誌などに記載されている住所などの文字情報を画像として取り込み、取り込んだ画像を用いて、ユーザが煩わしい操作をすることなく、直感的にユーザが指示した位置にある情報を入力情報とすることが可能な情報入力装置および入力情報方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明は以下の構成を採用した。すなわち、第１の発明においては、接触位置を検出するセンサーを用いて撮像された画像から読みとれる情報を入力情報とする情報入力装置である。情報入力装置は、接触位置検出部と、撮像部と、画像判別部と、表示制御部と、入力情報決定部とを備える。接触位置検出部は、所定の透明度を有する平板に対して接触した位置を検出する。撮像部は、平板の一方側に固設され、当該平板を介して当該平板の他方側を撮像する。画像判別部は、撮像部が撮像した画像を、情報が印刷された情報印刷物が平板の他方側に撮像された第１の画像と、当該情報印刷物が平板の他方側に撮像されていない第２の画像とに判別する。表示制御部は、第１の画像に、第２の画像を重畳した重畳画像を表示部に表示する。入力情報決定部は、接触位置検出部が検出した接触位置に対応する第１の画像上の指示位置を算出し、当該指示位置における第１の画像から読みとれる情報印刷物の情報を入力情報とする。
【０００７】
これにより、情報入力装置は、雑誌などに記載されている住所などの文字情報を撮像して、撮像された画像を用いて、ユーザが煩わしい操作をすることなく、直感的にユーザが指示した位置にある情報を入力情報とすることができる。
【０００８】
第２の発明においては、画像判別部は、第１の時点に撮像部が撮像した画像を第１の画像として判別し、第１の時点より後の第２の時点以降に撮像部が撮像した画像を第２の画像として判別してもよい。
【０００９】
これにより、情報入力装置は、第１の時点に撮像部が撮像した第１の画像と、第１の時点より後の第２の時点以降に撮像部が撮像した第２の画像とに判別するので、撮像した順番に、第１の画像と第２の画像に判別することができる。
【００１０】
第３の発明においては、画像判別部は、撮像部が撮像した画像から情報印刷物が撮像された画像領域と当該情報印刷物が撮像されていない画像領域とを区分し、当該情報印刷物が撮像されていた画像領域に含まれる画像を前記第１の画像として判別し、当該情報印刷物が撮像されていない画像領域に含まれる画像を第２の画像として判別してもよい。
【００１１】
これにより、情報入力装置は、情報印刷物が含まれる部分と含まれない部分とを撮像部が撮像した画像から情報印刷物が撮像された画像領域と当該情報印刷物が撮像されていない画像領域とを区分して、第１の画像と第２の画像に判別することができる。
【００１２】
第４の発明においては、接触位置検出部および他の入力装置の少なくとも一方からの入力を受け付ける入力受付部を、さらに備える。また、画像判別部は、入力受付部が第１の時点を示す所定の入力を受け付けたとき、撮像部が撮像した画像を第１の画像として判別してもよい。
【００１３】
これにより、情報入力装置は、第１の時点を示す所定の入力を受け付けたときに、撮像部が撮像した画像を第１の画像として判別することができる。
【００１４】
第５の発明においては、画像判別部は、撮像部が撮像した画像内から手形形状を抽出する手形抽出部を含む。また、画像判別部は、撮像部が撮像した画像内から手形抽出部が手形形状を抽出した時点を第２の時点としてもよい。
【００１５】
これにより、情報入力装置は、撮像部が撮像した画像内から手形抽出部が手形形状を抽出したとき、抽出された手形形状を含む画像を第２の画像として判別することができる。
【００１６】
第６の発明においては、画像判別部は、撮像部が撮像した画像から、情報印刷物が表示されている領域以外の画像領域を隙間領域として検出する隙間検出部を含む。また、表示制御部は、撮像部が撮像した画像の隙間領域に第１の時点を示す入力を促す表示アイコンを配置し、当該表示アイコンが配置された撮像部が撮像した画像を、さらに表示部に表示する。また、入力情報決定部は、接触位置検出部が検出した接触位置に対応する撮像部が撮像した画像上の指示位置を算出して、当該指示位置が表示アイコン上であるか否かを判断する指示位置受付部を含む。また、画像判別部は、指示位置が表示アイコン上であると指示位置受付部が判断した時点を第１の時点としてもよい。
【００１７】
これにより、情報入力装置は、表示部に表示された撮像部が撮像した画像の隙間領域に第１の時点を示す入力を促す表示アイコンが配置されるので、ユーザが撮像したい時点で、当該表示アイコンに対応する接触位置検出部の操作面を接触することで、接触位置検出部の操作面に配置された情報印刷物を第１の画像として撮像することができる。
【００１８】
第７の発明においては、入力情報決定部は、指示位置における情報印刷物の情報を文字情報として認識して入力情報とする文字認識部を含んでもよい。
【００１９】
これにより、情報入力装置は、指示位置における情報印刷物の情報を文字情報として認識することで、ユーザが煩わしい雑誌などに記載されている住所などの文字情報を入力操作することを省くことができる。
【００２０】
第８の発明においては、接触位置検出部が連続して検出した接触位置を結んだ曲線で囲まれる接触領域に対応する第１の画像上の指示領域を算出する指示位置領域算出部を、さらに備える。また、文字認識部は、指示領域内の第１の画像から読みとれる情報印刷物の情報を文字情報として認識してもよい。
【００２１】
これにより、情報入力装置は、接触位置検出部が連続して検出した接触位置を結んだ曲線で囲まれる接触領域における情報印刷物の情報を文字情報として認識することで、ユーザが煩わしい雑誌などに記載されている住所などの文字情報を入力操作することを省くことができる。
【００２２】
第９の発明においては、接触位置検出部が連続して検出した接触位置を結んだ接触直線に対応する第１の画像上の指示直線を算出する指示直線算出部を、さらに備える。また、文字認識部は、指示直線の近傍の第１の画像から読みとれる情報印刷物の情報を文字情報として認識してもよい。
【００２３】
これにより、情報入力装置は、接触位置検出部が連続して検出した接触位置を結んだ接触直線における情報印刷物の情報を文字情報として認識することで、ユーザが煩わしい雑誌などに記載されている住所などの文字情報を入力操作することを省くことができる。
【００２４】
第１０の発明においては、画像判別部は、情報印刷物が撮像されていない画像領域から手形形状を抽出する手形抽出部を含む。また、画像判別部は、情報印刷物が撮像されていない画像領域から手形形状が抽出されたとき、当該画像領域に含まれる画像を第２の画像として判別してもよい。
【００２５】
これにより、情報入力装置は、情報印刷物が撮像されていない画像領域から手形形状を抽出したとき、当該画像領域に含まれる画像を第２の画像として判別することができる。
【００２６】
第１１の発明においては、表示制御部は、第２の画像から手形抽出部が抽出した手形形状に囲まれた画像を抜き出し、当該抜き出された手形形状画像を第１の画像に重畳した重畳画像を表示部に表示してもよい。
【００２７】
これにより、情報入力装置は、手形形状に囲まれた画像が抜き出されるので、重畳画像における、第１の画像の視認性を低下させることを防ぐことができる。
【００２８】
第１２の発明においては、表示制御部は、手形形状画像を半透明にして第１の画像に重畳した重畳画像を表示部に表示してもよい。
【００２９】
これにより、情報入力装置は、抜き出された手形形状に囲まれた画像を半透明にすることで、重畳画像における、第１の画像の視認性を低下させることを防ぐことができる。
【００３０】
第１３の発明においては、接触位置検出部が連続して検出した接触位置を結んだ接触直線または接触曲線で示す画像を生成する接触線画像生成部を、さらに備える。また、表示制御部は、重畳画像に、さらに接触線画像生成部が生成した画像を重畳して表示部に表示してもよい。
【００３１】
これにより、情報入力装置は、重畳画像に、接触位置検出部が連続して検出した接触位置を結んだ接触直線または接触曲線で示す画像を、さらに重畳して表示部に表示するので、ユーザが指定した指示位置を明確に確認することができる。
【００３２】
第１４の発明においては、連続して撮像されて判別された複数の前記第１の画像を用いて、当該複数の第１の画像のそれぞれに含まれる特徴箇所を複数抽出し、当該複数の特徴箇所のそれぞれが一致するところをつなぎ合わせて、１つの第１の画像を生成する画像生成部を、さらに備える。また、表示制御部は、画像生成部が生成した第１の画像に、第２の画像を重畳した重畳画像を表示部に表示して、入力情報決定部は、接触位置検出部が検出した接触位置に対応する画像生成部が生成した第１の画像上の指示位置を算出し、当該指示位置における当該第１の画像から読みとれる情報印刷物の情報を入力情報としてもよい。
【００３３】
これにより、情報入力装置は、情報が印刷された情報印刷物が、円筒形状や直方体のものであっても、平板の他方側で当該情報印刷物を回転させながら複数の撮像した画像を１つの第１の画像として生成することができる。
【００３４】
上記目的を達成するために、本発明は以下のステップを採用した。すなわち、第１５の発明においては、接触位置を検出するセンサーを用いて撮像された画像から読みとれる情報を入力情報とする情報入力方法である。情報入力方法は、接触位置検出ステップと、撮像ステップと、画像判別ステップと、表示制御ステップと、入力情報決定ステップとを備える。接触位置検出ステップは、所定の透明度を有する平板に対して接触した位置を検出する。撮像ステップは、平板の一方側から、当該平板を介して当該平板の他方側を撮像する。画像判別ステップは、撮像ステップで撮像した画像を、情報が印刷された情報印刷物が平板の他方側に撮像された第１の画像と、当該情報印刷物が平板の他方側に撮像されていない第２の画像とに判別する。表示制御ステップは、第１の画像に、第２の画像を重畳した重畳画像を表示部に表示する。入力情報決定ステップは、接触位置検出ステップで検出した接触位置に対応する第１の画像上の指示位置を算出し、当該指示位置における第１の画像から読みとれる情報印刷物の情報を入力情報とする。
【００３５】
これにより、情報入力方法は、雑誌などに記載されている住所などの文字情報を撮像して、撮像された画像を用いて、ユーザが煩わしい操作をすることなく、直感的にユーザが指示した位置にある情報を入力情報とすることができる。
【発明の効果】
【００３６】
本発明によれば、雑誌などに記載されている住所などの文字情報を撮像して、撮像された画像を用いて、ユーザが煩わしい操作をすることなく、直感的にユーザが指示した位置にある情報を入力情報とすることができる。
【発明を実施するための最良の形態】
【００３７】
（第１の実施形態）
図１〜図１４を参照して、本発明における第１の実施形態に係る情報入力装置について説明する。なお、第１の実施形態および後述する第２の実施形態においては、情報入力装置の一例として、車両を目的地まで案内するナビゲーション装置に本発明を適用した例について説明する。また、各図面において、本発明に関係のない構成要素は省略している。
【００３８】
まず、上記情報入力装置の概要構成を説明する。図１は、第１の実施形態に係る情報入力装置の一例であるナビゲーション装置の構成を示す図である。図１において、ナビゲーション装置１００は、撮像部１０１、接触位置検出部１０２、制御部１１０、表示部１１１、および投光部１１２を備えている。これらの各部は、内部バスによって接続されている。
【００３９】
撮像部１０１は、可視光線を取得する一般的なカメラであり、例えばＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ−Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などを利用したカメラである。なお、可視光を取得する一般的なカメラ以外に、手の形状と動作を取得することが可能な赤外線カメラなどを用いてもかまわない。その場合、後述する投光部１１２により照査する光源は赤外線カメラで取得することができるものとする。また、撮像部１０１は、例えば後述する接触位置検出部１０２の下方空間に設置され、接触位置検出部１０２の操作面に配置される情報印刷物を撮像する。ここで、情報印刷物（以下、原稿と称す）とは、情報が印刷されたものであり、例えば雑誌または紙片などである。また、情報印刷物に印刷された情報とは、文字、バーコード、またはＱＲコードなどである。
【００４０】
表示部１１１は、例えば液晶やＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）等を用いたディスプレイで構成され、ユーザに対して情報を表示する。具体的には、表示部１１１は、撮像部１０１によって撮像された画像や、制御部１１０から出力される画像を表示する。
【００４１】
接触位置検出部１０２は、ユーザが接触した位置を検出することができる平板状のものであり、例えば透明のタッチパッドである。接触位置検出部１０２は、感圧式および静電圧式などのタッチパッドを用いてもかまわない。また、接触位置検出部１０２が検出した位置と表示部１１１の表示画面とは対応付けられており、接触位置検出部１０２の操作面上の位置を指定することで、例えば表示部１１１に表示されたメニューやアイコンを選択することができる。ここで、接触位置検出部１０２の操作面とは、上記の撮像部１０１が設置されていない側の面である。ただし、本発明はこれに限らず、接触位置検出部１０２は、上記タッチパッドだけに限らず、タッチパネルなどであってもかまわない。また、本発明では、接触位置検出部１０２を介して、接触位置検出部１０２の操作面に配置された原稿をカメラを用いて撮像するため、透過率の高い（透明の）接触位置検出部１０２を用いるものとするが、これに限るものではない。また、接触位置検出部１０２は、例えばタッチパネルの代わりに透明なプラスチック製の板を配置し、２台のカメラを用いて、カメラから操作手までの距離が、カメラからプラスチック製の板までの距離と等しくなったときの、操作手によって指定された位置を接触位置検出部１０２の操作面上の指定する位置とする方法を用いてもかまわない。また、接触位置検出部１０２の操作面の領域は撮像部１０１によって撮像される領域である。
【００４２】
投光部１１２は、撮像部１０１によって接触位置検出部１０２の操作面に配置された原稿を撮像することができる波長の光を照査することができる光源であり、例えば蛍光灯などである。投光部１１２は、接触位置検出部１０２の下方空間に配設される。なお、投光部１１２が配設される位置は、撮像部１０１で映像が取得することができる位置であればよい。好ましくは、撮像部１０１が配設される周辺で、接触位置検出部１０２の操作面の裏面による鏡面反射成分が撮像部１０１に映り込まない位置に配設する。
【００４３】
制御部１１０は、後述する種々の情報処理を行ったり、表示部１１１に対する画像の表示を制御したりするものであり、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）で構成される。制御部１１０は、輝度値変化検出部１０３、隙間検出部１０４、画像記憶部１０５、文字認識部１０６、画像判別部１０７、表示制御部１０８、および入力情報決定部１０９を含む。制御部１１０に含まれる各部の詳細については後述する。
【００４４】
なお、上記各部１０３〜１０９は、所定のプログラムをＣＰＵが実行することによって各部の機能が実現される。また、他の実施形態においては、上記各部１０３〜１０９は、ＬＳＩ等の集積回路や専用の信号処理回路を用いて１チップ化したものを用いてもよいし、複数のチップで構成されてもよい。なお、ここではＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路または汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。
【００４５】
次に、情報入力装置の機能的な構成について説明する。図２は、情報入力装置の主な機能的構成を示す図である。
【００４６】
輝度値変化検出部１０３は、撮像部１０１によって撮像された画像の全体的な輝度を算出して、算出された輝度に基づいて、撮像部１０１によって撮像された画像が変化したか否かを検知する。
【００４７】
隙間検出部１０４は、表示部１１１の表示画面のうち、表示部１１１に表示される撮像部１０１が撮像した画像のうち、情報印刷物の領域（以下、原稿領域と称す）以外の領域を検出する。また、検出された原稿領域以外の領域（以下、隙間領域と称す）に、接触位置検出部１０２の操作面に配置された情報印刷物を撮像するための入力を促すボタン（以下、読み取りボタンと称す：本願請求項の表示アイコンに相当する）が表示される。また、読み取りボタンが、押下された時点を第１の時点とする。
【００４８】
画像判別部１０７は、撮像部１０１が撮像した画像を、情報が印刷された情報印刷物が平板の他方側に撮像された画像（以下、第１の画像と称す）と、情報印刷物が平板の他方側に撮像されていない画像（以下、第２の画像と称す）とに判別する。
【００４９】
表示制御部１０８は、第１の画像に、第２の画像を重畳した重畳画像を表示部に表示する。また、上述した読み取りボタンを隙間検出部１０４よって検出された隙間領域に表示する。
【００５０】
入力情報決定部１０９は、接触位置検出部１０２が検出した接触位置に対応する第１の画像上の指示位置を算出し、当該指示位置における第１の画像から読みとれる情報印刷物の情報を入力情報とする。
【００５１】
画像記憶部１０５は、ユーザによって、読み取りボタン（例えば、図３参照）が押下され、撮像部１０１によって撮像された画像を一時的に記憶する。なお、画像記憶部１０５によって記憶される画像の詳細については後述する。
【００５２】
文字認識部１０６は、撮像部１０１によって撮像された原稿画像から、接触位置検出部１０２が検出した接触位置に対応する原稿画像上に算出された指示位置の文字などを認識する。なお、文字以外の、例えばＱＲコードやバーコードなどが認識されてもよい。この場合、文字認識部１０６は、ＱＲコード認識部またはバーコード認識部などを含んでいて、ＱＲコード認識部またはバーコード認識部が各々のコードを文字に変換して、変換された文字を認識する。
【００５３】
次に、図３〜図７を参照して、以上のように構成される情報入力装置における動作の流れについて説明する。なお、図３は、情報入力装置における動作の流れを示すフローチャートである。まず、ステップＳ３０１において、ユーザによって文字認識機能開始ボタン（図示しない）が押下される。これにより、接触位置検出部１０２の操作面上に配置される原稿を撮像することができるようになる。なお、文字認識機能開始ボタンは、表示部１１１に表示されるメニュー画面に配置されていてもよい。
【００５４】
続くステップＳ３０２において、図４の例のように、撮像部１０１は、接触位置検出部１０２の操作面上に配置された原稿を撮像する。なお、原稿が、接触位置検出部１０２の操作面より大きくてもかまわない。この場合、撮像された画像をつなぎ合わせて１つの画像とするイメージモザイキングの技術を用いる公知の方法を用いてもかまわない。具体的には、複数回に分けて撮像された画像に対して、各々特徴点を抽出しておき、各画像がその特徴点を含むように撮影されていれば、その特徴点から画像をつなぎ合わせる。
【００５５】
ステップＳ３０３において、制御部１１０は、原稿有無フラグがオンに設定されているか否かを判定する。ここで、原稿有無フラグがオンに設定されているとは、接触位置検出部１０２の操作面上に原稿が配置されている状態のことである。つまり、接触位置検出部１０２の操作面上に原稿が配置されていない場合には、原稿有無フラグがオフに設定される。判定の結果、原稿有無フラグがオンに設定された（ステップＳ３０３においてＮｏ）場合には、処理は、ステップＳ３０４に進む。ステップＳ３０４において、原稿有無判定の処理が行われる。なお、原稿有無フラグは、初期値として、オフに設定される。
【００５６】
ここで、図５〜図９を参照して、ステップＳ３０４における原稿有無判定処理について説明する。なお、図５は、原稿有無判定処理の動作の流れを示すフローチャートである。また、原稿有無判定処理は、接触位置検出部１０２の操作面上の原稿の有無を、撮像部１０１によって撮像される画像を用いて判定する処理である。まず、ステップＳ５０１において、接触位置検出部１０２の操作面の領域のうち、撮像部１０１によって撮像された原稿の画像（原稿領域）と原稿領域以外の領域で２値化処理を行う。続くステップＳ５０２において、原稿領域のノイズ除去処理を行う。なお、ノイズ除去方法は、領域面積を閾値として用いる公知の方法を用いてもかまわない。
【００５７】
ステップＳ５０３において、撮像部１０１によって撮像された原稿の画像、つまり原稿領域の面積が閾値（Ａ）以上か否かを判定する。判定の結果、原稿領域の面積が閾値（Ａ）以上（ステップＳ５０３においてＹｅｓ）の場合には、表示部１１１の表示画面の全面に原稿が表示されている。この場合、後述する読み取りボタンを表示する領域が存在しない。したがって、続くステップＳ５０４において、制御部１１０は、表示部１１１にメッセージを表示する。例えば、図９のように、「原稿をずらして隙間を空けてください」などのメッセージを表示してもよい。また、原稿領域の面積の閾値（Ａ）は、例えば表示部１１１の表示画面サイズの８割の大きさの面積としてもよい。
【００５８】
一方、原稿領域の面積が閾値（Ａ）未満（ステップＳ５０３においてＮｏ）の場合には、さらに、原稿領域の面積が閾値（Ｂ）未満か否かを判定する（ステップＳ５０５）。判定の結果、原稿領域の面積が閾値（Ｂ）未満（ステップＳ５０５においてＹｅｓ）の場合には、原稿領域の面積が、あまりにも小さすぎるので、画像解像度の性能から文字を認識することができない。したがって、この場合、上記ステップＳ５０１に戻って処理を繰り返す。一方、原稿領域の面積が閾値（Ｂ）以上（ステップＳ５０５においてＮｏ）の場合には、撮像部１０１によって撮像された画像を画像記憶部１０５に格納する。また、画像記憶部１０５に格納された画像は、解像度を小さくした画像であっても構わない。これにより、撮像された画像のデータが、画像記憶部１０５に転送される際、転送処理が軽減される。また、画像解像度は、後述する接触位置検出部１０２の操作面上において、配置される原稿が移動したか否かを判定するときに用いることができる程度であってもよい。
【００５９】
続くステップＳ５０７において、制御部１１０は、原稿有無フラグをオンに設定して、原稿有無判定処理を終了する。
【００６０】
次に、図３に戻り、原稿有無フラグがオンに設定された（ステップＳ３０３においてＹｅｓ）場合には、処理は、ステップＳ３０５に進む。ステップＳ３０５において、読み取りボタン配置位置決定の処理が行われる。
【００６１】
次に、図７〜図１２を参照して、ステップＳ３０５における読み取りボタン配置位置決定処理について説明する。なお、図７は、読み取りボタン配置位置決定処理の動作の流れを示すフローチャートである。ここで、また、読み取りボタン配置位置決定処理は、隙間検出部１０４によって検出された隙間領域に、接触位置検出部１０２に配置された情報印刷物を撮像するための入力を促す読み取りボタンの配置位置を決定する処理である。
【００６２】
まず、ステップＳ７０１において、輝度値変化検出部１０３は、撮像部１０１で撮像される画面の輝度が変化したか否かを判定する。ここで、撮像部１０１によって撮像される画像の輝度の変化は、次の２つの場合の可能性がある。具体的には、図８（ａ）の例のように、接触位置検出部１０２の操作面に配置された原稿が移動した場合と、図８（ｂ）の例のように、ユーザが表示されている読み取りボタン４０２を押下しようとしている場合である。例えば、輝度ヒストグラムを利用して、どの位置の画素の輝度が変化したかを検出する方法を用いてもよいし、周知の方法を用いて輝度の変化を検出するようにしてもよい。判定の結果、輝度が変化していない（ステップＳ７０１においてＮｏ）場合には、処理は、ステップＳ７０６に進む。
【００６３】
一方、輝度が変化している（ステップＳ７０１においてＹｅｓ）場合には、処理は、ステップＳ７０２に進む。ステップＳ７０２において、ステップＳ５０６において取得された原稿領域の画像とステップＳ７０１で撮像された画像とのマッチング率を算出する。なお、マッチング率の算出は、周知の方法を用いて算出するようにしてもよい。
【００６４】
続くステップＳ７０３において、ステップＳ７０２で算出されたマッチング率が閾値以下か否かを判定する。判定の結果、マッチング率が閾値以下（ステップＳ７０３においてＹｅｓ）の場合には、処理は、ステップＳ７０４に進む。ステップＳ１１０４において、制御部１１０は、原稿が移動したと判定して、つまり、図８（ａ）の例のように、接触位置検出部１０２の操作面に配置された原稿が移動したので、原稿有無フラグをオフに設定する。一方、マッチング率が閾値より大きい（ステップＳ７０３においてＮｏ）の場合には、処理は、ステップＳ７０５に進む。続くステップＳ７０５において、制御部１１０は、上述のステップＳ７０１において撮像された画像の輝度の変化は、ユーザの手が撮像部１０１の撮像範囲に挿入されたものと判定する（図８（ｂ）参照）。
【００６５】
続くステップＳ７０６において、隙間検出部１０４は、上述のステップＳ７０１において、撮像部１０１が撮像した画像のうち、原稿画像領域以外の領域（隙間領域）を検出する。続くステップＳ７０７において、ステップＳ７０６において検出された隙間のうち、読み取りボタン４０２の配置位置が決定される。さらに、ステップＳ７０８において、図４の例のように、撮像部１０１によって撮像された画像とともに読み取りボタン４０２が表示部１１１に表示され、読み取りボタン配置位置決定処理を終了する。なお、読み取りボタン４０２の表示位置は、表示部１１１の上下左右のいずれかの端に表示されることが好ましい。これにより、ユーザの手による輝度変化を抑制することができる。
【００６６】
また、原稿が、図９（ａ）から図９（ｂ）のように移動した場合、撮像部が撮像した画像のうち、隙間領域は変化しないので、読み込みボタンの位置を変更する必要はない。
【００６７】
図３に戻り、ステップＳ３０６において、読み取りボタンが押下されたか否かを判定する。具体的には、図１０の例のように、接触位置検出部１０２の操作面上に配置された原稿を撮像した画像と隙間検出部１０４によって検出された隙間領域に読み取りボタン４０２が、表示部１１１に表示されている。この後、ユーザは表示画面を見ながら、読み取りボタン４０２に対応する接触位置検出部１０２の操作面を押下することで、画面を読み込むことができる。つまり、読み取りボタンが押下された（ステップＳ３０６においてＹｅｓ）の場合には、処理は、ステップＳ３０７に進む。これにより、画像判別部１０７は、撮像部１０１が撮像した画像を、読み取りボタン４０２が押下された時点、つまり第１の時点に撮像された画像（第１の画像）として判別する。一方、読み取りボタンが押下されていない（ステップＳ３０６においてＮｏ）の場合には、上記ステップＳ３０２に戻って処理を繰り返す。
【００６８】
続くステップＳ３０７において、撮像部１０１によって撮像された接触位置検出部１０２の操作面に配置された情報印刷物の画像（以下、原稿画像と称す；本発明の第１の画像に相当する）が画像記憶部１０５に記憶される。なお、読み取りボタンが押下されてから、一定の時間経過後に、撮像部が原稿を撮像するようにしてもよい。この場合、いつ撮像されるかをユーザに分かるように表示部１１１にメッセージを表示することが好ましい。例えば、「５秒後に、撮影です。」等のメッセージを表示してもよい。また、表示部１１１にメッセージを表示する代わりに、図示しない音声出力部からユーザに音声で撮像する時点を通知するようにしてもよい。または、メッセージの表示とともに、撮像する時点を音声出力部からユーザに音声で通知するようにしてもよい。
【００６９】
次に、ステップＳ３０８において、撮像部１０１は撮像を再開し、撮像部１０１が撮像した画像を表示部１１１に表示する。この間、ユーザは、接触位置検出部１０２の操作面に配置された原稿を除去する。また、原稿がユーザによって接触位置検出部１０２の操作面上から除去されるまでの間、撮像部１０１は接触位置検出部１０２の操作面側を撮像している画像を表示部１１１に表示していてもよいし、表示しなくてもよい。または、ステップＳ３０７において、撮像された原稿画像、つまり画像記憶部１０５に格納してある画像を表示部１１１に表示し、ステップＳ３０４と同様の原稿有無判定処理を行い、原稿が接触位置検出部１０２の操作面上に存在すると判定された場合は、さらに、表示部１１１に、「原稿をとりのぞいてください」などのメッセージを表示してもよい。
【００７０】
続くＳ３０９において、撮像部１０１が撮像した情報印刷物が含まれていない画像（第２の画像）のうち、ユーザの手形形状の領域（以下、手領域と称す）を抽出する。また、手形形状が抽出された時点を第２の時点とする。なお、手領域を抽出する方法は、手形形状を画像から認識する方法を用いる。例えば、手形形状のモデル画像とのマッチングなどの方法である。また、ユーザがペンなどの用いている場合には、手形形状を抽出する代わりに、ペンのみ、もしくはペンを含んだ手形形状を抽出するようにしてもよい。また、図１１において、手形形状を含む画像から手領域１１０１のみを抽出した画像を含む画像を第２の画像として用いてもよい。
【００７１】
続くステップＳ３１０において、Ｓ３０７で撮像された原稿領域画像（第１の画像）に、ステップＳ３０９において画像判別部１０７が判別した第２の画像を重ね合わせて、表示部１１１に表示する。また、手形形状の表示方法としては、他にもさまざまな形状が考えられる。例えば、手形形状を輪郭線で表示したり、透明や半透明にして表示する。さらに、手形形状ではなく、指先に、さらにマウスカーソルなどの別の表示をしてもよい。また、手形形状が、第１の画像のどの部分を指示しているかが、明示的に示すことができる形態で表示されていればどのような方法を用いてもかまわない。また、第１の画像に、第２の画像を重畳して表示する際、撮像部１０１が撮像するユーザの手の動き方向とは、逆の方向になるように処理を行って、手形形状の画像を表示部１１１に表示する。
【００７２】
続くステップＳ３１１において、第１の画像から読み取りの対象となる情報の位置が指定されたか否かを判定する。具体的には、表示部１１１に表示される第２の画像（手形形状の画像を含んでいる画像）をみながら、第１の画像から読み取りの対象となる情報の位置に、例えば、手形形状の指先が重なるように、接触位置検出部１０２の操作面上をなぞる。判定の結果、第１の画像から読み取りの対象となる情報の位置が指定された（ステップＳ３１１においてＹｅｓ）場合には、処理は、ステップＳ３１２に進む。一方、第１の画像から読み取りの対象となる情報の位置が指定されない（ステップＳ３１１においてＮｏ）場合には、上記ステップＳ３０８に戻って処理を繰り返す。
【００７３】
続くステップＳ３１２において、接触位置検出部１０２が検出した位置を算出し、算出された指示位置に対応した直線または曲線を表す画像を生成し、第１の画像に第２の画像を重畳した画像（以下、重畳画像と称す）に直線または曲線を表す画像をさらに重畳して表示させる。具体的には、図１３または図１４の例のように、表示部１１１に表示される実線（以下、マーキングと称す）が、さらに原稿領域に重畳して表示される。また、図１４の例のように、指定位置を囲んだ領域（以下、指定領域と称す）を指定するようにしてもよい。この場合、線が交わることで、指定位置を囲んだ指定領域が選択されたとしてもよい。
【００７４】
ステップＳ３１３において、上述のように第１の画像から指定された指示位置の画像を抽出する。また、図１３にの例のように、指示位置が直線で指定された場合には、当該指示直線に該当する部分もしくは指示直線から近い文字画像を抽出する。また、図１４の例のように、指示領域で指定された場合には、指示領域内の画像を抽出する。続くステップＳ３１４において、文字認識部１０６は、文字認識エンジンを用いて、抽出された文字画像を文字情報として認識する。なお、文字認識は、公知の方法を用いてかまわない。また、目的地などを設定するときは、郵便番号を示す記号などが頻繁に検出されることを考慮して、文字認識エンジンをカスタマイズしておいてもよい。
【００７５】
（第２の実施形態）
次に、第２の実施形態に係る情報入力装置について説明する。なお、第２の実施形態においても第１の実施形態と同様、情報入力装置の一例として、車両を目的地まで案内するナビゲーション装置に本発明を適用した例について説明する。また、第２の実施形態におけるナビゲーション装置２００の構成は、第１の実施形態におけるナビゲーション装置１００の制御部１１０だけが異なり、それ以外は同じ構成である。したがって、第２の実施形態におけるナビゲーション装置２００の構成の１つである制御部１５０７以外は、詳細な説明を省略する。第２の実施形態においては、原稿とユーザの手を同時に撮像して、撮像された原稿領域画像（第１の画像）と手形形状の画像（第２の画像）を重畳して表示部に表示することに関して主に説明する。
【００７６】
図１５〜図２０を参照して、本発明における第２の実施形態に係る情報入力装置について説明する。また、各図面において、本発明に関係のない構成要素は省略している。
【００７７】
まず、第２の実施形態に係る情報入力装置の概要構成を説明する。図１５は、第１の実施形態に係る情報入力装置の一例であるナビゲーション装置２００の構成を示す図である。図１５において、ナビゲーション装置２００は、撮像部１０１、接触位置検出部１０２、制御部１５１０、表示部１１１、および投光部１１２を備えている。これらの各部は、内部バスによって接続されている。
【００７８】
制御部１５１０は、第１の実施形態におけるナビゲーション装置１００の制御部１１０において、さらに接触位置変換部１５０１を含んでおり、それ以外は同様であるので、詳細な説明は省略する。
【００７９】
なお、上記各部１５０１は、所定のプログラムをＣＰＵが実行することによって各部の機能が実現される。また、他の実施形態においては、上記各部１５０１は、ＬＳＩ等の集積回路や専用の信号処理回路を用いて１チップ化したものを用いてもよいし、複数のチップで構成されてもよい。なお、ここではＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路または汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。
【００８０】
接触位置変換部１５０１は、接触位置検出部１０２と表示部１１１との対応位置関係を算出する。接触位置変換部１５０１の詳細については後述する。
【００８１】
次に、図１６〜図２０を参照して、以上のように構成される第２の実施形態に係る情報入力装置における動作の流れについて説明する。次に、なお、図１７は、第２の実施形態に係る情報入力装置における動作の流れを示すフローチャートである。
【００８２】
次に、具体的な処理の流れを図１７を用いて説明する。まず、ステップＳ１７０１において、ユーザによって文字認識機能開始ボタン（図示しない）が押下される。これにより、接触位置検出部１０２の操作面上に配置される原稿を撮像することができるようになる。なお、文字認識機能開始ボタンは、表示部１１１に表示されるメニュー画面に配置されていてもよい。
【００８３】
続くＳ１７０２において、画像判別部１０７は、撮像部１０１が撮像した画像を、第１の画像と第２の画像に判別する。具体的には、撮像部１０１が撮像した画像から情報印刷物が撮像された画像領域と当該情報印刷物が撮像されていない画像領域とを区分し、当該情報印刷物が撮像されていた画像領域に含まれる画像を第１の画像として判別し、当該情報印刷物が撮像されていない画像領域に含まれる画像を第２の画像として判別する。なお、本実施の形態においては、図１６の例のように、接触位置検出部１０２の操作面を中央から上下に２分割した場合について説明する。この場合、接触位置検出部１０２の操作面に原稿が配置されている領域１０２１と原稿が配置されていない領域１０２２とのように上下半分に仮想的に区分する。そして、図１６において、ユーザの手（操作手）を画面下に、原稿を上に置いた状態を示している。
【００８４】
続くＳ１７０３において、撮像部１０１が撮像した画像から手形形状を認識する。具体的は、情報印刷物が撮像された画像領域と当該情報印刷物が撮像されていない画像領域とを区分し、情報印刷物が撮像されていない画像領域から手形形状が撮像されている画像領域を認識する。また、公知の方法を用いて手形形状を認識してかまわない。なお、このとき、原稿が接触位置検出部１０２の操作面にユーザによって配置されることが望ましい。
【００８５】
次に、ステップＳ１７０４において、撮像部１０１が撮像した画像から手形形状が認識されたか否かを判定する。判定の結果、撮像部１０１が撮像した画像から手形形状が認識された（ステップＳ１７０４においてＹｅｓ）場合には、処理は、ステップＳ１７０５に進む。続くステップＳ１７０５において、画像判別部１０７は、情報印刷物が撮像されていた画像領域に含まれる画像を第１の画像として判別し、当該情報印刷物が撮像されていない画像領域に含まれる画像を第２の画像として判別する。さらに、判別された第１の画像と第２の画像は、画像記憶部１０５に記憶される。一方、撮像部１０１が撮像した画像から手形形状が認識されない（ステップＳ１７０４においてＮｏ）場合には、上記ステップＳ１７０２に戻って処理を繰り返す。
【００８６】
次に、ステップＳ１７０６において、判別された第２の画像から、上述のようにユーザの手形形状の領域（手領域）を抽出する。また、上述した公知の方法を用いて、手領域を抽出してもよい。
【００８７】
続くＳ１７０７において、判別された第２の画像から手領域が抽出されたか否かを判定する。判定の結果、判別された第２の画像から手領域が抽出された（ステップＳ１７０７においてＹｅｓ）場合には、処理は、ステップＳ１７０８に進む。続くステップＳ１７０８において、情報印刷物が撮像されていない画像領域に含まれる画像から手形形状の領域を含んでいる画像を抽出する。具体的には、上述した図１１の例のように、手形形状を含む画像から手領域１１０１のみを抽出した画像を含んでいる画像を第２の画像とする。また、手形形状の表示方法としては、手形形状を透明や半透明にして表示する。一方、判別された第２の画像から手領域が抽出されない（ステップＳ１７０７においてＮｏ）場合には、上記ステップＳ１７０２に戻って処理を繰り返す。なお、ステップＳ１７０７における、手領域の抽出において、手領域の精度をあらわすパラメータを求めることができると望ましい。手領域の精度をあらわすパラメータとしては、予め手形形状モデルを格納しておき、抽出された手形形状の領域と手形形状モデルとの差分を精度として用いる。
【００８８】
次に、ステップＳ１７０９において、上述で区分された第１の画像（原稿画像）に、第２の画像（例えば、手形形状のみの画像）を重畳して、表示部１１１に表示する。続くステップＳ１７１０において、図３のステップＳ３１１と同様の、処理を行う。
【００８９】
ステップＳ１７１０において、判定の結果、第１の画像から読み取りの対象となる情報の位置が指定された（ステップＳ１７１０においてＹｅｓ）場合には、処理は、ステップＳ１７１１に進む。一方、第１の画像から読み取りの対象となる情報の位置が指定されない（ステップＳ１７１０においてＮｏ）場合には、上記ステップＳ１７０２に戻って処理を繰り返す。続くステップＳ１７１１において、位置変換処理が行われる。
【００９０】
ここで、図１８〜図２０を参照して、ステップＳ１７１１における位置変換処理について説明する。なお、図２０は、位置変換処理の動作の流れを示すフローチャートである。また、位置変換処理は、表示部１１１と接触位置検出部１０２との対応する位置関係を算出する処理である。また、本処理は、接触位置検出部１０２を上下に２等分に分割する場合について説明する。また、図１８は、第１の実施形態における表示部１１１と接触位置検出部１０２との対応関係を示す図である。この場合、接触位置検出部１０２の４隅が表示部１１１の４隅に対応している。
【００９１】
一方、図１９は、第２の実施形態における表示部１１１と接触位置検出部１０２との対応関係を示す図である。この場合、接触位置検出部１０２の操作面に原稿が配置されていない領域１０２２（本実施の形態においては、下側半分）の４隅が表示部１１１の４隅に対応している。なお、位置変換式としては、４隅が一致するように設定し、その間の点は線形補間を実施することが望ましい。
【００９２】
ここで、図２０を参照して、接触位置検出部１０２の操作面に原稿が配置されていない領域１０２２の４隅と表示部１１１の４隅との対応について説明する。まず、ステップＳ２００１において、表示する画像サイズ（Ｗ）の縦方向を取得する。次に、ステップＳ２００２において、接触位置検出部１０２の縦方向の解像度（Ｗｔ）を取得する。続くステップＳ２００３において、接触位置検出部１０２の操作面における、接触位置を校正するための校正係数を算出する。このときの校正係数は、接触位置検出部１０２の操作面の半分が表示部１１１の表示画面の全サイズであれば、ステップＳ２００３における、２Ｗ／Ｗｔから算出される。続くＳ２００４において、接触位置検出部１０２が検出した接触位置に校正係数を乗算するして、接触位置検出部１０２の下半分が表示部１１１の原画面を対応することになる。また、上記校正係数を用いれば、原稿が接触位置検出部１０２の操作面の３分の１を使用し、残りの３分の２を手領域に用いて、操作するときも、校正係数を導くことが可能である。
【００９３】
図１７に戻り、ステップＳ１７１２において、図３のステップＳ３１２と同様の、処理を行う。続くステップＳ１７１３〜ステップＳ１７１４において図３のステップＳ３１３〜ステップＳ３１４と同様の、処理を行う。また、ステップＳ１７１５において、認識された文字列を文字列データとして記憶することで、雑誌などに記載されている目的地情報をナビゲーション装置に設定することが可能となる。
【００９４】
上記実施の形態で説明した構成は、単に具体例を示すものであり、本願発明の技術的範囲を制限するものではない。本願の効果を奏する範囲において、任意の構成を採用することが可能である。
【産業上の利用可能性】
【００９５】
本発明に係る情報入力装置および情報入力方法は、接触位置を検出するセンサーを用いて、直感的な操作して、雑誌などの情報を、入力情報とする装置およびその方法に有用である。
【図面の簡単な説明】
【００９６】
【図１】第１の実施形態に係る情報入力装置の一例であるナビゲーション装置の構成を示す図
【図２】第１の実施形態に係る情報入力装置の一例であるナビゲーション装置の機能ブロック図
【図３】第１の実施形態に係る情報入力装置の動作の流れを示すフローチャート
【図４】接触位置検出部の操作面に原稿を配置したときの第１の実施形態に係る情報入力装置の一例であるナビゲーション装置の構成を示す図
【図５】原稿有無判定処理の動作の流れを示すフローチャート
【図６】情報印刷物を撮像した画像が表示部１１１全面に表示される表示例
【図７】読み取りボタン配置位置決定処理の動作の流れを示すフローチャート
【図８】表示部に表示される原稿領域の表示例
【図９】接触位置検出部１０２の操作面に情報印刷物を配置した一例を示す図
【図１０】読み取りボタンを押下する状態を示す表示例
【図１１】第２の画像から、手形形状を抽出するための説明図
【図１２】第１の画像に、第２の画像を重畳した画像の表示例
【図１３】接触位置検出部１０２が検出した直線位置を示す図
【図１４】接触位置検出部１０２が検出した領域位置を示す図
【図１５】第２の実施形態に係る情報入力装置の一例であるナビゲーション装置の機能ブロック図
【図１６】第２の実施形態に係る情報入力装置の一例であるナビゲーション装置の構成を示す図
【図１７】第２の実施形態に係る情報入力装置の動作の流れを示すフローチャート
【図１８】第１の実施形態における接触位置検出部１０２と表示部１１１との対応関係の一例を示す図
【図１９】第２の実施形態における接触位置検出部１０２と表示部１１１との対応関係の一例を示す図
【図２０】位置変換処理の動作の流れを示すフローチャート
【図２１】従来の入力情報装置の構成を示す図
【符号の説明】
【００９７】
１０１  撮像部
１０２  接触位置検出部
１０３  輝度値変化検出部
１０４  隙間検出部
１０５  画像記憶部
１０６  文字認識部
１０７  画像判別部
１０８  表示制御部
１０９  入力情報決定部
１１０、１５１０  制御部
１１１  表示部
１１２  投光部
４０１  隙間領域
４０２  読み取りボタン
１０２１  接触位置検出部における原稿が配置されている領域
１０２２  接触位置検出部における原稿が配置されていない領域
１１０１  手形形状の領域画像
１５０１  位置変換部
２１０１  人感センサー
２１０２  撮像手段
２１０３  マトリクススイッチ手段
２１０４  制御手段
２１０５  ディスプレイ
【図１】
2008027220.tif 000003
【図２】
2008027220.tif 000004
【図３】
2008027220.tif 000005
【図４】
2008027220.tif 000006
【図５】
2008027220.tif 000007
【図６】
2008027220.tif 000008
【図７】
2008027220.tif 000009
【図８】
2008027220.tif 000010
【図９】
2008027220.tif 000011
【図１０】
2008027220.tif 000012
【図１１】
2008027220.tif 000013
【図１２】
2008027220.tif 000014
【図１３】
2008027220.tif 000015
【図１４】
2008027220.tif 000016
【図１５】
2008027220.tif 000017
【図１６】
2008027220.tif 000018
【図１７】
2008027220.tif 000019
【図１８】
2008027220.tif 000020
【図１９】
2008027220.tif 000021
【図２０】
2008027220.tif 000022
【図２１】
2008027220.tif 000023