(57)【要約】【課題】ユーザの利便性を向上させて、ユーザが使用している携帯端末装置の表示画面を見て操作に戸惑ったとき、どこにいても簡単に次の操作を促す情報を検索表示することができると共に情報検索表示装置の動作状態を容易に把握できる情報検索表示装置及びこれを用いた冊子を提供すること。【解決手段】携帯端末装置に表示された画面情報を取得する撮像手段と、前記画面情報から文字あるいは画像データを認識する画面認識手段と、前記認識した文字あるいは画像データを基にデータベースを検索する検索手段と、前記検索された情報を表示する表示手段とで構成される。【選択図】図２
2004227525.tif 000002
【特許請求の範囲】
【請求項１】
携帯端末装置に表示された画面情報を取得する撮像手段と、
前記画面情報から文字あるいは画像データを認識する画面認識手段と、
前記認識した文字あるいは画像データを基にデータベースを検索する検索手段と、
前記検索された情報を表示する表示手段と、
を有することを特徴とする情報検索表示装置。
【請求項２】
前記データベースには、前記携帯端末装置の取扱説明書が記憶されていることを特徴とする請求項１記載の情報検索表示装置。
【請求項３】
前記表示手段は、前記取扱説明書中の少なくとも前記画面情報に対応するページ数を表示することを特徴とする請求項２記載の情報検索表示装置。
【請求項４】
前記画面情報から文字あるいは画像データを認識できたか否か、または、前記データベースの検索を完了したか否かを報知する報知手段を備えることを特徴とする請求項１乃至請求項３のいずれかに記載の情報検索表示装置。
【請求項５】
請求項１乃至請求項４のいずれかに記載の情報検索表示装置を具備することを特徴とする冊子。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、情報検索表示装置及びこれを用いた冊子に関し、特に携帯端末装置の表示画面内容を介して情報を検索し表示する情報検索表示装置及びこれを用いた冊子に関する。
【０００２】
【従来の技術】
従来の取扱説明書では、例えば、携帯端末装置である携帯電話を操作していてわからない画面が出てきたら、自分でその画面について記載されているページを探さなくてはならないばかりか、近年、携帯電話の取扱説明書は分厚くなり、その操作ページを探すのに手間がかかるため、操作していてわからなくなったとき以外、見ない傾向になってきている。そのため、携帯電話の画面表示部が、ユーザが操作する上で重要な情報源となっている。しかしながら、まれに、ユーザがとまどう画面表示やメッセージがでてきて、それ以降の操作をどうしていいのかわからなくなり、そこまで操作を進めていても分厚いマニュアルをめくり、それまでの操作に関わるページを探さなければならないことが多々あった。さらには、人に聞くと言った声をよく聞くこともあった。
また、従来技術には、電子器具の特定の操作の内容を電子器具から電子器具説明表示装置に送信し、無線により受信したその操作の内容情報を電子器具説明表示装置が受信して電子器具の動作モードを判断し、その動作モードに対応する電子器具の操作内容を説明する情報を表示させるべき表示部を備えた電子器具説明表示装置が提案されていた。
【０００３】
【特許文献１】
特開２００２−１２３３４９号公報
【０００４】
【発明が解決しようとする課題】
しかしながら、電子器具から電子器具説明表示装置に対して、操作内容の情報を通信にて送信しなければならず、通信環境に左右され、通信中に不具合が生じると送信した内容を確実に電子器具説明表示装置が受信することができず、それ以降の処理がなされないまま、電子器具の操作内容に対する情報が得られないという問題があり、かつユーザは全くその状態を把握することもなく待っていなければならないといった事態が発生することもあった。また、電子器具の特定の操作内容をいちいち送信するというステップをとる必要があり、操作が面倒という問題もあった。さらに、通信が可能な範囲内に電子器具説明表示装置が設けられていなければならず、ユーザの利便性という面でも問題があった。また、システム構成の面からも特殊な通信プロトコルが必要になるという問題もあった。
そこで、本発明の目的は、ユーザの利便性を向上させて、ユーザが使用している携帯端末装置の表示画面を見て操作に戸惑ったとき、どこにいても簡単に次の操作を促す情報を検索表示することができると共に情報検索表示装置の動作状態を容易に把握できる情報検索表示装置及びこれを用いた冊子を提供することを目的とする。
【０００５】
【課題を解決するための手段】
上記課題を解決するため、請求項１記載の構成は、携帯端末装置に表示された画面情報を取得する撮像手段と、前記画面情報から文字あるいは画像データを認識する画面認識手段と、前記認識した文字あるいは画像データを基にデータベースを検索する検索手段と、前記検索された情報を表示する表示手段と、を有することを特徴とする。
請求項２記載の構成は、請求項１記載の情報検索表示装置において、前記データベースには、前記携帯端末装置の取扱説明書が記憶されていることを特徴とする。
請求項３記載の構成は、請求項２記載の情報検索表示装置において、前記表示手段は、前記取扱説明書中の少なくとも前記画面情報に対応するページ数を表示することを特徴とする。
請求項４記載の構成は、請求項１乃至請求項３記載の情報検索表示装置において、前記画面情報から文字あるいは画像データを認識できたか否か、または、前記データベースの検索を完了したか否かを報知する報知手段を備えることを特徴とする。
請求項５記載の構成は、請求項１乃至請求項４のいずれかに記載の情報検索表示装置を具備することを特徴とする冊子であることを特徴とする。
【０００６】
【発明の実施の形態】
以下、本発明の実施の形態を図面と共に説明する。
【０００７】
図１は、本発明の情報検索表示装置１を用いた冊子７（取扱説明書）を示す図である。本発明の情報検索表示装置１は、その上方部に文字表示部３（後述する表示手段）、前記文字表示部３の下方部には読み取り部２（後述する撮像手段、画面認識手段）、前記文字表示部３と読み取り部２との間には認識ランプ４が配置されており、冊子になった取扱説明書７の表紙と一体に形成されている。
【０００８】
図２は、本発明における情報検索表示装置１の使用状態を示す概念図である。例えば、冊子になった取扱説明書７の表紙に情報検索表示装置１を一体に形成し、前記情報検索表示装置１内の読み取り部２に、操作不明な携帯端末装置５の画面表示部６をあてることによって、情報検索表示装置１はその画面表示部６の画面表示内容を認識し、その画面に関する内容が記載されている、取扱説明書中の該当ページ数を装置１内の文字表示部３に表示するようになっている。また、後述するが、前記情報検索表示装置１内には前記携帯端末装置５の取扱説明書（操作不明な表示画面に関する内容が記載されている、取扱説明書中の該当ページ数）が記憶されているデータベースが内蔵されており、前記データベースからの検索が成功したときに、ユーザに報知可能とすべく、認識ランプ４（後述する報知手段）が設けられている。なお、上記概念図において取扱説明書に情報検索表示装置１を一体化した例を説明したが、前記情報検索表示装置１内のデータベースにすべての操作に関わる情報を記憶されていれば、情報検索表示装置１と冊子になった取扱説明書７が別体であっても良いことは言うまでもない。
このように本発明の情報検索表示装置及びこれを用いた冊子は、容易にバックなどに入れて携帯可能であり、従来のように、通信環境にも左右されずに容易に取扱説明書から不明な表示画面に対する情報を見ることができる。
【０００９】
図３は、本発明の情報検索表示装置１のブロック図である。
本発明の情報検索表示装置１は、前述した読み取り部２を構成する撮像手段１０および画面認識手段１１と、携帯端末装置５の取扱説明書などが記憶されているデータベース１４と、検索手段１２と、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）などで構成される表示手段１４（文字表示部３）に検索結果を出力制御する表示制御手段１３とで構成されている。撮像手段１０は、ＯＣＲ（Ｏｐｔｉｃａｌ  Ｃｈａｒａｃｔｅｒ  Ｒｅｃｏｇｎｉｔｉｏｎ）処理によりコードデータ化して文字や画像を取り込むイメージスキャナあるいはＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ：固体撮像素子  ）カメラモジュールなどで構成され、前記撮像手段１０が前記携帯端末装置５の画像情報を直接取得する。そして、画面認識手段１１は、前記撮像手段１０により取得されたデータを分析し、検索手段１２にて検索するための該当コードを出力する。前記検索手段１２は、前記画面認識手段１１から出力される該当コードにより前記データベース１４を検索し、その検索結果を表示制御手段１３に出力する。前記表示制御手段１３は、表示手段１４（文字表示部３）に前記検索結果である、例えば前記携帯端末装置５の画面表示部６に表示された画面表示に対応する、取扱説明書７中の対応ページ数を表示する。なお、前記例では取扱説明書中の対応ページ数のみを表示した例を示したが、その他取扱説明書中の各種内容を表示させても良いことは言うまでもない。
【００１０】
このように本発明の情報検索表示装置及びこれを用いた冊子は、容易にバックなどに入れて携帯可能であり、従来のように、通信環境にも左右されずに容易に取扱説明書を検索できる。また、携帯端末装置の画面表示部に表示され、次の操作ステップがわからない状態表示がなされていたとしても、携帯端末装置の画面表示を認識し、少なくとも取扱説明書の記載内容中前記認識された画面表示内容に対応する取扱説明書中の該当ページデータなどの情報を記憶したデータベース１４を容易に検索し、かつその画面の記載ページにユーザを案内する表示することで、次の操作ステップや現在の端末の状態が把握できるようになっている。
【００１１】
図４は、図２および図３に示した情報検索表示装置１にて情報検索を行う手順を示したフローチャート図である。以降、本発明の動作説明をステップ番号にそって説明する。
【００１２】
まず、携帯端末装置５の画面表示部６に表示された画面表示内容を検索する情報検索表示装置１が設けられた冊子になった取扱説明書７に、前記携帯端末装置５の不明な表示画面（画面表示部６）を読み取り部２（撮像手段、画面認識手段）にあてがう。（Ｓ１；ステップ１）そして、最初に前記不明な表示画面中に文字表示があるか否かが判断され（Ｓ２；ステップ２）、文字表示があると判断されると、その文字部分に相当するデータを出力（Ｓ３；ステップ３）し、前記ステップ２にて文字表示がないと判断されると、イメージ画像に相当するデータを出力する（Ｓ４；ステップ４）。
【００１３】
次に、前記ステップ３およびステップ４から得られたデータにより前記携帯端末装置５の不明な表示画面を検索する該当コードがあるか否か画面認識手段１１により認識し（Ｓ５；ステップ５）、前記認識した該当コードにより前記データベース１４を検索し（Ｓ６；ステップ６）、前記検索が成功（取扱説明書中に該当ページあり）したか否かが判断され（Ｓ７；ステップ７）、前記ステップ７により検索が成功したときは、検索成功を認識できる認識ランプ４（報知手段）が点灯し（Ｓ８；ステップ８）、前記文字表示部３（表示手段）に得られた検索結果（例えば、対応する該当ページ数）を表示出力する（Ｓ９；ステップ９）。
【００１４】
ここで、前記ステップ７にて検索が失敗（取扱説明書中に該当ページなし）したときは、検索が失敗したというエラーメッセージを文字表示部３（表示手段）に表示させ（Ｓ１０；ステップ１０）、前記ステップ１に戻り、もう一度最初から認識させる動作を行わせる。また、前記ステップ５において、認識不可能と判断されたときには、認識不可能と判断されたことを示すエラーメッセージを文字表示部３（表示手段）に表示させる（Ｓ１１；ステップ１１）なお、目的のページを取得したら、前記情報検索表示装置１の認識ランプ４（報知手段）が点灯するので、点灯したら携帯端末装置５を読み取り部２（撮像手段１０、画面認識手段１１）から離してもよい。
【００１５】
さらに、上記したステップ１０およびステップ１１にて前述した各エラーメッセージを文字表示部３に表示させる例としたが、各エラーメッセージ表示において、前記情報検索表示装置１の認識ランプ４（報知手段）の色を変えたり、点滅・点灯動作を行わせたりして種々の報知形態で、ユーザに報知しても良いことは言うまでもない。
【００１６】
このようにすれば、ユーザは、認識ランプ４（報知手段）によりエラーメッセージを良く見なくともすぐに、前記情報検索表示装置１にて携帯端末装置５の画面表示部６に表示された不明な表示画面を読み取り部２（撮像手段１０、画面認識手段１１）にて認識できたか否か、または、携帯端末装置５の画面表示部６に表示された不明な表示画面に対する取扱説明書中の該当ページ数の検索に成功したか否かがすぐに把握でき、ユーザに対して更なる困惑を与えることがないようにすることができる。さらに、携帯端末装置５などの製造メーカに備えられたご相談窓口へのユーザの問い合わせが減ると共に、取扱説明書がユーザに上手に活用されるようになる。
【００１７】
図５および図６は、前述した図４に示した情報検索表示装置１にて情報検索を行う手順を示したフローチャート中のステップ３からステップ９における概要（検索参考例）を示したもので、図５中の漢字読み取り欄にある文字は、携帯端末装置５の画面表示部６に表示された不明な表示画面中にある文字を前述したステップ２、ステップ３、ステップ５（撮像手段１０、画面認識手段１１）にて表示文字を読み取りかつ認識し、その後データベース１４の検索を完了し、検索結果（該当ページ）が表示されたときの一例を示している。すなわち、携帯端末装置５の画面表示部６に表示された不明な表示画面中に「マナートーク」という文字が表示され、その意味や設定操作などがわからないとき、情報検索表示装置１の読み取り部２（撮像手段１０、画面認識手段１１）に携帯端末装置５の画面表示部６をあて、その画面表示内容を認識し、その画面に関する内容が記載されている、「マナートーク→６６ページ」（取扱説明書中の該当ページ数）を情報検索表示装置１内の文字表示部３（表示手段１４）に表示する。
【００１８】
また、図６中のイメージ読み取り欄にある文字は、携帯端末装置５の画面表示部６に表示された不明な表示画面中にある文字を前述したステップ２、ステップ４、ステップ５（撮像手段１０、画面認識手段１１）にてイメージ画面を読み取りかつ認識し、その後データベースの検索を完了し、検索結果が表示されたときの一例を示している。すなわち、携帯電話の不明な表示画面が真っ黒で真ん中あたりに記号らしき図形が表示され、その意味や設定操作などがわからないとき、情報検索表示装置１の読み取り部２に携帯端末装置５の画面表示部６をあて、その画面表示内容を認識し、その画面に関する内容が記載されている、「パーシャルモード→３１９ページ」（取扱説明書中の該当ページ数）を情報検索表示装置１内の文字表示部３（表示手段１４）に表示する。
【００１９】
このように本発明の情報検索表示装置は、容易にバックなどに入れて携帯可能であり、従来のように、通信環境にも左右されずに容易に取扱説明書を検索できる。また、携帯端末装置５に表示され、次の操作ステップがわからない状態表示がなされていたとしても、本発明の情報検索表示装置に携帯端末装置５の画面表示部６に表示された画面表示内容を認識し、少なくとも取扱説明書の記載内容中前記認識された画面表示内容に対応する取扱説明書中の該当ページデータなどの情報を記憶したデータベース１４を容易に検索し、かつその画面の記載ページにユーザを案内表示することで、次の操作ステップや現在の端末の状態が把握できるようになっている。また、不明な表示画面の認識ができたか否か、あるいは、データベースの検索が成功したか否かが認識できる認識ランプ４（報知手段）によりエラーメッセージを良く見なくともすぐに検索状況が把握できるようになっている。さらに、携帯端末装置などの製造メーカに備えられたご相談窓口へのユーザの問い合わせが減ると共に、取扱説明書がユーザに上手に活用されるようになる。
【００２０】
なお、本発明は上記実施の形態例に限定されるものではなく、本発明の要旨を逸脱しない範囲内での種々の改良や変更等は何ら差し支えない。例えば本実施形態では、検索結果として該当ページ数を表示させるようにしたが、該当ページの内容を表示させるようにしても良い。また、本実施形態では、携帯端末装置の取扱説明書中の該当ページ数を記憶したデータベースとしたが、取扱説明書の全てのデータをデータベースに記憶させてもよく、また、携帯端末装置（例えば、携帯電話、ＰＤＡ端末等の通信端末）以外の各種電子機器の取扱説明書などを記憶させても良いことは言うまでもない。
【００２１】
【発明の効果】
以上説明したように、本発明の情報検索表示装置では、ユーザの利便性を向上させて、ユーザが携帯端末装置の画面表示部に表示された表示内容を見て、次の操作に戸惑ったとき、どこにいても簡単に次の操作を促す情報を検索表示することができる。
【図面の簡単な説明】
【図１】本発明における情報検索表示装置１を用いた冊子（取扱説明書）である。
【図２】本発明における情報検索表示装置１の使用状態を示す概念図である。
【図３】本発明における情報検索表示装置１のブロック図である。
【図４】本発明の情報検索表示装置１にて情報検索を行う手順を示したフローチャートである。
【図５】本発明の情報検索表示装置１における情報検索例（文字読取）を示した参考図である。
【図６】本発明の情報検索表示装置１における他の情報検索（イメージ読取）を示した参考図である。
【符号の説明】
１・・・情報検索表示装置
２・・・読み取り部（撮像手段、画面認識手段）
３・・・文字表示部（表示手段）
４・・・認識ランプ（報知手段）
５・・・移動体通信端末
６・・・画面表示部
１０・・・撮像手段
１１・・・画面認識手段
１２・・・検索手段
１３・・・表示制御手段
１４・・・データベース
【図１】
2004227525.tif 000003
【図２】
2004227525.tif 000004
【図３】
2004227525.tif 000005
【図４】
2004227525.tif 000006
【図５】
2004227525.tif 000007
【図６】
2004227525.tif 000008