(57)【要約】【課題】透明な赤色の筆記具で黒文字の文書の中の語句に記号の記入と範囲を塗りつぶし、画像処理装置で読み込み、また機械に貼られた紙等の項目に同様な方法で項目に記号の記入と範囲を塗りつぶし、スマホ等で撮影し、操作者の希望する検索に限らない各種のアプリケーションプログラムを実行できる画像処理装置及びコンピュータシステムを提供する。【解決手段】画像処理装置やスマホ等で、記号のパターンとその記号に対応するプログラムをコンピュータシステムに登録しておき、記号が記入された原稿や機械に貼られた紙を原稿読み取り装置やスマホで読み込み、記号が確定すると、その記号に対応するプログラムを実行させることを特徴とする。【選択図】図１
2020004349.tif 000002
【特許請求の範囲】
【請求項１】
画像処理装置の記憶部に記憶される文字認識プログラムにおいて、文字、数字、図形からなる記号のパターンとその記号に対応するプログラムを登録しておき、前記の記号が記入された原稿を原稿読み取り装置で読み込み、前記の記号が確定すると、その記号に対応するプログラムを実行させることを特徴とする画像処理装置。
【請求項２】
画像処理装置の操作者が文書の中の文字列に請求項１における実行させたいプログラムがあるときに、対象文字列の前に透明な赤色の筆記具で請求項１における記号を記入し、また文字列の範囲を同様の筆記具で塗りつぶして対象文字列の範囲を指定し、原稿読み取り装置で読み取り、文字認識プログラムにより前記の記号が確定すると、その記号に対応するプログラムを対象文字列に対し実行させることを特徴とする画像処理装置。
【請求項３】
請求項２において、対象文字列の前に透明な赤色の筆記具で請求項１における記号を記入し、また文字列の範囲を同様の筆記具で塗りつぶして対象文字列の範囲を指定し、原稿読み取り装置で読み取ると、黒色文字部分と赤色の請求項１における記号および対象文字列の文字がない赤色の範囲部分を自動判別し、画像記憶部に黒色文字部分と赤色部分のイメージ画像を保存し、黒色文字部分のイメージ画像を文字認識プログラムで処理し、黒色文字を確定し、テキストファイルに変換し、さらに透明化し、透明テキストとして黒色文字部分のイメージ画像と重ね合わせて保存する。また、赤色部分のイメージ画像も文字認識プログラムで処理し、赤色の請求項１における記号と対象文字列の範囲を確定し、テキストファイルに変換し、さらに透明化し、透明テキストとして赤色部分のイメージ画像と重ね合わせて保存する。
次に、黒色文字部分と赤色部分の透明テキストが重ね合わせた後に、さらに合成し、原稿を原稿読み取り装置で読み取った後に、操作者が上記処理の開始の指示を出すと、赤色の記号に対応する請求項１における記憶部に格納されたプログラムを実行し、表示する表示装置を持つことを特徴とする画像処理装置。
【請求項４】
請求項１から３のいずれかに記載の画像処理装置を備えていることを特徴とする複合機。
【請求項５】
スマートフォンやデジタルカメラの使用者が請求項２に記載の方法で文書の中の文字列に実行させたいプログラムがあるときに、対象文字列の前に透明な赤色の筆記具で記号を記入し、また文字列の範囲を同様の筆記具で塗りつぶして対象文字列の範囲を指定し、撮影すると、通信で接続された画像処理装置を含むコンピュータシステムの記憶部に格納された文字認識プログラムによりその記号に対応するプログラムを対象文字列に対し実行し、通信で接続された請求項１における記号対応のプログラムを実行し、前記スマートフォンやデジタルカメラに表示することを特徴とする画像処理装置を含むコンピュータシステムと文字認識プログラム。
【請求項６】
コンピュータを請求項１から５のいずれかに記載の画像処理装置を動作させるためのコンピュータプログラム。
【請求項７】
請求項６に記載されたコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体。
【請求項８】
請求項２に記載された透明な赤色の記号を、透明な素材で裏に簡単に剥がせる接着剤を塗布したものに印刷したシール状の物体。
【発明の詳細な説明】
【技術分野】
【０００１】本発明は、文字認識方法、画像処理装置、複合機、文字認識プログラムを含むコンピュータプログラム及び記録媒体に関するものである。
【背景技術】
【０００２】従来から、パソコンやスマホなどでは、ＰＤＦにおいて、注釈として、アイコンにより、ファイルや音声ファイルの添付などができた。（例えば、非特許文献１参照）
また、スマホではＱＲコードなどの二次元コードなどの画像認識マーカからも、インターネットに接続し画像情報が得ることができる。
また、リコー（株）社のＴＡＭＡＧＯ  Ｃｌｉｃｋｅｒでは操作者がＣｌｉｃｋａｂｌｅ  Ｐａｐｅｒという専用紙を使い、任意の画像認識マーカを選択することができた。
そして、ペンテル社のスマホのアプリのＡｎｋｉＳｎａｐでは、本の中の記憶したい語句の上から蛍光ペンでなぞって、マスキングやトリミングができる。また、同様にスマホで赤の透明マーカペンでなぞって撮影したところだけ黒くし透明な赤のプラスチックで隠す手間を省くアプリもある。
スマホのアプリの中には文書の一部を撮影し、そこから情報を得ることができ、例えば、ＮｉｎｊａＮａｖｉというスマホのアプリには画像認識マーカを必要としないで撮影した範囲の語句に関する情報がリンク先から得られるものがある。
また、ｉＰｈｏｎｅのアプリのＫＹＢＥＲＳｍａｒｔ  Ｍａｒｋｅｒでは、撮影した文章の必要なところだけ簡単にテキスト化できる機能がある。さらに、翻訳のアプリケーションプログラムと連動し、翻訳するソフトウエアもある。
さらに、画像処理装置において文字認識処理においてのアドビ社のＰｏｒｔａｂｌｅＤｏｃｕｍｅｎｔＦｏｒｍａｔという透明テキストの技術を用いて原稿を読み込んだ後に、テキストファイル化して検索が出来ることが知られており、（例えば、非特許文献２、特許文献１、３参照）
また、この画像処理装置をそなえている複合機もある。（例えば、特許文献２参照）
さらに、活字ＯＣＲソフトウエアのＰａｎａｓｏｎｉｃ社のＯＣＲソフト「読み取り革命」は各種の機能を持ち、例えば、翻訳ソフトと連動し、英語の資料を読み込み、日本語に翻訳する機能もある。また開発用キット「カラーＯＣＲライブラリー」では、ソフトウエア開発者向けに、活字認識、帳票認識、免許証認識など各種のＯＣＲエンジンを提供していて、客先の既存ソフトウエアやシステムに組み込むことができる。
Ｃ言語による画像処理にでは、二色に分離でき、（例えば、非特許文献３参照）、また、複合機においては、黒文字の文書に赤色で加筆された原稿を読み込んだ後で、コピーすると赤黒自動判別し、黒文字部分と赤文字部分に分けられるものがある。（例えば、非特許文献４参照）
さらに、赤色とその他の色を判別しにくい色弱者のために、赤色とその他の色とによってもともと区分けされていた内容を見分けやすくする技術がある。（例えば、特許文献４参照）
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２３１６４８号公報
【特許文献２】特開２０１１−１０２３２号公報
【特許文献３】特開２０１４−１０３５２９号公報
【特許文献４】特開２０１０−２２６３６７号公報
【非特許文献】
【０００４】
【非特許文献１】「日経パソコンＰＤＦの超基本を確認する」日本経済新聞社  ２０１６年２月２２日号、ｐ２２〜ｐ３７
【非特許文献２】リコー（株）「ｉｍａｊｉｏ  ＭＰＣ５０００１／Ｃ４００１／Ｃ３３０１／Ｃ２８０１シリーズクイックガイド  スキャナ・プリンタ編  ２０１０年１０月版、ｐ２１−４必要に応じて読み取った文書の設定をし、ファイル形式でＰＤＦ形式を選ぶことができる。
【非特許文献３】Ｃ言語で学ぶ実践画像処理  オーム社  八木信行・井上誠喜・林正樹・中須英輔・三谷公二・奥井誠人・鈴木正一・金次保明共著」平成４年５月３０日発行  赤黒自動判別（ｐ３２〜ｐ４０、ｐ１３０〜ｐ１３７）
【非特許文献４】リコー（株）「平成２９年１１月２７日インターネット検索」カラーコピー機能  指定した２色でコピーする。
【発明の概要】
【発明が解決しようとする課題】
【０００５】しかしながら、非特許文献１のＰＤＦに関連する透明テキストの埋め込みや注釈技術に関してのパソコンやスマホを使う技術であるが、文書の作成上のツールであり、そのアイコンは限られていて、あくまでも画像処理技術だけであった。
ＱＲコードなどの二次元コードなどの画像認識マーカからも、インターネットに接続し画像情報が得ることができたが、同マーカは企業等からの提供されたものであった。
また、リコー（株）社のＴＡＭＡＧＯ  Ｃｌｉｃｋｅｒでは操作者が任意の画像認識マーカを選択することができたが、Ｃｌｉｃｋａｂｌｅ  Ｐａｐｅｒという専用紙が必要だった、
また、スマホ関連のペンテル社のアプリのＡｎｋｉＳｎａｐなどは暗記のための手助けとなる方法で画像処理のみであった。
さらに、スマホのアプリのＮｉｎｊａＮａｖｉでは文書の一部を撮影し、リンク先から情報を得ることができたが、使用者自身が希望するプログラムを関連させることはできなかった。
ＫＹＢＥＲＳｍａｒｔ  Ｍａｒｋｅｒなどでは、撮影したところ文章をテキスト化でき、翻訳にも応用できたが、工場等への応用等にはできることは限られていた。
非特許文献２では複合機により、原稿を使用者の希望するテキスト形式に変更でき、特許としては、例えば特許文献１、３がありの画像処理装置において、原稿を読み込んだ後、透明テキストを貼り付け検索ができる機能が主な目的であり、さらに、特許文献２では複合機においても応用できたが、あくまでも検索機能に限られていた。
非特許文献３、４では複合機で黒文字原稿に赤で追記した赤黒混在の原稿などを原稿読み取り装置で読み込んだ後、赤と黒の二色に分けられるが、あくまでも画像処理技術に関してであり、そこから他のアプリケーションプログラムへとの発展性はなかった。
特許文献４では背後の色を透過する性質を有する色材を用い、元の画像データが表す画像を形成する色材とで画像形成後における光沢の度合い異なるような複数の色材を用いて画像を形成するものであるが、背後の色を透過する性質を有する色材の使い方は画像だけにとどまり、前記複合機と同様に、そこから他のアプリケーションプログラムへとの発展性はなかった。【０００６】本発明は、上記の課題を解決し、さらに、ＰＣ、スマホ、複合機などの使用者が検索に限らない希望する各種のアプリケーションプログラムを実行できるようにすることにある。
【課題を解決するための手段】
【０００７】そこで、上記課題を解決するため、請求項１に記載の発明は画像処理装置の記憶部に記憶される文字認識プログラムにおいて、文字、数字、図形からなる記号のパターンとその記号に対応するプログラムを登録しておき、前記の記号が記入された原稿を原稿読み取り装置で読み込み、前記の記号が確定すると、その記号に対応するプログラムを実行させることを特徴とする画像処理装置である。【０００８】そこで、上記課題を解決するため、請求項２に記載の発明は画像処理装置の操作者が文書の中の文字列に請求項１における実行させたいプログラムがあるときに、対象文字列の前に透明な赤色の筆記具で請求項１における記号を記入し、また文字列の範囲を同様の筆記具で塗りつぶして対象文字列の範囲を指定し、原稿読み取り装置で読み取り、文字認識プログラムにより前記の記号が確定すると、その記号に対応するプログラムを対象文字列に対し実行させることを特徴とする画像処理装置である。【０００９】そこで、上記課題を解決するため、請求項３に記載の発明は請求項２において、対象文字列の前に透明な赤色の筆記具で請求項１における記号を記入し、また文字列の範囲を同様の筆記具で塗りつぶして対象文字列の範囲を指定し、原稿読み取り装置で読み取ると、黒色文字部分と赤色の請求項１における記号および対象文字列の文字がない赤色の範囲部分を自動判別し、画像記憶部に黒色文字部分と赤色部分のイメージ画像を保存し、黒色文字部分のイメージ画像を文字認識プログラムで処理し、黒色文字を確定し、テキストファイルに変換し、さらに透明化し、透明テキストとして黒色文字部分のイメージ画像と重ね合わせて保存する。また、赤色部分のイメージ画像も文字認識プログラムで処理し、赤色の請求項１における記号と対象文字列の範囲を確定し、テキストファイルに変換し、さらに透明化し、透明テキストとして赤色部分のイメージ画像と重ね合わせて保存する。
次に、黒色文字部分と赤色部分の透明テキストが重ね合わせた後に、さらに合成し、原稿を原稿読み取り装置で読み取った後に、操作者が上記処理の開始の指示を出すと、赤色の記号に対応する請求項１における記憶部に格納されたプログラムを実行し、表示する表示装置を持つことを特徴とする画像処理装置である。【００１０】そこで、上記課題を解決するため、請求項４に記載の発明は請求項１から３のいずれかに記載の画像処理装置を備えていることを特徴とする複合機である。【００１１】そこで、上記課題を解決するため、請求項５に記載の発明はスマートフォンやデジタルカメラの使用者が請求項２に記載の方法で文書の中の文字列に実行させたいプログラムがあるときに、対象文字列の前に透明な赤色の筆記具で記号を記入し、また文字列の範囲を同様の筆記具で塗りつぶして対象文字列の範囲を指定し、撮影すると、通信で接続された画像処理装置を含むコンピュータシステムの記憶部に格納された文字認識プログラムによりその記号に対応するプログラムを対象文字列に対し実行し、通信で接続された請求項１における記号対応のプログラムを実行し、前記スマートフォンやデジタルカメラに表示することを特徴とする画像処理装置を含むコンピュータシステムと文字認識プログラムである。【００１２】そこで、上記課題を解決するため、請求項６に記載の発明はコンピュータを請求項１から５のいずれかに記載の画像処理装置を動作させるためのコンピュータプログラムである。【００１３】そこで、上記課題を解決するため、請求項７に記載の発明は請求項６に記載されたコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体である。【００１４】そこで、上記課題を解決するため、請求項８に記載の発明は請求項２に記載された透明な赤色の記号を、透明な素材で裏に簡単に剥がせる接着剤を塗布したものに印刷したシール状の物体である。
【発明の効果】
【００１５】請求項１〜３の発明によれば、画像処理装置の使用者が使用する複数のアプリケーションプログラムを記憶部のインストールしておき、文書の中の語句に透明な赤色の筆記具での記号記入と範囲を塗りつぶすだけで、画像表示、翻訳、音声変換などのアプリケーションプログラムが実行できる。【００１６】請求項５の発明によれば、機械などに使用者が自身で設定する管理番号、修理連絡先や担当部署などを貼って起き、請求項１〜３の発明による方法により、スマートフォンで撮影し、記号に対応する使用者自身が作成したプログラムを格納してあるコンピュータシステムに接続するだけで、プログラムによる情報が得られる。【００１７】請求項８の発明によれば、請求項２に記載された透明な赤色の記号を、透明な素材で裏に簡単に剥がせる接着剤を塗布したものに印刷したシール状の物体で、請求項１〜３の処理をシール貼る簡単な作業で透明な赤色の筆記具で記号を書いたりする煩わしさを感じることなく行える。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施形態を示す記号対応プログラムを記憶部に格納し、スキャナで記号を認識し、プログラムを実行する概略図
【図２】同赤記号記入し、記号対応のプログラム実行の概略図である。
【図３】同上記方法の詳細図である。
【図４】同上記方法を利用したスマホによる撮影からの情報採取の概略図である。
【発明を実施するための形態】
【００１９】以下、本発明の実施の形態を図面に基づいて説明する。
【００２０】図１においては、画像処理装置において、記憶部に文字、数字、文字列及び図形からなる記号とその記号が認識されると、起動するプログラムを格納しておき、記号が記入された原稿を原稿読み取り装置で読み込み、文字認識プログラムにより記号が確定されると、例えば、Ａという文字に音声変換プログラムを対応させておくと、音声表示装置に音声を表示することができる。
図２においては、画像処理装置において、図１のように記憶部に文字、数字、文字列及び図形からなる記号とその記号が認識されると、起動するプログラムを格納しておき、黒文字原稿に透明な赤のマーカペンで記号が記入され、文字列の範囲を塗りつぶした原稿を原稿読み取り装置で読み込み、文字認識プログラムにより記号が確定されると、例えば、Ａという文字に音声変換プログラムを対応させておくと、音声表示装置に範囲指定された文字列の音声を表示することができる。
図３においては、図２においての詳細の原理の説明図である。画像処理装置や画像処理装置を備えた複合機において、黒文字原稿に透明な赤で記号記入され、文字列を塗りつぶした原稿を原稿読み取り装置で読み込み、赤黒自動判別し、黒文字原稿と赤部分の原稿に分け、それぞれを文字認識プログラムにかけ、黒部分のテキストファイルを作成し、保存しておき、次に赤部分のテキストファイルを作成し、それに透明テキストを貼り付け、黒部分のテキストファイルと合成し、文字認識プログラムにより記号が確定されると、例えば、Ａという文字に音声変換プログラムを対応させておくと、音声表示装置に範囲指定された文字列の音声を表示することができる。
図４においては、機械や備品等に貼り紙や印字し貼ることのできるテープで項目を記入し、その中の希望する項目の前に赤色の透明なマーカなどの筆記具でコンピュータシステムの記憶部に記憶している記号に対応するプログラムを実行する記号を記入し、項目の範囲を塗りつぶし、スマホ等で撮影し、コンピュータシステムの文字認識プログラムにより、記号を確定すると、記号対応のプログラムを実行し、スマホ等の表示部に画像等の記号対応のプログラム関連のデータを表示する。
【産業上の利用の可能性】
【００２１】複合機においては、工場などで、部品の在庫量やその他の情報が記憶されたコンピュータシステムに複合機を接続しておき、図面の中の情報を知りたい項目に本発明の処理を施し、原稿読み取り装置で読み込み、指示すると表示装置に前記項目に関する情報を表示したり、紙に出力できる。さらに、指定日に出力するプログラムを記憶部に格納しておき、日にち指定の作業表の中の日にちに前記の処理を施し、原稿読み取り装置で読み込み、指示すると指定日に出力され、作業の実施の忘れ防止になる。
また、これは、作業だけでなく、一般的にも使え、コンビニ等のコンピュータシステムに記念日に物品を発送するプログラムを格納しておき、接続された複合機に挨拶状などの日にちに前記処理を施し、指示すると指定日に出力し、物品とともに発送され、同じく忘れ防止になる。
スマホにおいても、前記複合機と同様にコンピュータシステムに情報を記憶し、機械や備品に複数の項目が書かれた紙や印字し貼ることのできるテープを貼って起き、情報を知りたい項目に本発明の処理を施し、撮影すると画面に前記項目に関する情報が表示できる。また、現在稼働している家電においても、同様な方法により、スマホで撮影すれば、メーカ等のネットワークに接続し、必要な項目の情報が得られる。
また、記号をシールにすると記号記入の手間が省け、時間の節約になる。
さらに、情報の表示プログラムに音声変換などの各種アプリケーションプログラムを追加すると、より便利な情報が得られる。
【符号の説明】
【００２２】    １  スマホ
２  表示部
３  名盤や貼り紙
【図１】
2020004349.tif 000003
【図２】
2020004349.tif 000004
【図３】
2020004349.tif 000005
【図４】
2020004349.tif 000006