(57)【要約】【課題】文字認識により得られた数字データにより任意の演算を行うことが可能な文字認識機能付き携帯電話機を提供する。【解決手段】カメラ機能付き携帯電話機であって、カメラにて撮像されＯＣＲ機能により文字認識された数字を使用して積算等の各種計算を可能とし、計算用入力に電卓のような数字データの入力を不要とする。【選択図】        図３
2004318434.tif 000002
【特許請求の範囲】
【請求項１】
カメラ部を備える文字認識機能付き携帯電話機であって、カメラ部で撮影した撮影画像を入力し文字認識により数字データを選択的に出力するＯＣＲ機能部と、撮影画像の入力毎に出力される数字データを、当該出力以前に出力された数字データ又はその演算結果に対し演算する演算機能部と、前記演算機能部の演算結果を表示する表示部と、を備えることを特徴とする文字認識機能付き携帯電話機。
【請求項２】
前記演算機能部は、撮影画像の入力毎に出力される数字データを順次積算する演算を行うことを特徴とする請求項１記載の文字認識機能付き携帯電話機。
【請求項３】
前記演算機能部は、予め設定された演算処理の手順に基づき撮影画像の入力毎に出力される数字データを当該出力以前に出力された数字データ又はその演算結果に対し四則演算又は関数演算を行うことを特徴とする請求項１記載の文字認識機能付き携帯電話機。
【請求項４】
演算処理の指示を行うキー操作部を備え、前記演算機能部は、撮影画像の入力毎に出力される数字データに対し、それぞれの演算処理の指示に応じた演算を行うことを特徴とする請求項１記載の文字認識機能付き携帯電話機。
【請求項５】
前記キー操作部からの操作により撮影画像の数字部分の選択又は数字データの選択及び文字認識の誤りの訂正を可能としたことを特徴とする請求項１ないし４の何れかの請求項記載の文字認識機能付き携帯電話機。
【請求項６】
演算処理に為替レートの換算を含む金銭計算又は税金額を加味した金銭計算を行うことを特徴とする請求項１ないし５の何れかの請求項記載の文字認識機能付き携帯電話機。
【発明の詳細な説明】
【０００１】
本発明は、携帯電話機の文字認識（Ｏｐｔｉｃａｌ  Ｃｈａｒａｃｔｅｒ  Ｒｅａｄｅｒ：ＯＣＲ）機能に関し、特に、認識した数字の処理を行う文字認識機能付き携帯電話機に関する。
【０００２】
【従来の技術】
従来、携帯電話機の備えられた撮像手段のより文字情報が含まれる映像を画像データとして撮像し、自動文字認識によりテキストデータに変換することが知られており、また、画像データから文字認識により得た数字データを使用して発呼動作を行う携帯電話機が知られている（特許文献１、非特許文献１参照）。
【０００３】
【特許文献１】
特開２００３−１８２９９号公報
【非特許文献１】
ＮＥＣ：プレスリリース：２００２年１１月２０日−１  ＮＥＣ  Ｅｍｐｏｗｅｒｅｄ  ｂｙ  ｉｎｎｏｖａｔｉｏｎ．プレスリリース  「有効画素数３１万画素の高画質カメラと２．２インチＴＦＴ高精細液晶を搭載した携帯電話の発売について」〜新機能カメラによる文字データ取り込みやリモコン機能を搭載〜  １／４−４／４ページ  ［平成１５年４月１２日検索］，
インターネット＜ｈｔｔｐ：／／ｗｗｗ．ｎｅｃ．ｃｏ．ｊｐ／ｐｒｅｓｓ／ｊａ／０２１１／２００１．ｈｔｍｌ＞
【０００４】
図７は、従来例のＯＣＲ動作のフローチャートを示す図である。
カメラを起動した後にＯＣＲ機能を起動し（ｓ７０１，７０２）、カメラにより文字を撮像する（ｓ７０３）。撮像された文字は文字認識され（ｓ７０４）、液晶表示装置（ＬＣＤ）に表示される（ｓ７０５）。ここで、ＬＣＤに表示された文字に誤認識があった場合は（ｓ７０６）、キー入力により文字を修正する（ｓ７１０）。文字認識されＬＣＤに表示された文字が問題ないと判断されたならば、確定キー等の任意のキーによって表示データを取り込み（ｓ７０７）、取り込んだデータをＬＣＤに表示する。再度文字を撮像してデータを取り込むときには（ｓ７０８）、同様の文字認識の処理、表示及び修正の処理を行い（ｓ７０３〜ｓ７０７）、最終的に最新のデータをＬＣＤに表示する（ｓ７０９）。最終的にＬＣＤに表示されたデータが電話番号であった場合には、そのデータから発呼動作を行い、またインターネット接続電話機であれば、最終的にＬＣＤに表示されたデータがＵＲＬであった場合には、そのデータからインターネットに接続することが可能である。
【０００５】
【発明が解決しようとする課題】
しかし、前述の従来の文字認識機能を有する携帯電話機では、カメラにて撮像され、ＯＣＲ機能により文字認識されたデータは電話番号の場合に発呼動作に利用することを可能とするものに限られていた。
【０００６】
本発明の目的は、各種の演算を可能とする文字認識機能付き携帯電話機を提供することにある。
本発明の目的は、文字認識により得られた数字データを任意に演算することを可能とした文字認識機能付き携帯電話機を提供することにある。
本発明の目的は、カメラにて撮像され、ＯＣＲ機能により文字認識された数字を使用して計算することを可能とし、計算用入力に電卓のようにキーによる数字データの入力を不要とする文字認識機能付き携帯電話機を提供することにある。
【０００７】
【課題を解決するための手段】
本発明の文字認識機能付き携帯電話機は、カメラ付き携帯電話機のＯＣＲ（Ｏｐｔｉｃａｌ  Ｃｈａｒａｃｔｅｒ  Ｒｅａｄｅｒ）機能により、撮像して文字認識された数字について、撮像して文字認識された毎に演算しＬＣＤに表示していくものであり、電卓のキーによる数字入力に相当する処理部分にカメラにて撮像され文字認識された数字を用いる。即ち、
【０００８】
本発明の文字認識機能付き携帯電話機は、カメラ部を備える文字認識機能付き携帯電話機であって、カメラ部で撮影した撮影画像を入力し文字認識により数字データを選択的に出力するＯＣＲ機能部（例えば図１の１、７）と、撮影画像の入力毎に出力される数字データを、当該出力以前に出力された数字データ又はその演算結果に対し演算する演算機能部（例えば図１の１、８）と、前記演算機能部の演算結果を表示する表示部（例えば図１の１、４）と、を備えることを特徴とする。
【０００９】
また、前記演算機能部は、撮影画像の入力毎に出力される数字データを順次積算する演算を行うことを特徴とし、予め設定された演算処理の手順に基づき撮影画像の入力毎に出力される数字データを当該出力以前に出力された数字データ又はその演算結果に対し四則演算又は関数演算を行うことを特徴とし、演算処理の指示を行うキー操作部（例えば図１の２）を備え、前記演算機能部は、撮影画像の入力毎に出力される数字データに対し、それぞれの演算処理の指示に応じた演算を行うことを特徴とする。
【００１０】
更に、前記キー操作部からの操作により撮影画像の数字部分の選択又は数字データの選択及び文字認識の誤りの訂正を可能としたこと、及び演算処理に為替レートの換算を含む金銭計算又は税金額を加味した金銭計算を行うことを特徴とする。
【００１１】
より具体的には、カメラ付き携帯電話機において、カメラ機能及びＯＣＲ機能を起動し、カメラにて文字を撮像し、撮像された文字を文字認識し、数字のみをＬＣＤに表示する。ここで、ＬＣＤに表示された数字が誤認識があった場合には、キー入力により数字を修正することを可能とする。文字認識されＬＣＤに表示された数字に問題がないと判断されたならば、確定キー等の任意のキーによって表示データを取り込み、既存の積算データへ積算（初回のみ０（ゼロ）へ積算）し、積算後のデータをＬＣＤに表示する。再度撮像してデータを取り込むときには、上述の文字認識および積算の処理を繰り返し、最終的に積算後のデータをＬＣＤに表示することを特徴とする（図１参照）。
【００１２】
【発明の実施の形態】
（構成の説明）
図１は、本実施の形態の文字認識機能付き携帯電話機の外観を示す図である。
携帯電話機の前面には、使用者が各種設定等を行うキー操作部と、カメラ部と、各種の設定画面、カメラ部で撮影した画像やＯＣＲ読み取りデータ、計算結果のデータを表示するための液晶表示部と、が設けられている。
【００１３】
図２は、携帯電話機の内部回路の構成を示すブロック図である。プログラム及び各種データを記憶するメモリやハードディスク等で構成する記憶部３と、携帯電話機の各種の設定画面、送信及び受信に関連する各種表示及び数字データの表示、数字の演算結果等を表示する液晶表示部（ＬＣＤ）４と、機能設定操作、データの入力等、各種の入力操作を行うためのキー操作部２と、電波を送受し基地局と無線通信を行うためのアンテナとを有する無線部５と、撮影用のカメラ部６と、カメラ部６からの撮影画像データを入力し、撮影画像データの文字認識を行いキャラクタデータに変換して出力する文字認識部（ＯＣＲ部）７と、数字データを入力し所定の演算を行う演算部８と、携帯電話機の各種機能及び前記各部をソフトウエアにより制御し動作させる制御部１とから構成される。各部の機能は以下のとおりである。
【００１４】
記憶部３は、制御部１における携帯電話機の各種機能を実現する制御用及びアプリケーション用のプログラム及び本発明の撮影画像データ、文字認識処理プログラム及び文字認識により得られた数字データ、数字データの演算処理プログラム等を記録する機能を有する。
【００１５】
キー操作部２は、テンキー、機能キー及び各種スイッチ類等で構成され、制御部３１に対し各種の設定、ダイヤル入力、文書入力等に加え、カメラシャッター操作等の操作機能を有する。
【００１６】
ＬＣＤ４は、制御部１から表示情報を入力し、通話及びメール等に加え、撮影画像、文字認識により変換後のデータ等、各種情報を表示し、また、各種設定画面の表示を行う機能を有する。無線部５は、基地局との間で無線通信を行い、制御部１からの送信信号を変調して基地局に送信し、基地局から受信した受信信号及び各種の制御信号等を復調して制御部３１に出力する通信機能を有する。
【００１７】
カメラ部６は、制御部１により制御され、キー操作部２からの操作により撮影機能が起動され撮影画像を出力する。ＯＣＲ部７は制御部１により制御され、文字認識機能を備え、制御部１から入力した撮影画像をテキストデータ等に変換して出力する。演算部８は、ＯＣＲ部７で文字認識したテキストデータの数字データに関し以前に抽出した数字データ又はその演算結果のデータと演算して制御部１に出力する。
【００１８】
制御部１は、記憶部３に記憶されたプログラム及び各種のデータにより動作し、基地局との間の電話及びメール等の通信のための発着信等の通信制御機能、文書作成機能等、携帯電話機の殆どの制御機能を有し、特に、ＯＣＲ機能及び演算機能に関して、キー操作部２からの設定操作により、カメラ部６で撮影した画像データ又はカメラ部６等で撮影し記憶部３に記憶した画像データを入力してＯＣＲ部７に転送し、テキストデータ等に変換し、テキストデータから数字データを抽出しＬＣＤ４に表示するとともに、演算部８に転送し演算結果を入力してＬＣＤ４に表示する等の制御機能を有する。数値データの抽出はキー操作部２から選択するように構成することもできる。
【００１９】
（動作の説明）
以下、本発明の実施の形態の文字認識機能付き携帯電話機の機能、動作について図を参照して説明する。
図３は、第１の実施の形態の文字認識機能付き携帯電話機の動作のフローチャートを示す図である。文字認識をするためのＯＣＲ機能および加算機能を含む演算（計算）機能とにより、撮影画像の文字認識データから数字データを選択して、前回までの数字データに対し、所定の計算を施し、計算結果をＬＣＤに表示する動作を示している。
【００２０】
カメラ付き携帯電話機において、カメラ部６のカメラ機能を起動した後（ｓ３０１）、ＯＣＲ部７のＯＣＲ機能を起動し（ｓ３０２）、カメラ部６にて文字を撮像する（ｓ３０３）。撮像された文字はＯＣＲ部７で文字認識され（ｓ３０４）、数字のみＬＣＤ４に表示される（ｓ３０５）。ここで、ＬＣＤ４に表示された数字が誤認識であった場合には（ｓ３０６）、キー操作部２により数字を修正することが可能である（ｓ３１２）。文字認識されＬＣＤ４に表示された数字が正しい（問題がない）と判断されたならば（ｓ３０６）、確定キー等によって表示データを取り込み（ｓ３０７）、例えば既存の積算データ（初回のみ０）に積算し（ｓ３０８）、積算の後データをＬＣＤ４に表示する（ｓ３０９）。再度の撮像によりデータを取り込み演算を行うときには（ｓ３１０）、上述撮影から積算までの処理（ｓ３０３〜ｓ３０９）を繰り返し、最終的に積算後の最終合計データをＬＣＤ４に表示する（ｓ３１１）。
【００２１】
（他の実施の形態）
次に、本発明の他の実施の形態について図を参照して説明する。
図４は、第２の実施の形態の動作のフローチャートを示す図である。従来のＯＣＲ機能と本発明の演算機能の両方を備える実施の形態の例である。
カメラ部６のカメラ機能を起動した後に（ｓ４０１）、通常のＯＣＲモード（通常ＯＣＲモード）又は積算するＯＣＲモード（積算ＯＣＲモード）の何れかの選択を行い（ｓ４０２）、通常ＯＣＲモードを選択した場合は（ｓ４１４）、ＯＣＲ部７のＯＣＲ機能を起動し（ｓ４１５）、カメラ部６にて文字を撮像する（ｓ４１６）。撮像された文字は文字認識され（ｓ４１７）、ＬＣＤ４に表示される（ｓ４１８）。ここで、ＬＣＤ４に表示された文字に誤認識があった場合には（ｓ４１９）、キー操作部２により文字データを修正することが可能である（ｓ４２３）。文字認識されＬＣＤ４に表示された文字に問題がないと判断されたならば（ｓ４１９）、確定キー等によって表示データを取り込み（ｓ４２０）、取り込んだデータをＬＣＤ４に表示する。再度の撮像によりデータを取り込むときには（ｓ４２１）、撮像から表示データの取り込みまでを繰り返し（ｓ４１６〜ｓ４２０）、最終的に最新データをＬＣＤ４に表示する（ｓ４２２）。
【００２２】
ステップｓ４０２において、積算ＯＣＲモードを選択したときには（ｓ４０３）、ＯＣＲ部７の機能を起動し（ｓ４０４）、カメラ部６にて文字を撮像し（ｓ４０５）、撮像された文字は文字認識され（ｓ４０６）、数字データのみＬＣＤ４に表示される（ｓ４０７）。ここで、ＬＣＤ４に表示された数字に誤認識があった場合には（ｓ４０８）、キー操作部２により数字を修正することが可能である（ｓ４１４）。文字認識されＬＣＤ４に表示された数字に問題がないと判断されたならば（ｓ４０８）、確定キー等によって表示データを取り込み（ｓ４０９）、既存の積算データ（初回のみ０）へ積算し（ｓ４１０）、積算後のデータをＬＣＤ４に表示する（ｓ４１１）。再度の撮像によりデータを取り込むときには（ｓ４１２）、撮像から積算後のデータの表示までの処理（ｓ４０５〜ｓ４１０）を繰り返し、最終的に積算後の最終合計データをＬＣＤ４に表示する（ｓ４１３）。
【００２３】
図５は、第３の実施の形態の動作のフローチャートを示す図である。本実施の形態は、撮像し文字認識されたデータを電卓のように四則演算等の計算を行うことを可能とするものである。
カメラ付き携帯電話機において、カメラ部６のカメラ機能を起動した後（ｓ５０１）、ＯＣＲ部７の機能を起動し（ｓ５０２）、カメラ部６にて文字を撮像する（ｓ５０３）。撮像された文字は文字認識され（ｓ５０４）、数字のみがＬＣＤ４に表示される（ｓ５０５）。ここで、ＬＣＤ４に表示された数字に誤認識があった場合には（ｓ５０６）、キー操作部２により数字を修正することが可能である（ｓ５１２）。文字認識されＬＣＤ４に表示された数字に問題がないと判断されたならば（ｓ５０６）、確定キー等によって表示データを取り込み（ｓ５０７）、予め設定された四則演算（四則演算の場合は初回は例えば０に加算）や指数関数等の関数演算を行い（ｓ５０８）、撮像を継続しない場合は（ｓ５０９）、計算結果を表示する（ｓ５１１）。再度の撮像によりデータを取り込み演算を行う場合は（ｓ５０９）、キー操作部２により次に取り込むデータに関して、四則演算の選択又は関数演算の選択を行い（ｓ５１０）、撮影から演算までの処理（ｓ５０３〜ｓ５０８）を繰り返し、ステップｓ５０８では、ステップｓ５１０で選択した演算を既存のデータ等に行い、最終的に撮像を継続しなくなったら（ｓ５０９）、計算結果データをＬＣＤ４に表示する（ｓ５１１）。以上により撮像から文字認識および四則演算や指数関数等のキー操作部２からの入力に応じた計算を繰り返し、最終的に計算後のデータをＬＣＤ４に表示する。
【００２４】
図６は、第４の実施の形態の動作のフローチャートを示す図である。本実施の形態は撮像する被写体がバーコードの場合の例である。カメラ付き携帯電話機において、カメラ部６のカメラ機能を起動した後（ｓ６０１）、ＯＣＲ宇７の機能を起動し（ｓ６０２）、カメラ部６にてバーコードを撮像する（ｓ６０３）。撮像されたバーコードは文字として認識され（ｓ６０４）、ＬＣＤ４に表示される（ｓ６０５）。ここで、ＬＣＤ４に表示された文字に誤認識があった場合には（ｓ６０６）、キー操作部２により文字を修正することが可能である（ｓ６１２）。文字として認識されＬＣＤ４に表示された文字に問題がないと判断されたならば（ｓ６０６）、確定キー等によって表示データを取り込み（ｓ６０７）、既存の積算データ（初回のみ０）へ積算し（ｓ６０８）、積算の後データをＬＣＤ４に表示する（ｓ６０９）。再度のバーコードの撮像によりデータを取り込むときには（ｓ６１０）、撮影から積算後のデータの表示までのバーコード認識および積算を繰り返し（ｓ６０３〜ｓ６０９）、最終的に積算後の最終合計データをＬＣＤ４に表示する（ｓ６１１）。
【００２５】
以上の実施の形態の使用例としては、数多くの買い物をする際などに購入しようとする品物の概算の合計金額がわからなくなりがちであるが、このようなときに商品の値札を一つずつ撮像していく操作により品物の合計金額を容易に算出することができる。このような使用例で分かるように、本発明によれば電卓のような細かなキー入力操作等が不要となる。
【００２６】
また、撮像対象が金額の数字であり金額（金銭）計算の場合に、金額の通貨記号の「￥」や「＄」等の記号を文字認識で判断して、数字データの抽出に利用したり、この数字データの取り込み時に、予め登録されたレートによって日本円での計算結果を算出するように演算処理を設定するように構成することが可能である。また、金額の単位である「百」、「千」、「万」等の記号の文字認識データにより、単位別の計算結果を算出する等、計算データとして利用するように構成することができる。
更に、最終の合計金額に消費税を加算したデータを算出して表示させるように構成することが可能である。
以上の実施の形態において、撮影、文字認識及び演算の対象として、漢数字（一、二、三・・・）、その他、各種の数字表記方法のものを対象とすることができることは云うまでもない。
【００２７】
【発明の効果】
本発明によれば、カメラ付き携帯電話機のカメラ機能、ＯＣＲ機能により撮像し文字認識した数字について、撮像し文字認識する毎に繰り返し積算する等、所望演算を行うように構成しているから、当該演算の対象となる画像を単に撮影するだけで、簡単にＬＣＤに表示し且つ演算結果が得られ、キー入力等の煩雑な操作を不要とし、使い勝手の良い数値演算が携帯電話機により実現することが可能である。すなわち、電卓のキーによる数字入力に相当する処理部分をカメラ部にて撮像することにより数字データに変換でき、且つ演算結果も直ちに得ることを可能としている。
【００２８】
また、演算機能としては、撮影画像の入力毎に得られる数字データを自動的に順次積算する演算に限らず、予め設定された演算処理の手順に基づき撮影画像の入力毎に出力される数字データを当該出力以前に出力された数字データ又はその演算結果に対し四則演算又は関数演算等を行うように構成することが可能であり、更に、撮影画像の入力毎に得られる数字データに対し、キー操作部から演算処理の内容を順次指示するように構成することにより、任意の演算が可能となる。
【００２９】
また、通貨単位、税率等を加味した演算処理を行うように構成することにより為替レートの換算を含む金額（金銭）計算又は税金額を加味した金額計算を行うことも可能である。
【図面の簡単な説明】
【図１】本発明の実施の形態の文字認識機能付き携帯電話機の外観を示す図である。
【図２】本実施の形態の携帯電話機の内部回路の構成を示すブロック図である。
【図３】第１の実施の形態の動作のフローチャートを示す図である。
【図４】第２の実施の形態の動作のフローチャートを示す図である。
【図５】第３の実施の形態の動作のフローチャートを示す図である。
【図６】第４の実施の形態の動作のフローチャートを示す図である。
【図７】従来例のＯＣＲ動作のフローチャートを示す図である。
【符号の説明】
１  制御部
２  キー操作部
３  記憶部
４  液晶表示部
５  無線部
６  カメラ部
７  ＯＣＲ部
８  演算部
【図１】
2004318434.tif 000003
【図２】
2004318434.tif 000004
【図３】
2004318434.tif 000005
【図４】
2004318434.tif 000006
【図５】
2004318434.tif 000007
【図６】
2004318434.tif 000008
【図７】
2004318434.tif 000009