(57)【要約】【課題】読み取った点字について、活用範囲を広げる余地がある。【解決手段】画像処理装置１００は、スキャナ装置２０から点字イメージデータの入力を受け付け、点字イメージデータに含まれる点字の文字認識を行い、文字データに変換する。その文字データの中から、属性情報が付加された文字を検出し、検出した文字の文字形態を特定する。文字データと文字形態とを関連づけて、ＨＴＭＬなどの文書記述言語に準じた標準データ形式の認識結果１８ａやテキストデータ形式の認識結果１８ｂを出力する。これにより、所定の有用なデータ形式への変換が可能になり、利便性の高い画像処理装置１００を提供できる。【選択図】図1
2005108125.tif 000002
【特許請求の範囲】
【請求項１】
所定の画像データの入力を受け付ける手段と、
前記画像データに基づいて形成される画像に含まれる点字を認識し、認識した点字に対応づけられた文字の文字データに変換する手段と、
前記認識した点字の中から、予め登録された文字形態を特定するための第１属性情報を検出する手段と、
検出した第１属性情報に関連づけられた点字に対応する文字データに、その第１属性情報に対応する文字形態を特定するための第２属性情報を付加する付加手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
第１属性情報と第２属性情報とを対応づけて保持する手段と、
ユーザからの指示を受け付け、前記第１属性情報を編集する手段と、
を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
当該装置はユーザからの指示に基づいて、第１属性情報または第２属性情報を付加することを前記付加手段に指示する手段を備えることを特徴とする請求項２に記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は画像処理技術に関し、とくに画像に含まれる文字を認識する文字認識装置に関する。
【背景技術】
【０００２】
近年、通信技術が進歩し、コンピュータ、ファクシミリ装置、スキャナ装置、ＭＦＰ（Multi Functional Peripheral）などの機器がネットワークに接続されるようになってきた。こうしたことから、例えば業務における書類等のデジタル化が進み、各種情報をデジタルデータとして取り扱うことが注目されるようになってきた。こうした中、手書き文字や印刷された文字を光学的に読み取り、テキストデータに変換する技術としてＯＣＲ（Optical Character Reader）がある。ＯＣＲは、例えば文字の印刷された紙面をスキャナで読み取り、読み取った画像データに画像処理を施すことにより紙面に印字された文字をテキストデータに変換する技術である。こうした技術は、手書きや印刷により紙面中に記載された白黒２値やカラーの文字を読み取ることを主たる目的で発達してきた。そうした通常の文字の他に、ファクシミリ装置において、外部から受信した点字イメージデータを文字単位で認識し、文字コードに変換後、その文字コードに対応する点字や通常の文字をイメージデータとして出力する技術がある。（例えば、特許文献１参照。）。
【特許文献１】特開平８−１０２８１４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
特許文献１で開示された技術は、読み取った点字を、点字イメージデータとして出力したり、あるいは、通常文字を含む文字イメージデータに変換し出力したりしているが、読み取った点字をより一層活用するために、有用なデータ形式への変換ができれば、利便性の面においてさらに向上する余地があるといえる。
【０００４】
本発明はこうした点に鑑みてなされたもので、その目的は、画像中の点字を認識し、所定の有用なデータ形式へ変換する技術の提供にある。
【課題を解決するための手段】
【０００５】
本発明のある態様は、画像処理装置である。この装置は、画像データの入力を受け付ける手段と、その画像データに基づいて形成される画像に含まれる点字を認識し、認識した点字に対応づけられた文字の文字データに変換する手段と、その認識した点字の中から、予め登録された文字形態を特定するための第１属性情報を検出する手段と、検出した第１属性情報に関連づけられた点字に対応する文字データに、その第１属性情報に対応する文字形態を特定するための第２属性情報を付加する付加手段とを備える。これにより、画像データに含まれる点字を認識し、認識した点字に含まれる文字形態を抽出し活用することにより、所定の有用なデータ形式への変換が可能になり、画像処理装置の利便性が高まる。
【０００６】
本発明の画像処理装置は、第１属性情報と第２属性情報とを対応づけて保持する手段と、ユーザからの指示を受け付け、前記第１属性情報を編集する手段とを備えてもよい。これにより、ユーザが所望の属性情報を定義できる。
【０００７】
本発明の画像処理装置は、ユーザからの指示に基づいて、第１属性情報または第２属性情報を付加することを前記の付加手段に指示する手段を備えてもよい。これにより、ユーザが所望の属性情報群を選択できる。
【０００８】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【発明の効果】
【０００９】
本発明によれば、画像中に含まれる点字を認識し、認識した点字に含まれる文字形態を抽出し活用することにより、所定の有用なデータ形式への変換が可能になる。これにより、利便性の高い画像処理装置を提供できる。
【発明を実施するための最良の形態】
【００１０】
図１は、実施の形態に係る画像処理装置１００を含む画像処理システム１０を示す。画像処理装置１００の各構成要素は、ハードウエアコンポーネントで言えば、任意のコンピュータのＣＰＵ、メモリ、メモリにロードされた本図の構成要素を実現するプログラム、そのプログラムを格納するＲＯＭ、ＲＡＭ、ハードディスクなどの記憶ユニット、ネットワーク接続用インターフェース等を中心に実現されるが、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。これから説明する各図は、ハードウエア単位の構成ではなく、機能単位のブロックを示している。
【００１１】
一般に、点字は、凸型の最大６個の点を組み合わせて構成された文字であり、主にひらがなや数字などの通常の各文字と１対１に対応づけられている。点字文書１２は、例えば点字が記録されている記録紙であり、点字の点にあたる部分は凸状突起になっている。
スキャナ装置２０は、点字文書１２を読み込んで、画像データに基づいて形成される点字を含む画像データ（以下、点字イメージデータという）を画像処理装置１００に出力する。また、スキャナ装置２０の替わりにファクシミリ装置を用いて、公衆回線等のネットワークを介して点字イメージデータを受信し、画像処理装置１００に出力してもよい。また、そのファクシミリ装置は、画像処理装置１００を搭載してもよい。
【００１２】
点字イメージデータは、赤、緑、青の３つの成分からなる色空間を利用して各画素の色を表現するＲＧＢデータ形式の画像データであってもよい。例えば、ＲＧＢデータ形式の点字イメージデータは、色づけされた点字画像や、カラーデザイン化された点字画像を含む。
【００１３】
画像処理装置１００は、スキャナ装置２０から点字イメージデータの入力を受け付け、点字イメージデータに含まれる点字の文字認識を行い、ＨＴＭＬなどの文書記述言語に準じた標準データ形式の認識結果１８ａやテキストデータ形式の認識結果１８ｂを出力する。これにより、所定の有用なデータ形式への変換が可能になり、利便性の高い画像処理装置１００を提供できる。
【００１４】
画像処理装置１００は、点字イメージデータの入力を受け付ける入力部１０２、その点字イメージデータに含まれる点字画像を認識部１０６が認識できるように、その点字画像に対して画像補正処理を施す画像処理部１０４、画像補正処理が施された点字画像に対して文字単位で認識を行い、点字データ部１１８に格納されている点字辞書を利用して、その認識した点字に対応づけられた文字の文字データへ変換する認識部１０６、認識部１０６により認識および変換された文字データの中から、予め登録された属性情報をキーにして、属性情報が付加された文字を検出し、検出した文字の文字形態を特定する属性情報検出部１０８、属性情報とその属性情報に対応づけられた文字形態とが格納されている属性情報格納部１１２、ユーザからの属性情報の編集指示を受け付ける設定部１１４、ユーザからの属性情報群の選択指示を受け付ける受付部１１６および認識結果１８を出力する出力部１１０を有する。ここで文字データとは、通常文字そのもので形成されるデータを指す。
【００１５】
入力部１０２は、スキャナ装置２０から点字イメージデータの入力を受け付ける。また、他の例では、入力部１０２は、フレキシブルディスク、メモリカードなどの任意の記憶媒体や、ネットワークを介して点字イメージデータの入力を受け付けてもよい。入力部１０２は、受け付けた点字イメージデータを画像処理部１０４に出力する。画像処理部１０４は、その点字イメージデータに含まれる点字画像を認識部１０６が認識できるようにその点字画像に対して所定の画像補正処理を施す。
また、画像処理部１０４は、認識部１０６におけるＲＧＢデータ形式の点字イメージデータに含まれる点字画像の文字認識率をあげるために、ＲＧＢデータ形式を、輝度成分や明度成分を含む色空間を利用して各画素の色を表現するＬａｂデータ形式に変換してもよい。
【００１６】
例えば、スキャナ装置２０が、点字の点にあたる部分が凸状突起になっている記録紙を読み取る際に、その凸状突起に対して光を照射し、その反射光をセンサで取り込んで点字イメージデータを生成するが、凸状突起の大きさや形状によっては、そのデータに含まれる点字画像の点にあたる部分が、様々な形態を有することがある。
例えば、その点字画像の点にあたる部分が、丸の中が黒く塗られた黒丸であったり、丸の中が黒く塗られていない黒丸であったり、円形の丸ではなかったりする。また、丸の中が黒く塗られた黒丸においても、黒丸の中に塗られた色の濃度は様々である。そうした様々な形態や濃度の点字を、認識部１０６が認識できるように、画像処理部１０４は、その点字の形態や濃度等に対して、認識部１０６における点字の認識率をあげるために、点字データ部１１８に格納されている点字辞書内の点字サンプルが有する形態や濃度等を目標として、画像補正処理を施す。また、画像処理部１０４は、点字イメージデータ中に含まれる点字画像の濃度を点字サンプルが有する濃度よりも濃くしてもよい。
【００１７】
認識部１０６は、画像処理部１０４により画像補正処理が施された、点字イメージデータに含まれる点字画像を認識し、点字データ部１１８に格納された点字辞書を利用して、例えばパターンマッチングなどの既知の文字認識処理を行うことで、認識した点字を対応づけられた通常文字に変換し文字データとして出力する。また、認識部１０６が、ＲＧＢデータ形式やＬａｂデータ形式の点字イメージデータを受け付けた場合、例えば、後者のデータ形式であれば明度成分に基づいて、点字イメージデータに含まれる点字画像を認識してもよい。これにより、画像処理装置１００は、健常者に対して点字を身近なものにするために色づけされた点字画像やカラーデザイン化された点字画像を認識することができる。
認識部１０６は、変換および出力された文字データを属性情報検出部１０８に供給する。点字データ部１１８は、点字とその点字に対応づけられた通常文字との関係を保持する点字辞書を有し、また、点字辞書内に格納されている点字を点字サンプルと呼び、点字サンプルは、画像処理部１０４により施される画像補正処理において目標となる形態や濃度を有する。
【００１８】
属性情報格納部１１２には、予め登録された、属性情報とその属性情報に対応づけられた文字形態とが格納されている。例えば、ＨＴＭＬなどの文書記述言語で用いられるタグ付き文字において、その文字の先頭および語尾にタグ形式の属性情報を付加することによって、その文字が、文字の色、フォントや大きさ等の様々な文字形態を有することを示しており、属性情報格納部１１２は、そうした文字形態と属性情報との対応関係を保持している。
【００１９】
属性情報検出部１０８は、認識部１０６より供給された文字データの中から、予め属性情報格納部１１２に登録された属性情報をキーにして、その属性情報が付加された文字を検出し、その検出した文字が有する文字形態を、属性情報格納部１１２に格納された文字形態と属性情報との対応関係を参照することにより特定する。そして、検出した文字とその文字が有する文字形態とを出力部１１０に出力する。受付部１１６は、ユーザからの所望のデータ形式への変換要求を受け付け、出力部１１０にその旨を指示する。
【００２０】
出力部１１０は、認識部１０６から供給された文字データと、属性情報検出部１０８から供給された文字形態とを関連づけて認識結果１８を出力する。具体的に、出力部１１０は、文字データ中における属性情報検出部１０８により検出された文字に対して、その検出した文字が有する文字形態に対応したタグ等の属性情報を属性情報格納部１１２から取得し、その文字の先頭および語尾にその属性情報を付加し、認識結果１８として所定のデータ形式で出力する。また、認識結果１８として出力するデータ形式は、ユーザにより受付部１１６を介して選択指示され、出力部１１０は、そのデータ形式に応じて、付加するための属性情報群を選択する。本実施の形態におけるデータ形式として、テキストデータ形式とＨＴＭＬなどの文書記述言語に準じた標準データ形式とがある。
【００２１】
設定部１１４は、ユーザからの属性情報の編集指示を受け付け、属性情報格納部１１２に格納されている属性情報を編集する。これにより、ユーザは、所望の属性情報を定義できる。
【００２２】
図２は、図１の属性情報格納部１１２に格納されているデータ構造の一例を示す図である。本データ構造は、文字形態と、ユーザが編集可能なタグが格納されている第１属性情報およびユーザが編集不可能なタグが格納されている第２属性情報を含む属性情報とを含む。また、他の例として、本データ構造は、ＨＴＭＬ形式のタグの替わりにＸＭＬデータ形式でのタグが格納されている属性情報群を有してもよい。また、本データ構造は、ＸＭＬデータ形式でのタグを有する複数の属性情報群を有し、いずれかの属性情報群を選択できてもよい。
【００２３】
形態欄２００は、文字の色、フォントや大きさ等の文字形態を示す情報を保持している。第１属性情報欄２０２ａは、図１の点字文書１２に含まれる文字形態を有する文字を抽出するために用いられるタグが格納されている。そのタグは開始タグおよび終了タグを含み、ユーザはそれらの内容を、設定部１１４を介して編集できる。第２属性情報欄２０２ｂは、第１属性情報欄２０２ａと同様に文字形態を特定するタグが格納されているが、例えばＨＴＭＬなどの文書記述言語で用いられるタグのように予め用意されているタグであり、ユーザはその内容を編集できない。第２属性情報欄２０２ｂも第１属性情報欄２０２ａと同様に開始タグと終了タグを含む。
【００２４】
データ２０４についていえば、第１属性情報欄２０２ａに格納されている第１属性情報の開始タグ「＿ここからあか＿」と終了タグ「＿ここまで＿」とがそれぞれ先頭および語尾に付加された文字の文字データは、赤色の文字形態を有することを示す。また、ＨＴＭＬデータ形式として出力される場合、その文字の文字データの先頭に第２属性情報欄２０２ｂに格納されている第２属性情報の開始タグが、語尾に終了タグが付加されることを意味する。
【００２５】
以下、標準データ形式としてＨＴＭＬデータ形式へ変換する場合とテキストデータ形式に変換する場合とをそれぞれ説明する。
【００２６】
＜ＨＴＭＬデータ形式の場合＞
図１にもどり、受付部１１６がユーザからＨＴＭＬデータ形式への変換指示を受け付けると出力部１１０は、点字文書１２に基づいてＨＴＭＬデータ形式で認識結果１８ａを生成する。出力部１１０は、属性情報検出部１０８により検出した第１属性情報に対応づけられた文字に、第１属性情報に対応する第２属性情報を属性情報格納部１１２から取得し、認識部１０６により認識した文字に対応付ける。
【００２７】
例えば、点字文書１２には、点字による点字文字列１４「あい＿ここからあか＿うえ＿ここまで＿お」が記録されている。ここで、図１における点字文字列１４の上部には、実際の点字が記載され、下部にはその点字の意味を分かりやすく説明するために、１対１に対応する通常文字が記載されている。また、点字文字列１４内の点字文字列「うえ」の先頭に開始タグ１６ａ「＿ここからあか＿」および語尾に終了タグ１６ｂ「＿ここまで＿」が点字形式で付加されている。画像処理装置１００は、点字文字列１４を文字データに変換した後、先頭にフォントタグ２６ａ「＜ＦＯＮＴ  ｃｏｌｏｒ＝“＃ＦＦ００００”＞」および語尾にフォントタグ２６ｂ「＜／ＦＯＮＴ＞」が対応づけられた文字列「うえ」を含む文字列２２を含む認識結果１８ａを生成する。
【００２８】
このように点字で作成した原稿をＨＴＭＬデータ形式に変換できるので、例えば、ユーザが、点字でホームページのイメージを作り、画像処理装置１００に読み込ませることにより、自動的にＨＴＭＬデータ形式に変換することができる。これにより、例えば目の不自由な利用者等のユーザもホームページを容易に作成することができる。
また、太文字等の文字形態を示すタグ等の属性情報を文字に付加することができるので、例えば目の不自由な利用者が、本来文字の強調表現ができない点字にその文字形態を示す点字形式の属性情報を付加し、画像処理装置を介して通常文字のテキストデータに変換することによって、健常者に強調した文字部分を知らせることができる。
【００２９】
＜テキストデータ形式の場合＞
ＨＴＭＬデータ形式の場合と同様に、受付部１１６がユーザからテキストデータ形式への変換指示を受け付けると出力部１１０は、点字文書１２に基づいてテキストデータ形式で認識結果１８ｂを生成する。出力部１１０は、属性情報検出部１０８により検出した第１属性情報に対応づけられた文字に第１属性情報をテキストデータ形式として属性情報格納部１１２から取得し、認識部１０６により認識した文字に対応付ける。
【００３０】
ＨＴＭＬデータ形式の場合と同様に点字文書１２が画像処理装置１００に入力された場合、出力される認識結果１８ｂにおいて、文字列「うえ」の先頭に開始タグ２８ａ「＿ここからあか＿」および語尾に終了タグ２８ｂ「＿ここまで＿」がテキストデータ形式の文字データとして対応づけられ、文字列２４「あい＿ここからあか＿うえ＿ここまで＿お」がテキストデータ形式の文字データとして生成される。前述したように、ユーザは属性情報を任意に定義できるので、「＿ここからあか＿」を「＿あか＿」のように、ユーザが利用しやすいように定義することができる。
また、ユーザが予め受付部１１６を介して、点字文書１２内の属性情報を取り除くことを指示してもよい。その場合、点字文書１２に対して出力される認識結果１８ｂは、文字列「あいうえお」を含む。
【００３１】
図３は、図１の画像処理装置１００における処理のフローチャートの一例である。まず、図１の受付部１１６は、ユーザから変換に利用するテキストデータ形式あるいは標準データ形式のいずれかを受け付ける（Ｓ１０）。入力部１０２は、点字イメージデータの入力を受け付ける（Ｓ１２）。そして、図１の画像処理部１０４は、図１の認識部１０６が点字イメージデータに含まれる点字画像の認識ができるように画像処理を施す（Ｓ１４）。図１の認識部１０６は、図１の点字データ部１１８内の点字辞書を利用して点字を文字に変換し（Ｓ１６）、認識した文字の文字データを属性情報検出部１０８に出力する。属性情報検出部１０８は、その文字データから属性情報をキーにしてその属性情報に対応した文字形態を有する文字を検出し（Ｓ１８）、その文字形態を図１の出力部１１０に提供する。図１の出力部１１０は、Ｓ１０で選定されたデータ形式におけるＳ１８で検出した文字形態に対応する属性情報を選択し（Ｓ２０）、認識した文字の先頭および語尾に、選択した属性情報を関連付け（Ｓ２２）、図１の認識結果１８を出力する（Ｓ２４）。以上が処理の概要である。
【００３２】
以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
【図面の簡単な説明】
【００３３】
【図１】実施の形態に係る画像処理装置を含む画像処理システムを示す図である。
【図２】図１の属性情報格納部に格納されているデータ構造の一例を示す図である。
【図３】図１の画像処理装置における処理のフローチャートの一例を示す図である。
【符号の説明】
【００３４】
１２  点字文書、１８  認識結果、２０  スキャナ装置、１００  画像処理装置、１０２  入力部、１０４  画像処理部、１０６  認識部、１０８  属性情報検出部、１１０  出力部、１１２  属性情報格納部、１１４  設定部、１１６  受付部。
【図１】
2005108125.tif 000003
【図２】
2005108125.tif 000004
【図３】
2005108125.tif 000005