(57)【要約】【課題】原稿内容を視覚的に確認することが困難なユーザでも、正しい向きに原稿をセットするためのサポートを実現する画像読取装置を提供する。【解決手段】この画像読取装置は、視覚情報を使用せずに触覚および聴覚的な情報のみを手がかりとして操作することを可能にした画像読取装置であって、原稿面を読み取る画像読み取り部１と、画像読み取り部１で読み込まれた画像イメージの文字領域を抽出する文字領域抽出処理部３と、文字領域抽出処理部３で抽出した文字領域内の個々の文字の方向を判定することによって、前記原稿の上辺がコンタクトガラスのどの方向にセットされているかを識別する原稿方向判定処理部４と、原稿方向判定処理部４の結果を音声メッセージで通知する音声合成処理部６とを備えている。【選択図】図１
2006319548.tif 000002
【特許請求の範囲】
【請求項１】
視覚情報を使用せずに触覚および聴覚的な情報のみを手がかりとして操作することを可能にした画像読取装置において、原稿面を読み取る画像読み取り部と、前記画像読み取り部で読み込まれた画像イメージの文字領域を抽出する文字領域抽出処理部と、前記文字領域抽出処理部で抽出した文字領域内の個々の文字の方向を判定することによって、前記原稿の上辺がコンタクトガラスのどの方向にセットされているかを識別する原稿方向判定処理部と、前記原稿方向判定処理部の結果を音声メッセージで通知する音声合成処理部とを備えることを特徴とする画像読取装置。
【請求項２】
請求項１に記載の画像読取装置において、前記文字領域抽出処理部で抽出した文字領域内を文字認識する文字認識処理部を備え、前記音声合成処理部は、原稿セット方向の識別結果が得られた後、ユーザからの指示に応じて、前記文字認識処理部で文字認識された文字列を読み上げるようにしたことを特徴とする画像読取装置。
【請求項３】
請求項２に記載の画像読取装置において、前記音声合成処理部は、文字認識時の認識スコアに応じて合成される音声の韻律情報を変化させて音声出力することを特徴とする画像読取装置。
【請求項４】
請求項２に記載の画像読取装置において、前記原稿の上辺がセットされている方向の指示を読み取るユーザインタフェース部を備え、ユーザが前記音声合成処理部からの音声によって原稿の向きを判断し、前記ユーザインタフェース部によって前記原稿の上辺を指定できることを特徴とする画像読取装置。
【請求項５】
コンピュータに、請求項１乃至４のいずれかに記載の画像読取装置の機能を実現させるためのプログラム。
【請求項６】
コンピュータが読み取り可能な記録媒体であって、請求項５に記載のプログラムを記録したことを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像読取装置、プログラムおよび記録媒体に関し、原稿内容を視覚的に確認することが困難なユーザでも、正しい向きに原稿をセットするためのサポート技術に関する。
【背景技術】
【０００２】
現在の画像形成装置（複写機、複合機やファクシミリ装置など）では、様々な機能をユーザに効率良く提示し、ユーザが所望する機能を簡単に選択できるようにしている。このために、機器のモードや場面に応じて液晶タッチパネル上に個々の機能を表すアイコンやボタンイメージを表示し、ユーザがそれらのアイテムを押下することで機能を設定するというＵＩ（User Interface）が搭載されている場合が多い。
【０００３】
このようなＵＩには、視覚器官の障害によってタッチパネル上に表示された内容を認知できないユーザにとっては操作することができないという問題がある。
しかし、コピーをとるといった作業は、通常のオフィスでは、多くの人々が日常的に行っていることである。このような作業を困難に感じるユーザにとっては、社会進出を阻む要因となってしまうため改善が望まれている。
【０００４】
こうした問題を解決するために、特許文献１の技術では、複合装置に予め備えられたハンドセットを使用して、予め用意された音声ガイドの内容を操作者だけに聞き取らせるようにしておく。オフフック状態で操作者により音声ガイドモードに切り替えられた場合に、ハンドセットのスピーカに出力される音声ガイドのシナリオに従って次々と示される選択肢内のメニュー項目をハードキー押下によって選択させることにより、視覚を用いないで複合装置を利用できるようにした。
【０００５】
また、特許文献２の技術では、機器の操作項目を設定項目とそれに対する機能番号とからなる階層メニューとして配置しておき、利用者が視覚障害者であると認識されたとき、機器の操作を音声モードに移行させる。この音声モードでは、利用者が方向キーにより前記階層メニューの設定項目への移動または選択操作を行い、この移動操作に応じて、音と音声によって利用者へその操作結果を通知するようにして、視覚障害者が視覚を使用せずに、健常者と同様に機器の各種操作を容易に行えるようにした。
【０００６】
ところで、原稿を読み取った画像イメージを文字認識して文字情報へ変換し、変換した文字情報を音声合成で読み上げる装置も多く存在している。
特許文献３の技術では、ファクシミリシステムにおいて、音声を文字情報に変換する音声認識部、文字情報を音声に変換する音声合成部、画像イメージを文字情報に変換するＯＣＲ処理部を備えており、音声と文字情報の双方向のデータ交換を可能としている。例えば、操作部より利用者ＩＤを指定することにより、提供するサービスを切り替え、受信した画像イメージを文字認識して文字情報に変換し、この文字情報を音声合成して音声に変換することで、視覚障害者に対応したサービス提供を可能とした。
【特許文献１】特開平１０−１１７２６３号公報
【特許文献２】特開２００３−１４０８８０号公報
【特許文献３】特開２００４−３３６３５８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、上述した特許文献１、２の技術は、原稿が正しい向きにセットされていることを前提として、設定された機能を実行するものである。例えば、ユーザが複写された用紙をファイルに綴じるための処理として「用紙の左側にパンチ穴を空ける」という機能を選択した場合、原稿が正しくセットされていれば希望通りの処理が行われるが、原稿の天地や両面原稿の裏表を逆にセットしてしまった場合には、期待に反してパンチ穴は用紙の右側に空けられてしまうことになる。
【０００８】
即ち、視覚に障害を有するユーザにとっては、タッチパネルの表示が見えなくても正しく操作できる仕組みを提供するだけでは不十分であり、原稿の内容が見えなくても正しい方向に原稿をセットすることができるようなサポート機能が提供されてはじめて、「コピーをとる」という一連の作業を独力で完遂できるわけである。
【０００９】
また、特許文献３の技術では、ファクシミリ装置で受信した原稿の内容を音声で伝えるだけであり、原稿のセット方向の誤りを指摘するものではない。
【００１０】
本発明は、上述の実情を考慮してなされたものであって、原稿内容を視覚的に確認することが困難なユーザでも、正しい向きに原稿をセットするためのサポートを実現する画像読取装置、プログラムおよび記録媒体を提供することを目的とする。
【課題を解決するための手段】
【００１１】
上述の課題を解決するために、請求項１に記載の発明は、視覚情報を使用せずに触覚および聴覚的な情報のみを手がかりとして操作することを可能にした画像読取装置において、原稿面を読み取る画像読み取り部と、前記画像読み取り部で読み込まれた画像イメージの文字領域を抽出する文字領域抽出処理部と、前記文字領域抽出処理部で抽出した文字領域内の個々の文字の方向を判定することによって、前記原稿の上辺がコンタクトガラスのどの方向にセットされているかを識別する原稿方向判定処理部と、前記原稿方向判定処理部の結果を音声メッセージで通知する音声合成処理部とを備えることを特徴とする。
【００１２】
請求項２に記載の発明は、請求項１に記載の画像読取装置において、前記文字領域抽出処理部で抽出した文字領域内を文字認識する文字認識処理部を備え、前記音声合成処理部は、原稿セット方向の識別結果が得られた後、ユーザからの指示に応じて、前記文字認識処理部で文字認識された文字列を読み上げるようにしたことを特徴とする。
請求項３に記載の発明は、請求項２に記載の画像読取装置において、前記音声合成処理部は、文字認識時の認識スコアに応じて合成される音声の韻律情報を変化させて音声出力することを特徴とする。
【００１３】
請求項４に記載の発明は、請求項２に記載の画像読取装置において、前記原稿の上辺がセットされている方向の指示を読み取るユーザインタフェース部を備え、ユーザが前記音声合成処理部からの音声によって原稿の向きを判断し、前記ユーザインタフェース部によって前記原稿の上辺を指定できることを特徴とする。
【００１４】
請求項５に記載の発明は、コンピュータに、請求項１乃至４のいずれかに記載の画像読取装置の機能を実現させるためのプログラムである。
請求項６に記載の発明は、コンピュータが読み取り可能な記録媒体であって、請求項５に記載のプログラムを記録したことを特徴とする記録媒体である。
【発明の効果】
【００１５】
本発明によれば、ユーザがコンタクトガラス上に置いた原稿面の向きを認識して通知するので、原稿内容を視覚的に確認することが困難なユーザでも原稿の向きを知ることができ、最終的に正しい向きに原稿をセットするためのサポートを実現することができる。
【００１６】
また、指定された原稿の向きを前提として文字認識された原稿の内容が読み上げられるので、原稿内容を視覚的に確認することが困難なユーザでも原稿の向きの妥当性、裏表方向の妥当性、原稿自体の妥当性を同時に判断することができ、最終的に正しい向きに原稿をセットするためのサポートが実現される。
さらに、文字認識した原稿の内容を読み上げるとき、文字認識時の確信度を合成音声の韻律に反映させるので、認識誤りが生じている可能性のある個所を把握できその対処が簡単にできる。
【００１７】
また、コンタクトガラス上に置いた原稿の向きが間違っていると判断したときに、方向キーによって原稿の向きを簡単に訂正することができるため、原稿の向きを変えて再セットするといった手間を掛けることなしに正しい向きにすることができる。
【発明を実施するための最良の形態】
【００１８】
以下、図面を参照して本発明の画像読取装置に係る好適な実施形態について説明する。本実施形態では、画像読取装置を複写機のスキャナ部とした場合について説明するが、本発明は、これに限定されるものではなく、原稿を正しい向きに置かないと正しい結果を得られない画像読取装置を備える複写機、複合機、ファクシミリ装置あるいはスキャナ装置にも同様の効果が期待できる。
【００１９】
図１は、本発明の実施形態に係る画像読取装置の機能構成を示すブロック図である。同図において、画像読取装置は、通常の画像読取機能に加えて、原稿読み取り部１、画像記憶部２、文字領域抽出処理部３、原稿方向判定処理部４、文字認識処理部５、音声合成処理部６、ユーザインタフェース部７から構成される。
【００２０】
原稿読み取り部１は、スキャナ部で構成され、スキャナ部に置かれた原稿を読み取り、読み取った画像データを画像記憶部２へ出力する。
画像記憶部２は、ハードディスクで構成され、原稿読み取り部１で取得した原稿画像データを一時的に保持するためのものである。
【００２１】
文字領域抽出処理部３は、画像記憶部２に保持されている原稿画像データを解析して、文字領域（文字が書かれている領域）とその他の領域（写真領域、余白など）の分離を行う。ここで、原稿が白紙（何も書かれていない、あるいは内容が極端に少ない）や文字が描かれていない写真領域だけであるか否かのチェックも合わせて行われる。
【００２２】
原稿方向判定処理部４は、文字領域抽出処理部３で抽出された文字領域内の個々の文字の方向を解析して原稿全体の向き（上辺がどちらの向きにセットされているか）の判定を行う。ただし、文字方向の判定を完璧に実行することは難しいため、特に文字領域が少ない原稿などでは最終的な判定結果に誤りがある可能性もある。
ここで、「原稿の上辺」とは、原稿に書かれている文字が正立して見える向きに原稿を置いたときの原稿の上の辺をいう。
【００２３】
文字認識処理部５は、原稿方向判定処理部４で求められた原稿の向きを前提として、文字領域抽出処理部３で抽出された文字領域内の文字認識を行う。ただし、文字認識を完璧に行うことは極めて難しいため、認識された文字の一部には誤りがある可能性がある。この認識時の確信度は、認識スコアに反映されており、認識スコアが高いほど、その認識結果が正しいものである可能性が高い。
【００２４】
この文字認識処理は、原稿方向判定処理部４で得られた原稿方向を前提として行われるため、原稿方向の判定結果が間違っていた場合には、文字認識処理がうまく実行できず、得られた結果は全く無意味な内容（非文）になることが予想される。また、この際の認識スコアも極端に低いものとなる。
【００２５】
音声合成処理部６は、文字認識処理部５で得られた認識結果の文字列から音声波形信号への変換を行う。この変換では、その文字領域内の文字認識を実行した際に得られた認識スコアの単純平均、あるいは、文字列順に従った移動平均（当該文字の前後ｎ文字の平均認識スコアを当該文字の平均認識スコアとする）に従って、韻律を変化させるようにして合成音声波形を生成する。
この韻律制御としては、例えば、波形の振幅（スコアが大きい文字付近の語ほど大きな声で読み上げる）やピッチ（スコアが大きい文字付近の語ほど高い声で読み上げる）を変化させる。
【００２６】
ユーザインタフェース部７は、画像形成装置の操作キーや、音声を出力するスピーカ、ヘッドフォンなどからなり、入力時には、原稿の方向判別処理の開始や、文字認識結果の読み上げ処理の開始、原稿セット方向の指示を行い、出力の時には音声によるガイダンスや文字認識結果を読み上げる音声を出力する。
【００２７】
次に、図２のフローチャートを用いて、ユーザが原稿のセット方向を確認するまでの処理の流れを説明する。この確認処理が終了した後、従来の操作により画像読取機能を使うことができる。
【００２８】
ユーザインタフェース部７のキーのうち［確認開始］ボタンをユーザが押下すると、画像読取装置は原稿読み取り部１によってコンタクトガラス上に置かれた原稿面を読み込み、デジタル信号へ変換して、画像記憶部２に一時的に保存する（ステップＳ１）。
【００２９】
読み込まれた原稿画像に対して、文字領域抽出処理部３で文字領域を特定した後、原稿方向判定処理部４で個々の文字の向きを判定して原稿の向きを判別し、その結果を音声メッセージに変換し、ユーザインタフェース部７のスピーカやヘッドフォンを通してユーザに通知する（ステップＳ２）。ここで、白紙や写真だけの原稿が検知された場合にも、この時点で白紙や写真であることをユーザに通知する。
【００３０】
ユーザがこの時点で原稿セット方向の確認を終わりたい場合には、ユーザインタフェース部７の［確認終了］ボタンを押下することによってその旨を指示する。この指示を受けて（ステップＳ３／ＹＥＳ）、画像読取装置は確認処理を終了する。
【００３１】
一方、ユーザがこの時点で原稿セット方向の確認を継続したい場合には、ユーザインタフェース部７の［確認継続］ボタンの押下によってその旨を指示する。この指示を受けて（ステップＳ３／ＮＯ）、画像読取装置は文字領域内の文字に対して、原稿方向判定処理部４の判定結果、あるいはユーザからの明示的な指示に従って仮定された原稿方向を前提として文字認識処理部５で文字認識処理を実行する（ステップＳ４）。この際に、各文字の認識スコアも合わせて算出する。
なお、この時点で仮定されている原稿セット方向に誤りがある場合には、文字認識が正しく行われないため、認識結果が全く得られないか、あるいは実際に書かれている内容とは全く異なったもの（非文）が得られる。
【００３２】
文字認識処理部５で得られた文字認識結果と確信度を基に音声合成処理部６により音声波形信号に変換し、ユーザインタフェース部７のスピーカ等を通して再生する（ステップＳ５）。
【００３３】
ユーザは、再生された内容が予期していたものとほぼ一致しているかを判断し、正しい原稿セット方向が確認できた場合にはユーザインタフェース部７の［確認終了］ボタンの押下によってその旨を指示する。この指示を受けて（ステップＳ６／ＹＥＳ）、画像読取装置は確認処理を終了する。
【００３４】
一方、読み上げられた内容が言語としてほとんど意味をなさないようであれば、ユーザは原稿セット方向に誤りがあるものと考える。さらに、ユーザは、概ね意味のある文章にはなっているが予期した内容とは異なっている場合には、原稿の向きは正しいが、原稿面（表裏）が間違っている、あるいは原稿そのものが間違ったものである可能性があると判断する。
【００３５】
ユーザが原稿セット方向に誤りがあったと判断した場合には、ユーザインタフェース部７の方向を表すキーを使用して、原稿の上辺と仮定する方向を明示的に指定（変更）する。この指示があった場合（ステップＳ７／ＹＥＳ）、画像読取装置は、画像記憶部２に記憶されている画像イメージの読み取り方向を方向キーに基づいて回転させて、原稿セット方向を変更し（ステップＳ８）、ステップＳ４へ戻って処理を繰り返す。
【００３６】
この方向を表すキーは、例えば、テンキーの［２］は「上辺が上にある（回転なし）」、［４］は「上辺が左にある（９０度右回転）」、［６］は「上辺が右にある（９０度左回転）」、［８］は「上辺が下にある（１８０度回転）」として使用する。
例えば、原稿の上辺を右にして置いてある場合には、［６］を押下することによって、原稿イメージを反時計回りで９０度回転させ、回転結果の画像イメージを正立方向にある画像イメージと仮定する。
または、１つの方向キーに「９０度右回転」を割り当てるようにしてもよい。この場合、上辺の置いてある方向が間違っていた場合、方向キーを押すたびに原稿の向きを判断させることによって、最大３回の試行によって原稿の正立方向を決定することができる。
【００３７】
一方、原稿面が正しくない、あるいは原稿そのものが間違っているとユーザが判断した場合には、コンタクトガラスに正しい面または正しい原稿をセットし（ステップＳ９）、ユーザインタフェース部７の［確認継続］ボタンの押下によってその旨を指示する。この指示を受けて、画像読取装置はステップＳ１へ戻り、処理をやり直す。
【００３８】
以上の処理によって、ユーザ自身が原稿の向きおよび裏表、あるいは原稿自体の正否を判断できるようになり、その結果を利用して原稿を正しい向きにセットできるようになる。
【００３９】
図３は、読み取った原稿画像イメージデータを、正立方向、９０度右回転、１８０度右回転、２７０度右回転した画像イメージに対して文字認識した結果を示したものである。図３によると、正立方向の文字認識結果は、原稿の内容を忠実に表現しているのに対し、他の方向（９０度、１８０度、２７０度）から見た画像イメージの文字認識結果は、全く無意味な文字列となっていることが分かる。
従って、音声合成で読み上げられた文字認識結果の音声を聴けば、原稿の内容を見なくても、どの方向が正しいのかを簡単に知ることができる。
【００４０】
本発明は、上述した実施形態のみに限定されたものではない。上述した実施形態の画像読取装置を構成する各機能をそれぞれプログラム化して、予め記録媒体に書き込んでおき、この記録媒体に記録されたこれらのプログラムをコンピュータに備えられたメモリあるいは記憶装置に格納し、そのプログラムを実行することによって、本発明の目的が達成されることは言うまでもない。この場合、記録媒体から読み出されたプログラム自体が上述した実施形態の機能を実現することになり、そのプログラムおよびそのプログラムを記録した記録媒体も本発明を構成することになる。
また、上記プログラムは、そのプログラムの指示に基づき、オペレーティングシステムあるいは他のアプリケーションプログラム等と共同して処理することによって上述した実施形態の機能が実現される場合も含まれる。
【００４１】
なお、上述した実施形態の機能を実現するプログラムは、ディスク系（例えば、磁気ディスク、光ディスク等）、カード系（例えば、メモリカード、光カード等）、半導体メモリ系（例えば、ＲＯＭ、不揮発性メモリ等）、テープ系（例えば、磁気テープ、カセットテープ等）等のいずれの形態の記録媒体で提供されてもよい。あるいは、ネットワークを介して記憶装置に格納されたプログラムをサーバコンピュータから直接供給を受けるようにしてもよい。この場合、このサーバコンピュータの記憶装置も本発明の記録媒体に含まれる。
このように、上述した実施形態の機能をプログラム化して流通させることによって、コストの低廉化、および可搬性や汎用性を向上させることができる。
【図面の簡単な説明】
【００４２】
【図１】本発明の実施形態に係る画像読取装置の機能構成を示すブロック図である。
【図２】ユーザが原稿のセット方向を確認するまでの処理の流れを示すフローチャートである。
【図３】読み取った原稿画像イメージデータを、正立方向、９０度右回転、１８０度右回転、２７０度右回転した画像イメージに対して文字認識した結果である。
【符号の説明】
【００４３】
１…原稿読み取り部、２…画像記憶部、３…文字領域抽出処理部、４…原稿方向判定処理部、５…文字認識処理部、６…音声合成処理部、７…ユーザインタフェース部。
【図１】
2006319548.tif 000003
【図２】
2006319548.tif 000004
【図３】
2006319548.tif 000005