(57)【要約】【課題】文字認識した文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる文字入力装置および文字入力方法を提供する。【解決手段】文字入力装置は、画像を取得する撮像部１１と、撮像部１１で取得した画像を表示する表示部１３と、表示部１３に表示された画像における特定の範囲を指定する入力部１２と、入力部１２で指定された範囲に含まれる文字を認識する文字認識部１４と、文字認識部１４で認識された文字を記憶する記憶部１５と、記憶部１５に記憶された（全ての）文字を取得して変換候補を決定し、変換候補を表示部１３に表示する文字変換部１６とを有する。これによれば、記憶部１５に記憶した文字を文字列として取得し、その文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる。【選択図】図１
2010191907.tif 000002
【特許請求の範囲】
【請求項１】
画像を取得する撮像部と、
前記撮像部で取得した画像を表示する第１の表示部と、
前記第１の表示部に表示された画像における、特定の範囲を指定する入力部と、
前記入力部で指定された範囲に含まれる文字を認識する文字認識部と、
前記文字認識部で認識された文字を記憶する記憶部と、
前記記憶部に記憶された文字の変換候補を決定する文字変換部と、
前記変換候補を表示する第２の表示部と、を有する文字入力装置。
【請求項２】
請求項１記載の文字入力装置であって、
前記文字変換部は、前記記憶部に記憶された全ての文字を取得して変換候補を決定する文字入力装置。
【請求項３】
請求項１記載の文字入力装置であって、
前記記憶部は、前記文字認識部で認識された文字に対応する文字コードを記憶する文字入力装置。
【請求項４】
請求項３記載の文字入力装置であって、
前記文字変換部は、前記記憶部に連続して記憶された文字コードから文字列を取得して変換候補を決定する文字入力装置。
【請求項５】
請求項４記載の文字入力装置であって、
前記文字変換部は、英数字または仮名に対応する文字コードが連続する場合に文字列を取得する文字入力装置。
【請求項６】
請求項５記載の文字入力装置であって、
前記文字変換部は、仮名に対応する文字コードが連続する文字列に対して仮名漢字変換を行う文字入力装置。
【請求項７】
請求項１記載の文字入力装置であって、
前記文字認識部から供給される文字コードに漢字コードが含まれている場合に、前記漢字コードを前記表示部に出力する文字種別判定部を有する文字入力装置。
【請求項８】
請求項７記載の文字入力装置であって、
前記表示部は、前記漢字コードに対応する漢字を確定表示する文字入力装置。
【請求項９】
請求項７記載の文字入力装置であって、
前記記憶部は、前記文字種別判定部から供給される英数字または仮名に対応する文字コードを記憶する文字入力装置。
【請求項１０】
請求項１乃至９のいずれか１項記載の文字入力装置であって、
前記入力部は、文字キーボードを有しない文字入力装置。
【請求項１１】
請求項１乃至９のいずれか１項記載の文字入力装置であって、
前記入力部と、前第１の表示部と、前記第２の表示部とは、タッチパネルとして一体化されている文字入力装置。
【請求項１２】
コンピュータが実行する文字入力方法であって、当該コンピュータが実行する、
画像を取得するステップと、
取得した画像を表示するステップと、
表示された画像における、特定の指定された範囲に含まれる文字を認識するステップと、
認識された文字を記憶するステップと、
記憶された文字を取得して変換候補を決定するステップと、
前記変換候補を表示するステップと、を含む文字入力方法。
【請求項１３】
請求項１２記載の文字入力方法であって、
表示された画像の指定された範囲に含まれる文字に対応する文字コードに漢字コードが含まれている場合に、前記漢字コードに対応する漢字を確定表示する文字種別判定ステップを有する文字入力方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文字認識を利用した文字入力装置および文字入力方法、特に、文字認識した文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる文字入力装置および文字入力方法に関する。
【背景技術】
【０００２】
従来、文字・図形などの画像を読み取る画像読取装置を利用して、例えば、テレビ放送やビデオ映像、パソコンの画面などに表示されたテロップや情景中の文字などに関するより詳細な情報を取得するための画像認識装置および画像認識処理手順を記憶した記憶媒体が知られている。
【０００３】
図７は、このような画像認識装置において自動的に文字を抽出する場合の処理ブロック構成図である。この画像認識装置は、画像表示装置１に入力されるテレビ映像やビデオ映像、インターネットの画面、パソコンからの映像信号などの様々な信号に基づいて、文字認識装置２が、文字の色情報や大きさ位置情報などから自動的に文字情報を切り出し文字コードとして認識する。
【０００４】
また、この画像認識装置および画像認識処理手順を記憶した記憶媒体は、双方向通信機能により画像表示し、画像表示処理により表示されている画像中の文字を認識し、この文字認識処理での文字認識結果に関連する情報を、双方向通信機能を用いて検索し取得している。よって、キーワードをインターネットなどで検索し、該当データを得ることにより関連情報を得ることができる（例えば、特許文献１参照）。
【０００５】
一方、文字認識装置を利用して、それより返されたデータに基づいて、仮名漢字変換を行い、文書を作成、編集する文書処理装置が知られている。図８は、このような文書処理装置の基本構成を示すブロック図である。
【０００６】
同図において、一点鎖線ブロック１０００はイメージ入力機能、光学式文字読み取り装置を備え、仮名漢字変換および文書作成が可能な文書処理装置を示す。１００は、イメージ入力を行うためスキヤナ等を使用することによってイメージデータを入力する手段である。２００は、前記で得られたイメージ画面をもとにして、文字認識を行う認識領域を範囲指定することによって、その領域のイメージデータを光学式文字読み取り装置によって文字認識を行う手段である。
【０００７】
３００は、２００によって認識された結果を、候補文字を含むテキストデータとして受け取り、その候補文字の第１候補を認識結果表示部に表示する手段である。４００は、３００で表示された文字をポインテイングデバイス（Ｐ．Ｄ）で指示することによって、文字候補部に表示された候補文字を選択する第１の入力手段である。
【０００８】
５００は、４００と同じように表示された文字候補部から選択するのではなく、仮名漢字変換を用いたキー入力によって文字修正ができ、その指示された文字にかわって複数文字入力することが可能な第２の入力手段である。６００は、５００で用いた仮名漢字変換手段である。７００は、認識された文字列を確定し候補文字を持たないテキストデータにする手段である。８００は、７００で作られたテキストデータをフアイルにする手段である。
【０００９】
この文書処理装置は、認識結果の候補文字と表示されているテキストデータとは別の領域をもつため、表示されているテキストデータの領域内で文字の操作が出来るので、文字候補を選択するモードで仮名漢字変換機能を利用することにより、文字の修正も出来るという効果がある（例えば、特許文献２参照）。
【００１０】
【特許文献１】特開２００３−６１０１号公報
【特許文献２】特開平４−２４７５８号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
特許文献１に記載された画像認識装置および画像認識処理手順を記憶した記憶媒体は、表示されている画像中の文字を認識し、この文字認識処理での文字認識結果に関連する情報を、双方向通信機能を用いて検索し取得している。よって、キーワードをインターネットなどで検索し、該当データを得ることにより関連情報を得ることができる。 しかしながら、認識された文字から関連情報を読み出すだけで、映像に表示されているデータ以外の文字を入力することができない。
【００１２】
また、特許文献２に記載された文書処理装置では、文字認識結果を編集する際の煩わしさを解消するために、各文字の修正候補文字を選択するモードで仮名漢字変換機能を利用し、文字の修正を行う。しかしながら、文字認識後に各文字の修正候補を出す手段として、仮名漢字変換を使用しているのみで、文字認識結果の文字列を文字変換する事はできない。すなわち、一字毎の仮名漢字変換がなされるのみで、撮像した画像から文字列を読み出し、変換する機能は開示されていない。
【００１３】
本発明は、上記従来の事情に鑑みてなされたものであって、文字認識した文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる文字入力装置および文字入力方法を提供することを目的としている。
【課題を解決するための手段】
【００１４】
本発明の文字入力装置は、画像を取得する撮像部と、前記撮像部で取得した画像を表示する第１の表示部と、前記第１の表示部に表示された画像における、特定の範囲を指定する入力部と、前記入力部で指定された範囲に含まれる文字を認識する文字認識部と、前記文字認識部で認識された文字を記憶する記憶部と、前記記憶部に記憶された文字の変換候補を決定する文字変換部と、前記変換候補を表示する第２の表示部とを有する。
【００１５】
上記構成によれば、記憶部に記憶した文字を文字列として取得し、その文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができ、例えば、「Ｙ」と「Ｏ」の文字コードを入力とした場合、「ＹＯ」「よ」「世」「夜」等の文字候補を選択可能にし、映像に表示されているデータ以外の文字をローマ字入力方法や、かな入力方法によって入力することができる。
【００１６】
また、本発明の文字入力装置において、前記文字変換部は、前記記憶部に記憶された全ての文字を取得して変換候補を決定する。
【００１７】
上記構成によれば、記憶部に記憶された全ての文字を文字列として取得し、その文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる。
【００１８】
また、本発明の文字入力装置において、前記記憶部は、前記文字認識部で認識された文字に対応する文字コードを記憶する。
【００１９】
上記構成によれば、記憶部に文字コードを連続して記憶することにより文字列を識別することができる。
【００２０】
また、本発明の文字入力装置において、前記文字変換部は、前記記憶部に連続して記憶された文字コードから文字列を取得して変換候補を決定する。
【００２１】
上記構成によれば、記憶部に連続して記憶した文字コードから文字列を取得して変換候補を決定するので、撮像した文字とは異なる新たな文字へ変換することができる。
【００２２】
また、本発明の文字入力装置において、前記文字変換部は、英数字または仮名に対応する文字コードが連続する場合に文字列を取得する。
【００２３】
上記構成によれば、英数字または仮名に対応する文字コードが連続する場合に文字列を取得するので、画像に表示されている文字以外の新たな文字を入力することができる。
【００２４】
また、本発明の文字入力装置において、前記文字変換部は、仮名に対応する文字コードが連続する文字列に対して仮名漢字変換を行う。
【００２５】
上記構成によれば、仮名に対応する文字コードが連続する文字列に対して仮名漢字変換を行うので、認識文字から新たな文字へ変換することができる。
【００２６】
また、本発明の文字入力装置は、前記文字認識部から供給される文字コードに漢字コードが含まれている場合に、前記漢字コードを前記表示部に出力する文字種別判定部を有する。
【００２７】
上記構成によれば、文字コードに漢字コードが含まれている場合に、漢字コードを表示部に出力するので、処理時間が短縮し、文字入力を迅速に行うことができる。
【００２８】
また、本発明の文字入力装置において、前記表示部は、前記漢字コードに対応する漢字を確定表示する。
【００２９】
上記構成によれば、漢字コードに対応する漢字を確定表示するので、処理時間が短縮し、文字入力を迅速に行うことができる。
【００３０】
また、本発明の文字入力装置において、前記記憶部は、前記文字種別判定部から供給される英数字または仮名に対応する文字コードを記憶する。
【００３１】
上記構成によれば、記憶部は、文字種別判定部から供給される英数字または仮名に対応する文字コードだけを記憶するので、記憶領域が小さくなり、ハードウェアを簡素化することができる。
【００３２】
また、本発明の文字入力装置において、前記入力部は、文字キーボードを有しない。
【００３３】
上記構成によれば、文字キーボードを有しない入力装置でも、認識文字によるローマ字入力や、仮名漢字入力により文字を容易に入力することができる。
【００３４】
また、本発明の文字入力装置において、前記入力部と、前記第１の表示部と、前記第２の表示部とは、タッチパネルとして一体化されている。
【００３５】
上記構成によれば、入力部および表示部がタッチパネルとして一体化されているので、文字入力手段を備えた携帯機器を小型化することができる。
【００３６】
また、本発明の文字入力方法は、コンピュータが実行する文字入力方法であって、当該コンピュータが実行する、画像を取得するステップと、取得した画像を表示するステップと、表示された画像における、特定の指定された範囲に含まれる文字を認識するステップと、認識された文字を記憶するステップと、記憶された文字を取得して変換候補を決定するステップと、前記変換候補を表示するステップと、を含む。
【００３７】
上記構成によれば、連続して記憶した文字を文字列として取得し、その文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができ、例えば、「Ｙ」と「Ｏ」の文字コードを入力とした場合、「ＹＯ」「よ」「世」「夜」等の文字候補を選択可能にし、映像に表示されているデータ以外の文字を入力することができる。
【００３８】
また、本発明の文字入力方法において、表示された画像の指定された範囲に含まれる文字に対応する文字コードに漢字コードが含まれている場合に、前記漢字コードに対応する漢字を確定表示する文字種別判定ステップを有する。
【００３９】
上記構成によれば、文字コードに漢字コードが含まれている場合に、漢字コードに対応する漢字を確定表示するので、処理時間が短縮し、文字入力を迅速に行うことができる。
【発明の効果】
【００４０】
以上説明したように、本発明にかかる文字入力装置および文字入力方法によれば、文字認識した文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる。
【発明を実施するための最良の形態】
【００４１】
（第１の実施形態）
図１は、本発明の実施形態にかかる文字入力装置の全体構成のブロック図を示す。本実施形態の文字入力装置は、画像を取得する撮像部１１と、撮像部１１で取得した画像を表示する表示部１３と、表示部１３に表示された画像における特定の範囲を指定する入力部１２と、入力部１２で指定された範囲に含まれる文字を認識する文字認識部１４と、文字認識部１４で認識された文字を記憶する記憶部１５と、記憶部１５に記憶された（全ての）文字を取得して変換候補を決定し、変換候補を表示部１３に表示する文字変換部１６とを有する。
【００４２】
この文字入力装置において、表示部１３としてタッチパネルを使用し、タッチパネル上で表示、範囲を指定し、変換がされる場合、撮像部１１で取得した画像を表示する表示部１３（第１の表示部）、表示された画像における特定の範囲を指定する入力部１２、変換候補を表示する表示部１３（第２の表示部）は総て同じ画面、デバイスになる。
【００４３】
図２は、本発明の実施形態にかかる文字入力装置の処理手順を説明するためのフローチャートを示す。本発明の実施形態にかかる文字入力装置は、カメラなどの撮像部１１で撮像した文字（キーボード、本等）を取り込みデータ変換し、当該文字の文字コードから、変換候補を挙げて、表示することができる。例えばキーボードがない携帯機器で、文字を撮影で取り込んで（タッチパネルなどで）文字入力を可能とする場面が想定される。
【００４４】
まず、撮像部１１が、キーボード、本等の対象を撮像し（ステップＳ１１）、表示部１３が画像を表示する（ステップＳ１２）。このとき、例えば本に印刷されている文字が、見やすくするために表示部１３において拡大され、表示させる。そして、タッチパネルまたはカーソルボタンに連動する入力部１２で、ユーザーが切出範囲を選択し（ステップＳ１３）、文字認識部１４が選択範囲の文字を認識する（ステップＳ１４）。
【００４５】
次に、文字認識部１４が文字コードを取得し（ステップＳ１５）、記憶部１５が文字コードを記憶する（ステップＳ１６）。このとき文字コードにより英数字または仮名が連続して入力されることを検出した場合に、自動的に文字列として認識してもよく、またはカーソル等によるユーザーの指示に応じて文字列の範囲を設定してもよい。そして、文字変換部１６が、文字列を仮名漢字変換し（ステップＳ１７）、表示部１３が変換候補を表示する（ステップＳ１８）。これにより、ユーザーは、変換候補から所望の文字を選択し、撮像部１１が撮影した文字以外の文字を入力することができる。
【００４６】
図３は、キーボードを持たない携帯端末２１でキーボード２２を撮影し、文字入力を行う場合の説明図である。図３（ａ）は、携帯端末２１の撮像部でキーボード２２の一部を撮影し、撮影画像を表示部１３（第１の表示部）に表示させた様子を示す。例えば、ユーザーが漢字の「世」を入力したい場合、表示部１３にキーボード２２の「Ｙ，Ｕ，Ｉ，Ｏ」が表示されるように撮影する。そして、図３（ｂ）に示すように、入力部１２によりカーソル２３で「Ｙ」をポイントしてクリックし、次に、図３（ｃ）に示すように、カーソル２３で「Ｏ」をポイントしてクリックする。記憶部１５には英字「Ｙ」および「Ｏ」の文字コードが連続して記憶される。そして、文字変換部１６は、記憶部１５に連続して記憶された文字コードから文字列を取得して変換候補を決定する。これにより、図３（ｄ）に示すように、表示部１３（第２の表示部）に「ＹＯ」「よ」「世」「夜」等の文字候補が表示されるので、カーソル２３で「世」を選択し入力する。
【００４７】
本実施形態の文字入力装置によれば、画像を取得する撮像部１１と、撮像部１１で取得した画像を表示する表示部１３と、表示部１３に表示された画像における特定の範囲を指定する入力部１２と、入力部１２で指定された範囲に含まれる文字を認識する文字認識部１４と、文字認識部１４で認識された文字を記憶する記憶部１５と、記憶部１５に記憶された（全ての）文字を取得して変換候補を決定し、変換候補を表示部１３に表示する文字変換部１６とを有し、文字認識後の文字コードを、更に文字変換する事で、文字入力手段として利用することができる。例えばＹＯという文字映像を認識した場合、文字変換部１６では「Ｙ」と「Ｏ」の文字コードを入力とし、「ＹＯ」「よ」「世」「夜」等の文字候補が選択可能になる。
【００４８】
（第２の実施形態）
図４は、本発明の実施形態にかかる文字入力装置の全体構成のブロック図を示す。本実施形態の文字入力装置は、画像を取得する撮像部１１と、撮像部１１で取得した画像を表示する表示部１３と、表示部１３に表示された画像における特定の範囲を指定する入力部１２と、入力部１２で指定された範囲に含まれる文字を認識する文字認識部１４と、文字認識部１４で認識された文字の文字種別を判定し、文字コードに漢字コードが含まれている場合に、漢字コードを表示部１３に出力する文字種別判定部１７と、文字コードに漢字コードが含まれていない場合に、文字種別判定部１７から出力される文字コードを記憶する記憶部１５と、記憶部１５に記憶された（全ての）文字を取得して変換候補を決定し、変換候補を表示部１３に表示する文字変換部１６とを有する。
【００４９】
文字種別判定部１７は、文字コードを記憶部１５に入力として与える際、漢字の文字コードを自動判定し、漢字は文字を確定状態、それ以外は文字変換の対象として自動判定する。
【００５０】
すなわち、文字種別判定部１７は、文字認識部１４から供給された文字コードが漢字コードの場合、その漢字コードを表示部１３に出力するとともに、文字認識部１４から供給された文字コードが英数字または仮名の文字コードの場合、その文字コードを記憶部１５に出力する。英数字または仮名が連続する場合、記憶部１５は、その文字コードを連続して記憶する。これにより、文字変換部１６は、記憶部１５に連続して記憶された文字コードから文字列を取得して変換候補を決定することができる。
【００５１】
図５は、本発明の実施形態にかかる文字入力装置の処理手順を説明するためのフローチャートを示す。撮像部１１が対象を撮像し（ステップＳ２１）、表示部１３が画像を表示する（ステップＳ２２）。そして、入力部１２でユーザーが範囲を選択し（ステップＳ２３）、文字認識部１４が選択範囲の文字を認識する（ステップＳ２４）。
【００５２】
次に、文字認識部１４が文字コードを取得し（ステップＳ２５）、文字種別判定部１７が、文字コードに漢字コードが含まれているか判定する（ステップＳ２６）。そして、漢字コードを含むと判定した場合（Ｙｅｓ）、表示部１３が漢字を表示し、ステップ２６に戻る。一方、漢字コードを含まないと判定した場合（Ｎｏ）、記憶部１５に連続して記憶する（ステップＳ２８）。文字変換部１６が文字を仮名漢字変換し（ステップＳ２９）、表示部１３が変換候補を表示する（ステップＳ３０）。
【００５３】
図６は、表示部１３が入力部を兼用するタッチパネル等で構成された携帯端末２１で本３１の一部を撮影し、文字入力を行う場合の説明図である。図６（ａ）は、携帯端末２１の撮像部で本３１の一部を撮影し、それを表示部１３（第１の表示部）に表示させた様子を示す。例えば、ユーザーが「山の頂・・」を撮影すると、最初の文字「山」が漢字であることを文字コードから自動判定し、その漢字「山」を確定状態とする。一方、図６（ｂ）に示すように、次の文字「の」が仮名であることを文字コードから自動判定して文字変換の対象とし、図６（ｃ）に示すように、表示部１３（第２の表示部）に「の」「ノ」「野」「乃」等の文字候補を表示する。ユーザーが表示部１３に表示された「の」を指先またはペン先等で触れると、「の」が選択され入力される。
【００５４】
このように本実施形態の文字入力装置によれば、画像を取得する撮像部１１と、撮像部１１で取得した画像を表示する表示部１３と、表示部１３に表示された画像における特定の範囲を指定する入力部１２と、入力部１２で指定された範囲に含まれる文字を認識する文字認識部１４と、文字認識部１４で認識された文字の文字種別を判定し、文字コードに漢字コードが含まれている場合に、漢字コードを表示部１３に出力する文字種別判定部１７と、文字コードに漢字コードが含まれていない場合に、文字種別判定部１７から出力される文字コードを記憶する記憶部１５と、記憶部１５に記憶された（全ての）文字を取得して変換候補を決定し、変換候補を表示部１３に表示する文字変換部１６とを有し、文字種別判定部１７が、文字コードを記憶部１５に入力として与える際、漢字の文字コードを自動判定し、漢字は文字を確定状態、それ以外は文字変換の対象として自動判定するので処理時間が短縮し、効率良く文字を入力することができる。
【００５５】
以上、本発明の各種実施形態を説明したが、本発明は前記実施形態において示された事項に限定されず、明細書の記載、並びに周知の技術に基づいて、当業者がその変更・応用することも本発明の予定するところであり、保護を求める範囲に含まれる。
【産業上の利用可能性】
【００５６】
本発明は、文字認識した文字列を仮名漢字変換することで、認識文字から新たな文字へ変換を行うことができる文字入力装置および文字入力方法として利用可能である。
【図面の簡単な説明】
【００５７】
【図１】本発明の第1の実施形態にかかる文字入力装置の全体構成のブロック図
【図２】本発明の第1の実施形態にかかる文字入力装置の処理手順を説明するためのフローチャート
【図３】本発明の第1の実施形態にかかる携帯端末でキーボードを撮影し、文字入力を行う場合の説明図
【図４】本発明の第２の実施形態にかかる文字入力装置の全体構成のブロック図
【図５】本発明の第２の実施形態にかかる文字入力装置の処理手順を説明するためのフローチャート
【図６】本発明の第２の実施形態にかかる携帯端末で本を撮影し、文字入力を行う場合の説明図
【図７】従来の画像認識装置において自動的に文字を抽出する場合の処理ブロック構成図
【図８】従来の文書処理装置の基本構成を示すブロック図
【符号の説明】
【００５８】
１  画像表示装置
２  文字認識装置
１１  撮像部
１２  入力部
１３  表示部
１４  文字認識部
１５  記憶部
１６  文字変換部
１７  文字種別判定部
２１  携帯端末
２２  キーボード
２３  カーソル
３１  本
１００  イメージ入力手段
２００  文字認識手段
３００  文字データ表示手段
４００  第１の入力手段
５００  第２の入力手段
６００  仮名漢字変換手段
７００  文字処理手段
８００  文書ファイル手段
１０００  文書処理装置
【図１】
2010191907.tif 000003
【図２】
2010191907.tif 000004
【図３】
2010191907.tif 000005
【図４】
2010191907.tif 000006
【図５】
2010191907.tif 000007
【図６】
2010191907.tif 000008
【図７】
2010191907.tif 000009
【図８】
2010191907.tif 000010