(57)【要約】      （修正有）【課題】表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる画像処理システム、画像処理装置、画像処理方法、及び画像処理プログラムを提供する。【解決手段】画像処理システムは、本体ユニット１００と、本体ユニット１００に着脱可能なメモリ性を有する１つ以上の電子表示媒体１０１とを備える画像処理装置１０が、通信可能な所定のデータ伝送路を介して外部機器２００と接続されるシステムであって、画像処理装置１０が、外部機器２００からの表示要求に応じて、表示内容を第１の画像として電子表示媒体１０１に描画し、描画された電子表示媒体１０１の表示画面に対して、タッチ入力された情報を第２の画像として取得し、外部機器２００からの情報取得要求に応じて、取得した第２の画像を外部機器２００へ送信する。【選択図】図２
2009271568.tif 000002
【特許請求の範囲】
【請求項１】
装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備える画像処理装置と、前記画像処理装置と所定のデータ伝送路を介して双方向通信可能な外部機器とから構成される画像処理システムであって、
前記画像処理装置が、
前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手段と、
前記描画手段により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手段と、
前記外部機器からの情報取得要求に応じて、前記取得手段により取得された第２の画像を要求元の外部機器へ送信する送信手段と、を有し、
前記外部機器が、
前記画像処理装置に表示用データを送信し、前記電子表示媒体への表示を要求する表示要求手段と、
前記画像処理装置に前記第２の画像の取得を要求する取得要求手段とを有することを特徴とする画像処理システム。
【請求項２】
前記画像処理装置の本体ユニットが、
前記電子表示媒体が備えるメモリの所定の記憶領域に格納される、前記電子表示媒体の表示更新処理を行うソフトウェア部品を起動する起動手段を有し、
前記描画手段は、
前記起動手段により起動されたソフトウェア部品からの描画指示に従って、前記電子表示媒体に前記第１の画像を描画することを特徴とする請求項１に記載の画像処理システム。
【請求項３】
前記画像処理装置の本体ユニットが、
前記外部機器から表示用データとして送信された表示情報を、前記本体ユニットが備える記憶装置の所定の記憶領域に格納する表示情報格納手段を有し、
前記電子表示媒体が有するソフトウェア部品は、
前記表示情報格納手段により格納された表示情報を取得する表示情報取得手段と、
前記表示情報取得手段により取得した表示情報に基づき、描画を指示する描画指示手段と、を有することを特徴とする請求項２に記載の画像処理システム。
【請求項４】
さらに、前記電子表示媒体が有するソフトウェア部品は、
前記表示情報取得手段により取得した表示情報をデータ解析する表示情報解析手段を有し、
前記描画指示手段は、
前記表示情報解析手段による解析結果に基づき、表示内容と表示形式を決定し、描画を指示することを特徴とする請求項３に記載の画像処理システム。
【請求項５】
前記描画指示手段は、
前記本体ユニットが備える記憶装置に格納される、描画処理を行うソフトウェア部品を起動し、描画を指示することを特徴とする請求項３又は４に記載の画像処理システム。
【請求項６】
前記取得手段は、
前記第２の画像と、前記電子表示媒体の表示画面上の２次元空間における入力軌跡に関する情報を示す入力情報とを取得することを特徴とする請求項１ないし５のいずれか一項に記載の画像処理システム。
【請求項７】
前記画像処理装置が、
前記入力情報を生成する入力情報生成手段を有し、
前記入力情報生成手段は、
前記電子表示媒体を介して得られた、前記入力軌跡上の所定の地点を示す座標値に基づき、前記入力軌跡上の２点間の移動距離と移動速度とを算出し、前記座標値、前記移動距離、および前記移動速度とを含む入力情報を生成することを特徴とする請求項６に記載の画像処理システム。
【請求項８】
前記画像処理装置が、
前記入力情報生成手段により生成された入力情報を、前記電子表示媒体が備えるメモリの所定の記憶領域に格納する入力情報格納手段を有することを特徴とする請求項６又は７に記載の画像処理システム。
【請求項９】
前記送信手段は、
前記取得手段により取得された第２の画像と入力情報とを、前記外部機器へ送信することを特徴とする請求項１ないし８のいずれか一項に記載の画像処理システム。
【請求項１０】
装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備え、所定のデータ伝送路を介して外部機器と双方向通信可能な画像処理装置であって、
前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手段と、
前記描画手段により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手段と、
前記外部機器からの情報取得要求に応じて、前記取得手段により取得された第２の画像を要求元の外部機器へ送信する送信手段と、を有することを特徴とする画像処理装置。
【請求項１１】
当該画像処理装置の本体ユニットが、
前記電子表示媒体が備えるメモリの所定の記憶領域に格納される、前記電子表示媒体の表示更新処理を行うソフトウェア部品を起動する起動手段を有し、
前記描画手段は、
前記起動手段により起動されたソフトウェア部品からの描画指示に従って、前記電子表示媒体に前記第１の画像を描画することを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
当該画像処理装置の本体ユニットが、
前記外部機器から表示用データとして送信された表示情報を、前記本体ユニットが備える記憶装置の所定の記憶領域に格納する表示情報格納手段を有し、
前記電子表示媒体が有するソフトウェア部品は、
前記表示情報格納手段により格納された表示情報を取得する表示情報取得手段と、
前記表示情報取得手段により取得した表示情報に基づき、描画を指示する描画指示手段と、を有することを特徴とする請求項１１に記載の画像処理装置。
【請求項１３】
さらに、前記電子表示媒体が有するソフトウェア部品は、
前記表示情報取得手段により取得した表示情報をデータ解析する表示情報解析手段を有し、
前記描画指示手段は、
前記表示情報解析手段による解析結果に基づき、表示内容と表示形式を決定し、描画を指示することを特徴とする請求項１２に記載の画像処理装置。
【請求項１４】
前記描画指示手段は、
前記本体ユニットが備える記憶装置に格納される、描画処理を行うソフトウェア部品を起動し、描画を指示することを特徴とする請求項１２又は１３に記載の画像処理装置。
【請求項１５】
前記取得手段は、
前記第２の画像と、前記電子表示媒体の表示画面上の２次元空間における入力軌跡に関する情報を示す入力情報とを取得することを特徴とする請求項１０ないし１４のいずれか一項に記載の画像処理装置。
【請求項１６】
当該画像処理装置が、
前記入力情報を生成する入力情報生成手段を有し、
前記入力情報生成手段は、
前記電子表示媒体を介して得られた、前記入力軌跡上の所定の地点を示す座標値に基づき、前記入力軌跡上の２点間の移動距離と移動速度とを算出し、前記座標値、前記移動距離、および前記移動速度とを含む入力情報を生成することを特徴とする請求項１５に記載の画像処理装置。
【請求項１７】
当該画像処理装置が、
前記入力情報生成手段により生成された入力情報を、前記電子表示媒体が備えるメモリの所定の記憶領域に格納する入力情報格納手段を有することを特徴とする請求項１５又は１６に記載の画像処理装置。
【請求項１８】
前記送信手段は、
前記取得手段により取得された第２の画像と入力情報とを、前記外部機器へ送信することを特徴とする請求項１０ないし１７のいずれか一項に記載の画像処理装置。
【請求項１９】
装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備え、所定のデータ伝送路を介して外部機器と双方向通信可能な画像処理装置における画像処理方法であって、
前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手順と、
前記描画手順により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手順と、
前記外部機器からの情報取得要求に応じて、前記取得手順により取得された第２の画像を要求元の外部機器へ送信する送信手順と、を有することを特徴とする画像処理方法。
【請求項２０】
装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備え、所定のデータ伝送路を介して外部機器と双方向通信可能な画像処理装置における画像処理プログラムであって、
コンピュータを、
前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手段と、
前記描画手段により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手段と、
前記外部機器からの情報取得要求に応じて、前記取得手段により取得された第２の画像を要求元の外部機器へ送信する送信手段として機能させる画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示パネルを備えた画像処理装置を用いる画像処理システムに係り、特に、表示パネルを介して手書き情報の入力を行う技術に関するものである。
【背景技術】
【０００２】
例えばＯＣＲ（Optical Character Recognition）などの文書画像に基づく光学文字認識技術などによって、省スペース化や情報共有化などの様々な利点から、紙に記載された文書をテキストデータなどの電子データ化することは一般に行われるようになった。電子データ化された情報は、ＰＣ（Personal Computer）などの情報処理装置により、編集などを行うことができ、情報の加工や再利用といった面で優れている。
【０００３】
ここで問題となるのが電子データ化するときの認識精度である。一般的なＯＣＲ処理にいて文字を認識するためには、その前段階として正確な領域を認識する必要がある。しかし特に電子データ化が頻繁に行われるビジネス文書などの場合、閲覧のしやすさからフルカラー文書が多く、このような認識対象の文字などの背景色は、ＯＣＲ処理に好適な２値化画像を生成する上でその精度に悪影響を及ぼす（精度よく２値化画像を生成するのは困難であった）。
【０００４】
そこで特許文献１には、フルカラー文書画像とモノクロ文書画像との領域を精度よくかつ効率的に識別し、また、フルカラー文書であっても精度よくＯＣＲ処理することができる文書画像認識方法が提案されている。
【特許文献１】特開２００１−２９７３０３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の文書画像認識方法では、認識制度がある程度向上するものの、その精度にも限界がある。なぜなら、処理対象の画像は、読み取り装置などにより紙面上を読み取った画像であることから、例えば文字などの認識対象要素と、背景画像などの認識対象外要素とが混在している。このことから、従来の方法では、認識対象外要素の状態によっては認識精度が低下してしまうことが考えられる。
【０００６】
本来、精度よく認識を行うためには、認識対象外要素を含まず認識対象要素のみの画像を基に処理を行うことが望ましい。
【０００７】
そこで、現在の情報処理装置などの表示装置として用いられているＣＲＴ（Cathode Ray Tube）ディスプレイやＬＣＤ（Liquid Crystal Display）などの表示画面を介して認識対象要素を入力する構成が考えられる。
【０００８】
しかし、紙は、上記ＣＲＴディスプレイやＬＣＤと比較して、見やすく目が疲れにくいなどの視認性や折り曲げて小さくできるなどの携帯性に優れている点、また書き込みが簡便に行えるなどの利便性に優れている点（紙のもつユーザビリティーの優位性）などを有していることから、ユーザにとっては、上記電子ディスプレイを介した情報閲覧・情報入力環境より、紙を使用したい。
【０００９】
本発明では、上記従来技術の問題点を鑑み、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる画像処理システム、画像処理装置、画像処理方法、および画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するため、本発明の画像処理システムは、装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備える画像処理装置と、前記画像処理装置と所定のデータ伝送路を介して双方向通信可能な外部機器とから構成される画像処理システムであって、前記画像処理装置が、前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手段と、前記描画手段により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手段と、前記外部機器からの情報取得要求に応じて、前記取得手段により取得された第２の画像を要求元の外部機器へ送信する送信手段と、を有し、前記外部機器が、前記画像処理装置に表示用データを送信し、前記電子表示媒体への表示を要求する表示要求手段と、前記画像処理装置に前記第２の画像の取得を要求する取得要求手段とを有することを特徴とする。
【００１１】
このようなシステム構成によって、本発明の画像処理システムは、外部機器からの表示要求に応じて、表示・記録媒体として紙がもつ特長を備える電子表示媒体に認識対象外要素の画像（第１の画像）を表示し、電子表示媒体から認識対象要素の入力を受け付け、さらに外部機器からの入力情報取得要求に応じて、認識対象要素のみの画像（第２の画像）に基づき入力情報を認識・取得し、要求元の外部機器へ入力情報を送信する。
【００１２】
また、上記目的を達成するため、本発明の画像処理システムは、前記画像処理装置の本体ユニットが、前記電子表示媒体が備えるメモリの所定の記憶領域に格納される、前記電子表示媒体の表示更新処理を行うソフトウェア部品を起動する起動手段を有し、前記描画手段が、前記起動手段により起動されたソフトウェア部品からの描画指示に従って、前記電子表示媒体に前記第１の画像を描画することを特徴とする。
【００１３】
また、上記目的を達成するため、本発明の画像処理システムは、前記画像処理装置の本体ユニットが、前記外部機器から表示用データとして送信された表示情報を、前記本体ユニットが備える記憶装置の所定の記憶領域に格納する表示情報格納手段を有し、前記電子表示媒体が有するソフトウェア部品が、前記表示情報格納手段により格納された表示情報を取得する表示情報取得手段と、前記表示情報取得手段により取得した表示情報に基づき、描画を指示する描画指示手段と、を有することを特徴とする。
【００１４】
また、上記目的を達成するため、本発明の画像処理システムは、さらに、前記電子表示媒体が有するソフトウェア部品が、前記表示情報取得手段により取得した表示情報をデータ解析する表示情報解析手段を有し、前記描画指示手段において、前記表示情報解析手段による解析結果に基づき、表示内容と表示形式を決定し、描画を指示することを特徴とする。
【００１５】
また、上記目的を達成するため、本発明の画像処理システムは、前記描画指示手段が、前記本体ユニットが備える記憶装置に格納される、描画処理を行うソフトウェア部品を起動し、描画を指示することを特徴とする。
【００１６】
また、上記目的を達成するため、本発明の画像処理システムは、前記取得手段が、前記第２の画像と、前記電子表示媒体の表示画面上の２次元空間における入力軌跡に関する情報を示す入力情報とを取得することを特徴とする。
【００１７】
また、上記目的を達成するため、本発明の画像処理システムは、前記画像処理装置が、前記入力情報を生成する入力情報生成手段を有し、前記入力情報生成手段において、前記電子表示媒体を介して得られた、前記入力軌跡上の所定の地点を示す座標値に基づき、前記入力軌跡上の２点間の移動距離と移動速度とを算出し、前記座標値、前記移動距離、および前記移動速度とを含む入力情報を生成することを特徴とする。
【００１８】
また、上記目的を達成するため、本発明の画像処理システムは、前記画像処理装置が、前記入力情報生成手段により生成された入力情報を、前記電子表示媒体が備えるメモリの所定の記憶領域に格納する入力情報格納手段を有することを特徴とする。
【００１９】
また、上記目的を達成するため、本発明の画像処理システムは、前記送信手段が、前記取得手段により取得された第２の画像と入力情報とを、前記外部機器へ送信することを特徴とする。
【００２０】
これによって、本発明の画像処理システムは、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる。
【００２１】
上記目的を達成するため、本発明の画像処理装置は、装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備え、所定のデータ伝送路を介して外部機器と双方向通信可能な画像処理装置であって、前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手段と、前記描画手段により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手段と、前記外部機器からの情報取得要求に応じて、前記取得手段により取得された第２の画像を要求元の外部機器へ送信する送信手段と、を有することを特徴とする。
【００２２】
このような構成によって、本発明の画像処理装置は、外部機器からの表示要求に応じて、表示・記録媒体として紙がもつ特長を備える電子表示媒体に認識対象外要素の画像（第１の画像）を表示し、電子表示媒体から認識対象要素の入力を受け付け、さらに外部機器からの入力情報取得要求に応じて、認識対象要素のみの画像（第２の画像）に基づき入力情報を認識・取得し、要求元の外部機器へ入力情報を送信する。
【００２３】
また、上記目的を達成するため、本発明の画像処理装置は、当該画像処理装置の本体ユニットが、前記電子表示媒体が備えるメモリの所定の記憶領域に格納される、前記電子表示媒体の表示更新処理を行うソフトウェア部品を起動する起動手段を有し、前記描画手段が、前記起動手段により起動されたソフトウェア部品からの描画指示に従って、前記電子表示媒体に前記第１の画像を描画することを特徴とする。
【００２４】
また、上記目的を達成するため、本発明の画像処理装置は、当該画像処理装置の本体ユニットが、前記外部機器から表示用データとして送信された表示情報を、前記本体ユニットが備える記憶装置の所定の記憶領域に格納する表示情報格納手段を有し、前記電子表示媒体が有するソフトウェア部品が、前記表示情報格納手段により格納された表示情報を取得する表示情報取得手段と、前記表示情報取得手段により取得した表示情報に基づき、描画を指示する描画指示手段と、を有することを特徴とする。
【００２５】
また、上記目的を達成するため、本発明の画像処理装置は、さらに、前記電子表示媒体が有するソフトウェア部品が、前記表示情報取得手段により取得した表示情報をデータ解析する表示情報解析手段を有し、前記描画指示手段が、前記表示情報解析手段による解析結果に基づき、表示内容と表示形式を決定し、描画を指示することを特徴とする。
【００２６】
また、上記目的を達成するため、本発明の画像処理装置は、前記描画指示手段が、前記本体ユニットが備える記憶装置に格納される、描画処理を行うソフトウェア部品を起動し、描画を指示することを特徴とする。
【００２７】
また、上記目的を達成するため、本発明の画像処理装置は、前記取得手段が、前記第２の画像と、前記電子表示媒体の表示画面上の２次元空間における入力軌跡に関する情報を示す入力情報とを取得することを特徴とする。
【００２８】
また、上記目的を達成するため、本発明の画像処理装置は、前記入力情報を生成する入力情報生成手段を有し、前記入力情報生成手段において、前記電子表示媒体を介して得られた、前記入力軌跡上の所定の地点を示す座標値に基づき、前記入力軌跡上の２点間の移動距離と移動速度とを算出し、前記座標値、前記移動距離、および前記移動速度とを含む入力情報を生成することを特徴とする。
【００２９】
また、上記目的を達成するため、本発明の画像処理装置は、前記入力情報生成手段により生成された入力情報を、前記電子表示媒体が備えるメモリの所定の記憶領域に格納する入力情報格納手段を有することを特徴とする。
【００３０】
また、上記目的を達成するため、本発明の画像処理装置は、前記送信手段が、前記取得手段により取得された第２の画像と入力情報とを、前記外部機器へ送信することを特徴とする。
【００３１】
これによって、本発明の画像処理装置は、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる。
【００３２】
上記目的を達成するため、本発明の画像処理方法は、装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備え、所定のデータ伝送路を介して外部機器と双方向通信可能な画像処理装置における画像処理方法であって、前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手順と、前記描画手順により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手順と、前記外部機器からの情報取得要求に応じて、前記取得手順により取得された第２の画像を要求元の外部機器へ送信する送信手順と、を有することを特徴とする。
【００３３】
これによって、本発明の画像処理方法は、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる画像処理動作を実現することができる。
【００３４】
上記目的を達成するため、本発明の画像処理プログラムは、装置全体を制御する本体ユニットと、前記本体ユニットに着脱可能なメモリ性を有する１つ以上の電子表示媒体とを備え、所定のデータ伝送路を介して外部機器と双方向通信可能な画像処理装置における画像処理プログラムであって、コンピュータを、前記外部機器からの表示要求に応じて、要求された表示内容を第１の画像として前記電子表示媒体に描画する描画手段と、前記描画手段により前記第１の画像が描画された電子表示媒体の表示画面に対して、タッチ入力された情報を第２の画像として取得する取得手段と、前記外部機器からの情報取得要求に応じて、前記取得手段により取得された第２の画像を要求元の外部機器へ送信する送信手段として機能させる。
【００３５】
これによって、本発明の画像処理プログラムは、コンピュータにおいて、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに入力情報を精度よく認識・取得することができる画像処理機能を提供することができる。
【発明の効果】
【００３６】
本発明によれば、表示・記録媒体として紙がもつ特長を備える電子表示媒体に認識対象外要素の画像（第１の画像）を表示し、電子表示媒体から認識対象要素の入力を受け付け、さらに外部機器からの入力情報取得要求に応じて、認識対象要素のみの画像（第２の画像）に基づき入力情報を認識・取得処理を行うことにより、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる。
【発明を実施するための最良の形態】
【００３７】
以下、本発明の好適な実施の形態（以下、「実施形態」という。）について、図面を用いて詳細に説明する。
【００３８】
［第１の実施形態］
＜システム構成＞
では、本実施形態に係る画像処理システムの構成について説明する。図１は、本発明の第１の実施形態に係る画像処理システム１の構成例を示す図である。
【００３９】
本実施形態に係る画像処理システム１は、例えばＰＣなどの情報処理装置である外部機器２００と画像処理装置１０とから構成され、これらの装置がネットワークケーブルやＵＳＢ（Universal Serial Bus）ケーブルなどのデータ伝送路で接続されており、双方向データ通信が可能となっている。また、装置間で行われる双方向データ通信は、データ伝送用ケーブルを用いた有線通信でなくても、例えばＷｉｒｅｌｅｓｓ ＵＳＢ、ＩＥＥＥ８０２．１１ａ／ｂ／ｇ、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの無線通信であってもよい。
【００４０】
外部機器２００は、画像処理装置１０に表示させる表示情報の生成、および表示情報の表示要求や入力情報の取得要求などを行う装置であり、これらの処理を行うプログラム（ソフトウェア部品）が動作可能な装置である。よって、上記構成例ではＰＣを一例に挙げたが、携帯電話やＰＤＡ（Personal Digital Assistant）などの携帯情報端末、また通信機能を有するデジタルカメラなどの光学機器であってもよい。
【００４１】
画像処理装置１０は、外部機器２００からの要求に応じて、表示情報の描画、入力情報の認識・取得、および入力情報の送信などを行う装置であり、これらの処理を行うプログラム（ソフトウェア部品）が動作可能な装置である。
【００４２】
図に示すように、画像処理装置１０には、画像表示領域Ｒを有する電子表示媒体１０１が複数備えられており、これらの電子表示媒体１０１は、コネクタ１０２により画像処理装置１０全体を制御する本体ユニット１００に接続されている。上記に挙げた処理は、主に本体ユニット１００で動作し、画像表示領域Ｒへの情報表示や、タッチペン３００などによる入力情報の認識・取得を行う。上記構成例では本体ユニット１００と各電子表示媒体１０１とが有線であるコネクタ１０２により接続される例を挙げたが、無線により接続される構成であってもよい。
【００４３】
また、電子表示媒体１０１は、本体ユニット１００と着脱可能な構成となっている、電子ペーパーに代表されるペーパーライクディスプレイ（ＰＬＤ）である。この電子表示媒体１０１は、不揮発性の半導体メモリを備えており、表示用データを保持可能な構成であることから、本体ユニット１００から取り外された場合であっても、表示状態を保持することができる。
【００４４】
ＰＬＤは、印刷物の見やすさ（視認性良好）、持ち運びのフリー性、保存性良好などの従来からある紙ベースのハードコピーのメリットと書き換え可能性、動画可能性、デジタル情報との結合などの電子ディスプレイ（ハードコピーに対してソフトコピーともいわれる）のメリットを合わせ持つ理想的な電子表示デバイスとして期待され、研究・開発された表示媒体の１つである。
【００４５】
このように、本実施形態に係る画像処理システム１は、上記装置による構成により、画像処理装置１０が、外部機器２００からの表示要求に応じて、表示・記録媒体として紙がもつ特長を備える電子表示媒体１０１に認識対象外要素の画像（第１の画像）を表示し、電子表示媒体１０１から認識対象要素の入力を受け付け、さらに画像処理装置１０が、外部機器２００からの入力情報取得要求に応じて、認識対象要素のみの画像（第２の画像）に基づき入力情報を認識・取得し、要求元の外部機器２００へ入力情報を送信する。
【００４６】
＜ハードウェア構成＞
続いて、本実施形態に係る画像処理装置１０のハードウェア構成について説明する。図２は、本発明の第１の実施形態に係る画像処理装置１０のハードウェア構成例を示す図である。また、外部機器２００のハードウェア構成については、ＰＣなどの一般的な情報処理装置と基本的な構成が同じであることから、ここでの説明を省略する。
【００４７】
本実施形態に係る画像処理装置１０は、先にも述べたように画像処理装置１０全体を制御する本体ユニット１００と、情報表示や入力情報を受け付ける複数の電子表示媒体１０１と、これらの装置を接続するコネクタ１０２などのハードウェアから構成されている。
【００４８】
本体ユニット１００は、バスＢによって接続された、ホストＩ／Ｆ（インタフェース）１１、ＣＰＵ（Central Processing Unit）１２、ＲＯＭ（Read Only Memory）１３、ＲＡＭ（Random Access Memory）１４、電子表示媒体Ｉ／Ｆ１５、記憶装置１６、記憶メディアドライブ１７などを含む。
【００４９】
ＲＯＭ１３には、画像処理装置１０全体を制御する基本ソフトウェアであるＯＳ（Operating System）を含む各種のプログラムやプログラムによって利用されるデータなどが所定の記憶領域に格納されている。ＲＡＭ１４は、プログラムをロードするための記憶領域や、ロードされたプログラムが実行時に使用するワーク領域などとして用いられる。ＣＰＵ１２は、ＲＡＭ１４にロードされたプログラムを実行することにより、後述する画像処理機能を実現する。記憶装置１６は、例えばＨＤＤ（Hard Disk Drive）などであって、表示用データである表示情報などの各種のデータの保存領域やプログラムの仮想メモリ（記憶）領域として用いられる。記憶メディアドライブ１７は、例えばフロッピー（登録商標）ディスク、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disk）、フラッシュメモリなどの記憶メディア４００に対してデータ読み出し・書き込みを行う。
【００５０】
ホストＩ／Ｆ１１は、外部機器２００と画像処理装置１０とをデータ伝送路を介して接続するためのインタフェースである。電子表示媒体Ｉ／Ｆ１５は、当該本体ユニット１００と電子表示媒体１０１とをコネクタ１０２を介して接続するためのインタフェースである。
【００５１】
電子表示媒体１０１は、バスＢによって接続された、本体ユニットＩ／Ｆ２１、半導体メモリ２２、タッチパネル２３などを含む。
【００５２】
半導体メモリ２２は、例えばフラッシュメモリなどであって、本体ユニット１００から転送される表示用データである表示情報などの各種のデータの保存領域として用いられる。また、当該電子表示媒体１０１用のアプリケーション機能を実現する各種のプログラムやプログラムによって利用されるデータなどが所定の記憶領域に格納されている。タッチパネル２３は、半導体メモリ２２に保持された表示用データを画像として表示する表示装置２３ａと、タッチペン３００によるタッチ入力を入力情報として受け付ける入力装置２３ｂとから構成される。
【００５３】
また、上記半導体メモリ２２は、当該電子表示媒体１０１が備える制御回路上に固定配置されている構成であっても、制御回路上に所定のＩ／Ｆを備え、着脱可能な構成であってもよい。
【００５４】
本体ユニットＩ／Ｆ２１は、本体ユニット１００が備える電子表示媒体Ｉ／Ｆ１５と同様に、当該電子表示媒体１０１と本体ユニット１００とをコネクタ１０２を介して接続するためのインタフェースである。
【００５５】
さらに電子表示媒体１０１は、本体ユニット１００からの着脱を検知する検知装置（非図示）を備えている。
【００５６】
＜ソフトウェア構成＞
続いて、本実施形態に係る画像処理システム１のソフトウェア構成について説明する。図３は、本発明の第１の実施形態に係る画像処理システム１のソフトウェア構成例を示す図である。
【００５７】
外部機器２００のソフトウェアは、アプリケーションモジュール３１と、表示情報生成モジュール３２と、通信処理モジュール３３との各種プログラム（ソフトウェア部品）から構成されており、これらのモジュール群は、外部機器２００が備えるＲＯＭ（非図示）やＨＤＤ（非図示）などの記憶装置に格納されており、ＣＰＵ（非図示）によってＲＡＭ（非図示）上に読み出され実行されることで、それぞれのプログラムが有する機能が実現される。
【００５８】
表示情報生成モジュール３２は、アプリケーションモジュール３１から転送されたアプリケーションデータを基に、画像処理装置１０で解釈可能な表示情報を生成する。このとき生成される表示情報は、画像データそのものではなく（物理データではなく）、表示対象オブジェクト（文字、図形、および画像など。）や、これらのレイアウト（画面上の配置など）などに関するデータで構成された、画像処理装置１０によってデータ解析された後に描画処理される表示用データである（論理データである）。
【００５９】
このようにして生成された表示情報は、表示情報生成モジュール３２から通信処理モジュール３３に転送され、通信処理モジュール３３が、画像処理装置１０が受信可能なデータに変換後（送信データに変換後）送信する。また、通信処理モジュール３３は、画像処理装置１０へのデータ送信のほか、動作要求メッセージ（表示要求や情報取得要求など）の送信や、画像処理装置１０から送信されたデータの受信も行う。
【００６０】
本実施形態に係る画像処理装置１０のソフトウェアは、本体ユニット１００と電子表示媒体１０１とで異なる構成となっている。
【００６１】
まず本体ユニット１００のソフトウェアは、通信処理モジュール４１と、制御処理モジュール４２と、ＡＰＩ（Application Programming Interface）４３との各種プログラム（ソフトウェア部品）から構成されており、これらのモジュール群は、画像処理装置１０が備えるＲＯＭ１３に格納されており、ＣＰＵ１２によってＲＡＭ１４上に読み出され実行されることで、それぞれのプログラムが有する機能が実現される。
【００６２】
制御処理モジュール４２は、画像処理装置１０全体の画像処理を制御する。そのため制御処理モジュール４２は、電子表示媒体１０１に画像を描画し表示する表示処理モジュール４２ａと、電子表示媒体１０１を介して入力情報を認識・取得する入力処理モジュール４２ｂとを有し、外部機器２００からの表示要求に応じて電子表示媒体１０１に認識対象外要素の画像を表示し、電子表示媒体１０１から認識対象要素の入力を受け付け、さらに外部機器２００からの入力情報取得要求に応じて、認識対象要素のみの画像に基づき入力情報を認識・取得し、要求元の外部機器２００へ入力情報を送信する一連の処理を行う。このとき外部機器２００と画像処理装置１０との間で行う双方向データ通信は、通信処理モジュール４１によって行われる。
【００６３】
通信処理モジュール４１は、外部機器２００から送信された表示情報を受信し表示処理モジュール４２ａへ転送する。また入力処理モジュール４２ｂにより認識・取得された入力情報を外部機器２００へ送信する。さらに通信処理モジュール３３は、外部機器２００からの動作要求メッセージ（表示要求や情報取得要求など）の受信も行う。
【００６４】
ＡＰＩ４３は、後述する電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１から制御処理モジュール４２が有する各種機能（情報表示機能や情報入力機能など）を利用できるように用意されたライブラリである。
【００６５】
ＡＰＩ４３は、主に、ファイル制御などのデータ入出力処理や描画制御などの画像処理のための関数として、電子表示媒体アプリケーションモジュール５１に提供される。すなわち、電子表示媒体アプリケーションモジュール５１をプログラミングするにあたって、機能実装にかかる手間を省くため、もっとも簡潔にプログラムミングできるように設定されたインタフェースである。
【００６６】
このようなインタフェースを提供することで、電子表示媒体アプリケーションモジュール５１は、制御処理モジュール４２が有する機能を用いて簡便に機能実現を行うことが可能となる。
【００６７】
続いて、電子表示媒体１０１のソフトウェアは、電子表示媒体アプリケーションモジュール５１のプログラム（ソフトウェア部品）で構成されており、このモジュールは、電子表示媒体１０１が備える半導体メモリ２２に格納されており、画像処理装置１０が備えるＣＰＵ１２によってＲＡＭ１４上に読み出され実行されることで、プログラムが有する機能が実現される。
【００６８】
電子表示媒体アプリケーションモジュール５１は、表示情報を基に電子表示媒体１０１の表示内容を更新する。電子表示媒体アプリケーションモジュール５１は、表示情報をデータ解析し、その解析結果に基づき、表示内容や表示形式を決定し、ＡＰＩ４３に用意された描画関数をコールする。これによって、本体ユニット１００の表示処理モジュール４２ａに対して描画処理を要求し、表示を更新する。
【００６９】
このように、電子表示媒体アプリケーションモジュール５１は、電子表示媒体１０１の描画処理を自らが行わない。また、表示情報は、先にも述べたとおり、表示対象オブジェクトや、これらのレイアウトなどに関するデータで構成された表示用データであることから、電子表示媒体アプリケーションモジュール５１は、この表示情報をデータ解析することで、表示内容や表示形式などの加工を行うことが可能となる。すなわち、表示内容や表示形式などに応じて、電子表示媒体アプリケーションモジュール５１を用意しておけば、同じ表示情報に基づいて、異なる表示内容や表示形式の機能を実現することができる。より具体的には、表示情報である同じ地図情報を基に、特定施設を表示する内容に更新したり、特定経路を表示する内容に更新したり、電子表示媒体１０１に搭載する電子表示媒体アプリケーションモジュール５１を切り替えることで、表示内容や表示形式の機能を切り替えることが可能となる。
【００７０】
本実施形態に係る画像処理システム１は、上記システム構成、ハードウェア構成、およびソフトウェア構成によって、以降に説明を行う画像処理機能を実現している。
【００７１】
＜画像処理機能＞
本実施形態に係る画像処理機能は、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用することができる環境を提供する。
【００７２】
＜＜構成＞＞
図４は、本発明の第１の実施形態に係る画像処理機能の構成例を示す図である。本実施形態に係る画像処理機能は、外部機器２００と画像処理装置１０とが有する各プログラム（上述したモジュール群）が各装置において実行されることにより実現される機能である。
【００７３】
その中でも、画像処理装置１０では、本体ユニット１００が、電子表示媒体１０１ｎが有する電子表示媒体アプリケーションモジュール５１ｎを起動するアプリ起動部６１と、ＡＰＩ４３の描画関数をコールされることにより要求された電子表示媒体１０１ｎへの表示画像の描画処理を行う描画部６２と、電子表示媒体１０１ｎからの入力が検知されると検知結果を基に入力情報９１ｎを生成する入力情報生成部６３と、生成された入力情報９１ｎを電子表示媒体１０１ｎが備える半導体メモリ２２の所定の記憶領域に格納する入力情報格納部６４と、電子表示媒体１０１ｎが備える半導体メモリ２２に格納された入力情報９１ｎを通信処理モジュール４１に転送する入力情報転送部６５とを有する。
【００７４】
また電子表示媒体１０１が、本体ユニット１００が備える表示情報８１ｎを電子表示媒体１０１が備える半導体メモリ２２の所定の記憶領域に格納する表示情報格納部７１と、電子表示媒体１０１が備える半導体メモリ２２に格納された表示情報８１ｎの解析を行うデータ解析部７２と、データ解析結果に基づき、本体ユニット１００が有するＡＰＩ４３に用意された描画関数をコールして描画処理を要求し、表示装置２３ａの表示内容を更新する表示更新部７３と、入力装置２３ｂから受け付けた入力を検知する入力検知部７４とを有する。
【００７５】
本実施形態に係る画像処理システム１は、上記各機能部を有する画像処理装置１０と外部機器２００とが表示情報８１や入力情報９１のデータや動作要求メッセージなどを双方向通信することで、外部機器２００からの表示要求に応じて電子表示媒体１０１に認識対象外要素の画像を表示し、電子表示媒体１０１から認識対象要素の入力を受け付け、さらに外部機器２００からの入力情報取得要求に応じて、認識対象要素のみの画像に基づき入力情報を認識・取得し、要求元の外部機器２００へ入力情報を送信する画像処理機能を提供可能な構成となっている。
【００７６】
＜＜動作＞＞
本実施形態に係る画像処理機能は、主に「情報表示機能」と「情報入力機能」の２つ機能により構成される。これら２つの機能は、上記各機能部が互いに動作することで実現される。以下に、情報表示機能、情報入力機能の順で、「各機能部がどのように動作することで画像処理機能が実現されるのか」について詳しく説明する。
【００７７】
《情報表示機能》
画像処理機能は、外部機器２００からの表示要求に応じて、画像処理装置１０が受信した表示情報を基に所定の画像を描画し、電子表示媒体１０１に表示する。
【００７８】
（１）外部機器からの表示要求
外部機器２００は、画像処理装置１０に対して表示要求を行うときに、要求メッセージとともに、表示用データである表示情報８１を送信する。
【００７９】
図５は、本発明の第１の実施形態に係る外部機器２００から画像処理装置１０へ表示情報８１を送信する処理手順の一例を示すシーケンス図である。
【００８０】
外部機器２００が有するアプリケーションモジュール３１は、当該装置が有する表示情報生成モジュール３２へアプリケーションデータを転送し表示要求を行う（ステップＳ１０１）。
【００８１】
外部機器２００が有する表示情報生成モジュール３２は要求を受け付けると、アプリケーションデータを基に１ページ目の表示情報８１１を生成する（ステップＳ１０２）。表示情報生成モジュール３２は、生成した１ページ目の表示情報８１１を、通信処理モジュール３３を介して、画像処理装置１０が有する通信処理モジュール４１へ送信する（ステップＳ１０３）。
【００８２】
画像処理装置１０が有する通信処理モジュール４１は、受信した１ページ目の表示情報８１１を、本体ユニット１００に備えられた記憶装置１６の所定の記憶領域に格納する（ステップＳ１０４）。
【００８３】
画像処理システム１では、上記ステップＳ１０２からＳ１０４までの処理手順を、アプリケーションデータを基に生成される表示情報８１ｎのページ分だけ、繰り返し処理を行う（ステップＳ１０５からＳ１１０）。
【００８４】
外部機器２００が有する表示情報生成モジュール３２は、最後のページの表示情報８１ｎを生成すると（ステップＳ１０８）、画像処理装置１０へ全ページの表示情報８１を送信し終えた旨を、表示要求元である当該装置が有するアプリケーションモジュール３１へ通知する（ステップＳ１１１）。
【００８５】
上記処理手順に示すように、画像処理システム１では、外部機器２００が有する表示情報生成モジュール３２によって、画像処理装置１０が備える電子表示媒体１０１それぞれに表示するための表示情報８１を生成し送信することで、アプリケーションモジュール３１から受け付けた表示要求を画像処理装置１０へ通知する。
【００８６】
すなわち、画像処理システム１では、画像処理装置１０がプリンタにあたり、電子表示媒体１０１が給紙トレイに収納された紙の役割をする。また、外部機器２００が有する表示情報生成モジュール３２がプリンタドライバの役割を果たすことで、アプリケーションモジュール３１は、プリンタへ印刷要求するのと同様の手順で、電子表示媒体１０１へ表示要求を行うことができる。
【００８７】
よって、上記処理手順の中では、１つの電子表示媒体１０１に表示させる単位を「ページ」という言葉を使って説明した。以降の説明においても同様である。
【００８８】
（表示情報の格納例）
図６は、本発明の第１の実施形態に係る表示情報８１のデータ例を示す図である。外部機器２００から送信された表示情報８１は、上記処理手順によって画像処理装置１０が備える記憶装置１６に、図６に示すようなデータ構造で格納される。
【００８９】
画像処理装置１０が有する通信処理モジュール４１は、受信した表示情報８１を、ページ単位で管理可能なデータ構造で格納する。より具体的には、図６に示すように、画像処理装置１０が備える各電子表示媒体１０１を識別する識別情報と、各電子表示媒体１０１に表示する表示情報８１とが対応付けられて格納される。例えば、画像処理装置１０が備える電子表示媒体１０１のうち、１番目にあたる電子表示媒体１０１１には、１ページ目の表示情報８１１が対応付けられている。
【００９０】
画像処理装置１０では、このようなデータ構造で表示情報８１を管理することで、後述する電子表示媒体アプリケーションモジュール５１が、記憶装置１６に格納される複数の表示情報８１のうち、対応する表示情報８１を適切に取得し、電子表示媒体１０１が備える半導体メモリ２２に格納することが可能となる。
【００９１】
（２）電子表示媒体への情報表示（情報出力）
画像処理装置１０は、本体ユニット１００に備えられた記憶装置１６に表示情報８１が格納されると（表示要求を受け付けると）、コネクタ１０２により接続される各電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１を起動する。
【００９２】
図７は、本発明の第１の実施形態に係る電子表示媒体１０１に表示情報８１を表示する処理手順の一例を示すシーケンス図である。
【００９３】
本体ユニット１００が有する表示処理モジュール４２ａのアプリ起動部６１は、各電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１を起動する（ステップＳ２０１）。
【００９４】
電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１は、起動されると、表示情報格納部７１によって、当該電子表示媒体１０１の識別情報を基に、本体ユニット１００が備える記憶装置１６に格納された表示情報８１を参照し（ステップＳ２０２）、一致する識別情報に対応付けられた表示情報８１を取得する（ステップＳ２０３）。
【００９５】
表示情報格納部７１は、取得した表示情報８１を、当該電子表示媒体１０１が備える半導体メモリ２２の所定の記憶領域に格納し保持し（ステップＳ２０４）、表示情報８１を装置内部に保持した旨を、同モジュール５１のデータ解析部７２に通知する（ステップＳ２０５）。
【００９６】
データ解析部７２は、保持した旨の通知を受け付けると、半導体メモリ２２へアクセスし（ステップＳ２０６）、保持されている表示情報８１を取得する（ステップＳ２０７）。
【００９７】
その後、データ解析部７２は、取得した表示情報８１に対してデータ解析を行い（ステップＳ２０８）、その解析結果を、同モジュール５１の表示更新部７３へ出力する（ステップＳ２０９）。
【００９８】
表示更新部７３は、入力された解析結果に基づいて、表示内容や表示形式などを決定し（ステップＳ２１０）、本体ユニット１００が有するＡＰＩ４３に用意された描画関数をコールし、表示画像の描画を指示することで、表示内容を更新する（ステップＳ２１１）。
【００９９】
その結果、本体ユニット１００が有する表示処理モジュール４２ａの描画部６２によって、表示画像が描画され、電子表示媒体１０１の表示領域Ｒに所定の画像が表示される（ステップＳ２１２）。
【０１００】
図８は、本発明の第１の実施形態に係る電子表示媒体１０１の表示例を示す図である。
画像処理装置１０は、上記処理手順によって、図８に示すように各電子表示媒体１０１１から１０１ｎに所定の画像が表示される。
【０１０１】
上記処理手順に示すように、電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１は、データ解析部７２により表示情報８１をデータ解析し、表示更新部７３によって解析結果を基に表示内容や表示形式を決定する。
【０１０２】
すなわち、電子表示媒体１０１では、データ解析部７２および表示更新部７３が、プリンタが備えるパーサにあたる。
【０１０３】
さらに電子表示媒体アプリケーションモジュール５１は、先に述べたように、同じ表示情報８１に対して、モジュール単位で異なる表示内容や表示形式を提供可能な機能を実現しており、表示更新部７３が、モジュールを開発する段階で予め設計された表示内容や表示形式に従って決定する。
【０１０４】
また、上記処理手順では、説明を分かり易くするために、本体ユニット１００が１つの電子表示媒体１０１を表示させる処理手順について説明を行ったが、複数の電子表示媒体１０１を表示させる処理手順は、例えば、本体ユニット１００がページ順に従って、対応する電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１を起動する方法や、本体ユニット１００は、表示情報８１からページ数が分かっていることから、対応する電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１を同時に起動する方法などがある。後者の方が、表示に掛かる処理時間を短縮できる利点がある。
【０１０５】
《情報入力機能》
図９は、本発明の第１の実施形態に係る電子表示媒体１０１の入力例を示す図である。画像処理システム１では、図９に示すように、例えばタッチペン３００などによって電子表示媒体１０１の表示画面上に書き込まれた情報を、入力情報９１として認識・取得する。
【０１０６】
画像処理機能は、外部機器２００からの取得要求に応じて、上記のように入力された情報を、画像処理装置１０が電子表示媒体１０１を介して入力情報９１として認識・取得し、取得した入力情報９１を、要求元の外部機器２００へ送信する。
【０１０７】
（１）電子表示媒体からの情報入力
画像処理装置１０は、電子表示媒体１０１が備える入力装置２３ｂによって、表示画面からのタッチ入力が検知されると、本体ユニット１００が有する入力処理モジュール４２ｂが、検知結果を基に入力情報９１を生成する。
【０１０８】
図１０は、本発明の第１の実施形態に係る電子表示媒体１０１に入力情報９１を格納する処理手順の一例を示すシーケンス図である。
【０１０９】
画像処理装置１０は、電子表示媒体１０１が備える入力装置２３ｂの入力検知部７４が、表示画面のタッチ入力を検知すると（ステップＳ３０１）、入力検知部７４が、表示画面上の２次元空間における座標値を、検知結果として、本体ユニット１００が有する入力処理モジュール４２ｂの入力情報生成部６３へ送信し、入力検知を通知する（ステップＳ３０２）。
【０１１０】
入力情報生成部６３は、受信した座標値を基に、座標値と、入力時の移動距離（単位：ピクセル）および移動速度（単位：ピクセル／ミリ秒）とから構成される入力情報９１を生成し（ステップＳ３０３）、生成した入力情報９１を、同モジュール４２ｂの入力情報格納部６４へ出力する（ステップＳ３０４）。
【０１１１】
入力情報格納部６４は、入力された入力情報９１を、電子表示媒体１０１が備える半導体メモリ２２の所定の記憶領域に格納し保持する（ステップＳ３０５）。
【０１１２】
このように、画像処理装置１０では、電子表示媒体１０１を介してタッチ入力された情報として、認識対象要素として書き込まれた軌跡（入力軌跡）からなる書き込み画像（手書き画像）を得るとともに、その軌跡に関して表示画面上の座標空間における移動距離や移動速度などを入力情報９１として得る。
【０１１３】
（入力情報の格納例）
図１１は、本発明の第１の実施形態に係る入力情報９１のデータ例を示す図である。
電子表示媒体１０１から入力された入力情報９１は、上記処理手順によって電子表示媒体１０１が備える半導体メモリ２２に、図１１（Ｂ）に示すようなデータ構造で格納される。
【０１１４】
図１１（Ａ）は、図１１（Ｂ）に示す入力情報９１が格納された場合のタッチ入力の軌跡（矩形の入力軌跡）を表示画面上の２次元空間に対応させて模式的に表した例である。
【０１１５】
本体ユニット１００は、時計回路（非図示）を備えており、電子表示媒体１０１に対してタッチ入力されている間の時間を把握可能な構成となっている。そのため、入力処理モジュール４２ｂの入力情報生成部６３では、タッチ入力された２点の座標値を基に、２点間の移動距離と移動時間を算出することができる。
【０１１６】
例えば入力情報生成部６３は、図１１（Ａ）に示す座標値［１０，１０］から座標値［５０，１０］までタッチ入力が検知されたことを受けて、座標値［１０，１０］から座標値［５０，１０］までの移動に掛かった時間４（ミリ秒）に基づき、Ｘ座標における移動距離４０（ピクセル）を移動に掛かった時間で除算し、移動速度１０（ピクセル／ミリ秒）を求める。
【０１１７】
このようにして、入力情報生成部６３によって求められた移動距離と移動速度を、入力情報格納部６４は、図１１（Ｂ）に示すように、表示画面上の到達点である座標値に対応付けたデータ構造で格納する。
【０１１８】
こうして、電子表示媒体１０１が備える半導体メモリ２２には、それぞれの電子表示媒体１０１を介してタッチ入力を検知すると、タッチ入力の軌跡である書き込み画像とともに、付加情報である座標値、移動距離、および移動速度からなる入力情報９１が格納され保持される。
【０１１９】
（２）入力情報の表示
画像処理装置１０は、起動している電子表示媒体１０１が有する電子表示媒体アプリケーションモジュール５１が、入力情報９１が保持されたことを受けて、表示更新部７３により、表示内容や表示形式の更新を行う。
【０１２０】
図１２は、本発明の第１の実施形態に係る電子表示媒体１０１に入力情報９１を表示する処理手順の一例を示すシーケンス図である。
【０１２１】
電子表示媒体１０１が有する表示処理モジュール４２ａの表示更新部７３は、電子表示媒体１０１が備える半導体メモリ２２に入力情報９１が保持されると、半導体メモリ２２にアクセスし（ステップＳ４０１）、保持された入力情報９１を取得する（ステップＳ４０２）。
【０１２２】
表示更新部７３は、取得された入力情報９１に基づいて、本体ユニット１００が有するＡＰＩ４３に用意された描画関数をコールし、表示画像の描画を指示することで、表示内容を更新する（ステップＳ４０２）。
【０１２３】
その結果、本体ユニット１００が有する表示処理モジュール４２ａの描画部６２によって、表示画像が描画され、電子表示媒体１０１の画像表示領域Ｒに書き込み画像を含む所定の画像が表示される（ステップＳ４０３）。
【０１２４】
画像処理装置１０は、上記処理手順によって、電子表示媒体１０１の画像表示領域Ｒに、タッチ入力前に表示されていた認識対象外の要素を含む背景画像に、タッチ入力により書き込まれた認識対象の要素である書き込み画像が重畳する形式の画像を表示する。
【０１２５】
（３）外部機器からの入力情報取得要求
外部機器２００は、画像処理装置１０に対して取得要求するときに、入力情報９１の取得を要求するメッセージを送信する。
【０１２６】
図１３は、本発明の第１の実施形態に係る画像処理装置１０から外部機器２００へ入力情報９１を送信する処理手順の一例を示すシーケンス図である。
【０１２７】
外部機器２００が有するアプリケーションモジュール３１は、当該装置が有する通信処理モジュール３３へ入力情報９１の取得要求を行う（ステップＳ５０１）。
【０１２８】
外部機器２００が有する通信処理モジュール３３は要求を受け付けると、その旨を画像処理装置１０が有する通信処理モジュール４１へ通知する（ステップＳ５０２）。
【０１２９】
画像処理装置１０の本体ユニット１００が有する通信処理モジュール４１は、受信した入力情報９１の取得要求に応じて、当該装置の本体ユニット１００が有する入力処理モジュール４２ｂの入力情報転送部６５へ、入力情報９１の転送を指示する（ステップＳ５０３）。
【０１３０】
入力情報転送部６５は、転送指示に従って、各電子表示媒体１０１が備える半導体メモリ２２をアクセスし（ステップＳ５０４）、各半導体メモリ２２に入力情報９１が格納されている場合に、保持されている入力情報９１を取得する（ステップＳ５０５）。
【０１３１】
上記ステップＳ５０４からＳ５０５の処理手順を、画像処理装置１０に備えられた全ての電子表示媒体１０１に対して行う（ステップＳ５０５ｎまで）。
【０１３２】
入力情報転送部６５は、全ての電子表示媒体１０１から保持している入力情報９１を取得すると、取得した入力情報９１を、本体ユニット１００が有する通信処理モジュール４１へ転送し（ステップＳ５０６）、通信処理モジュール４１が、転送された入力情報９１を、外部機器２００が有する通信処理モジュール３３へ送信する（ステップＳ５０７）。
【０１３３】
上記ステップＳ５０６からＳ５０７の処理手順を、取得した入力情報９１の数分行う（ステップＳ５０６ｎからＳ５０７ｎまで）。
【０１３４】
外部機器２００が有する通信処理モジュール３３は、要求した入力情報９１を画像処理装置１０から受信すると、受信した入力情報９１を、取得要求元の当該装置が有するアプリケーションモジュール３１へ転送し、取得完了を通知する（ステップＳ５０８）。
【０１３５】
このようにして、画像処理装置１０は、外部機器２００からの取得要求に応じて、電子表示媒体１０１を介して認識・取得した入力情報９１を送信する。また、画像処理装置１０は、書き込み画像と入力情報９１との両方を送信してもよく、外部機器２００からの取得要求に従って、少なくとも書き込み画像と入力情報９１とのどちらか一方を送信する。
【０１３６】
さらに、画像処理装置１０では、外部機器２００からの取得要求に応じるときに、入力処理モジュール４２ｂの入力情報転送部６５によって、電子表示媒体１０１が入力情報９１を保持しているか否かを判断し、その判断結果を、取得要求元である外部機器２００が有するアプリケーションモジュール３１へ通知してもよい。
【０１３７】
上記処理手順では、外部機器２００から画像処理装置１０に対して、電子表示媒体１０１が保持する入力情報９１全ての取得要求がされた場合の処理手順を示したが、例えば、外部機器２００から、画像処理装置１０が備える３番目の電子表示媒体１０１３が保持する入力情報９１３の取得要求された場合には、外部機器２００から画像処理装置１０に対して、取得要求を通知するときに、３番目の電子表示媒体１０１３の識別情報を送信し、画像処理装置１０が、受信した識別情報を基に、３番目の電子表示媒体１０１３が備える半導体メモリ２２３へアクセスし、保持されている入力情報９１３を取得し送信する。
【０１３８】
＜システム利用例＞
図１４は、本発明の第１の実施形態に係る画像処理システム１の利用例を示す図である。本実施形態に係る画像処理システム１では、上述してきた画像処理機能によって、例えば図１４に示すような、手書き入力された情報を精度よく利用できる環境を提供することができる。
【０１３９】
《利用例》
（１）ユーザは、外部機器２００と画像処理装置１０とを接続し、外部機器２００が有するアプリケーションモジュール３１を用いて、情報入力時のテンプレートを作成した後に、表示情報生成モジュール３２を介してアプリケーションデータを基に生成した表示情報８１を画像処理装置１０へ送信し、テンプレートの表示を要求する。
【０１４０】
（２）画像処理装置１０は、表示要求に応じて、起動された電子表示媒体アプリケーションモジュール５１によって受信した表示情報８１を基に表示内容と表示形式を決定し、表示処理モジュール４２ａが、所定の画像処理（描画処理）を行い、電子表示媒体１０１の表示領域Ｒにテンプレートを表示する。
【０１４１】
（３）ユーザは、画像処理装置１０または電子表示媒体１０１単体などの形態で持ち出し、持ち出した先で、電子表示媒体１０１に表示されたテンプレートに対して、紙に加筆する感覚でタッチペン３００などを用いて必要な情報を手書き入力する。
【０１４２】
（４）ユーザは、上記（３）のように手書き入力した後に、再び、外部機器２００と画像処理装置１０とを接続し、手書き入力した書き込み画像と、それに対応する入力情報９１とを、アプリケーションモジュール３１を介して取得する。
【０１４３】
その結果、ユーザは、認識対象要素のみの書き込み画像と入力情報９１とを取得したことで、アプリケーションモジュール３１によって、認識対象外要素の影響を受けることなく、書き込んだ情報を精度よく利用することができる。
【０１４４】
＜まとめ＞
以上のように、本発明の第１の実施形態によれば、本実施形態に係る画像処理システム１は、外部機器２００からの表示要求に応じて、表示・記録媒体として紙がもつ特長を備える電子表示媒体１０１に認識対象外要素（背景画像）を表示し、電子表示媒体１０１から認識対象要素の入力（タッチ入力）を受け付け、さらに外部機器２００からの入力情報取得要求に応じて、認識対象要素のみの画像（書き込み画像）に基づき入力情報９１（座標値、移動距離、および移動速度などの付加情報）を認識・取得し、要求元の外部機器２００へ入力情報９１を送信する。
【０１４５】
これによって、画像処理システム１では、表示・記録媒体として紙がもつユーザビリティーの優位性を生かし、ユーザが、場所を選ばず情報を簡便に閲覧・入力でき、さらに精度よく認識・取得された入力情報を利用可能なシステム環境を提供することができる。すなわち、メモリ性を有する電子表示媒体１０１を用いることで、ユーザが紙と同じ感覚で情報の閲覧や入力を行うことが可能であり、さらにユーザは、認識対象要素のみの画像を基に情報の認識処理（例えばＯＣＲ処理など）を行うことができ、入力フォームやテンプレート、また背景色などの認識対象外要素による影響を受けることなく精度よく認識処理を行うことができる。
【０１４６】
ところで、上記実施形態に係る画像処理システム１が有する「画像処理機能」は、図を用いて説明を行った各処理手順を、外部機器２００や画像処理装置１０などのそれぞれの装置における動作環境（プラットフォーム）にあったプログラミング言語でコード化した画像処理プログラムとしてコンピュータで実行することで実現することができる。よって、上記画像処理プログラムは、コンピュータが読み取り可能な記憶メディア（記録媒体）４００に格納することができる。
【０１４７】
上記画像処理プログラムは、例えば記憶メディア４００に記憶させることによって、例えば画像処理装置１０の場合には、記憶メディア４００を、読み取り可能な記憶メディアドライブ１７にセットすることで、プログラムを画像処理装置１０にインストールすることができる。また、外部機器２００も同様に画像処理装置１０には、ネットワークなどのデータ伝送路に接続可能なホストＩ／Ｆ１１を備えていることから、インターネットなどの電気通信回線を介してプログラムをダウンロードし、インストールすることもできる。
【０１４８】
最後に、上記各実施形態に挙げた形状・構成に、その他の要素との組み合わせなど、ここで示した要件に、本発明が限定されるものではない。これらの点に関しては、本発明の主旨をそこなわない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。
【図面の簡単な説明】
【０１４９】
【図１】本発明の第１の実施形態に係る画像処理システムの構成例を示す図である。
【図２】本発明の第１の実施形態に係る画像処理装置のハードウェア構成例を示す図である。
【図３】本発明の第１の実施形態に係る画像処理システムのソフトウェア構成例を示す図である。
【図４】本発明の第１の実施形態に係る画像処理機能の構成例を示す図である。
【図５】本発明の第１の実施形態に係る外部機器から画像処理装置へ表示情報を送信する処理手順の一例を示すシーケンス図である。
【図６】本発明の第１の実施形態に係る表示情報のデータ例を示す図である。
【図７】本発明の第１の実施形態に係る電子表示媒体に表示情報を表示する処理手順の一例を示すシーケンス図である。
【図８】本発明の第１の実施形態に係る電子表示媒体の表示例を示す図である。
【図９】本発明の第１の実施形態に係る電子表示媒体の入力例を示す図である。
【図１０】本発明の第１の実施形態に係る電子表示媒体に入力情報を格納する処理手順の一例を示すシーケンス図である。
【図１１】本発明の第１の実施形態に係る入力情報のデータ例を示す図である。
【図１２】本発明の第１の実施形態に係る電子表示媒体に入力情報を表示する処理手順の一例を示すシーケンス図である。
【図１３】本発明の第１の実施形態に係る画像処理装置から外部機器へ入力情報を送信する処理手順の一例を示すシーケンス図である。
【図１４】本発明の第１の実施形態に係る画像処理システムの利用例を示す図である。
【符号の説明】
【０１５０】
１      画像処理システム
１０    画像処理装置
１１    ホストＩ／Ｆ
１２    ＣＰＵ
１３    ＲＯＭ
１４    ＲＡＭ
１５    表示パネルＩ／Ｆ
１６    記憶装置
１７    記憶メディアドライブ
２１    本体ユニットＩ／Ｆ
２２    半導体メモリ
２３    タッチパネル（２３ａ：表示，２３ｂ：入力）
３１    アプリケーションモジュール
３２    表示情報生成モジュール
３３    通信処理モジュール（外部機器側）
４１    通信処理モジュール（画像処理装置側）
４２    制御処理モジュール（４２ａ：表示処理，４２ｂ：入力処理）
４３    ＡＰＩ
５１    電子表示媒体アプリケーションモジュール
６１    アプリ起動部
６２    描画部
６３    入力情報生成部
６４    入力情報格納部
６５    入力情報転送部
７１    表示情報格納部
７２    データ解析部
７３    表示更新部
７４    入力検知部
８１    表示情報
９１    入力情報
１００  本体ユニット
１０１  電子表示媒体（ペーパーライクディスプレイ：ＰＬＤ）
１０２  コネクタ
２００  外部機器
３００  入力ペン（タッチペン）
４００  記憶メディア（記録媒体）
【図１】
2009271568.tif 000003
【図２】
2009271568.tif 000004
【図３】
2009271568.tif 000005
【図４】
2009271568.tif 000006
【図５】
2009271568.tif 000007
【図６】
2009271568.tif 000008
【図７】
2009271568.tif 000009
【図８】
2009271568.tif 000010
【図９】
2009271568.tif 000011
【図１０】
2009271568.tif 000012
【図１１】
2009271568.tif 000013
【図１２】
2009271568.tif 000014
【図１３】
2009271568.tif 000015
【図１４】
2009271568.tif 000016