(57)【要約】【課題】レーザポインタ等の光学的ポインタで所定範囲を指定し、指定範囲を保持しながらページ送りやスクロールすることができ、指定範囲と、異なるページの所定箇所または異なるファイルの所定箇所との比較がしやすい状態で投影が可能である。【解決手段】端末機器１０１は、プレゼンテーション用の資料などの情報を表示する表示部など備え、表示装置１０３はプロジェクタで構成され、表示部、カメラで構成される認識部、端末機器１０１に表示されている画面と認識部で認識した画面を合成する合成部など備えている。認識部は、範囲指定装置１０４により投影画面１０５上の指定された箇所を認識する。【選択図】図１
2014174338.tif 000002
【特許請求の範囲】
【請求項１】
端末装置に表示されている画像を投影画像として投影する表示装置を備えた画像表示システムにおいて、前記表示装置に第１の投影画像が投影されているとき、前記第１の投影画像の所定の領域を指定する指定手段と、前記指定手段で指定された領域の画像を認識する認識手段と、前記認識手段で認識された領域の画像を記憶する記憶手段と、前記表示装置に第２の投影画像が投影される際に、前記第１の投影画像上の前記領域の位置に対応する、前記第２の投影画像上の位置に、前記記憶手段に記憶されている前記領域の画像を配置して、前記第２の投影画像と前記領域の画像を合成する合成手段を備え、前記合成された画像を前記表示装置に投影することを特徴とする画像表示システム。
【請求項２】
前記指定手段は、前記第１の投影画像の複数の領域を指定し、前記認識手段は、前記指定された複数の領域の画像を認識し、前記記憶手段は、前記認識手段で認識された複数の領域の画像を記憶し、前記表示装置に第２の投影画像が投影される際に、前記合成手段は、前記第２の投影画像と、前記記憶手段に記憶されている複数の領域の画像を合成して投影することを特徴とする請求項１記載の画像表示システム。
【請求項３】
前記合成手段は、前記記憶手段に記憶されている複数の領域の画像を、前記第２の投影画像上の所定の位置に配置して合成することを特徴とする請求項２記載の画像表示システム。
【請求項４】
前記合成手段は、前記記憶手段に記憶されている複数の領域の画像を、前記第２の投影画像の端部に配置して合成することを特徴とする請求項３記載の画像表示システム。
【請求項５】
前記記憶手段に記憶されている領域の画像と類似した画像が、前記第２の投影画像中にあるか否かを検出する検出手段を備え、前記合成手段は、前記検出手段により検出された画像を、前記第２の投影画像の端部に配置して合成することを特徴とする請求項１または４記載の画像表示システム。
【請求項６】
前記合成手段により合成された画像に対して、前記合成を解除することを特徴とする請求項１乃至５のいずれか１項に記載の画像表示システム。
【請求項７】
端末装置に表示されている画像を投影画像として投影する表示装置を備えた画像表示方法において、前記表示装置に第１の投影画像が投影されているとき、前記第１の投影画像の所定の領域を指定する指定工程と、前記指定工程で指定された領域の画像を認識する認識工程と、前記認識工程で認識された領域の画像を記憶する記憶工程と、前記表示装置に第２の投影画像が投影される際に、前記第１の投影画像上の前記領域の位置に対応する、前記第２の投影画像上の位置に、前記記憶工程に記憶されている前記領域の画像を配置して、前記第２の投影画像と前記領域の画像を合成する合成工程を備え、前記合成された画像を前記表示装置に投影することを特徴とする画像表示方法。
【請求項８】
請求項７記載の画像表示方法をコンピュータに実現させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＰＣ等の端末機器の画面をプロジェクタ等の投影装置により表示する画像表示システム、画像表示方法およびプログラムに関する。
【背景技術】
【０００２】
会議等において、プロジェクタとＰＣを有線、無線により接続し、ＰＣが保持する文書や画像データ、プレゼンテーション資料をプロジェクタに入力し、入力データに対応する表示画像をスクリーンに投影する機会は多い。
【０００３】
ＰＣ画面をプロジェクタで投影する際に、１つの投影画面を複数領域に分割し、複数台のＰＣからの画像データを受け付け、合成して投影する技術（例えば、特許文献１）や、投影画面に対して光学的ポインタを使用して所定箇所を指定し、プロジェクタ等に備えられたカメラによって指定箇所を認識し、認識した箇所の情報を視聴者に明確に分からせるように、色彩情報を加える等の特徴を付けて再投影する技術（例えば、特許文献２）もある。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記した従来の装置では、レーザポインタ等の光学的ポインタで所定範囲を指定し、指定範囲を保持しながらページ送りやスクロールすることができない。また、指定範囲と、異なるページの所定箇所または異なるファイルの所定箇所との比較もできない。
【０００５】
本発明は上記した課題に鑑みてなされたもので、
本発明の目的は、レーザポインタ等の光学的ポインタで所定範囲を指定し、指定範囲を保持しながらページ送りやスクロールすることができ、指定範囲と、異なるページの所定箇所または異なるファイルの所定箇所との比較がしやすい状態で投影が可能な画像表示システム、画像表示方法およびプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
本発明は、端末装置に表示されている画像を投影画像として投影する表示装置を備えた画像表示システムにおいて、前記表示装置に第１の投影画像が投影されているとき、前記第１の投影画像の所定の領域を指定する指定手段と、前記指定手段で指定された領域の画像を認識する認識手段と、前記認識手段で認識された領域の画像を記憶する記憶手段と、前記表示装置に第２の投影画像が投影される際に、前記第１の投影画像上の前記領域の位置に対応する、前記第２の投影画像上の位置に、前記記憶手段に記憶されている前記領域の画像を配置して、前記第２の投影画像と前記領域の画像を合成する合成手段を備え、前記合成された画像を前記表示装置に投影することを最も主要な特徴とする。
【発明の効果】
【０００７】
本発明によれば、レーザポインタ等の光学的ポインタで所定範囲を指定し、指定範囲を保持しながらページ送りやスクロールすることができ、異なるページの所定箇所や異なるファイルの所定箇所との比較がしやすい状態で投影することができ、また、各ページ間を行き来する手間、各ファイル間を行き来する手間を省くことができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の画像表示システムの構成を示す。
【図２】本発明の端末機器の構成を示す。
【図３】本発明の表示装置の構成を示す。
【図４】本発明の実施例１の処理フローチャートを示す。
【図５】端末機器で表示されている画面が表示装置に投影された映像を示す。
【図６】端末機器で表示されている画面（１ページ目）が表示装置に投影された映像に対し、範囲指定装置で任意の箇所を指定した図を示す。
【図７】端末機器で表示されている画面（２ページ目）が表示装置に投影された映像を示す。
【図８】端末機器で表示されている画面（３ページ目）が表示装置に投影された映像を示す。
【図９】実施例２の投影画面の例を示す。
【図１０】実施例２の表示装置の構成を示す。
【図１１】本発明の実施例２の処理フローチャートを示す。
【図１２】実施例３の投影画面の例を示す。
【発明を実施するための形態】
【０００９】
以下、発明の実施の形態について図面により詳細に説明する。
【実施例１】
【００１０】
図１は、本発明の実施例に係る、端末機器（端末装置）およびネットワーク対応表示装置を備えた画像表示システムの構成を示す。
【００１１】
画像表示システムは、端末機器（装置）１０１と、ネットワーク対応表示装置（以下、表示装置）１０３とを備え、端末機器１０１と表示装置１０３がネットワーク１０２を介してＴＣＰ／ＩＰ等の通信プロトコルを用いて双方向通信可能に接続されている。
【００１２】
画像表示システムは、端末機器１０１で表示されている画面と、範囲指定装置１０４により投影画面１０５上の任意の指定された箇所（領域の画像）を後述する認識部で認識した画面とを、後述する合成部で合成した合成画面を表示可能とするシステムであり、例えば会議やプレゼンテーションなどの際に有効なシステムである。
図２は、本発明の端末機器の構成を示す。端末機器は、例えばパソコンで構成され、プレゼンテーション用の資料などの各種情報を表示するための表示部２０１、表示部２０１に表示される内容を記憶する表示用メモリ２０２、例えばマウスや操作キーで構成される入力部２０４、入力部２０４からの操作入力を検出して入力情報を後述する演算部２０３に出力するユーザインタフェース部２０５、各種データを格納するデータ記憶部２０６、アプリケーション（制御プログラム）を格納するプログラム記憶部２０７、端末機器全体の動作制御を行う演算部２０３、表示装置との双方向通信を行う通信部２０８を備えている。
【００１３】
プログラム記憶部２０７に格納されている制御プログラムは、表示部２０１の画面をキャプチャすることのできる画面キャプチャ機能を制御するためのものであり、演算部２０３により画像キャプチャ処理が実施可能な構成となっている。
【００１４】
演算部２０３は、通信部２０８またはユーザインタフェース部２０５を介して接続要求、表示要求などの各種要求を受け取り、その要求内容に応じた処理を行うとともに、画面キャプチャ処理により取得されたキャプチャ画像データを通信部２０８を介して表示部２０１に送信する処理などを行う。なお、この機能はＯＳによって実現される。
【００１５】
図３は、本発明の表示装置の構成を示す。表示装置１０３は、例えばプロジェクタで構成され、プレゼンテーション用の資料などの各種情報を投影するための表示部３０１、表示部３０１に表示させる表示制御を行う表示制御部３０２、例えばプロジェクタ内蔵のカメラで構成される認識部３０３、例えばマウスや操作キーで構成される入力部３０５、入力部３０５からの操作入力を検出して入力内容を後述する演算部３０４に出力するユーザインタフェース部３０６、端末機器１０１に表示されている画面と認識部３０３で認識した画面を合成し合成画面を生成する機能を有する合成部３０９、端末機器１０１に表示されている画面と認識部３０３で認識した画面を合成し合成画面を生成する制御や合成した画面を表示可能とする表示制御などを行うプログラムを格納するプログラム記憶部３０８、この制御プログラムの実行に際して必要となる各種ファイルや各種データが記憶されるデータ記憶部３０７、表示装置全体の動作制御を行う演算部３０４、端末機器１０１との双方向通信を行う通信部３１０を備えている。
【００１６】
認識部３０３には、表示部に投影された画面に対して、例えばレーザポインタで構成される範囲指定装置１０４により任意の指定された箇所（領域の画像）を認識し、認識された画像データをデータ記憶部３０７に記憶するキャプチャ機能を備えている。
【００１７】
表示制御部３０２には、ユーザインタフェース部３０６を介して受け取ったユーザからの接続要求、表示要求などの各種要求内容を演算部３０４で処理して、端末機器１０１から送信されてきた画像を表示させる機能を備える。また、ユーザインタフェース部３０６を介して受け取ったユーザからの合成要求などの各種要求内容に従って、端末機器１０１から送信されてきた画像と認識部３０３で認識した画像を合成させる処理を演算部３０４で処理して、表示させる機能を備える。また、演算部３０４で処理する際、データ記憶部３０７の画像データを適宜アクセスしながら必要な処理を各部に実施させ投影させる機能を備える。
【００１８】
データ記憶部３０７には、合成状況管理部、認識部でキャプチャした画像データを格納するための認識画像データ記憶部、端末機器でキャプチャされ送信されてきた画像データを格納するための端末画像データ記憶部を備えている。
【００１９】
認識画像データ記憶部には、認識した領域の画像と共に、認識した領域の画像の座標位置も記憶されている。合成状況管理部は、現在の表示部の表示状況を管理するもので、現在の表示部３０１に表示されている表示画像が、例えば、端末機器１０１から送信されてきた画面のみであるか、端末機器１０１から送信されてきた画像と認識部３０３で認識した画像を合成した合成画面であるか、また、合成した合成画面である場合は何枚の画像を合成した画面であるのかを管理するものであり、この合成状況管理部は、表示部の画面が変更される毎に更新される。これにより後述する合成解除機能を実現することが可能となる。
【００２０】
この合成状況管理部は、入力部３０５で所定の操作を行うと、端末機器１０１から送信されてきた画面のみを表示するか、端末機器１０１から送信されてきた画像と認識部３０３で認識した画像を合成した合成画面を表示するか、などの切り替えを、表示制御などを行うプログラムとともに動作させることができる。
【００２１】
合成部３０９は、認識画像データ記憶部に格納されている認識部３０３で認識した画像データと、端末画像データ記憶部に格納されている端末機器１０１から送信されてきた画像データとの合成処理を行い、合成画像データを生成する。合成画像データの生成は、端末画像データ記憶部の画像データに対し、認識画像データ記憶部の画像データを認識した画像の座標位置を参照して、任意の箇所に上書きすることで生成する。
【００２２】
図４は、本発明の実施例１の画像表示方法の処理フローチャートを示す。以下、図４〜図８を用いて実施例１の動作を説明する。
【００２３】
端末機器１０１側と表示装置１０３側は、端末機器１０１の画面を表示装置１０３で投影する要求があるか確認する。端末機器１０１側の表示部２０１に表示された画面を表示装置１０３に投影する要求がある場合、端末機器１０１側は、そのユーザ要求を入力部２０４が受け付け、ユーザインタフェース部２０５を介してプログラム記憶部２０７に格納されている各種アプリケーションを呼び出し、演算部２０３により表示用メモリ２０２を介して端末機器１０１側の表示部２０１に表示される。その際、入力部２０４により受け付けられた要求は、ユーザインタフェース部２０５を介してプログラム記憶部２０７に格納されているキャプチャ機能を呼び出し、演算部２０３により表示用メモリ２０２に一時的に格納されている画像をデータ記憶部２０６に格納し、通信部２０８を介して表示装置１０３に送られる。
【００２４】
表示装置１０３側は、通信部２０８を介して送られてきた画像データをデータ記憶部３０７に格納し、プログラム記憶部３０８に格納されている画像表示機能を呼び出し、表示制御部３０２を介して送られてきた画像を表示部３０１に投影する（ステップ４０１）。
【００２５】
図５は、端末機器に表示されている画面が表示装置に投影された映像を示す。端末機器１０１は、例えばパソコンで構成され、表示装置１０３は、例えばプロジェクタで構成され、プレゼンテーション用の資料を投影する際の模式図である。ここで、例えばプレゼンテーション用の資料が３ページで構成され、プロジェクタに投影する際は、１ページ目、２ページ目、３ページ目と順次投影されるとする。１ページ目の右上部分に「表１．修正前データ」、３ページ目左下部分に「表２．修正後データ」が記載されている。
【００２６】
次に、表示装置１０３側は、表示部３０１に投影された画面が範囲指定装置１０４で範囲指定されたか確認する（ステップ４０２）。なお、範囲指定方法、認識方法などは公知の技術（例えば、前掲した特許文献１を参照）を用いる。すなわち、投影画面に対して光学的ポインタにより所定箇所を指定し、プロジェクタ等に備えられたカメラによって指定箇所を認識する。
【００２７】
認識部３０３が範囲指定されたことを確認できた場合（ステップ４０２でＹｅｓ）、演算部３０４により認識した画像データをデータ記憶部３０７に格納する（ステップ４０３）。認識部３０３が範囲指定されたことを確認できない場合、端末機器１０１の画面を表示装置１０３で投影し続ける。
【００２８】
図６は、端末機器１０１で表示されている画面（１ページ目）が表示装置１０３に投影された映像に対し、範囲指定装置１０４で任意の箇所を指定した図を示す。プレゼンテーション用の資料の１ページ目が投影されている際に、１ページ目の右上部分「表１．修正前データ」を範囲指定装置１０４で範囲指定した例を示す。
【００２９】
次に、表示装置１０３側は、端末機器１０１の画面と、認識した画面を合成する要求があるか確認する。表示装置１０３側は、合成する要求がある場合（ステップ４０４でＹｅｓ）、ユーザ要求により端末機器１０１の画面と認識した画面を合成する要求を入力部３０５が受け付け、ユーザインタフェース部３０６を介してプログラム記憶部３０８に格納されている合成機能を呼び出し、演算部３０４および合成部３０９により、端末機器１０１の画面と認識部３０３で認識された画面が合成され（ステップ４０５）、データ記憶部３０７に格納され、表示制御部３０２を介して表示部３０１に表示される（ステップ４０６）。合成する要求がない場合（ステップ４０４でＮｏ）、端末機器画面を表示装置で投影し続ける。
【００３０】
図７は、端末機器で表示されている画面（２ページ目）が表示装置に投影された映像を示す。プレゼンテーション用の資料の２ページ目が投影される際に、１ページ目の右上部分、つまり範囲指定装置１０４で範囲を指定した箇所「表１．修正前データ」の映像が保持された例を示す。すなわち、範囲指定装置１０４で範囲を指定した箇所「表１．修正前データ」は、画面（１ページ目）の指定位置に対応する、画面（２ページ目）上の位置に配置される。
【００３１】
図８は、端末機器で表示されている画面（３ページ目）が表示装置に投影された映像を示す。プレゼンテーション用の資料の３ページ目が投影される際に、１ページ目の右上部分、つまり範囲指定装置１０４で範囲を指定した箇所「表１．修正前データ」の映像が保持された例を示す。
【００３２】
上記したように、画像を合成（図８）しているので、１ページ目の「表１．修正前データ」と３ページ目の「表２．修正後データ」を比較する際に、ページ間の行き来をすることなく、容易に比較が可能となる。
【００３３】
また、認識部３０３は、逐次、範囲指定装置１０４により範囲指定されたかの確認動作を行い、認識する画像は１枚に限定されず、複数枚の画像でもよい。また、複数枚認識された画像に対して、ユーザにより複数回の合成要求がある場合は、前述した動作を繰り返すことで、合成後画像に対してさらに合成処理を繰り返し行うことが可能である。
【００３４】
また、複数枚の認識された画像は、データ記憶部３０７により管理されており、ユーザ要求により端末機器の画面と任意の認識された画面を合成する指定を受け付けた場合、端末機器の画像と任意の認識された画像のみを合成する合成処理を行うことが可能である。また、ユーザ要求により合成処理された画像の表示を解除する場合、データ記憶部に格納された端末機器の画像のみ表示することで、解除動作を行うことも可能である。
【実施例２】
【００３５】
上記した実施例１では、範囲指定装置で範囲指定された箇所が元画像上に上書きされるので、元画像の記載内容の一部が見えなくなり、また、比較対象とする画像の大きさや位置情報が異なる場合に比較し難い。
【００３６】
図９は、図６に示すプレゼンテーション用の資料の１ページ目が投影されている際に、１ページ目の右上部分「表１．修正前データ」を範囲指定装置で範囲指定した箇所が画像端部に表示された例を示す。図６の範囲指定と同様に、３ページ目の左下部分「表２．修正後データ」を範囲指定装置で範囲指定したとする。
【００３７】
図９（実施例２）は、上記した２つの範囲指定された箇所が、画像端部に表示した例を示す。すなわち、この例では、１ページ目の右上部分、つまり範囲指定装置で範囲を指定した箇所「表１．修正前データ」と３ページ目の左下部分、つまり範囲指定装置で範囲を指定した箇所「表２．修正後データ」が画像端部に表示される。このように、比較位置を揃えることで容易に比較が可能となる。
【００３８】
実施例２では、実施例１の問題点（範囲指定装置で範囲指定された箇所が元画像上に上書きされることで元画像の記載内容の一部が見えなくなる点、位置情報が異なり比較し難い点）が解消され、１ページ目の「表１．修正前データ」と３ページ目の「表２．修正後データ」を比較する際に、ページ間の行き来をすることなく、より容易に比較が可能となる。
【００３９】
また、「表１．修正前データ」と「表２．修正後データ」の大きさが異なる場合に、「表１．修正前データ」の大きさに合わせて、「表２．修正後データ」の大きさを変更して、つまり２つの画像サイズを同等にして画像端部に表示することも可能である。これにより、比較対象とする画像の大きさや位置情報が異なる場合に比較し難い点が解消され、１ページ目の「表１．修正前データ」と３ページ目の「表２．修正後データ」を比較する際に、ページ間の行き来をすることなく、より容易に比較が可能となる。
【００４０】
図１０は、実施例２の表示装置の構成を示す。実施例２の表示装置は、実施例１（図３）の表示装置１０３の構成に、変倍部３１１を追加している。
【００４１】
変倍部３１１は、データ記憶部３０７内の認識画像データ記憶部に格納されている認識部３０３で認識した画像データと、データ記憶部３０７内の端末機器画像データ記憶部に格納された端末機器１０１から送信されてきた画像データに対し、所定の変倍率に応じた拡大・縮小処理が可能な変倍処理を行う。
【００４２】
認識した画像データおよび端末機器画像データに対して施す変倍処理の変倍率は、入力部３０５からのユーザ要求に応じた値であり、あるいは予め決定された値、例えば、端末機器画像データの大きさと認識した画像データの比率が４：１となるような値として変倍処理する。
【００４３】
また、複数の認識した画像データの大きさが異なる場合に、変倍処理を行わずに異なる比率で出力し、あるいは変倍処理の変倍率を、入力部からのユーザ要求に応じた変倍率とし、あるいは任意の認識された画像データ（例えば、１枚目の認識された認識画像データ）の大きさに合わせた変倍率で処理してもよい。
【００４４】
図１０に示す実施例２の動作は、図３で説明した動作に加えて、合成部３０９での合成画像生成前に、変倍部３１１における変倍処理を行う動作が追加される。図１１は、本発明の実施例２の処理フローチャートを示す。
【００４５】
表示装置１０３側で、端末機器１０１の画面と認識した画面を合成する要求があるか確認する処理（ステップ５０１〜５０４）までは、図４の処理と同様である。合成する要求がある場合（ステップ５０４でＹｅｓ）、表示装置１０３側では、ユーザ要求により端末機器画面と認識した画面を合成する要求を入力部３０５が受け付け、ユーザインタフェース部３０６を介してプログラム記憶部３０８に格納されている画像変倍機能を呼び出し、演算部３０４および変倍部３１１により端末機器画像と認識部３０３で認識された画像の変倍処理を実施し（ステップ５０５）、データ記憶部に格納され、その後にプログラム記憶部３０８に格納されている合成機能を呼び出し、演算部３０４および合成部３０９により端末機器画面と認識部で認識された画面が合成され（ステップ５０６）、データ記憶部３０７に格納され、表示制御部３０２を介して表示部３０１に表示される（ステップ５０７）。
【実施例３】
【００４６】
上記した実施例では、範囲指定装置で範囲指定した箇所を画像端部に表示することで、ページ間の行き来をすることなく、比較対象とする画像の大きさや位置が揃うことで、より容易に比較が可能となる。しかし、必要箇所をその都度、範囲指定装置で範囲指定しなければならず、ユーザの手間が発生する。
【００４７】
図１２は、範囲指定装置で任意の指定した箇所と端末機器で表示されている画面（３ページ目）内でパターン認識処理を行い、一致箇所を特定したことを示す図である。
【００４８】
図１２は、プレゼンテーション用の資料の１ページ目が投影されている際に、１ページ目の右上部分「表１．修正前データ」を範囲指定装置で範囲指定した箇所が、画像端部に表示された例を示す。実施例２では、３ページ目の左下部分「表２．修正後データ」をユーザが範囲指定装置で範囲指定しているが、この作業はユーザの手間となる。
【００４９】
実施例３の図１２では、同一ファイル内に「表１．修正前データ」に類似したパターンがあるか否かのパターン認識処理を実施し、「表２．修正後データ」のような類似したパターンを一致した箇所であると特定した例を示す。
【００５０】
すなわち、この例では、１ページ目の右上部分、つまり範囲指定装置で範囲を指定した箇所「表１．修正前データ」と類似した箇所の検出を行い、３ページ目の左下部分、つまり範囲指定装置で範囲を指定した箇所「表１．修正前データ」と類似した「表２．修正後データ」が検出され、図１２に示すように、自動的に画像端部に表示される。
【００５１】
これにより、実施例２（図９）の問題点（必要箇所をその都度、範囲指定装置で範囲指定しなければならずユーザの手間が発生する点）が解消され、ページ間の行き来をすることなく、また、ユーザの手間が発生することもなく、より容易に比較が可能となる
実施例３の処理は、実施例２（図１０）の表示装置の認識部内に、パターン認識機能を追加することにより実現する。認識部３０３内のパターン認識機能は、データ記憶部３０７内の認識画像データ記憶部に格納された認識部３０３で認識した画像データに対して、類似したパターン認識を行うため、所定の認識方法に応じた公知のパターン認識処理により検出を行う。パターン認識処理により一致と判断された画像データは、データ記憶部３０７に格納され、実施例２と同様に、変倍処理、合成処理を実施し、自動的に画像端部に貼り付けられる。全体の動作は、図１０で説明した動作に加えて、変倍部での変倍画像生成前に、認識部３０３でパターン認識処理を行う。
【００５２】
実施例３では、図１１のフローチャートにおいて、認識部の動作である認識画面格納後（ステップ５０３）に、パターン認識動作を追加した処理となる。すなわち、表示装置１０３側では、範囲指定装置１０４で範囲指定されたか確認し、範囲指定された場合、認識画面をデータ記憶部に格納する処理（ステップ５０１〜５０３）までは、図１１と同様の処理を行う。
【００５３】
合成する要求がある場合（ステップ５０４でＹｅｓ）、表示装置１０３側でユーザ要求により端末機器画面と認識した画面を合成する要求を入力部３０５が受け付け、ユーザインタフェース部３０６を介してプログラム記憶部３０８に格納されているパターン認識機能を呼び出し、演算部３０４およびパターン認識部により認識画像と一致するパターンの検出を実施し、検出されたパターンがデータ記憶部３０７に格納され、その後にプログラム記憶部３０８に格納されている画像変倍機能を呼び出し、演算部３０４および変倍部３１１により端末機器画像と認識部３０３で認識された画像の変倍処理を実施し（ステップ５０５）、データ記憶部３０７に格納され、その後にプログラム記憶部３０８に格納されている合成機能を呼び出し、演算部３０４および合成部３０９により端末機器画面と認識部３０３で認識された画面が合成され（ステップ５０６）、データ記憶部３０７に格納され、表示制御部３０２を介して表示部３０１に表示される（ステップ５０７）。また、検出された類似画像を画像端部に表示するタイミングは逐次行ってもよいし、ユーザ要求に従ったタイミングで表示しても構わない。全体の動作としては、図１１で説明した動作に従い、変倍部での変倍画像生成前に、認識部でパターン認識処理を行う。
【００５４】
なお、本発明の画像表示システムは、端末機器および表示装置にそれぞれ搭載されている機能を相互に入れ替える、つまり役割分担を入れ替えた構成を採るシステムとしても良い。
【００５５】
以上説明したように、本発明では、レーザポインタ等の光学的ポインタで所定範囲を指定し、指定範囲を保持しながらページ送りやスクロールすることができ、異なるページの所定箇所や異なるファイルの所定箇所との比較がしやすい状態で投影することができ、各ページ間を行き来する手間、各ファイル間を行き来する手間を省くことができる。
【００５６】
本発明は、前述した実施例の機能を実現するソフトウエアのプログラムコードを記録した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても達成される。この場合、記憶媒体から読出されたプログラムコード自体が前述した実施例の機能を実現することになる。プログラムコードを供給するための記憶媒体としては、例えば、ハードディスク、光ディスク、光磁気ディスク、不揮発性のメモリカード、ＲＯＭなどを用いることができる。また、コンピュータが読出したプログラムコードを実行することにより、前述した実施例の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施例の機能が実現される場合も含まれる。さらに、記憶媒体から読出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施例の機能が実現される場合も含まれる。また、本発明の実施例の機能等を実現するためのプログラムは、ネットワークを介した通信によってサーバから提供されるものでも良い。
【符号の説明】
【００５７】
１０１  端末機器
１０２  ネットワーク
１０３  表示装置
１０４  範囲指定装置
１０５  投影画面
２０１  表示部
２０２  表示用メモリ
２０３  演算部
２０４  入力部
２０５  ユーザインタフェース部
２０６  データ記憶部
２０７  プログラム記憶部
２０８  通信部
３０１  表示部
３０２  表示制御部
３０３  認識部
３０４  演算部
３０５  入力部
３０６  ユーザインタフェース部
３０７  データ記憶部
３０８  プログラム記憶部
３０９  合成部
３１０  通信部
【先行技術文献】
【特許文献】
【００５８】
【特許文献１】特開２００４−５４１３４号公報
【特許文献２】特開２００４−１１８８０７号公報
【図１】
2014174338.tif 000003
【図２】
2014174338.tif 000004
【図３】
2014174338.tif 000005
【図４】
2014174338.tif 000006
【図１０】
2014174338.tif 000007
【図１１】
2014174338.tif 000008
【図５】
2014174338.tif 000009
【図６】
2014174338.tif 000010
【図７】
2014174338.tif 000011
【図８】
2014174338.tif 000012
【図９】
2014174338.tif 000013
【図１２】
2014174338.tif 000014