(57)【特許請求の範囲】
【請求項１】
テクスチャ情報を記憶する記憶装置と、
テクスチャ情報を投影する冊子の画像を取り込むカメラと、
前記カメラから取り込んだ画像から投影すべきテクスチャ情報を前記記憶装置から選択する選択部と、
前記カメラから取り込んだ画像に基づいて、前記選択手段によって選択されたテクスチャ情報を変形する画像変形部と、
前記変形部で変形されたテクスチャ情報を投影する投影部とを有することを特徴とする表示装置。
【請求項２】
請求項１の表示装置において、
前記投影部は透明の媒体に前記テクスチャ情報を表示することを特徴とする表示装置。
【請求項３】
請求項１の表示装置において、
前記選択部は音声の情報に基づいて前記記憶装置からテクスチャ情報を選択することを特徴とする表示装置。
【請求項４】
請求項１の表示装置において、
前記変形部は前記テクスチャ情報及び動画像を前記カメラから取り込んだ画像に基づいて変形し、
前記投影部は前記変形部で変形されたテクスチャ情報及び動画像を投影することを特徴とする表示装置。
【請求項５】
画像を撮影するカメラと表示部を備えた頭部装着型の表示装置において、前記カメラによって撮影した紙の画像から前記紙の領域情報を認識し、前記紙の領域に、定められた画像を表示することを特徴とする表示装置。
【請求項６】
前記カメラで撮影した紙の画像から前記紙のページ情報を認識し、前記ページ情報に対応した前記定められた画像を表示することを特徴とする請求項５記載の表示装置。
【請求項７】
前記カメラと前記表示装置の相対位置が定められていることを特徴とする請求項５と６のいずれかに記載の表示装置。
【請求項８】
画像を撮影するカメラと投影部を備えた表示装置において、前記カメラによって撮影した紙の画像から前記紙の領域情報を認識し、定められた画像を前記投影部から投影して前記紙の領域に表示することを特徴とする表示装置。
【請求項９】
前記カメラで撮影した紙の画像から前記紙のページ情報を認識し、前記ページ情報に対応した前記定められた画像を前記紙の領域に投影することを特徴とする請求項８記載の表示装置。
【請求項１０】
画像を撮影するカメラと表示部を備えた表示装置において、前記カメラで領域情報及びページ情報を有する複数の紙面を備えた本の紙面を撮影し、前記領域情報と前記ページ情報を認識し、前記認識したページ情報に対応した画像を、前記領域情報に基づいた前記紙の定められた領域に表示することを特徴とする表示装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、電子的，磁気的あるいは光学的に記憶した情報を表示する装置に関する。
【０００２】
【従来の技術】
従来電子的，磁気的、あるいは光学的に記憶した書籍情報を表示する装置としては、例えば特開平5−257991 号公報に記載されているようにデータベースに格納されている情報を表示する際に本の表示に疑似した形式で表示するものがある。また、より紙に近い感覚で表示を切り替える方法としては特開平6−290017 号公報には表示部上に透明の疑似頁を取り付けて、この疑似頁の頁めくりを検出して表示画面を切り替える技術が記載されている。
【０００３】
【発明が解決しようとする課題】
しかしながら上記従来技術は、紙を媒介とした書物のような読みやすさがないといった課題があった。
【０００４】
本発明の目的は、電子的，磁気的、あるいは光学的に記憶した書籍情報を媒体とした書物のように読みやすく表示する表示装置を提供することにある。
【０００５】
【課題を解決するための手段】
上記目的は、テクスチャ情報を記憶する記憶装置と、テクスチャ情報を投影する冊子の画像を取り込むカメラと、カメラから取り込んだ画像から投影すべきテクスチャ情報を記憶装置から選択する選択部と、カメラから取り込んだ画像に基づいて選択手段によって選択されたテクスチャ情報を投影する投影部によって達成することができる。
【０００６】
【発明の実施の形態】
以下、本発明の一実施例を図１により説明する。図１において、１はページ番号と等間隔の縦罫線を印字した白紙の冊子、２はＣＣＤカメラ、３は画像認識部、４は画像認識部３で認識したページ番号に応じたテクスチャ情報を選択する画像選択部、５はＣＤ−ＲＯＭ６から情報を読み出すＣＤ−ＲＯＭドライブ、７は画像認識部３で認識した冊子１の開かれた紙面の形状に基づいて、ＣＤ−ＲＯＭドライブ５で読み出したテクスチャ情報を変形する画像変形部、８は画像変形部で変形された画像を冊子１の開かれた紙面に投射する投射型表示部である。
【０００７】
冊子１の適当なページを開き、本装置を稼働すると、まず、ＣＣＤカメラ２が開かれた冊子１の画像を撮像し、画像認識部３がその画像を入力してメモリ３１に入力画像を格納する。
【０００８】
画像認識部３は所謂画像処理装置であり、入力した画像データをメモリ３１に格納し、その画像から冊子１の開かれているページのページ番号を認識する。ここで、認識方法はいろいろあるが、例えば、入力画像を２値化して冊子１の領域を特定し、特定した冊子１の領域から位置情報などによりページ番号領域を切り出し、数字のテンプレートとマッチングさせることにより認識する。
【０００９】
この例では、印字したページ番号から開かれているページを認識したが、その他に、バーコード等の記号から認識する方法，キー入力によりページを特定する方法，音声を認識し、ページを特定する方法などがある。キー入力や音声によりページを特定した場合は、ページのめくれを認識することにより以降のページを特定するなどの方法が考えられる。
【００１０】
画像認識部３はページを認識した後、画像選択部４にその情報を送る。
【００１１】
画像選択部４は、ページ情報を格納するメモリ４１，ＣＤ−ＲＯＭドライブ５を制御するデバイスドライバ，ＣＤ−ＲＯＭから読み出した画像データを格納するメモリ４２などからなる。画像選択部４は、画像認識部３からページ情報を受け取り（メモリ４１に格納）、そのページ情報に基づいてＣＤ−ＲＯＭドライブ５を制御し、画像認識部３で認識したページに相当する画像をＣＤ−ＲＯＭ６から読み出し、読み出した画像をメモリ４２に格納する。
【００１２】
画像変形部７は、画像認識部３から送られた冊子１の画像情報を格納するメモリ７１，画像選択部４から送られたＣＤ−ＲＯＭの画像情報を格納するメモリ７２，上記２種類の画像情報から投射型表示部８で投射する画像を生成する画像処理部、および、画像処理部で生成された投射用画像を格納するメモリ７３などからなる。
【００１３】
画像変形部７では、画像認識部３から送られた冊子１の画像情報をメモリ７１に格納し、画像選択部４から送られたＣＤ−ＲＯＭの画像情報をメモリ７２に格納する。そして、メモリ７２に格納された画像をメモリ７１の冊子１の領域に変形してマッピングし、その画像をメモリ７３に格納する。
【００１４】
ここで、マッピング方法の一例を図２を用いて説明する。メモリ７１に格納された冊子１の画像を、冊子１に印刷された縦罫線毎にそれぞれが四角形になるように縦方向に分割する。一方、メモリ７２に格納された画像もメモリ７１の画像と同じ数だけ縦方向に等間隔に分割する。次に、メモリ７２に格納された画像の各分割領域を、メモリ７１に格納された画像の対応する分割領域のサイズ，形状に応じて、画像処理部７４で拡大・縮小或いは台形変形してメモリ７３に格納する。
【００１５】
投射型表示部８は、メモリ７３に格納された画像を投影する。ここで、メモリ７３に格納された画像を投影すると冊子１の開かれたページに投影するように、投射型表示部８とＣＣＤカメラ２の相対位置を固定しておくことによりキャリブレーションさせる。
【００１６】
以上により、冊子１の開かれたページに、そのページに対応する情報が表示され、使用者はあたかも書籍を読むように電子情報を読むことができる。
【００１７】
上記の例では、書籍情報を格納したメディアをＣＤ−ＲＯＭとしたが、ＤＶＤ−ＲＯＭなど他のメディアでもよい。
【００１８】
本発明の他の実施例を図３により説明する。図３の１から７は図１と同じで、９はシースルータイプのヘッドマウントディスプレイ、１０は使用者である。
【００１９】
この例でも画像を変形するまでは先の例と同様である。但し、変形した画像を冊子１に直接投影するのではなく、シースルータイプのヘッドマウントディスプレイ９に表示する。ここで、表示した画像が冊子１の開かれたページに表示されているように見せるため、シースルータイプのヘッドマウントディスプレイ９とＣＣＤカメラ２の相対位置をあらかじめ固定しておく。
【００２０】
【発明の効果】
本発明により、電子的，磁気的、或いは、光学的に記憶した書籍情報を紙を媒体とした書物のように読みやすく表示する装置を提供することができる。
【図面の簡単な説明】
【図１】本発明の表示装置の一例を示す図である。
【図２】本発明の表示装置の処理の一部を示す図である。
【図３】本発明の表示装置の他の一例を示す図である。
【符号の説明】
１…冊子、２…ＣＣＤカメラ、３…画像認識部、４…画像選択部、５…ＣＤ−ＲＯＭドライブ、６…ＣＤ−ＲＯＭ、７…画像変形部、８…投射型表示部。
【図１】
0003796956.tif 000002
【図２】
0003796956.tif 000003
【図３】
0003796956.tif 000004