(57)【特許請求の範囲】
【請求項１】
対象物の画像を入力する画像入力手段と、
上記画像入力手段から入力された上記対象物の画像から、上記対象物に設けられた情報を符号化したパターンを認識するパターン認識手段と、
上記パターン認識手段により認識されたパターンの情報を画像情報に再生する情報再生手段と、
上記対象物に関連する情報を記録した関連情報記録手段と、
上記情報再生手段により再生されたパターンの情報を用いて上記関連情報記録手段から上記対象物に関連する情報を取得する関連情報取得手段と、
上記画像入力手段から入力された上記対象物の画像に対して、上記情報再生手段によって再生されたパターンの画像情報または上記関連情報取得手段によって取得された上記対象物に関連する情報の少なくとも一方を重畳して出力する画像重畳手段と、
上記画像重畳手段からの出力を表示する画像表示手段と、
を有し、
上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定することを特徴とする画像情報表示装置。
【請求項２】
上記画像重畳手段は、上記対象物の画像に対して重畳する情報を選択する重畳情報選択指示手段を有し、この重畳情報選択指示手段からの指示により解読されたパターンの情報または上記対象物に関連する情報を上記対象物の画像に重畳することを特徴とする請求項１に記載の画像情報表示装置。
【請求項３】
上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定することを特徴とする請求項１または２に記載の画像情報表示装置。
【請求項４】
上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、
上記パターン認識手段は、上記表示属性情報を解読し、
上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生することを特徴とする請求項１乃至３のいずれか一に記載の画像情報表示装置。
【請求項５】
上記表示属性情報は、上記画像入力装置から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定することを特徴とする請求項４に記載の画像情報表示装置。
【請求項６】
上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定することを特徴とする請求項４に記載の画像情報表示装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像情報表示装置に係り、特に、ユーザに対して、ユーザの注目する対象に関連する情報を表示する画像情報表示装置に関する。
【０００２】
【従来の技術】
従来、ユーザに対して、ユーザの注目する対象に関する情報を呈示する装置としては、ユーザヘの情報呈示用の液晶ディスプレイと、周辺画像を取得するための小型ビデオカメラとから構成された携帯型の情報呈示装置（平川正人、安村通晃「ビジュアルインタフェース」，ｂｉｔ別冊，共立出版，ｐｐ１７７−１９８，１９９６）が知られている。
【０００３】
すなわち、この情報呈示装置は、何らかの作業を行うユーザに対して、周囲に存在する対象に関する有益な情報を対象の存在する位置に関連付けて呈示するものである。
【０００４】
この情報呈示装置では、複雑な画像認識技術を用いることなく状況や対象を同定するために、各対象毎にＩＤ認識用のカラーコード（赤と青のストライプによってＩＤをエンコードした一種のバーコード）を添付しており、カメラから取り込まれたカラーコードを含む対象の画像を画像認識部へ送る。
【０００５】
画像認識部は、カラーコードの表すＩＤ番号を解読してユーザの注目する対象の識別を行う。
【０００６】
そして、メッセージ生成部では、識別したＩＤを検索キーとして、予め用意されているデータベースから該当する情報を検索して、カメラから得られた映像上の適切な位置に、この検索した情報を基にして生成されたメッセージを画像合成部により合成表示して情報呈示用のディスプレイに表示する。
【０００７】
このような情報呈示装置の用途例としては、ユーザが壁にかけられたカレンダーの前に、この装置を差し出すと、カレンダーの映像上にデータベースから得られたスケジュール情報が合成されて表示されるものなどが考えられる。
【０００８】
また、特開平１０−５５２５９号公報では、医療環境で使用するのに適したユーザ・インタフェースとしてユーザである看護婦または医師が病院内を歩き、病室にいる患者の回診を行う場合のユーザ・インタフェース環境について開示している。
【０００９】
この特開平１０−５５２５９号公報では、ユーザである看護婦または医師が病室に入った場合、自動的にその位置を特定の部屋として検知したり、あるいは、ユーザである看護婦またぼ医師が部屋に入る際に部屋番号を入力して部屋を特定するようになっている。
【００１０】
また、上記特開平１０−５５２５９号公報では、ユーザである看護婦または医師が入った部屋を特定すると、例えば、患者に関する情報を有するデータ・クリップボートが表示されるようになっている。
【００１１】
【発明が解決しようとする課題】
ところで、上述したような情報呈示装置では、対象毎に取り付けられた識別用カラーコードを認識して識別ＩＤを検索キーとして、予め用意されたデータベースから該当特報を検索して合成表示する情報を生成するようにしている。
【００１２】
このため、例えば、上述した情報呈示装置を病院内での回診に使用する場合、患者が使用する各ベッドに識別用カラーコードを取り付け、ユーザがそのカラーコードを情報呈示装置で観察すると識別用カラーコードを認識して識別ＩＤを検索キーとして情報を蓄積するデータベースの中から該当情報を検索することにより、初めてユーザに情報を呈示することができることになる。
【００１３】
つまり、上述した情報呈示装置では、該当情報を検索している間は、情報を何も呈示できないということであり、データベースに蓄積されている情報が膨大で検索に時間がかかる場合や、外部データベースに電話回線や無線ＬＡＮ等で接続されていて情報転送に時間がかかる場合にはユーザに情報を何も呈示できず、その間、患者の特定もできないという問題が発生する恐れがある。
【００１４】
また、上記特開平１０−５５２５９号公報では、回診時に自動的に部屋を特定する検知方法については、具体的に、何も開示されていない。
【００１５】
また、上記特開平１０−５５２５９号公報では、仮に、自動的に部屋を特定できたとしても、複数の患者が同一の部屋に存在する場合についての処理方法については何も開示されていない。
【００１６】
このため、誤って同一の部屋に存在する別の患者の情報を参照してしまってもユーザが誤りに気付かないという重大な問題が発生する恐れがある。
【００１７】
本発明は、上記問題点に着目し、ユーザに対して、ユーザの注目する対象に関連する情報を表示するもので、例えば、医療環境で使用する場合、データベースを検索しなくても患者に関する基本情報を呈示でき、さらに、データベースに蓄積された患者の情報をユーザに確実に呈示できる画像情報表示装置を提供することを目的とする。
【００１８】
【課題を解決するための手段】
本発明によると、上記課題を解決するために、
（１）  対象物の画像を入力する画像入力手段と、
上記画像入力手段から入力された上記対象物の画像から、上記対象物に設けられた情報を符号化したパターンを認識するパターン認識手段と、
上記パターン認識手段により認識されたパターンの情報を画像情報に再生する情報再生手段と、
上記対象物に関連する情報を記録した関連情報記録手段と、
上記情報再生手段により再生されたパターンの情報を用いて上記関連情報記録手段から上記対象物に関連する情報を取得する関連情報取得手段と、
上記画像入力手段から入力された上記対象物の画像に対して、上記情報再生手段によって再生されたパターンの画像情報または上記関連情報取得手段によって取得された上記対象物に関連する情報の少なくとも一方を重畳して出力する画像重畳手段と、
上記画像重畳手段からの出力を表示する画像表示手段と、
を有し、
上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定することを特徴とする画像情報表示装置が提供される。
【００１９】
（対応する発明の実施の形態）
この発明に関する実施の形態は、第１の実施の形態と第２の実施の形態が対応する。
【００２０】
この（１）の発明中の面像入力手段は、これらの実施の形態では、ビデオカメラが該当するが、画像を入力できるものであれば何でもよい。
【００２１】
また、この（１）の発明中のパターン認識手段は、これらの実施の形態では、コントローラ内の二次元パターン認識部が該当するが、一次元パターンの認識でもかまわないし、パターンを認識できるものであれば何でもよい。
【００２２】
また、この（１）の発明中の情報再生手段は、これらの実施の形態では、コントローラ内の情報再生部が該当するが、情報を再生できるものであれば何でもよい。
【００２３】
また、この（１）の発明中の関連情報記録手段は、これらの実施の形態では、コントローラ内の関連情報記録部が該当するが、情報を記録できるものであれば何でもよく、有線ネットワークや、無線ネットワークで接続された外部データベースでもかまわない。
【００２４】
また、この（１）の発明中の関連情報取得手段は、これらの実施の形態では、コントローラ内の関連情報取得部が該当するが、関連情報を取得できるものであれば何でもよい。
【００２５】
また、この（１）の発明中の画像重畳手段は、これらの実施の形態では、コントローラ内の画像重畳部が該当するが、ビデオミキサーでもかまわないし、画像を重畳できるものであれば何でもよい。
【００２６】
また、この（１）の発明中の画像表示手段は、これらの実施の形態では、液晶ディスプレイが該当するが、ＣＲＴやプラズマディスプレイでもかまわないし、画像を表示できるものであれば何でもよい。
【００２７】
（作用）
画像入力手段から入力された対象物の画像は、パターン認識手段と重畳表示手段とに供給される。
【００２８】
パターン認識手段は、入力された対象物の画像に含まれる所定のパターンを認識し、認識されたパターンは情報再生手段に供給される。
【００２９】
情報再生手段は、認識されたパターンを情報に再生し、再生された情報は画像重畳手段と関連情報取得手段とに供給される。
【００３０】
関連情報取得手段は、再生された情報に関連する情報を関連情報記録手段から取得し、取得された情報は画像重畳手段に供給される。
【００３１】
画像重畳手段は、画像入力手段から入力された画像に、情報再生手段で再生した情報および関連情報取得手段が関連情報記録手段から取得した情報のうちの少なくともいずれか一方を重畳し、重畳された画像は画像表示手段に供給され、この画像表示手段によって表示されることにより、ユーザに呈示されるものであって、ここで、画像重畳手段は、パターン認識手段によって認識された入力画像中のパターンの大きさによって情報再生手段によって再生した情報および関連情報取得手段によって取得した情報のうちの少なくてもいずれか一方の呈示内容を設定する。
【００３２】
また、本発明によると、上記課題を解決するために、
（２）  上記画像重畳手段は、上記対象物の画像に対して重畳する情報を選択する重畳情報選択指示手段を有し、この重畳情報選択指示手段からの指示により解読されたパターンの情報または上記対象物に関連する情報を上記対象物の画像に重畳することを特徴とする（１）に記載の画像情報表示装置が提供される。
【００３３】
（対応する発明の実施の形態）
この発明に関する実施の形態は、第２の実施の形態が対応する。
【００３４】
この（２）の発明中の重畳情報選択指示手段は、この実施の形態では、キーボード６が該当するが、マウスやトラックパッド等のポインティングデバイスや音声認識による方法でもかまわないし、ユーザが指示を与える情報等を入力できるものであれば何でもよい。
【００３５】
（作用）
重畳情報選択指示手段は、重畳情報選択指示手段によって入力されるユーザが指示を与える情報等を画像重畳手段に供給する。
【００３６】
画像重畳手段は、重畳情報選択指示手段によって入力された指示にしたがって、画像入力手段から入力された対象物の画像に、情報再生手段で再生した情報および関連情報取得手段が関連情報記録手段から取得した情報のうちの少なくてもいずれか一方を重畳し、重畳された画像は画像表示手段に供給され、ユーザに呈示される。
【００３７】
また、本発明によると、上記課題を解決するために、
（３）  上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定することを特徴とする（１）または（２）に記載の画像情報表示装置が提供される。
【００３８】
（対応する発明の実施の形態）
この発明に関する実施の形態は、第１の実施の形態と第２の実施の形態が対応する。
【００３９】
（作用）
画像重畳手段は、パターン認識手段によって認識された入力画像中のパターンの位置によって情報再生手段によって再生した情報および関連情報取得手段によって取得した情報のうちの少なくてもいずれか一方の重畳位置を設定する。
【００４３】
また、本発明によると、上記課題を解決するために、
（４）  上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、
上記パターン認識手段は、上記表示属性情報を解読し、
上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生することを特徴とする（１）乃至（３）のいずれか一に記載の画像情報表示装置が提供される。
【００４４】
（対応する発明の実施の形態）
この発明に関する実施の形態は、第１の実施の形態と第２の実施の形態が対応する。
【００４５】
（作用）
情報再生手段は、パターン認識手段によって解読された表示属性情報に基づき画像情報を再生する。
【００４６】
また、本発明によると、上記課題を解決するために、
（５）  上記表示属性情報は、上記画像入力装置から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定することを特徴とする（４）に記載の画像情報表示装置が提供される。
【００４７】
（対応する発明の実施の形態）
この発明に関する実施の形態は、第１の実施の形態と第２の実施の形態が対応する。
【００４８】
（作用）
情報再生手段は、入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでいる表示属性情報に基づき再生する画像情報の位置を設定する。
【００４９】
また、本発明によると、上記課題を解決するために、
（６）  上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、
上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定することを特徴とする（４）に記載の画像情報表示装置が提供される。
【００５０】
（対応する発明の実施の形態）
この発明に関する実施の形態は、第１の実施の形態と第２の実施の形態が対応する。
【００５１】
（作用）
情報再生手段は、情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでいる表示属性情報に基づき再生する画像情報の位置を設定する。
【００５２】
【発明の実施の形態】
以下図面を参照して本発明の実施の形態について説明する。
【００５３】
（第１の実施の形態）
図１は、本発明による画像情報表示装置の第１の実施の形態の構成を示すブロック図である。
【００５４】
この実施の形態は、本発明を医療環境としての病院における患者情報の管理に適用した例である。
【００５５】
この発明の第１の実施の形態による画像情報表示装置は、以下のように構成されている。
【００５６】
この画像情報表示装置（以下、情報呈示装置と記す）には、ビデオカメラ（画像入力手段）１と、コントローラ２と、液晶ディスプレイ（画像表示手段）３とが設けられている。
【００５７】
前記コントローラ２には、二次元パターン認識部（パターン認識手段）２１と、情報再生部（情報再生手段）２２と、画像重畳部（画像重畳手段）２３と、関連情報記録部（関連情報記録手段）２４と、関連情報取得部（関連情報取得手段）２５とが設けられている。
【００５８】
ビデオカメラ１で撮影された画像は、コントローラ２内の二次元パターン認識部２１とコントローラ２内の画像重畳部２３とに供給される。
【００５９】
二次元パターン認識部２１からの出力は、情報再生部２２に供給される。
【００６０】
情報再生部２２からの出力は、画像重畳部２３と関連情報取得部２５とに供給される。
【００６１】
関連情報取得部２５からの出力は、関連情報記録部２４と画像重畳部２３とに供給される。
【００６２】
関連情報記録部２４からの出力は、関連情報取得部２５に供給される。
【００６３】
画像重畳部２３からの出力は、液晶ディスプレイ３に供給される。
【００６４】
対象物であるベッド４には、二次元パターン５が貼り付けてある。
【００６５】
この二次元パターン５は、例えば、５０ｍｍ四方の領域に２０００バイトの情報が記録可能であり、エラー訂正機能を持っている。
【００６６】
また、この二次元パターン５には、例えば、図２に示すように、ベッド４を使用している患者の基本情報である患者名、生年月目、性別、患者番号がパターン化された情報として記録されている。
【００６７】
次に、この発明の第１の実施の形態による情報呈示装置の作用を説明する。
【００６８】
図３は、本実施の形態による情報呈示装置におけるコントローラ２の処理手順を説明するために示すフロ一チャートである。
【００６９】
まず、ユーザは、本実施の形態による情報呈示装置におけるビデオカメラ１を用いて対象物であるベッド４および二次元パターン５を撮影する（ステップＳ１０１）。
【００７０】
これにより、ビデオカメラ１で撮影された画像は、コントロ一ラ２内の二次元パターン認識部２１で二値化された後、二値化の中から二次元パターン５の部分が抽出されることにより、二次元パターン５のパターン認識が行われる（ステップＳ１０２）。
【００７１】
そして、パターン認識が行われた情報は、情報再生部２２に供給される。
【００７２】
情報再生部２２では、二次元パターン認識部２１でパターン認識が行われた情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する（ステップＳ１０３）。
【００７３】
情報再生部２２で画像信号に変換された情報は、画像重畳部２３に供給され、二次元パターン認識部２１で抽出した二次元パターン部分の左上方にビデオカメラ１で撮影された画像と重畳される。
【００７４】
重畳された画像は、液晶ディスプレイ３に供給され、ユーザに呈示される（ステップＳ１０４）。
【００７５】
関連情報取得部２５では、情報再生部２２で生成されたデータに基づいて、関連情報記録部２４に蓄積された情報の中から、情報再生部２２で生成されたデータに関連する情報（例えば、患者の血液検査結果等）を取得する。
【００７６】
そして、取得した情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する（ステップＳ１０５）。
【００７７】
関連情報取得部２５で画像信号に変換された情報は、画像重畳部２３に供給され、二次元パターン認識部２１で抽出した二次元パターン部分の右上方にビデオカメラ１で撮影された画像と重畳される。
【００７８】
重畳された画像は、液晶ディスプレイ３に供給され、ユーザに呈示される（ステップＳ１０６）。
【００７９】
したがって、ユーザには、図４に示すように、液晶ディスプレイ３上に、ビデオカメラ１で撮影された画像に、ベッド４を使用している患者の氏名、生年月日、性別、患者番号の基本情報と、関連情報記録部２４に蓄積されているベッド４を使用している患者の血液検査結果とが、一覧表として重畳された画像が呈示される。
【００８０】
この場合、患者の血液検査結果は一覧表ではなく、図５に示すようなグラフを重畳して呈示するようにしても良い。
【００８１】
また、二次元パターン５がパターン認識手報によって認識された入力画像中のパターンの大きさによって、例えば、入力画像中のパターンが小さなときには基本情報を呈示し、入力画像中のパターンが大きくなったら血液検査結果を呈示するようにしても良い。
【００８２】
このようにして、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定する。
【００８３】
したがって、以上のような本発明の第１の実施の形態によれば、画像重畳手段により、画像入力手段からの画像と、パターン認識手段と情報再生手段とにより再生された情報と、関連情報取得手段が関連情報記録手段から取得した情報とを重畳してから、画像表示手段によって表示するようにしたので、即座に、パターンに記録された患者名等の基本情報を表示することができる。
【００８４】
また、本発明の第１の実施の形態によれば、パターンに記録された情報に基づいて関連情報を取得するので、入力された画像と入力画像に含まれる情報と、入力画像に関連する情報を重畳して表示することにより、ユーザに呈示することが可能になる。
【００８５】
なお、この実施の形態では、パターンに記録された情報と、パターンに記録された情報に基づいた関連情報との両方を同時に表示するようにしているが、順番に片方ずつ表示するようにしても良いし、どちらか片方のみを表示するようにしても良い。
【００８６】
また、パターンに記録された情報の重畳位置は、二次元パターン部分の右上方に、パターンに記録された情報に基づいた関連情報の重畳位置は、二次元パター一ン部分の左上方としたが、これらの重畳位置は、ユーザが指定する任意の位置でも良いし、パターンとの相対的または絶対的な重畳位置をパターンにあらかじめ記録しておいても良いし、パターンの上下左右をパターンにあらかじめ記録しておき、これに基づき呈示する情報の上下左右の定位を決めても良い。
【００８７】
すなわち、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定するようにしている。
【００８８】
また、上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、上記パターン認識手段は、上記表示属性情報を解読し、上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生するようにしている。
【００８９】
また、上記表示属性情報は、上記画像入力手段から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定するようにしている。
【００９０】
また、上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定するようにしている。
【００９１】
また、この発明の第１の実施の形態の各構成は、当然、各種の変形、変更が可能である。
【００９２】
例えば、画像入力手段は、この実施の形態では、ビデオカメラ１が該当するが、画像を入力できるものであれば何でもよい。
【００９３】
また、パターン認識手段は、この実施の形態では、コントローラ２内の二次元パターン認識部２１が該当するが、一次元パターンの認識でもかまわないし、パターンを認識できるものであれば何でも良い。
【００９４】
また、情報再生手段は、この実施の形態では、コントローラ２内の情報再生部２２が該当するが、情報を再生できるものであれば何でも良い。
【００９５】
また、関連情報記録手段は、この実施の形態では、コントローラ２内の関連情報記録部２４が該当するが、情報を記録できるものであれば何でも良く、有線ネットワークや、無線ネットワーク等で接続された外部データベースでもかまわない。
【００９６】
また、画像重畳手段は、この実施の形態では、コントローラ２内の画像重畳部２３が該当するが、ビデオミキサーでもかまわないし、画像を重畳できるものであれば何でも良い。
【００９７】
また、画像表示手段は、この実施の形態では、液晶ディスプレイ３が該当するが、ＣＲＴやプラズマディスプレイでもかまわないし、画像を表示できるものであれば何でも良い。
【００９８】
（第２の実施の形態）
次に、図６に基づいて本発明による画像情報表示装置の第２の実施の形態として、医療環境としての病院における患者情報の管理に適用した情報呈示装置について説明する。
【００９９】
図６は、本発明による画像情報表示装置の第２の実施の形態としての情報呈示装置の構成を示すブロック図である。
【０１００】
この第２の実施の形態の構成で、第１の実施の形態と同じであるものは、同じ参照符号を用いて説明する。
【０１０１】
本実施の形態による情報呈示装置は、以下のように構成されている。
【０１０２】
この情報呈示装置には、ビデオカメラ（画像入力手段）１と、コントローラ２と、液晶ディスプレイ（画像表示手段）３とが設けられている。
【０１０３】
前記コントローラ２には、二次元パターン認識部（パターン認識手段）２１と、情報再生部（情報再生手段）２２と、画像重畳部（画像重畳手段）２３と、関連情報記録部（関連情報記録手段）２４と、関連情報取得部（関連取得情報手段）２５とが設けられている。
【０１０４】
ビデオカメラ１で撮影された画像は、コントローラ２内の二次元パターン認識部２１とコントローラ２内の面像重畳部２３に供給される。
【０１０５】
二次元パターン認識部２１からの出力は、情報再生部２２に供給される。
【０１０６】
情報再生部２２からの出力は、画像重畳部２３と、関連情報取得部２５とに供給される。
【０１０７】
関連情報取得部２５からの出力は、関連情報記録部２４と、画像重畳部２３とに供給される。
【０１０８】
関連情報記録部２４からの出力は、関連情報取得部２５に供給される。
【０１０９】
画像重畳部２３からの出力は、液晶ディスプレイ３に供給される。
【０１１０】
キーボ一ド（重畳情報選択指示手段および指示入力手段）６で入力されたユーザ指示情報は、コントローラ２内の面像重畳部２３に供給される。
【０１１１】
二次元パターン５は、例えば、５０ｍｍ四方の領域に２０００バイトの情報が記録可能であり、エラー訂正機能を持っている。
【０１１２】
この二次元パターン５には、例えば、図２に示すように、対象物であるベッド４を使用している患者の氏名、生年月日、性別、患者番号がパターン化された情報として記録されている。
【０１１３】
次に、この発明の第２の実施の形態による情報呈示装置の作用を説明する。
【０１１４】
図７は、本実施の形態による情報呈示装置におけるコントローラ２の処理手順を示すフローチャートである。
【０１１５】
まず、ユーザは、本実施の形態による情報呈示装置におけるビデオカメラ１を用いて対象物であるベッド４および二次元パターン５を撮影する（ステップＳ２０１）。
【０１１６】
これにより、ビデオカメラ１で撮影された画像は、コントローラ２内の二次元パターン認識部２１で二値化された後、二値化画像の中から二次元パターン５の部分が抽出されることにより、二次元パターン５のパターン認識が行われる（ステップＳ２０２）。
【０１１７】
そして、パターン認識が行われた情報は、情報再生部２２に供給される。
【０１１８】
情報再生部２２では、二次元パターン認識部２１でパターン認識が行われた情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する（ステップＳ２０３）。
【０１１９】
情報再生部２２で画像信号に変換された情報は、画像重畳部２３に供給され、二次元パターン認識部２１で抽出した二次元パターン部分の左上方にビデオカメラ１で撮影された画像と重畳される。
【０１２０】
重畳された画像は、液晶ディスプレイ３に供給され、ユーザに呈示される（ステップＳ２０４）。
【０１２１】
ユーザは呈示された患者名、生年月日、性別、患者番号を確認し、関連情報の表示または非表示の指示をキーボード６に入力する（ステップＳ２０５）。
【０１２２】
ユーザが関連情報を表示するとキーボード６から入力したら、関連情報取得部２５では、情報再生部２２で生成されたデータに基づいて、関連情報記録部２４に蓄積された情報の中から、情報再生部２２で生成されたデータに関連する情報を取得する。
【０１２３】
そして、取得した情報に基づいて、テキストデータやグラフィックデータを生成することにより、画像信号に変換する（ステップＳ２０６）。
【０１２４】
関連情報取得部２５で画像信号に変換された情報は、画像重畳部２３に供給され、二次元パターン認識部２１で抽出した二次元パターン部分の右上方にビデオカメラ１で撮影された画像と重畳される。
【０１２５】
重畳された画像は、液晶ディスプレイ３に供給され、ユーザに呈示される（ステップＳ２０７）。
【０１２６】
したがって、ユーザには、図４に示すように、液晶ディスプレイ３上に、ビデオカメラ１で撮影された画像に、対象物であるベッド４を使用している患者の氏名、生年月日、性別、患者番号の情報と、関連情報記録部２４に蓄積されたベッド４を使用している患者に特有の情報、例えば、血液検査結果の一覧表等とが重畳された画像が呈示される。
【０１２７】
この場合、患者の血液検査結果の一覧表ではなく、図５に示すようなグラフを重畳して呈示するようにしても良い。
【０１２８】
すなわち、以上のようにして画像重畳手段は、上記対象物の画像に対して重畳する情報を選択する重畳情報選択指示手段（キーボード）６を有し、この重畳情報選択指示手段からの指示により解読されたパターンの情報または上記対象物に関連する情報を上記対象物の画像に重畳する。
【０１２９】
なお、ユーザが関連情報を表示しないとキーボード６から入力したら、画像重畳部２３は、関連情報の重畳しないので、関連情報は表示されない。
【０１３０】
また、二次元パターン５がパターン認識手段によって認識された入力画像中のパターンの大きさによって、例えば、入力画像中のパターンが小さなときには基本情報を呈示し、入力画像中のパターンが大きくなったら血液検査結果等を呈示するようにしても良い。
【０１３１】
したがって、以上のような本発明の第２の実施の形態によれば、画像重畳手段により、画像入力手段からの画像と、パターン認識手段と情報再生手段とにより再生された情報とを重畳した後に、指示入力手段に入力された指示によって関連情報取得手段が関連情報記録手段から取得した情報を重畳してから画像表示手段により表示するようにしたので、即座に、パターンに記録された患者名等を表示することができる。
【０１３２】
また、本発明の第２の実施の形態によれば、ユーザが関連情報を必要としたときにのみパターンに記録された情報に基づいて関連情報を取得するするようにしたので、入力された画像と入力画像に含まれる情報と入力画像に関連する情報とを重畳表示してユーザに呈示することが可能になる。
【０１３３】
なお、この実施の形態では、パターンに記録された情報と、パターンに記録された情報に基づいた関連情報との両方を同時に表示するようにしたが、順番に片方ずつ表示するようにしても良いし、どちらか片方のみを表示するようにしても良い。
【０１３４】
また、パターンに記録された情報の重畳位置は、二次元パターン部分の右上方に、パターンに記録された情報に基づいた関連情報の重畳位置は、二次元パターン部分の左上方としたが、これらの重畳位置はユーザが指定する任意の位置でも良いし、パターンとの相対的または絶対的な重畳位置をパターンにあらかじめ記録しておいても良いし、パターンの上下左右をパターンにあらかじめ記録しておき、これに基づき呈示する情報の上下左右の定位を決めるようにしても良い。
【０１３５】
すなわち、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像内の位置に基づいて、パターンの情報または上記対象物に関連する情報を入力画像に対して重畳する位置を設定するようにしている。
【０１３６】
また、上記画像重畳手段は、上記パターン認識手段によって認識されたパターンの、入力された対象物の画像に対する大きさに基づいて、パターンの情報の内容または上記対象物に関連する情報の内容を設定するようにしている。
【０１３７】
また、上記画像入力手段から入力される上記対象物に設けられた情報を符号化したパターンは、表示属性情報を含んでおり、上記パターン認識手段は、上記表示属性情報を解読し、上記情報再生手段は、上記パターン認識手段によって解読された表示属性情報に基づき画像情報を再生するようにしている。
【０１３８】
また、上記表示属性情報は、上記画像入力手段から入力された画像内のパターンと、このパターンから再生された画像情報を表示する相対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報に基づき再生する画像情報の位置を設定するようにしている。
【０１３９】
また、上記表示属性情報は、上記情報再生手段が認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでおり、上記情報再生手段は、上記表示属性情報の絶対位置情報に基づき、認識されたパターンの情報を画像情報に再生する画像情報の位置を設定するようにしている。
【０１４０】
また、この発明の第２の実施の形態の各構成は、当然、各種の変形、変更が可能である。
【０１４１】
例えば、画像入力手段は、この実施の形態では、ビデオカメラ１が該当するが、画像を入力できるものであれば何でも良い。
【０１４２】
また、パターン認識手段は、この実施の形態では、コントローラ２内の二次元パターン認識部２１が該当するが、一次元パターンの認識でもかまわないし、パターンを認識できるものであれば何でも良い。
【０１４３】
また、情報再生手段は、この実施の形態では、コントローラ２内の情報再生部２２が該当するが、情報を再生できるものであれば何でも良い。
【０１４４】
また、関連情報記録手段は、この実施の形態では、コントローラ２内の関連情報記録部２４が該当するが、情報を記録できるものであれば何でも良く、有線ネットワークや、無線ネットワーク等で接続された外部データベースでもかまわない。
【０１４５】
また、画像重畳手段は、この実施の形態では、コントローラ２内の画像重畳部２３が該当するが、ビデオミキサーでもかまわないし、画像を重畳できるものであれば何でも良い。
【０１４６】
また、画像表示手段は、この実施の形態では、液晶ディスプレイ３が該当するが、ＣＲＴやプラズマディスプレイでもかまわないし、画像を表示できるものであれば何でも良い。
【０１４７】
【発明の効果】
請求項１に記載の本発明によれば、入力された画像と入力画像に含まれる情報および入力画像に関連する情報のうちの少なくてもいずれか一方を重畳表示してユーザに呈示することが可能になる。
【０１４８】
請求項２に記載の本発明によれば、入力された画像と入力画像に含まれる情報および入力画像に関連する情報のうちの少なくてもいずれか一方をユーザの指示に応じて重畳表示し、ユーザに呈示することが可能になる。
【０１４９】
請求項３に記載の本発明によれば、パターンに記録された情報とパターンに記録された情報に基づき取得した関連情報を適切に配置してユーザに呈示することが可能となる。
【０１５０】
請求項４に記載の本発明によれば、認識された入力画像中のパターンの大きさによって再生した情報および取得した情報のうちの少なくてもいずれか一方の呈示内容を設定することが可能となる。
【０１５１】
請求項５に記載の本発明によれば、解読された表示属性情報に基づき画像情報を再生することが可能となる。
【０１５２】
請求項６に記載の本発明によれば、表示属性情報に含まれている相対位置情報に基づいて表示位置を設定した情報をユーザに呈示することが可能となる。
【０１５３】
請求項７に記載の本発明によれば、認識されたパターンの情報を画像情報に再生する絶対位置情報を含んでいる表示属性情報に基づき再生する画像情報の位置を設定することが可能となる。
【０１５４】
従って、以上説明したように、本発明によれば、ユーザに対して、ユーザの注目する対象に関連する情報を表示するもので、例えば、医療環境で使用する場合、データベースを検索しなくても患者に関する基本情報を呈示でき、さらに、データベースに蓄積された患者の情報をユーザに確実に呈示できる画像情報表示装置を提供することができる。
【０１５５】
また、医療環境以外への適用として、携帯情報端末を用いたパーソナルナビゲーションにおいて使用し街頭にパターンを設置することにより、ユーザに対し、ユーザの注目する対象に関連する情報を呈示することができる。
【図面の簡単な説明】
【図１】図１は、本発明による画像情報表示装置の第１の実施の形態の構成を示すブロック図である。
【図２】図２は、本発明で用いる二次元パターンの例として、ベッド４を使用している患者の基本情報である患者の氏名、生年月目、性別、患者番号がパターン化された情報として記録されている二次元パターン５を示す図である。。
【図３】図３は、本発明による画像情報表示装置の第１の実施の形態としての情報呈示装置におけるコントローラ２の処理手順を説明するために示すフロ一チャートである。
【図４】図４は、本発明による画像情報表示装置の第１の実施の形態としての情報呈示装置において、ユーザに呈示される画像の例として、液晶ディスプレイ３上に、ビデオカメラ１で撮影された画像に、ベッド４を使用している患者の氏名、生年月日、性別、患者番号の基本情報と、関連情報記録部２４に蓄積されているベッド４を使用している患者の血液検査結果とが、一覧表として重畳された画像を示す図である。
【図５】図５は、図４に示す患者の血液検査結果の一覧表の代わりに、グラフを重畳して呈示する例を示す図である。
【図６】図６は、本発明による画像情報表示装置の第２の実施の形態としての情報呈示装置の構成を示すブロック図である。
【図７】図７は、本発明による画像情報表示装置の第２の実施の形態としての情報呈示装置におけるコントローラ２の処理手順を説明するために示すフロ一チャートである。
【符号の説明】
１…ビデオカメラ（画像入力手段）、
２…コントローラ、
３…液晶ディスプレイ（画像表示手段）、
４…ベッド、
５…二次元パターン、
６…キーボード（重畳情報選択指示手段および指示入力手段）、
２１…二次元パターン認識部（パターン認識手段）、
２２…情報再生部（情報再生手段）、
２３…画像重畳部（画像重畳手段）、
２４…関連情報記録部（関連情報記録手段）、
２５…関連情報取得部（関連情報取得手段）。
【図１】
0004464549.tif 000002
【図２】
0004464549.tif 000003
【図３】
0004464549.tif 000004
【図４】
0004464549.tif 000005
【図５】
0004464549.tif 000006
【図６】
0004464549.tif 000007
【図７】
0004464549.tif 000008