(57)【要約】【課題】媒体に設けられた可視情報における任意部分に対する対応情報を容易に取得し、この対応情報を見易く提示させる。【解決手段】面上に設けられた、可視情報を含む媒体を撮影し、可視情報の撮影画像を生成する撮影部１０と、その面内の任意の位置の指定を受け付けて座標情報を出力する位置指定部３０と、位置指定部３０が出力した座標情報に対応する、撮影画像における位置または領域に対応付けられた対応情報を取得する対応情報取得部４０と、その対応情報を含む画像を生成する表示制御部８０と、表示制御部８０が生成した画像を光束に変換し、この光束を前記の面上および面の近傍またはいずれかに投射する投射部９０とを備える。【選択図】図３
2013222043.tif 000002
【特許請求の範囲】
【請求項１】
面上に設けられた、可視情報を含む媒体を撮影し、前記可視情報の撮影画像を生成する撮影部と、
前記面内の任意の位置の指定を受け付けて座標情報を出力する位置指定部と、
前記位置指定部が出力した前記座標情報に対応する、前記撮影画像における位置または領域に対応付けられた対応情報を取得する対応情報取得部と、
前記対応情報取得部が取得した前記対応情報を含む画像を生成する表示制御部と、
前記表示制御部が生成した前記画像を前記面上に表示する表示部と、
を備えることを特徴とする情報表示装置。
【請求項２】
前記可視情報に対応する参照画像と、前記参照画像を領域分割して得られる複数の部分参照画像それぞれについての位置を示す位置情報と、前記複数の部分参照画像それぞれについての対応情報とを対応付けた参照情報を取得する参照情報取得部をさらに備え、
前記対応情報取得部は、
前記参照情報取得部が取得する参照情報に含まれる前記参照画像と前記撮影画像とに基づいて、前記可視情報に対応する参照情報を選択する参照情報選択部と、
前記位置指定部が出力した前記座標情報に対応する位置情報を前記参照情報から検出し、前記位置情報に対応付けられた対応情報を前記参照情報から抽出する対応情報抽出部と、を備える
ことを特徴とする請求項１記載の情報表示装置。
【請求項３】
前記参照情報取得部が取得する参照情報は、部分参照画像に文字が含まれる場合に前記文字を示す文字情報をさらに対応付けて含み、
前記対応情報取得部は、
前記位置情報に文字情報が対応付けられている場合に、前記文字情報の全てまたは一部を適用した辞書検索を実行し、検索結果を前記対応情報として取得する辞書検索部
をさらに備える
ことを特徴とする請求項２記載の情報表示装置。
【請求項４】
前記対応情報取得部は、
前記位置情報が示す部分参照画像を前記参照画像から抽出し、前記部分参照画像を拡大して拡大部分参照画像を生成し、前記拡大部分参照画像を前記対応情報として取得する画像拡大部
をさらに備える
ことを特徴とする請求項２または３記載の情報表示装置。
【請求項５】
前記参照情報選択部が選択した前記参照情報に含まれる参照画像に基づいて前記媒体に対応する媒体画像を生成する媒体画像生成部をさらに備え、
前記表示制御部は、
前記媒体画像生成部が生成した前記媒体画像を含めて前記画像を生成する
ことを特徴とする請求項２から４いずれか一項記載の情報表示装置。
【請求項６】
複数の参照情報を記憶する参照情報記憶部
をさらに備え、
前記参照情報取得部は、
前記参照情報選択部からの要求に応じて、前記参照情報記憶部から前記参照情報を読み込む
ことを特徴とする請求項２から５いずれか一項記載の情報表示装置。
【請求項７】
前記参照情報取得部は、
前記参照情報選択部からの要求に応じて、外部の装置から前記参照情報を取り込む
ことを特徴とする請求項２から５いずれか一項記載の情報表示装置。
【請求項８】
前記位置指定部は、タッチパッドである
ことを特徴とする請求項１から７いずれか一項記載の情報表示装置。
【請求項９】
前記表示部は、前記表示制御部が生成した前記画像を光束に変換し、前記光束を前記面上および前記面の近傍またはいずれかに投射する投射部である
ことを特徴とする請求項１から８いずれか一項記載の情報表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報表示装置に関する。
【背景技術】
【０００２】
雑誌や広告ちらし等の紙媒体の閲覧者が、気になった記事や広告についての詳細な情報、関連情報等を得たいとき、従来では、例えば、記事や広告に含まれる単語や文を検索キーとして情報検索サイトのデータベースを検索する作業を行い、所望の情報を取得している。しかし、この作業は、紙媒体とは別の場所で、コンピュータ装置や携帯情報端末を用いて行われるものであるため、作業が煩雑であり、また、情報の提示場所が分散し、使い勝手が悪いという問題がある。
【０００３】
従来、紙媒体の記載に関する情報（対応情報）を取得して提示する技術として、拡張現実（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ）を用いる技術が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−１４６０６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上記の従来技術は、制御装置が、利用者によって指し示された紙媒体上のマーカを画像認識により識別して、そのマーカに対応付けられたコンテンツ情報を取得し、投影装置にそのコンテンツ情報を投影させるものである。しかしながら、この従来技術は、紙媒体に図示されたマーカを手掛かりに対応情報を取得するものである。よって、この従来技術は、例えば、雑誌や広告ちらしに記載または図示された、文字、文、図、写真等、多数の情報それぞれに対する対応情報を、利用者による簡易な指示操作によって取得させて見易く表示させることができない。
【０００６】
そこで、本発明は、上記の問題を解決するためになされたものであり、媒体に設けられた可視情報における任意部分に対する対応情報を容易に取得し、この対応情報を見易く提示させる情報表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
［１］上記の課題を解決するため、本発明の一態様である情報表示装置は、面上に設けられた、可視情報を含む媒体を撮影し、前記可視情報の撮影画像を生成する撮影部と、前記面内の任意の位置の指定を受け付けて座標情報を出力する位置指定部と、前記位置指定部が出力した前記座標情報に対応する、前記撮影画像における位置または領域に対応付けられた対応情報を取得する対応情報取得部と、前記対応情報取得部が取得した前記対応情報を含む画像を生成する表示制御部と、前記表示制御部が生成した前記画像を前記面上に表示する表示部と、を備えることを特徴とする。
［２］上記［１］記載の情報表示装置において、前記可視情報に対応する参照画像と、前記参照画像を領域分割して得られる複数の部分参照画像それぞれについての位置を示す位置情報と、前記複数の部分参照画像それぞれについての対応情報とを対応付けた参照情報を取得する参照情報取得部をさらに備え、前記対応情報取得部は、前記参照情報取得部が取得する参照情報に含まれる前記参照画像と前記撮影画像とに基づいて、前記可視情報に対応する参照情報を選択する参照情報選択部と、前記位置指定部が出力した前記座標情報に対応する位置情報を前記参照情報から検出し、前記位置情報に対応付けられた対応情報を前記参照情報から抽出する対応情報抽出部と、を備えることを特徴とする。
［３］上記［２］記載の情報表示装置において、前記参照情報取得部が取得する参照情報は、部分参照画像に文字が含まれる場合に前記文字を示す文字情報をさらに対応付けて含み、前記対応情報取得部は、前記位置情報に文字情報が対応付けられている場合に、前記文字情報の全てまたは一部を適用した辞書検索を実行し、検索結果を前記対応情報として取得する辞書検索部をさらに備えることを特徴とする。
［４］上記［２］または［３］記載の情報表示装置において、前記対応情報取得部は、前記位置情報が示す部分参照画像を前記参照画像から抽出し、前記部分参照画像を拡大して拡大部分参照画像を生成し、前記拡大部分参照画像を前記対応情報として取得する画像拡大部をさらに備えることを特徴とする。
［５］上記［２］から［４］いずれか一項記載の情報表示装置において、前記参照情報選択部が選択した前記参照情報に含まれる参照画像に基づいて前記媒体に対応する媒体画像を生成する媒体画像生成部をさらに備え、前記表示制御部は、前記媒体画像生成部が生成した前記媒体画像を含めて前記画像を生成することを特徴とする。
［６］上記［２］から［５］いずれか一項記載の情報表示装置において、複数の参照情報を記憶する参照情報記憶部をさらに備え、前記参照情報取得部は、前記参照情報選択部からの要求に応じて、前記参照情報記憶部から前記参照情報を読み込むことを特徴とする。
［７］上記［２］から［５］いずれか一項記載の情報表示装置において、前記参照情報取得部は、前記参照情報選択部からの要求に応じて、外部の装置から前記参照情報を取り込むことを特徴とする。
［８］上記［１］から［７］いずれか一項記載の情報表示装置において、前記位置指定部は、タッチパッドであることを特徴とする。
［９］上記［１］から［８］いずれか一項記載の情報表示装置において、前記表示部は、前記表示制御部が生成した前記画像を光束に変換し、前記光束を前記面上および前記面の近傍またはいずれかに投射する投射部であることを特徴とする。
【発明の効果】
【０００８】
本発明によれば、媒体に設けられた可視情報における任意部分に対する対応情報を容易に取得し、この対応情報を見易く提示させることができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の一実施形態である情報表示装置の概略の外観を示す斜視図である。
【図２】同実施形態である情報表示装置を適用した情報表示システムの全体構成を示す図である。
【図３】同実施形態である情報表示装置の機能構成を示すブロック図である。
【図４】同実施形態において、参照情報記憶部に記憶、またはサーバ装置に格納される、複数の参照情報のデータ構成の第１の例を示す図である。
【図５】同実施形態において、参照情報記憶部に記憶、またはサーバ装置に格納される、複数の参照情報のデータ構成の第２の例を示す図である。
【図６】同実施形態である情報表示装置が使用されている状態において、投射部から本体を見た図である。
【図７】同実施形態において、情報表示装置の、参照情報検索処理の処理手順を示すフローチャートである。
【図８】同実施形態において、情報表示装置の、対応情報提示処理の処理手順を示すフローチャートである。
【図９】同実施形態の第１変形例である情報表示装置の、参照情報検索処理の処理手順を示すフローチャートである。
【図１０】同実施形態の第２変形例である情報表示装置の概略の外観を示す斜視図である。
【図１１】同実施形態の第３変形例である情報表示装置の概略の外観を示す斜視図である。
【発明を実施するための形態】
【００１０】
以下、本発明を実施するための形態について、図面を参照して詳細に説明する。
本発明の一実施形態である情報表示装置は、二次元のセンサ領域（以下、センサ領域と言う。）を有する操作インタフェースの面上に置かれた媒体の視認可能な情報（可視情報）の任意部分が指定されることにより、その指定部分に対応付けられた情報（対応情報）を取得し、この情報を表示する装置である。媒体は、文字、文字列、図、写真等の視認可能な情報が表されたものであり、例えば紙媒体である。具体的に、媒体は、パンフレット、広告ちらし、雑誌、書籍等の紙類である。本実施形態では、媒体として広告ちらしおよび雑誌の表紙を例とする。
【００１１】
図１は、本実施形態である情報表示装置の概略の外観を示す斜視図である。同図に示すように、情報表示装置１は、撮影部１０と、投射部（表示部）９０と、本体１００と、支持部１２０とを備える。
【００１２】
本体１００は、例えば、二枚の平板を組み合わせて構成される。具体的に、本体１００は、例えば、それぞれ矩形平面を有する第１の平板および第２の平板を、回動支持部１０１を介して連結し構成される。これら第１の平板および第２の平板は、回動支持部１０１の回転軸を中心とした両平板のなす角度を、少なくとも０度から１８０度までの間で変更可能である。
【００１３】
なお、本体１００は、例えば、第１の平板の一端に設けられた噛合部を、第２の平板の一端に設けられた被噛合部に噛合させて、第１の平板および第２の平板を連結させる構造を有してもよい。または、本体１００は、単一の平板により構成されてもよい。
【００１４】
本体１００の第１の平板には、位置指定部３０と、クリップ１０２とが設けられる。
なお、本体１００が単一の平板により構成される場合、例えば、その平板の面内の略全域（全域を含む）がセンサ領域となるように、位置指定部３０が設けられる。
【００１５】
位置指定部３０は、例えば矩形の面を有し、この面内のセンサ領域における任意の位置の指定を受け付けて二次元座標を検出し、この二次元座標を示す座標情報を出力する操作入力インタフェースである。位置指定部３０は、例えば、タッチパッドにより実現される。位置指定部３０がタッチパッドである場合、このタッチパッドは、情報表示装置１の利用者の指先等で圧力をかけられたタッチパッド上の任意の位置に対応する二次元座標を検出し、この二次元座標を示す座標情報を出力する。本実施形態では、位置指定部３０の面上に媒体Ｐが置かれた状態において、媒体Ｐ越しに位置が指定される。つまり、利用者は、媒体Ｐに設けられた可視情報を手掛かりに位置を指定する。例えば、媒体Ｐが広告ちらしである場合、利用者は、広告ちらしに掲載された広告文、商品名、価格、図、写真等の情報のうち、対応情報を得たいと欲する情報を指等で押す。これにより、位置指定部３０は、その押された場所の二次元座標を示す座標情報を出力する。本実施形態では、タッチパッドとして、例えば、感圧式タッチパッド、静電容量式タッチパッドが適用可能である。
クリップ１０２は、媒体Ｐを第１の平板に固定するための固定具である。
【００１６】
本体１００の第２の平板には、スクリーン１１０が設けられる。
スクリーン１１０は、投射部９０が投射する投射光を受光して画像を表示する。
【００１７】
本体１００には、撮影部１０および投射部９０を固定するための支持部１２０が設けられる。本体１００に設けられた支持部１２０は、位置指定部３０におけるセンサ領域を含む面を撮影可能な位置に撮影部１０を固定する。また、本体１００に設けられた支持部１２０は、スクリーン１１０と位置指定部３０の面上に置かれた媒体Ｐとの両方に投射光を投射可能な位置に投射部９０を固定する。例えば、支持部１２０は、撮影部１０の撮影光軸が位置指定部３０の矩形の面の略中心（中心を含む）をその面に垂直に貫く位置に撮影部１０を固定する。また、支持部１２０は、投射部９０の投射光軸が第１の平板および第２の平板による面の略中心（中心を含む）をその面に垂直に貫く位置に投射部９０を固定する。支持部１２０は、本体１００に着脱可能に設けられてもよいし、伸縮可能、または折り畳み可能に設けられてもよい。
【００１８】
撮影部１０は、位置指定部３０の面上に置かれた媒体Ｐを撮影し、媒体Ｐの可視情報の撮影画像を生成する。つまり、撮影部１０は、媒体Ｐの可視情報を撮影して画像化する。撮影部１０は、例えば、カメラ装置により実現される。
投射部９０は、例えば、図示しないフレームメモリに記憶された画像等を光束に変換し、この光束をスクリーン１１０および位置指定部３０の面上に置かれた媒体Ｐ、またはいずれかに投射する。投射部９０は、例えば、レーザプロジェクタ装置、液晶プロジェクタ装置等の投影装置（プロジェクタ）により実現される。
【００１９】
次に、本実施形態である情報表示装置１を適用した情報表示システムの構成について説明する。
図２は、情報表示装置１を適用した情報表示システムの全体構成を示す図である。
同図に示すように、本実施形態における情報表示システムは、情報表示装置１と、サーバ装置３とが、ネットワーク２を介して接続された構成を有する。
【００２０】
ネットワーク２は、通信回線であり、例えば、インターネット・プロトコル（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ；ＩＰ）により通信可能なコンピュータ・ネットワークである。ネットワーク２は、例えば、ローカル・エリア・ネットワーク（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ；ＬＡＮ）、家庭内ＬＡＮ（ホーム・ネットワーク）を含み、また、インターネットに接続されている。
【００２１】
サーバ装置３は、ネットワーク２に接続される外部の装置の一例である。サーバ装置３は、例えば、様々な可視情報それぞれに対応した参照情報を格納する参照情報提供装置である。また、サーバ装置３は、対応情報に関連する様々な関連情報を格納する関連情報提供装置である。また、サーバ装置３は、辞書データベース、検索エンジン等を有する検索情報提供装置である。
【００２２】
図３は、情報表示装置１の機能構成を示すブロック図である。同図に示すように、情報表示装置１は、撮影部１０と、画像処理部２０と、位置指定部３０と、対応情報取得部４０と、参照情報記憶部５０と、情報取得部６０と、表示制御部８０と、投射部９０とを備える。
撮影部１０、位置指定部３０、および投射部９０については前述したとおりであるので、ここでの説明を省略する。
【００２３】
画像処理部２０は、撮影部１０が生成した撮影画像を取り込み、この撮影画像の画像フレームにおける媒体の画像の傾きおよび歪の有無を判定し、傾きおよび歪またはいずれかを検出した場合は、その傾きおよび歪またはいずれかを画像処理により補正する。ただし、撮影部１０の画像フレームと位置指定部３０のセンサ領域とは、あらかじめ対応付けられている。具体的に、例えば、画像処理部２０は、画像認識処理を実行することにより、撮影画像に含まれる文字列を認識してこの文字列の方向（文字の並びの方向）を検出する。そして、画像処理部２０は、その文字列の方向と画像フレームの画素列の方向とがなす角度（傾き）が所定の角度を超える場合に、その傾きを小さくする方向に媒体の画像を回転させる。
画像処理部２０は、撮影画像（補正した場合は、補正後の撮影画像）を、対応情報取得部４０に供給する。
【００２４】
参照情報記憶部５０は、一つまたは複数の参照情報を記憶する。参照情報は、例えば、媒体の可視情報に対応する参照画像と、この参照画像を領域分割して得られる複数の部分参照画像それぞれについての基準位置を示す位置情報と、それら複数の部分参照画像それぞれについての対応情報とを対応付けたデータテーブルである。
または、参照情報は、例えば、部分参照画像に文字が含まれる場合、その文字を示す文字情報をさらに対応付けたデータテーブルである。この文字は、文字、数字、記号を含む。参照情報については、その詳細を後述する。参照情報記憶部５０は、例えば、半導体記憶装置により実現される。
【００２５】
情報取得部６０は、参照情報記憶部５０および外部の装置から情報を取り込むインタフェースである。外部の装置は、例えば、ネットワーク２を介して接続されるサーバ装置３である。情報取得部６０は、外部の装置から情報を取り込み、この情報を表示制御部８０または対応情報取得部４０に供給する。情報取得部６０は、その機能構成として、参照情報取得部６１を備える。
【００２６】
参照情報取得部６１は、対応情報取得部４０からの要求に応じて、参照情報記憶部５０から参照情報を読み込み、この参照情報を対応情報取得部４０に供給する。また、参照情報取得部６１は、対応情報取得部４０からの要求に応じて、外部の装置（例えばサーバ装置３）から参照情報を取り込み、この参照情報を対応情報取得部４０に供給する。
【００２７】
対応情報取得部４０は、位置指定部３０が出力した座標情報に対応する、画像処理部２０が供給した撮影画像における位置または領域に対応付けられた対応情報を参照情報取得部６１から取得し、その対応情報を表示制御部８０に供給する。
対応情報取得部４０は、その機能構成として、参照情報選択部４１と、対応情報抽出部４２と、辞書検索部４３と、画像拡大部４４とを備える。
【００２８】
参照情報選択部４１は、画像処理部２０が供給する撮影画像を取り込む。そして、参照情報選択部４１は、例えば、参照情報取得部６１に対する取得要求に応じて参照情報取得部６１が取得する参照情報に含まれる参照画像と撮影画像とのテンプレートマッチング処理を実行し、可視情報に対応する参照情報を選択する。
参照情報選択部４１は、選択した参照情報を対応情報抽出部４２に供給する。
【００２９】
対応情報抽出部４２は、参照情報選択部４１が供給する参照情報を取り込む。また、対応情報抽出部４２は、位置指定部３０が出力する座標情報を取り込む。そして、対応情報抽出部４２は、座標情報に対応する位置情報を参照情報から検出する。
【００３０】
対応情報抽出部４２は、検出した位置情報に対応付けられた対応情報を参照情報から抽出し、その対応情報を表示制御部８０に供給する。
また、対応情報抽出部４２は、位置情報に対応付けられた文字情報を参照情報から抽出し、その文字情報を辞書検索部４３に供給する。そして、対応情報抽出部４２は、その文字情報を取り込んだ辞書検索部４３が供給する検索結果を取り込み、この検索結果を対応情報として表示制御部８０に供給する。
また、対応情報抽出部４２は、位置情報が示す位置により指定される部分参照画像を参照画像から抽出し、その部分参照画像を画像拡大部４４に供給する。そして、対応情報抽出部４２は、その部分参照画像を取り込んだ画像拡大部４４が供給する拡大部分参照画像を取り込み、この拡大部分参照画像を対応情報として表示制御部８０に供給する。
【００３１】
辞書検索部４３は、対応情報抽出部４２が供給する文字情報を取り込む。そして、辞書検索部４３は、その文字情報の全てまたは一部を適用した辞書検索行って検索結果を取得し、この検索結果を対応情報抽出部４２に供給する。例えば、辞書検索部４３は、辞書データベースが構築された辞書記憶部を内蔵し、文字情報の全てまたは一部を検索キーとしてその辞書データベースを検索して検索結果を取得する。または、例えば、辞書検索部４３は、文字情報の全てまたは一部を、情報取得部６０を介して外部の装置（例えば、サーバ装置３）に供給し、外部の装置による検索結果を、情報取得部６０を介して取得する。
【００３２】
画像拡大部４４は、対応情報抽出部４２が供給する部分参照画像を取り込む。そして、画像拡大部４４は、部分参照画像を画像処理により所定の倍率で拡大して拡大部分参照画像を生成し、この拡大部分参照画像を対応情報抽出部４２に供給する。所定の倍率は、固定倍率であってもよいし、例えば、位置指定部３０の操作にしたがって位置指定部３０が対応情報抽出部４２を経由して画像拡大部４４に供給する座標情報の分布に応じて決定される倍率であってもよい。座標情報の分布とは、例えば、利用者による位置指定部３０のマルチタッチに基づいた離散的な座標情報の座標の分布である。
【００３３】
表示制御部８０は、少なくとも１画像フレーム分のフレームメモリを備える。そして、表示制御部８０は、対応情報抽出部４２が供給する対応情報を取り込み、この対応情報をフレームメモリに記憶させる。また、表示制御部８０は、位置指定部３０が出力する座標情報を取り込み、この座標情報に対応するフレームメモリにおける画素位置を求める。そして、表示制御部８０は、フレームメモリにおいて、その画素位置を含む近傍の画素をあらかじめ設定された色を示す画素値に変化させる。ただし、この色は所望の色に変更可能である。これにより、位置指定部３０において指定された位置に対応する表示位置が、あらかじめ設定された色で描画される。また、表示制御部８０は、情報取得部６０が供給する情報を取り込み、この情報をフレームメモリに書き込む。
【００３４】
次に、参照情報について説明する。
図４は、参照情報記憶部５０に記憶、またはサーバ装置３に格納される、複数の参照情報のデータ構成の第１の例を示す図である。同図に示すように、参照情報は、参照画像と、部分参照画像関連情報とを対応付けたデータテーブルである。参照画像は、媒体に設けられた視認可能な情報、つまり可視情報全体の画像である。参照画像は、例えば、ＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）データ等の符号化データである。
【００３５】
部分参照画像関連情報は、参照画像を領域分割して得られる複数の部分参照画像それぞれについての基準位置を示す位置情報と、それら複数の部分参照画像それぞれについての対応情報とを対応付けた、部分参照画像についての関連情報である。部分参照画像は、例えば矩形画像である。位置情報は、部分参照画像の参照画像における基準位置を示す情報である。部分参照画像が矩形画像である場合、位置情報は、部分参照画像の参照画像における一対の対角の座標値である。対応情報は、部分参照画像に含まれる情報についての関連情報、詳細情報等である。
【００３６】
図４は、二種類の広告ちらしに関する参照情報を示したものである。例えば、同図上側の参照情報は、参照画像（ただし、同図では“Ｐａｐｅｒ１０１”と記載する。）を含んでいる。また、同図上側の参照情報は、矩形の部分参照画像の位置情報として、参照画像における部分参照画像の左上の座標値と右下の座標値である。また、同図上側の参照情報は、二種類の対応情報を含んでいる。
【００３７】
図５は、参照情報記憶部５０に記憶、またはサーバ装置３に格納される、複数の参照情報のデータ構成の第２の例を示す図である。同図に示すように、部分参照画像関連情報は、図４に示した部分参照画像関連情報に対し、複数の部分参照画像それぞれについての文字情報がさらに対応付けられている。文字情報は、部分参照画像に文字が含まれる場合、その文字を示す、文字、数字、記号を含む情報である。
【００３８】
図５は、雑誌の表紙に関する参照情報を示したものである。例えば、同図の参照情報は、参照画像（ただし、同図では“Ｐａｐｅｒ３２１”と記載する。）を含んでいる。また、参照画像“Ｐａｐｅｒ３２１”において、位置情報が“（  １２，  ２５），（  ５２，  ６６）”である部分参照画像には、文字情報“月刊誌”が含まれている。また、位置情報が“（  ６５，１８２），（５１４，５２８）”である部分参照画像には、文字情報はなく、対応情報のみが対応付けられている。
【００３９】
次に、情報表示装置１の使用例について説明する。
図６は、情報表示装置１が使用されている状態において、投射部９０から本体１００を見た図である。ただし、同図における本体１００は、単一の平板により構成され、その平板の面内の略全域がセンサ領域となるように、位置指定部３０が設けられた例である。同図において、位置指定部３０の面上には、媒体Ｐが置かれている。
【００４０】
情報表示装置１は、まず、参照情報検索処理を実行する。具体的に、情報表示装置１は、撮影画像を生成し、この撮影画像に対応する参照情報を、参照情報記憶部５０またはサーバ装置３から取得する。
そして、撮影画像に対応する参照情報を取得した情報表示装置１は、対応情報提示処理を実行する。具体的に、利用者が注目する広告（注目広告）を囲むように、位置指定部３０が利用者の指先でなぞられると、図６に示すように、情報表示装置１は、位置指定部３０における指先の軌跡Ｂを媒体Ｐ上に表示させる。そして、情報表示装置１は、軌跡Ｂが示す領域内に対応する部分参照領域を検出し、この部分参照領域に対応付けられた対応情報（例えば、二種類の対応情報）を取得する。そして、情報表示装置１は、取得した対応情報を、対応情報Ｊ１および対応情報Ｊ２としてスクリーン１１０に表示させる。同図において、対応情報Ｊ１は、軌跡Ｂで囲まれた領域に含まれる広告の商品に関する詳細情報である。また、対応情報Ｊ２は、その広告の商品の類似商品に関する情報である。
【００４１】
なお、情報表示装置１は、対応情報Ｊ１および対応情報Ｊ２と軌跡Ｂとの対応付けを明確にするため、例えば、引き出し線を介したり、吹き出しを用いたりして、対応情報Ｊ１および対応情報Ｊ２と軌跡Ｂとを表示させてもよい。
【００４２】
さらに、情報表示装置１は、その広告の商品に関する参照情報を除く他の情報（外部情報Ｊ３）をサーバ装置３から取得し、外部情報Ｊ３をスクリーン１１０に表示させる。図６において、外部情報Ｊ３は、広告の商品についての電子商取引サイトにおける価格情報（例えば、最安値の情報）、その価格と広告ちらしに掲載された価格との差額を示す情報、およびその電子商取引サイトの名称を含んでいる。また、同図では、情報表示装置１は、外部情報Ｊ３の表示に加えて、その電子商取引サイトの詳細情報やその電子商取引サイトに接続するためのボタンＵ１と、その電子商取引サイトに商品注文を行うためのボタンＵ２とをスクリーン１１０に表示させている。ボタンＵ１およびボタンＵ２は、グラフィカル・ユーザ・インタフェース（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ；ＧＵＩ）としてスクリーン１１０に表示されるとともに、位置指定部３０に対応付けられている。
【００４３】
次に、本実施形態である情報表示装置１の動作について説明する。
図７は、情報表示装置１の、参照情報検索処理の処理手順を示すフローチャートである。
ステップＳ１において、情報表示装置１における位置指定部３０のセンサ領域に対する、投射部９０が投射する投射光による投射領域の位置および大きさを調整する。例えば、位置指定部３０の矩形の面に投射９０が投射する投射光による画像フレームが含まれ、且つ辺の傾きが略０度（０度を含む）となるように、投射部９０の投射出力系が調整される。ただし、このステップＳ１における処理は、情報表示装置１の利用者によるキャリブレーション作業の工程である。
【００４４】
次に、ステップＳ２において、撮影部１０は、位置指定部３０の矩形の面を撮影し、撮影画像を画像処理部２０に供給する。次に、画像処理部２０は、撮影画像の画像フレームと位置指定部３０の矩形の面、すなわちセンサ領域とを対応付ける。つまり、画像処理部２０は、撮影画像の画素位置と位置指定部３０の二次元座標との対応付けを行う。
【００４５】
図７では図示しないが、ステップＳ３からステップＳ６までの処理の期間において、利用者の手作業により、媒体が位置指定部３０の面上に置かれる。
【００４６】
ステップＳ３において、撮影部１０は、媒体を撮影して撮影画像を生成し、この撮影画像を画像処理部２０に供給する。
【００４７】
次に、ステップＳ４において、画像処理部２０は、撮影部１０が供給する撮影画像を取り込み、この撮影画像の画像フレームにおける媒体の画像の傾きおよび歪の有無を判定し、傾きおよび歪またはいずれかを検出した場合は、その傾きおよび歪またはいずれかを画像処理により補正する。次に、画像処理部２０は、撮影画像（補正した場合は、補正後の撮影画像）を、対応情報取得部４０に供給する。
【００４８】
次に、ステップＳ５において、対応情報取得部４０の参照情報選択部４１は、画像処理部２０が供給する撮影画像を取り込み、この撮影画像に対応する参照情報を、参照情報記憶部５０またはサーバ装置３から選択して取得する。
具体的に、参照情報選択部４１は、画像処理部２０が供給する撮影画像を取り込むと、情報取得部６０に対して、参照情報記憶部５０からの参照情報の取得要求を供給する。次に、情報取得部６０の参照情報取得部６１は、参照情報選択部４１が供給した取得要求を取り込み、この取得要求に応じて参照情報記憶部５０から一つの参照情報を読み込む。次に、参照情報取得部６１は、読み込んだ参照情報を参照情報選択部４１に供給する。
【００４９】
次に、参照情報選択部４１は、参照情報取得部６１が供給する参照情報を取り込み、例えば、撮影画像をテンプレート画像とした、参照情報に含まれる参照画像情報に対するテンプレートマッチング処理を実行して、撮影画像に対する参照画像情報の類似度を計算する。参照情報選択部４１は、参照情報記憶部５０に記憶された全ての参照情報について参照画像情報の類似度を計算し、全ての計算結果のうち類似度の最大値を取得する。次に、参照情報選択部４１は、取得した類似度の最大値が、あらかじめ設定された閾値を超える値である場合、その類似度に対応する参照画像情報を含む参照情報を選択する。
【００５０】
一方、参照情報選択部４１は、取得した類似度の最大値が、あらかじめ設定された閾値以下の値である場合、参照情報選択部４１は、情報取得部６０に対して、サーバ装置３からの参照情報の取得要求を供給する。次に、情報取得部６０の参照情報取得部６１は、参照情報選択部４１が供給した取得要求を取り込み、この取得要求に応じてサーバ装置３から参照情報を取り込む。次に、参照情報取得部６１は、取り込んだ参照情報を参照情報選択部４１に供給する。
【００５１】
次に、参照情報選択部４１は、参照情報取得部６１が供給する参照情報を取り込み、例えば、撮影画像をテンプレート画像とした、参照情報に含まれる参照画像情報に対するテンプレートマッチング処理を実行して、撮影画像に対する参照画像情報の類似度を計算する。参照情報選択部４１は、サーバ装置３から取得される全ての参照情報について参照画像情報の類似度を計算し、全ての計算結果のうち類似度の最大値を取得する。次に、参照情報選択部４１は、取得した類似度の最大値が、あらかじめ設定された閾値を超える値である場合、その類似度に対応する参照画像情報を含む参照情報を選択する。
【００５２】
次に、ステップＳ６において、参照情報選択部４１は、参照情報を選択した場合はステップＳ７の処理に移し、参照情報を選択しない場合はステップＳ３の処理に戻す。
【００５３】
ステップＳ７において、参照情報選択部４１は、選択した参照情報に含まれる参照画像に対する撮影画像の相対距離を計算する。次に、参照情報選択部４１は、選択した参照情報と相対距離を示す情報とを対応情報抽出部４２に供給する。そして、対応情報抽出部４２は、参照情報選択部４１が供給する参照情報と相対距離を示す情報とを取り込む。
【００５４】
図８は、情報表示装置１の、対応情報提示処理の処理手順を示すフローチャートである。
ステップＳ２１において、位置指定部３０は、媒体越しに、センサ領域における任意の位置の指定を受け付けて二次元座標を検出し、この二次元座標を示す座標情報を対応情報抽出部４２および表示制御部８０に供給する。具体的に、位置指定部３０は、例えば、位置指定の開始位置と終了位置とをそれぞれ検出する。開始位置と終了位置とが同一である場合、位置指定部３０は、当該位置に対応する座標情報を対応情報抽出部４２に供給する。開始位置と終了位置とが異なる場合、位置指定部３０は、開始位置から終了位置までの指定位置の軌跡（例えば、指先の軌跡）に対応する離散的な座標情報を対応情報抽出部４２および表示制御部８０に供給する。
【００５５】
対応情報抽出部４２は、位置指定部３０が供給する座標情報を取り込む。また、表示制御部８０は、位置指定部３０が供給する座標情報を取り込み、この座標情報に対応するフレームメモリにおける画素位置を求める。次に、表示制御部８０は、フレームメモリにおいて、その画素位置を含む近傍の画素をあらかじめ設定された色を示す画素値に変化させる。次に、投射部９０は、フレームメモリに記憶された画像を光束に変換し、この光束を位置指定部３０の面上に設けられた媒体に投射する。
次に、対応情報抽出部４２は、ステップＳ２２の処理に移す。
【００５６】
ステップＳ２２において、対応情報抽出部４２は、位置または領域を示す座標情報に対応する位置情報を、既に取り込んでいる参照情報から検出する。例えば、対応情報抽出部４２は、位置を示す座標情報における座標値が、参照画像における一対の対角の座標値を示す位置情報および相対距離に基づき得られる矩形状の部分参照画像の領域に含まれる場合の位置情報を、参照情報から検出する。または、例えば、対応情報抽出部４２は、領域を示す座標情報における複数の座標値、すなわち指定領域と、参照画像における一対の対角の座標値を示す位置情報および相対距離に基づき得られる矩形状の部分参照画像の領域との重複の度合が所定の割合を超える場合の位置情報を、参照情報から検出する。
【００５７】
次に、ステップＳ２３において、対応情報抽出部４２は、検出した位置情報に対応付けられた対応情報を参照情報から抽出し、その対応情報を表示制御部８０に供給する。
また、対応情報抽出部４２は、位置情報に対応付けられた文字情報を参照情報から抽出し、その文字情報を辞書検索部４３に供給する。次に、辞書検索部４３は、対応情報抽出部４２が供給する文字情報を取り込む。次に、辞書検索部４３は、文字情報の全てまたは一部を適用した辞書検索を実行して検索結果を取得し、この検索結果を対応情報抽出部４２に供給する。次に、対応情報抽出部４２は、辞書検索部４３が供給する検索結果を取り込み、この検索結果を対応情報として表示制御部８０に供給する。
【００５８】
また、対応情報抽出部４２は、位置情報が示す位置により指定される部分参照画像を参照画像から抽出し、その部分参照画像を画像拡大部４４に供給する。次に、画像拡大部４４は、対応情報抽出部４２が供給する部分参照画像を取り込む。次に、画像拡大部４４は、部分参照画像を所定の倍率で拡大して拡大部分参照画像を生成し、この拡大部分参照画像を対応情報抽出部４２に供給する。次に、対応情報抽出部４２は、その部分参照画像を取り込んだ画像拡大部４４が供給する拡大部分参照画像を取り込み、この拡大部分参照画像を対応情報として表示制御部８０に供給する。
【００５９】
次に、ステップＳ２４において、表示制御部８０は、対応情報抽出部４２が供給する対応情報を取り込み、この対応情報をフレームメモリに書き込む。そして、投射部９０は、そのフレームメモリに記憶された対応情報を光束に変換し、この光束をスクリーン１１０および位置指定部３０の面上に設けられた媒体、またはいずれかに投射する。
【００６０】
次に、ステップＳ２５において、対応情報取得部４０は、例えば、対応情報抽出部４２が抽出した対応情報に関係する関連情報をサーバ装置３に要求し、この要求を受けたサーバ装置３が供給する関連情報を取り込む。この関連情報は、例えば、図６に示した外部情報Ｊ３である。次に、対応情報取得部４０は、取り込んだ関連情報を表示制御部８０に供給する。
次に、ステップＳ２６において、表示制御部８０は、対応情報取得部４０が供給する関連情報を取り込み、この関連情報をフレームメモリに書き込む。そして、投射部９０は、そのフレームメモリに記憶された関連情報を光束に変換し、この光束をスクリーン１１０および位置指定部３０の面上に設けられた媒体、またはいずれかに投射する。
【００６１】
［本実施形態の第１の変形例］
上述した本発明の一実施形態は、媒体越しに、利用者の指操作により位置指定部３０のセンサ領域に指示を与える例であった。同実施形態の第１変形例は、媒体を認識させた後にこの媒体を取り除いて位置指定部３０を操作させる例である。媒体を広告ちらしとした場合、この媒体は、広告ちらしそのものであってもよいし、広告ちらしから任意に切り取られた広告ちらし部分であってもよい。
【００６２】
本変形例における情報表示装置の機能構成は、図３に示した機能構成と同等であるため、同図を用いて、機能が異なる構成について説明する。
本変形例である情報表示装置１において、対応情報取得部４０の参照情報選択部４１は、選択した参照情報に含まれる参照画像に基づいて、媒体に対応する媒体画像を生成する媒体画像生成部を備える。この媒体画像生成部は、選択した参照情報に含まれる参照画像において、撮影画像との類似度が最も大きい部分画像を参照画像から抽出し、その部分画像またはこの部分画像を含む矩形の画像を、媒体画像として表示制御部８０に供給する。
なお、媒体画像生成部は、撮影画像を媒体画像として表示制御部８０に供給してもよい。
【００６３】
また、表示制御部８０は、参照情報選択部４１が供給する媒体画像を取り込み、この媒体画像をフレームメモリに記憶させる。
【００６４】
次に、本変形例である情報表示装置１の動作について説明する。本変形例では、参照情報検索処理が、前述した実施形態と異なる。
図９は、本変形例である情報表示装置１の、参照情報検索処理の処理手順を示すフローチャートである。同図において、ステップＳ１からステップＳ７までの処理は、前述した実施形態における図７のステップＳ１からステップＳ７までの処理と同一である。
【００６５】
ステップＳ８において、利用者によって媒体が取り除かれる。このステップＳ８における処理は、情報表示装置１の利用者による媒体の除去作業の工程である。
【００６６】
次に、ステップＳ９において、参照情報選択部４１の媒体画像生成部は、選択した参照情報に含まれる参照画像における撮影画像との類似度が最も大きい部分画像を参照画像から抽出し、その部分画像またはこの部分画像を含む矩形の画像を、媒体画像として表示制御部８０に供給する。
次に、表示制御部８０は、参照情報選択部４１が供給する媒体画像を取り込み、この媒体画像をフレームメモリに記憶させる。そして、投射部９０は、フレームメモリに記憶された画像を光束に変換し、この光束をスクリーン１１０および位置指定部３０の面上、またはいずれかに投射する。
【００６７】
［本実施形態の第２の変形例］
前述した本発明の一実施形態は、位置指定部３０の面上に置かれた媒体の上方から、投射部９０が投射光を投射する例であった。同実施形態の第２変形例は、位置指定部３０の面上に置かれた媒体の下方から、投射部９０が投射光を投射する例である。ただし、第２変形例は、上述した第１変形例と同様に、媒体を認識させた後にこの媒体を取り除いて位置指定部３０を操作させる例である。
【００６８】
図１０は、第２変形例である情報表示装置の概略の外観を示す斜視図である。同図に示すように、情報表示装置１ｂは、撮影部１０と、位置指定部３０と、投射部９０と、透過スクリーン１１０ｂと、フレーム１３０と、アーム１４０とを備える。撮影部１０と位置指定部３０と投射部９０とは、前述した一実施形態における構成と同一であるため、ここでの説明を省略する。
【００６９】
透過スクリーン１１０ｂは、投射部９０が投射した投射光を一方の面（背面）で受光し、この受光した光を他方の面（表面）に透過させることにより、その他方の面に画像を現出させるスクリーンである。
【００７０】
フレーム１３０は、透過スクリーン１１０ｂを固定支持するとともに、透過スクリーン１１０ｂの一方の面側に投射部９０を固定する。具体的に、フレーム１３０は、例えば、透過スクリーン１１０ｂの面が水平となるように、透過スクリーン１１０ｂを支持する。また、フレーム１３０は、投射部９０が投射する投射光の光軸が透過スクリーン１１０ｂの略中心（中心を含む）を面に対して垂直方向に貫くよう、透過スクリーン１１０ｂの一方の面側に投射部９０を支持する。
【００７１】
撮影部１０は、透過スクリーン１１０ｂの他方の面全体を視野に含めるよう、アーム１４０を介して他方の面の上方に設けられる。
アーム１４０は、撮影部１０を情報表示装置１ｂのフレーム１３０から離間した場所に設けるための支持部である。アーム１４０は、その一端に撮影部１０が設けられ、他端が着脱可能に情報表示装置１ｂのフレーム１３０に取り付けられる。または、アーム１４０は、折り畳み可能、または屈伸可能に情報表示装置１ｂのフレーム１３０に取り付けられる。
【００７２】
位置指定部３０は、透過スクリーン１１０ｂの他方の面上に設けられる。ただし、位置指定部３０は、たとえば、光透過性を有する、感圧式タッチパッド、静電容量式タッチパッドにより実現される。
【００７３】
情報表示装置１ｂにおいて、対応情報取得部４０の参照情報選択部４１は、第１変形例と同様に、選択した参照情報に含まれる参照画像に基づいて、媒体に対応する媒体画像を生成する媒体画像生成部を備える。
また、情報表示装置１ｂにおいて、表示制御部８０は、第１変形例と同様に、参照情報選択部４１が供給する媒体画像を取り込み、この媒体画像をフレームメモリに記憶させる。
なお、情報表示装置１ｂの画像処理部２０は、撮影部１０が生成した撮影画像における収差を補正する画像処理を実行してもよい。
【００７４】
本変形例における参照情報検索処理は、第１変形例と同様である。
【００７５】
［本実施形態の第３の変形例］
前述した本発明の一実施形態は、表示部として投射部９０を適用した例であった。本実施形態の第３変形例は、表示部として平面ディスプレイ装置を適用する例である。ただし、第３変形例は、上述した第１変形例および第２変形例と同様に、媒体を認識させた後にこの媒体を取り除いて位置指定部３０を操作させる例である。
【００７６】
図１１は、第３変形例である情報表示装置の概略の外観を示す斜視図である。同図に示すように、情報表示装置１ｃは、撮影部１０と、位置指定部３０と、アーム１４０と、平面ディスプレイ（表示部）１５０とを備える。撮影部１０と位置指定部３０とは、一実施形態における構成と同一であり、アーム１４０は第１変形例における構成と同一である。よって、撮影部１０と位置指定部３０とアーム１４０とのここでの説明を省略する。
【００７７】
平面ディスプレイ１５０は、図示しない表示パネルを備え、表示制御部８０のフレームメモリに記憶された画像を読み出して表示パネルに表示させる表示装置である。平面ディスプレイ１５０は、例えば、液晶ディスプレイ装置、または、エレクトロルミネッセンス（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ；ＥＬ）素子を適用して実現されるＥＬディスプレイ装置である。このＥＬディスプレイ装置として、例えば、有機ＥＬディスプレイ装置および無機ＥＬディスプレイ装置が適用可能である。
【００７８】
撮影部１０は、平面ディスプレイ１５０の表示領域を視野に含めるよう、アーム１４０を介して面の上方に設けられる。
アーム１４０は、撮影部１０を情報表示装置１ｃの平面ディスプレイ１５０から離間した場所に設けるための支持部である。アーム１４０は、その一端に撮影部１０が設けられ、他端が着脱可能に平面ディスプレイ１５０のフレームに取り付けられる。または、アーム１４０は、折り畳み可能、または屈伸可能に平面ディスプレイ１５０のフレームに取り付けられる。
位置指定部３０は、平面ディスプレイ１５０の面上に設けられる。
【００７９】
本変形例である情報表示装置１ｃにおいて、対応情報取得部４０の参照情報選択部４１は、第１変形例と同様に、選択した参照情報に含まれる参照画像に基づいて、媒体に対応する媒体画像を生成する媒体画像生成部を備える。
また、情報表示装置１ｃにおいて、表示制御部８０は、第１変形例と同様に、参照情報選択部４１が供給する媒体画像を取り込み、この媒体画像をフレームメモリに記憶させる。
なお、情報表示装置１ｃの画像処理部２０は、第２変形例と同様に、撮影部１０が生成した撮影画像における収差を補正する画像処理を実行してもよい。
【００８０】
本変形例における参照情報検索処理は、第１変形例と同様である。
【００８１】
以上詳述したとおり、本発明の一実施形態および各変形例における情報表示装置によれば、広告ちらし等の媒体を利用者に閲覧させている最中に、この利用者により指定された任意の項目（例えば、注目広告）に関する対応情報を装置の内部または外部から容易に取得し、この対応情報を即時に見易く表示させることができる。この任意の項目は、文字、文字列、図、写真等の多様な可視情報である。
したがって、一実施形態および各変形例における情報表示装置によれば、媒体に設けられた可視情報における任意部分に対する対応情報を容易に取得し、この対応情報を見易く提示させることができる。
【００８２】
また、本実施形態の各変形例では、情報表示装置が媒体の撮影画像に対応する参照情報を取得した後、この参照情報に含まれる参照画像に基づいて媒体画像を生成し、この媒体画像を、位置指定部３０のセンサ領域を含む面に表示させる。これにより、各変形例によれば、位置指定部３０の面上から媒体を取り除いた状態で、可視情報における任意の項目を指定させることができる。
また、媒体がこの全体から切り取られた部分（媒体部分）である場合、媒体部分のみならずその周辺部分も含んだ矩形の画像を、媒体画像として位置指定部３０の面上に表示させることができる。
【００８３】
なお、本発明の一実施形態および各変形例である情報表示装置１において、画像処理部２０と、対応情報取得部４０と、参照情報記憶部５０と、情報取得部６０と、表示制御部８０との機能を、コンピュータ装置により実現してもよい。
【００８４】
また、第２変形例および第３変形例において、撮影部１０をスキャナに置き換えてもよい。スキャナは、媒体を走査（スキャニング）することにより、媒体の可視情報を取り込んで画像化する装置である。スキャナは、具体的には、例えばイメージスキャナである。スキャナとしてハンディタイプのスキャナ（ハンディスキャナ）を適用することができる。なお、撮影部１０の替わりにスキャナを用いる場合、アーム１４０が不要となる。
【００８５】
撮影部１０および上述したスキャナは、画像取込部である。
【００８６】
以上、本発明の実施の形態について図面を参照して詳述したが、具体的な構成はその実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計等も含まれる。
【符号の説明】
【００８７】
１，１ｂ，１ｃ  情報表示装置
２  ネットワーク
３  サーバ装置
１０  撮影部
２０  画像処理部
３０  位置指定部
４０  対応情報取得部
４１  参照情報選択部
４２  対応情報抽出部
４３  辞書検索部
４４  画像拡大部
５０  参照情報記憶部
６０  情報取得部
６１  参照情報取得部
８０  表示制御部
９０  投射部（表示部）
１００  本体
１０１  回動支持部
１０２  クリップ
１１０  スクリーン
１１０ｂ透過スクリーン
１２０  支持部
１３０  フレーム
１４０  アーム
１５０  平面ディスプレイ
【図１】
2013222043.tif 000003
【図２】
2013222043.tif 000004
【図３】
2013222043.tif 000005
【図４】
2013222043.tif 000006
【図５】
2013222043.tif 000007
【図６】
2013222043.tif 000008
【図７】
2013222043.tif 000009
【図８】
2013222043.tif 000010
【図９】
2013222043.tif 000011
【図１０】
2013222043.tif 000012
【図１１】
2013222043.tif 000013