(57)【要約】      （修正有）【課題】紙文書を使った電子システムへの情報入力時に、紙文書の記載内容からユーザが必要とする情報を選択し易くする装置を提供する。【解決手段】文書特定手段は、少なくとも１つ以上の文書の候補の中から、１つの文書を特定する。文書領域情報記憶手段は、各文書を特定するために必要な情報と、各文書を構成する各領域の位置情報と、各領域に対応する仮想選択部品と、各領域の階層構造に関する情報とを少なくとも含む文書領域情報を記憶する。位置取得手段は、文書上のユーザ指示位置を取得する。ユーザ選択領域特定手段は、ユーザ指示位置と、文書領域情報に含まれる各領域の位置情報とに基づいて、ユーザが選択した文書上の選択領域を特定する。部品特定手段は、文書領域情報を参照して、選択領域の上位階層に属する領域に対応する仮想選択部品を特定する。投影手段は、上位階層に属する領域に対応する仮想選択部品を、選択領域と関連させて投影する。【選択図】図１
2016033772.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも１つ以上の文書の候補の中から、１つの文書を特定する文書特定手段と、
各文書を特定するために必要な情報と、各文書を構成する各領域の位置情報と、各領域に対応する仮想選択部品と、各領域の階層構造に関する情報とを少なくとも含む文書領域情報を記憶する記憶手段と、
文書上のユーザ指示位置を取得する位置取得手段と、
前記位置取得手段によって取得されたユーザ指示位置と、前記文書特定手段によって特定された文書に関する前記文書領域情報に含まれる各領域の位置情報とに基づいて、ユーザが選択した前記文書上の選択領域を特定する領域特定手段と、
前記記憶手段によって記憶されている文書領域情報を参照して、前記領域特定手段によって特定された選択領域の上位階層に属する領域に対応する仮想選択部品を特定する部品特定手段と、
前記部品特定手段によって特定された上位階層に属する領域に対応する仮想選択部品を、前記選択領域と関連させて投影する投影手段と、
を備えることを特徴とする情報表示装置。
【請求項２】
前記部品特定手段は、
前記領域特定手段が、ユーザによって選択された前記文書上の選択領域を一意に特定できない場合に、
前記領域特定手段によって特定された選択領域の上位階層に属する領域に対応する仮想選択部品を特定することを特徴とする請求項１に記載の情報表示装置。
【請求項３】
前記部品特定手段は、
前記領域特定手段によって特定された選択領域の上位階層に属する領域に未選択の項目がある場合に、
前記領域特定手段によって特定された選択領域の上位階層に属する領域に対応する仮想選択部品を特定することを特徴とする請求項１又は２に記載の情報表示装置。
【請求項４】
前記部品特定手段は、
前記領域特定手段によって特定された選択領域の上位階層に属する領域が、レイアウト変換が必要と指定された領域である場合、又は当該領域がレイアウト変換をする領域の属性として予め定められている属性を有する領域である場合に、
前記領域特定手段によって特定された領域に対応する仮想選択部品を異なるレイアウトに変換する、
ことを特徴とする請求項１〜３のいずれか１項に記載の情報表示装置。
【請求項５】
前記部品特定手段は、
前記領域特定手段によって特定された選択領域の上位階層に属する領域が、レイアウト変換が必要と指定された領域である場合、又は当該領域がレイアウト変換をする領域の属性として予め定められている属性を有する領域である場合に、
前記領域特定手段によって特定された領域に対応する仮想選択部品を異なるフォーマットに変換する、
ことを特徴とする請求項１〜４のいずれか１項に記載の情報表示装置。
【請求項６】
前記領域特定手段によって特定された選択領域の選択可否を判定する選択可否判定手段をさらに有し、
前記部品特定手段は、
前記選択可否判定手段によって選択不可と判定された項目の表示の状態を、選択可能な項目の表示の状態と区別可能な状態に変換する、
ことを特徴とする請求項１〜５のいずれか１項に記載の情報表示装置。
【請求項７】
前記領域特定手段は、前記文書特定手段によって特定された文書に関する前記文書領域情報に含まれる各領域の中の領域であって、前記位置取得手段によって取得されたユーザ指示位置が接触した単一又は複数の領域のいずれかを選択領域とする、
ことを特徴とする請求項１〜６のいずれか１項に記載の情報表示装置。
【請求項８】
前記位置取得手段によって新たに取得されたユーザ指示位置と、前記投影手段によって投影された前記仮想選択部品の位置とに基づいて、仮想選択部品への選択指示を検出する選択検出手段をさらに備え、
前記投影手段は、前記選択検出手段によって選択指示が検出された仮想選択部品の下位階層の選択部品を投影し、
前記選択検出手段によって選択指示が検出された仮想選択部品の情報が、前記領域特定手段によって特定された選択領域の情報に関連付けて、前記記憶手段に記憶されることを特徴とする請求項７に記載の情報表示装置。
【請求項９】
請求項１から８のいずれか１項に記載の情報表示装置の各手段としてコンピュータを機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報表示装置およびプログラムに関するものであり、ユーザが文書の記載内容を参考に電子データをシステムに入力する作業に応じて、入力用に投影する情報の切り替えを適切に行うものである。
【背景技術】
【０００２】
旅行の受付け業務に代表される窓口業務における申込システム等への情報入力の際には、業者が顧客から聞き出した要望・条件に応じて航空機やホテルの予約状況をシステムで照会しながら申込を確定するというプロセスが必要とされる。このような状況で使用される書類の代表例として、旅行パンフレットが挙げられる。このような文書には一般的に、旅行先、宿泊先ホテル、ホテルの部屋タイプ、料金、および様々なオプションが細かく記載される。通常このような書類は年に数回、季節毎に大量部数が発行されるため、同じホテルの条件であっても繁忙期や航空料金の変動都合から旅行期間に応じた複数の料金設定が存在し、その料金リストが印刷される。そのため顧客は、複数の料金リストの対応関係を把握し、自分が希望する対象期間に応じた料金設定を選ばなければならない。もちろん、対象期間が同じでも、旅行先、宿泊先ホテル、ホテルの部屋タイプ、宿泊数および様々なオプションにより料金が異なる。そのため顧客はこれら数多くの条件を決定して申込システムへ情報入力を行っている。
【０００３】
また条件を特定した段階で初めて空き状況が照会可能となるため、この段階で空きが無いと判明した場合は再び条件を見直すという手間が発生する。そのため一般的に旅行の申し込みを確定するのは長時間に及ぶ業務となっている。
このような状況においてシステムへの情報入力時の手間を軽減するための工夫として「特許文献１」にて次のような提案がされている。この提案は、紙文書から直接電子的に読み取った情報をシステムへの入力としている。ユーザが指示した文書ブロックをカメラで特定することで、該当ブロックに予め関連づけられたデータをシステムに入力するものである。これにより、紙文書の印字サイズが小さい場合でも、文字を誤認識せずにシステムにデータが入力できるというものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−９５７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、「特許文献１」の技術は、紙文書の記載内容がブロック単位で選択可能な粒度であれば有効であるものの、単一ブロック内に選択対象項目が多く存在するような文書を入力手段とすることは難しい。例えばブロック内の料金情報は、ホテル、部屋タイプ、宿泊数、期間と関連付けられており、ブロック内の料金を決める際は、これらの対応関係を踏まえたうえで決定する必要がある。そのため、ある領域の情報に対応付けられた様々な条件との関連が分かり難い文書に対して、ユーザの希望内容に関する各種条件の対応関係を分かり易く提示し、対象領域の情報を選択し易くすることは困難である。
例えば、旅行パンフレットに記載されている料金（旅行代金）は、ホテル、部屋タイプ、宿泊数、および旅行実施時期に基づいて決定される。つまり、複数の料金（旅行代金）の中のどの料金が適用されるかが決定されるためには、ホテルが決定され、部屋タイプが決定され、宿泊数が決定され、かつ旅行実施時期が決定される必要がある。しかし、ある領域の情報（例えば、旅行代金）と、この情報に対応付けられた様々な条件（例えば、ホテル、部屋タイプ、宿泊数、および旅行実施時期）との関連が、文書（例えば、旅行パンフレット）を見ても分かり難い場合がある。
そこで本発明では、紙文書を使った電子システムへの情報入力時に、紙文書の記載内容をユーザが選択し易くする方法を提供する事を目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために本発明による情報表示装置は以下の構成を備える。
即ち、少なくとも１つ以上の文書の候補の中から、１つの文書を特定する文書特定手段と、
各文書を特定するために必要な情報と、各文書を構成する各領域の位置情報と、各領域に対応する仮想選択部品と、各領域の階層構造に関する情報とを少なくとも含む文書領域情報を記憶する記憶手段と、
文書上のユーザ指示位置を取得する位置取得手段と、
前記取得手段によって取得されたユーザ指示位置と、前記文書特定手段によって特定された文書に関する前記文書領域情報に含まれる各領域の位置情報とに基づいて、ユーザが選択した前記文書上の選択領域を特定する領域特定手段と、
前記記憶手段によって記憶されている文書領域情報を参照して、前記領域特定手段によって特定された前記選択領域の上位階層に属する領域に対応する仮想選択部品を特定する部品特定手段と、
前記部品特定手段によって特定された上位階層に属する領域に対応する仮想選択部品を、前記選択領域と関連させて投影する投影手段と、を備えることを特徴とする情報表示装置である。
【発明の効果】
【０００７】
以上に述べたように本発明によれば、紙文書を使った電子システムへの情報入力時に、紙文書の記載内容をユーザが選択し易くすることが可能となる。
【図面の簡単な説明】
【０００８】
【図１】本実施形態の情報表示装置の全体構成を示すブロック図である。
【図２】本実施形態の情報表示装置が効果的となる使用例を説明した図である。
【図３】本実施形態の情報表示装置が処理に使用する文書選択領域に関する論理的な領域定義の詳細を示した図である。
【図４】本実施形態の情報表示装置が処理に使用する文書選択領域に関連付けられた文書領域情報、仮想選択部品から入力を受付けるユーザ入力情報のデータ構成例を示した図である。
【図５】本実施形態の情報表示装置において文書選択領域内の項目領域をユーザが直接指で範囲選択した状態を示した図である。
【図６】本実施形態の情報表示装置における文書内の選択領域を仮想選択部品へ変換する際に使用するデータを示した図である。
【図７】本実施形態の情報表示装置全体の動作、より具体的には演算部１０１の処理手順を示すフローチャートである。
【図８】本発明の実施形態における、文書特定部、位置取得部に基づくユーザ選択領域特定部に関する一連の処理手順を説明するフローチャートである。
【図９】本発明の実施形態における、ユーザ指示位置取得部に基づき仮想選択部品への選択指示を検出するユーザ選択検出部に関する処理手順を説明するフローチャートである。
【図１０】本発明の実施形態における、ユーザ選択領域特定部で特定された選択領域を仮想選択部品に変換する仮想選択部品特定部に関する処理手順を説明するフローチャートである。
【発明を実施するための形態】
【０００９】
＜第一の実施形態＞
以下、図面を参照しながら本発明に好適な実施形態を詳細に説明する。
図１は、本発明の第一の実施形態である情報表示装置１０９の全体構成を示すブロック図である。本実施形態では、紙文書を使った旅行受付の窓口業務において紙文書の内容に基づき予約状況の照会処理および申込処理を行う予約受付システムを前提に説明する。
図示の構成において演算部１０１はマイクロプロセッサであり、画像および映像の撮影処理、情報投影処理、帳票識別処理等のための演算、論理判断等を行う。
【００１０】
投影部１０２はプロジェクタであり、文字、画像、映像等の各種情報を投影する。情報表示装置の具体的な表示方法として、本実施形態ではプロジェクタを採用しているが、ＡＲ（Augmented Reality）の機能を備えたヘッドマウントディスプレイ等で構成することも可能である。これにより、本発明の表示処理によって得られる効果については、現実空間の紙文書上またはその近傍に表示するだけでなく、仮想現実空間上の紙文書上またはその近傍に表示することでも実現が可能である。以降、本実施形態では本発明の情報表示装置が紙文書上またはその近傍に情報を表示する処理を便宜上、「投影する」として記述する。
【００１１】
撮影部１０３は撮像センサであり、画像、映像を読み取って電子データに変換する。
ＵＩ部１０４はボタン、タッチパネル等であり、オペレータが各種の指示を行う。なお、本ＵＩ部の構成には物理的なボタン、タッチパネル等は必ずしも必要としない。物理的なボタン等の代わりに投影部１０３によって仮想的な選択部品であるボタン、タッチパネル等を投影し、オペレータの指などがこれに触れた事を撮影部１０２によって認識することで仮想的なＵＩを実現する事も可能である。
【００１２】
通信部１０５はネットワークコントローラである。有線あるいは無線の通信路を介して外部とのデータ交換を行う。
ＢＵＳ１０６はバスであり、演算部１０１の制御対象である各デバイスを指示するアドレス信号、コントロール信号を転送する。また、各デバイス間のデータ転送を行う。
ＲＡＭ１０７は読み書き可能なランダムアクセスメモリであって、各デバイスからの各種データの一次記憶に用いる。処理に必要なデータを記憶する各種ワーク領域、処理中に値変更が行われる各種データが格納される。
【００１３】
ストレージ１０８はＳＤカード、ＣＦカードなどのリムーバブルメディアまたは本情報表示装置内に内蔵された大容量の不揮発性メモリであり、大量のデータを変更可能に記憶するものである。ハードディスク等で代用する事も可能である。なお、演算部１０１により実行される帳票識別等の制御プログラムはここに格納される。この場合、必要に応じてＲＡＭ１０７に示す主記憶にロードし、実行する。そのようにすることでプログラムを固定化せず、途中で修正可能に構成することができ、柔軟なシステムを実現する事が出来る。
【００１４】
ストレージ１０８は、ブートプログラム、制御プログラム、各種初期データ、文書入力データ、文書特定プログラム、ユーザ指示位置取得プログラム、ユーザ選択領域特定プログラム、仮想選択部品特定プログラム、ユーザ選択検出プログラムを記憶する。
文書特定プログラム、ユーザ指示位置取得プログラム、ユーザ選択領域特定プログラムは、それぞれ、文書特定部、ユーザ指示位置取得部、ユーザ選択領域特定部という機能ブロックとして機能する。
また、仮想選択部品特定プログラム、ユーザ選択検出プログラムは、それぞれ、仮想選択部品特定部、ユーザ選択検出部という機能ブロックとして機能する。
【００１５】
文書特定プログラム（文書特定部）は、撮影部１０３が撮影して得られたデータを解析して、少なくとも１つ以上の文書の候補の中から、１つの文書を特定する。
文書入力データ（文書領域情報）は、各文書を特定するために必要な情報（例えば、文書に印刷されている文書名）と、各文書を構成する各領域の位置情報と、各領域に対応する仮想選択部品とを少なくとも含む。各領域の位置情報とは、例えば、各領域が矩形であれば、各矩形領域の左上頂点の位置座標および右下頂点の位置座標を含む。
【００１６】
ユーザ指示位置取得プログラム（位置取得部）は、撮影部１０３が撮影して得られたデータを解析して、ユーザが指示した位置（ユーザ指示位置）を取得する。
ユーザ選択領域特定プログラム（領域特定部）は、位置取得手段によって取得されたユーザ指示位置と、文書特定手段によって特定された文書に関する文書領域情報に含まれる各領域の位置情報とに基づいて、ユーザが選択した前記文書上の選択領域を特定する。
例えば、ユーザ指示位置が（ｘ１，ｙ１）で、第１の矩形領域の左上頂点の位置座標が（ｘ２，ｙ２）で、当該矩形領域の右下頂点の位置座標が（ｘ３，ｙ３）であるとする。このとき、ｘ２＜ｘ１＜ｘ３かつｙ２＜ｙ１＜ｙ３が成立すれば、ユーザが選択した選択領域は第１の矩形領域であると特定する。
【００１７】
仮想選択部品特定プログラム（部品特定部）は、ユーザ選択領域特定プログラムによって特定された選択領域を、文書領域情報記憶部によって記憶されている文書領域情報を参照して、選択領域に対応する仮想選択部品に変換する。
投影部１０２は、仮想選択部品を文書に応じた適切な場所に投影する。例えば、ユーザが選択した領域の右上頂点と仮想選択部品の左下頂点が重なる位置に投影する。
【００１８】
ユーザ選択検出プログラム（選択検出部）は、ユーザ指示位置取得プログラムによって新たに取得されたユーザ指示位置と、投影部１０２によって投影された仮想選択部品の位置とに基づいて、仮想選択部品への選択指示を検出する。例えば、仮想選択部品を構成する複数の領域のどれが選択されたかを検出する。
【００１９】
図２は、本実施形態の情報表示装置が効果的となる使用例を説明した図である。
本図では、紙のパンフレットを用いた旅行受付け業務に代表される窓口業務に本発明における情報表示装置を使用する状況を示している。
情報表示装置２０１はカメラおよびプロジェクタを備え、本発明の投影部を備えた装置である。
【００２０】
応対者２０２は窓口業務をこなす業務員である。
応対者２０２は申込者２０３と机を挟んで向き合う形で座っており、後述の要領で予約状況の照会や予約獲得後の契約書類作成作業を主導する。
申込者２０３は紙のパンフレット２０５に記載されている内容から希望の旅行プランおよび各種オプションを選択し、応対者２０２に内容を伝える。応対者はこれを受け、情報照会端末２０４を使い申込者２０３が希望する旅行プランが予約可能かを照合する。
【００２１】
パンフレット２０５には文書選択領域２０６が設けられている。
文書選択領域２０６の例としては旅行パンフレットに代表される文書内に記載されている料金表が挙げられる。この領域にはホテル、部屋タイプ、宿泊数、旅行期間等に応じて決まる料金の一覧が記載されている。このような料金一覧は通常、各種割引等の様々なオプション項目が関連付けされており、申込者が希望する条件について該当箇所を特定するのは難しい。特に条件が細かく指定されるようなケースでは、一覧部分の情報量が増える半面、印字文字が小さくなり、選択項目を人間が指で直接指定することが困難となる。
【００２２】
＜情報の階層構造      選択領域の階層構造＞
また、このような一覧情報は一般的に表フォーマットで表現され、階層構造を持つことが多い。文書選択領域２０６の例では最終的な選択対象である料金項目の上位階層には「ホテル」「部屋タイプ」「泊数」「時期」というような属性が存在する。
このような状況で、紙文書の記入対象領域を限られた机上スペースに単純に拡大投影して選択し易くしようとした場合、投影できる領域には限界がある。また、階層構造を持つ文書選択領域２０６のような表フォーマットにおいて、「時期Ｂ」欄等の特定領域のみを単純に拡大表示すると上位階層の属性との対応が取れず選択可否を判断できない。
【００２３】
本発明はこのような状況において、以下のような方法によって紙文書の記載内容からユーザが必要とする情報を選択し易くする。
机上にパンフレット２０５を配置すると、情報表示装置２０１に内蔵されたカメラを使って文書情報認識処理が実行される。ここでパンフレット２０５の画像がレイアウト解析および文字認識処理され、文書内に記載された文書名およびページタイトル、ページ番号、記入対象領域の位置等の文書情報がデジタル処理可能なデータとして抽出される。抽出された文書情報は情報表示装置２０１内の記憶領域またはネットワーク越しのサーバに任意のタイミングで取得可能な状態で格納される。ここで、申込者２０３がパンフレット２０５上の文書選択領域２０６内の項目を指先で選択しようと試みる。すると情報表示装置２０１が内蔵のカメラを通じた画像識別処理によってユーザ指示が検知され、ユーザ選択領域特定処理が行われる。ここでは、ユーザの指画像領域が文書選択領域２０６内の各項目と接した空間座標を解析することでユーザが該当項目を選択したと特定される。この特定処理では、文書選択領域２０６内における一定時間内のユーザの指画像領域の軌跡を取ることによる複数項目の範囲選択や、ジェスチャで囲んだ内部の項目範囲の一括選択も可能である。
【００２４】
ユーザ選択領域特定処理によってユーザが意図する文書内の選択領域が特定されると、情報表示装置２０１に内蔵された仮想選択部品特定部によって仮想選択部品２０８および２０９が特定され、投影情報２０７として投影される。ここでは、文書選択領域２０６の文書領域情報の階層構造と、前述のユーザが意図する文書内の選択領域との関係性を評価した結果に応じて、前記選択領域に対応する仮想選択部品を他の領域に対応する仮想選択部品２０８に変換する。
【００２５】
＜上位階層の仮想選択部品への変換＞
ここでは、ユーザによって直接指定された「時期Ｂ」のデータ「１３０，０００」〜「１７０，０００」を上位階層である「部屋タイプ」のデータ「部屋指定なし」〜「オーシャンビュー」に変換した仮想選択部品２０８を投影する。変換処理の発動契機の例として、ここではユーザが直接指定した領域に対する上位階層の属性が未選択であった場合を示している。
【００２６】
ここでは「ホテル」「部屋タイプ」が上位階層の属性となる。「ホテル」の属性「Ａホテル」についてはユーザの選択範囲を全て内包するため、自動で選択状態となる。よって未選択状態である「部屋タイプ」属性の「部屋指定なし」〜「オーシャンビュー」が選択部品変換対象となる。ここでユーザが「オーシャンビュー」を選択すると、当初ユーザが直接選択した「時期Ｂ」の料金項目「１６０，０００」〜「１７０，０００」が絞り込まれた状態で仮想選択部品２０９として投影される。その後ユーザがいずれかの料金項目を選択する事でユーザの希望条件が確定し、情報照会端末２０４にインプットされ、結果が表示される。
【００２７】
仮想選択部品の表示箇所（投影位置）は、文書領域情報記憶部によってストレージ１０８に記憶されている文書領域情報に応じて適切な位置が選択される。投影位置としては、文書選択領域２０６の枠内または枠外、また文書上への重畳投影または机上に投影することもできる。更には人体認識処理を用いたユーザの利き腕認識結果に応じて投影場所を決定、変更しても良い。具体的にはユーザの利き腕が右腕と認識された場合は、ユーザの指示作業に干渉しないようユーザの視覚正面に対し左側に重畳表示する。逆に利き腕が左腕の場合は右側に重畳表示する。また表示する位置は必ずしも一か所でなくとも良い。例えばユーザに選択順のガイドイメージを示した上で、任意の場所に複数の選択部品を投影し、ユーザに順次選択させることも可能である。
【００２８】
本説明で投影情報２０７は文字列および表としたが、他にも画像、映像等を含む情報も投影可能である。また本説明では投影情報２０７をプロジェクタによって情報を投影するものを例としたが、ＡＲ（Augmented Reality）の機能を備えたヘッドマウントディスプレイ等に表示することで同様の効果を得る事も可能である。
以上の方法により、紙文書を使った電子システムへの情報入力時に、紙文書の記載内容からユーザが必要とする情報を選択し易くすることが可能となる。
【００２９】
図３は、本実施形態の情報表示装置が処理に使用する文書選択領域に関する論理的な領域定義の詳細を示した図である。
図３（ａ）は図２における紙文書上の文書選択領域２０６の例を示した図である。
図３（ｂ）は前記紙文書上の文書選択領域２０６に含まれる記載項目領域について一意に特定可能な領域ＩＤを定義した論理的な領域定義の詳細を示した図である。
項目名領域群３０１は各種データの項目名領域であり、「ホテル」「部屋タイプ」「泊数」「時期」等の項目名に関する文書選択領域情報が定義される。項目領域群３０２、３０３は項目領域であり、「Ａホテル」の「部屋指定なし」条件の「４泊」、「５泊」の宿泊数に関する「時期Ａ」〜「時期Ｂ」における料金群に関する文書選択領域情報が定義される。
【００３０】
図４は、本実施形態の情報表示装置が処理に使用する文書選択領域に関連付けられた文書領域情報、仮想選択部品から入力を受付けるユーザ入力情報のデータ構成例を示した図である。
図４（ａ）は図３（ｂ）の文書選択領域に関連付けられた文書領域情報の構成例を示した図である。本データはあらかじめシステムが想定する文書の種類に応じて用意され、文書領域情報記憶部としてストレージ１０８内に格納されており、文書情報認識部によって検知された対象文書の文書ＩＤに応じた各項目領域のデータが読み出される。それぞれの項目領域は一意の領域ＩＤ、文書内の領域座標、入力データ、文書ＩＤ等の各種属性を備えている。「領域座標１」「領域座標２」は紙文書上の対象領域の矩形範囲を定義するための起点および終点座標であり、紙文書全体または特定の文書ブロック内の相対座標として定義される。「領域座標１」「領域座標２」は、位置情報の一例である。また、各領域間の階層構造を定義する属性として、上位階層の項目領域である「親ＩＤ」が存在する。同じく料金データ群に対する宿泊数のように同一階層内の横方向の要素の共通項目領域である「参照１」、料金群に関する時期のように同一階層内の縦方向の要素の共通項目領域である「参照２」等が存在する。例えばデータ４０１は文書選択領域内の領域ＩＤ「１＿１」に関するデータであり入力データは「部屋指定なし」、親の選択領域は「Ａホテル」である。同じようにデータ４０２、４０３はそれぞれ「１＿１＿１＿１」、「１＿１＿１＿２」に関する領域設定情報であり、入力データは「１２０，０００」、「１３０，０００」、親の選択領域はデータ４０１である。
領域ＩＤ「１＿１」および「１＿２」は、領域ＩＤ「１」の下位階層である。
領域ＩＤ「１＿１＿１＿１」、「１＿１＿１＿２」および「１＿１＿１＿３」は、領域ＩＤ「１＿１＿１」の下位階層である。
【００３１】
図４（ｂ）は前記文書領域情報の構成に応じて表示する仮想選択部品の表示方法を定義したデータの構成例である。
このデータは対応する文書毎に用意されるものであり、ここでは文書ＩＤ「００１」に関する例を示している。前述の仮想選択部品２０８および２０９に関する変換処理はこのデータ定義に従って行われる。ここでは、文書ＩＤ「０００１」に関する最終的なインプットである料金と、料金を確定させる上で選択されていなければならない項目の「属性」「階層キー」「ＩＴＥＭ」が上から依存関係順に定義されている。データ４０２、４０３は料金データであり、データ４０１はこれらより先に選択されるべきデータを示している。ここで「属性」はユーザが選択すべき属性であり、システムへのインプット対象となる「料金」や「ホテル」等の項目名である。「階層キー」はデータ４０２、４０３の料金データより先に選択されるべきデータを特定する際の関係キーである。
例えば、紙文書上の複数の「料金」項目をユーザが選択した際に「ホテル」が一意に特定できない場合、仮想選択部品として出力する対象を上位の選択項目である「ホテル」に変換する。その際には上位の選択対象データであるデータ４０６を参照し、「階層キー」が「親ＩＤ」であることを特定し、データ４０２、４０３から該当する「親ＩＤ」列のＩＤを取得することで対応する「ホテル」の仮想選択部品を組み上げて投影する。「ＩＴＥＭ」は図３（ｂ）に示す項目名領域群３０１に対応する各種データの項目名領域であり、仮想選択部品を組み上げる際の「泊数」等の項目名の付与に使用する。
属性「料金」は、属性「泊数」の下位階層である。属性「泊数」は、属性「部屋タイプ」の下位階層である。
【００３２】
図４（ｃ）は仮想選択部品から入力を受付けるユーザ入力情報のデータ構成例を示した図である。このデータは図４（ｂ）のデータと１対１に対応する。本実施形態の情報表示装置１０９はこれらのデータが全て揃った場合、ユーザの入力が終了したと判断し、これらのデータを情報照会端末２０４にインプットする。ここでは、パンフレット２０５が机上に配置されたことを情報表示装置２０１が内蔵するカメラを使って検出し、文書情報認識処理が実行され、文書の特定およびその入力情報一覧が決定された直後の状態を示している。
【００３３】
データ４０１０は文書ＩＤであり特定済みの文書の文書ＩＤ「００１」が選択されている。データ４０１１〜４０１５は文書内容のユーザ選択結果データであり、これらはすべて「未選択」となっている。
以降、図５〜図６を使い、ユーザの選択に応じた仮想選択部品の変換手順にかかるデータ処理の流れを説明する。
【００３４】
図５は、本実施形態の情報表示装置において文書選択領域２０６内の項目領域５０１〜５０４をユーザが直接指で範囲選択した状態を示した図である。これらの情報は情報表示装置２０１が内蔵するカメラを通じた画像識別処理により、紙文書上のユーザの指画像領域の空間座標が解析され、文書内の相対座標に変換される。図では説明を簡略化するために単一列の複数行が選択された状態を示しているが、本発明によれば複数の列に指画像領域がかかっていた場合にも対応が可能である。そのような場合には後述の処理が対象とする選択範囲を拡大させ、同様に処理すれば良い。
【００３５】
図６は、本実施形態の情報表示装置における文書内の選択領域を仮想選択部品へ変換する際に使用するデータを示した図である。
図６（ａ）は図５にてユーザに選択された選択領域に基づく一連の仮想選択部品への変換処理にかかるデータ操作例を示した図である。
ここではまず項目領域５０１〜５０４に対応する文書内の矩形範囲座標が数値化される。数値化された座標は予めストレージ１０８に登録済のデータ群から「領域座標１」および「領域座標２」の属性に該当するデータが検索され、データ６０３〜６０６が特定される。ここで図４（ｃ）記載のユーザ入力情報を参照し、上位階層の項目に該当するデータ４０１１〜４０１４が選択済みかどうかを判定する。ここでは上位階層の項目が全て未選択のため、先に上位階層の項目を選択するよう図４（ｂ）の表示方法定義に沿った仮想選択部品を生成する処理が実行される。
【００３６】
ここでは最初の選択対象であるデータ４０５に関する仮想部品を表示するために選択部品の変換処理を行う。データ４０５には仮想部品変換処理の処理対象キーである「参照２」属性が関連付けられている。そこでデータ６０３〜６０６の「参照２」列の値「ＩＴＥＭ４」に対応する変換処理として、図６（ｂ）に示す「料金期間」選択用の仮想選択部品に変換し、投影情報２０７としてユーザが選択可能な状態で投影される。ここでは事前に「ＩＴＥＭ４」という値に対して、図３（ｂ）に示す項目名領域群３０１の時期Ａ〜Ｃに関するカレンダフォーマットで料金期間をユーザに選択させるように変換内容が定義されており、この定義に従って仮想選択部品への変換処理が行われる。
【００３７】
図６（ｂ）には本パンフレットが対象とするシーズンにおける数カ月分の料金分類カレンダが表示される。ここでは「時期Ａ」〜「時期Ｃ」という値に符号化される前の料金分類がカレンダフォーマットに変換された状態で表示されている。ユーザが「旅行期間Ｂ」を選択すると、データ４０１１に値が設定される。
データ４０１１への設定が終了すると、再び図４（ｂ）の表示方法定義に沿って図４（ｃ）の次の選択対象が選択済みかどうかを判定する。ここでは同一の「階層キー」属性値「親ＩＤ」を持つデータ４０１２、４０１３が未選択であることが特定される。これに伴い、データ６０３〜６０６の該当属性について上位階層に向かって順次関係性を辿り「ホテル」「部屋タイプ」が選択対象となる。「ホテル」については一意に特定できるため自動的にデータ４０１２に「Ａホテル」が設定される。次に選択候補を持つ「部屋タイプ」に対応する「部屋指定なし」「オーシャンビュー」が図６（ｃ）に示す仮想選択部品として特定され、投影情報２０７として投影される。ここでユーザが「オーシャンビュー」を選択すると、データ４０１３にデータが設定される。
【００３８】
データ４０１３への設定が終了すると、前述の処理と同様に次の選択対象としてデータ４０１４が未選択であると特定され、データ４０１４に対応する表示方法定義データ４０８の「階層キー」の値「参照１」が取得される。これに対応する処理は表示方法定義データ４０９と共に表示するラベルとして事前に定義されており、図６（ｄ）に示す仮想選択部品が特定され、投影情報２０７としてユーザが選択可能な状態で投影される。ここでユーザが「４泊」の料金「160,000」を選択する事により、対象文書のユーザ入力情報が全て選択済みとなり、情報照会端末２０４にインプットされる。
【００３９】
図６（ｅ）は、本実施形態の情報表示装置において、該当文書に対応する全ての選択項目が選択指示を受付けた状態のユーザ入力情報のデータ構成例を示した図である。ここでは前述の一連の仮想選択部品の特定処理によって特定され投影された仮想選択部品の選択により受付けたユーザの入力結果が保持されている事を示している。
【００４０】
図７は、本実施形態の情報表示装置全体の動作、より具体的には演算部１０１の処理手順を示すフローチャートである。
ステップＳ７０１はシステムの初期化処理であり、各種パラメータの初期化等を行う処理である。
ステップＳ７０２はＵＩ部１０４または撮影部１０３で検知する何らかのイベントが発生するのを演算部１０１において待つ処理である。イベント発生処理については、物理なボタンのみならずカメラおよびプロジェクタ等によって実現される仮想的なボタンや投影領域へのユーザの接触判定等によって構成されるユーザの行動検知によって各種イベントが発生する。
【００４１】
ステップＳ７０３はイベント判別処理であり、演算部１０１がこのイベントを判別し、イベントの種類に応じて各種処理に分岐する。
ステップＳ７０４は各種イベントに対応した複数の処理をまとめて表現したものである。ここでは図７，８，９で後述する机上への文書配置イベントによる文書情報認識処理や、ユーザの紙文書上の領域指示イベントによる文書選択領域特定処理、ユーザの仮想選択部品上の領域指示イベントによるユーザ指示位置取得処理等が含まれる。またこれには電源のＯＦＦイベントに応じた終了処理も含む。
【００４２】
図８は、本発明の実施形態における、文書特定部、ユーザ指示位置取得部に基づくユーザ選択領域特定部に関する一連の処理手順を説明するフローチャートである。
図８（ａ）は本実施形態における文書特定処理の例を示したフローチャートである。本実施形態では文書をその場でスキャンすることで文書情報を得る例を示しているが、必ずしもこのような方法を取らずとも良い。他の事例としては、事前にデータベースに格納済みの文書情報をＵＩ部によって紙面上等にリスト表示させ、ユーザに選択させることも可能である。
【００４３】
ステップＳ８０１は文書画像のスキャン処理である。情報表示装置のカメラ画像内に新たな文書が捕らえられた場合、これをスキャンし、文書情報認識処理によってデジタル解析可能なデータに変換する。
ステップＳ８０２は文書の識別情報生成処理である。スキャンした文書画像に対して領域認識および文字認識を行い文書のタイトルや見出しの文字認識結果およびレイアウト情報等を抽出し文書識別情報を取得する。
【００４４】
ステップＳ８０３は文書の種類特定処理である。ステップＳ８０２にて取得した文書識別情報からストレージ１０８内のデータベースを検索し、該当する文書の入力データを取得した後に処理を終了しリターンする。
ここでは文書情報の取得対象となる文書が机上に１部存在する場合を例としているが、複数の文書が机上に複数存在する場合には、ＵＩ部によってどちらの情報を使用するか尋ねるメッセージ等を表示し、ユーザに選択させればよい。選択方法としては、ユーザが直接文書にタッチさせても良いし、文書名のリストを表示して選択させても良い。
【００４５】
図８（ｂ）はユーザ指示位置取得部に基づくユーザ選択領域特定部に関する一連の処理手順を説明するフローチャートである。
ステップＳ８０４はユーザ指示画像の取得処理である。ここでは、情報表示装置２０１が具備するカメラによって机上の紙文書に対するユーザの指画像領域を取得する。
ステップＳ８０５はユーザ指示位置座標の取得処理である。ここではステップＳ８０４で取得したカメラ画像を分析し、文書上のユーザ指示位置座標を特定する。ユーザ指示位置座標を取得する際には、指の太さを考慮し、指として認識された領域と重なるセル領域をユーザ指示位置座標とする。取得方法としては、他にも文書選択領域２０６内における一定時間内のユーザの指画像領域の軌跡を取ることで複数領域にまたがった範囲選択や、ジェスチャで囲んだ内部領域の一括選択、また複数の領域を選択するようにしても良い。
【００４６】
ステップＳ８０６はユーザ指示領域の単一領域判定処理である。ここではステップＳ８０５で取得したユーザ指示位置座標を元に、ストレージ１０８内の図６（ａ）記載のデータ群から「領域座標１」および「領域座標２」の属性に該当するデータが検索される。ここでヒットするデータが単一の領域に閉じられ一意に特定可能となった場合は、該当領域に関して予め定義された全ての関連選択項目を自動的に選択済のユーザ入力情報リストに追加し、ステップＳ８０９に進む。一方、単一領域で無いと判定された場合はステップＳ８０７に進む。
【００４７】
ステップＳ８０７は図１０のフローチャートに後述する仮想選択部品の変換処理である。ここではステップＳ８０５にて取得したユーザ指示位置座標を元に特定したユーザが意図する文書内の選択領域と、対象の文書領域の階層構造との関係性を評価する。その後、評価結果に応じて、前記ユーザが意図する文書内の選択領域を、これに関連する他の領域に変換し、仮想選択部品を生成する。
【００４８】
ステップＳ８０８は仮想選択部品の投影処理である。ここではステップＳ８０７で生成された仮想選択部品を図２の説明に記載した要領で文書の近傍に投影する。
ステップＳ８０９は入力データ転送処理であり、選択済みのユーザ入力情報リストを照会先のシステムに送信する。送信された結果は図２の情報照会端末２０４の画面に表示され、その後の業務が行われる。
【００４９】
図９は本発明の実施形態における、ユーザ指示位置取得部に基づき仮想選択部品への選択指示を検出するユーザ選択検出部に関する処理手順を説明するフローチャートである。
ステップＳ９０１は仮想選択部品に対するユーザ指示画像の取得処理である。ここでは、情報表示装置２０１が具備するカメラによって、同じく情報表示装置２０１が具備するプロジェクタによって投影した仮想選択部品に対するユーザの指画像領域を取得する。
【００５０】
ステップＳ９０２はユーザ指示位置座標の取得処理である。ここではステップＳ９０１で取得したカメラ画像を分析し、仮想選択部品上のユーザ指示位置座標を特定する。投影されるボタン等の部品についてはエッジ判定や投影座標等の情報に基づいて前述の文書の領域判定と同様に位置が特定可能である。またユーザ指示位置座標を取得する際には、単一もしくは複数の選択範囲についてステップＳ８０５と同様に処理することができる。
【００５１】
ステップＳ９０３は仮想選択部品への選択指示検出処理である。ここではユーザ指示位置座標に対応する仮想選択部品の入力データを取得する。具体的には仮想選択部品の投影イメージに割りつけられた各選択部品に対応するデータをユーザの指示に基づく入力データとして特定し、ユーザ入力情報リストに追加する。
ステップＳ９０４は未選択項目有無チェック処理であり、予約照会システムに照会をかける際に必要な全ての条件項目が選択されたかをチェックする。全ての項目が選択済みの場合はステップＳ９０５に進み、未選択項目がある場合はステップＳ９０６に進む。
【００５２】
ステップＳ９０５は入力データ転送処理であり、選択済みのユーザ入力情報リストを照会先のシステムに送信する。送信された結果は図２の情報照会端末２０４の画面に表示され、その後の業務が行われる。
ステップＳ９０６は仮想選択部品の変換処理であり、前述のステップＳ８０７と同様に図１０のフローチャートに後述する仮想選択部品の変換処理である。
ステップＳ９０７は仮想選択部品の投影処理であり、ここではステップＳ９０６にて変換された仮想選択部品を図２の説明に記載した要領で文書の近傍に投影する。
【００５３】
図４（ｃ）に示す例では、属性「旅行期間」〜属性「料金」が未選択であるが、仮に属性「旅行期間」〜属性「料金」の全ての項目が選択済みの場合はステップＳ９０５に進む。一方、属性「旅行期間」〜属性「料金」のいずれかに未選択項目がある場合はステップＳ９０６に進む。
図４（ｃ）に示す例では、属性「旅行期間」〜属性「料金」が未選択であるから、属性「料金」の上位階層に未選択領域が複数あるため、未選択の領域の中で最も上位の階層である属性「旅行期間」に対応する仮想選択部品が特定され、投影される。
属性「旅行期間」に対応する仮想選択部品が特定され、投影され、ユーザによる選択が検出されたら、その「旅行期間」のデータが記憶部に記憶される。次に、属性「旅行期間」の下位階層の属性「ホテル」に対応する仮想選択部品が特定され、投影される。
属性「ホテル」に対応する仮想選択部品が特定され、投影され、ユーザによる選択が検出されたら、その「ホテル」のデータが記憶部に記憶される。
このようにユーザの選択が検出され、記憶され、次の下位階層の仮想選択部品が特定され、投影されるという処理が繰り返され、最も下位の階層である属性「料金」のデータが記憶部に記憶されたら、Ｓ９０４はＹＥＳとなり、Ｓ９０５へ進む。
【００５４】
＜仮想選択部品への変換＞
図１０は本発明の実施形態における、ユーザ選択領域特定部で特定された選択領域を仮想選択部品に変換する仮想選択部品特定部に関する処理手順を説明するフローチャートである。
＜選択領域の階層評価処理＞
ステップＳ１００１は文書選択領域の階層評価処理である。ここではユーザ選択領域特定部によって特定された文書選択領域に関連付けられた文書領域情報をストレージ１０８から取得する。ここで取得した文書領域情報（特定された文書選択領域）に上位階層の選択領域が存在しない場合はステップＳ１００４に進む。取得した文書領域情報（特定された文書選択領域）に上位階層の選択領域が存在する場合は、全ての上位階層の文書領域情報を更に取得した後にステップＳ１００２に進む。取得済みの文書領域情報については一連の処理が終了するまでの間、ＲＡＭ１０７に保持することでその他の処理を高速に処理する事ができる。
【００５５】
ステップＳ１００２はユーザ入力情報リストの入力状況チェック処理である。ステップＳ１００１で取得した文書領域情報については、ユーザ入力情報リストの各項目と対応付けられており、上位階層の選択領域に対応する項目が選択済かどうかを判定する。選択済であった場合はステップＳ１００４に進み、未選択であった場合は、ステップＳ１００３に進む。
【００５６】
ステップＳ１００３およびステップＳ１００４は仮想選択部品の変換対象領域の特定処理である。
ステップＳ１００３では直前のステップの判定結果に基づき、上位階層の選択領域を仮想選択部品への変換対象として特定する。ここで、上位階層の選択領域が複数あり選択順序が存在する場合は順序定義に従って変換対象を特定する。順序情報については例えばユーザ入力情報リストに付与されたものを使用する。
ステップＳ１００４では直前ステップの判定結果に基づき、ユーザ選択領域特定部によって特定されたユーザが直接指定した文書選択領域を仮想選択部品の生成対象とする。
【００５７】
＜選択可否判定＞
ステップＳ１００５は選択領域の選択可否判定処理である。ここではユーザ選択領域特定部によって特定された選択領域の選択可否を判定する。選択可否の判定方法の例としては、変換対象とする文書領域情報に既選択項目と同時に選択することができない項目を含むかどうかを判定する。また他にも照会システムと先んじて連携し、既に予約ができない項目が含まれるかどうかを判定しても良い。このような判定により、変換対象とする文書領域情報に選択不可能なものが含まれると判定された場合はステップＳ１００６に進み、選択不可能なものが含まれないと判定された場合はステップＳ１００７に進む。
【００５８】
＜選択不可状態への変換＞
ステップＳ１００６は仮想選択部品の選択不可状態への変換処理である。ステップＳ１００５で特定された選択不可項目を選択可能な項目と区別可能な状態に変換する。選択可能な項目と区別可能な状態に変換する方法としては、対象項目を選択項目から削除することや、対象項目を選択不可能なＵＩ部品とするなどいくつかの方法が考えられる。
【００５９】
＜レイアウト変換要否判定＞
ステップＳ１００７は選択領域のレイアウト変換要否判定処理である。ここでは対象の選択領域を仮想選択部品に変換する際にレイアウト変換が必要かどうかを判定する。判定に使用するデータとしては、選択領域に対応する文書領域情報にレイアウト変換の要否を予め指定しておいても良いし、文書領域情報の属性に応じて判断しても良い。レイアウト変換が必要と判定された場合はステップＳ１００８に進み、不要と判定された場合はステップＳ１００９に進む。
【００６０】
＜レイアウト変換＞
ステップＳ１００８は仮想選択部品のレイアウト変換処理である。変換処理の一連としてここでは一般的に属性名と属性値という関係を持つデータ構造に着目した変換処理が行われる。ユーザ選択領域特定部によって特定された選択領域が属性値に該当する場合、予め関連付けされた異なる選択領域の文書領域情報を取得し、別途属性名ラベルとしてレイアウト要素にこれを加え、仮想選択部品に変換する。さらに複数の仮想選択部品が用意される場合はそれらの表示順序をユーザが見易いようソートする等のレイアウト変換処理も加えられる。
【００６１】
＜フォーマット変換要否判定＞
ステップＳ１００９は仮想選択部品のフォーマット変換要否判定処理である。ここでは対象の選択領域を仮想選択部品に変換する際にフォーマット変換が必要かどうかを判定する。判定に使用するデータとしては、選択領域に対応する文書領域情報にフォーマット変換要否を予め指定しておいても良いし、文書領域情報の属性に応じて判断しても良い。フォーマット変換が必要と判定された場合はステップＳ１００１０に進み、不要と判定された場合は処理を終了してリターンする。
【００６２】
＜フォーマット変換＞
ステップＳ１００１０は仮想選択部品のフォーマット変換処理である。ここでは対象の選択領域が期間属性であり、「時期Ａ」〜「時期Ｃ」といった値に符号化されて表示されている場合は、予め用意された符号化内容マップ定義に従って仮想選択部品をユーザが理解しやすいカレンダフォーマットに変換し、リターンする。これによりユーザが希望する旅行日程がカレンダフォーマットで選択可能となり、符号化された状態では判断する事が難しい選択領域の選択が可能となる。
【００６３】
このように第一の実施形態の構成によれば、紙文書を使った電子システムへの情報入力にかかる手間を軽減することが可能となる。
また第一の実施形態の構成によれば、文書の近傍に投影される仮想選択部品がユーザの選択した選択領域の内容に関連する領域と共に表示されるようレイアウト変換されるため、投影された選択項目の対応関係が把握しやすくなりユーザの選択が容易となる。
【００６４】
また第一の実施形態の構成によれば、選択順序が存在する文書の選択領域が複数特定された場合、選択順序に沿って仮想選択部品が投影されるため、選択順序が前後することによるユーザの再指定作業の発生を軽減することができる。
また第一の実施形態の構成によれば、ユーザが選択した文書の選択領域の表示内容がフォーマット変換されるため、紙面領域の削減等の理由で符号化された情報を選択しなければならない場合でも容易に選択することができる。
【００６５】
また第一の実施形態の構成によれば、文書の複数の選択領域からの複合条件を選択する場合、既に選択済みの項目と相反する新規選択項目が区別された状態で仮想選択部品が変換されるため、システムへの照会条件の選択ミスの発生を軽減することができる。
また第一の実施形態の構成によれば、紙文書上の選択領域がユーザの指の太さに対応した範囲で選択されるため、紙文書上の選択領域の印字サイズが指で指定するには狭い場合であっても領域の抽出漏れを軽減することができる。
【００６６】
以上、実施形態を記述したが、本発明の適用対象とする文書は実施形態に記載した旅行パンフレットに限定されるものではない。選択対象として階層構造を持つ表や、レイアウト変換を要する項目、選択可否制御を要する項目、フォーマット変換を要する項目を選択項目として含む文書であれば本実施形態の効果を損なうことなく適用が可能である。
また、本発明の適用対象とするシステムは実施形態に記載した予約受付システムに限定されるものではなく、データの入力を伴うシステムへの適用が可能である。
【００６７】
また、本発明の適用対象とする文書は必ずしも紙文書に限定されるものではない。例えばスクリーンに投影した電子文書に対し、レーザーポインタやジェスチャ等で指定された領域を仮想選択部品への変換対象とすることで本実施形態の効果を得ることが可能である。
また本発明は例えばシステム、装置、データ処理方法、プログラムもしくは記憶媒体等としての実施態様を取ることが可能である。具体的には複数の機器から構成されるシステムに適用しても良いし、一つの機器からなる装置に適用しても良い。
【００６８】
（その他の実施形態）
また本発明は、以下の処理を実行する事によっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワークまたは各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ）がプログラムを読み出して実行する処理である。
【符号の説明】
【００６９】
１０１  演算部
１０２  投影部
１０３  撮影部
１０４  ＵＩ部
１０５  通信部
１０６  バス
１０７  ＲＡＭ
１０８  ストレージ
【図１】
2016033772.tif 000003
【図７】
2016033772.tif 000004
【図８】
2016033772.tif 000005
【図９】
2016033772.tif 000006
【図１０】
2016033772.tif 000007
【図２】
2016033772.tif 000008
【図３】
2016033772.tif 000009
【図４】
2016033772.tif 000010
【図５】
2016033772.tif 000011
【図６】
2016033772.tif 000012