(57)【要約】【課題】デザイン性に影響を与えることなく、映像コンテンツに情報を合成して表示できる情報提供システムを提供する。【解決手段】符号判定部は映像コンテンツの画面上に合成した二値画像の符号を画素毎に判定し、周波数成分合成部は二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加して、表示部に表示する。撮像部は表示部に表示される画像を撮像し、画素データ取得部は撮像部で撮像された画像から画素データを取得し、周波数成分解析部は画素データ取得部から取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析し、復号部は周波数成分解析部の解析結果から、二値画像の符号を復号する。【選択図】図２０
2018182589.tif 000002
【特許請求の範囲】
【請求項１】
映像コンテンツの画面上に合成する二値画像の符号を画素毎に判定する符号判定部と、
前記二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加することで、前記映像コンテンツに前記二値画像を合成する周波数成分合成部と、
前記二値画像が合成された映像コンテンツを表示する表示部と
を備える表示装置と、
前記表示部に表示された画像が撮像された撮像画像から画素データを取得する画素データ取得部と、
前記画素データ取得部から取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する周波数成分解析部と、
前記周波数成分解析部の解析結果から、二値画像の符号を復号する二値画像復号部と、
を備える前記情報処理装置と
を有する情報提供システム。
【請求項２】
前記周波数成分解析部は、フーリエ変換により所望の周波数成分が含まれているか否かを解析する請求項１に記載の情報提供システム。
【請求項３】
前記周波数成分を付加する画素データは、ＹＣｒＣｂ信号のうち色相に関するＣｒ又はＣｂデータである請求項１又は２に記載の情報提供システム。
【請求項４】
前記周波数成分を付加する画素データは、ＹＣｒＣｂ信号のうち輝度に関するＹデータである請求項１又は２に記載の情報提供システム。
【請求項５】
前記周波数成分を付加する画素データは、ＲＧＢ信号のデータのうちの何れか又はその組み合わせである請求項１又は２に記載の情報提供システム。
【請求項６】
前記二値画像は、一次元又は二次元バーコードの画像である請求項１乃至５の何れか１項に記載の情報提供システム。
【請求項７】
前記二値画像は、文字又は絵の画像である請求項１乃至５の何れか１項に記載の情報提供システム。
【請求項８】
前記映像コンテンツは、静止画である請求項１乃至７の何れか１項に記載の情報提供システム。
【請求項９】
前記映像コンテンツは、動画である請求項１乃至７の何れか１項に記載の情報提供システム。
【請求項１０】
周波数成分合成部は、前記映像コンテンツの画像領域のうち、前記映像コンテンツの二値画像を合成する画像領域の輝度が最小値、もしくはRGBの色信号が最小値の時には、合成する画像領域の輝度を上げる、またはRGB色信号を上げる
請求項１乃至９の何れか１項に記載の情報提供システム。
【請求項１１】
周波数成分合成部は、前記映像コンテンツの画像領域のうち、前記映像コンテンツの二値画像を合成する画像領域の輝度が最大値、もしくはRGBの色信号が最大値の時には、合成する画像領域の輝度を下げる、またはRGB色信号を下げる
請求項１乃至１０の何れか１項に記載の情報提供システム。
【請求項１２】
映像コンテンツの画面上に合成する二値画像の符号を画素毎に判定する符号判定部と、
前記二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加することで、前記映像コンテンツに前記二値画像を合成する周波数成分合成部と、
前記二値画像が合成された映像コンテンツを表示する表示部と
を有する表示装置。
【請求項１３】
表示装置の表示部に表示された画像が撮像された撮像画像から画素データを取得する画素データ取得部と、
前記画素データ取得部から取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する周波数成分解析部と、
前記周波数成分解析部の解析結果から、二値画像の符号を復号する二値画像復号部と
を有する情報処理装置。
【請求項１４】
情報送信側で所望の情報を含む二値画像を映像コンテンツに合成して表示し、情報送信側で表示画面を解析して前記二値画像に含まれる情報を取得する情報提供方法であって、
前記情報送信側で、映像コンテンツの画面上に合成する二値画像の符号を画素毎に判定する工程と、
前記情報送信側で、前記二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加することで、前記映像コンテンツに前記二値画像を合成する工程と、
前記情報送信側で、前記二値画像が合成された映像コンテンツを表示する工程と、
前記情報受信側で、前記表示される画像を撮像する工程と、
前記情報受信側で、前記撮像された画像から画素データを取得する工程と、
前記情報受信側で、前記取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する工程と、
前記情報受信側で、前記周波数成分の解析結果から、二値画像の符号を復号する工程と
を含む情報提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報提供システム、表示装置、情報処理装置、情報提供方法に関する。
【背景技術】
【０００２】
パブリックディスプレイの主な用途は、ディスプレイを設置した場所を訪れた不特定多数に対し、広告プロモーションであったり、近傍の案内掲示板といった内容の映像コンテンツを表示し、提示するものである。特に広告プロモーションの役割としては、ディスプレイを設置してある場所を訪れた不特定多数に対し、商品もしくは店舗の情報を映像コンテンツとして表示することで、「ニーズ潜在層を刺激」するためのプッシュ型配信を行うことである。
【０００３】
マーケティング手法からすると、広告プロモーションとしては、ニーズ潜在層を刺激から“今まさに探している人”を誘導するプル型の検索連動型広告を用い、その人を実際の購買へと導くことが重要となってくる。つまり、プッシュ型のディスプレイ広告から、その場で、プル型の検索連動型広告への切替が必要であるといえる。
【０００４】
プッシュ型のディスプレイ広告から、その場で、プル型の検索連動型広告への切替を実施する手法としては、映像コンテンツ内にＱＲコード（登録商標）等の二次元コードの画像を表示し、ディスプレイ広告から刺激を受けた人は、携帯端末を用いて二次元コードを読み込み、二次元コードが指し示すＵＲＬ（Uniform Resource Locator）から、その商品もしくは店舗のホームページに行き、更に詳しい情報を得ることができるようにして、顧客化へと繋げるものがある。
【０００５】
また、特許文献１には、表示画面を４つの領域に分割し、提供すべき情報に基づいて４分割された領域にそれぞれ表示する分割画像の輝度値または色差値の少なくとも一方を変化させることで、画面内に情報を埋め込むようにしたものが開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１４−１３１１９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ディスプレイに表示される映像コンテンツに、二次元コードを視認可能な状態で画面に合成すると、この二次元コードにより、映像コンテンツのデザイン性が低下するという問題が生じてくる。特に、ディスプレイに表示される広告プロモーションの映像コンテンツには、静止画と動画の両方があり、動画の映像コンテンツの場合には、二次元コードを画面を表示し続けていると、本来の映像コンテンツが非常に見にくくなり、そのデザイン性が低下する。デザイン性を考慮して、映像コンテンツ内に二次元コードではなく、文字によるＵＲＬを表示する手段もあるが、この場合、利用者はそのＵＲＬを記憶する必要があり、利便性が低下する。
【０００８】
また、特許文献１に記載されているものは、画面を４分割し、その４分割した画面に画像鑑賞に大きな影響を与えない形で情報を埋め込み、それを撮像した撮像部から情報を取り出すものである。特許文献１では、４分割した画面の変化から、１,０のデジタル情報を得るということになる。つまり、画像の輝度値または色差値のすくなくとも一方を、秒単位で変化させることで埋め込むため、秒単位で数ビット程度の情報しか得ることができない。
【０００９】
上述の課題を鑑み、本発明は、デザイン性に影響を与えることなく、映像コンテンツに情報を合成して表示できる情報提供システム、表示装置、情報処理装置、情報提供方法を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述の課題を解決するために、本発明の一態様に係る情報提供システムは、所望の情報を含む二値画像を映像コンテンツに合成して表示する情報送信側と、前記情報送信側の表示画面を解析して前記二値画像に含まれる情報を取得する情報受信側とからなる情報提供システムであって、前記情報送信側は、映像コンテンツの画面上に合成する二値画像の符号を画素毎に判定する符号判定部と、前記二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加することで、前記映像コンテンツに前記二値画像を合成する周波数成分合成部と、前記二値画像が合成された映像コンテンツを表示する表示部とを備え、前記情報受信側は、前記表示部に表示される画像を撮像する撮像部と、前記撮像部で撮像された画像から画素データを取得する画素データ取得部と、前記画素データ取得部から取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する周波数成分解析部と、前記周波数成分解析部の解析結果から、二値画像の符号を復号する二値画像復号部とを備える。
【００１１】
本発明の一態様に係る表示装置は、映像コンテンツの画面上に合成する二値画像の符号を画素毎に判定する符号判定部と、前記二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加することで、前記映像コンテンツに前記二値画像を合成する周波数成分合成部と、前記二値画像が合成された映像コンテンツを表示する表示部とを有する。
【００１２】
本発明の一態様に係る情報処理は、表示装置の表示部に表示された画像が撮像された撮像画像から画素データを取得する画素データ取得部と、前記画素データ取得部から取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する周波数成分解析部と、前記周波数成分解析部の解析結果から、二値画像の符号を復号する二値画像復号部とを有する。
【００１３】
本発明の一態様に係る情報提供方法は、情報送信側で所望の情報を含む二値画像を映像コンテンツに合成して表示し、情報送信側で表示画面を解析して前記二値画像に含まれる情報を取得する情報提供方法であって、前記情報送信側で、映像コンテンツの画面上に合成する二値画像の符号を画素毎に判定する工程と、前記情報送信側で、前記二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加することで、前記映像コンテンツに前記二値画像を合成する工程と、前記情報送信側で、前記二値画像が合成された映像コンテンツを表示する工程と、前記情報受信側で、前記表示される画像を撮像する工程と、前記情報受信側で、前記撮像された画像から画素データを取得する工程と、前記情報受信側で、前記取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する工程と、前記情報受信側で、前記周波数成分の解析結果から、二値画像の符号を復号する工程とを含む。
【発明の効果】
【００１４】
本発明によれば、二値画像が視認されない状態で、所望の情報を含む二値画像を映像コンテンツに合成して表示して情報を伝送できる。これにより、デザイン性を低下させることなく、プッシュ型のディスプレイ広告から、その場で、プル型の検索連動型広告への切替が実現できる。
【図面の簡単な説明】
【００１５】
【図１】本発明の第１の実施形態に係る情報提供システムの概要を示すブロック図である。
【図２】本発明の第１の実施形態に係る情報提供システムにおける映像出力装置の構成を示すブロック図である。
【図３】本発明の第１の実施形態に係る情報提供システムにおける表示装置の構成を示すブロック図である。
【図４】本発明の第１の実施形態に係る情報提供システムにおける携帯情報処理装置の概略ブロック図である。
【図５】本発明の第１の実施形態に係る情報提供システムにおける映像コンテンツの説明図である。
【図６】本発明の第１の実施形態に係る情報提供システムにおける映像コンテンツの説明図である。
【図７】本発明の第１の実施形態に係る情報提供システムにおける映像コンテンツの説明図である。
【図８】本発明の第１の実施形態に係る情報提供システムにおける二次元コードの二値画像の説明図である。
【図９】本発明の第１の実施形態に係る情報提供システムにおける二次元コードの二値画像の説明図である。
【図１０】本発明の第１の実施形態に係る情報提供システムにおける二次元コードの二値画像の説明図である。
【図１１】本発明の第１の実施形態に係る情報提供システムにおいて映像コンテンツと二次元コードの二値画像とを合成したときの関係を示す説明図である。
【図１２】本発明の第１の実施形態に係る情報提供システムにおいて映像コンテンツと二次元コードの二値画像とを合成したときの関係を示す説明図である。
【図１３】本発明の第１の実施形態に係る情報提供システムにおいて二次元コードの二値画像のデータを復号する場合の処理の説明図である。
【図１４】本発明の第１の実施形態に係る情報提供システムにおいて色差値Ｃｒによる色相の変化の一例を示すグラフである。
【図１５】本発明の第１の実施形態に係る情報提供システムにおいて色差値Ｃｒによる色相の変化の一例を示すグラフである。
【図１６】本発明の第１の実施形態に係る情報提供システムにおいて色差値Ｃｒによる色相の変化の他の例を示すグラフである。
【図１７】本発明の第１の実施形態に係る情報提供システムにおいて色差値Ｃｒによる色相の変化の他の例を示すグラフである。
【図１８】本発明の第１の実施形態に係る情報提供システムでの処理を示すフローチャートである。
【図１９】本発明の第１の実施形態に係る情報提供システムでの処理を示すフローチャートである。
【図２０】本発明の第１の実施形態に係る情報提供システムの機能に基づくブロック図である。
【発明を実施するための形態】
【００１６】
以下、本発明の実施の形態について図面を参照しながら説明する。図１は、本発明の第１の実施形態に係る情報提供システムの概要を示すブロック図である。
【００１７】
図１に示すように、本発明の第１の実施形態に係る情報提供システム１は、映像出力装置１０と、ディスプレイ装置２０と、携帯情報処理装置３０とから構成される。映像出力装置１０及びディスプレイ装置２０は、所望の情報を含む二値画像を映像コンテンツに合成して表示する情報送信側２となる。携帯情報処理装置３０は、表示画面を解析して二値画像に含まれる情報を取得する情報受信側３となる。
【００１８】
映像出力装置１０は、ディスプレイ装置２０に映像コンテンツを出力する。映像出力装置１０は、例えばＰＣ（Personal Computer）により実現できる。映像コンテンツは、例えば広告コンテンツの画像である。映像コンテンツとしては、静止画であっても、動画であっても良い。また、映像コンテンツには、例えば二次元コードの二値画像が合成されている。二次元コードには、例えば、映像コンテンツに関連する情報を配信するウェッブページのＵＲＬ（Uniform Resource Locator）が記録される。
【００１９】
ディスプレイ装置２０は、映像出力装置１０から出力される映像コンテンツを表示する。ディスプレイ装置２０は、例えば、パブリックディスプレイと呼ばれる大型のディスプレイからなる。ディスプレイ装置２０には、二次元コードの二値画像５１が合成された映像コンテンツ５０が表示される。この映像コンテンツ５０により、大衆に広告を提供することができる。また、映像コンテンツ５０に、二次元コードの二値画像５１によりウェッブページのＵＲＬを合成することができる。これにより、プッシュ型のディスプレイ広告から、プル型の検索連動型広告への切替が実現できる。
【００２０】
ここで、映像コンテンツ５０に二次元コードの二値画像５１をそのまま合成してしまうと、画面上に二次元コードの二値画像５１が明瞭に視認できる状態で表示されてしまい、デザイン上好ましくない。そこで、本実施形態では、各画素毎に、二値画像５１のデータ（白又は黒）に応じて、色差値に時間軸方向の色相の揺らぎの周波数成分を付加するようにしている。色差値に付加された時間軸方向の色相の揺らぎの周波数成分は、フーリエ変換により検出できる。これにより、二値画像が視認されない状態で、映像コンテンツ５０に二次元コードの二値画像５１を合成して表示できる。なお、図１では、説明のために、二次元コードの二次元画像５１を図示しているが、実際上では、ユーザは、殆ど、二値画像５１を視認できない。
【００２１】
携帯情報処理装置３０は、ユーザが携帯する携帯電話端末やタブレット端末である。携帯情報処理装置３０には、撮影画像の色差データの周波数成分をフーリエ変換により検出し、これに基いて、二次元コードの二値画像を復号する機能を実現するアプリケーション・プログラムがインストールされている。
【００２２】
ユーザは、ディスプレイ装置２０に映し出される映像コンテンツ５０の広告を見て、この広告に興味を持った場合には、各自の携帯情報処理装置３０のカメラ機能で、ディスプレイ装置２０に映し出される映像コンテンツ５０（上述のように二次元コードの二値画像５１が合成されている）を撮影する。
【００２３】
ユーザが各自の携帯情報処理装置３０のカメラ機能で、ディスプレイ装置２０に映し出される映像コンテンツ５０を撮影すると、撮影画像の色差データの周波数成分が検出され、これに基いて、二次元コードの二値画像５１が復号される。
【００２４】
このように、本発明の第１の実施形態に係る情報提供システム１では、各画素毎に、二値画像５１のデータに応じて、色差値に時間軸方向の色相の揺らぎの周波数成分を付加することで、人間の目には殆ど視認できない状態で、映像コンテンツ５０に二次元コードの二値画像５１を合成できる。
【００２５】
図２は、本発明の第１の実施形態に係る情報提供システム１における映像出力装置１０の構成を示すブロック図である。前述したように、映像出力装置１０としては、ＰＣを用いることができる。
【００２６】
映像出力装置１０は、制御部１１と、ＲＯＭ（Read Only Memory）１２と、ＲＡＭ（Random Access Memory）１３と、記憶装置１４と、映像出力部１５と、入力操作部１６と、通信部１７を備える。また、各ブロック間における各信号のやりとりは、バス１８を介して行われる。
【００２７】
制御部１１はＣＰＵ（Central Processing Unit）からなり、各種制御プログラムに基づいて、映像出力装置１０の各部を制御する。ＲＯＭ１２は、読み出し専用のメモリであり、ブートプログラム等を記憶する。ＲＡＭ１３は、制御部１１のメインメモリ（主記憶装置）に用いられるメモリであり、制御部１１において実行されるプログラムの作業領域等を記憶する。記憶装置１４は、ＨＤＤ（Hard Disk Drive）やフラッシュメモリからなり、各種アプリケーションプログラム等が格納される。本実施形態では、記憶装置１４には、映像コンテンツのデータが格納されている。また、本実施形態では、アプリケーション・プログラムとして、二次元コードの生成プログラムや、二次元コードの「１」又は「０」に応じて、色差データの周波数成分を付加するようにして、映像コンテンツに二次元コードの二値画像を合成する機能を実現するプログラムが含まれている。
【００２８】
映像出力部１５は、ディスプレイ装置２０に対して、映像信号を出力する。入力操作部１６は、キーボードやマウス（ポインティングデバイス）等からなり、各種の情報入力を受け付ける。入力操作部１６は、操作入力を受け付けると、受け付けた操作入力の内容を制御部１１に出力する。通信部１７は、制御部１１の制御に基づいて、外部との各種情報の送受信を実行する。
【００２９】
図３は、本発明の第１の実施形態に係る情報提供システム１におけるディスプレイ装置２０の構成を示すブロック図である。図３に示すように、ディスプレイ装置２０は、制御部２１と、画像処理部２２と、映像表示部２３とから構成される。
【００３０】
制御部２１は、ディスプレイ装置２０の全体制御を行っている。画像処理部２２には、映像出力装置１０から映像信号が入力される。画像処理部２２は、入力された映像信号に対して、画質調整処理等、各種の映像処理を行う。映像表示部２３は、画像処理部２２から出力される映像信号を画面として表示する。映像表示部２３としては、例えば液晶ディスプレイが用いられる。
【００３１】
図４は、本発明の第１の実施形態に係る情報提供システム１における携帯情報処理装置３０の概略ブロック図である。携帯情報処理装置３０としては、携帯電話端末やタブレット端末等を用いることができる。
【００３２】
携帯情報処理装置３０は、制御部３１、データ記憶部３２、無線通信部３３、カメラ部３４、表示部３５、入力キー３６、タッチパネル３８、タッチパネル制御部３９を備えている。
【００３３】
制御部３１は、データ記憶部３２に記憶されているプログラムに基づいて各部の制御を行う。また、制御部３１は、必要な情報をデータ記憶部３２に記憶させる。データ記憶部３２は、ＲＡＭ（Random access memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ等で構成される。データ記憶部３２は、各種のプログラムや各種のデータを記憶する。本実施形態では、データ記憶部３２には、撮影画像の色差データの周波数成分を検出し、これに基いて、二次元コードの二値画像を復号する機能を実現するアプリケーションプログラムがインストールされている。
【００３４】
無線通信部３３は、携帯電話通信網、又は無線ＬＡＮ（Local Area Network）でのデータの送受信制御を行う。カメラ部３４は、動画や静止画の撮影を行うためのカメラである。本実施形態では、カメラ部３４は、ディスプレイ装置２０の撮影画面を動画で撮影するのに用いられる。表示部３５は、制御部３１の制御に応じて各種情報を表示する。表示部３５は、例えば液晶ディスプレイ、有機ＥＬ（Electroluminescence）ディスプレイからなる。入力キー３６は、各種の入力を行うキーである。タッチパネル３８は、表示部３５上に積層配置されている。タッチパネル制御部３９は、タッチパネル３８が操作された座標位置を検出し、入力情報として、制御部３１に送出する。
【００３５】
前述したように、本発明の第１の実施形態に係る情報提供システム１では、二次元コードの二値画像のデータに応じて、各画素毎に、色差値に時間軸方向の色相の揺らぎの周波数成分を付加するようにして、映像コンテンツに二次元コードの二値画像を合成している。このときの処理について、以下に説明する。
【００３６】
図５〜図７は、本発明の第１の実施形態に係る情報提供システムにおける映像コンテンツの説明図である。図５に示すように、ディスプレイ装置２０に表示する映像コンテンツの大きさ（解像度）は、（ｍ×ｎ）画素であるとする。この場合、各画素の座標（ｘ，ｙ）は、図６に示すように、（ｘ１，ｙ１）〜（ｘｍ，ｙｎ）となる。ここで、ｍ、ｎは正の整数である。
【００３７】
映像データとしては、ＹＣｒＣｂ方式のコンポーネント信号を用いるとする。ここで、Ｙは輝度データ、Ｃｒは色差データ（Ｒ−Ｙ）、Ｃｂは色差データ（Ｂ−Ｙ）である。各座標の画素データは、（Ｙ，Ｃｒ，Ｃｂ）として表現できる。よって、座標（ｘ１，ｙ１）の画素データは、
（Ｙ＿（ｘ１，ｙ１），Ｃｒ＿（ｘ１，ｙ１），Ｃｂ＿（ｘ１，ｙ１））
として表現できる。同様に、座標（ｘ１，ｙ１）〜（ｘｍ，ｙｎ）の各画素データは、図７に示すように、輝度データＹの成分と色差データＣｒ及びＣｂの成分とにより表現できる。
【００３８】
図８〜図１０は、本発明の第１の実施形態に係る情報提供システムにおける二次元コードの二値画像の説明図である。図８に示すように、二次元コードの大きさ（解像度）を（ｐ×ｑ）画素とする。ｐ及びｑは正の整数である。ここで、二次元コードの大きさは、映像コンテンツの大きさ（ｍ×ｎ）より小さく、ｍ＞ｐ、ｎ＞ｑの関係となっている。二次元コードは、「１」と、「０」との二値である。ここでは、二次元コードの「１」を白と対応させ、二次元コードの「０」を黒と対応させるとする。
【００３９】
図９の二次元コードを例に挙げて、各画素毎に、二次元コードの二値画像の符号データ「１」と「０」とを判定する。図９に示すように、この二次元コードの二値画像では、座標（ｘ１，ｙ１）は白である。このため、図１０に示すように、座標（ｘ１，ｙ１）の符号データは、（ｘ１，ｙ１）＝１として示される。また、座標（ｘ２，ｙ１）は白である。このため、図１０に示すように、座標（ｘ２，ｙ１）の符号データは、（ｘ２，ｙ１）＝１として示される。また、座標（ｘ３，ｙ１）では黒である。このため、図１０に示すように、座標（ｘ３，ｙ１）の符号データは、（ｘ３，ｙ１）＝０として示される。同様に、座標（ｘ１，ｙ１）〜（ｘｐ，ｙｑ）の各符号データは、図１０のように示される。
【００４０】
次に、映像コンテンツに二次元コードの二値画像を合成するとする。なお、映像コンテンツのどの位置にどのような大きさの二次元コードの二値画像を合成しても良いが、ここでは、説明の簡単のために、映像コンテンツの左上の座標（ｘ１，ｙ１）と、二次元コードの二値画像の左上の座標（ｘ１，ｙ１）とを揃えて合成するものとする。
【００４１】
図１１及び図１２は、本発明の第１の実施形態に係る情報提供システムにおいて映像コンテンツと二次元コードの二値画像とを合成したときの関係を示す説明図である。映像コンテンツの大きさは、図５に示したように、（ｍ×ｎ）画素であり、二次元コードの二値画像の大きさは、図８に示したように、（ｐ×ｑ）画素である。よって、左上の座標（ｘ１，ｙ１）を揃えて、映像コンテンツと二次元コードの二値画像とを合成すると、図１１に示すように、座標（ｘ１，ｙ１）〜（ｘｍ，ｙｎ）のうち、（ｘ１，ｙ１）〜（ｘｐ，ｙｑ）の部分が二次元コードの合成領域となる。図１２に示すように、（ｘ１，ｙ１）〜（ｘｐ，ｙｑ）の部分の画素には、二次元コードの二値画像に基づく符号データが合成される。なお、図１２中の符号データの欄では、二次元コードの合成領域以外では、「ＮＡ」と記載されている。二次元コードの二値画像に基づく符号データが合成される領域では、二値画像の符号データのうちの一方では、色差値に時間軸方向の色相の揺らぎの周波数成分を付加するような加工が施され、他方の符号データには、そのような加工は施されない。より具体的には、本実施形態では、符号データが「１」（白）の場合には、色差値Ｃｒに対して、所定の振幅の時間軸方向の色相の揺らぎとなる周波数成分が付加される。勿論、符号データが「０」（黒）の場合に、色差値Ｃｒに対して、所定の振幅の時間軸方向の色相の揺らぎとなる周波数成分を付加しても良い。また、色差値Ｃｒではなく、色差値Ｃｂに、所定の振幅の時間軸方向の色相の揺らぎとなる周波数成分を付加しても良い。
【００４２】
例えば、座標（ｘ１，ｙ１）の画素データは、図１２に示すように、符号データ「１」が合成される。よって、色差値Ｃｒに、Ａｓｉｎ（ωｔ）で示すように、時間とともに振幅Ａで角速度ωで変化するような色相の揺らぎとなる周波数成分を付加する。すなわち、符号データ「１」が合成される座標（ｘ１，ｙ１）の画素データ（Ｙ，Ｃｒ，Ｃｂ）は、以下のように加工する。
【００４３】
Ｙ＝Ｙ＿（ｘ１，ｙ１）
Ｃｒ＝Ｃｒ＿（ｘ１，ｙ１）＋Ａｓｉｎ（ωｔ）
Ｃｂ＝Ｃｂ＿（ｘ１，ｙ１）
【００４４】
符号データ「１」が合成される座標（ｘ２，ｙ１）の画素データ（Ｙ，Ｃｒ，Ｃｂ）についても、同様に、以下のように、色差データＣｒにＡｓｉｎ（ωｔ）を付加するように、加工する。
【００４５】
Ｙ＝Ｙ＿（ｘ２，ｙ１）
Ｃｒ＝Ｃｒ＿（ｘ２，ｙ１）＋Ａｓｉｎ（ωｔ）
Ｃｂ＝Ｃｂ＿（ｘ２，ｙ１）
【００４６】
座標（ｘ３，ｙ１）の画素データ（Ｙ，Ｃｒ，Ｃｂ）については、符号データが「０」（黒）なので、加工は行わない。
【００４７】
Ｙ＝Ｙ＿（ｘ３，ｙ１）
Ｃｒ＝Ｃｒ＿（ｘ３，ｙ１）
Ｃｂ＝Ｃｂ＿（ｘ３，ｙ１）
【００４８】
なお、二次元コードの合成領域以外（符号データがＮＡとなる領域）では、加工は行わない。
【００４９】
このように、本実施形態では、二値画像の符号データが「１」となる画素では、色差値Ｃｒに、時間とともに振幅Ａで角速度ωで変化するような周波数成分を付加する。色相の揺らぎとなる周波数成分は、数Ｈｚ程度の低い周波数である。これにより、色差値Ｃｒに周波数揺らぎ成分を付加すると、色相が時間とともに変化していく。
【００５０】
一般に、人間の目には、細かな輝度の変化には敏感であるが、色相の変化は認識しずらい。更に、数Ｈｚ程度のゆっくりした色相の揺らぎ成分は、人間の目には、殆ど認識できない。このため、映像データに付加した二次元コードの二値画像は、人間の目には、殆ど、認識できない。
【００５１】
次に、二次元コードの二値画像のデータを復号する場合の処理について説明する。前述したように、符号データが「１」となる画素では、色差値Ｃｒに、時間とともに振幅Ａで角速度ωで変化するような色相の揺らぎとなる周波数成分が付加されている。この色相の揺らぎとなる周波数成分は、撮像データの色差値Ｃｒの時間軸方向の周波数成分をフーリエ変換することにより検出できる。より具体的には、撮像画像を所定時間蓄積し、撮像画像のフレームをサンプリングの定理を満たす範囲で所定の時間毎にスライスし、各画素毎に色差値Ｃｒの変化を示すテーブルを作成し、この各画素毎の色差値ＣｒをＦＦＴ（Fast Fourier Transform）演算し、所定の周波数成分が存在するか否かを判定する。
【００５２】
図１３は、本発明の第１の実施形態に係る情報提供システムにおいて二次元コードの二値画像のデータを復号する場合の処理の説明図である。ディスプレイ装置２０に映し出される映像コンテンツの画面を携帯情報処理装置３０のカメラ機能で撮影することにより、各画素毎のデータが取得される。この撮像データは、ＹＣｒＣｂのデータである。
【００５３】
ディスプレイ装置２０に映し出される映像コンテンツの画面が撮影されたら、撮像データの中から、色差値Ｃｒのみを抽出する。この色差値Ｃｒが図１３に示すようなデータであったとする。
【００５４】
なお、ここでは、座標（ｘｘ１，ｙｙ１）〜（ｘｘｍ，ｙｙｎ）はカメラ部３４の撮像画素の座標である。ディスプレイ装置２０に映し出される映像コンテンツの座標（ｘ１，ｙ１）〜（ｘｍ，ｙｎ）と、カメラ部３４の撮像画素の座標（ｘｘ１，ｙｙ１）〜（ｘｘｍ，ｙｙｎ）とは異なっていても良いが、ここでは、説明を簡単とするため、映像コンテンツの座標（ｘ１，ｙ１）〜（ｘｍ，ｙｎ）とカメラ部３４の撮像画素の座標（ｘｘ１，ｙｙ１）〜（ｘｘｍ，ｙｙｎ）とは同様であるとして説明する。
【００５５】
また、この例では、色差値Ｃｒのデータとして、時間ｔ１から時間ｔｓまでに所定時間毎にｓ個のデータが切り出されて取得されている。例えば、座標（ｘｘ１，ｙｙ１）では、時間ｔ１の色差データのデータＣｒ＿（ｘｘ１，ｙｙ１）＿ｔ１から、時間ｔｓの色差データのデータＣｒ＿（ｘｘ１，ｙｙ１）＿ｔｓまでの間に、所定時間毎にｓ個の色差データが取得されている。
【００５６】
撮像データの中から、色差値Ｃｒのみが抽出されたら、各画素毎に、時間ｔ１から時間ｔｓまでの色差値をフーリエ変換し、時間軸方向に、所定の周波数成分が検出されたか否かが判定される。所定の周波数成分が現れた場合には、復号データは「１」（白）となる。所定の周波数成分が現れない場合には、復号データは「０」（黒）となる。
【００５７】
図１４及び図１５は、本発明の第１の実施形態に係る情報提供システムにおいて色差値Ｃｒによる色相の変化の一例を示すグラフである。例えば、座標（ｘｘ１，ｙｙ１）の画素において、時間ｔ１から時間ｔｓまでの色差データＣｒ＿（ｘｘ１，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ１，ｙｙ１）＿ｔｓが図１４（Ａ）に示すように変化していたとする。この色差データＣｒ＿（ｘｘ１，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ１，ｙｙ１）＿ｔｓの時間軸方向の周波数成分をフーリエ変換により検出すると、図１４（Ｂ）に示すように、所定の周波数成分（Ａｓｉｎ（ωｔ）の成分（周波数ｆ１で示す））が現れる。このように、所定の周波数成分が現れた場合には、復号データは「１」となる。
【００５８】
これに対して、座標（ｘｘ３，ｙｙ１）では、時間ｔ１から時間ｔｓまでの色差データＣｒ＿（ｘｘ３，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ３，ｙｙ１）＿ｔｓの値が図１５（Ａ）に示すように変化していたとする。この色差データＣｒ＿（ｘｘ３，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ３，ｙｙ１）＿ｔｓの時間軸方向の周波数成分をフーリエ変換で検出すると、図１５（Ｂ）に示すように、殆どがＤＣ（直流）成分となり、所定の周波数成分（周波数ｆ１で示す）は現れない。このように、所定の周波数成分が現れない場合には、復号データは「０」となる。
【００５９】
なお、図１４では、色差データの変化はゆっくりで、その周波数成分は、符号「１」の二値データを付加したことによるＡｓｉｎ（ωｔ）の成分（周波数ｆ１で示す）だけである。図１５では、色差データの変化は殆どなく、その周波数成分は殆どＤＣ成分である。これは、ディスプレイ装置２０に映し出される映像コンテンツが静止画であるためである。本発明は、映像コンテンツが動画であっても、同様に適用できる。
【００６０】
図１６及び図１７は、本発明の第１の実施形態に係る情報提供システムにおいて色差値Ｃｒによる色相の変化の他の例を示すグラフである。図１６及び図１７は、映像コンテンツが動画の場合である。
【００６１】
例えば、座標（ｘｘ１，ｙｙ１）の画素において、時間ｔ１から時間ｔｓまでの色差データＣｒ＿（ｘｘ１，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ１，ｙｙ１）＿ｔｓが図１６（Ａ）に示すように変化していたとする。図１６（Ａ）に示すように、色差データは複雑に変化するが、これは、映像コンテンツが動画であることと、符号「１」の二値データでＡｓｉｎ（ωｔ）の成分を付加したことによる。この色差データＣｒ＿（ｘｘ１，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ１，ｙｙ１）＿ｔｓの時間軸方向の周波数成分をフーリエ変換により検出すると、図１６（Ｂ）に示すように、各種の周波数成分が検出され、その中に、所定の周波数成分（Ａｓｉｎ（ωｔ）の成分（周波数ｆ１で示す））が現れる。このように、所定の周波数成分が現れた場合には、復号データは「１」となる。
【００６２】
これに対して、座標（ｘｘ３，ｙｙ１）では、時間ｔ１から時間ｔｓまでの色差データＣｒ＿（ｘｘ３，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ３，ｙｙ１）＿ｔｓの値が図１７（Ａ）に示すように変化していたとする。図１７（Ａ）に示すように、色差データは複雑に変化するが、これは、映像コンテンツが動画であることによる。この色差データＣｒ＿（ｘｘ３，ｙｙ１）＿ｔ１〜Ｃｒ＿（ｘｘ３，ｙｙ１）＿ｔｓの時間軸方向の周波数成分をフーリエ変換で検出すると、図１７（Ｂ）に示すように、各種の周波数成分が検出されるが、その中に、所定の周波数成分（Ａｓｉｎ（ωｔ）の成分（周波数ｆ１で示す））は含まれない。このように、所定の周波数成分が現れない場合には、復号データは「０」となる。このように、本実施形態では、映像コンテンツは、静止画であっても動画出あっても良い。
【００６３】
図１８及び図１９は、本発明の第１の実施形態に係る情報提供システム１での処理を示すフローチャートである。まず、情報の送信側から説明する。
【００６４】
（ステップＳ１）ユーザは、映像出力装置１０の入力操作部１６を操作して、ディスプレイ装置２０に表示する映像コンテンツを選択する。映像コンテンツは、例えば、広告コンテンツの画像である。映像コンテンツとしては、静止画でも良いし、動画でも良い。
【００６５】
（ステップＳ２）映像コンテンツが選択されると、映像出力装置１０の制御部１１は、選択された映像コンテンツ２の中の所定フレームの画像を選択し、その大きさ（解像度）情報を取得する。
【００６６】
（ステップＳ３）次に、映像出力装置１０の制御部１１は、全座標の画素の色差値を取得する。
【００６７】
（ステップＳ４）次に、ユーザは、映像出力装置１０の入力操作部１６を操作して、二値画像を埋め込むための、ディスプレイ装置２０上の位置座標と、所定の周波数成分を色差データに付加するための時間を決定する。二値画像を埋め込む位置座標は、ディスプレイ装置２０の表示領域からはみ出ないようにする必要があるが、画面の中央か右上か等を決めれば良い。また、所定の周波数成分を付加するための時間は、ディスプレイ装置２０のフレーム周波数との関係から求めることができる。
【００６８】
（ステップＳ５）映像出力装置１０の制御部１１は、ステップＳ３で取得したデータ群の中から、例えば左上の座標から右下の座標の順に、色差データＣｂの値を抽出する。
【００６９】
（ステップＳ６）映像出力装置１０の制御部１１は、二次元コード等の二値画像のデータが「１」か「０」かを判定する。二値画像のデータが「１」の場合には（ステップＳ６：Ｙｅｓ）、処理をステップＳ７に進め、二値画像のデータが「０」の場合には（ステップＳ６：Ｎｏ）、処理をステップＳ８に進める。
【００７０】
（ステップＳ７）二値画像データが「１」の場合は、映像出力装置１０の制御部１１は、座標の色差値に対して所定の周波数成分を付加する。二値画像データが「０」の場合には、元の色差値を変更する必要がないため、ステップＳ７はスキップすることとなる。
【００７１】
（ステップＳ８）映像出力装置１０の制御部１１は、全画素について二値画像の埋め込みが完了したかを判定する。全ての画素の処理が完了したら（ステップＳ８：Ｙｅｓ）、処理を終了する。全ての画素の処理が完了していなければ（ステップＳ８：Ｎｏ）、処理をステップＳ９に進める。
【００７２】
（ステップＳ９）映像出力装置１０の制御部１１は、次の画素に処理対象を映して、処理をステップＳ４に戻す。そして、全画素について処理が完了するまで、ステップＳ４〜Ｓ７の処理を繰り返す。
【００７３】
次に、Ｓ１０〜Ｓ１５までの二値画像の処理について説明する。
（ステップＳ１０）ユーザは、二次元コードに含める情報を選択する。例えば、この例では、プル型の検索連動型広告とするためのＵＲＬを選択する。この段階では、まだＵＲＬは文字情報である。
【００７４】
（ステップＳ１１）映像出力装置１０の制御部１１は、ステップＳ１２で選択された情報を二次元コード等の二値画像に変換する。これにより、ＵＲＬの文字情報が、二値画像に変換されたこととなる。
【００７５】
（ステップＳ１２）映像出力装置１０の制御部１１は、二次元コードの二値画像を映像コンテンツの画像に埋め込むために、二値画像の大きさ（解像度）情報を取得する。
【００７６】
（ステップＳ１３）映像出力装置１０の制御部１１は、二次元コードの二値画像の各画素が白であるか黒であるかにより、「１」又は「０」の二値データを取得する。この例では、白＝「１」、黒＝「０」として説明しているが、白＝「０」、黒＝「１」としても良い。
【００７７】
（ステップＳ１４）映像出力装置１０の制御部１１は、ステップＳ１３から、データ（「１」か「０」かの二値）の値を取得する。
【００７８】
（ステップＳ１５）映像出力装置１０の制御部１１は、取得したデータが、「１」か「０」かを、ステップＳ６の処理に通知する。
【００７９】
以下ステップＳ６以降の処理で、二値画像のデータが「１」の場合には、色差値に所定の周波数成分を付加し、二値画像のデータが「０」の場合には、色差値をそのままにして、各画素に、二値画像データを合成していく。
【００８０】
次に、情報の受信側の処理について説明する。
（ステップＳ２０）ユーザは、携帯情報処理装置３０のカメラ部３４で、ディスプレイ装置２０に表示されるコンテンツ画像を動画で撮影する。この撮影画面は、動画ファイルとして、携帯情報処理装置３０のデータ記憶部３２に保存される。
【００８１】
（ステップＳ２１）携帯情報処理装置３０の制御部３１は、データ記憶部３２に保存されたコンテンツ画像の動画ファイルから所定時間ごとにスライスしたものを作成する。
【００８２】
（ステップＳ２２）携帯情報処理装置３０の制御部３１は、スライスした各フレームの画像データから、各座標の色差値を取得する。これにより、時間毎に変化する各座標の色差値のテーブルができることになる。
【００８３】
（ステップＳ２３）携帯情報処理装置３０の制御部３１は、各座標毎に色差値と時間パラメータのデータ列を作成する。
【００８４】
（ステップＳ２４）次に、携帯情報処理装置３０の制御部３１は、ステップＳ２３で作成した、時間と色差値のデータ列をフーリエ変換する。
【００８５】
（ステップＳ２５）次に、携帯情報処理装置３０の制御部３１は、色差値のデータ列のフーリエ変換値から、所定の周波数成分が検出されるたか否かを判定する。もし、情報送信側でこの座標に所定の周波数および既定の振幅で、画素データを変化させていた場合は、フーリエ変換することで、所定の周波数成分が検出されることとなる。また、情報送信側で、画素データを変化させていなかった場合は、所定の周波数成分が検出されないこととなる。周波数成分がある場合には、処理をステップＳ２６に進め、周波数成分がない場合には、処理をステップＳ２７に進める。
【００８６】
（ステップＳ２６）色差値に所定の周波数成分がある場合には、符号データは「１」であると判定でき、この座標は白と判定することができる。
【００８７】
（ステップＳ２７）一方、色差値に所定の周波数成分が無い場合には、符号データは「０」であると判定でき、この座標は黒と判定することができる。
【００８８】
（ステップＳ２８）携帯情報処理装置３０の制御部３１は、その座標が白か黒かを判定して２値画像を復号する。
【００８９】
（ステップＳ２９）携帯情報処理装置３０の制御部３１は、全画素に対して判定が終わったか否かを判定する。全画素に対して判定が終われば（ステップＳ２９：Ｙｅｓ）、ステップＳ３０に処理を進める。全画素に対して判定が終わっていなければ（ステップＳ２９：Ｎｏ）、ステップＳ３１に処理を進める。
【００９０】
（ステップＳ３０）携帯情報処理装置３０の制御部３１は、判定された符号に基いて、二次元符号の二値画像を画面上に展開して配列し直し、これにより白と黒の二値画像が求められたこととなる。
【００９１】
（ステップＳ３１）携帯情報処理装置３０の制御部３１は、次の画素の判定処理に移り、ステップＳ２２に戻る。ステップＳ２２からＳ２９の処理を繰り返す。
【００９２】
なお、上述の実施形態では、二値画像の「０」か「１」に応じて、ＹＣｒＣｂ信号の色差値Ｃｒに所定の周波数成分を付加しているが、勿論、色差値Ｃｂに所定の周波数成分を付加しても良い。
【００９３】
また、二値画像の「０」か「１」に応じて、ＹＣｒＣｂ信号の輝度値Ｙｒに所定の周波数成分を付加しても良い。
【００９４】
また、三原色信号ＲＧＢのうちのＲ信号、Ｇ信号、又はＢ信号のうちの何れか若しくはその組み合わせに、二値画像の「０」か「１」に応じて、所定の周波数成分を付加しても良い。
【００９５】
また、上述の実施形態では、二次元コードを二値画像としてコンテンツ画像に合成しているが、勿論、一次元バーコードを二値画像としてコンテンツ画像に合成しても良い。また、文字画像や絵の画像を二値画像としてコンテンツ画像に合成しても良い。
【００９６】
また、情報受信側は、更に、復号された二値画像のエラー訂正を行うようにしても良い。
【００９７】
映像コンテンツの二値画像を埋め込むエリアの輝度が最小値、もしくはＲＧＢの色信号が最小値の時には、色差信号を既定の周波数にて変動させても、下側に変動させることができない。このため、下側に変動させることができるように、埋め込むエリアの輝度を持ち上げる、またはＲＧＢ色信号を持ち上げる機能を設けても良い。また、映像コンテンツの二値画像を埋め込むエリアの輝度が最大値、もしくはＲＧＢの色信号が最大値の時には、色差信号を既定の周波数にて変動させても、上側に変動させることができないため、上側に変動させることができるように、埋め込むエリアの輝度を下げる、またはＲＧＢ色信号を下げる機能を設けても良い。
【００９８】
図２０は、本発明の第１の実施形態に係る情報提供システムの機能に基づくブロック図である。図２０に示すように、本発明の第１の実施形態に係る情報提供システムは、所望の情報を含む二値画像を映像コンテンツに合成して表示する情報送信側１０１と、情報送信側１０１の表示画面を解析して二値画像に含まれる情報を取得する情報受信側１０２とからなる情報提供システムであって、情報送信側１０１は、符号判定部１１１と、周波数成分合成部１１２と、表示部１１３とを備え、情報受信側１０２は、撮像部１２１と、画素データ取得部１２２と、周波数成分解析部１２３と、二値画像復号部１２４とを備える。
【００９９】
符号判定部１１１は、映像コンテンツの画面上に合成した二値画像の符号を画素毎に判定する。周波数成分合成部１１２は、二値画像の符号に応じて映像コンテンツの画素データに対して各画素毎に時間軸方向の所望の周波数成分を付加する。表示部１１３は、二値画像が合成された映像コンテンツを表示する。
【０１００】
撮像部１２１は、表示部１１３に表示される画像を撮像する。画素データ取得部１２２は、撮像部１２１で撮像された画像から画素データを取得する。周波数成分解析部１２３は、画素データ取得部１２２から取得された画素データ中に所望の周波数成分が含まれているか否かを画素毎に解析する。二値画像復号部１２４は、周波数成分解析部１２３の解析結果から、二値画像の符号を復号する。
【０１０１】
なお、情報提供システム１の全部または一部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【０１０２】
以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【符号の説明】
【０１０３】
１０…映像出力装置，２０…ディスプレイ装置，３０…携帯情報処理装置，２，１０１…情報送信側，３，１０２…情報受信側，１１１…符号判定部，１１２…周波数成分合成部，１１３…表示部，１２１…撮像部，１２２…画素データ取得部，１２３…周波数成分解析部，１２４…二値画像復号部
【図１】
2018182589.tif 000003
【図２】
2018182589.tif 000004
【図３】
2018182589.tif 000005
【図４】
2018182589.tif 000006
【図５】
2018182589.tif 000007
【図６】
2018182589.tif 000008
【図７】
2018182589.tif 000009
【図８】
2018182589.tif 000010
【図９】
2018182589.tif 000011
【図１０】
2018182589.tif 000012
【図１１】
2018182589.tif 000013
【図１２】
2018182589.tif 000014
【図１３】
2018182589.tif 000015
【図１４】
2018182589.tif 000016
【図１５】
2018182589.tif 000017
【図１６】
2018182589.tif 000018
【図１７】
2018182589.tif 000019
【図１８】
2018182589.tif 000020
【図１９】
2018182589.tif 000021
【図２０】
2018182589.tif 000022