(57)【要約】【課題】電子アルバムの静止画に関連付けられている情報を見つける関連情報検出装置，検出方法，検出プログラムおよびそのプログラムを格納した記録媒体を提供する。【解決手段】フォトブック30の一の静止画Ｉ２が第１の領域として撮像され，その静止画Ｉ２の特徴が第１の特徴として検出される。第１の領域と異なる第２の領域が撮像され，その特徴が第２の特徴として検出される。検出された第１の特徴と第２の特徴との二つの特徴から，一の静止画に関連付けられた動画が見つけられる。一の静止画Ｉ２だけでなく，第２の領域の情報が得られなければ，一の静止画に関連付けられた動画が得られないので，フォトブック30の所有者のみが静止画に関連付けられた動画を見ることができるようになる。【選択図】図３
2015192258.tif 000002
【特許請求の範囲】
【請求項１】
静止画表示紙媒体に表わされている複数の静止画のうち，一の静止画を含む第１の領域および上記静止画表示紙媒体のうち上記第１の領域と異なる第２の領域を撮像する撮像手段，
上記撮像手段によって撮像された上記第１の領域から上記一の静止画を特定する第１の特徴を検出する第１の特徴検出手段，
上記撮像手段によって撮像された上記第２の領域から，上記第２の領域を特定する第２の特徴を検出する第２の特徴検出手段，ならびに
上記第１の特徴検出手段によって検出された上記第１の特徴と上記第２の特徴検出手段によって検出された上記第２の特徴とから上記一の静止画に関連付けられている情報を見つけ出す指令を出力する指令手段，
を備えた静止画の関連情報検出装置。
【請求項２】
上記撮像手段は，
上記一の静止画と異なる他の静止画を撮像するものであり，
上記第２の特徴検出手段は，
上記撮像手段によって撮像された上記他の静止画から上記第２の特徴を検出するものである，
請求項１に記載の静止画の関連情報検出装置。
【請求項３】
上記撮像手段は，
上記静止画表示紙媒体に表わされている複数の静止画を除く静止画外領域を撮像するものであり，
上記第２の特徴検出手段は，
上記撮像手段によって撮像された静止画外領域から上記第２の特徴を検出するものである，
請求項１または２に記載の静止画の関連情報検出装置。
【請求項４】
上記静止画外領域は，余白領域である，
請求項３に記載の静止画の関連情報検出装置。
【請求項５】
上記撮像手段は，
上記静止画外領域を撮像するものであり，
上記第２の特徴検出手段は，
上記撮像手段によって撮像された上記静止画外領域の幅，面積，色および形状ならびに上記静止画外領域に表わされているテクスチャ，文字および図形のうち少なくとも一つにもとづいて上記第２の特徴を検出するものである，
請求項３に記載の静止画の関連情報検出装置。
【請求項６】
上記第２の領域には電子透かしが埋め込まれており，上記電子透かしから上記第２の特徴を検出するものである，
請求項１から５のうち，いずれか一項に記載の静止画の関連情報検出装置。
【請求項７】
上記指令手段は，
上記第１の特徴検出手段によって検出された上記第１の特徴と上記第２の特徴検出手段によって検出された上記第２の特徴とから上記一の静止画に関連付けられている動画および動画のチャプターの開始時間の少なくとも一方を見つけ出す指令を出力するものである，
請求項１から６のうち，いずれか一項に記載の静止画の関連情報検出装置。
【請求項８】
上記第１の領域は，上記撮像手段における撮像範囲の一部の領域であり，
上記第２の領域は，上記撮像範囲に相当する領域であり，
上記撮像手段は，上記第１の領域と上記第２の領域とを同時に撮像するものであり，
上記一部の領域を表示画面に表示する表示装置，
をさらに備えた請求項１から７のうち，いずれか一項に記載の静止画の関連情報検出装置。
【請求項９】
上記静止画表示紙媒体のうち，上記撮像手段によって撮像された領域の画像を表示画面に表示する表示装置，および
上記表示装置の上記表示画面に表示されている画像のうち，一部の領域を指定する指定手段をさらに備え，
上記第１の特徴検出手段は，
上記指定手段により指定された領域を上記第１の領域と決定し，上記第１の特徴を検出するものである，
請求項１から７のうち，いずれか一項に記載の静止画の関連情報検出装置。
【請求項１０】
上記静止画表示紙媒体のうち，上記撮像手段によって撮像された領域の画像を表示画面に表示する表示装置，および
上記表示画面に表示されている画像上に，上記第１の領域を特定するマークを表示させる表示制御手段，
をさらに備えた請求項１から９のうち，いずれか一項に記載の静止画の関連情報検出装置。
【請求項１１】
上記静止画表示紙媒体は，
複数の静止画が表わされている一枚の用紙または１頁に１または複数の静止画が表わされている，複数頁から構成されるフォトブックである，
請求項１から10のうち，いずれか一項に記載の静止画の関連情報検出装置。
【請求項１２】
撮像手段が，静止画表示紙媒体に表わされている複数の静止画のうち，一の静止画を含む第１の領域および上記静止画表示紙媒体のうち上記第１の領域と異なる第２の領域を撮像し，
第１の特徴検出手段が，上記撮像手段によって撮像された上記第１の領域から上記一の静止画を特定する第１の特徴を検出し，
第２の特徴検出手段が，上記撮像手段によって撮像された上記第２の領域から，上記第２の領域を特定する第２の特徴を検出し，
指令手段が，
上記第１の特徴検出手段によって検出された上記第１の特徴と上記第２の特徴検出手段によって検出された上記第２の特徴とから上記一の静止画に関連付けられている情報を見つけ出す指令を出力する，
静止画の関連情報検出方法。
【請求項１３】
静止画の関連情報検出装置のコンピュータを制御するプログラムであって，
静止画表示紙媒体に表わされている複数の静止画のうち，一の静止画を含む第１の領域および上記静止画表示紙媒体のうち上記第１の領域と異なる第２の領域を撮像させ，
撮像された上記第１の領域から上記一の静止画を特定する第１の特徴を検出させ，
撮像された上記第２の領域から，上記第２の領域を特定する第２の特徴を検出させ，
検出された上記第１の特徴と上記第２の特徴とから上記一の静止画に関連付けられている情報を見つけ出す指令を出力する，静止画の関連情報検出装置のコンピュータを制御するコンピュータが読み取り可能なプログラム。
【請求項１４】
請求項13に記載のプログラムを格納した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は，静止画の関連情報検出装置，検出方法，検出プログラムならびにそのプログラムを格納した記録媒体に関する。
【背景技術】
【０００２】
近年，ディジタル・カメラ，スマートフォンなどにより動画の撮影が容易となってきており，その撮影機会も増えている。撮影された動画は記録メディアなどに保存されるが，必要な場合に見つけるのは難しい。
【０００３】
また，動画の中から印象的なコマを選び出し，写真やアルバムに出力することができるようになってきている。このようにして作成されたアルバムを見た際には，写真の元となっている動画を閲覧したいというニーズがある。このために，ディジタル・カメラ，携帯電話，スマートフォン，タブレット端末などのように撮影機能と表示機能とをもつ装置においてアルバムに含まれている写真を撮影することにより，その写真に関連した動画を再生するものが考えられている（特許文献１）。また，携帯端末のカメラ機能により映し出された撮影画像と関連する情報を携帯端末の画面に表示させるものもある（特許文献２）。さらに，紙に印刷されている印画画像から印画認証コードを紙に印画しておき，紙に印刷された印画内容を検証できるようにするものもある（特許文献３）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開2013-92903号公報
【特許文献２】特開2013-222406号公報
【特許文献３】特開2006-340215号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載のものでは，静止画に埋め込まれた電子透かしを読み取り，動画を再生するが，電子透かしのコードは人工的に生成されたものであるから，コードだけからは閲覧を制限できない。特許文献２に記載のものでは，撮影画像を特定するインデックスを撮影画像から自動的に抽出しているが，その撮像画像が得られるだけで関連する情報が表示されてしまう。特許文献１，２に記載のものでは，特定のユーザにのみ静止画に関連づけられた情報が得られるようにするセキュリティは低い。また，特許文献３に記載のものでは，印画内容の真偽を検出するに過ぎず，印画画像に関連付けられている情報を見つけ出すことは考えられていないどころか，そのような情報を印画画像に関連づけることすら考えられていない。
【０００６】
この発明は，静止画表示紙媒体を有しているユーザが，その静止画表示紙媒体に含まれている静止画に関連付けられている情報を見つけられるようにすることを目的とする。
【課題を解決するための手段】
【０００７】
この発明による静止画の関連情報検出装置は，静止画表示紙媒体に表わされている複数の静止画のうち，一の静止画を含む第１の領域および静止画表示紙媒体のうち第１の領域と異なる第２の領域を撮像する撮像手段，撮像手段によって撮像された第１の領域から一の静止画を特定する第１の特徴を検出する第１の特徴検出手段，撮像手段によって撮像された第２の領域から，第２の領域を特定する第２の特徴を検出する第２の特徴検出手段，ならびに第１の特徴検出手段によって検出された第１の特徴と第２の特徴検出手段によって検出された第２の特徴とから一の静止画に関連付けられている情報を見つけ出す指令を出力する指令手段を備えていることを特徴とする。
【０００８】
この発明は，静止画の関連情報検出方法も提供している。すなわち，この方法は，撮像手段が，静止画表示紙媒体に表わされている複数の静止画のうち，一の静止画を含む第１の領域および静止画表示紙媒体のうち第１の領域と異なる第２の領域を撮像し，第１の特徴検出手段が，撮像手段によって撮像された第１の領域から一の静止画を特定する第１の特徴を検出し，第２の特徴検出手段が，撮像手段によって撮像された第２の領域から，第２の領域を特定する第２の特徴を検出し，指令手段が，第１の特徴検出手段によって検出された第１の特徴と第２の特徴検出手段によって検出された第２の特徴とから一の静止画に関連付けられている情報を見つけ出す指令を出力するものである。
【０００９】
この発明は，静止画の関連情報を検出するプログラムおよびそのプログラムを格納した記録媒体も提供している。
【００１０】
撮像手段は，たとえば，一の静止画と異なる他の静止画を撮像するものであり，第２の特徴検出手段は，たとえば，撮像手段によって撮像された他の静止画から第２の特徴を検出するものである。
【００１１】
撮像手段は，静止画表示紙媒体に表わされている複数の静止画を除く静止画外領域を撮像してもよい。この場合，第２の特徴検出手段は，撮像手段によって撮像された静止画外領域から第２の特徴を検出するものとなろう。
【００１２】
静止画外領域は，たとえば，余白領域である。
【００１３】
撮像手段が，静止画外領域を撮像する場合，第２の特徴検出手段は，撮像手段によって撮像された静止画外領域の幅，面積，色および形状ならびに静止画外領域に表わされているテクスチャ，文字および図形のうち少なくとも一つにもとづいて第２の特徴を検出することができる。
【００１４】
第２の領域に電子透かしが埋め込まれている場合には，電子透かしから第２の特徴を検出することができる。
【００１５】
指令手段は，たとえば，第１の特徴検出手段によって検出された第１の特徴と第２の特徴検出手段によって検出された第２の特徴とから一の静止画に関連付けられている動画および動画のチャプターの開始時間の少なくとも一方を見つけ出す指令を出力するものである。
【００１６】
第１の領域は，たとえば，撮像手段における撮像範囲の一部の領域であり，第２の領域は，たとえば，撮像範囲に相当する領域である。この場合，撮像手段は，第１の領域と第２の領域とを同時に撮像し，一部の領域を表示画面に表示する表示装置をさらに備えることが好ましい。
【００１７】
静止画表示紙媒体のうち，撮像手段によって撮像された領域の画像を表示画面に表示する表示装置，および表示装置の表示画面に表示されている画像のうち，一部の領域を指定する指定手段をさらに備えてもよい。この場合，第１の特徴検出手段は，指定手段により指定された領域を第１の領域と決定し，第１の特徴を検出するものとなろう。
【００１８】
静止画表示紙媒体のうち，撮像手段によって撮像された領域の画像を表示画面に表示する表示装置，および表示画面に表示されている画像上に，第１の領域を特定するマークを表示させる表示制御手段をさらに備えてもよい。
【００１９】
静止画表示紙媒体は，たとえば，複数の静止画が表わされている一枚の用紙または１頁に１または複数の静止画が表わされている，複数頁から構成されるフォトブックである。
【発明の効果】
【００２０】
この発明によると，静止画表示紙媒体に表わされている複数の静止画のうち，一の静止画を含む第１の領域および第１の領域と異なる第２の領域が撮像される。第１の領域から，一の静止画を特定する第１の特徴が検出され，第２の領域から第２の領域を特定する第２の特徴が検出される。検出された第１の特徴と第２の特徴とから，一の静止画に関連付けられている情報を見つけ出す指令が，たとえば，その情報を格納しているデータベースにアクセス可能なサーバに出力される。第１の特徴と第２の特徴とから，一の静止画に関連付けられている情報が見つけられ，見つけられた情報が関連情報検出装置に与えられる。関連情報検出装置において，一の静止画に関連付けられている情報が得られる。第１の領域と第２の領域とを撮像しなければ，一の静止画に関連付けられている情報が得られないので，一の静止画のみが得られていたとしても，一の静止画に関連付けられている情報が得られない。静止画表示紙媒体を有しているユーザが，一の静止画に関連付けられている情報を見つけることができるようになる。
【図面の簡単な説明】
【００２１】
【図１】静止画の関連情報検出システムの概要である。
【図２】スマートフォンの電気的構成を示すブロック図である。
【図３】フォトブックの一例である。
【図４】フォトブックの一例である。
【図５】静止画特徴テーブルの一例である。
【図６】静止画外特徴テーブルの一例である。
【図７】特徴インデックス・テーブルの一例である。
【図８】スマートフォンの処理手順を示すフローチャートである。
【図９】サーバの処理手順を示すフローチャートである。
【図１０】スマートフォンの表示画面の一例である。
【図１１】スマートフォンの表示画面の一例である。
【図１２】フォトブックの一例である。
【図１３】フォトブックの一例である。
【図１４】スマートフォンの表示画面の一例である。
【図１５】スマートフォンの表示画面の一例である。
【発明を実施するための形態】
【００２２】
図１は，この発明の実施例を示すもので，静止画の関連情報検出システムの概要である。
【００２３】
静止画の関連情報検出システムには，インターネット（他のネットワークでもよい）を介して互いに通信可能なスマートフォン（関連情報検出装置）１とサーバ20とが含まれている。サーバ20には，後述するようにフォトブックに含まれている静止画に関連付けられている動画（動画に限らず，静止画に関連付けられている情報であればよい）が複数格納されている。
【００２４】
図２は，スマートフォン１の電気的構成を示すブロック図である。
【００２５】
スマートフォンの全体の動作は，ＣＰＵ２によって統括される。
【００２６】
スマートフォン１には，カメラ８および表示装置６が含まれている。表示装置６の表示画面上にはタッチ・パネル７が設けられている。また，スマートフォン１には，データを記憶するメモリ３，メモリ・カード５とアクセスするためのメモリ・カード・インターフェイス４，インターネットに接続するための通信装置９およびパーソナル・コンピュータなどと接続するためのインターフェイス10も含まれている。さらに，スマートフォン１には，通話のためのマイクロフォン12，スピーカ13および音声制御装置11も含まれている。
【００２７】
メモリ・カード５には，後述する動作を制御するプログラムが格納されている。そのようなメモリ・カード５がメモリ・カード・インターフェイス４と接続され，メモリ・カード５に格納されているプログラムがスマートフォン１に読み取られる。読み取られたプログラムがスマートフォン１にインストールされることにより，後述する動作が行われる。プログラムは，メモリ・カード５のような記録媒体に格納されていなくとも，インターネットを介して通信装置９によってダウンロードするようにしてもよい。
【００２８】
図３および図４は，フォトブック（紙製アルバム，静止画表示紙媒体）30の一例である。
【００２９】
図３はフォトブック30の第１頁と第２頁を示し，図４はフォトブック30の第３頁と第４頁とを示している。フォトブック30には，第５頁以降もあるが，省略されている。もっとも，第４頁までのフォトブックでもよい。
【００３０】
図３を参照して，第１頁および第２頁には，静止画（写真）Ｉ１からＩ５が表わされている。これらの静止画Ｉ１からＩ５の間を静止画外領域と呼ぶこととする。第１頁から第２頁では，静止画外領域ａ１からａ４が図示されている。静止画外領域ａ１，ａ３およびａ４は余白（余白領域）であり，静止画外領域ａ２には，「春の一日」という文字およびハート・マークが表示されている。静止画外領域ａ１は，鎖線で示すように静止画Ｉ１，Ｉ２およびＩ３で囲まれている領域である。その他の静止画外領域も同様に規定される。静止画Ｉ２およびＩ５のそれぞれの左上および右下には，枠（マーク）31が表わされている。この枠31は，囲まれている静止画（図３の場合Ｉ２およびＩ５）に関連する動画が情報データベース21に格納されていることを示している。もっとも枠31は必ずしも必要ではない。静止画Ｉ２およびＩ５は，関連する動画を構成する１コマの静止画であるが，必ずしも動画を構成する１コマの静止画がフォトブック30に表わされていなくともよい。動画を構成する静止画ではない静止画に関連付けられて動画が情報データベース21に格納されていてもよい。
【００３１】
図４を参照して，第３頁および第４頁には，静止画Ｉ６からＩ９が表わされている。静止画Ｉ６からＩ９の間には静止画外領域ａ５からａ８が存在している。静止画Ｉ７およびＩ８の左上および右下には上述した枠31が設けられている。静止画Ｉ７およびＩ８に関連した動画があることが分る。
【００３２】
図５は，静止画特徴テーブルの一例である。
【００３３】
静止画特徴テーブルは，フォトブック30に含まれている静止画の特徴を静止画ごとに格納するものである。静止画特徴テーブルは，情報データベース21に格納されている。
【００３４】
静止画Ｉ１の特徴として，暗点の位置（静止画Ｉ１の左上を原点とした場合の座標位置），輝点の位置，エッジの位置，階調値，色ヒストグラム，空間周波数，勾配ヒストグラム，電子透かしなどが静止画特徴テーブルに格納されている。同様に，静止画Ｉ１以外の静止画の特徴も静止画特徴テーブルに格納されている。
【００３５】
図６は，静止画外特徴テーブルの一例である。
【００３６】
静止画外特徴テーブルは，フォトブックに含まれている静止画外領域の特徴を静止画外領域ごとに格納するものである。静止画外特徴テーブルも情報データベース21に格納されている。
【００３７】
静止画外領域ａ１の特徴として，領域の幅，領域の面積，色，形状，電子透かしなどが静止画外特徴テーブルに格納されている。領域の幅は，図３において，フォトブック30の左端から静止画Ｉ２の左端までの距離を示し，領域の面積および形状は，図３に示したように鎖線で囲まれている部分の面積および形状である。静止画外領域ａ１に電子透かしが埋め込まれている場合には，そのデータが静止画外特徴テーブルに格納される。
【００３８】
静止画外領域ａ２には，上述した図３から分るように，「春の一日」およびハート・マークが含まれているから，それらの文字，文字の色，図形，図形の色等も静止画外特徴テーブルに格納されている。
【００３９】
図７は，特徴インデックス・テーブルの一例である。
【００４０】
特徴インデックス・テーブルに格納されている特徴インデックスは，静止画を特定するものであり，静止画に関連付けられている動画も管理するものである。特徴インデックスは，図５および図６に格納されている異なる領域の特徴に対応付けられている。異なる領域は少なくとも一つの静止画領域を含むもので，２つ以上の静止画領域でもよいし，一つの静止画領域と一つ以上の静止画外領域でもよい。異なる領域の特徴から，特徴インデックスが見つけられ，見つけられた特徴インデックスから静止画およびその静止画に関連付けられている動画が見つけられる。たとえば，静止画Ｉ１の暗点の位置および静止画外領域ａ１の幅という二つの特徴が与えられると，その特徴によって静止画Ｉ１を特定する特徴インデックスＩｘ11が見つけられる。それらの二つの特徴の組合わせが特徴インデックスＩｘ11ということもできる。見つけられた特徴インデックスＩｘ11から静止画Ｉ１および動画Ｍ１が見つけられる。その他の静止画および動画についても同様である。異なる静止画に同じ動画が関連づけられていてもよいし，動画の一部を動画として静止画に関連づけられていてもよい。
【００４１】
図８は，スマートフォン１の処理手順を示すフローチャート，図９は，サーバ20の処理手順を示すフローチャートである。
【００４２】
これらの処理手順は，図３および図４に示すフォトブック30に含まれている静止画に関連付けられている動画を見つけ出し，スマートフォン１において再生するものである。
【００４３】
この実施例では，静止画Ｉ２に関連付けられている動画を再生するものとする。
【００４４】
スマートフォン１のユーザは，フォトブック30のうち，一の静止画Ｉ２を含む第１の領域を，スマートフォン１を用いてカメラ（撮像手段）８で撮像する（図８ステップ41）。すると，第１の領域を表わす画像がスマートフォン１のメモリ３に一時的に記憶される。図10は，一の静止画Ｉ２を含む第１の領域をスマートフォン１で撮像している様子を示している。スマートフォン１のユーザは，一の静止画Ｉ２の全体がスマートフォン１の表示画面14の全体に写るようにカメラ・アングルを決定し，撮像する。もっとも，必ずしも位置の静止画Ｉ２の全体が表示画面14の全体に写るようにカメラ・アングルを決定して撮像しなくともよい。
【００４５】
つづいて，スマートフォン１のユーザは，フォトブック30のうち第１の領域とは異なる第２の領域（第１の領域と異なる頁でも同じ頁でもよい。第１の領域と完全に一致していなければよい。）をカメラ（撮像手段）８で撮像し，（図８ステップ41），シャッタを押す。すると，第２の領域を表わす画像がスマートフォン１のメモリ３に一時的に記憶される。図11は，第２の領域をスマートフォン１で撮像している様子を示している。この例では，静止画Ｉ４（一の静止画と異なる他の静止画）を含む領域が第２の領域として撮像される。静止画Ｉ４がスマートフォン１の表示画面14に表示される。
【００４６】
つづいて，撮像された第１の領域から，一の静止画Ｉ２を特定する第１の特徴がＣＰＵ２によって検出される（第１の特徴検出手段）（図８ステップ42）。例えば，一の静止画Ｉ２の暗点の位置および輝点の位置がＣＰＵ２によって検出される。さらに，撮像された第２の領域の静止画Ｉ４から，第２の領域を特定する第２の特徴がＣＰＵによって検出される（第２の特徴検出手段）（図８ステップ43）。たとえば，第２の領域に含まれている静止画Ｉ４のエッジの位置および階調値が検出される。一の静止画Ｉ２と同様に，静止画Ｉ４の暗点の位置および輝点の位置が検出されてもよい。
【００４７】
検出された第１の特徴および第２の特徴ならびに関連情報検出コマンド（一の静止画に関連付けられている情報を見つけ出す指令）がスマートフォン１からサーバ20に出力（送信）される（図８ステップ44）（指令手段）。この例では，静止画Ｉ２に動画が関連付けられており，かつ静止画Ｉ４には動画が関連付けられていないから，静止画Ｉ２の関連情報検出コマンドがスマートフォン１からサーバ20に送信される。
【００４８】
スマートフォン１から送信された検出された第１の特徴および第２の特徴ならびに関連情報検出コマンドがサーバ20において受信されると（図９ステップ51でＹＥＳ），第１の特徴および第２の特徴から第１の領域が表わす一の静止画を特定する特徴インデックスが検出される（図９ステップ52）。上述したように，一の静止画Ｉ２の暗点の位置および輝点の位置が第１の特徴として検出され，静止画Ｉ４のエッジの位置および階調値が第２の特徴として検出された場合には，第１の特徴の暗点の位置および起点の位置をもつ領域は静止画Ｉ２であることが静止画特徴テーブルから分り，第２の特徴のエッジの位置および階調値をもつ領域は静止画Ｉ４であることが静止画特徴テーブルから分る。そして，第１の特徴の暗点の位置および起点の位置をもち，かつ第２の特徴のエッジの位置および階調値をもつ組み合わせに対応する特徴インデックスが特徴インデックス・テーブルから検出される（図９ステップ52）。この例の場合，静止画Ｉ２およびＩ４が撮像されているが，動画が関連付けられているのは静止画Ｉ２であるから，静止画Ｉ４を特定する特徴インデックスは見つからず（特徴インデックス・テーブルに格納されていない），静止画Ｉ２を特定する特徴インデックスが見つけられる。
【００４９】
見つけられた特徴インデックスに対応する静止画（この場合静止画Ｉ２）が見つけられ，その静止画に関連付けられている動画（この場合動画Ｍ１）が情報データベース21から検出される（図９ステップ53）。検出された動画がサーバ20からスマートフォン１に送信（図９ステップ54）。
【００５０】
サーバ20から送信された動画がスマートフォン１において受信されると（図８ステップ45でＹＥＳ），その動画がスマートフォン１において再生される（図８ステップ46）。
【００５１】
一の静止画Ｉ４を含む第１の領域を撮像して，その一の静止画の特徴から一の静止画に関連付けられている動画を再生するのではなく，第１の領域と異なる第２の領域を撮像し，一の静止画の特徴と第２の領域の特徴とから，一の静止画に関連付けられている動画を見つけ出しているので，一の静止画だけ得られていても一の静止画に関連付けられている動画を再生できない。一の静止画と第２の領域との両方の領域を撮像することができて初めて，一の静止画に関連付けられている動画を再生できる。フォトブック30自体を所有していなければ，フォトブックの静止画に関連付けられている動画を再生できないので，フォトブック30自体が動画再生の権限をもつことを証明するものとなる。
【００５２】
図12および図13は，フォトブック30の一例であり，図３および図４に対応している。
【００５３】
上述の実施例では，第２の領域として一の静止画と異なる静止画が撮像されているが，一の静止画が含まれていても，第１の領域と異なる第２の領域が撮像されればよい。
【００５４】
たとえば，図12の鎖線61で示すように，一の静止画Ｉ２を含むが，第１の領域よりも大きな領域を第２の領域として撮像してもよい。この場合には，一の静止画Ｉ２の周りの静止画外領域ａ１，ａ２，ａ３などから第２の領域の特徴量が検出される。たとえば，静止画外領域ａ２の幅，領域ａ３の幅などが第２の領域の特徴量として検出される。第２の領域の特徴量として検出された特徴量と一の静止画の特徴量との組み合わせに対応する特徴インデックスが，上述のように特徴インデックス・テーブルから見つけられ，静止画および動画が見つけられることとなる。
【００５５】
また，図12の鎖線62で示すように，文字，図形などが含まれている静止画外領域ａ２を，第２の領域として撮像してもよい。この場合には，静止画外領域ａ２に含まれている文字，図形などが第２の領域の特徴量として検出される。この場合も，第２の領域の特徴量として検出された特徴量と一の静止画の特徴量との組み合わせに対応する特徴インデックスが，上述のように特徴インデックス・テーブルから見つけられ，静止画および動画が見つけられることとなる。
【００５６】
さらに，図13に鎖線63で示すように，一の静止画Ｉ２と異なる頁（見開き頁に無い頁）の領域を第２の領域として撮像するようにしてもよい。
【００５７】
上述のように，静止画外領域の幅，面積，色，形状，静止画外領域に表わされているテクスチャ，文字，図形の少なくとも一つにもとづいて第２の特徴量を検出するようにしてもよいし，電子透かしが埋め込まれている領域を撮像して，電子透かしから第２の特徴量を検出するようにしてもよい。また，静止画外領域が第２の領域として撮像される場合，領域ａ２のように文字などが表わされている領域に限らず，余白領域を第２の領域として撮像されるようにしてもよいのはいうまでもない。
【００５８】
さらに，図12に鎖線61で示す領域を撮像範囲に相当する領域とした場合に，図10に示すように，その撮像範囲の一部の領域をスマートフォン１の表示画面14に表示するようにしてもよい。この場合，表示画面14に表示される領域が一の画像を含む第１の領域となり，撮像範囲が第２の領域となる。また，第１の領域と第２の領域とを同時に撮像することとなる。ユーザは，一の静止画Ｉ２を第１の領域として撮像して表示画面14に表示しながら，一の静止画（第１の領域）よりも広い第２の領域を第１の領域と同時に撮像できることとなる。このようにして得られた第１の領域と第２の領域とから第１の特徴量および第２の特徴量が検出され，上述のように動画が見つけられるのはいうまでもない。
【００５９】
図14は，変形例を示すもので，スマートフォン１の表示画面14の一例である。
【００６０】
スマートフォン１によってフォトブックの第１頁および第２頁が撮像されている。表示装置６の表示画面14には，その第１頁および第２頁の画像が表示されている。スマートフォン１のユーザは，指70を使って，関連付けられている動画が見たい静止画上のタッチ・パネル（指定手段）をタッチする（一部の領域を指定）。すると，指定された静止画が第１の領域と決定され，第１の特徴量がＣＰＵ２によって検出される。この場合，指定された領域の周りの領域（鎖線64で示す領域）を自動的に第２の領域と決定するようにしてもよい。決定された第２の領域から第２の特徴量が検出される。
【００６１】
図15は，スマートフォン１の表示画面14を示すもので，変形例を示している。
【００６２】
表示画面14には，四つの指定枠15が表示されている。この指定枠15に一致するように，動画が関連付けられている静止画が撮像される。すると，一致した静止画が一の静止画として第１の領域から第１の特徴量が検出される。このように，表示画面に表示されている画像上に第１の領域を特定する枠15（マーク）をＣＰＵ２（表示制御手段）によって表示させるようにしてもよい。第２の領域は，改めて撮像してもよいし，上述したように，枠15の周りの領域としてもよい。
【００６３】
上述した実施例では，１または複数の静止画が表わされている複数の頁を有するフォトブックについてのものであったが，ポストカードのように１枚の用紙に複数の静止画が表わされているものについても同様の処理を行うことができるのはいうまでもない。
【００６４】
また，上述した静止画特徴テーブル，静止画外特徴テーブル，特徴インデックス・テーブル，動画がスマートフォン１に格納されていれば，サーバ20とアクセスすることなく，静止画に関連付けられている動画をスマートフォン１で再生できる。また，スマートフォンに限らず，他の携帯電話，タブレット端末等でも上述した処理を行うことができる。
【符号の説明】
【００６５】
１  スマートフォン（関連情報検出装置）
２  ＣＰＵ（第１の特徴量検出手段，第２の特徴量検出手段，表示制御手段）
８  カメラ（撮像手段）
９  通信装置（指令手段）
【図１】
2015192258.tif 000003
【図２】
2015192258.tif 000004
【図３】
2015192258.tif 000005
【図４】
2015192258.tif 000006
【図５】
2015192258.tif 000007
【図６】
2015192258.tif 000008
【図７】
2015192258.tif 000009
【図８】
2015192258.tif 000010
【図９】
2015192258.tif 000011
【図１０】
2015192258.tif 000012
【図１１】
2015192258.tif 000013
【図１２】
2015192258.tif 000014
【図１３】
2015192258.tif 000015
【図１４】
2015192258.tif 000016
【図１５】
2015192258.tif 000017