(57)【要約】      （修正有）【課題】複数の動画像の中から、処理対象動画像を自動で選択し、選択された処理対象動画像の情報を出力することができる画像処理装置等を提供する。【解決手段】画像処理装置では、動画像解析部が、画像解析がまだ行われていない解析対象動画像の画像解析を行って、その解析結果を含む第２解析結果データを生成する。類似データ検出部が、ユーザが所有する静止画像の画像解析を行って生成された第１解析結果データと第２解析結果データとを照合して、第１解析結果データとの類似度が基準値以上である第２解析結果データを類似解析結果データとして検出する。動画像情報出力部が、解析対象動画像の中から、類似解析結果データを有する解析対象動画像を処理対象動画像として選択し、選択された処理対象動画像の情報を出力する。【選択図】図３
2016181808.tif 000002
【特許請求の範囲】
【請求項１】
ユーザが所有する複数の動画像の中から画像処理の対象となる処理対象動画像を選択し、前記選択された処理対象動画像の情報を出力する画像処理装置であって、
前記複数の動画像の中に含まれる、画像解析がまだ行われていない動画像である解析対象動画像の画像解析を行って、前記画像解析の解析結果を含む、前記解析対象動画像の第２解析結果データを生成する動画像解析部と、
前記ユーザが所有する静止画像の画像解析を行って生成された第１解析結果データと、前記動画像解析部により生成された第２解析結果データとを照合して、前記第１解析結果データと前記第２解析結果データとの類似度を算出し、前記第１解析結果データとの類似度が基準値以上または前記基準値未満である第２解析結果データを類似解析結果データとして検出する類似データ検出部と、
前記解析対象動画像の中から、前記類似データ検出部により検出された類似解析結果データを有する解析対象動画像を前記処理対象動画像として選択し、前記選択された処理対象動画像の情報を出力する動画像情報出力部とを備えることを特徴とする画像処理装置。
【請求項２】
前記動画像解析部は、前記第１解析結果データに含まれる、前記静止画像に行われた画像解析のうちの少なくとも１つの画像解析を行って、前記第２解析結果データを生成するものである請求項１に記載の画像処理装置。
【請求項３】
前記動画像解析部は、前記解析対象動画像からフレーム画像を抽出し、前記抽出されたフレーム画像の画像解析を行って、前記解析対象動画像の第２解析結果データを生成するものである請求項１または２に記載の画像処理装置。
【請求項４】
前記動画像解析部は、一定のフレーム数毎に前記フレーム画像の画像解析を行うものである請求項３に記載の画像処理装置。
【請求項５】
前記動画像解析部は、撮影順に前記フレーム画像の画像解析を行って、前記第１解析結果データと類似する第２解析結果データが得られた時点で前記画像解析を終了するものである請求項３に記載の画像処理装置。
【請求項６】
前記動画像解析部は、前記ユーザが前記画像処理装置を使用していない間に前記画像解析を行うものである請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記類似データ検出部は、顔の数が一致するか否か、同一人物が含まれているか否か、撮影日付が一致するもしくは一定範囲内か否か、撮影位置が一致するもしくは一定範囲内か否か、アノテーション情報の同一キーワードを含むか否かのうちの少なくとも１つについて、前記第１解析結果データと前記第２解析結果データとの類似度を算出するものである請求項１〜６のいずれか１項に記載の画像処理装置。
【請求項８】
前記類似データ検出部は、顔の数が一致するか否か、同一人物が含まれているか否か、撮影日付が一致するもしくは一定範囲内か否か、撮影位置が一致するもしくは一定範囲内か否か、アノテーション情報の同一キーワードを含むか否かのうちの少なくとも２つについて重み付けを行って、前記第１解析結果データと前記第２解析結果データとの類似度を算出するものである請求項１〜６のいずれか１項に記載の画像処理装置。
【請求項９】
前記動画像情報出力部は、前記処理対象動画像の情報を、前記処理対象動画像の画像処理を行う外部処理装置へネットワークを介して送信するものである請求項１〜８のいずれか１項に記載の画像処理装置。
【請求項１０】
前記動画像情報出力部は、前記処理対象動画像の情報として、前記処理対象動画像のリストを前記外部処理装置へ送信するものである請求項９に記載の画像処理装置。
【請求項１１】
前記動画像情報出力部は、前記処理対象動画像の情報として、前記処理対象動画像そのものを前記外部処理装置へ送信するものである請求項９に記載の画像処理装置。
【請求項１２】
前記動画像情報出力部は、前記処理対象動画像の情報として、前記処理対象動画像そのものへのリンク情報を前記外部処理装置へ送信するものである請求項９に記載の画像処理装置。
【請求項１３】
前記動画像情報出力部は、前記ユーザが前記画像処理装置を使用していない間に前記処理対象動画像の情報を前記外部処理装置へ送信するものである請求項９〜１２のいずれか１項に記載の画像処理装置。
【請求項１４】
前記外部処理装置は、前記ユーザが、前記動画像情報出力部から受信された処理対象動画像を使用する前に、前記使用するために必要な画像処理が前記処理対象動画像に行われるように制御する動画像処理制御部を備える請求項９〜１３のいずれか１項に記載の画像処理装置。
【請求項１５】
前記外部処理装置は、前記静止画像の画像解析を行って、前記第１解析結果データを生成する静止画像解析部を備え、
前記画像処理装置は、さらに、前記ユーザが前記画像処理装置を使用していない間に、前記第１解析結果データを前記静止画像解析部からネットワークを介して取得する第１解析結果データ取得部を備える請求項９〜１４のいずれか１項に記載の画像処理装置。
【請求項１６】
さらに、前記静止画像の画像解析を行って、前記第１解析結果データを生成する静止画像解析部を備える請求項１〜１４のいずれか１項に記載の画像処理装置。
【請求項１７】
前記静止画像解析部は、顔検出、顔認識、撮影日付情報の取得、撮影位置情報の取得、および、アノテーション解析を含む複数種類の画像解析のうちの少なくとも１つの画像解析を行うものである請求項１５または１６に記載の画像処理装置。
【請求項１８】
前記静止画像解析部は、複数種類の画像解析を順次行って、前記複数種類の画像解析のうちの少なくとも１つの解析結果が得られた時点で、前記少なくとも１つの解析結果を含む第１解析結果データを生成するものである請求項１７に記載の画像処理装置。
【請求項１９】
前記静止画像解析部は、複数種類の画像解析を順次行って、前記複数種類の画像解析の全ての解析結果が得られた時点で、前記全ての解析結果を含む第１解析結果データを生成するものである請求項１７に記載の画像処理装置。
【請求項２０】
前記静止画像は、前記ユーザが過去にプリントの注文を行った静止画像である請求項１〜１９のいずれか１項に記載の画像処理装置。
【請求項２１】
ユーザが所有する複数の動画像の中から画像処理の対象となる処理対象動画像を選択し、前記選択された処理対象動画像の情報を出力する画像処理方法であって、
動画像解析部が、前記複数の動画像の中に含まれる、画像解析がまだ行われていない動画像である解析対象動画像の画像解析を行って、前記画像解析の解析結果を含む、前記解析対象動画像の第２解析結果データを生成するステップと、
類似データ検出部が、前記ユーザが所有する静止画像の画像解析を行って生成された第１解析結果データと、前記動画像解析部により生成された第２解析結果データとを照合して、前記第１解析結果データと前記第２解析結果データとの類似度を算出し、前記第１解析結果データとの類似度が基準値以上または前記基準値未満である第２解析結果データを類似解析結果データとして検出するステップと、
動画像情報出力部が、前記解析対象動画像の中から、前記類似データ検出部により検出された類似解析結果データを有する解析対象動画像を前記処理対象動画像として選択し、前記選択された処理対象動画像の情報を出力するステップとを含むことを特徴とする画像処理方法。
【請求項２２】
請求項２１に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラム。
【請求項２３】
請求項２１に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザが所有する複数の動画像の中から画像処理の対象となる処理対象動画像を選択し、選択された処理対象動画像の情報を出力する画像処理装置、画像処理方法、プログラムおよび記録媒体に関するものである。
【背景技術】
【０００２】
昨今、スマートフォンやタブレット端末等の携帯端末の普及が急速に進んでおり、携帯端末で撮影される静止画像（写真）の枚数が増えているが、それと同時に動画像が撮影される機会も多くなっている。現在では、動画像を利用したサービスとして、非特許文献１に示すように、写真等のプリント物を携帯端末で撮影（キャプチャ）すると、プリント物に関連付けられた動画像を、ＡＲ（拡張現実）技術を使って、携帯端末の画面上に再生（ＡＲ再生）するシステムが提供されている。
【０００３】
このシステムでは、以下の（１）〜（６）のステップで、プリントに関連付けられた動画像のＡＲ再生が行われる。
【０００４】
（１）ユーザにより、携帯端末上で動作する専用のアプリケーションを使用して、複数の動画像の中からプリントに使用したい動画像が選択されると、選択された動画像がサーバへアップロードされる。
（２）サーバにおいて、携帯端末からアップロードされた動画像から代表シーンのフレーム画像が抽出される。
（３）サーバで抽出された代表シーンのフレーム画像が携帯端末へダウンロードされる。
（４）ユーザにより、携帯端末の画面に一覧表示された代表シーンのフレーム画像の中からプリントしたいフレーム画像が選択され、プリントの注文が行われる。
（５）サーバにおいて、ユーザにより注文された代表シーンのフレーム画像のプリントが生成され、このフレーム画像に関連付けられた動画像がＡＲ再生用に画像処理される。
（６）ユーザにより、配達されたプリントが携帯端末で撮影（キャプチャ）されると、このプリントに関連付けられたＡＲ再生用の動画像がサーバからダウンロードされ、ＡＲ技術により、携帯端末の画面にＡＲ再生される。
【０００５】
このシステムでは、ユーザが、上記（１）のステップにおいて、複数の動画像の中からプリントに使用したい動画像を選択する必要があるが、多くの動画像を所有していて、撮影内容を既に忘れている場合も多く、動画像を選択するのが非常に困難であるという問題があった。
【０００６】
また、ＡＲ技術により携帯端末の画面に再生される動画像は、オリジナルの動画像のファイルを所有していない第三者であっても再生できる必要がある。そのため、プリントを注文したユーザによりサーバへアップロードされた動画像のファイルをストリーミング再生（サーバからダウンロードしながら再生）する仕様となっている。すなわち、このシステムを利用するためには、動画像をサーバへアップロードすることが必須となることを意味している。
【０００７】
しかし、動画像は一般的に静止画像と比較してファイルサイズが大きいために、例えば、上記（１）のステップにおいて、携帯端末からサーバへのアップロードに時間が掛かり、ユーザの待ち時間が発生する。長い待ち時間は、このシステムを利用する際のモチベーションの低下に繋がるため、このシステムを利用する場合のユーザの待ち時間を短縮することがサービス拡大の課題となっている。
【０００８】
ここで、本発明に関連性のある先行技術文献として、携帯電話端末等のユーザ端末を遠隔地に設置されたサポート端末から操作する遠隔操作システムに関する特許文献１、携帯通信端末で撮影された動画データをウェブサーバに記憶し、携帯通信端末に配信する動画配信サーバに関する特許文献２、キーフレーム抽出装置等に関する特許文献３、複数の画像を入力した時の画像補正パラメータを決定するプリント方法等に関する特許文献４などがある。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】再表第２０１２／０３２７６２号公報
【特許文献２】特開２００８−１９３１９７号公報
【特許文献３】特開２０１２−１０５２０５号公報
【特許文献４】特開２０１３−１８６６７９号公報
【非特許文献】
【００１０】
【非特許文献１】"動画フォト！サービス"、[online]、富士フイルム株式会社、[平成２７年２月９日検索]、インターネット＜URL: http://fujifilm.jp/personal/print/photo/dogaphoto/＞
【発明の概要】
【発明が解決しようとする課題】
【００１１】
本発明の第１の目的は、従来技術の問題点を解消し、複数の動画像の中から処理対象動画像を自動で選択し、選択された処理対象動画像の情報を出力することができる画像処理装置、画像処理方法、プログラムおよび記録媒体を提供することにある。
本発明の第２の目的は、第１の目的に加えて、処理対象動画像を携帯端末から外部処理装置へ送信する際の待ち時間をユーザに与えることのない画像処理装置、画像処理方法、プログラムおよび記録媒体を提供することにある。
【課題を解決するための手段】
【００１２】
上記目的を達成するために、本発明は、ユーザが所有する複数の動画像の中から画像処理の対象となる処理対象動画像を選択し、選択された処理対象動画像の情報を出力する画像処理装置であって、
複数の動画像の中に含まれる、画像解析がまだ行われていない動画像である解析対象動画像の画像解析を行って、画像解析の解析結果を含む、解析対象動画像の第２解析結果データを生成する動画像解析部と、
ユーザが所有する静止画像の画像解析を行って生成された第１解析結果データと、動画像解析部により生成された第２解析結果データとを照合して、第１解析結果データと第２解析結果データとの類似度を算出し、第１解析結果データとの類似度が基準値以上または基準値未満である第２解析結果データを類似解析結果データとして検出する類似データ検出部と、
解析対象動画像の中から、類似データ検出部により検出された類似解析結果データを有する解析対象動画像を処理対象動画像として選択し、選択された処理対象動画像の情報を出力する動画像情報出力部とを備えることを特徴とする画像処理装置を提供するものである。
【００１３】
ここで、動画像解析部は、第１解析結果データに含まれる、静止画像に行われた画像解析のうちの少なくとも１つの画像解析を行って、第２解析結果データを生成するものであることが好ましい。
【００１４】
また、動画像解析部は、解析対象動画像からフレーム画像を抽出し、抽出されたフレーム画像の画像解析を行って、解析対象動画像の第２解析結果データを生成するものであることが好ましい。
【００１５】
また、動画像解析部は、一定のフレーム数毎にフレーム画像の画像解析を行うものであることが好ましい。
【００１６】
また、動画像解析部は、撮影順にフレーム画像の画像解析を行って、第１解析結果データと類似する第２解析結果データが得られた時点で画像解析を終了するものであることが好ましい。
【００１７】
また、動画像解析部は、ユーザが画像処理装置を使用していない間に画像解析を行うものであることが好ましい。
【００１８】
また、類似データ検出部は、顔の数が一致するか否か、同一人物が含まれているか否か、撮影日付が一致するもしくは一定範囲内か否か、撮影位置が一致するもしくは一定範囲内か否か、アノテーション情報の同一キーワードを含むか否かのうちの少なくとも１つについて、第１解析結果データと第２解析結果データとの類似度を算出するものであることが好ましい。
【００１９】
また、類似データ検出部は、顔の数が一致するか否か、同一人物が含まれているか否か、撮影日付が一致するもしくは一定範囲内か否か、撮影位置が一致するもしくは一定範囲内か否か、アノテーション情報の同一キーワードを含むか否かのうちの少なくとも２つについて重み付けを行って、第１解析結果データと第２解析結果データとの類似度を算出するものであることが好ましい。
【００２０】
また、動画像情報出力部は、処理対象動画像の情報を、処理対象動画像の画像処理を行う外部処理装置へネットワークを介して送信するものであることが好ましい。
【００２１】
また、動画像情報出力部は、処理対象動画像の情報として、処理対象動画像のリストを外部処理装置へ送信するものであることが好ましい。
【００２２】
また、動画像情報出力部は、処理対象動画像の情報として、処理対象動画像そのものを外部処理装置へ送信するものであることが好ましい。
【００２３】
また、動画像情報出力部は、処理対象動画像の情報として、処理対象動画像そのものへのリンク情報を外部処理装置へ送信するものであることが好ましい。
【００２４】
また、動画像情報出力部は、ユーザが画像処理装置を使用していない間に処理対象動画像の情報を外部処理装置へ送信するものであることが好ましい。
【００２５】
また、外部処理装置は、ユーザが、動画像情報出力部から受信された処理対象動画像を使用する前に、使用するために必要な画像処理が処理対象動画像に行われるように制御する動画像処理制御部を備えることが好ましい。
【００２６】
また、外部処理装置は、静止画像の画像解析を行って、第１解析結果データを生成する静止画像解析部を備え、
画像処理装置は、さらに、ユーザが画像処理装置を使用していない間に、第１解析結果データを静止画像解析部からネットワークを介して取得する第１解析結果データ取得部を備えることが好ましい。
【００２７】
さらに、静止画像の画像解析を行って、第１解析結果データを生成する静止画像解析部を備えることが好ましい。
【００２８】
また、静止画像解析部は、顔検出、顔認識、撮影日付情報の取得、撮影位置情報の取得、および、アノテーション解析を含む複数種類の画像解析のうちの少なくとも１つの画像解析を行うものであることが好ましい。
【００２９】
また、静止画像解析部は、複数種類の画像解析を順次行って、複数種類の画像解析のうちの少なくとも１つの解析結果が得られた時点で、少なくとも１つの解析結果を含む第１解析結果データを生成するものであることが好ましい。
【００３０】
また、静止画像解析部は、複数種類の画像解析を順次行って、複数種類の画像解析の全ての解析結果が得られた時点で、全ての解析結果を含む第１解析結果データを生成するものであることが好ましい。
【００３１】
また、静止画像は、ユーザが過去にプリントの注文を行った静止画像であることが好ましい。
【００３２】
また、本発明は、ユーザが所有する複数の動画像の中から画像処理の対象となる処理対象動画像を選択し、選択された処理対象動画像の情報を出力する画像処理方法であって、
動画像解析部が、複数の動画像の中に含まれる、画像解析がまだ行われていない動画像である解析対象動画像の画像解析を行って、画像解析の解析結果を含む、解析対象動画像の第２解析結果データを生成するステップと、
類似データ検出部が、ユーザが所有する静止画像の画像解析を行って生成された第１解析結果データと、動画像解析部により生成された第２解析結果データとを照合して、第１解析結果データと第２解析結果データとの類似度を算出し、第１解析結果データとの類似度が基準値以上または基準値未満である第２解析結果データを類似解析結果データとして検出するステップと、
動画像情報出力部が、解析対象動画像の中から、類似データ検出部により検出された類似解析結果データを有する解析対象動画像を処理対象動画像として選択し、選択された処理対象動画像の情報を出力するステップとを含むことを特徴とする画像処理方法を提供する。
【００３３】
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。
【００３４】
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【発明の効果】
【００３５】
本発明では、複数の動画像の中から、処理対象動画像が自動で選択され、選択された処理対象動画像の情報が外部処理装置へ出力される。これにより、本発明によれば、ユーザが、多くの動画像を所有し、撮影内容を既に忘れている場合であっても、ユーザの嗜好に合致する動画像を自動で選択することができるため、ユーザが動画像を選択する手間を省くことができる。
【００３６】
また、本発明では、ユーザが画像処理装置を使用していない間に、ユーザの嗜好に合致する動画像が外部処理装置へ送信され、動画像を使用するために必要な画像処理が行われる。これにより、本発明によれば、ユーザが動画像を使用する場合に、動画像が外部処理装置へ送信されるまでの待ち時間等が発生することがなくなり、システムを利用する際のモチベーションの低下を防ぐことができる。
【図面の簡単な説明】
【００３７】
【図１】本発明の画像処理装置の構成を表す一実施形態のブロック図である。
【図２】図１に示すサーバの構成を表す一実施形態のブロック図である。
【図３】図１に示す携帯端末の内部構成を表す一実施形態のブロック図である。
【図４】静止画像解析部の動作を表す一例のフローチャートである。
【図５】静止画像解析部の動画を表す別の例のフローチャートである。
【図６】第１解析結果データのフォーマットの一例を表す概念図である。
【図７】画像処理装置において、ＡＲコンテンツを生成し、選択画像の出力画像を出力する場合の動作を表す一例のフローチャートである。
【図８】（Ａ）〜（Ｅ）は、いずれも、携帯端末の表示部の表示画面を表す一例の概念図である。
【図９】画像処理装置において、ＡＲ再生用の動画像を生成し、再生表示する場合の動作を表す一例のフローチャートである。
【図１０】画像処理装置において、処理対象動画像を事前に処理する場合の動作を表す一例のフローチャートである。
【図１１】顔認識により同一人物が含まれる動画像をサーバへアップロードする場合の様子を表す一例の概念図である。
【図１２】顔認識により同一人物が含まれる動画像をサーバへアップロードする場合の図１１に続く様子を表す一例の概念図である。
【図１３】顔認識により同一人物が含まれる動画像をサーバへアップロードする場合の図１２に続く様子を表す一例の概念図である。
【図１４】顔認識により同一人物が含まれる動画像をサーバへアップロードする場合の図１３に続く様子を表す一例の概念図である。
【発明を実施するための形態】
【００３８】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像処理装置を詳細に説明する。
【００３９】
図１は、本発明の画像処理装置の構成を表す一実施形態のブロック図である。同図に示す画像処理装置１０は、ユーザが所有する複数の動画像の中から画像処理の対象となる処理対象動画像を選択し、選択された処理対象動画像の情報を出力するものであり、サーバ１２と、携帯端末１４と、プリンタ１６とを備えている。サーバ１２、携帯端末１４およびプリンタ１６は、インターネット等のネットワーク１８を介して互いに接続されている。
【００４０】
図２は、図１に示すサーバの構成を表す一実施形態のブロック図である。図２に示すサーバ１２は、動画像に対して画像処理を行う外部処理装置の一例となるものであり、コンテンツ生成部２０と、記憶部２２と、撮影画像解析部２４と、静止画像解析部２６と、管理マーカ特定部２８と、動画像処理部３０と、動画像処理制御部３２と、第１転送部３４とを備えている。
【００４１】
コンテンツ生成部２０は、動画像からフレーム画像を抽出し、動画像と、動画像から抽出されたフレーム画像の中から携帯端末１４のユーザにより選択されたフレーム画像である選択画像とが関連付けられたＡＲコンテンツを生成するものである。
【００４２】
ここで、動画像からフレーム画像を抽出する方法は限定されない。例えば、動画像から一定の時間間隔でフレーム画像を抽出してもよい。
【００４３】
あるいは、ＫＦＥ（Key Frame Extraction）技術を利用して、シーンの変わり目などのキーとなるフレーム画像を抽出してもよい。ＫＦＥでは、例えば、動画像の各々のフレーム画像を解析し、フレーム画像の色味、明るさ、ボケやブレ等を検出し、色味や明るさが大きく変わる前後のフレーム画像や、適正露出によりボケやブレがないフレーム画像が抽出される。
【００４４】
また、動画像において人物の顔の大きさや向き、顔の表情（笑顔、泣き顔等）を検出し、それらに基づいてフレーム画像を抽出してもよい。さらに、動画像に音声が含まれる場合には、音声が大きくなった時刻（タイムコード）の前後の動画像からフレーム画像を抽出してもよい。上述の方法で動画像からフレーム画像を抽出することで、動画像の代表的なシーンをフレーム画像として抽出することができる。
【００４５】
記憶部２２は、各種のデータを記憶するものである。記憶部２２には、例えば、後述するユーザが過去にプリントの注文を行った静止画像（静止画像およびフレーム画像）および第１解析結果データや、コンテンツ生成部２０により生成されたＡＲコンテンツ、つまり、選択画像またはその特定情報が、選択画像の管理マーカとして、動画像と関連付けて記憶される。
【００４６】
ここで、管理マーカとは、所定のアルゴリズムに基づいて静止画像の画像解析を行うことにより、静止画像から読み取られる画像の特徴量であり、例えば、静止画像に撮影された撮影対象のエッジ情報やエッジの位置情報等が含まれる。管理マーカは、静止画像そのものであってもよいし、静止画像を特定するための特定情報でもよい。静止画像の特定情報は、撮影画像から選択画像を特定することができる情報であれば、どのような情報であってもよい。
【００４７】
撮影画像解析部２４は、後述する撮影画像の画像解析を行って、撮影画像の管理マーカを得るものである。
【００４８】
静止画像解析部２６は、例えば、記憶部２２に記憶されている、ユーザが過去にプリントの注文を行った静止画像のように、ユーザが所有する静止画像の画像解析を行って、その解析結果を含む第１解析結果データを生成するものである。
静止画像解析部２６は、ユーザが過去にプリントの注文を行った静止画像か否かを、例えば、プリントの注文履歴から判別することができる。
【００４９】
静止画像解析部２６は、あらかじめ設定された画像解析の方法に従って、例えば、顔検出、顔認識、撮影日付情報の取得、撮影位置（ＧＰＳ）情報の取得、および、アノテーション情報の取得を含む複数種類の画像解析のうちの少なくとも１つの画像解析を行う。
【００５０】
ここで、顔検出は、静止画像に顔が含まれているか否か、何個の顔が含まれているか等を検出する処理、顔認識は、静止画像に含まれている人物が誰なのかを特定するために、顔のモデルデータを生成する処理であり、いずれも公知の解析処理である。
また、撮影日付情報および撮影位置情報は、静止画像のヘッダ情報（Ｅｘｉｆ情報）などのメタデータに含まれている情報である。
【００５１】
アノテーション情報は、静止画像に対してアノテーション解析を行うことにより取得される情報である。アノテーション解析とは、静止画像のシーンを解析する処理であり、アノテーション解析により静止画像のシーンが解析されると、その静止画像には、解析されたシーンに対応するアノテーション情報（アノテーションタグ）、例えば、赤ちゃん、旅行、結婚、子供、その他等のテーマに対応する情報が付与される。
【００５２】
静止画像解析部２６は、例えば、図４に示すように、複数種類の画像解析を順次行って、複数種類の画像解析のうちの少なくとも１つの解析結果が得られた時点で画像解析の処理を終了し、少なくとも１つの解析結果を含む第１解析結果データを生成してもよい。
【００５３】
図４の例では、まず、静止画像に対して顔検出が行われる。その結果、静止画像の中に顔が存在する場合には、例えば、顔の個数が１個であるという解析結果が得られた時点で画像解析の処理が終了される。
一方、静止画像の中に顔が存在しない場合には、次の画像解析が行われる。この例の場合には、以下順に、顔認識、撮影日付情報の取得、撮影位置情報の取得（図示省略）、アノテーション情報の取得（図示省略）を含む複数種類の画像解析が順次行われ、所望の解析結果が得られた時点で処理が終了される。
【００５４】
あるいは、静止画像解析部２６は、図５に示すように、複数種類の画像解析を順次行って、複数種類の画像解析の全ての解析結果が得られた時点で、全ての解析結果を含む第１解析結果データを生成してもよい。
【００５５】
図５の例では、顔検出、顔認識、撮影日付情報の取得、撮影位置情報の取得、アノテーション情報の取得を含む複数種類の画像解析が順次行われ、全ての解析結果が得られた時点で処理が終了される。
【００５６】
第１解析結果データは、静止画像解析部２６により行われた画像解析の結果、出力されるものであり、そのフォーマットはあらかじめ設定されているものとする。例えば、図６に示すように、画像解析内容とその解析結果が含まれているテキストデータのファイルでもよいし、あるいは、顔認識が実施された場合、顔のモデルデータ（所定の演算結果）のテキストデータまたはバイナリデータを含むファイルであってもよい。
【００５７】
管理マーカ特定部２８は、記憶部２２に記憶された選択画像の管理マーカの中から、撮影画像解析部２４により得られた撮影画像の管理マーカに対応する選択画像の管理マーカを特定管理マーカとして特定するものである。管理マーカ特定部２８は、例えば、撮影画像の管理マーカに基づいて、記憶部２２に記憶された選択画像の管理マーカを検索することにより、撮影画像の管理マーカに対応する選択画像の管理マーカを特定する。
【００５８】
動画像処理部３０は、特定管理マーカに関連付けられた関連動画像から、ＡＲ再生用の動画像を生成するものである。つまり、動画像処理部３０は、特定管理マーカ、すなわち、動画像から抽出されたフレーム画像の中からユーザにより選択されたフレーム画像またはその特定情報に基づいて、関連動画像からＡＲ再生用の動画像を生成する。
【００５９】
動画像処理部３０は、動画像のファイルサイズを小さくするために、例えば、動画像の解像度やビットレートを下げることにより、ファイルサイズが小さいＡＲ再生用の動画像を生成する。
【００６０】
動画像処理制御部３２は、ユーザが、動画像情報出力部５０から受信された処理対象動画像を使用する前に、使用するために必要な画像処理が処理対象動画像に行われるように制御するものである。
【００６１】
本実施形態の場合、動画像処理制御部３２は、コンテンツ生成部２０により、処理対象動画像からフレーム画像が抽出され、動画像処理部３０により、処理対象動画像からＡＲ再生用の動画像が生成されるように制御する。
【００６２】
第１転送部３４は、サーバ１２と携帯端末１４との間で、動画像、撮影画像、第１解析結果データなどを含む、各種のデータを転送するものである。
【００６３】
続いて、図３は、図１に示す携帯端末の内部構成を表す一実施形態のブロック図である。携帯端末１４は、ユーザが使用するスマートフォン、タブレット端末などであり、図３に示すように、画像撮影部３６と、入力部３８と、表示部４０と、制御部４２と、第１解析結果データ取得部４４と、動画像解析部４６と、類似データ検出部４８と、動画像情報出力部５０と、第２転送部５２とを備えている。
【００６４】
画像撮影部３６は、選択画像が出力された出力画像（ＡＲプリント）などを撮影（キャプチャ）して撮影画像を得るものである。
【００６５】
入力部３８は、ユーザにより入力される各種の指示を入力するためのものである。
表示部４０は、動画像等を再生して表示するものである。
本実施形態では、タッチパネル５４が、入力部３８および表示部４０を構成するものとする。
【００６６】
制御部４２は、画像撮影部３６により出力画像が撮影（キャプチャ）された場合に、撮影画像に基づいて生成されたＡＲ再生用の動画像が表示部４０に再生して表示されるように制御するものである。
ここで、制御部４２は、動画像を表示部４０に再生させる場合、ＡＲ技術を使用して再生（ＡＲ再生）させてもよいし、ＡＲ技術を使用せず再生（通常再生）させてもよい。制御部４２は、動画像をＡＲ再生させる場合、撮影された出力画像を表示部４０に表示し、表示部４０に表示された出力画像の表示部分において動画像が再生されるように制御する。また、制御部４２は、動画像を通常再生させる場合、表示部４０の全面ないし任意のサイズのウィンドウ内において動画像が再生されるように制御する。
【００６７】
第１解析結果データ取得部４４は、サーバ１２の静止画像解析部２６により生成された第１解析結果データを、ネットワーク１８を介して取得するものである。
【００６８】
第１解析結果データ取得部４４は、ユーザが画像処理装置１０を使用していない間、つまり、ユーザが携帯端末１４上で動作するアプリケーションを使用していない時、例えば、アプリケーションがバックグラウンドで待機している時に、第１解析結果データのダウンロードを開始してもよいし、あるいは、深夜から明け方までの、ユーザが画像処理装置１０を使用していないと考えられる、あらかじめ設定された時間に定期的に第１解析結果データのダウンロードを実施してもよい。
【００６９】
また、複数の第１解析結果データがある場合、第１解析結果データ取得部４４は、あらかじめ設定された取得方法に従って、例えば、サーバ１２から全ての第１解析結果データをダウンロードしたり、プリントの注文枚数が最も多い静止画像の第１解析結果データのみをダウンロードしたり、最後（最近）にプリントの注文が行われた第１解析結果データのみをダウンロードしたりすることができる。
【００７０】
また、静止画像解析部２６を、サーバ１２ではなく、携帯端末１４が備えていてもよい。この場合、第１解析結果データ取得部４４は不要である。
【００７１】
動画像解析部４６は、図示していない携帯端末１４の記憶部に記憶された、ユーザが所有する複数の動画像の中に含まれる、画像解析がまだ行われていない動画像である解析対象動画像の画像解析を行って、その解析結果を含む、解析対象動画像の第２解析結果データを生成するものである。
【００７２】
本実施形態の場合、動画像解析部４６は、解析対象動画像からフレーム画像を抽出し、抽出されたフレーム画像の画像解析を行って、解析対象動画像の第２解析結果データを生成する。
【００７３】
ここで、動画像解析部４６は、例えば、画像解析が行われた動画像に対して、画像解析が行われたことを表すフラグを設定することにより、画像解析が既に行われた動画像なのか、それとも、画像解析がまだ行われていない動画像なのかを識別することができる。
また、動画像解析部４６は、第１解析結果データを取得する場合と同様に、ユーザが画像処理装置を使用していない間に、フレーム画像の画像解析を行う。
【００７４】
動画像解析部４６は、静止画像解析部２６と同様に、あらかじめ設定された画像解析の方法に従って、例えば、顔検出、顔認識、撮影日付情報の取得、撮影位置情報の取得、アノテーション解析を含む各種の画像解析のうちの少なくとも１つを実施する。
動画像解析部４６は、例えば、第１解析結果データに含まれる、静止画像に行われた画像解析のうちの少なくとも１つの画像解析を行って、第２解析結果データを生成してもよい。このように、画像解析の処理を限定することにより、処理時間を短縮することができる。
【００７５】
例えば、第１解析結果データに顔検出の解析結果のみが含まれている場合、動画像解析部４６は、顔検出のみを実施し、撮影日付情報のみが含まれている場合には、動画像のヘッダ情報などのメタデータから撮影日付情報の取得のみを実施する。また、第１解析結果データに複数種類の解析結果が含まれている場合には、複数種類の解析結果に対応する複数種類の画像解析を順次実施してもよいし、そのうちの少なくとも１つの画像解析を実施してもよい。
【００７６】
また、動画像解析部４６は、あらかじめ設定されたフレーム画像の選択方法に従って、画像解析の処理時間の短縮のために、一定のフレーム数毎に、例えば、１０フレーム毎にフレーム画像の画像解析を行ってもよい。あるいは、撮影順にフレーム画像の画像解析を行って、第１解析結果データと類似する第２解析結果データが得られた時点で画像解析を終了してもよい。
【００７７】
類似データ検出部４８は、第１解析結果データ取得部４４により取得された第１解析結果データと、動画像解析部４６により生成された第２解析結果データとを照合して、第１解析結果データと第２解析結果データとの類似度を算出し、第１解析結果データとの類似度が基準値以上である第２解析結果データを類似解析結果データとして検出するものである。
【００７８】
第１解析結果データとの類似度が基準値以上である第２解析結果データを有する動画像は再び注文される可能性が高いと考えることができる。従って、第１解析結果データとの類似度が基準値以上である第２解析結果データを有する動画像がサーバ１２へアップロードされる動画像候補となる。また、第１解析結果データとの類似度が基準値以上である複数の第２解析結果データが存在する場合には、類似度、ファイルサイズ等に応じて、サーバ１２へ順次アップロードする優先順位を決めてもよい。
【００７９】
ここで、類似データ検出部４８は、あらかじめ設定された照合方法に従って、例えば、顔の数が一致するか否か、同一人物が含まれているか否か（モデルデータの比較により判別）、撮影日付が一致する（完全一致の他、年や月のみが異なる場合も含む）もしくは一定範囲内か否か、撮影位置が一致するもしくは一定範囲内か否か、アノテーション情報の同一キーワードを含むか否かのうちの少なくとも１つについて、第１解析結果データと第２解析結果データとの類似度を算出することができる。
【００８０】
また、類似データ検出部４８は、顔の数が一致するか否か、同一人物が含まれているか否か、撮影日付が一致するもしくは一定範囲内か否か、撮影位置が一致するもしくは一定範囲内か否か、アノテーション情報の同一キーワードを含むか否かのうちの少なくとも２つについて重み付けを行って、第１解析結果データと第２解析結果データとの類似度を算出してもよい。
【００８１】
また、類似度が同じ場合には、例えば、ファイルサイズが大きい動画像をサーバ１２へアップロードする優先順位が高くなるように決定してもよい。
【００８２】
なお、類似データ検出部４８は、動画像解析部４６により生成された第２解析結果データの中から、第１解析結果データとの類似度が基準値未満である第２解析結果データを類似解析結果データとして検出してもよい。逆に、第１解析結果データとの類似度が基準値未満である第２解析結果データを有する動画像が注文される可能性も高いと考えることができる。この場合、第１解析結果データとの類似度が基準値未満である第２解析結果データを有する動画像がサーバ１２へアップロードされる動画像候補となる。
【００８３】
動画像情報出力部５０は、解析対象動画像の中から、類似データ検出部４８により検出された類似解析結果データを有する解析対象動画像を処理対象動画像として選択し、選択された処理対象動画像の情報を出力するものである。
【００８４】
動画像情報出力部５０は、第１解析結果データを取得する場合と同様に、ユーザが画像処理装置を使用していない間に、処理対象動画像の情報を、サーバ１２等の外部処理装置へネットワーク１８を介して送信する。
【００８５】
また、動画像情報出力部５０は、処理対象動画像の情報を、例えば、処理対象動画像の画像処理を行う、サーバ１２や他の携帯端末１４等の外部処理装置へネットワーク１８を介して送信することができる。この場合、動画像情報出力部５０は、処理対象動画像の情報として、処理対象動画像のリストを外部処理装置へ送信してもよいし、例えば、リストに実際に記載されると思われる処理対象動画像そのもの（動画像データ）または処理対象動画像そのものへのリンク情報を外部処理装置へ送信してもよい。
【００８６】
第２転送部５２は、携帯端末１４とサーバ１２との間で、動画像、撮影画像、第１解析結果データなどを含む、各種のデータを転送するものである。
【００８７】
次に、図７に示すフローチャートを参照しながら、画像処理装置１０において、ＡＲコンテンツを生成し、選択画像の出力画像を出力する場合の動作を説明する。
【００８８】
まず、ユーザにより、携帯端末１４のタッチパネル５４（表示部４０）に表示された、図８（Ａ）に示す動画プリント管理画面を確認しながら、タッチパネル５４（入力部３８）を操作して、動画像（動画像データ）の送信指示が入力される（ステップＳ１）。
【００８９】
送信が指示された動画像は、第２転送部５２により、携帯端末１４からネットワーク１８を介してサーバ１２へ送信される。サーバ１２では、第１転送部３４により、携帯端末１４から送信されてきた動画像が受信され、記憶部２２に記憶される（ステップＳ２）。
【００９０】
続いて、コンテンツ生成部２０により、受信された動画像からフレーム画像（画像データ）が抽出され、抽出されたフレーム画像のサムネイル画像（画像データ）が生成される（ステップＳ３）。
【００９１】
生成されたサムネイル画像は、サーバ１２から携帯端末１４へ送信される。携帯端末１４では、図８（Ｂ）の画像確認画面に示すように、受信されたサムネイル画像が、タッチパネル５４（表示部４０）に一覧表示される（ステップＳ４）。
【００９２】
続いて、ユーザにより、タッチパネル５４（入力部３８）を操作して、タッチパネル５４（表示部４０）に一覧表示されたサムネイル画像の中から、１つのサムネイル画像が選択される（ステップＳ５）。図８（Ｂ）の例では、右下の太枠線で囲まれたサムネイル画像が選択されたものとする。
【００９３】
選択されたサムネイル画像の情報は、携帯端末１４からサーバ１２へ送信される。サーバ１２では、コンテンツ生成部２０により、動画像から抽出されたフレーム画像の中から、受信されたサムネイル画像の情報に対応するフレーム画像が選択画像として選択される（ステップＳ６）。
なお、サムネイル画像の代わりに、動画像から抽出されたフレーム画像を使用してもよい。
【００９４】
続いて、選択画像（画像データ）が、サーバ１２から携帯端末１４へ送信される。携帯端末１４では、受信された選択画像が、携帯端末１４のタッチパネル５４（表示部４０）に表示される（ステップＳ７）。
【００９５】
続いて、ユーザにより、タッチパネル５４（入力部３８）を操作して、タッチパネル５４（表示部４０）に表示された選択画像が編集される（ステップＳ８）。ユーザによって行われる編集処理には、例えば、図８（Ｃ）のフレーム選択画面に示すように、選択画像の背景となる背景フレームの選択や、図８（Ｄ）の画像トリミング画面に示すように、選択画像に対する画像補正、トリミング、拡大・縮小、回転等の処理が含まれる。
【００９６】
続いて、編集処理の情報が、携帯端末１４からサーバ１２へ送信される。サーバ１２では、コンテンツ生成部２０により、受信された編集処理の情報に基づいて選択画像が編集される。編集後の選択画像またはその特定情報が、選択画像の管理マーカとして、対応する動画像と関連付けられて記憶部２２に記憶される（ステップＳ９）。
なお、選択画像を編集することは必須ではない。
【００９７】
続いて、図８（Ｅ）のサイズ・枚数設定画面に示すように、ユーザにより、タッチパネル５４（入力部３８）を操作して、プリントサイズやプリント枚数等が設定され、編集後の選択画像のプリント出力の指示が入力される（ステップＳ１０）。
【００９８】
プリント出力の指示は、携帯端末１４からサーバ１２へ送信される。受信されたプリント出力の指示に対応する選択画像がサーバ１２からプリンタ１６へ送信され、プリンタ１６により、選択画像の出力画像（プリント物）が出力される（ステップＳ１１）。
出力画像は、ユーザに配達される。
【００９９】
以上のようにして、動画像と、動画像から抽出された選択画像とが関連付けられたＡＲコンテンツが記憶部２２に記憶されるとともに、選択画像の出力画像が出力される。
【０１００】
次に、図９に示すフローチャートを参照しながら、画像処理装置１０において、ＡＲ再生用の動画像を生成し、再生表示する場合の動作を説明する。
【０１０１】
まず、画像撮影部３６により、選択画像の出力画像（プリント物）が撮影（キャプチャ）され、撮影画像（画像データ）が取得される（ステップＳ１２）。撮影された出力画像は、携帯端末１４のタッチパネル５４（表示部４０）に表示される。
【０１０２】
取得された撮影画像は、第２転送部５２により、携帯端末１４からネットワーク１８を介してサーバ１２へ送信される。サーバ１２では、第１転送部３４により、携帯端末１４から送信されてきた撮影画像が受信される（ステップＳ１３）。
【０１０３】
続いて、撮影画像解析部２４により、撮影画像の画像解析が行われ、撮影画像の管理マーカが取得される（ステップＳ１４）。
【０１０４】
続いて、管理マーカ特定部２８により、記憶部２２に記憶された選択画像の管理マーカ中から、撮影画像の管理マーカに対応する選択画像の管理マーカが特定管理マーカとして特定される（ステップＳ１５）。
【０１０５】
続いて、動画像処理部３０により、特定管理マーカに関連付けられた関連動画像から、ＡＲ再生用の動画像が生成される（ステップＳ１６）。
【０１０６】
続いて、動画像処理部３０により生成されたＡＲ再生用の動画像は、サーバ１２から携帯端末１４へ送信される。携帯端末１４では、サーバ１２から送信されてきたＡＲ再生用の動画像が受信される（ステップＳ１７）。
【０１０７】
ＡＲ再生用の動画像が受信されると、制御部４２の制御により、受信されたＡＲ再生用の動画像が、携帯端末１４のタッチパネル５４（表示部４０）に表示された出力画像の表示部分において再生して表示される（ステップＳ１８）。
【０１０８】
以上のようにして、出力画像が撮影されると、撮影画像の管理マーカに対応する選択画像の管理マーカが特定され、特定管理マーカに関連付けられた関連動画像からＡＲ再生用の動画像が生成され、携帯端末１４で再生表示される。
【０１０９】
なお、選択画像の出力画像を出力する場合、例えば、数字やアルファベットを含む文字列からなるアクセスキーを選択画像の出力画像に印刷してもよい。アクセスキーは、ユーザ毎に一意に決定されるものである。ユーザがアクセスキーを入力することにより、記憶部２２に記憶された選択画像の管理マーカの中から特定管理マーカを特定する場合に、各々のユーザがサーバ１２へ送信した動画像に関連付けられた選択画像の管理マーカの範囲に限定することができる。
【０１１０】
次に、図１０に示すフローチャートを参照しながら、画像処理装置１０において、処理対象動画像を事前に処理する場合の動作を説明する。
【０１１１】
まず、サーバ１２側において、静止画像解析部２６により、記憶部２２に記憶された、ユーザが過去にプリントの注文を行った静止画像の画像解析が行われ、その解析結果を含む第１解析結果データが生成される（ステップＳ１９）。
第１解析結果データは、ユーザの携帯端末１４上で動作するアプリケーションからダウンロード可能なように、記憶部２２に保存される。
【０１１２】
続いて、携帯端末１４側において、ユーザが画像処理装置１０を使用していない間に、第１解析結果データ取得部４４により、サーバ１２の静止画像解析部２６により生成された第１解析結果データが記憶部２２から読み出され、サーバ１２の第１転送部３４、ネットワーク１８、および、携帯端末１４の第２転送部５２を介して取得（サーバ１２からダウンロード）される（ステップＳ２０）。
【０１１３】
続いて、動画像解析部４６により、複数の動画像の中に含まれる、画像解析がまだ行われていない解析対象動画像の画像解析が行われ、その解析結果を含む第２解析結果データが生成される（ステップＳ２１）。
【０１１４】
続いて、類似データ検出部４８により、第１解析結果データ取得部４４により取得された第１解析結果データと、動画像解析部４６により生成された第２解析結果データとが照合され、両者の類似度が算出される（ステップＳ２２）。
【０１１５】
ここで、類似度が基準値以上である場合（ステップＳ２３でＹｅｓ）、類似データ検出部４８により、類似度が基準値以上である第２解析結果データが類似解析結果データとして検出される。また、動画像情報出力部５０により、解析対象動画像の中から、類似データ検出部４８により検出された類似解析結果データを有する解析対象動画像が処理対象動画像として選択され、選択された処理対象動画像の情報が外部処理装置へ出力される（ステップＳ２４）。その後、ステップＳ２５へ進む。
【０１１６】
本実施形態の場合、動画像情報出力部５０は、処理対象動画像そのものを、携帯端末１４の第２転送部５２、ネットワーク１８、および、サーバ１２の第１転送部３４を介してサーバ１２へアップロードする。
【０１１７】
続いて、サーバ１２側において、動画像処理制御部３２により、ユーザが、携帯端末１４の動画像情報出力部５０から受信された処理対象動画像を使用する前に、使用するために必要な画像処理が処理対象動画像に行われるように制御される（ステップＳ２５）。
【０１１８】
本実施形態の場合、動画像処理制御部３２の制御により、コンテンツ生成部２０が処理対象動画像からフレーム画像を抽出する処理、および、動画像処理部３０がＡＲ再生用の動画像を生成する処理が行われる。
【０１１９】
第１解析結果データと第２解析結果データとの類似度が基準値未満である場合（ステップＳ２３でＮｏ）、および、ステップＳ２４において、処理対象動画像の情報が外部処理装置へ出力された後、さらに、複数の動画像の中に解析対象動画像がまだ存在する場合には（ステップＳ２６でＹｅｓ）、ステップＳ２１へ戻り上記の動作が繰り返し行われる。一方、解析対象動画像が存在しない場合には（ステップＳ２６でＮｏ）、処理を終了する。
【０１２０】
このように、画像処理装置１０では、複数の動画像の中から、処理対象動画像が自動で選択され、選択された処理対象動画像の情報がサーバ１２等の外部処理装置へ出力される。つまり、ユーザが、多くの動画像を所有し、撮影内容を既に忘れている場合であっても、画像処理装置１０により、ユーザの嗜好に合致する動画像を自動で選択することができるため、ユーザが動画像を選択する手間を省くことができる。
【０１２１】
また、画像処理装置１０では、ユーザが画像処理装置１０を使用していない間に、ユーザの嗜好に合致する動画像がサーバ１２へアップロードされ、動画像を使用するために必要な画像処理が行われる。これにより、ユーザが動画像を使用する場合に、動画像がサーバ１２へアップロードされるまでの待ち時間が発生することがなくなり、システムを利用する際のモチベーションの低下を防ぐことができる。
【０１２２】
なお、第１解析結果データ取得部４４、動画像解析部４６、類似データ検出部４８および動画像情報出力部５０が行う処理は、ユーザの許諾の下で行われることが望ましい。また、これらの処理は、長い時間を必要とし、携帯端末１４のバッテリを大幅に消耗する場合が考えられるため、例えば、携帯端末１４が電源に接続されている場合や、電話回線ではなく、ＷｉＦｉ（Wireless Fidelity）等の無線ＬＡＮ（Local Area Network）経由でサーバ１２に接続されている場合に行われることが望ましい。
【０１２３】
次に、顔認識により同一人物が含まれる動画像をサーバ１２へアップロードする場合の例を挙げて、処理対象動画像を処理する場合の画像処理装置１０の動作を説明する。
【０１２４】
図１１左部に示すように、ユーザの携帯端末１４の中には、３つの動画像が保持されているものとする。３つの動画像のうちの一番上の動画像は、サーバ１２へ既にアップロード済みの動画像であり、下の２つの動画像は、サーバ１２へまだアップロードされていない未アップロードの動画像である。
【０１２５】
図１１右部に示すように、第１解析結果データ取得部４４により、サーバ１２からダウンロードされた第１解析結果データには、顔認識の解析結果として、顔のモデルデータが含まれている。
【０１２６】
携帯端末１４側では、動画像解析部４６により、図１１左部に示す下の２つの動画像から、同図右部に示すように、フレーム画像が抽出され、抽出されたフレーム画像に対して、第１解析結果データに含まれる画像解析と同じ顔認識が実施され、下２つの動画像の各々について、顔認識の解析結果である顔のモデルデータを含む第２解析結果データが生成される。
【０１２７】
続いて、図１２に示すように、類似データ検出部４８により、第１解析結果データと、図１１の左部に示す下２つの動画像の第２解析結果データとの照合（モデルデータの照合）が行われる。その結果、下２つの動画像のうち、上側の動画像には、第１解析結果データに含まれるモデルデータと同一人物は含まれておらず、下側の動画像には、同一人物が含まれていることが検出される。
【０１２８】
従って、図１３左部に示すように、図１１左部の下２つの動画像のうち、同一人物が含まれる下側の動画像がサーバ１２へアップロードされる動画像候補（アップロード候補）となり、動画像情報出力部５０により、下側の動画像がサーバ１２へアップロードされる。
【０１２９】
サーバ１２側では、図１３右部に示すように、動画像処理制御部３２により、携帯端末１４からアップロードされた動画像に対して、フレーム画像を抽出する処理、および、ＡＲ再生用の動画像を生成する処理が事前に行われる。
【０１３０】
これにより、ユーザが、次回、携帯端末１４上で動作するアプリケーションを起動したときに、図１４に示すように、例えば、一番上の動画像はプリント済みであり、一番下の動画像は、アップロードのための待ち時間がなく、すぐにプリントを注文できるお勧めの動画像であるということを表すメッセージなどが携帯端末の画面に表示される。これに応じて、ユーザが、一番下の動画像を選択した場合には、動画像のアップロード等により待たされることなく、すぐにプリントを注文することができる。
【０１３１】
なお、本発明は、動画像をＡＲ再生する場合に限定されず、複数の動画像の中から処理対象動画像を選択し、さらには、選択された処理対象動画像の情報を利用する各種のシステムにおいて利用可能である。
【０１３２】
本発明の装置は、装置が備える各々の構成要素を専用のハードウェアで構成してもよいし、各々の構成要素をプログラムされたコンピュータで構成してもよい。
本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
【０１３３】
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０１３４】
１０  画像処理装置
１２  サーバ
１４  携帯端末
１６  プリンタ
１８  ネットワーク
２０  コンテンツ生成部
２２  記憶部
２４  撮影画像解析部
２６  静止画像解析部
２８  管理マーカ特定部
３０  動画像処理部
３２  動画像処理制御部
３４  第１転送部
３６  画像撮影部
３８  入力部
４０  表示部
４２  制御部
４４  第１解析結果データ取得部
４６  動画像解析部
４８  類似データ検出部
５０  動画像情報出力部
５２  第２転送部
５４  タッチパネル
【図１】
2016181808.tif 000003
【図２】
2016181808.tif 000004
【図３】
2016181808.tif 000005
【図４】
2016181808.tif 000006
【図５】
2016181808.tif 000007
【図６】
2016181808.tif 000008
【図７】
2016181808.tif 000009
【図８】
2016181808.tif 000010
【図９】
2016181808.tif 000011
【図１０】
2016181808.tif 000012
【図１１】
2016181808.tif 000013
【図１２】
2016181808.tif 000014
【図１３】
2016181808.tif 000015
【図１４】
2016181808.tif 000016