(57)【特許請求の範囲】
【請求項１】
観客のために行われる興行において撮影された画像によって構成される画像集に収録される画像の選択を支援する画像選択支援システムであって、
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択する画像選択部と、
前記画像の選択結果を出力する選択結果出力部とを含むことを特徴とする画像選択支援システム。
【請求項２】
前記画像選択部は、前記イベントの種類に応じた重要度が設定されたイベント一覧情報を参照し、複数の画像夫々に関連付けられた前記イベントの重要度に基づき、複数の前記画像から所定数の画像を選択することを特徴とする請求項１に記載の画像選択支援システム。
【請求項３】
前記イベント情報は、前記イベントの主体となった興行の参加者を示す情報を含み、
前記画像選択部は、前記興行の参加者のうち前記画像の選択において優先するべき参加者の情報に基づき、前記優先するべき参加者を含む前記イベント情報のイベントの重要度を調整することを特徴とする請求項２に記載の画像選択支援システム。
【請求項４】
画像内に表示されている文字情報を抽出する文字情報抽出部を含み、
前記画像選択部は、前記興行の参加者のうち前記画像の選択において優先するべき参加者の情報に基づき、前記優先するべき参加者に関連する文字情報が抽出された画像の重要度を調整することを特徴とする請求項２に記載の画像選択支援システム。
【請求項５】
前記撮影情報は、前記画像を撮影した撮影者を示す情報を含み、
前記画像選択部は、
撮影者毎に撮影対象の前記興行の参加者が関連付けられた情報に基づいて複数の画像夫々に写っている前記興行の参加者を認識し、
前記興行の参加者のうち前記画像の選択において優先するべき参加者の情報に基づき、前記優先するべき参加者が写っている画像の重要度を調整することを特徴とする請求項２に記載の画像選択支援システム。
【請求項６】
前記優先するべき参加者の情報は、観客によって予め指定された情報であることを特徴とする請求項３乃至５いずれか１項に記載の画像選択支援システム。
【請求項７】
前記情報取得部は、前記興行の会場で録音された音声の音量が所定の閾値を超えた日時から所定の期間内の日時に関連付けられた画像の重要度を調整することを特徴とする請求項２乃至６いずれか１項に記載の画像選択支援システム。
【請求項８】
前記情報取得部は、前記興行の進行に応じた場面を示す情報を取得し、
前記画像選択部は、夫々の場面毎に所定数の画像を選択することを特徴とする請求項
１乃至７いずれか１項に記載の画像選択支援システム。
【請求項９】
所定の時間内に撮影者により写真撮影された画像を収集し、収集された１以上の画像の中から画像集に収録される画像の選択を支援する画像選択支援システムであって、
撮影された日時と撮影された画像とが関連付けられた撮影情報、及び、前記所定の時間内に発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、
前記画像に関連付けられた前記イベントに基づき、複数の前記収集された１以上の画像から所定数の画像を選択する画像選択部と、
前記画像選択部により選択された画像の選択結果を出力する選択結果出力部とを含むことを特徴とする画像選択支援システム。
【請求項１０】
観客のために行われる興行において撮影された画像によって構成される画像集に収録される画像の選択を支援する画像選択支援装置であって、
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択する画像選択部と、
前記画像の選択結果を出力する選択結果出力部とを含むことを特徴とする画像選択支援装置。
【請求項１１】
観客のために行われる興行において撮影された画像によって構成される画像集に収録される画像の選択を支援する画像選択支援方法であって、
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得し、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付け、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択し、
前記画像の選択結果を出力することを特徴とする画像選択支援方法。
【請求項１２】
観客のために行われる興行において撮影された画像によって構成される画像集に収録される画像の選択を支援する画像選択支援プログラムであって、
撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得するステップと、
前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付けるステップと、
複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択するステップと、
前記画像の選択結果を出力するステップとを情報処理装置に実行させることを特徴とする画像選択支援プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像選択支援システム、画像選択支援装置、画像選択支援方法及び画像選択支援プログラムに関する。
【背景技術】
【０００２】
スポーツ競技や音楽のコンサート等の興行を鑑賞する観客に対するサービスとして、携帯端末を介した情報の提供方法が各種提案されている（例えば、特許文献１参照）。特許文献１に開示された技術においては、イベント会場において撮影された画像を、限定したエリアに対して配信が可能な小型アンテナを介して配することにより、観客に対する映像の配信が可能となる。
【０００３】
他方、上述したスポーツ競技やコンサート等の会場においては、契約したカメラマンにより多くの画像が撮影される。そのように撮影された画像は、イベントの報道に用いられる他、スポーツチームのグッズや、音楽アーティストのグッズとして販売の対象となることもある。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
スポーツ競技やコンサートの会場において撮影された画像によって構成された写真集を作成し、協議やコンサートの終了後に当日販売することが出来れば、イベントを楽しむ観客にとって有意義なサービスとなることが考えられる。しかしながら、多数のカメラマンによって大量の画像が撮影されることが多く、そのような大量の画像の中から収録するべき画像を抽出した上で、当日販売することは時間的な制約があり困難である。
【０００５】
本発明は、このような課題を解決するためになされたものであり、興行において撮影された画像によって構成された写真集を迅速に作成するために、撮影された画像の選択を支援することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の一態様は、観客のために行われる興行において撮影された画像によって構成される画像集に収録される画像の選択を支援する画像選択支援システムであって、撮影された日時と撮影された画像とが関連付けられた撮影情報及び興行において発生したイベントが日時と関連付けて記録されたイベント情報を取得する情報取得部と、前記撮影情報に含まれる日時と、前記イベント情報に含まれる日時とに基づき、前記画像と前記イベントとを関連付ける関連付け部と、複数の画像夫々に関連付けられた前記イベントに基づき、複数の前記画像から所定数の画像を選択する画像選択部と、前記画像の選択結果を出力する選択結果出力部とを含むことを特徴とする。
【発明の効果】
【０００７】
本発明によれば、興行において撮影された画像によって構成された写真集を迅速に作成するために、撮影された画像の選択を支援することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施形態に係るシステムの運用形態を示す図である。
【図２】本発明の実施形態に係る情報処理装置のハードウェア構成を示すブロック図である。
【図３】本発明の実施形態に係る記録者端末によって生成される情報の例を示す図である。
【図４】本発明の実施形態に係るイベント情報の例を示す図である。
【図５】本発明の実施形態に係る場面情報の例を示す図である。
【図６】本発明の実施形態に係る撮影情報の例を示す図である。
【図７】本発明の実施形態に係る編集者端末の機能構成を示すブロック図である。
【図８】本発明の実施形態に係る画像解析処理の態様を示す図である。
【図９】本発明の実施形態に係る認識情報が付加された撮影情報を示す図である。
【図１０】本発明の実施形態に係るイベント一覧情報の例を示す図である。
【図１１】本発明の実施形態に係る購入申し込み画面の例を示す図である。
【図１２】本発明御実施形態に係る購入申請情報の例を示す図である。
【図１３】本発明御実施形態に係るシステムの全体動作を示すシーケンス図である。
【図１４】本発明御実施形態に係る編集者端末の動作を示すフローチャートである。
【図１５】本発明の実施形態に係る関連付け動作を示すフローチャートである。
【図１６】本発明の実施形態に係る関連付け情報を示す図である。
【図１７】本発明の実施形態に係る重み付け動作を示すフローチャートである。
【図１８】本発明の実施形態に係る重み係数の例を示す図である。
【図１９】本発明の実施形態に係る音量レベルの時系列変化の例を示す図である。
【図２０】本発明の実施形態に係る重み付け情報を示す図である。
【図２１】本発明の実施形態に係る場面ごとの画像の抽出結果を示す図である。
【図２２】本発明の実施形態に係るレイアウト確認画面の例を示す図である。
【図２３】本発明の実施形態に係るイベント情報の例を示す図である。
【図２４】本発明の実施形態に係るイベント一覧情報の例を示す図である。
【図２５】本発明の実施形態に係る撮影者と撮影対象のチームとの対応関係の情報の例を示す図である。
【図２６】本発明の実施形態に係る撮影者と撮影対象のチームとの対応関係の情報の例を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、本発明の実施形態について説明する。本実施形態においては、観客のために行われる興行の例として野球の試合を例として説明する。そして、野球の試合を試合会場で観戦する観客に対して、試合の様子を撮影した画像をまとめた画像集である写真集を試合当日に提供するためのシステムについて説明する。そのようなシステムにおいて、大量に撮影された画像から写真集に収録するべき画像を選択するための機能が本実施形態に係る要旨の１つである。即ち、本実施形態に係るシステムは、大量に撮影された画像から画像集に収録される画像の選択を支援する画像選択支援システムである。
【００１０】
図１は、本実施形態に係る画像選択支援システムの運用形態を示す図である。図１に示すように、本実施形態に係るシステムは、記録者端末１、デジタルカメラ２、マイク３、編集者端末４、ユーザ端末５及び画像形成装置６が、インターネットのような公衆回線を介して接続されて構成されている。
【００１１】
記録者端末１は、試合会場にいる記録者が、試合会場において試合の進行状況に応じた情報を入力するための情報処理装置である。デジタルカメラ２は、試合会場において撮影を行うカメラマンが撮影を行うための撮影装置である。尚、本実施形態においてはデジタルカメラ２が直接ネットワークに接続されている場合を例としているが、ノートパソコンなどの情報処理装置を介してネットワークに接続されていても良い。
【００１２】
マイク３は、試合会場において音声を集音して音声情報を記録するための録音装置である。マイク３を介して録音される音声には、試合の実況中継や解説の音声の他、客席の歓声などの音声も含まれる。図１において破線で区切って示すように、記録者端末１、デジタルカメラ２及びマイク３が試合会場に設置される。
【００１３】
編集者端末４は、デジタルカメラ２によって撮影されて生成された画像情報を受信し、観客に提供する写真集に収録するための画像を取捨選択して写真集のレイアウトを生成する情報処理装置である。即ち、編集者端末４が画像選択支援装置として機能すると共に、そのような機能を実現するためのプログラムが画像選択支援プログラムとして用いられる。編集者端末４の機能が、本実施形態に係る要旨の１つである。ユーザ端末５は、試合会場で試合を観戦するユーザが、事前に写真集の購入を申し込む際に使用する情報処理装置である。
【００１４】
画像形成装置６は、編集者端末４によって生成されたレイアウト情報に基づいて画像形成出力を実行し、更に製本処理を行って写真集を生成する装置である。画像形成装置６は試合会場に設置される必要はないが、会場で試合を観戦した観客が当日に写真集を受け取るため、試合会場の近隣に設置される。
【００１５】
次に、本実施形態に係る記録者端末１、編集者端末４、ユーザ端末５及び画像形成装置６等の情報処理装置のハードウェア構成について図２を参照して説明する。尚、画像形成装置６は、図２に示すハードウェア構成に加えて、スキャナ、プリンタ等を実現するためのエンジンを備える。
【００１６】
図２に示すように、本実施形態に係る情報処理装置は、一般的なサーバやＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）等と同様の構成を含む。即ち、本実施形態に係る情報処理装置は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１０、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）２０、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）３０、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）４０及びＩ／Ｆ５０がバス８０を介して接続されている。また、Ｉ／Ｆ５０にはＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）６０及び操作部７０が接続されている。
【００１７】
ＣＰＵ１０は演算手段であり、情報処理装置全体の動作を制御する。ＲＡＭ２０は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、ＣＰＵ１０が情報を処理する際の作業領域として用いられる。ＲＯＭ３０は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。ＨＤＤ４０は、情報の読み書きが可能な不揮発性の記憶媒体であり、ＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）や各種の制御プログラム、アプリケーション・プログラム等が格納される。
【００１８】
Ｉ／Ｆ５０は、バス８０と各種のハードウェアやネットワーク等を接続し制御する。ＬＣＤ６０は、ユーザが情報処理装置の状態を確認するための視覚的ユーザインタフェースである。操作部７０は、キーボードやマウス等、ユーザが情報処理装置に情報を入力するためのユーザインタフェースである。
【００１９】
このようなハードウェア構成において、ＲＯＭ３０に格納されたプログラムや、ＨＤＤ４０若しくは図示しない光学ディスク等の記憶媒体からＲＡＭ２０にロードされたプログラムに従ってＣＰＵ１０が演算を行うことにより、ソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係る記録者端末１、編集者端末４、ユーザ端末５及び画像形成装置６の機能を実現する機能ブロックが構成される。
【００２０】
次に、記録者端末１によって記録される情報（以降、「記録情報」とする）について説明する。図３は、本実施形態に係る記録情報の例を示す図である。図３に示すように、本実施形態に係る記録情報には、イベント情報及び場面情報が含まれる。図４は、イベント情報の内容を示す図である。イベント情報は、試合中に発生した出来事、即ちイベントの詳細を示す情報であり、図４に示すように“イベントＩＤ”、“イベント名”、“タイムスタンプ”、“主体チーム”及び“主体選手”の情報を含む。
【００２１】
“イベントＩＤ”は、イベントを一意に識別する識別子である。“イベント名”は、図４に示すように「ホームラン」等のイベントの内容を示す情報である。“タイムスタンプ”は、そのイベントが発生した時間を示す情報である。“主体チーム”は、そのイベントの主体となるチームを示す情報であり、「ホームラン」であれば、ホームランを打った選手のチームを示す。“主体選手”は、そのイベントの主体となる選手を示す情報であり、「ホームラン」であれば、ホームランを打った選手を示す。
【００２２】
このように、本実施形態に係るイベント情報は、興行において発生したイベントが日時と関連付けて記憶された情報である。また、イベント情報は、“主体チーム”、“主体選手”など、イベントの主体となった者、即ち、興行の参加者を示す情報を含む。
【００２３】
図５は、場面情報の内容を示す図である。場面情報は、試合の進行状況を時刻と関連付けて示す情報であり、図５に示すように、“１回表”、“１番打席”、“２番打席”といった試合の進行状況が“〜時〜分”といったタイムスタンプと関連付けて記録されている。また、「投手：ＸＸＸＸＸＸ」、「打者：ＸＸＸＸＸＸ」、「攻撃チーム：ＸＸＸＸ」のように、夫々の場面における選手やチームの情報が記録される。尚、図５においては、場面情報としての例を示しているが、場面情報としては、例えばスコアラーによって記録されるスコア情報を用いることも可能である。
【００２４】
図４、５に示す情報が、本実施形態において画像を選別するために参照される情報である。記録者端末１を操作する記録者は、試合の進行状況を確認しながら図４、図５に示す情報を随時端末に入力する。これにより、イベント情報及び場面情報が記録者端末１において生成され、編集者端末４に送信される。
【００２５】
次に、デジタルカメラ２から編集者端末４に送信される情報について図５を参照して説明する。図６は、デジタルカメラ２から編集者端末４に送信される情報（以降、「撮影情報」とする）の内容を示す図である。図６に示すように、撮影情報には、撮影によって生成された画像の情報である“画像データ”、撮影の日時を示す“タイムスタンプ”に加えて、撮影したカメラマンを識別する“撮影者情報”が含まれる。即ち、撮影情報は、撮影された画像と撮影された日時とが関連付けられた情報であり、更には画像を撮影した撮影者を示す情報を含む。
【００２６】
図６に示す“タイムスタンプ”と図４に示す“タイムスタンプ”とに基づいて“画像データ”が“イベント情報”に関連付けられる。更に、図５に示す場面情報に基づいて試合進行の場面に応じた画像の整理が実行される。これにより、試合の進行状況に応じた画像の選別を可能とすることが本実施形態に係る要旨の１つである。このような処理は、編集者端末４において実行される。
【００２７】
次に、本実施形態に係る編集者端末４の機能構成について図７を参照して説明する。図７に示すように、本実施形態に係る編集者端末４は、図２において説明したＬＣＤ６０、操作部７０に加えて、コントローラ１００及びネットワークＩ／Ｆ１１０を含む。
【００２８】
ネットワークＩ／Ｆ１１０は、編集者端末４がネットワークを介して他の機器と通信するためのインタフェースであり、Ｅｔｈｅｒｎｅｔ（登録商標）やＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）インタフェースが用いられる。コントローラ１００は、ソフトウェアとハードウェアとの組み合わせによって構成され、編集者端末４全体を制御する制御部として機能する。
【００２９】
図７に示すように、コントローラ１００は、情報取得部１０１、関連付け部１０２、画像解析部１０３、候補抽出部１０４、イベント一覧情報１０５、候補提示部１０６及び編集処理部１０７を含む。情報取得部１０１は、ネットワークＩ／Ｆ１１０を介して図３〜図６において説明した夫々の情報や、マイク３によって録音された音声情報を取得する。
【００３０】
関連付け部１０２は、情報取得部１０１が取得した情報について、上述したように“タイムスタンプ”の情報に基づいてイベント情報と画像データとの関連付けを行う。関連付けの結果は候補抽出部１０４に入力される。画像解析部１０３は、情報取得部１０１が取得した撮影情報に含まれる画像データを解析し、画像から得られる情報を抽出して撮影情報に付加する。図８は、画像解析部１０３による画像解析の態様を示す図である。
【００３１】
図８に示すように、画像解析部１０３は、画像に写っている選手の背番号や名前をＯＣＲ（Ｏｐｔｉｃａｌ  Ｃｈａｒａｃｔｅｒ  Ｒｅｃｏｇｎｉｔｉｏｎ）によって認識し、認識した文字情報を撮影情報に付加する。即ち、画像解析部１０３が、文字情報抽出部として機能する。図１０は、画像解析部１０３による画像解析によって認識された背番号や選手名等の情報（以降、「認識情報」とする）が付加された撮影情報の例を示す図である。図９に示すような情報は、候補抽出部１０４に入力される。
【００３２】
候補抽出部１０４は、関連付け部１０２によって生成された関連付け情報及び画像解析部１０３によって認識情報が付加された撮影情報に基づき、夫々の画像データに重要度を割り振り、その重要度に基づいて収録するべき画像を収録候補として抽出する。即ち、候補抽出部１０４が画像選択部として機能する。そのため、候補抽出部１０４は、イベント一覧情報１０５を参照する。
【００３３】
図１０は、イベントの種類に応じた重要度を示す情報であるイベント一覧情報の内容を示す図である。図１０に示すように、イベント一覧情報は、イベントの種類を一意に識別する“イベントＩＤ”、イベントの種類の名称を示し、図４の“イベント名”に対応する“イベント名”、夫々のイベント種類の重要性を示す値である“重要度”が関連付けられた情報である。この“重要度”とは、換言すると、写真集に収録するべき画像としての優先度を示す値である。
【００３４】
候補抽出部１０４は、図１０に示すような情報に基づき、夫々の画像データに重要度を割り振り、その重要度の値が大きい順に写真集に収録するべき候補となる画像データを抽出する。候補抽出部１０４は、そのようにして抽出した候補の画像データや割り振った重要度の値を候補提示部１０６に入力する。
【００３５】
候補提示部１０６は、抽出された候補の画像データをレイアウトした画面をＧＵＩ（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）上に提示する。即ち、候補提示部１０６が選択結果出力部として機能する。これにより、編集者端末４を操作する編集者が、写真集のレイアウトを確認すると共に、収録する画像の変更や、レイアウトの調整を行うことが可能となる。このように、本実施形態に係るシステムにおいては、試合において発生したイベントに応じて優先的に収録するべき画像データが抽出されて写真集のレイアウト案が提示される。そのため、編集者の負担を大幅に軽減することが可能となる。
【００３６】
編集処理部１０７は、操作部７０を介して入力された編集者の操作に基づき、ＧＵＩ上に提示されたレイアウト案を修正する。その後、編集者によってレイアウト確定の操作が行われると、確定されたレイアウトの情報や収録されるものとして選択された画像データがネットワークＩ／Ｆ１１０を介して画像形成装置６に送信される。これにより、画像形成装置６において画像形成出力及び製本処理が実行され、写真集が生成される。
【００３７】
次に、ユーザ端末５において表示される購入申し込み画面のＧＵＩについて説明する。図１１は、本実施形態に係る購入申し込み画面の例を示す図である。図１１に示すようなＧＵＩは、例えばユーザがユーザ端末５を介して写真集を販売するサービス提供者のウェブサイトにアクセスすることにより表示される。図１１に示すように、本実施形態に係る購入申し込み画面においては、“重要イベント選択”、“重要チーム選択”、“重要選手選択”、“デザインパターン選択”等の選択肢が表示される。
【００３８】
“重要イベント選択”、“重要チーム選択”、“重要選手選択”の選択肢は、写真集に収録する画像の選択に際して、優先的に選択される写真の内容を指定する選択肢である。図１０において説明したように、夫々のイベント種類には重要度が設定されている。しかしながら、これは一般的な観点に基づいて予め設定された値である。
【００３９】
例えば、一般的には「ホームラン」、「ヒット」を比べると、「ホームラン」の方が観客による注目度は高いことが予測されるため、「ヒット」よりも「ホームラン」に高い重要度の値が設定される。これに対して、ユーザによっては「ホームラン」の写真よりも「ヒット」の写真をより多く収録することを希望する場合がある。図１１に示すような選択肢により、そのような個別のユーザの希望に沿った画像データの抽出を行うことが可能となる。
【００４０】
“デザインパターン選択”は、写真集の表紙や、各ページの背景等、製本された状態でのデザインを指定する選択肢である。尚、購入希望申し込み画面においては、図１１に示すような選択肢のほか、氏名や住所などの購入希望者の情報を入力する項目が表示される。
【００４１】
図１２は、図１１に示すＧＵＩによって入力された情報により生成される情報（以降、「購入申請情報」とする）の例を示す図である。図１２に示すように、購入申請情報には、“重要イベント”、“重要チーム”、“重要選手”、“デザインパターン”といった各選択肢において選択された情報の他、“購入者情報”が含まれる。
【００４２】
図１２に示す情報は、編集者端末４に送信され、候補抽出部１０４による重要度の割り振り処理において用いられる。特に、“重要チーム”、“重要選手”の情報は、写真集に収録する画像を選択する際に優先して選択するべき興行の参加者の情報として用いられる。
【００４３】
次に、本実施形態に係るシステム全体の動作について、図１３を参照して説明する。図１３に示すように、まずはユーザ端末５がユーザの操作に応じて購入申請を行う。これにより、図１２に示す情報が編集者端末４に送信される（Ｓ１３０１）。尚、図１３においては、ユーザ端末５から編集者端末４に対して購入申請が行われるように示されているが、上述したように、サービス提供者のウェブサーバを介して行われても良い。
【００４４】
購入申請が完了すると、ユーザ端末５は、ユーザの操作に応じて購入申請を示すチケットの発券を行う（Ｓ１３０２）。Ｓ１３０２のチケットの発券処理は、電子メール等の情報処理によって行われても良いし、プリントアウト等による紙の出力によって行われても良い。ここまでが、試合開始前に実行される処理である。
【００４５】
試合が開始されると、デジタルカメラ２は撮影によって生成された撮影情報を編集者端末４に送信する（Ｓ１３０３）。ここで、デジタルカメラ２から編集者端末４への撮影情報の送信は、直接行われても良いし、ノートパソコン等の他の情報処理装置を介して行われても良い。また、撮影の都度行われても良いし、数分おきや、１回表、１回裏、等のように場面の切り替わりに応じて行われても良い。
【００４６】
また、記録者端末１は、記録者によって入力されたイベント情報、場面情報を編集者端末４に送信する（Ｓ１３０４）。記録者端末による情報送信も、撮影情報と同様に記録情報が入力される都度行われても良いし、所定の時間や場面の区切り毎にまとめて行われても良い。
【００４７】
編集者端末４においては、デジタルカメラ２から取得した撮影情報及び記録者端末１から取得した記録者情報に基づいて関連付け部１０２、画像解析部１０３及び候補抽出部１０４が動作し、収録するべき画像の選択を行う（Ｓ１３０５）。画像の選択が完了すると、候補提示部１０６によってレイアウト案が提示される（Ｓ１３０６）。
【００４８】
レイアウト案が提示されると、編集者による操作に応じて編集処理部１０７がレイアウト編集を行う（Ｓ１３０７）。レイアウト編集の完了操作が行われると、編集処理部１０７が画像形成装置６に対してレイアウト情報及び画像データを送信する（Ｓ１３０８）。これにより、画像形成装置６において印刷出力及び製本が実行される（Ｓ１３０９）。
【００４９】
このようにして画像形成装置６において写真集が生成されると、ユーザはＳ１３０２において発券したチケットを用いて写真集を受け取る。これにより、ユーザは試合当日に写真集を受け取ることが可能となる。
【００５０】
次に、本実施形態に係る編集者端末４の動作について更に詳細に説明する。図１４は、本実施形態に係る編集者端末４の動作を示すフローチャートである。図１４に示すように、編集者端末４の情報取得部１０１が、試合の進行に応じて画像情報を取得すると共に（Ｓ１４０１）、イベント情報、場面情報を取得する（Ｓ１４０２）。Ｓ１４０１、Ｓ１４０２の処理は、図１３において説明したように試合の進行に応じて随時実行される。
【００５１】
情報を取得すると、画像解析部１０３が、取得された撮影情報に含まれる画像データの画像解析を行う（Ｓ１４０３）。Ｓ１４０３の処理は、図８において説明した処理である。これにより、図９において説明したように撮影情報に認識情報が付加されて候補抽出部１０４に付加される。
【００５２】
画像解析部１０３による画像解析とは別に、関連付け部１０２による画像データとイベント情報との関連付け処理が実行される（Ｓ１４０４）。ここで、図１５を参照して関連付け処理の詳細について説明する。図１５に示すように、関連付け部１０２は、まず受信されているイベント情報から１つを選択する（Ｓ１５０１）。次に、関連付け部１０２は、受信されている撮影情報の画像データを１つ選択し（Ｓ１５０２）、夫々のタイムスタンプを比較して時間差を算出する（Ｓ１５０３）。
【００５３】
関連付け部１０２は、時間差を算出すると、その時間差が所定の閾値以内であるか否かを判断する（Ｓ１５０４）。Ｓ１５０４における閾値は、画像とイベントが関連しているか否かを判断するための閾値であり、その値は例えば±３０秒である。Ｓ１５０４の判断の結果、時間差が閾値以内であれば、関連付け部１０２は、選択中のイベントと選択中の画像とを関連付ける（Ｓ１５０５）。
【００５４】
他方、時間差が閾値を超えている場合、若しくは、Ｓ１５０５の処理が完了した場合、関連付け部１０２は、受信されている全ての撮影情報についてＳ１５０２からの処理を完了するまで処理を繰り返す（Ｓ１５０６／ＮＯ）。そして、受信されている全ての撮影情報についてＳ１５０２からの処理を完了すると（Ｓ１５０６／ＹＥＳ）、次に関連付け部１０２は、受信されている全てのイベント情報について処理が完了するまで、Ｓ１５０１からの処理を繰り返す（Ｓ１５０７／ＮＯ）。
【００５５】
そして、受信されている全てのイベントについてＳ１５０１からの処理を完了すると（ｓ１５０７／ＹＥＳ）、関連付け部１０２は、関連付け処理を終了する。即ち、関連付け部１０２は、受信されている全てのイベントと全ての撮影情報について、タイムスタンプによる関連付けの判断を行う。このような処理により、図１６に示すように、撮影情報を示す“画像ファイル名”が“イベントＩＤ”に関連付けられた関連付け情報が生成される。
【００５６】
図１４のＳ１４０４における関連付け処理が完了すると、次に候補抽出部１０４が画像データの中から写真集に収録するべき画像データの抽出処理を開始する。抽出処理に際して、候補抽出部１０４はまず画像データの重み付け処理を行う（Ｓ１４０５）。図１７を参照して、画像データの重み付け処理の詳細について説明する。
【００５７】
図１７に示すように、候補抽出部１０４は、受信されている画像データの１つを選択し（Ｓ１７０１）、イベントの重要度を反映する（Ｓ１７０２）。Ｓ１７０２において、候補抽出部１０４は、図１６に示すように生成された関連付け情報を参照し、夫々の画像ファイルに対して関連付けられているイベントの“重要度”を、イベント一覧情報１０５から取得して、画像ファイルに関連付ける。
【００５８】
次に、候補抽出部１０４は、画像ファイルに関連付けた重要度に対して、重み係数を反映する（Ｓ１７０３）。重み係数とは、図１２に示すように選択された“重要イベント”、“重要チーム”、“重要選手”に応じて加算される重要度である。選択された項目に応じて図１８に示すように係数が設定され、候補抽出部１０４がその係数を乗ずることによってユーザに選択された項目に対応する画像データの重要度が高く算出される。これにより、ユーザの趣向に合致する画像の重要度を高く算出することが可能となる。
【００５９】
尚、図１６に示す関連付け情報により、夫々の画像データが対応しているイベント、チーム、選手は判断可能であるため、“重要イベント”、“重要チーム”、“重要選手”の係数を乗ずるか否かは関連付け情報に基づいて判断可能である。他方、図９に示す認識情報を参照することにより、夫々の画像データがどの選手に対応しているかを判断することが可能であり、“重要選手”の係数の判断を行うことが出来る。また、図５に示す場面情報を参照すれば、時刻毎に投手、打者、攻撃チームを判断することが可能となるため、上述した判断の補助とすることが可能である。
【００６０】
次に、候補抽出部１０４は、音声レベルによる重要度を反映する（Ｓ１７０４）。図１９は、マイク３によって録音された音声情報における音量レベルを時系列に示す図である。試合の進行に応じて、試合が盛り上がった時にはより大きな音が録音されることが考えられる。即ち、音量レベルが高い時刻における写真はそれだけ重要度が高いことが考えられる。
【００６１】
従って、候補抽出部１０４は、音量レベルがある閾値を上回った時刻前後の画像データの重要度を加算する。これにより、その試合において盛り上がった場面の写真の重要度を高くして、写真集に収録されやすくすることが出来る。尚、音量レベルがある閾値を上回った時刻から所定の期間内の画像データの判断に際しては、図１５のＳ１５０３、Ｓ１５０４のように、時間差が閾値以内であるか否かによって判断することが可能である。また、音量レベルが閾値を上回った画像データに対する重要度の加算は、図１８に示すように係数によって行っても良いし、所定の値を加算することによって行っても良い。
【００６２】
候補抽出部１０４は、図１６に示すように関連付けデータが生成されている全ての画像データについて処理が完了するまでＳ１７０１からの処理を繰り返し（Ｓ１７０５／ＮＯ）、全ての画像データについて処理が完了したら（Ｓ１７０５／ＹＥＳ）、処理を終了する。これにより、図２０に示すように、それぞれの画像データを示す“画像ファイル名”に“重み値”が関連付けられた重み付け情報が生成される。
【００６３】
図２０に示すように重み付け情報を生成すると、候補抽出部１０４は、「１回表」、「１回裏」等の場面ごとに規定された数の画像データを重要度の値の大きい順に抽出する（Ｓ１４０６）。Ｓ１４０６においては、図５に示す場面情報を参照し、「１回表」、「１回裏」等の各場面に相当する時刻に対応する画像データを抽出する。これにより、図２１に示すように、「１回表」等の場面ごとに規定数の画像データが抽出される。
【００６４】
候補抽出部１０４は、試合の最後の場面についての画像の抽出が完了するまで、Ｓ１４０１からの処理を繰り返す（Ｓ１４０７／ＮＯ）。そして、試合の最後の場面についてＳ１４０６までの処理が完了すると（Ｓ１４０７／ＹＥＳ）、候補提示部１０６は、場面ごとに抽出された画像データに基づいてレイアウト案をＧＵＩに表示して提示する（Ｓ１４０８）。
【００６５】
図２２は、本実施形態に係るレイアウト確認画面のＧＵＩの例を示す図である。Ｓ１４０８ｎｉｏｉｔｅ，候補提示部１０６は、図１２に示す購入申請情報のうち、“デザインパターンＡ”のように選択されたデザインパターンに従ってレイアウトを生成する。図２２に示すように、本実施形態に係るレイアウト確認画面においては、抽出された画像データがレイアウトされた「レイアウト」のスペースに加えて、抽出されなかった画像データが、算出された重要度と共に表示される「その他候補画像」スペースが表示される。
【００６６】
また、「レイアウト」スペースには、「１番  Ｘ田  一塁打」等のように、夫々の画像に関連付けられたイベント情報から得られる情報が文字情報として表示される。更に、イベントの重要度に応じて画像の大きさが調整され、図２２に示すように「ホームラン」のイベントに関連する画像が大きく表示されるようにレイアウトされている。
【００６７】
加えて、重要度の高いイベントについては、「音声」ボタンが表示されており、そのイベントのタイムスタンプ前後の音声が再生されるようになっている。これは、実際に出力された写真集においては、電子ペーパーによって実現される。
【００６８】
図２２に示すＧＵＩは、候補提示部１０６によって表示情報が生成されてＬＣＤ６０に表示される。編集者は図２２に示す画面を確認することにより、自動的に抽出された画像やレイアウトを確認することが可能となる。また、抽出されなかった画像を同時に表示させることにより、画像データの入れ替えを容易に判断することが可能となる。
【００６９】
図２２に示すような画面において編集者が出力指示のための操作を行うと（Ｓ１４０９／ＹＥＳ）、編集処理部１０７は、表示中のレイアウトの情報及び含まれる画像データの情報をネットワークＩ／Ｆ１１０を介して画像形成装置６に送信する（Ｓ１４１０）。これにより、画像形成装置６においてレイアウトに従った画像形成出力及び製本処理が実行され、写真集が生成される。
【００７０】
他方、出力指示の操作ではなく（Ｓ１４０８／ＮＯ）、画像の変更やレイアウトの調整などの編集指示の操作であった場合（Ｓ１４１１／ＹＥＳ）、編集処理部１０７は、受け付けた操作に従って表示中のレイアウトを編集し（Ｓ１４１２）、出力指示を待つ。このような処理により、本実施形態に係る編集者端末４の動作が完了する。このような処理が、図１２に示すような購入申請情報毎に実行されることにより、購入申請者であるユーザの趣向に応じた写真集が生成される。
【００７１】
このように、本実施形態に係るシステムにおいては、大量に撮影された画像を、まずはタイムスタンプに応じてイベント情報に関連付ける。これにより、試合中に発生した特筆するべきイベントとは無関係な画像は写真集への掲載対象から除外され、試合中に発生した何らかの出来事に関連した画像のみを候補とすることが出来る。
【００７２】
また、図１０に示すように、イベント毎に設定された重要度に基づく判断により、観客の注目を引く出来事に関連する画像を優先的に選択して候補とすることが出来る。更に、図１１に示すように、購入申請に際して重要なイベント、チーム、選手の選択を受け付けることにより、よりユーザの趣向に合致した写真を選択して候補とすることが出来る。
【００７３】
このような機能により、本実施形態に係るシステムにおいては、興行において撮影された画像によって構成された写真集を迅速に作成するために、撮影された画像の選択を支援することが可能となる。
【００７４】
尚、上記実施形態においては、図２２に示すようなＧＵＩによりレイアウト案を提示した上で、最終的な調整を編集者によって行う場合を例として説明した。しかしながらこれは一例であり、候補抽出部１０４によって抽出され、候補提示部１０６によって生成されたレイアウトをそのまま画像形成装置６に送信しても良い。
【００７５】
編集者の操作により最終的な操作を行う場合のメリットとしては、イベントの種類としては普通の内容であるが、個別に特別な意味を持つイベントに関連する画像をピックアップする場合等が考えられる。例えば、「ヒット」というイベントを考えると、一般的には「ホームラン」よりも重要度が低いが、ある選手の通算１０００本目のヒット等である場合には、「ホームラン」よりも重要度が高くなる。
【００７６】
このような場合に、図２２に示す画面で編集者による調整のチャンスを残すことにより、特別なシーンを逃すことなく収録することが可能となる。他方、特別なシーンを特別なイベントとして設定することにより、同様の機能を実現することも可能である。
【００７７】
例えば、通常は「ヒット」というイベントとして処理されるところ、図２３に示すように、「１０００本安打」というイベントとしてイベント情報を生成する。そして、図２４に示すように、そのような特別なイベントに対応する重要度が設定された項目をイベント一覧情報１０５に追加しておくことにより、通常の「ヒット」とは異なったイベントとして優先的に処理することが可能となる。
【００７８】
また、上記実施形態においては、野球の試合を例として説明したが、野球以外のスポーツの試合についても適用可能なことは言うまでもない。また、スポーツの試合に限らず、音楽のコンサートや、パレード等、現場で鑑賞する興行であれば同様に本件発明を適用して、上述した効果を得ることが可能である。
【００７９】
また、興行の会場で画像を撮影するカメラマンが、予め撮影対象のチームによって振り分けられている場合がある。図２５は、そのようなカメラマン毎の撮影対象チームの振り分けを示すテーブルである。このような場合、候補抽出部１０４は、図１７の動作において、図６に示すように撮影情報に含まれている“撮影者情報”に基づき、画像データに写っている選手のチームを判断することが可能である。
【００８０】
そのようにして夫々の画像データに写っている選手のチームを判断することが出来れば、図１８に示す“重要チーム”の係数を反映する際の判断の補助とすることが出来る。また、図２６に示すように各カメラマンが“攻撃チーム”、“守備チーム”として割り当てられている場合、図５に示す場面情報に基づき、夫々の画像データに写っている選手のチームを判断することも可能である。
【００８１】
また、上記実施形態においては、図１１、図１２において説明したように、重要チームや重要選手はユーザによって選択される場合を例として説明した。しかしながらこれは一例であり、システムの管理者によって予め重要チームや重要選手が設定されていても良い。これにより、一般的に人気のあるチームや人気の選手の写真が優先的に選択されるようにすることが出来る。
【符号の説明】
【００８２】
１  記録者端末
２  デジタルカメラ
３  マイク
４  編集者端末
５  ユーザ端末
６  画像形成装置
１０  ＣＰＵ
２０  ＲＡＭ
３０  ＲＯＭ
４０  ＨＤＤ
５０  Ｉ／Ｆ
６０  ＬＣＤ
７０  操作部
８０  バス
１００  コントローラ
１０１  情報取得部
１０２  関連付け部
１０３  画像解析部
１０４  候補抽出部
１０５  イベント一覧情報
１０６  候補提示部
１０７  編集処理部
【先行技術文献】
【特許文献】
【００８３】
【特許文献１】特開２００５−６１９３号公報
【図１】
0006413625.tif 000002
【図２】
0006413625.tif 000003
【図３】
0006413625.tif 000004
【図４】
0006413625.tif 000005
【図５】
0006413625.tif 000006
【図６】
0006413625.tif 000007
【図７】
0006413625.tif 000008
【図８】
0006413625.tif 000009
【図９】
0006413625.tif 000010
【図１０】
0006413625.tif 000011
【図１１】
0006413625.tif 000012
【図１２】
0006413625.tif 000013
【図１３】
0006413625.tif 000014
【図１４】
0006413625.tif 000015
【図１５】
0006413625.tif 000016
【図１６】
0006413625.tif 000017
【図１７】
0006413625.tif 000018
【図１８】
0006413625.tif 000019
【図１９】
0006413625.tif 000020
【図２０】
0006413625.tif 000021
【図２１】
0006413625.tif 000022
【図２２】
0006413625.tif 000023
【図２３】
0006413625.tif 000024
【図２４】
0006413625.tif 000025
【図２５】
0006413625.tif 000026
【図２６】
0006413625.tif 000027