(57)【要約】【課題】競技に用いられる球体物の保持者に注目した画像編集を行うことを目的とする。【解決手段】選択部２３は、特定部２２によりボール及びボール保持者が特定された画像を選択する。より具体的には、選択部２３は、カメラ１００によって同時期に撮像された画像のうち、特定部２２により特定されたボール保持者の画像中の大きさに関する条件を満たす画像を選択する。さらに、選択部２３は、プレーヤの行為に関する条件を満たす画像を選択する。これにより、その競技において代表的なアクションがボール保持者により行われている画像が選択されることになる。【選択図】図３
2019134319.tif 000002
【特許請求の範囲】
【請求項１】
複数の撮像装置によって撮像された各々の画像において、競技に用いられる球体物と当該球体物の保持者とを特定する特定部と、
前記特定部により前記球体物及び前記保持者が特定された画像を選択する選択部と、
前記選択部により選択された複数の画像を時系列に再生するための再生データを生成する生成部と
を備えることを特徴とする情報処理装置。
【請求項２】
前記特定部は、前記球体物と各競技者との距離に基づいて前記保持者を特定する
ことを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記選択部は、同時期に撮像された前記画像のうち、前記特定部により特定された前記保持者の画像中の大きさに関する条件を満たす画像を選択する
ことを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記選択部は、さらに画像中の競技者の行為に関する条件を満たす画像を選択する
ことを特徴とする請求項１〜３のいずれか１項に記載の情報処理装置。
【請求項５】
前記選択部は、前記特定部により球体物が特定されて当該球体物の保持者が特定されていない画像が競技者の行為に関する条件を満たす場合には、当該画像よりも前の時期に撮像された画像であって当該球体物の保持者が特定された画像を選択する
ことを特徴とする請求項１〜４のいずれか１項に記載の情報処理装置。
【請求項６】
前記選択部は、選択した画像を撮像した前記撮像装置の単位時間当たりの変更回数が閾値を超える期間においては、前記複数の撮像装置のうち所定の撮像装置によって撮像された画像を選択する
ことを特徴とする請求項１〜５のいずれか１項に記載の情報処理装置。
【請求項７】
前記選択部は、前記特定部により前記球体物及び前記保持者が特定された画像であるか否かに関わらず、競技中の時期に関する条件を満たす画像を選択する
ことを特徴とする請求項１〜６のいずれか１項に記載の情報処理装置。
【請求項８】
前記選択部は、前記特定部により前記球体物及び前記保持者が特定された画像であるか否かに関わらず、競技者の人数に関する条件を満たす画像を選択する
ことを特徴とする請求項１〜６のいずれか１項に記載の情報処理装置。
【請求項９】
前記条件が競技の種類に応じて異なる
ことを特徴とする請求項３，４，５，７，８のいずれか１項に記載の情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を編集するための技術に関する。
【背景技術】
【０００２】
例えばサッカーやバスケットボール等の競技の様子を撮像し、その代表的な撮像画像を選択して編集する、いわゆるダイジェスト編集を自動的に行う仕組みが知られている。特許文献１には、競技中の各選手の移動情報を検出する動き検出手段と、スポーツ映像からボールの位置及び動きベクトルを検出するボール検出手段と、各選手の移動情報の大きさ及び各選手の位置、さらにはボール位置及びその動きベクトルに基づき、新たなカメラワークの映像のフレーム位置を設定するカメラワーク設定手段と、設定されたフレーム位置に基づき、スポーツ映像から新たなカメラワークの映像を切り出す映像生成手段と、切り出した映像を出力する映像出力手段とを含むシステムが開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−２２３４８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、上記のような競技のうちサッカーを例に挙げると、例えばボールをドリブルするプレーヤやシュートを行うプレーヤは、ボールを保持した状態で自らの意思で自由にそのボールを扱う保持者に相当し、このボールを保持している瞬間においては競技における中心的役割を担うと言える。よって、このような保持者に相当するプレーヤに注目してダイジェスト編集することが望まれる。
【０００５】
そこで、本発明は、競技に用いられる球体物の保持者に注目した画像編集を行うことを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、本発明は、複数の撮像装置によって撮像された各々の画像において、競技に用いられる球体物と当該球体物の保持者とを特定する特定部と、前記特定部により前記球体物及び前記保持者が特定された画像を選択する選択部と、前記選択部により選択された複数の画像を時系列に再生するための再生データを生成する生成部とを備えることを特徴とする情報処理装置を提供する。
【０００７】
前記特定部は、前記球体物と各競技者との距離に基づいて前記保持者を特定するようにしてもよい。
【０００８】
前記選択部は、同時期に撮像された前記画像のうち、前記特定部により特定された前記保持者の画像中の大きさに関する条件を満たす画像を選択するようにしてもよい。
【０００９】
前記選択部は、さらに画像中の競技者の行為に関する条件を満たす画像を選択するようにしてもよい。
【００１０】
前記選択部は、前記特定部により球体物が特定されて当該球体物の保持者が特定されていない画像が競技者の行為に関する条件を満たす場合には、当該画像よりも前の時期に撮像された画像であって当該球体物の保持者が特定された画像を選択するようにしてもよい。
【００１１】
前記選択部は、選択した画像を撮像した前記撮像装置の単位時間当たりの変更回数が閾値を超える期間においては、前記複数の撮像装置のうち所定の撮像装置によって撮像された画像を選択するようにしてもよい。
【００１２】
前記選択部は、前記特定部により前記球体物及び前記保持者が特定された画像であるか否かに関わらず、競技中の時期に関する条件を満たす画像を選択するようにしてもよい。
【００１３】
前記選択部は、前記特定部により前記球体物及び前記保持者が特定された画像であるか否かに関わらず、競技者の人数に関する条件を満たす画像を選択するようにしてもよい。
【００１４】
前記条件が競技の種類に応じて異なるようにしてもよい。
【発明の効果】
【００１５】
本発明によれば、競技に用いられる球体物の保持者に注目した画像編集を行うことができる。
【図面の簡単な説明】
【００１６】
【図１】画像編集システム１の構成の一例を示す図である。
【図２】サーバ装置２００のハードウェア構成を示す図である。
【図３】サーバ装置２００の機能構成の一例を示す図である。
【図４】サーバ装置２００の動作の一例を示すフローチャートである。
【図５】選択された画像の一例を示す図である。
【図６】ボール保持者が特定されない画像の一例を示す図である。
【図７】ボール保持者がいない画像の直前に撮像された画像のうち、ボール保持者が特定された画像の一例を示す図である。
【発明を実施するための形態】
【００１７】
［構成］
図１は画像編集システム１の概要を示すブロック図である。画像編集システム１は、複数のプレーヤ（競技者）が例えばフットサルという競技を行っている様子を撮像し、その撮像画像のうち代表的な画像を選択して時系列に再生するための再生データを生成する、いわゆるダイジェスト編集を行うためのシステムである。なお、ダイジェスト編集の対象となる競技は、フットサルに限らず、例えばサッカー、バスケットボール、バレーボール、テニス、ラグビー、野球、ホッケー、アイスホッケー、バドミントン等の、球体物を用いて競技される競技（広義の球技）であれば、どのようなものであってもよい。球体物とは、例えばフットサルボール、サッカーボール、バスケットボール、バレーボール、テニスボール、ラグビーボール、野球ボール、パック、シャトルコック等のように、少なくとも一部が球形状ないし円形状の物体のことをいう。
【００１８】
この画像編集システム１は、カメラ１００と、サーバ装置２００と、表示端末３００とを含む。カメラ１００、サーバ装置２００及び表示端末３００はネットワーク９００を介して通信可能に接続される。ネットワーク９００は、例えばＬＡＮ（Local Area Network）又はＷＡＮ（Wide Area Network）、若しくはこれらの組み合わせであり、有線区間又は無線区間を含んでいる。
【００１９】
カメラ１００は、競技の様子を撮像する撮像装置であり、カメラ１００−１、カメラ１００−２、カメラ１００−３を含む。各カメラ１００は、例えばフットサルコートの周囲のそれぞれ異なる場所に設けられた複数のネットワークカメラである。各カメラ１００は、プレーヤがフットサルを行っている様子を、それぞれ異なる位置から、それぞれ異なるアングルで撮像する。各カメラ１００は、この撮像の結果得られた、撮像日時（タイムスタンプ）を含む画像データをネットワーク９００経由でサーバ装置２００に送信する。この画像データは、連続して撮像された動画データであってもよいし、複数回繰り返し撮像された静止画データであってもよい。各カメラ１００は、各地点に固定されている必要はなく、移動可能な装置（例えばスマートフォン、ウェアラブルデバイス又はドローン等）に搭載されたものでもよい。なお、同図で示しているカメラ１００の台数は例示であり、１以上であればよい。
【００２０】
表示端末３００は、例えばスマートフォン、タブレット、パーソナルコンピュータ、テレビジョン装置又はプロジェクタ等の、表示機能を備えた装置である。表示端末３００は、サーバ装置２００によってダイジェスト編集された画像データ（後述する再生データ）をネットワーク経由で取得し、これに基づいて画像を表示する。
【００２１】
図２は、情報処理装置としてのサーバ装置２００のハードウェア構成を例示するブロック図である。サーバ装置２００は、ＣＰＵ２０１（Central Processing Unit）、ＲＯＭ（Read Only Memory）２０２、ＲＡＭ（Random Access Memory）２０３、補助記憶装置２０４、通信ＩＦ２０５を有するコンピュータ装置である。ＣＰＵ２０１は、各種の演算を行うプロセッサである。ＲＯＭ２０２は、例えばサーバ装置２００の起動に用いられるプログラム及びデータを記憶した不揮発性メモリである。ＲＡＭ２０３は、ＣＰＵ２０１がプログラムを実行する際のワークエリアとして機能する揮発性メモリである。
【００２２】
補助記憶装置２０４は、例えばＨＤＤ又はＳＳＤ等の不揮発性の記憶装置であり、サーバ装置２００において用いられるプログラムを記憶する。このプログラムには、例えば競技に用いられるボールや人間等の画像の特徴点データと、その特徴点データと撮像された画像とを照合してボール、競技を行うプレーヤ、及びそのプレーヤ群のうちボールを保持するボール保持者を特定し、これらのボール、プレーヤ及びボール保持者の動きを認識するためのアルゴリズムが含まれる。ＣＰＵ２０１がこのようなプログラムを実行することにより、図３に示される機能が実現される。通信ＩＦ２０５は、所定の通信規格に従ってネットワーク９００を介した通信を行うためのインタフェースである。サーバ装置２００は、図２に例示した構成以外に、例えば表示部や操作部等の他の構成を含んでいてもよい。
【００２３】
図３は、サーバ装置２００の機能構成を例示するブロック図である。サーバ装置２００は、取得部２１と、特定部２２と、選択部２３と、生成部２４と、出力部２５といった機能を実現する。
【００２４】
取得部２１は、カメラ１００によって撮像された画像を示す画像データをネットワーク９００経由で取得する。
【００２５】
特定部２２は、複数のカメラ１００によって撮像された各々の画像において、特徴点抽出やパターンマッチング等の画像認識技術を用いて、競技に用いられるボールと、競技を行うプレーヤと、そのボールを保持するボール保持者とを特定する。ボール保持者とは、身体の一部で直接、或いは道具を用いて、ボールに接触したりボールを持ったり或いは操作した（これらを「保持」と総称する）状態で、そのボールを扱うプレーヤのことである。フットサルを例に挙げると、ボール保持者は、例えばボールをドリブルしているプレーヤ、ボールをパスしたプレーヤ、パスされたボールを受け取ったプレーヤ、ボールをシュートしたプレーヤ、又はシュートされたボールのゴールを阻止したプレーヤ（ゴールキーパー）等である。競技中の各時点においては、ボール保持者が存在する場合もあるし、存在しない場合もある。特定部２２は、どのプレーヤがボール保持者であるかを、各プレーヤとボールとの距離に基づいて特定する。
【００２６】
選択部２３は、特定部２２によりボール及びボール保持者が特定された画像を選択する。より具体的には、選択部２３は、カメラ１００によって同時期に撮像された画像のうち、特定部２２により特定されたボール保持者の画像中の大きさに関する条件を満たす画像を選択する。ボール保持者の画像中の大きさに関する条件を満たす画像とは、同時期に撮像された画像のうちボール保持者が最も大きく写っている画像か、又は、同時期に撮像された画像のうちボール保持者が閾値以上の大きさで写っている画像である。これにより、画像中にボール保持者が比較的大きく写っている画像が選択されることになる。
【００２７】
さらに、選択部２３は、プレーヤの行為に関する条件を満たす画像を選択する。ここでいうプレーヤの行為に関する条件とは、例えばフットサルの場合は、保持者に相当するプレーヤの行為がシュート、コーナーキック、フリーキック、ペナルティキック、パスを出す、パスを受ける、シュートを阻止する等の、競技中において発生する特定のアクションに相当することである。これにより、その競技において代表的なアクションがボール保持者により行われている画像が選択されることになる。
【００２８】
また、選択部２３は、特定部２２によりボールが特定されているが当該ボールのボール保持者が特定されていない画像がプレーヤの行為に関する条件を満たす場合には、当該画像よりも前の時期に撮像された画像であって当該ボールのボール保持者が特定された画像を選択する。これについて具体例を挙げると、例えば或る時刻Ｔ１に撮像された画像がボールのみを含みボール保持者を含まない画像であっても、そのボールについて例えばシュート等の特定アクションが行われている場合は、その時刻Ｔ１の直前の時刻Ｔ０に撮像された画像においてボール保持者が特定され、時刻Ｔ１においては、その直前のボール保持者がプレーヤとして写っていて且つボールも写っている画像が選択されるということである。さらに、これについては後述する図６，７を用いて説明する。
【００２９】
生成部２４は、選択部２３により選択された画像を時系列に再生するための再生データを生成する。つまり、選択部２３により選択された画像がひとまとまりのダイジェスト画像の再生データとして編集されることになる。
【００３０】
出力部２５は、生成された再生データを表示端末３００に出力する。表示端末３００はこの再生データに基づいて画像を表示（再生）する。閲覧者は表示された画像（ダイジェスト画像）を閲覧する。このダイジェスト画像には、比較的大きく写っているボール保持者のアクションシーンを中心にして編集されているから、閲覧者は競技の様子を容易に把握することができる。
【００３１】
[動作]
次に本実施形態の動作を説明する。図４において、サーバ装置２００の取得部２１は、各カメラ１００によって撮像された画像を示す画像データをネットワーク９００経由で取得する（ステップＳ１）。
【００３２】
次に、サーバ装置２００の特定部２２は、取得された画像データ群から、或るカメラ１００によって撮像された画像データのうち、或る瞬間に撮像された画像データ（１シーン）を処理対象として選択する（ステップＳ２）。
【００３３】
そして、特定部２２は、その画像データについて画像認識を行い、ボール及びボール保持者を特定する（ステップＳ３）。ボールの認識は予め記憶されたボールの特徴点データと画像データとを照合することで行われる。ボール保持者の特定は、まず予め記憶された人間の特徴点データと画像データとを照合することでプレーヤが特定され、さらに、ボールと各プレーヤ（又はそのプレーヤが使用する道具）との間の距離を類推し、その距離が閾値以下であるか否かを判断することによって行われる。ボールと各プレーヤ（又はそのプレーヤが使用する道具）との間の距離が閾値以内ならボール保持者に相当する。このとき、上記カメラ１００とは異なるアングルで撮像を行うカメラ１００による同時期の撮像画像を併用して、ボールと各プレーヤ（又はそのプレーヤが使用する道具）との間の距離を類推するようにしてもよい。この距離の推定には、ボールとプレーヤ（又はそのプレーヤが使用する道具）とが画像上において重ならないようなアングルで撮像された画像を用いることが望ましい。
【００３４】
次に、特定部２２は、上記画像データについて、ボール及びボール保持者が存在するか否かを判断する（ステップＳ４）。ボール及びボール保持者が存在する場合（ステップＳ４；ＹＥＳ）、選択部２３は、ボール保持者の画像中の大きさに関する条件を満たす画像であるか否かを判断する（ステップＳ５）。この条件は、前述したように、同時期に撮像された画像のうちボール保持者が最も大きく写っていることか、又は、同時期に撮像された画像のうちボール保持者が閾値以上の大きさで写っていることである。この時点で同時期に撮像された他の画像のボール保持者の大きさを特定できていない場合は、同時期に撮像された他の画像のボール保持者の大きさを特定する処理が別途行われる。
【００３５】
ボール保持者の画像中の大きさに関する条件を満たす画像であると判断された場合（ステップＳ５；ＹＥＳ）、選択部２３は、上記画像データについて、プレーヤの行為に関する条件を満たす画像であるか否かを判断する（ステップＳ６）。ここでいうプレーヤの行為に関する条件とは、例えばフットサルの場合は、ボール保持者に相当するプレーヤの行為がシュート、コーナーキック、フリーキック、ペナルティキック、パスを出す、パスを受ける、シュートを止める等の、競技中において発生する特定のアクションに相当することである。この判断を行うため、特定部２２により、処理対象となる画像データの前後に撮像された画像（前後のシーン）についても画像認識が行われ、ボール又はボール保持者が特定される。さらに、選択部２３により、特定されたボール又はボール保持者の時系列的な動きが認識される。この動きが選択部２３に予め記憶されている特定のアクションの動き（ボール又はボール保持者の特徴点データの時系列的な移動軌跡）に相当する場合には、選択部２３は、プレーヤの行為に関する条件を満たす画像である（つまり特定アクションに相当する）と判断する（ステップＳ６；ＹＥＳ）。 特にアクションがシュートであることの判断は、ボールの動き（ボールの位置、移動方向及び移動速度）と、カメラ１００の撮像範囲及びゴールの位置関係とに基づいて、ボールが所定速度以上でゴールに向っているか否かによってなされる。
【００３６】
プレーヤの行為に関する条件を満たす画像であると判断された場合には（ステップＳ６；ＹＥＳ）、選択部２３はこの画像データ（１シーン）を選択する（ステップＳ７）。これにより選択された画像は例えば図５に示すように、ボールＢが写り、さらにボール保持者Ｐｂが大きく写っている。なお、ステップＳ６においてプレーヤの行為に関する条件を満たす画像ではない（つまり特定アクションに相当しない）と判断された場合は（ステップＳ６；ＮＯ）、処理はステップＳ１２に移る。
【００３７】
そして、未処理の画像データがある場合には（ステップＳ１２；ＹＥＳ）、上述したステップＳ２〜Ｓ７の処理が繰り返される。
【００３８】
一方、ステップＳ４にて、ボールが特定されているがボール保持者が存在しない場合には（ステップＳ４；ＮＯ）、選択部２３は、その画像データがプレーヤの行為に関する条件を満たす画像であるか否かを判断する（ステップＳ８）。ここでいうプレーヤの行為に関する条件とは、ステップＳ６と同様に、例えばフットサルの場合は、保持者に相当するプレーヤの行為がシュート、コーナーキック、フリーキック、ペナルティキック、パスを出す、パスを受ける、シュートを止める等の、競技中において発生する特定のアクションに相当することである。この判断を行うため、特定部２２により、処理対象となる画像データの前後に撮像された画像についても画像認識が行われ、ボール及びボール保持者が特定される。さらに、選択部２３により、特定されたボール又はボール保持者の時系列的な動きが認識される。この動きが選択部２３に予め記憶されている特定のアクションの動き（特徴点データの時系列的な移動軌跡）に相当する場合には、選択部２３は、プレーヤの行為に関する条件を満たす画像であると判断する（ステップＳ８；ＹＥＳ）。
【００３９】
次に、特定部２２は、その画像データの直前の時期において各カメラ１００により撮像された画像データ（１シーンに相当する画像データであり、以下、直前画像データという）について画像認識を行い、ボール及びボール保持者を特定する（ステップＳ９）。ここでいう直前とは、撮像データに含まれる撮像時期（タイムスタンプ）を基準として、１単位だけ前の撮像時期であることに限定されず、所定の単位だけ時間的に前に遡った時点であってもよい。ボール保持者が特定されると（ステップＳ９；ＹＥＳ）、選択部２３は、直前画像データについて、ボール保持者の画像中の大きさに関する条件を満たす画像であるか否かを判断する（ステップＳ１０）。この条件は、前述したステップＳ５と同様に、同時期に撮像された画像のうちボール保持者が最も大きく写っていることか、又は、同時期に撮像された画像のうちボール保持者が閾値以上の大きさで写っていることである。
【００４０】
ボール保持者の画像中の大きさに関する条件を満たす画像であると判断されると（ステップＳ１０；ＹＥＳ）、選択部２３は、この直前画像データ（１シーン）を選択する（ステップＳ１１）。例えば或る時刻Ｔ１に撮像された画像（図６）においてはボールが含まれているがボール保持者が含まれていない。これに対し、時刻Ｔ１の直前の時刻Ｔ０に撮像された画像（図７）においては、ボール保持者が特定され、且つ  図７（Ｔ０）から図６（Ｔ１）の間にはシュート等の特定アクションが行われている。この場合は、時刻Ｔ０に撮像された画像（図７）が、ボール保持者の画像中の大きさに関する条件を満たすか否かに関わらず、選択されることになる。
【００４１】
全ての画像データについて上述した処理が行われると（ステップＳ１２：；ＮＯ）、生成部２４は、選択部２３により選択された画像を時系列に再生するための再生データを生成する（ステップＳ１３）。ここで典型的には、撮像データに含まれる撮像時期（タイムスタンプ）の順番に再生されるような再生データが生成される。そして、出力部２５は、生成された再生データを表示端末３００に出力する（ステップＳ１４）。表示端末３００はこの再生データに基づいて画像を表示（再生）する。閲覧者は表示された画像（ダイジェスト画像）を閲覧する。
【００４２】
以上説明した実施形態によれば、競技中の各場面で中心的役割を担うボール保持者に注目した画像編集を行うことができる。
【００４３】
［変形例］
本発明は、上述した実施形態に限定されない。上述した実施形態を以下のように変形してもよい。また、以下の２つ以上の変形例を組み合わせて実施してもよい。
【００４４】
［変形例１］
選択部２３がボール保持者の画像中の大きさに関する条件を満たす画像を選択する場合には、その画像を撮像したカメラ１００（つまり撮像位置とアングル）が頻繁に切り替わることがある。このような撮像位置とアングルが短時間で切り替わるようなダイジェスト画像は閲覧者にとって見づらいおそれがある。そこで、選択部２３は、選択した画像を撮像したカメラ１００の単位時間当たりの変更回数が閾値を超える期間（例えば画像を撮像したカメラ１００が１０秒間あたりで５回以上変更するような期間）においては、例えば競技場所となるコート全域を俯瞰的に撮像するような位置とアングルに設定された所定のカメラ１００によって撮像された画像を選択するようにしてもよい。この場合、選択部２３は、この所定のカメラ１００の識別子を記憶しておき、上記のようなカメラ１００の単位時間当たりの変更回数が閾値を超える期間を検出すると、記憶しておいた識別子のカメラ１００によって撮像された画像を選択すればよい。
【００４５】
なお、実施形態において、選択部２３は、同時期に撮像された画像のうち、保持者の画像中の大きさに関する条件を満たす画像を選択していたが、この大きさに関する条件を満たすか否かは必ずしも必須ではなく、選択部２３は特定部２２により特定された保持者が存在する画像を選択するだけであってもよい。
【００４６】
［変形例２］
選択部２３は、競技における特定のタイミングで撮像された画像を選択するようにしてもよい。この場合、特定部２２によりボール及びボール保持者が特定された画像であるか否かや、ボール保持者の画像中の大きさに関する条件を満たすか否かは考慮してもよいし、考慮しなくてもよい。つまり、選択部２３は、特定部２２によりボール及びボール保持者が特定された画像であるか否かや、特定部２２により特定されたボール保持者の画像中の大きさに関する条件を満たすか否かに関わらず、競技中の時期に関する条件を満たす画像を選択するようにしてもよい。ここでいう時期に関する条件とは、例えば競技開始よりも所定期間前から競技開始所定期間経過まで、競技終了よりも所定期間前から競技終了所定期間経過後まで、又は、競技の中断の前後の所定期間（いわゆるハーフタイム等の休憩の前後の所定期間）に相当することである。これにより、例えば競技開始直後とか競技終了直前に撮像された画像が選択されることになる。
【００４７】
［変形例３］
選択部２３は、一定人数以上のプレーヤが写っている画像又はプレーヤの総人数に対して一定割合以上の人数のプレーヤが写っている画像を選択するようにしてもよい。この場合、その画像にボールが含まれているか否か又はその画像にボール保持者が含まれているか否か或いはボール保持者の画像中の大きさに関する条件を満たすか否かは考慮してもよいし、考慮しなくてもよい。つまり、選択部２３は、特定部２２によりボール及びボール保持者が特定された画像であるか否かや、ボール保持者の画像中の大きさに関する条件を満たすか否かに関わらず、プレーヤの人数に関する条件を満たす画像を選択するようにしてもよい。これにより、比較的多くのプレーヤが写っている画像を選択することができる。
【００４８】
［変形例４］
サーバ装置２００がカメラ１００から画像を取得するタイミングやサーバ装置２００にて画像処理を実行するタイミングは、任意である。例えば各カメラ１００は自発的に画像データをサーバ装置２００に常時又は間欠的に送信してもよいし、各カメラ１００は自発的に画像データをサーバ装置２００に送信することはせず、サーバ装置２００は表示端末３００からの要求に応じてカメラ１００に画像データを要求してもよい。あるいは、サーバ装置２００はユーザからの要求のタイミングとは関係なく、予め定められたスケジュールに従って画像処理を実行してもよい。
【００４９】
［変形例５］
実施形態で説明した各条件、つまり、保持者の画像中の大きさに関する条件、競技中の時期に関する条件、又は画像中の競技者の行為に関する条件は、競技の種類に応じて異なっていてもよい。例えばフットサルとラグビーを比較すると、この両者は、競技場所となるコートの大きさ（つまり各競技者とカメラ１００との平均的距離）、競技者の人数、競技中の競技者の行為、競技時間等の様々な競技条件が相違するので、この相違点に基づいて上記条件を各競技について設定することが望ましい。この場合、サーバ装置２００は競技ごとの各条件を記憶しておき、図４に示す処理の前にどの条件を採用するかをユーザの指示等に従って特定し、特定した条件を用いて図４に示す処理を実行する。
【００５０】
［その他の変形例］
上記実施の形態の説明に用いたブロック図は、機能単位のブロックを示している。これらの機能ブロック（構成部）は、ハードウェア及び／又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び／又は論理的に結合した１つの装置により実現されてもよいし、物理的及び／又は論理的に分離した２つ以上の装置を直接的及び／又は間接的に（例えば、有線及び／又は無線）で接続し、これら複数の装置により実現されてもよい。例えばサーバ装置２００の機能の少なくとも一部がカメラ１００又は表示端末３００に実装されてもよい。
【００５１】
本明細書で説明した各態様／実施形態は、ＬＴＥ（Long  Term  Evolution）、ＬＴＥ−Ａ（LTE-Advanced）、ＳＵＰＥＲ  ３Ｇ、ＩＭＴ−Ａｄｖａｎｃｅｄ、４Ｇ、５Ｇ、ＦＲＡ（Future  Radio  Access）、Ｗ−ＣＤＭＡ（登録商標）、ＧＳＭ（登録商標）、ＣＤＭＡ２０００、ＵＭＢ（Ultra  Mobile  Broadband）、ＩＥＥＥ  ８０２．１１（Ｗｉ−Ｆｉ）、ＩＥＥＥ  ８０２．１６（ＷｉＭＡＸ）、ＩＥＥＥ  ８０２．２０、ＵＷＢ（Ultra-WideBand）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、その他の適切なシステムを利用するシステム及び／又はこれらに基づいて拡張された次世代システムに適用されてもよい。
【００５２】
本明細書で説明した各態様／実施形態の処理手順、シーケンス、フローチャート等は、矛盾の無い限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。例えば、実施形態の動作例においては、ステップＳ６及びＳ８で、プレーヤの行為に関する条件を満たすか否かが判定されていたが、この判定処理は、例えばボール保持者が存在しているか否かを判定する処理（ステップＳ４）の前に実行されてもよい。
本明細書で説明した各態様／実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知（例えば、「Ｘであること」の通知）は、明示的に行うものに限られず、暗黙的（例えば、当該所定の情報の通知を行わない）ことによって行われてもよい。
【００５３】
本明細書で使用する「システム」及び「ネットワーク」という用語は、互換的に使用される。
【００５４】
本明細書で説明した情報又はパラメータ等は、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。例えば、無線リソースはインデックスで指示されるものであってもよい。
【００５５】
上述したパラメータに使用する名称はいかなる点においても限定的なものではない。さらに、これらのパラメータを使用する数式等は、本明細書で明示的に開示したものと異なる場合もある。様々なチャネル（例えば、ＰＵＣＣＨ、ＰＤＣＣＨ等）及び情報要素（例えば、ＴＰＣ等）は、あらゆる好適な名称によって識別できるので、これらの様々なチャネル及び情報要素に割り当てている様々な名称は、いかなる点においても限定的なものではない。
【００５６】
本明細書で使用する「判定（determining）」、「決定（determining）」という用語は、多種多様な動作を包含する場合がある。「判定」、「決定」は、例えば、判定（judging）、計算（calculating）、算出（computing）、処理（processing）、導出（deriving）、調査（investigating）、探索（looking up）（例えば、テーブル、データベース又は別のデータ構造での探索）、確認（ascertaining）  した事を「判定」「決定」したとみなす事等を含み得る。また、「判定」、「決定」は、受信（receiving）  （例えば、情報を受信すること）、送信（transmitting）（例えば、情報を送信すること）、入力（input）、出力（output）、アクセス（accessing）（例えば、メモリ中のデータにアクセスすること）した事を「判定」「決定」したとみなす事等を含み得る。また、「判定」、「決定」は、解決（resolving）、選択（selecting）、選定（choosing）、確立（establishing）、比較（comparing）等した事を「判定」「決定」したとみなす事を含み得る。つまり、「判定」「決定」は、何らかの動作を「判定」「決定」したとみなす事を含み得る。
【００５７】
本発明は、画像編集システム１やサーバ装置２００において行われる処理のステップを備える情報処理方法として提供されてもよい。また、本発明は、サーバ装置２００において実行されるプログラムとして提供されてもよい。かかるプログラムは、光ディスク等の記録媒体に記録した形態で提供されたり、インターネット等のネットワークを介して、コンピュータにダウンロードさせ、これをインストールして利用可能にする等の形態で提供されたりすることが可能である。
【００５８】
ソフトウェア、命令等は、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線（ＤＳＬ）等の有線技術及び／又は赤外線、無線及びマイクロ波等の無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び／又は無線技術は、伝送媒体の定義内に含まれる。
【００５９】
本明細書で説明した情報、信号等は、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップ等は、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。
【００６０】
本明細書で説明した用語及び／又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。例えば、チャネル及び／又はシンボルは信号（シグナル）であってもよい。また、信号はメッセージであってもよい。また、コンポーネントキャリア（ＣＣ）は、キャリア周波数、セル等と呼ばれてもよい。
【００６１】
本明細書で使用する「第１の」、「第２の」等の呼称を使用した要素へのいかなる参照も、それらの要素の量又は順序を全般的に限定するものではない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書で使用され得る。従って、第１及び第２の要素への参照は、２つの要素のみがそこで採用され得ること、又は何らかの形で第１の要素が第２の要素に先行しなければならないことを意味しない。
【００６２】
上記の各装置の構成における「手段」を、「部」、「回路」、「デバイス」等に置き換えてもよい。
【００６３】
「含む（ｉｎｃｌｕｄｉｎｇ）」、「含んでいる（ｃｏｍｐｒｉｓｉｎｇ）」、及びそれらの変形が、本明細書或いは特許請求の範囲で使用されている限り、これら用語は、用語「備える」と同様に、包括的であることが意図される。さらに、本明細書或いは特許請求の範囲において使用されている用語「又は（or）」は、排他的論理和ではないことが意図される。
【００６４】
本開示の全体において、例えば、英語でのa、an、及びtheのように、翻訳により冠詞が追加された場合、これらの冠詞は、文脈から明らかにそうではないことが示されていなければ、複数のものを含むものとする。
【００６５】
以上、本発明について詳細に説明したが、当業者にとっては、本発明が本明細書中に説明した実施形態に限定されるものではないということは明らかである。本発明は、特許請求の範囲の記載により定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。従って、本明細書の記載は、例示説明を目的とするものであり、本発明に対して何ら制限的な意味を有するものではない。
【符号の説明】
【００６６】
１・・・画像編集システム、１００−１〜１００−３・・・カメラ、２００・・・サーバ装置、２０１・・・ＣＰＵ、２０２・・・ＲＯＭ、２０３・・・ＲＡＭ、２０４・・・補助記憶装置、２０５・・・通信ＩＦ、２１・・・取得部、２２・・・特定部、２３・・・選択部、２４・・・生成部、２５・・・出力部、３００・・・表示端末、９００・・・ネットワーク
【図１】
2019134319.tif 000003
【図２】
2019134319.tif 000004
【図３】
2019134319.tif 000005
【図４】
2019134319.tif 000006
【図５】
2019134319.tif 000007
【図６】
2019134319.tif 000008
【図７】
2019134319.tif 000009
【手続補正書】
【提出日】平成30年5月23日(2018.5.23)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数の撮像装置によって撮像された各々の画像において、競技に用いられる球体物と当該球体物の保持者とを特定する特定部と、
前記特定部により前記球体物及び前記保持者が特定された画像を選択する選択部と、
前記選択部により選択された複数の画像を時系列に再生するための再生データを生成する生成部と
を備え、
前記選択部は、前記特定部により球体物が特定されて当該球体物の保持者が特定されていない画像が競技者の行為に関する条件を満たす場合には、当該画像よりも前の時期に撮像された画像であって当該球体物の保持者が特定された画像を選択する
ことを特徴とする情報処理装置。
【請求項２】
前記特定部は、前記球体物と各競技者との距離に基づいて前記保持者を特定する
ことを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記選択部は、同時期に撮像された前記画像のうち、前記特定部により特定された前記保持者の画像中の大きさに関する条件を満たす画像を選択する
ことを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記選択部は、さらに画像中の競技者の行為に関する条件を満たす画像を選択する
ことを特徴とする請求項１〜３のいずれか１項に記載の情報処理装置。
【請求項５】
前記選択部は、選択した画像を撮像した前記撮像装置の単位時間当たりの変更回数が閾値を超える期間においては、前記複数の撮像装置のうち所定の撮像装置によって撮像された画像を選択する
ことを特徴とする請求項１〜４のいずれか１項に記載の情報処理装置。
【請求項６】
前記選択部は、前記特定部により前記球体物及び前記保持者が特定された画像であるか否かに関わらず、競技中の時期に関する条件を満たす画像を選択する
ことを特徴とする請求項１〜５のいずれか１項に記載の情報処理装置。
【請求項７】
前記選択部は、前記特定部により前記球体物及び前記保持者が特定された画像であるか否かに関わらず、競技者の人数に関する条件を満たす画像を選択する
ことを特徴とする請求項１〜５のいずれか１項に記載の情報処理装置。
【請求項８】
前記条件が競技の種類に応じて異なる
ことを特徴とする請求項３，４，６，７のいずれか１項に記載の情報処理装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
上記目的を達成するために、本発明は、複数の撮像装置によって撮像された各々の画像において、競技に用いられる球体物と当該球体物の保持者とを特定する特定部と、前記特定部により前記球体物及び前記保持者が特定された画像を選択する選択部と、前記選択部により選択された複数の画像を時系列に再生するための再生データを生成する生成部と  を備え、前記選択部は、前記特定部により球体物が特定されて当該球体物の保持者が特定されていない画像が競技者の行為に関する条件を満たす場合には、当該画像よりも前の時期に撮像された画像であって当該球体物の保持者が特定された画像を選択することを特徴とする情報処理装置を提供する。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】削除
【補正の内容】