(57)【要約】【課題】対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減する。【解決手段】動画中の予め定めた期間に映っている生徒の顔認識を行うサーバ１の顔認識部１５と、顔認識部１５により認識された生徒を予め定めた期間に対応付けて登録しておくサーバ１の登録部１６と、情報を受付けた場合、情報により特定された生徒に対応付けられた期間の当該生徒が認識された画像を表示するＰＣと、を備える。【選択図】図２
2020053729.tif 000002
【特許請求の範囲】
【請求項１】
動画中の予め定めた期間に映っている対象を認識する認識手段と、
前記認識手段により認識された対象を前記期間に対応付けて登録しておく登録手段と、
情報を受付けた場合、当該情報により特定された前記対象に対応付けられた前記期間の当該対象が認識された画像を表示する表示手段と、
を備える動画編集装置。
【請求項２】
前記期間の前記対象が認識された画像が複数ある場合、当該複数の画像の中から１つの画像を選択する選択手段をさらに備える、ことを特徴とする請求項１に記載の動画編集装置。
【請求項３】
前記選択手段は、前記複数の画像の中で予め定められた条件を満たす画像を前記１つの画像として選択する、ことを特徴とする請求項２に記載の動画編集装置。
【請求項４】
前記選択手段は、前記複数の画像の中でユーザにより指定された画像を前記１つの画像として選択する、ことを特徴とする請求項２に記載の動画編集装置。
【請求項５】
動画中の予め定めた期間に映っている対象を認識する認識手段と、
前記認識手段により認識された対象を登録しておく登録手段と、
情報を受付けた場合、当該情報により特定された前記対象が前記登録手段に登録されているか否かを提示する提示手段と、
を備える動画編集装置。
【請求項６】
前記情報は、前記対象に対応する群を特定するものであり、
前記提示手段は、前記登録手段に登録されているか否かを提示する前記対象を前記群により特定する
ことを特徴とする請求項５に記載の動画編集装置。
【請求項７】
前記群は、前記対象が所属する学級である、ことを特徴とする請求項６に記載の動画編集装置。
【請求項８】
前記群は、前記対象が受ける授業の科目である、ことを特徴とする請求項６に記載の動画編集装置。
【請求項９】
前記提示手段は、前記登録手段に登録されている前記対象と登録されていない当該対象とで提示態様を変える、ことを特徴とする請求項５に記載の動画編集装置。
【請求項１０】
前記提示手段は、前記登録手段に登録されている前記対象よりも登録されていない当該対象の方を強調する提示態様で提示する、ことを特徴とする請求項５に記載の動画編集装置。
【請求項１１】
動画中の予め定めた期間に映っている対象を認識する認識手段と、
前記認識手段により認識された対象を登録しておく登録手段と、
前記認識手段による認識がされていないとして指定された前記対象を前記登録手段に追加登録する追加手段と、
を備える動画編集装置。
【請求項１２】
前記追加手段は、前記追加登録する前記対象を前記認証手段により認識された当該対象と共に登録しておく、ことを特徴とする請求項１１に記載の動画編集装置。
【請求項１３】
前記登録手段は、前記認識手段により認識された前記対象と前記追加手段により追加登録された当該対象とを区別する情報を登録しておく、ことを特徴とする請求項１２に記載の動画編集装置。
【請求項１４】
コンピュータに、
動画中の予め定めた期間に映っている対象を認識する認識機能と、
前記認識機能により認識された対象を前記期間に対応付けて登録しておく登録機能と、
情報を受付けた場合、当該情報により特定された前記対象に対応付けられた前記期間の当該対象が認識された画像を表示する表示機能と、
を実現させるプログラム。
【請求項１５】
コンピュータに、
動画中の予め定めた期間に映っている対象を認識する認識機能と、
前記認識機能により認識された対象を登録しておく登録機能と、
情報を受付けた場合、当該情報により特定された前記対象が前記登録機能に登録されているか否かを提示する提示機能と、
を実現させるプログラム。
【請求項１６】
コンピュータに、
動画中の予め定めた期間に映っている対象を認識する認識機能と、
前記認識機能により認識された対象を登録しておく登録機能と、
前記認識機能による認識がされていないとして指定された前記対象を前記登録手段に追加登録する追加機能と、
を実現させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画編集装置およびプログラムに関するものである。
【背景技術】
【０００２】
例えば、特許文献１には、動画コンテンツが時間的に分割された複数のコンテンツオブジェクトから構成され、コンテンツオブジェクトはその内容に関係する複数のタグ情報を含む動画コンテンツ編集プログラムであって、第１のタグ情報を含む複数のコンテンツオブジェクトの第１のタイムラインを表示すると共に、第１のタグ情報を含まないコンテンツオブジェクトの第２のタイムラインを、第１のタイムラインと並列に表示するユーザインタフェース制御手段と、タイムライン毎に、コンテンツオブジェクトを結合するコンテンツ生成手段としてコンピュータを機能させることが開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２６８１９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ここで、動画に映っている対象について画像付きレポートを作成する場合、動画の中から対象の画像を選び出すことは容易ではなく、作成者の負担が大きくなる傾向がある。
本発明の目的は、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することにある。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は、動画中の予め定めた期間に映っている対象を認識する認識手段と、前記認識手段により認識された対象を前記期間に対応付けて登録しておく登録手段と、情報を受付けた場合、当該情報により特定された前記対象に対応付けられた前記期間の当該対象が認識された画像を表示する表示手段と、を備える動画編集装置である。
請求項２に記載の発明は、前記期間の前記対象が認識された画像が複数ある場合、当該複数の画像の中から１つの画像を選択する選択手段をさらに備える、ことを特徴とする請求項１に記載の動画編集装置である。
請求項３に記載の発明は、前記選択手段は、前記複数の画像の中で予め定められた条件を満たす画像を前記１つの画像として選択する、ことを特徴とする請求項２に記載の動画編集装置である。
請求項４に記載の発明は、前記選択手段は、前記複数の画像の中でユーザにより指定された画像を前記１つの画像として選択する、ことを特徴とする請求項２に記載の動画編集装置である。
請求項５に記載の発明は、動画中の予め定めた期間に映っている対象を認識する認識手段と、前記認識手段により認識された対象を登録しておく登録手段と、情報を受付けた場合、当該情報により特定された前記対象が前記登録手段に登録されているか否かを提示する提示手段と、を備える動画編集装置である。
請求項６に記載の発明は、前記情報は、前記対象に対応する群を特定するものであり、前記提示手段は、前記登録手段に登録されているか否かを提示する前記対象を前記群により特定することを特徴とする請求項５に記載の動画編集装置である。
請求項７に記載の発明は、前記群は、前記対象が所属する学級である、ことを特徴とする請求項６に記載の動画編集装置である。
請求項８に記載の発明は、前記群は、前記対象が受ける授業の科目である、ことを特徴とする請求項６に記載の動画編集装置である。
請求項９に記載の発明は、前記提示手段は、前記登録手段に登録されている前記対象と登録されていない当該対象とで提示態様を変える、ことを特徴とする請求項５に記載の動画編集装置である。
請求項１０に記載の発明は、前記提示手段は、前記登録手段に登録されている前記対象よりも登録されていない当該対象の方を強調する提示態様で提示する、ことを特徴とする請求項５に記載の動画編集装置である。
請求項１１に記載の発明は、動画中の予め定めた期間に映っている対象を認識する認識手段と、前記認識手段により認識された対象を登録しておく登録手段と、前記認識手段による認識がされていないとして指定された前記対象を前記登録手段に追加登録する追加手段と、を備える動画編集装置である。
請求項１２に記載の発明は、前記追加手段は、前記追加登録する前記対象を前記認証手段により認識された当該対象と共に登録しておく、ことを特徴とする請求項１１に記載の動画編集装置である。
請求項１３に記載の発明は、前記登録手段は、前記認識手段により認識された前記対象と前記追加手段により追加登録された当該対象とを区別する情報を登録しておく、ことを特徴とする請求項１２に記載の動画編集装置である。
請求項１４に記載の発明は、コンピュータに、動画中の予め定めた期間に映っている対象を認識する認識機能と、前記認識機能により認識された対象を前記期間に対応付けて登録しておく登録機能と、情報を受付けた場合、当該情報により特定された前記対象に対応付けられた前記期間の当該対象が認識された画像を表示する表示機能と、を実現させるプログラムである。
請求項１５に記載の発明は、コンピュータに、動画中の予め定めた期間に映っている対象を認識する認識機能と、前記認識機能により認識された対象を登録しておく登録機能と、情報を受付けた場合、当該情報により特定された前記対象が前記登録機能に登録されているか否かを提示する提示機能と、を実現させるプログラムである。
請求項１６に記載の発明は、コンピュータに、動画中の予め定めた期間に映っている対象を認識する認識機能と、前記認識機能により認識された対象を登録しておく登録機能と、前記認識機能による認識がされていないとして指定された前記対象を前記登録手段に追加登録する追加機能と、を実現させるプログラムである。
【発明の効果】
【０００６】
請求項１によれば、受付けた情報により特定された対象に対応付けられた期間の当該対象が認識された画像を表示する表示手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項２によれば、期間の対象が認識された画像が複数ある場合複数の画像の中から１つの画像を選択する選択手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項３によれば、複数の画像の中で予め定められた条件を満たす画像を１つの画像として選択しない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項４によれば、複数の画像の中でユーザにより指定された画像を１つの画像として選択しない場合に比べて、作成者の意向に沿う１つの画像をレポートに利用することが可能になる。
請求項５によれば、受付けた情報により特定された対象が登録手段に登録されているか否かを提示する提示手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項６によれば、登録手段に登録されているか否かを提示する対象を群により特定しない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項７によれば、登録手段に登録されているか否かを提示する対象を所属する学級により特定しない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項８によれば、登録手段に登録されているか否かを提示する対象を授業の科目により特定しない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項９によれば、登録手段に登録されている対象と登録されていない対象とで提示態様を変えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１０によれば、登録手段に登録されている対象よりも登録されていない対象の方を強調する提示態様で提示しない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１１によれば、認識手段による認識がされていないとして指定された対象を登録手段に追加登録する追加手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１２によれば、追加登録する対象を認証手段により認識された対象と共に登録しておかない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１３によれば、認識手段により認識された対象と追加手段により追加登録された対象とを区別する情報を登録しておかない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１４によれば、受付けた情報により特定された対象に対応付けられた期間の当該対象が認識された画像を表示する表示手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１５によれば、受付けた情報により特定された対象が登録手段に登録されているか否かを提示する提示手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
請求項１６によれば、認識手段による認識がされていないとして指定された対象を登録手段に追加登録する追加手段を備えない場合に比べて、対象が映っている画像を利用してレポートを作成する際に対象の画像に関する作成者の負担を軽減することが可能になる。
【図面の簡単な説明】
【０００７】
【図１】本実施の形態に係る動画編集装置の構成を説明するブロック図である。
【図２】サーバの機能を説明するブロック図である。
【図３】登録部への登録の処理手順を示すフローチャートである。
【図４】追加登録部による追加登録の処理手順を示すフローチャートである。
【図５】登録部への登録を説明する図である。
【図６】顔認識処理後の状態を説明する図であり、（ａ）は顔認識された状態を示し、（ｂ）は追加登録された状態を示す。
【図７】表作成部による表作成の処理手順を示すフローチャートである。
【図８】一覧表の一例を示す図である。
【図９】レポート作成支援部による処理手順を示すフローチャートである。
【図１０】レポート作成支援の一例を示す図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。
図１は、本実施の形態に係る動画編集装置１００の構成を説明するブロック図である。
図１に示す動画編集装置１００は、例えば学校に設置され、学校教育に利用されるものであり、サーバ１を含む。このサーバ１には、携帯可能なボタン装置等の指示装置２と、例えば教室で授業を受ける生徒の様子を撮影可能なカメラ３と、カメラ３により撮影された画像等を表示し画像を使って生徒ごとのレポートを編集作成するパーソナルコンピュータ（ＰＣ）４と、が通信可能に接続される。
【０００９】
なお、サーバ１およびＰＣ４は、例えば、ソフトウェアを実行して演算等を行うためのＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ディスプレイ等の表示装置、コンピュータ本体に対して入力を行うための入力装置等によりそれぞれ構成される。また、サーバ１およびＰＣ４の各々は、物理的に１台のコンピュータの場合でもよく、複数台のコンピュータによる分散処理で実現してもよい。
【００１０】
図２は、サーバ１の機能を説明するブロック図である。
図２に示す例では、サーバ１は、カメラ３が撮影した画像を一時的に保持するバッファ部１１と、指示装置２からの指示等を受け付ける受付部１２と、指示装置２の指示を受付部１２が受け付けると、その前後の動画データを格納する動画データ格納部１３と、を備えている。
このように、サーバ１は、カメラ３の撮影画像がバッファ部１１に保持され、時間経過に従って古い撮影画像が消去され、新しい撮影画像が順次保持される。そして、受付部１２が指示装置２から指示を受け付けると、バッファ部１１が保持する一部または全部が動画データ格納部１３に格納され、録画される。なお、本実施の形態では、動画データ格納部１３への録画を常時行っていないが、そのような制御を行っても良い。
【００１１】
また、サーバ１は、レポートを作成する生徒の各々の個人データを予め格納してある個人データ格納部１４と、動画データ格納部１３に格納されている動画データの各フレームについて顔認識処理を行う顔認識部１５と、を備えている。この顔認識処理では、フレーム内で顔と判断される部分を生徒の顔画像データベースと照合し、生徒を特定する。
さらに、サーバ１は、顔認識部１５により顔認識された生徒を特定する生徒特定情報を動画データのフレーム情報と共に登録する登録部１６と、動画データ格納部１３に格納されている動画データには映っていても顔認識部１５による顔認識処理では顔認識されなかった生徒を登録部１６に追加登録する追加登録部１７と、を備えている。追加登録部１７を備えることにより、動画に映っている人物を顔認識部１５が認識しなかった場合にユーザの操作によってその人物を登録部１６に追加登録できる。
【００１２】
ここにいう個人データとは、生徒個人の所属学級を特定するためのデータをいう。この個人データを用いることで、学級に所属する生徒全員の氏名情報を取得することができる。また、学級の授業の時間割を示す情報および時間情報を取得する場合には、動画データ格納部１３に格納された動画データが撮影された授業の科目を特定することができる。
【００１３】
さらにまた、サーバ１は、レポートを作成する生徒の各々について、登録部１６に登録されている数を動画データ格納部１３に格納されている動画データごとに示す表を作成する表作成部１８と、登録部１６への登録を基に各生徒のレポートを作成するレポート作成支援部１９と、を備えている。
【００１４】
顔認識部１５は認識手段の一例であり、認識機能の一例である。登録部１６は登録手段の一例であり、登録機能の一例である。ＰＣ４は表示手段の一例であり、表示機能の一例である。生徒特定情報は、表示手段が受付ける情報の一例である。レポート作成支援部１９は選択手段の一例である。表作成部１８は提示手段の一例であり、提示機能の一例である。追加登録部１７は追加手段の一例であり、追加機能の一例である。
【００１５】
図３は、登録部１６への登録の処理手順を示すフローチャートである。
図３に示す処理例では、カメラ３が作動している場合（Ｓ１０１）、その撮影画像がサーバ１のバッファ部１１に常時格納される（Ｓ１０２）。  指示装置２からの指示入力を受け付けると（Ｓ１０３でＹｅｓ）、受付部１２は、録画期間ないし指定期間を設定する（Ｓ１０４）。そして、そのように設定された録画期間の動画データは、タグ情報を持つ動画データ（図５（ａ）に示すタグ付け動画データ３２参照）として、動画データ格納部１３に格納される（Ｓ１０５）。
【００１６】
そして、カメラ３で撮影されている生徒を個人データから把握した上で、タグ付け動画データからフレーム（図５（ａ）に示すフレーム３３参照）を抽出し、抽出したフレームの人物領域を抽出し（Ｓ１０６）、人物データについての人物識別処理（Ｓ１０７）で、同じ人物かどうかを判別する。そして、同じ人物データを用いて顔認識部１５が顔認識する（Ｓ１０８）。そして、顔認識された生徒を特定する生徒特定情報を、タグ付け動画データにおけるフレーム番号（図５（ａ）に示すフレーム番号ｎ参照）と共に登録部１６に登録する（Ｓ１０９）。Ｓ１０８とＳ１０９を適宜繰り返す（Ｓ１１０）。これにより、ユーザは、タグ付け動画データのどの位置でどの生徒が顔認識されたかを知ることができる。
指示装置２からの指示入力がなければ（Ｓ１０３でＮｏ）、カメラ３が停止したか否かを判断する（Ｓ１１１）。カメラ３が停止していなければ（Ｓ１１１でＮｏ）、ステップ１０３に戻り、停止していれば（Ｓ１１１でＹｅｓ）、処理を終了する。
なお、本実施の形態では、入力指示の後カメラが停止する前に人物領域抽出（Ｓ１０６）から個人特定データ登録（Ｓ１０９）まで行うが、人物領域抽出（Ｓ１０６）以降の処理は、例えばカメラ停止後など、任意のタイミングで行ってもよい。
【００１７】
図４は、追加登録部１７による追加登録の処理手順を示すフローチャートである。
上述したように、タグ付け動画データに映っている生徒は、顔認識されて登録部１６に登録されるが、タグ付け動画データに映っているものの顔認識されない生徒は登録されない。そこで、本実施の形態では、追加登録部１７を備え、顔認識されなくても登録できるようにしている。なお、登録部１６への登録は自動的に行われるものであるが、追加登録部１７による追加登録は、ユーザ例えば先生がＰＣ４を操作することにより行われる。
【００１８】
本実施の形態では、動画中の指定期間に映っている人物を認識する顔認識部１５を一例とする認識手段と、認識手段が認識した人物を登録しておく登録部１６を一例とする登録部と、指定期間中に映っている人物を認識手段が認識しなかった場合、人物を登録部に追加登録する追加登録部１７を一例とする追加登録手段と、を備えている。また、本実施の形態では、動画中の指定期間に映っている対象を認識する顔認識部１５を一例とする認識手段と、認識手段が認識した対象を登録しておく登録部１６を一例とする登録部と、指定期間中に認識手段が認識しなかった対象を登録部に追加登録する追加登録部１７を一例とする追加登録手段と、を備えても良い。
【００１９】
図４に示す処理例では、サーバ１の受付部１２がＰＣ４からの編集指示を受け付けると（Ｓ２０１）、動画データ格納部１３に格納されている動画データの中から対応するタグ付け動画データを取得する（Ｓ２０２）。また、タグ付け動画データにて特定された生徒の生徒特定情報およびフレーム番号を登録部１６から取得する（Ｓ２０３）。そして、タグ付け動画データと生徒特定情報およびフレーム番号とによる動画を再生する（Ｓ２０４）。すなわち、タグ付け動画データにおいて、顔認識により特定された生徒の画像にマークを付加したフレームを連続再生することで、どのフレームでどの生徒が顔認識されているかが分かる。また、動画再生により、映っていても顔認識されていない生徒を把握することができる。このように、タグ付け動画データにおいて、顔認識された生徒（顔認識生徒）と顔認識されていない生徒（未認識生徒）を先生が知ることができる。
【００２０】
ＰＣ４にて動画再生を視聴する先生は、あるフレームにおける未認識生徒のうち認識しておきたい生徒についてＰＣ４を操作して入力すると、サーバ１の受付部１２は、追加生徒特定情報として受け付ける（Ｓ２０５）。そして、タグ付け動画データに対応のフレームに対応付けて生徒特定情報が追加登録部１７により登録部１６に追加登録される（Ｓ２０６）。これにより、未認識生徒は、追加認識生徒として以降処理される。
【００２１】
なお、登録部１６への登録は、上述したように、顔認識部１５による場合と追加登録部１７による追加登録の場合とがある。登録部１６への登録に際し、顔認識生徒と追加認識生徒とを区別せずに登録する態様と、両者を区別可能に登録する態様とが考えられる。レポート作成時の使い勝手を考慮して、いずれを採用しても良い。前者の場合は、後者の場合に比べ、レポート作成時に表示される情報が少なくなる点で、ユーザの負担を軽減することができる。また、後者の場合には、追加登録した生徒の事後検索が可能になる。もちろん、両者のいずれかをユーザが録画する前の段階で選択できるようにすることが考えられ、また、表作成の段階で表示態様を選択することも考えられる。
【００２２】
登録部１６に登録されている情報のうち、顔認識生徒のものと追加認識生徒のものとを区別する場合には、両者を区別する情報を登録部１６に登録しておくことで実現できる。
ここにいう区別する情報とは、登録部１６に登録された事由を区別するための情報をいい、例えばいずれか一方を他方と区別するためのフラグ情報としても良い。また、登録部１６を、顔認識生徒を登録する領域と追加認識生徒を登録する領域とに区分けし、登録先の領域の情報を、ここにいう区別する情報としても良い。
【００２３】
登録部１６への登録について具体的に説明する。
図５は、登録部１６への登録を説明する図であり、動画データとフレームとの関係を示す。図６は、顔認識処理後の状態を説明する図であり、（ａ）は顔認識された状態を示し、（ｂ）は追加登録された状態を示す。
図５に示すように、カメラ３が作動している場合に指示装置２からの指示があると、動画データ３１のうち指示があった時点の前後の期間の動画データがタグ付け動画データ３２として、動画データ格納部１３に格納される。タグ付け動画データ３２は、複数のフレームを備え、例えばフレーム３３にはフレーム番号ｎが付される。指示があった時点の前後の期間は、動画中の予め定めた期間の一例である。
【００２４】
いったん動画データ格納部１３に格納されたタグ付け動画データ３２の各フレームに対し、顔認識部１５による顔認識処理が行われると、図６（ａ）に示すように、フレーム３３では生徒Ａおよび生徒Ｂが特定されている。この場合、フレーム番号ｎの生徒特定情報はＡ，Ｂである。これにより、フレーム番号から生徒特定情報を取得することができ、また、生徒特定情報からフレーム番号を特定することができる。
なお、追加登録部１７による追加登録が行われる際のＰＣ４での動画再生時（Ｓ２０４参照）には、再生バー３４が表示され、タグ付け動画データにおける経過時間の位置を示す。再生バー３４をスライドすることで別のフレームを表示することができる。
【００２５】
図６（ｂ）に示すように、顔認識されなかった生徒Ｃが編集により追加登録されている。生徒Ｃの顔が映っていないことから顔認識されなかったが、フレーム３３で生徒Ｃのレポート作成に使うかもしれないと先生が判断した場合等には、生徒Ｃが追加登録され、図６（ｂ）のように表示される。
なお、図６（ｂ）では、顔認識された生徒Ａ，Ｂに関する表示と追加登録された生徒Ｃに関する表示を互いに異なる態様で示すが、同じ態様で示しても良い。
【００２６】
図７は、表作成部１８による表作成の処理手順を示すフローチャートである。
上述したように、予め定められた期間における各生徒の画像付きレポートを作成する場合、レポート作成段階でレポートに必要な画像が不足していることが判明しても対応が困難である。そこで、本実施の形態では、表作成部１８を備え、要求に応じ生徒ごとの登録状況を表示できるようにしている。なお、ここにいう登録状況は、登録に関し、人物ごとの情報の量に関する情報である。登録部１６だけの登録状況の場合でも良く、登録部１６および追加登録部１７の登録状況の場合でも良く、追加登録部１７だけの登録状況の場合でも良い。
本実施の形態は、動画中の指定期間に映っている人物を認識する顔認識部１５を一例とする認識手段と、認識手段が認識した人物と指定期間とを含む情報について保持する登録部１６および追加登録部１７を一例とする保持手段と、保持手段が保持している情報の量に関する情報を、人物ごとに表示するＰＣ４を一例とする表示手段を備えている。
【００２７】
図７に示す処理例では、サーバ１の受付部１２がＰＣ４を介して表作成の指示を受け付けると（Ｓ３０１）、表作成部１８が登録部１６に登録されているフレーム情報および生徒特定情報を取得する（Ｓ３０２）。ここにいう表作成の指示には、表に含まれる項目を指定する情報を含む。この情報は、例えば学級や授業の科目等を特定するものであり、提示手段が受付ける情報の一例であり、対象に対応する群を特定する情報の一例である。
表作成部１８は、取得した情報を用いて一覧表データを作成し（Ｓ３０３）、ＰＣ４は、そのデータを基にする一覧表を画面に表示する（Ｓ３０４）。
【００２８】
この一覧表は、ダッシュボードとも呼ばれるものであり、登録部１６への生徒ごとの登録の有無ないし登録の数を知るためのものである。表の縦方向横方向のいずれか一方の項目が生徒の氏名であり、他方の項目は、例えば時間軸（１週間ごと、日ごと）や授業の科目別としても良い。ＰＣ４からの表作成指示に、予め定められた項目の中から選択された項目を含めても良く、その場合には、選択された項目で一覧表が作成される。
また、一覧表を、学級単位であり学級の全生徒について表示する場合の他、一部の生徒について表示する場合も考えられる。
【００２９】
一覧表について具体的に説明する。
図８は、一覧表の一例を示す図であり、ＰＣ４での表示例である。
図８に示す表示例では、横方向は左から右に時系列であり、縦方向には、学級に所属する生徒の氏名が並んでいる。そして、生徒ごとに登録された日に分けて、登録部１６に登録された数を表示している。定期的にこのような一覧表を表示することで、先生は登録状況を確認することができ、また、レポート作成に必要な画像数の状況を把握することができる。例えば、画像数が少ない生徒に対しては、レポート作成時までの残りの期間では注意を払い、撮影の回数が増えるようにできる。
図８の表示例では、学級に所属する全生徒の一覧表を示しているが、授業の科目別に一覧表を表示する態様も考えられる。このような学級の生徒一覧表や科目別の一覧表の作成指示は、対象に対応する群を特定する情報の一例である。
【００３０】
図８の表示例では、登録部１６への登録がある場合にその数が表示され、登録がない場合に「０」が表示される。登録されている生徒の場合と登録されていない生徒の場合で、提示態様を変えても良い。「０」表示とそれ以外の数字表示とを異なる色で表示したり、異なる大きさで表示したりしても良い。例えば、「０」表示を赤色で強調して示し、それ以外の数字表示を黒色で表示する。また、「０」表示をそれ以外の数字表示よりも大きく表示して強調して示す。
また、一覧表を、顔認識部１５により顔認識されて登録部１６に登録されている場合（顔認識生徒）と、追加登録部１７により追加登録されている場合（追加認識生徒）とに分けて表示する態様を選択できるようにしても良い。
【００３１】
図９は、レポート作成支援部１９による処理手順を示すフローチャートである。
上述したように、生徒ごとに画像付きレポートを作成する場合、レポート作成の段階で録画を参照しながらレポートに付す生徒の画像を探して選び出す作業を行うと、レポート作成に時間がかかってしまう。そこで、本実施の形態では、登録部１６への登録により画像に属性（タグ情報）を付与しておき、属性を検索したときに属性に関する画像と付与的文書（生徒特定情報）を表示し、編集作業を容易にしている。
本実施の形態は、動画中の指定期間について付与された属性を検索した場合、指定期間に関する画像及び指定期間に関する付与的文書の組を表示するＰＣ４を一例とする表示手段と、付与的文書を編集するＰＣ４を一例とする編集手段と、を備えている。
【００３２】
図９に示す処理例では、先生がＰＣ４から対象の生徒についての情報を入力すると（Ｓ４０１）、サーバ１のレポート作成支援部１９は、登録部１６に登録されている生徒特定情報を照合し、対象の生徒が映っているタグ付け動画データのフレーム番号を特定する（Ｓ４０２）。そして、フレーム番号に映っている生徒の画像を抽出する（Ｓ４０３）。こうして、タグ付け動画から目的の画像を取り出すことができる。
【００３３】
生徒画像の抽出は、生徒画像が複数ある場合には、複数の画像の中から１枚を選択する処理を行う。
例えば、レポート作成支援部１９が予め定められた処理を行うことでいずれか１枚が選択される（自動選択）。これにより、レポート作成の負担軽減を図ることができる。ここにいう予め定められた処理としては、例えば、画像全体の中で対象の生徒が映っている領域が最も大きい画像を選び出す処理や、対象の生徒以外の生徒が映っている場合に生徒の数が最も少ない画像を選び出す処理を採用することができる。また、対象の生徒の顔の表情が予め定められた条件を満たす画像を選び出す処理を採用しても良い。また、例えば、複数の要素を重要度に応じて重み付けして評価し、画像を選び出す処理を行ってもよい。この場合の要素としては、例えば映っている生徒の数や対象の生徒が映っている領域、対象生徒の顔の表情等である。
また、レポート作成支援部１９が、対象の生徒が映っている画像をＰＣ４に表示し、その中から先生が１枚を選択するようにしても良い（手動選択）。これにより、レポートにおける生徒の評価に対応する生徒の画像を選択することができる。
【００３４】
処理手順の説明に戻る。抽出した生徒の画像をＰＣ４に表示し（Ｓ４０４）、次に、必要に応じて、生徒の画像に対するコメントを入力する（Ｓ４０５）。そして、サーバ１のレポート作成支援部１９は、生徒の画像と入力のコメントを対応付けて保存する（Ｓ４０６）。
【００３５】
レポート作成支援について具体的に説明する。
図１０は、レポート作成支援の一例を示す図であり、ＰＣ４での表示例である。
図１０の表示例では、レポートの対象生徒名と対象期間を表示し、その他必要な情報が表示される。そして、生徒Ａが映っている画像が表示され、それに対応する領域に、先生が入力可能なコメント欄が設定されている。同図の例では、コメント欄に「友達によく笑いかけるようになった」が入力されている。
先生がＰＣ４から入力する情報は生徒Ａであり、レポート作成支援部１９は、登録部１６に登録されている画像のうち生徒Ａが映っている画像を１枚自動的に選択し、表示する。このため、レポート作成の際の先生の負担を軽減させることが可能である。
【００３６】
このように、本実施の形態に係る動画編集装置１００は、動画中の予め定めた期間に映っている生徒の顔認識を行うサーバ１の顔認識部１５と、顔認識部１５により認識された生徒を予め定めた期間に対応付けて登録しておくサーバ１の登録部１６と、生徒特定情報を受付けた場合、生徒特定情報により特定された生徒に対応付けられた期間の当該生徒が認識された画像を表示するＰＣ４と、を備える。また、本実施の形態に係る動画編集装置１００は、動画中の予め定めた期間に映っている生徒の顔認識を行うサーバ１の顔認識部１５と、顔認識部１５により認識された生徒を登録しておくサーバ１の登録部１６と、例えば学級情報を受付けた場合、学級情報により特定された生徒が登録部１６に登録されているか否かを提示するＰＣ４と、を備える。また、本実施の形態に係る動画編集装置１００は、動画中の予め定めた期間に映っている生徒の顔認識を行うサーバ１の顔認識部１５と、顔認識部１５により認識された生徒を登録しておくサーバ１の登録部１６と、顔認識部１５による認識がされていないとして指定された生徒を登録部１６に追加登録する追加登録部１７と、を備える。
これにより、生徒が映っている画像を利用してレポートを作成する際に生徒の画像に関する作成者の負担を軽減することができる。
【符号の説明】
【００３７】
１…サーバ、４…ＰＣ、１５…顔認識部、１６…登録部、１７…追加登録部、１８…表作成部、１９…レポート作成支援部、１００…動画編集装置
【図１】
2020053729.tif 000003
【図２】
2020053729.tif 000004
【図３】
2020053729.tif 000005
【図４】
2020053729.tif 000006
【図５】
2020053729.tif 000007
【図６】
2020053729.tif 000008
【図７】
2020053729.tif 000009
【図８】
2020053729.tif 000010
【図９】
2020053729.tif 000011
【図１０】
2020053729.tif 000012