(57)【特許請求の範囲】
【請求項１】
サーバ上でユーザに素材データを編集させて映像コンテンツを自動生成する映像コンテンツ自動生成システムであって、
前記サーバは、
映像、画像、音声、効果音、テキストの素材データを記憶する手段と、
映像の素材データと、画像、音声、効果音、テキストのうち少なくとも１種類の素材データとの既定の組み合わせとして定義されるカードのカード情報を記憶する手段と、
複数のカードの既定の組み合わせとして定義されるテンプレートのテンプレート情報を記憶する手段と、
各カードのカード情報に基づき当該カードを構成する素材データの選択、並び替え、追加、削除の操作をユーザに行わせるカード編集手段と、
各テンプレートのテンプレート情報に基づき当該テンプレートを構成するカードの選択の操作をユーザに行わせるテンプレート編集手段と、
ユーザにより編集されたカード及びテンプレートに従い、映像コンテンツを生成する映像コンテンツ生成手段とを有する映像コンテンツ自動生成システム。
【請求項２】
前記カード情報は、カードが有する映像における、組み合わせる画像、テキストの表示位置、表示態様、表示タイミングの情報を含んでいることを特徴とする請求項１に記載の映像コンテンツ自動生成システム。
【請求項３】
前記カード情報は、カードが有する映像における、組み合わせる音声、効果音の再生態様、再生タイミングの情報を含んでいることを特徴とする請求項１に記載の映像コンテンツ自動生成システム。
【請求項４】
前記サーバは、音楽の素材データを記憶する手段を有しており、
前記テンプレート情報は、当該テンプレートに組み合わせられる音楽の情報を含んでいることを特徴とする請求項１から３のいずれか１項に記載の映像コンテンツ自動生成システム。
【請求項５】
前記サーバは、ユーザからの画像、音声、効果音、テキストのコンテンツ素材データの入力を受け付け記憶する手段を有することを特徴とすることを特徴とする請求項１から４のいずれか１項に記載の映像コンテンツ自動生成システム。
【請求項６】
前記サーバは、自動生成した映像コンテンツの評価情報を取得し記憶する手段を有することを特徴とする請求項１から５のいずれか１項に記載の映像コンテンツ自動生成システム。
【請求項７】
前記評価情報は、映像コンテンツの再生回数、再生時間、視聴者数、視聴者によるアクション回数、視聴者によるレイティングのうち少なくとも１つの評価基準による評価値を含んでいることを特徴とする請求項６に記載の映像コンテンツ自動生成システム。
【請求項８】
前記サーバのテンプレート編集手段は、ユーザがテンプレートを構成するカードの編集操作をする際に、高評価を得ている映像コンテンツに含まれるカードを推薦する機能を有することを特徴とする請求項６又は７に記載の映像コンテンツ自動生成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザ端末上の簡単な操作で任意の映像コンテンツを生成することを可能にする映像コンテンツ自動生成システムに関し、特に、予め用意されたコンテンツ素材とテンプレートを利用して映像コンテンツの編集を可能とする映像コンテンツ自動生成システムに関するものである。
【背景技術】
【０００２】
映像コンテンツのデジタル化により、撮影された映像・音声データをコンピュータ上で編集処理して映像コンテンツを制作するのが一般的となっている。映像の編集処理は、例えば、不要部分をカットしたり、文字や図形を合成したり、映像・音声に効果を与えたりなどが行われる。
【０００３】
デジタルビデオカメラなどの撮影機器が広く普及すると、一般ユーザにおいても撮影した映像を編集して映像コンテンツを制作することが可能となった。
記念行事やプライベートシーンをデジタルビデオカメラなどで撮影し、撮影した映像・音声データをパーソナルコンピュータのソフトウェアで編集処理して、記録し配布・配信することが広く行われている。
ここで用いられるソフトウェアは、例えば、デジタルビデオカメラに付属して販売されている動画編集ソフトウェアや、有償・無償で頒布されている一般的な動画編集ソフトウェアである。
【０００４】
特許文献１には、映像編集について特別の知識や技術がない一般ユーザでも簡単にコンテンツが作成できるようにする仕組みとして、コンピュータ上で、動画、静止画、音声、テキスト等のコンテンツ素材情報と、コンテンツ素材情報を配置するためのレイアウト情報と、コンテンツ素材情報をレイアウト上に配置するルール情報とを保持しておき、ユーザは、コンテンツ生成に使用するレイアウト情報の選択、コンテンツ生成に使用するルールの選択するルール選択を行うのみで、選択されたレイアウト情報に対して、選択されたルールを適用し、コンテンツ素材情報保持手段に保持されているコンテンツ素材情報を配置してコンテンツを自動生成して出力するコンテンツ生成システムが提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−４８４６５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、デジタルビデオカメラに付属して販売されている動画編集ソフトウェアや、有償・無償で頒布されている一般的な動画編集ソフトウェアは、一般ユーザ向けであり、機能的には制限されたものである。また、映像編集の専門知識がない一般ユーザがこれらの動画編集ソフトウェアを用いて編集作業しても、高い品質の映像コンテンツを制作することは困難であった。
【０００７】
特許文献１に提案されたコンテンツ生成システムは、予め用意されたコンテンツ素材、レイアウト、ルールの組み合わせにより、一般ユーザでも簡単に映像編集をしてコンテンツを自動生成できるという利点はあるが、ユーザが満足するような高い品質の映像コンテンツを制作できるものではない。
【０００８】
本来、映像の編集処理は極めて高度な技術を要する作業であり、専門の編集技術者が高性能な機材・ソフトウェアを用いて行うことで、高い品質の映像コンテンツが制作される。しかしながら、近年の動画編集に関するソフトウェア技術やクラウド・ネットワーク技術の進歩によって、一般ユーザにも容易に映像編集が可能であり、かつ、一定の品質の映像コンテンツを制作することを可能にするシステムが待望されている。
【０００９】
本発明は、このような実情に鑑みてなされたものであり、予め用意されたコンテンツ素材とテンプレートを利用して映像コンテンツの編集を可能とする映像コンテンツ自動生成システムを提供しようとするものである。
【課題を解決するための手段】
【００１０】
上記解決課題に鑑みて鋭意研究の結果、本発明者は、コンテンツの素材データが構造化されたテンプレートとして構成される映像コンテンツにおいて、各素材データとそれらの構造を組み替えることで、一般ユーザでも高度な映像編集を容易に行うことが可能となる仕組みを考案した。
具体的には、映像と、画像、音楽、音声、効果音、テキスト等のコンテンツ素材データとの組み合わせで構成される比較的短尺（例えば５〜１０秒）の映像素材データ（以下、「カード」という。）を規定し、複数のカードの組み合わせで構成されるテンプレートを規定し、各カード内のコンテンツ素材データの選択、並び替え、追加、削除等と、テンプレート内のカードの選択等を行うことで、結果物である映像コンテンツを編集することを可能とする仕組みに想到し、本発明を成すに至った。
【００１１】
すなわち、本発明は、サーバ上でユーザに素材データを編集させて映像コンテンツを自動生成する映像コンテンツ自動生成システムであって、前記サーバは、映像、画像、音声、効果音、テキストの素材データを記憶する手段と、映像の素材データと、画像、音声、効果音、テキストのうち少なくとも１つの素材データとの組み合わせをカードとして規定するカード情報を記憶する手段と、複数のカードの組み合わせをテンプレートとして規定するテンプレート情報を記憶する手段と、各カードのカード情報に基づき当該カードを構成する素材データの選択、並び替え、追加、削除の操作をユーザに行わせるカード編集手段と、各テンプレートのテンプレート情報に基づき当該テンプレートを構成するカードの選択の操作をユーザに行わせるテンプレート編集手段と、ユーザにより編集されたカード及びテンプレートに従い、映像コンテンツを生成する映像コンテンツ生成手段とを有する映像コンテンツ自動生成システムを提供するものである。
【００１２】
本発明の映像コンテンツ自動生成システムにおいて、前記カード情報は、カードが有する映像における、組み合わせる画像、テキストの表示位置、表示態様、表示タイミングの情報を含んでいることを特徴とする。
また、前記カード情報は、カードが有する映像における、組み合わせる音声、効果音の再生態様、再生タイミングの情報を含んでいることを特徴とする。
このように、映像上における画像、テキストのタイミングや動きパターンなど、音声、効果音の合わせ方やタイミングなどを、予めカードごとにその合成効果が最大となるように規定しておくことで、ユーザが任意に素材データの選択、組み合わせをしたとしても、生成される映像コンテンツは一定の品質を有するようになる。
【００１３】
本発明の映像コンテンツ自動生成システムにおいて、前記サーバは、音楽の素材データを記憶する手段を有しており、前記テンプレート情報は、当該テンプレートに組み合わせられる音楽の情報を含んでいることを特徴とする。
【００１４】
本発明の映像コンテンツ自動生成システムにおいて、前記サーバは、ユーザからの画像、音声、効果音、テキストのコンテンツ素材データの入力を受け付け記憶する手段を有することを特徴とすることを特徴とする。
これにより、ユーザ保有の素材データをユーザが望む通りに組み込みつつ、一定の品質の映像コンテンツを自動生成することが可能となる。
【００１５】
本発明の映像コンテンツ自動生成システムにおいて、前記サーバは、自動生成した映像コンテンツの評価情報を取得し記憶する手段を有することを特徴とする。この評価情報は、例えば、映像コンテンツの再生回数、再生時間、視聴者数、視聴者によるアクション回数、視聴者によるレイティングの１つ又は複数の評価基準による評価値とすることができる。
このように、ユーザ編集により自動生成した映像コンテンツに対するフィードバックを得ることで、素材データ、カード、テンプレートの改良が可能であり、また、マーケンティングに役立てることも可能である。
【００１６】
本発明の映像コンテンツ自動生成システムにおいて、前記サーバのテンプレート編集手段は、ユーザがテンプレートを構成するカードの編集操作をする際に、高評価を得ている映像コンテンツに含まれるカードを推薦する機能を有することを特徴とする。
既に高評価を得ているカードを使用することで、高品質な映像コンテンツが生成されることが期待される。
【発明の効果】
【００１７】
以上、説明したように、本発明によれば、ユーザがサーバ上で、映像とこれに付加する素材データの組み合わせであるカードを対象とする簡単で直感的な編集操作と、そのカードを複数組み合わせたテンプレートを対象とする簡単で直感的な編集操作とを行うのみで、一定の品質の映像コンテンツを自動生成することができるシステムが提供される。
上記のように、予めシステム上に用意された素材データ、カード、テンプレートに対する簡単で直感的な編集操作のみを行えばよいので、ユーザは、専門知識や高度な技術は要求されることなく、自分の考えや好みに応じた編集を行い、一定の品質の映像コンテンツを制作することが可能となる。
【図面の簡単な説明】
【００１８】
【図１】本発明の第１実施形態にかかる映像コンテンツ自動生成システムについて、全体の概略構成を示す模式図である。
【図２】本発明の第１実施形態にかかる映像コンテンツ自動生成システムにおいて、管理サーバが有する機能を概念的に示した図である。
【図３】本発明の第２実施形態にかかる映像コンテンツ自動生成システムについて、全体の概略構成を示す模式図である。
【図４】本発明の第２実施形態にかかる映像コンテンツ自動生成システムにおいて、管理サーバが有する機能を概念的に示した図である。
【図５】本発明の映像コンテンツ自動生成システムにおけるカード編集操作、テンプレート編集操作の表示画面例を示す図である。
【図６】本発明の映像コンテンツ自動生成システムにおけるカード編集操作、テンプレート編集操作の表示画面例を示す図である。
【図７】本発明の映像コンテンツ自動生成システムにおけるカード編集操作、テンプレート編集操作の表示画面例を示す図である。
【図８】本発明の映像コンテンツ自動生成システムにおけるカード編集操作、テンプレート編集操作の表示画面例を示す図である。
【発明を実施するための形態】
【００１９】
以下、添付図面を参照しながら、本発明の映像コンテンツ自動生成システムを実施するための最良の形態を詳細に説明する。図１〜図８は、本発明の実施の形態を例示する図であり、これらの図において、同一の符号を付した部分は同一物を表わし、基本的な構成及び動作は同様であるものとする。
【００２０】
[第１実施形態]
図１は、本発明の映像コンテンツ自動生成システムの第１実施形態について、システム全体の概略構成を示す模式図である。
図１において、本発明の映像コンテンツ自動生成システムは、管理サーバと、管理サーバに通信可能に接続された管理端末と、管理サーバとネットワークを通じて通信可能なユーザ端末とから構成される。図中、ユーザ端末の例として、スマートフォン端末、ノートＰＣ端末、タブレットＰＣ端末を示しているが、これらに限定されるものではない。また、ネットワーク通信は有線・無線を問わない。
【００２１】
管理サーバは、本システムの機能を実現するための各種データ、プログラム、ハードウェア等を有しており、ユーザ端末に対して、映像コンテンツ自動生成サービスを提供する。
管理端末は、管理サーバ上の各種データ、プログラムなどを管理する機能を有する。
ユーザ端末は、管理サーバと通信を行い、映像コンテンツの素材データをアップロードしたり、映像コンテンツ生成のための編集作業の指示入力を行ったり、生成された映像コンテンツをダウンロードしたりすることができる。
【００２２】
図２は、図１に示す管理サーバが有する機能を概念的に示した図である。
図２において、管理サーバは、その記憶領域において、ユーザ情報、素材データ、カード情報、テンプレート情報、映像コンテンツを記憶している。
また、ユーザ情報登録手段、素材データ入力手段、カード編集手段、テンプレート編集手段、映像コンテンツ生成手段、通信を有している。これら各手段は、必要に応じてサーバのハードウェア資源を利用するアプリケーションソフトウェアとして管理サーバに実装される。
【００２３】
ユーザ情報は、ユーザを識別するための情報であり、アカウント情報やユーザ端末の識別子として記憶される。尚、ユーザ情報は必ずしも保持していなくてもよい。
素材データは、映像、画像、音声、効果音、テキスト、音楽のデータであり、それぞれ独立した素材データとして記憶されている。映像は、比較的短尺（例えば５〜１０秒）のものであり、画像、音声、効果音、テキストは映像の素材データに組み込まれることを前提とした態様・ボリュームとなっている。また、音楽は後述するテンプレートに組み込まれることを前提とした態様・ボリュームとなっている。
【００２４】
カード情報は、映像の素材データと、画像、音声、効果音、テキストのうち少なくとも１つの素材データとの組み合わせの規定の情報である。例えば、１０秒間の映像の中に画像、テキストがどのようなタイミング（出現時点や順序）でどのような表示位置・大きさで表れどのように動くか、また、音声、効果音がどのようなタイミングにどのような音量、音色で再生されるかということを規定するものである。当然、個々の映像の特性に合わせて、組み合わせによる視聴効果が最大限となるように規定されている。
【００２５】
テンプレート情報は、複数のカードの組み合わせの規定の情報である。例えば、映像の再生時間が１０秒であるカード、２０秒であるカード、１５秒であるカード、１５秒であるカードを順に組み合わせて６０秒の映像コンテンツのテンプレートを規定することができる。このテンプレートを構成する１つ目から４つ目のカードは、それぞれの映像の意味内容によって、組み合わされてストーリー性を有するものとなっている。例えば、起・承・転・結の４つのカードの順列によりテンプレートがストーリー性を有することとなる。
また、テンプレート情報は、各テンプレートに適用される音楽の素材データの情報を含んでいる。
【００２６】
テンプレート編集手段は、記憶されているテンプレート情報から１つのテンプレートを選択して、そのテンプレートを構成するカードの選択（入れ替え）の編集操作をユーザに行わせる。また、上記のストーリー性を損なわない範囲において、テンプレート内のカードの並び替え、追加、削除などの編集操作を許可してもよい。また、当該テンプレートに適用される音楽の素材データの選択（入れ替え）の編集操作をユーザに行わせることもできる。
カード編集手段は、ユーザ端末との通信により、記憶されているカード情報から１つのカードを選択して、そのカードを構成する素材データの選択、並び替え、追加、削除などの編集操作をユーザに行わせる。
尚、素材データ入力手段により、ユーザ端末から画像、音声、効果音、テキスト、音楽などの素材データを取得し記憶しておき、カード編集に利用することもできる。
【００２７】
映像コンテンツ生成手段は、テンプレート編集手段及びカード編集手段において編集されたカード及びテンプレートの情報に基づいて映像コンテンツを生成する。生成された映像コンテンツは管理サーバ内に記憶される。
このようにして生成された映像コンテンツは、ユーザ自身の選択によるテンプレートや素材データを組み込みつつ一定の品質を有するものである。
ユーザは、生成された映像コンテンツをユーザ端末にダウンロードして利用することができる。あるいは、任意の配信サーバに映像コンテンツを転送して、ネットワーク配信を行うこともできる。
【００２８】
[第２実施形態]
図３は、本発明の映像コンテンツ自動生成システムの第２実施形態について、システム全体の概略構成を示す模式図である。
図３において、本発明の映像コンテンツ自動生成システムは、さらに、管理サーバと通信可能な配信サーバを有している。配信サーバは、有線・無線のネットワークを通じて一般ユーザ（上記の映像コンテンツを編集したユーザとは異なるユーザも含む）が有する各種通信端末と通信可能である。
このような構成により、ユーザが編集した映像コンテンツを管理サーバから配信サーバに転送し、配信サーバではこの映像コンテンツを広く一般ユーザに配信して視聴させることができる。
【００２９】
図４は、図３に示す管理サーバが有する機能を概念的に示した図である。
図４において、管理サーバは、映像コンテンツに対する評価情報を取得する評価情報取得手段を有し、その記憶領域において取得した評価情報を記憶している。管理サーバのその他の構成は、第１実施形態のものと同様である。
【００３０】
評価情報取得手段は、配信サーバにおいて配信された映像コンテンツに対する評価情報を配信サーバから取得する。あるいは、管理サーバ自体が映像コンテンツの配信を行っている場合には、管理サーバ内部からも評価情報の取得が可能である。
映像コンテンツに対する評価情報とは、例えば、映像コンテンツの再生回数、再生時間、視聴者数、視聴者によるアクション（リンクのクリック等）回数などでもよいし、視聴者によるレイティングでもよいし、これら複数の評価基準を組み合わせた評価値としてもよい。
【００３１】
このように、ユーザ編集により自動生成した映像コンテンツに対するフィードバックを得ることで、素材データ、カード、テンプレートの改良が可能である。例えば、素材データ、カード、テンプレートの特性（例えば、爽やかさ、躍動感、インパクト等）を数値化して定めておき、どのような特性を持つものが高い評価を得るかという分析を行うことができる。
また、管理サーバのテンプレート編集手段において、ユーザがテンプレートを構成するカードの編集操作をする際に、高評価を得ている映像コンテンツに含まれているカードを推薦する機能を備えたり、カード編集手段において、カードを構成する素材データの編集操作をする際に、高評価を得ている映像コンテンツに含まれている素材データを推薦する機能を備えたりすることで、生成される映像コンテンツのさらなる品質向上に資することができる。
さらには、映像コンテンツが商品やサービスに関するものであれば、どのような見せ方をすれば高い評価を得られるか、どの層のユーザに対し訴求力を持っているか（この場合、配信サーバにおいて視聴者のプロフィール情報を取得しておく）といったマーケンティングに役立てることも可能である。
【実施例１】
【００３２】
本発明の映像コンテンツ自動生成システムの実施例をユーザの観点から具体的な表示画面例に基づき説明する。
図５〜図８は、本発明の映像コンテンツ自動生成システムにおけるカード編集操作、テンプレート編集操作の表示画面例を示す図である。
【００３３】
図５に示すように、ユーザはまず、予め用意されているテンプレートの中から使用するテンプレートを選択する。テンプレートは、タイプ、テイスト、ジャンルといった分類を手がかりに選択し、あるいはキーワードにより検索することもできる。
画面には選択したテンプレートのプレビューが表示される。
【００３４】
図６に示すように、選択したテンプレートの編集画面においては、テンプレートを構成するカードのプレビューが順に表示される。この画面において、ユーザは、テンプレート内のカード選択（入れ替え）、並び替え、追加、削除等の編集操作を行う。
また、当該テンプレートに適用される音楽の素材データの選択（入れ替え）の編集操作を行うこともできる。
【００３５】
図７に示すように、選択したテンプレートを構成する各カードの編集画面においては、カードが有する映像に組み込む画像（写真）、テキストの編集操作を行う。画像、テキストは、システムに予め用意されている素材データを用いてもよいし、ユーザ端末内のデータをアップロードし、あるいは任意のテキストをユーザ端末から入力してもよい。また、図示する例とは異なり、カードに予め標準の画像、テキストが組み込まれていてもよい。
【００３６】
図８に示すように、選択したテンプレートを構成する各カードの編集画面においては、カードが有する映像に組み込む音声、効果音の編集操作を行う。音声、効果音は、システムに予め用意されている素材データを用いてもよいし、ユーザ端末内のデータをアップロードし、あるいは任意の音声・効果音をユーザ端末のマイク機能を用いて入力してもよい。また、図示する例とは異なり、カードに予め標準の音声、効果音が組み込まれていてもよい。
【００３７】
以上、本発明の映像コンテンツ自動生成システムについて、具体的な実施の形態を示して説明したが、本発明はこれらに限定されるものではない。当業者であれば、本発明の要旨を逸脱しない範囲内において、上記各実施形態における管理サーバ、配信サーバ、ユーザ端末、管理端末の構成及び機能に様々な変更・改良を加えることが可能である。
【産業上の利用可能性】
【００３８】
本発明の映像コンテンツ自動生成システムは、図１〜図４に示すように、コンピュータのＣＰＵ、メモリ、補助記憶装置、ディスプレイ、入力デバイス等を含むハードウェア資源上に構築されたＯＳ、アプリケーションソフトウェア、データベース、ネットワークシステム等によって実現されるものであり、ユーザ端末からの操作による映像コンテンツの自動生成という情報処理が上記のハードウェア資源を用いて具体的に実現されるものであるから、自然法則を利用した技術的思想に該当するものであり、産業上利用できる発明に該当するものである。
【要約】
【課題】予め用意されたコンテンツ素材とテンプレートを利用して映像コンテンツの編集を可能とする映像コンテンツ自動生成システムを提供する。
【解決手段】映像と他の素材データを記憶する手段、映像と他の素材データとの組み合わせをカードとして規定するカード情報を記憶する手段、複数のカードの組み合わせをテンプレートとして規定するテンプレート情報を記憶する手段、カード情報に基づき当該カードを構成する素材データの編集操作をユーザに行わせるカード編集手段、テンプレート情報に基づき当該テンプレートを構成するカードの編集操作をユーザに行わせるテンプレート編集手段、ユーザにより編集されたカード及びテンプレートに従い、映像コンテンツを生成する映像コンテンツ生成手段を有するサーバ上で、ユーザに素材データを編集させて映像コンテンツを自動生成するシステム。
【選択図】図１【図１】
0005903187.tif 000002
【図２】
0005903187.tif 000003
【図３】
0005903187.tif 000004
【図４】
0005903187.tif 000005
【図５】
0005903187.tif 000006
【図６】
0005903187.tif 000007
【図７】
0005903187.tif 000008
【図８】
0005903187.tif 000009