(57)【要約】【課題】カラオケ装置からアップロードされた歌唱映像データ及び歌唱音声データに基づき、ユーザー端末に表示させる合成動画コンテンツを生成する合成動画コンテンツの生成システムにおいて、合成動画コンテンツに対する表示レイアウトの自由度を高め、合成動画コンテンツの興趣を高める。【解決手段】  カラオケ装置２からアップロードされた歌唱映像データ及び歌唱音声データに基づき、ユーザー端末３に表示させる合成動画コンテンツをホスト装置１（サーバー）で生成する。ホスト装置１は、合成回数情報を参照して、合成動画コンテンツの表示レイアウトを決定し、歌唱音声データ及び歌唱音声データに対応する歌唱映像データに基づき、決定された表示レイアウトの合成動画コンテンツを生成する。【選択図】図９
2014109660.tif 000002
【特許請求の範囲】
【請求項１】
ユーザー端末と通信可能に接続されたサーバーと、前記サーバーと通信可能に接続されたカラオケ装置とを有し、
前記カラオケ装置からアップロードされた歌唱映像データ及び歌唱音声データに基づき、前記ユーザー端末に表示させる合成動画コンテンツを前記サーバーで生成する合成動画コンテンツの生成システムであって、
前記歌唱音声データには、歌唱音声の合成回数を示す合成回数情報が含まれており、
前記サーバーは、
前記合成回数情報を参照して、前記合成動画コンテンツの表示レイアウトを決定するレイアウト決定手段と、
前記歌唱音声データ及び当該歌唱音声データに対応する前記歌唱映像データに基づき、決定された表示レイアウトの合成動画コンテンツを生成する合成動画コンテンツ生成手段を有することを特徴とする合成動画コンテンツの生成システム。
【請求項２】
前記合成動画コンテンツは、複数の前記歌唱映像データに基づく合成映像を表示させるものであり、
前記レイアウト決定手段は、前記カラオケ装置から最後にアップロードされた歌唱映像データの映像面積が、他の歌唱映像データの映像面積以上となるように、前記合成動画コンテンツの表示レイアウトを決定することを特徴とする請求項１に記載の合成動画コンテンツの生成システム。
【請求項３】
前記カラオケ装置は、
前記ユーザー端末を通じて選択された歌唱動画コンテンツに対応する背景映像データ及び第１歌唱音声データを、前記サーバーからダウンロードして再生させる再生手段と、
前記背景映像データ及び前記第１歌唱音声データの再生時における、歌唱者の映像を前記歌唱映像データとして取得すると共に、前記歌唱者の音声と前記第１歌唱音声データに対応する音声とを合成した合成音声を第２歌唱音声データとして取得するデータ取得手段と、
前記第１歌唱音声データに含まれる合成回数情報のインクリメントで得られた新たな合成回数情報を、前記第２歌唱音声データに設定する合成回数情報設定手段と、
前記歌唱映像データ及び前記第２歌唱音声データを前記サーバーにアップロードするアップロード手段を有することを特徴とする請求項１又は２に記載の合成動画コンテンツの生成システム。
【請求項４】
前記サーバーは、前記歌唱音声の合成回数と前記表示レイアウトとの関係を規定するレイアウトテーブルを有し、
前記レイアウト決定手段は、前記レイアウトテーブルの内容を参照して前記表示レイアウトを決定することを特徴とする請求項１から３の何れか１項に記載の合成動画コンテンツの生成システム。
【請求項５】
前記歌唱音声データは、ＭＰ３形式の音声データであり、
前記合成回数情報は、ＭＰ３タグデータに設定されていることを特徴とする請求項１から４の何れか１項に記載の合成動画コンテンツの生成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カラオケ装置からアップロードされた歌唱映像データ及び歌唱音声データに基づき、ユーザー端末に表示させる合成動画コンテンツを生成する合成動画コンテンツの生成システムに関する。
【背景技術】
【０００２】
いわゆる通信カラオケシステムでは、従来から、別途生成された歌唱映像データ及び歌唱音声データを利用したコラボレーション歌唱に関する技術が提案されている。
【０００３】
例えば、サーバーに記憶された歌唱音声データを、ネットワークを通じてカラオケ装置にダウンロードし、カラオケ演奏と歌唱音声データの再生とを同期して行うことで、ダウンロードされた歌唱音声データとの合唱を行う技術が知られている（例えば特許文献１を参照）。また、個別に録音された音声ファイルを複数記憶させ、これらの音声ファイルを選択して所定のエフェクトをかけることで合成音声データを生成し、生成した合成音声データを配信する技術も知られている（例えば特許文献２を参照）。さらに、複数の動画コンテンツデータを組み合わせて新たなコンテンツデータ（混成動画データ）を生成し、視聴可能に公開する技術も知られている（例えば特許文献３を参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第４１８８０１３号公報
【特許文献２】特開２００８−５１８９６号公報
【特許文献３】特開２０１１−５９６１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
コラボレーション歌唱で新たに作成された合成動画コンテンツは、利用者の指示によって視聴可能に公開される。このため、サーバーは、カラオケ装置からアップロードされた歌唱動画データを受信すると、受信した歌唱動画データやコラボレーション対象の歌唱動画データから閲覧用動画データを生成する。この閲覧用動画データは、ユーザー端末に表示させる合成動画コンテンツの基となる動画データである。そして、ユーザー端末を通じて合成動画コンテンツの視聴が指示されると、サーバーは、閲覧用動画データの再生映像や音声をユーザー端末にストリーミング配信したり、閲覧用動画データをユーザー端末に転送したりする。
【０００６】
多くの視聴機会があることから、ユーザー端末に表示される映像は、合成動画コンテンツの興趣を左右する重要な要素といえる。特許文献３のシステムでは、２つの映像を横並びに表示させているが、３つ以上の映像に関する表示レイアウトについては開示されていない。
【０００７】
３つ以上の映像の表示レイアウトに関し、表示領域の全体を均等に分割して各映像を個別に表示することが考えられる。しかしながら、コラボレーション歌唱を行った歌唱者は、合成動画コンテンツにおいて自身の映像がどのように表示されているかについて、強い関心を持っている。このため、均等に分割したのでは、表示レイアウトに自由度がなく、かつ、コラボレーション対象の動画数（映像数）が増える程に各映像の表示面積が小さくなってしまうことから、興趣が損なわれてしまう可能性がある。
【０００８】
本発明は、このような事情に鑑みてなされたものであり、その目的は、表示レイアウトの自由度を高め、合成動画コンテンツに対する興趣を高めることにある。
【課題を解決するための手段】
【０００９】
前記目的を達成するため、本発明は、ユーザー端末と通信可能に接続されたサーバーと、前記サーバーと通信可能に接続されたカラオケ装置とを有し、前記カラオケ装置からアップロードされた歌唱映像データ及び歌唱音声データに基づき、前記ユーザー端末に表示させる合成動画コンテンツを前記サーバーで生成する合成動画コンテンツの生成システムであって、前記歌唱音声データには、歌唱音声の合成回数を示す合成回数情報が含まれており、前記サーバーは、前記合成回数情報を参照して、前記合成動画コンテンツの表示レイアウトを決定するレイアウト決定手段と、前記歌唱音声データ及び当該歌唱音声データに対応する前記歌唱映像データに基づき、決定された表示レイアウトの合成動画コンテンツを生成する合成動画コンテンツ生成手段を有することを特徴とする。
【００１０】
本発明によれば、合成回数情報に基づいて合成動画コンテンツの表示レイアウトが決定される。この合成回数情報は、アップロードされた歌唱音声データに対する合成処理の回数、すなわちコラボレーション歌唱の実行回数を示すことから、合成対象の映像数を間接的に示す。従って、合成回数情報を用いて合成動画コンテンツの表示レイアウトを決定することで、合成対象となる映像の数に適した表示レイアウトにできる。その結果、表示レイアウトの自由度を高めることができ、ひいては合成動画コンテンツに対する興趣を高めることができる。
【００１１】
前述の合成動画コンテンツの生成システムにおいて、前記合成動画コンテンツは、複数の前記歌唱映像データに基づく合成映像を表示させるものであり、前記レイアウト決定手段は、前記カラオケ装置から最後にアップロードされた歌唱映像データの映像面積が、他の歌唱映像データの映像面積以上となるように、前記合成動画コンテンツの表示レイアウトを決定することが好ましい。この構成では、最後にコラボレーション歌唱を行った歌唱者の映像表示面積を十分な大きさにできる。
【００１２】
前述の合成動画コンテンツの生成システムにおいて、前記カラオケ装置は、前記ユーザー端末を通じて選択された歌唱動画コンテンツに対応する背景映像データ及び第１歌唱音声データを、前記サーバーからダウンロードして再生させる再生手段と、前記背景映像データ及び前記第１歌唱音声データの再生時における、歌唱者の映像を前記歌唱映像データとして取得すると共に、前記歌唱者の音声と前記第１歌唱音声データに対応する音声とを合成した合成音声を第２歌唱音声データとして取得するデータ取得手段と、前記第１歌唱音声データに含まれる合成回数情報のインクリメントで得られた新たな合成回数情報を、前記第２歌唱音声データに設定する合成回数情報設定手段と、前記歌唱映像データ及び前記第２歌唱音声データを前記サーバーにアップロードするアップロード手段を有することが好ましい。この構成では、第２歌唱音声データの合成回数情報がカラオケ装置で設定されるので、サーバーでの監視処理や設定処理が省略され、処理負担が軽減される。
【００１３】
前述の合成動画コンテンツの生成システムにおいて、前記サーバーは、前記歌唱音声の合成回数と前記表示レイアウトとの関係を規定するレイアウトテーブルを有し、前記レイアウト決定手段は、前記レイアウトテーブルの内容を参照して前記表示レイアウトを決定することが好ましい。この構成では、レイアウトテーブルに基づき、表示レイアウトを容易に決定することができる。
【００１４】
前述の合成動画コンテンツの生成システムにおいて、前記歌唱音声データはＭＰ３形式の音声データであり、前記合成回数情報は、ＭＰ３タグデータに設定されていることが好ましい。この構成では、ＭＰ３タグデータを有効に活用することができる。
【発明の効果】
【００１５】
本発明によれば、カラオケ装置からアップロードされた歌唱映像データ及び歌唱音声データに基づき、ユーザー端末に表示させる合成動画コンテンツを生成する合成動画コンテンツの生成システムにおいて、合成動画コンテンツに対する表示レイアウトの自由度を高め、合成動画コンテンツの興趣を高めることができる。
【図面の簡単な説明】
【００１６】
【図１】カラオケシステムの概略構成を説明する概念図である。
【図２】ホスト装置（サーバー）の構成を説明するブロック図である。
【図３】レイアウトテーブルの内容を説明する概念図である。
【図４】カラオケ装置の構成を説明するブロック図である。
【図５】カラオケ本体の構成を説明するブロック図である。
【図６】ユーザー端末の構成を説明するブロック図である。
【図７】映像の表示レイアウトを説明する概念図である。
【図８】レイアウトＡの説明図である。
【図９】ホスト装置、カラオケ装置及びユーザー端末でなされる処理を説明するための概念図である。
【図１０】変形例（レイアウトＤ´）の説明図である。
【発明を実施するための形態】
【００１７】
以下、本発明の実施形態について説明する。図１に示すカラオケシステムは、ホスト装置１（サーバー）とカラオケ装置２とユーザー端末３とを有している。そして、これらが通信回線４を介して通信可能に接続されている。ホスト装置１は、歌唱動画コンテンツの基となる歌唱動画データを多数記憶しており、ユーザー端末３からの指示で選択された或る楽曲の歌唱動画コンテンツ（歌唱動画データ）を複数合成し、その楽曲の合成動画コンテンツを生成する。以下、カラオケシステムを構成する各装置１〜３について説明する。
【００１８】
まず、ホスト装置１について説明する。ホスト装置１は、サーバーとして機能し、顧客情報や歌唱動画データといった各種情報を蓄積して管理する。図２に示すように、ホスト装置１は、ホスト側制御部１１と、ホスト側通信部１２と、ホスト側記憶部１３とを有している。ホスト側制御部１１は、ホスト装置１における制御の中心となる部分であり、ＣＰＵ１１ａやメモリ１１ｂを有している。ＣＰＵ１１ａは、メモリ１１ｂに記憶された動作プログラムに従って各種の制御を実行する。メモリ１１ｂは、ＣＰＵ１１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。ホスト側通信部１２は、ホスト装置１を通信回線４に接続するためのインタフェースを提供する。
【００１９】
ホスト側記憶部１３は、大容量の情報を記憶する記憶装置であり、ハードディスクドライブ等によって構成されている。このホスト側記憶部１３は、歌唱動画コンテンツの基となる歌唱動画データ（歌唱音声データと歌唱映像データの組，録画用動画データ，閲覧用動画データ）を、カラオケ楽曲毎の識別情報である楽曲ＩＤに関連付けた状態で記憶していることから、歌唱動画コンテンツを楽曲に関連付けて記憶するコンテンツ記憶手段に相当する。
【００２０】
ホスト側記憶部１３の一部領域は、顧客情報記憶領域、歌唱音声データ記憶領域、歌唱映像データ記憶領域、録画用動画データ記憶領域、閲覧用動画データ記憶領域、レイアウトテーブル記憶領域として用いられている。
【００２１】
顧客情報記憶領域には、歌唱者毎の識別情報である利用者ＩＤに対応付けられた状態で、性別、年齢、生年月日、住所等の個人情報や、利用店舗、利用日時、歌唱履歴等の履歴データが記憶されている。
【００２２】
歌唱音声データ記憶領域には、カラオケ装置２からアップロードされた歌唱音声データが記憶され、歌唱映像データ記憶領域には、カラオケ装置２からアップロードされた歌唱映像データが記憶されている。これらの歌唱音声データや歌唱映像データは、歌唱動画コンテンツの基となる歌唱動画データであり、楽曲ＩＤ、利用者ＩＤ、合成回数情報、コンテンツ選択情報等の各種情報に対応付けられた状態で記憶されている。本実施形態において、歌唱音声データはＭＰ３形式のデータが用いられ、歌唱映像データはＭＰＥＧ２形式のデータが用いられている。そして、前述の各情報は、ＭＰ３タグデータを用いて記録されている。
【００２３】
前述した各種情報のうち、合成回数情報は、その歌唱動画データが取得されるまでに行われたコラボレーション歌唱の回数を示している。例えば、最初にアップロードされた歌唱動画データでは、コラボレーション歌唱が行われていないことから、合成回数情報の値は「０」となる。そして、１回目のコラボレーション歌唱で取得された歌唱動画データに関し、合成回数情報の値は「１」となる。同様に、２回目及び３回目のコラボレーション歌唱により取得された歌唱動画データに関し、合成回数情報の値は「２」及び「３」となる。ここで、コラボレーション歌唱が繰り返し行われると、取得される歌唱動画コンテンツ（合成動画コンテンツ）を構成する映像の数は、コラボレーション歌唱の回数に応じて増えてゆく。このため、合成回数情報は、合成対象の映像数を間接的に示す情報である。
【００２４】
また、コンテンツ選択情報は、コラボレーション対象の歌唱動画コンテンツを特定する際に参照される情報であり、歌唱動画コンテンツの識別情報であるコンテンツＩＤによって構成されている。例えば、最初にアップロードされた歌唱動画データのコンテンツ選択情報は、コラボレーション対象がないことから、その歌唱で取得された歌唱動画コンテンツαを示すコンテンツＩＤ「α」が記憶される。そして、この歌唱動画コンテンツαに対して１回目のコラボレーション歌唱が行われた場合、歌唱動画コンテンツαを示すコンテンツＩＤ「α」と、１回目のコラボレーション歌唱で取得された歌唱動画コンテンツβを示すコンテンツＩＤ「β」とが記憶される。同様に、歌唱動画コンテンツβに対して２回目のコラボレーション歌唱が行われた場合、歌唱動画コンテンツα及びβを示すコンテンツＩＤ「α」及び「β」と、２回目のコラボレーション歌唱で取得された歌唱動画コンテンツγを示すコンテンツＩＤ「γ」とが記憶される。
【００２５】
録画用動画データ記憶領域には、他の歌唱動画とコラボレーションをする際に、カラオケ装置２へダウンロードされて再生される録画用動画データが記憶される。この録画用動画データは、コラボレーション時にカラオケ装置２で再生される合成動画コンテンツの基となる歌唱動画データである。本実施形態では、映像と音声とが別データとされており、録画用に作成されたＭＰＥＧ２形式の歌唱映像データ（録画用映像データ，コラボレーション歌唱時の背景映像データ）とＭＰ３形式の歌唱音声データ（録画用音声データ）とが記憶されている。なお、これらの録画用映像データ及び録画用音声データは、ユーザー端末３からの指示に応じ、ホスト側制御部１１にて生成される。そして、録画用音声データに関しても、ＭＰ３タグデータを用いて、楽曲ＩＤ、利用者ＩＤ、合成回数情報、コンテンツ選択情報といった各種情報が書き込まれている。
【００２６】
閲覧用動画データ記憶領域には、ユーザー端末３に閲覧させるための閲覧用動画データが記憶される。この閲覧用動画データは、ユーザー端末３で再生される歌唱動画コンテンツの基となるデータである。この歌唱動画コンテンツには、未コラボレーションの単独歌唱で生成された単独動画コンテンツと、コラボレーション歌唱で生成された合成動画コンテンツとが含まれる。本実施形態の閲覧用動画データは、ＷＭＶ形式やＭＰ４形式の動画データであり、ユーザー端末３からの指示に応じてホスト側制御部１１で生成される。
【００２７】
レイアウトテーブル記憶領域には、録画用動画データの表示レイアウト、及び、閲覧用動画データの表示レイアウトを規定するレイアウトテーブルが記憶される。図３（ａ），（ｂ）に示すように、レイアウトテーブルは、前述した合成回数（コラボレーション歌唱が行われた回数）と合成後の映像レイアウトの関係を規定する。ここで、映像レイアウトとは、合成対象となる歌唱動画コンテンツの映像表示位置や大きさである。本実施形態では、レイアウトＡ〜Ｆ、及び、全画面からなる７種類のレイアウトが定義されている。また、コラボレーション時（録画用動画データ）と閲覧時（閲覧用動画データ）のそれぞれに対応するテーブルが用意されている。なお、各レイアウトについては、後で詳しく説明する。
【００２８】
次に、カラオケ装置２について説明する。このカラオケ装置２はカラオケ演奏や歌唱採点を行う装置であり、図１に示すように、例えばカラオケ店ＫＢの各カラオケルームＲＭに設置されている。そして、図４に示すように、カラオケ装置２は、カラオケ本体２１と、スピーカ２２と、モニタ２３と、マイク２４と、ビデオカメラ２５と、リモコン装置２６とを有している。
【００２９】
カラオケ本体２１は、選択されたカラオケ楽曲の演奏制御、歌詞及び背景映像の表示制御、マイク２４を通じて入力された歌唱音声信号の処理といった、カラオケに関する各種の制御を行う部分である。このカラオケ本体２１については、後で詳しく説明する。
【００３０】
スピーカ２２は、カラオケ本体２１に接続されており、カラオケ本体２１からの放音信号に基づいて放音する。モニタ２３もカラオケ本体２１に接続されており、カラオケ本体２１からの映像信号に基づいて映像を画面に表示する。このモニタ２３は、カラオケ本体２１（本体側制御部３１及び表示処理部３５）とともに、表示手段として機能する。マイク２４もカラオケ本体２１に接続されており、歌唱者の音声をアナログの歌唱音声信号に変換してカラオケ本体２１に入力させる。ビデオカメラ２５もカラオケ本体２１に接続されており、歌唱中の映像を歌唱映像信号に変換してカラオケ本体２１に入力させる。
【００３１】
リモコン装置２６は、カラオケ本体２１との間で情報を送受信するための双方向通信可能な短距離無線通信部を備えており、カラオケ楽曲の予約時などに操作される。カラオケ楽曲の予約時において、リモコン装置２６からは、演奏対象の楽曲を識別するための楽曲ＩＤを含んだ操作信号が送信される。登録された利用者がリモコン装置２６を通じてログインした場合、その利用者の利用者ＩＤがホスト装置１に送信される。そして、リモコン装置２６には、お気に入り登録された歌唱動画コンテンツや歌唱履歴等の各種情報が表示される。
【００３２】
また、本実施形態のリモコン装置２６は、ユーザー端末３としても機能する。この場合、リモコン装置２６は、近隣のアクセスポイント（図示せず）、及び、通信回線４を経由してホスト装置１に接続される。このため、利用者は、カラオケ店ＫＢに居ながらにして、マイページにアクセスできる。
【００３３】
次に、カラオケ本体２１について詳細に説明する。図５に示すように、カラオケ本体２１は、本体側制御部３１と、本体側通信部３２と、本体側記憶部３３と、音響処理部３４と、表示処理部３５と、映像入力部３６と、操作部３７とを有している。そして、これらの各部がバスを介して通信可能な状態に接続されている。
【００３４】
本体側制御部３１は、カラオケ本体２１における制御の中心となる部分であり、ＣＰＵ３１ａやメモリ３１ｂを有している。ＣＰＵ３１ａは、メモリ３１ｂに記憶された動作プログラムに従って各種の制御を実行する。例えば、操作部３７からの操作を受け付ける操作入力処理やシーケンサとして動作するシーケンサ処理を行う。メモリ３１ｂは、ＣＰＵ３１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。このため、メモリ３１ｂには、各種のプログラムを記憶する記憶領域が設けられている。
【００３５】
本体側通信部３２は、カラオケ本体２１（カラオケ装置２）を通信回線４に接続するためのインタフェースを提供する。この本体側通信部３２は、本体側制御部３１によって動作が制御される。
【００３６】
本体側記憶部３３は、各種のデータを記憶する大容量の記憶装置であり、例えばハードディスクドライブによって構成されている。この本体側記憶部３３には、例えば、楽曲データ記憶領域、背景映像データ記憶領域、歌唱映像データ記憶領域、歌唱音声データ記憶領域、録画用動画データ記憶領域が設けられる。
【００３７】
楽曲データ記憶領域には、リモコン装置２６で選択されたカラオケ楽曲を演奏するための楽曲データが記憶され、背景映像データ記憶領域には、モニタ２３に背景映像を表示させるための背景映像データが記憶される。歌唱映像データ記憶領域には、ビデオカメラ２５で撮影された歌唱映像データが記憶され、歌唱音声データ記憶領域には、歌唱音声信号をデジタルデータ化した歌唱音声データが記憶される。録画用動画データ記憶領域には、他の歌唱動画コンテンツとのコラボレーション用に、ホスト装置１から送信された録画用動画データ（録画用映像データ，録画用音声データ）が記憶される。
【００３８】
音響処理部３４は、カラオケ楽曲に対する演奏の制御を行ったり、マイク２４を通じて入力された歌唱音声信号をデジタルの歌唱音声データに変換する等の制御を行ったりする部分である。この音響処理部３４では、伴奏データに応じて生成された楽音信号と歌唱音声データとが適当なバランスでミキシングされ、放音信号としてスピーカ２２へ出力される。また、音響処理部３４は、利用者がコラボレーション歌唱をする際、楽音信号や歌唱音声データに加え、ホスト装置１からの録画用音声データもミキシングする。これにより、利用者は、録画用音声データの再生音声と合唱が行える。
【００３９】
表示処理部３５は、カラオケ演奏時における背景映像の表示等の制御を行う。カラオケ演奏時において、表示処理部３５には背景映像データが入力されており、この背景映像データのデコードが行われる。そして、表示処理部３５は、デコードで生成された背景映像の映像信号に歌詞テロップを合成し、合成後の映像信号をモニタ２３に出力する。その結果、モニタ２３には、背景映像に歌詞テロップが重ねられた映像が表示される。
【００４０】
また、表示処理部３５は、利用者がコラボレーション歌唱をする際、背景映像データに代えて録画用映像データを用い、モニタ２３に録画用映像を表示させる。このとき、モニタ２３の所定位置（後述するキャプチャー映像の表示領域）には、ビデオカメラ２５で撮影された映像、すなわち歌唱映像データに基づく映像が上書き（スーパーインポーズ）される。従って、録画用映像データは、コラボレーション歌唱時における背景映像データに相当する。
【００４１】
映像入力部３６は、ビデオカメラ２５からの歌唱映像信号の取り込み処理を行う部分であり、いわゆるビデオカードで構成されている。この映像入力部３６は、例えば、ビデオカメラ２５と接続するための外部インタフェース、バスを通じて本体側制御部３１等と接続するための内部インタフェース、及び、フレームバッファとしてのビデオメモリを有している（何れも図示せず）。
【００４２】
操作部３７は、パネルスイッチやリモコン受信回路などからなっており、利用者によるパネルスイッチやリモコン装置２６の操作に応じた操作信号を本体側制御部３１に対して出力する。本体側制御部３１は、操作入力処理を行うことで操作信号を検出し、対応する処理を実行する。なお、パネルスイッチやリモコン装置２６は、操作を選択するための種々のキースイッチ（図示せず）を備えている。
【００４３】
そして、リモコン装置２６を通じた操作により、ログインした利用者のマイページから、お気に入り登録された歌唱動画コンテンツを呼び出すことができる。この呼び出し操作により、当該歌唱動画コンテンツに対応する録画用動画データがカラオケ装置２にダウンロードされ、録画用動画データ記憶領域に記憶される。あわせて、当該歌唱動画コンテンツに対応するカラオケ楽曲の楽曲ＩＤが本体側制御部３１のメモリ３１ｂに記憶され、演奏処理の待ち行列で管理される。
【００４４】
その後、当該カラオケ楽曲の順序がやってくると、カラオケ伴奏に同期して、録画用映像データに基づく映像にビデオカメラ２５で撮影された歌唱映像がスーパーインポーズされ、モニタ２３で表示される。また、録画用音声データに基づく歌唱音声がカラオケ伴奏と共にスピーカ２２から放音される。さらに、ビデオカメラ２５で撮影された歌唱映像が、歌唱映像データとして歌唱映像データ記憶領域に記憶され、かつ、マイク２４で集音された歌唱音声に所定の処理が施され、歌唱音声データとして歌唱音声データ記憶領域に記憶される。なお、記憶された歌唱映像データ及び歌唱音声データは、カラオケ楽曲の終了後の操作によりホスト装置１へアップロードされ、ホスト側記憶部１３（歌唱映像データ記憶領域，歌唱音声データ記憶領域）に記憶される。
【００４５】
次に、ユーザー端末３について説明する。ユーザー端末３は、カラオケの利用者によって操作される通信端末であり、図１に示すように、パーソナルコンピュータ３Ａ、タブレットコンピュータ３Ｂ、携帯電話機３Ｃなどが含まれる。また、前述したように、リモコン装置２６もユーザー端末３に含まれる。
【００４６】
図６に示すように、ユーザー端末３は、端末側制御部４１と、端末側通信部４２と、端末側記憶部４３と、表示部４４と、入力部４５とを有している。
【００４７】
端末側制御部４１は、ユーザー端末３における制御の中心となる部分であり、ＣＰＵ４１ａやメモリ４１ｂを有している。ＣＰＵ４１ａは、メモリ４１ｂに記憶された動作プログラムに従って各種の制御を実行する。メモリ４１ｂは、ＣＰＵ４１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。端末側通信部４２は、ユーザー端末３を通信回線４に接続するためのインタフェースを提供する。端末側記憶部４３は、各種の情報を記憶する記憶装置であり、不揮発性メモリやハードディスクドライブ等によって構成される。
【００４８】
表示部４４及び入力部４５は、いずれもユーザインタフェースを提供する部分である。表示部４４は、各種メニューや閲覧用の動画コンテンツ等を表示する部分であり、例えば液晶表示装置やブラウン管で構成される。入力部４５は、利用者による操作を操作情報として取り込む部分であり、例えばキーボード、マウス、タッチパネルによって構成される。なお、可搬性が要求されるタブレットコンピュータ３Ｂやリモコン装置２６では、表示部４４と入力部４５とが一体化されたタッチパネル付きの液晶表示パネルが好適に用いられる。
【００４９】
次に、レイアウトテーブル、及び、映像の各種レイアウトについて説明する。図７（ａ），（ｂ）に示すように、レイアウトＡは、２つの映像を合成表示する際のレイアウトであり、レイアウトＢは３つの映像を合成する際のレイアウトである。そして、図７（ｃ）〜（ｆ）に示すように、レイアウトＣは４つの映像を、レイアウトＤは５つの映像を、レイアウトＥは６つの映像を、レイアウトＦは７つの映像を合成表示する際のレイアウトである。
【００５０】
図７（ａ）に示すように、レイアウトＡでは、カラオケ装置２のモニタ２３やユーザー端末３の表示部４４の表示範囲を左右方向の中心で２分割し、右側部分に歌唱映像Ａを表示させ、左側部分にビデオカメラ２５からのキャプチャー映像若しくは歌唱映像Ｂを表示させる。すなわち、カラオケ装置２でのコラボレーション歌唱時において、モニタ２３の右側部分にはコラボレーション対象のダウンロード映像が表示され、左側部分にはビデオカメラ２５からのキャプチャー映像（歌唱映像データに基づく映像）が表示される。一方、ユーザー端末３による合成動画コンテンツの閲覧時には、選択された２つの歌唱動画コンテンツのうち一方が歌唱映像Ａとして表示部４４の右側部分に表示され、他方が歌唱映像Ｂとして表示部４４の左側部分に表示される。
【００５１】
モニタ２３や表示部４４の画面をレイアウトＡのように２分割した場合、分割された画面の縦横比と各映像の縦横比とが相違する可能性が高い。そこで、図８に示すように、レイアウトテーブルでは、各映像の縦横比が維持されるように、映像の表示範囲が規定されている。すなわち、画面左下の座標（ｘａ，ｙａ）から画面左上の座標（ｘｃ，ｙｄ）の範囲が画面の全範囲と規定され、画面左下の座標（ｘａ，ｙａ）から画面上端中央の座標（ｘｂ，ｙｄ）の範囲が左側部分の表示範囲に規定され、画面下端中央の座標（ｘｂ，ｙａ）から画面左上の座標（ｘｃ，ｙｄ）の範囲が右側部分の表示範囲に規定されている。
【００５２】
そして、基となる映像の縦横比が維持され、左側部分や右側部分において面積が最大となり、かつ、画面の上下中央に映像が表示されるように、各映像の表示位置が規定されている。この例では、座標（ｘａ，ｙｂ）から座標（ｘｂ，ｙｃ）の範囲がキャプチャー映像若しくは歌唱映像Ｂの表示位置に規定され、座標（ｘｂ，ｙｂ）から座標（ｘｃ，ｙｃ）の範囲が歌唱映像Ａの表示位置に規定される。
【００５３】
図７（ｂ）に示すように、レイアウトＢでは、画面の左側半部がキャプチャー映像若しくは歌唱映像Ｃの表示範囲に規定され、右側の上側半部が歌唱映像Ａの表示範囲に規定され、右側の下側半部が歌唱映像Ｂの表示範囲に規定される。図７（ｃ）に示すように、レイアウトＣでは、画面の左側半部がキャプチャー映像若しくは歌唱映像Ｄの表示範囲に規定されるとともに、右側半部が上下方向に３等分されて歌唱映像Ａ〜Ｃの表示範囲に規定される。すなわち、右上部分が歌唱映像Ａの表示範囲に、右中部分が歌唱映像Ｂの表示範囲に、右下部分が歌唱映像Ｃの表示範囲に規定される。
【００５４】
図７（ｄ）〜（ｆ）に示すように、レイアウトＤ〜Ｆでは、キャプチャー映像等の表示範囲の大きさはレイアウトＡ等と同じであり、画面の全範囲における左右中央に配置される。そして、他の歌唱映像については、キャプチャー映像等の左右に振り分けられる。
【００５５】
すなわち、図７（ｄ）に示すレイアウトＤでは、キャプチャー映像若しくは歌唱映像Ｅの表示範囲が画面の左右中央に規定される。そして、歌唱映像Ａの表示範囲が画面の右上部分に、歌唱映像Ｂの表示範囲が画面の右下部分に、歌唱映像Ｃの表示範囲が画面の左上部分に、歌唱映像Ｄの表示範囲が画面の左下部分に、それぞれ規定される。また、図７（ｅ）に示すレイアウトＥでは、キャプチャー映像若しくは歌唱映像Ｆの表示範囲が画面の左右中央に、歌唱映像Ａ〜Ｃの表示範囲が画面の右側に、歌唱映像Ｄ，Ｅの表示範囲が画面の左側に、それぞれ規定される。同様に、図７（ｆ）に示すレイアウトＦでは、キャプチャー映像若しくは歌唱映像Ｆの表示範囲が画面の左右中央に、歌唱映像Ａ〜Ｃの表示範囲が画面の右側に、歌唱映像Ｄ〜Ｆの表示範囲が画面の左側に、それぞれ規定される。
【００５６】
なお、詳細は省略するが、これらのレイアウトＢ〜Ｆにおいても、レイアウトＡと同様に、各歌唱映像の表示面積が最大となるように表示位置が定められる。また、各歌唱映像が離れて表示されてしまうと、視聴者に対して間延びした印象を与える可能性があるため、これらのレイアウトＢ〜Ｆでは、各歌唱映像が互いに隣接するように表示位置が定められる。
【００５７】
次に、図９を参照し、上記構成を有するカラオケシステム（歌唱動画データの取得システム，合成動画コンテンツの生成システム）の動作について説明する。ここで、図９（ａ）における符号Ｓｎ（ｎ＝自然数）は、図９（ｂ）に示す各処理のステップに相当する。これらのステップは、ホスト側制御部１１、本体側制御部３１、及び、端末側制御部４１がプログラムを実行することで実現される。また、以下の処理で述べる各手段は、各制御部１１、３１、４１がプログラムを実行することで構成される機能実現手段である。
【００５８】
このカラオケシステムでは、まず、未コラボレーションの単独歌唱で取得された歌唱動画データ（ＭＰＥＧ２形式の歌唱映像データとＭＰ３形式の歌唱音声データの組）がカラオケ装置２からホスト装置１（サーバー）へとアップロードされる（Ｓ０１）。
【００５９】
具体的に説明すると、まず、リモコン装置２６や操作部３７でカラオケ楽曲が選択され、かつ、動画を撮影する旨の指示が利用者によって与えられる。これにより、カラオケ装置２はデータ取得手段として機能する。そして、カラオケ本体２１は、対象のカラオケ楽曲が演奏されている期間に亘り、ビデオカメラ２５からの映像信号をキャプチャーし、キャプチャー映像をモニタ２３の全画面に表示させるとともに、歌唱映像データａとして本体側記憶部３３の歌唱映像データ記憶領域に記憶させる。また、カラオケ本体２１は、対象のカラオケ楽曲が演奏されている期間に亘り、マイク２４を通じて入力された歌唱音声信号を歌唱音声データａとして取得し、ミキシング等を施してスピーカ２２に出力し、かつ、本体側記憶部３３の歌唱音声データ記憶領域に記憶させる。
【００６０】
その際、本体側制御部３１は、楽曲ＩＤ、利用者ＩＤ、合成回数情報、コンテンツ選択情報などの必要な情報を、歌唱音声データａのＭＰ３タグデータに記憶させる。この段階では、コラボレーション歌唱が行われていないことから、合成回数情報は「０」となり、コンテンツ選択情報は自身を示すＩＤ「α」となる。
【００６１】
その後、リモコン装置２６を通じてアップロードの指示が与えられると、カラオケ装置２は、アップロード手段として機能し、本体側記憶部３３に記憶された歌唱映像データａ及び歌唱音声データｂを、歌唱動画データとしてホスト装置１にアップロードする。ホスト装置１は、受信した歌唱動画データ（歌唱映像データａ，歌唱音声データａ）をホスト側記憶部１３の歌唱映像データ記憶領域及び歌唱音声データ記憶領域に記憶させる。
【００６２】
次に、ホスト装置１は、アップロードされた歌唱動画データに基づいて、未コラボレーションの閲覧用動画コンテンツを生成する（Ｓ０２）。具体的には、閲覧用の歌唱動画コンテンツの基となる閲覧用動画データを生成する。
【００６３】
まず、ホスト側制御部１１は、ホスト側記憶部１３から歌唱映像データａ及び歌唱音声データａを読み出すとともに、歌唱音声データａのＭＰ３タグデータを参照して合成回数と合成対象の動画コンテンツを認識する。この段階では、前述したように合成回数「０」、ＩＤ「α」と認識される。次に、ホスト側制御部１１は、レイアウト決定手段として機能し、図３（ｂ）のレイアウトテーブルを参照し、閲覧用動画コンテンツの表示レイアウトを決定する。合成回数「０」であることから、全画面のレイアウトに決定される。そして、ホスト側制御部１１は、単独動画コンテンツ生成手段として機能し、歌唱映像データａ及び歌唱音声データａから、表示レイアウトを全画面とした閲覧用動画データ（ＷＭＶ形式，ＭＰ４形式）を生成する。生成された閲覧用動画データは、ホスト側記憶部１３の閲覧用動画データ記憶領域に記憶される。
【００６４】
閲覧用動画データの生成に伴い、対応する歌唱動画コンテンツが、その利用者のマイページで閲覧可能になる。ユーザー端末３による操作によって利用者がマイページにアクセスし、歌唱動画コンテンツの公開を指示すると、この歌唱動画コンテンツは他の利用者からも閲覧可能な状態になる。その際、コラボレーションによる利用を許可すると、その歌唱動画コンテンツは、コラボレーション可能な状態で公開される。これらの処理Ｓ０１，Ｓ０２が繰り返し行われることで、閲覧用動画データ記憶領域には多数の閲覧用動画データが蓄積され、これらの閲覧用動画データに基づく歌唱動画コンテンツが複数の利用者から閲覧可能になる。
【００６５】
次に、ユーザー端末３を通じた操作により、コラボレーション対象の動画コンテンツが利用者によって選択され、その利用者のマイページに登録される（Ｓ０３）。
【００６６】
この場合、ユーザー端末３を通じてログインした利用者が、コラボレーション許可曲のｗｅｂページにアクセスし、登録された歌唱動画コンテンツを適宜視聴する。ＩＤ「α」の歌唱動画コンテンツが視聴された場合、ユーザー端末３では、ステップＳ０２で生成された閲覧用動画データに基づく歌唱動画コンテンツが再生される。そして、利用者は、ユーザー端末３を通じた操作により、気に入った歌唱動画コンテンツを選択してお気に入り登録する。これにより、その利用者のマイページには、当該歌唱動画コンテンツが登録される。
【００６７】
次に、ホスト装置１は、選択された歌唱動画コンテンツに対応する録画用動画コンテンツを生成する。（Ｓ０４）。具体的には、録画用動画コンテンツの基となる録画用動画データを生成する。なお、以下の説明は、ＩＤ「α」の歌唱動画コンテンツがお気に入り登録されたものとして行う。
【００６８】
この場合、ホスト側制御部１１は、ホスト側記憶部１３から歌唱映像データａ及び歌唱音声データａを読み出すとともに、合成回数と合成対象の動画コンテンツを認識する。ここでも、前述したように合成回数「０」、ＩＤ「α」と認識される。次に、ホスト側制御部１１は、レイアウト決定手段として機能し、図３（ａ）のレイアウトテーブルを参照し、録画用動画コンテンツの表示レイアウトを決定する。合成回数「０」であることから、レイアウトＡに決定される。すなわち、画面の右側半部に歌唱映像データａに基づく歌唱映像Ａが表示され、画面の左側半部にキャプチャー映像が表示されるレイアウトに決定される。
【００６９】
レイアウトを決定したならば、ホスト側制御部１１は、合成動画コンテンツ生成手段として機能し、歌唱映像データａ及び歌唱音声データａから、決定された表示レイアウトＡの録画用動画データ（ＭＰＥＧ２形式の歌唱映像データ及びＭＰ３形式の歌唱音声データの組）を生成する。生成された録画用動画データは、ホスト側記憶部１３の録画用動画データ記憶領域に記憶される。
【００７０】
次に、生成された録画用動画データが、ホスト装置１からカラオケ装置２へとダウンロードされる（Ｓ０５）。ここでは、カラオケ店ＫＢに赴いた利用者がリモコン装置２６を通じた操作により、自身のマイページからお気に入り登録された録画用の合成動画コンテンツを呼び出す。この呼び出し操作により、呼び出し指示を示す指示情報がホスト装置１に送信され、ホスト装置１からカラオケ本体２１の本体側記憶部３３（録画用動画データ記憶領域）へと録画用動画データ（背景映像データとしての録画用映像データ及び第１歌唱音声データの組）がダウンロードされる。あわせて、当該合成動画コンテンツに対応するカラオケ楽曲の楽曲ＩＤが本体側制御部３１のメモリ３１ｂに記憶され、演奏処理の待ち行列で管理される。
【００７１】
次に、ダウンロードされた歌唱動画コンテンツとのコラボレーション歌唱がなされ、歌唱動画データ取得されるとともにホスト装置１へとアップロードされる（Ｓ０６）。
【００７２】
すなわち、待ち行列で管理されているカラオケ楽曲の順序がやってくると、再生手段としてのカラオケ装置２は、カラオケ伴奏に同期して録画用の合成動画コンテンツを再生す。すなわち、録画用映像データに基づく背景映像が表示手段としてのモニタ２３で表示され、録画用音声データに基づく歌唱音声がスピーカ２２から放音される。その際、歌唱映像データａに基づく映像Ａがモニタ２３の右側半部に、ビデオカメラ２５で撮影された歌唱者のキャプチャー映像Ｂがモニタ２３の左側半部に、それぞれ表示される。
【００７３】
このとき、カラオケ装置２は、データ取得手段（歌唱映像データ取得手段，歌唱音声データ取得手段）としても機能する。すなわち、ビデオカメラ２５で撮影された歌唱映像が歌唱映像データｂとして取得され、歌唱映像データ記憶領域に記憶される。また、マイク２４で集音された歌唱者の音声とダウンロードした第１歌唱音声データに対応する音声とを合成した合成音声が第２歌唱音声データａ＋ｂとして取得され、歌唱音声データ記憶領域に記憶される。
【００７４】
さらに、カラオケ装置２は、第２歌唱音声データに合成回数情報を設定する合成回数情報設定手段としても機能する。すなわち、本体側制御部３１は、第１歌唱音声データに含まれる合成回数情報を参照して合成回数を認識し、合成回数のインクリメント（＋１更新）で得られた新たな合成回数を、第２歌唱音声データの合成回数情報としてＭＰ３タグデータに書き込む。この例では、第１歌唱音声データの合成回数が「０」であるため、第２歌唱音声データの合成回数は「１」になる。
【００７５】
この他に、本体側制御部３１は、１回目のコラボレーション歌唱で取得された歌唱動画データ（歌唱映像データｂと第２歌唱音声データａ＋ｂの組）に対して新たなコンテンツＩＤ（例えばＩＤ「α」及び「β」）を設定する。このコンテンツＩＤもまた、第２歌唱音声データのＭＰ３タグデータに設定される。
【００７６】
次に、カラオケ装置２は、アップロード手段として機能し、１回目のコラボレーション歌唱で得られた歌唱動画データをホスト装置１へアップロードする。ホスト装置１は、受信した歌唱動画データのうち、歌唱映像データｂをホスト側記憶部１３の歌唱映像データ記憶領域に記憶させ、第２歌唱音声データａ＋ｂを同じく歌唱音声データ記憶領域に記憶させる。そして、これらの歌唱映像データｂや第２歌唱音声データａ＋ｂは、２回目のコラボレーション歌唱時に利用される。すなわち、ホスト装置１は、第２歌唱音声データを新たな第１歌唱音声データとして記憶する。
【００７７】
次に、ホスト装置１は、アップロードされた歌唱動画データに基づいて、コラボレーション歌唱の閲覧用動画コンテンツ（閲覧用動画データ）を生成する（Ｓ０７）。ここでの手順は前述のステップＳ０２と同様である。簡単に説明すると、ホスト側制御部１１は、歌唱音声データａ＋ｂのコンテンツＩＤに基づき、ホスト側記憶部１３から歌唱映像データａ及び歌唱映像データｂを読み出す。また、合成回数情報「１」に基づいてレイアウトＡを選択し、右側に歌唱映像データａの映像Ａを左側に歌唱映像データｂの映像Ｂを割り振り、歌唱音声データａ＋ｂも用いて閲覧用動画データを生成する。生成された閲覧用動画データは、ホスト側記憶部１３の閲覧用動画データ記憶領域に記憶される。
【００７８】
前述したように、閲覧用動画データが生成されると、対応する歌唱動画コンテンツがマイページで閲覧可能になる。そして、公開を指示すると他の利用者からも閲覧可能な状態になり、コラボレーションによる利用を許可すると、コラボレーション可能な状態で公開される。
【００７９】
以上は、１回目のコラボレーション歌唱に関する説明であるが、２回目及び３回目のコラボレーション歌唱でも同様の処理が行われる（Ｓ０８〜Ｓ１６）。
【００８０】
概略を説明すると、まず、２回目のコラボレーション歌唱のために、１回目のコラボレーション歌唱で作成された合成動画コンテンツが、ユーザー端末３からの指示に従って選択され、お気に入り登録される（Ｓ０８）。これに伴い、コラボレーション歌唱用の録画用動画データが生成される（Ｓ０９）。
【００８１】
ここでは、図３（ａ）に示すように、合成回数が１回であることから映像レイアウトＢに決定される。従って、図７（ｂ）に示すように、生成される録画用映像データは、右側上部に歌唱映像データａに基づく歌唱映像Ａが表示され、右側下部に歌唱映像データｂに基づく歌唱映像Ｂが表示され、左側半部にキャプチャー映像が表示されるレイアウトになる。また、歌唱音声データａ＋ｂが、録画用音声データ（第１歌唱音声データ）として選択される。そして、これらの録画用映像データと録画用音声データの組が録画用動画データとなる。
【００８２】
次に、生成された録画用動画データがダウンロードされ（Ｓ１０）、カラオケ装置２で再生される。この再生に伴い、歌唱者の映像が歌唱映像データｃとして取得される。また、歌唱者の音声が歌唱音声データａ＋ｂの再生音声と合成され、歌唱音声データａ＋ｂ＋ｃとして取得される。そして、この歌唱音声データａ＋ｂ＋ｃのＭＰ３タグデータには、合成回数情報として「２」が設定され、コンテンツＩＤとして「α」、「β」及び「γ」が設定される。さらに、これらの歌唱映像データｃと歌唱音声データａ＋ｂ＋ｃの組が、新たな歌唱動画データとしてホスト装置１へアップロードされる（Ｓ１１）。
【００８３】
そして、ホスト装置１は、アップロードされた歌唱動画データに基づいて、コラボレーション歌唱の閲覧用動画コンテンツ（閲覧用動画データ）を生成する（Ｓ１２）。すなわち、ホスト側制御部１１は、歌唱音声データａ＋ｂ＋ｃのコンテンツＩＤに基づき、ホスト側記憶部１３から歌唱映像データａ〜ｃを読み出す。また、合成回数情報「２」に基づいてレイアウトＢを選択し、右側上部に歌唱映像データａの映像Ａを、右側下部に歌唱映像データｂの映像Ｂを、左側半部に歌唱映像データｃの映像Ｃをそれぞれ割り振り、歌唱音声データａ＋ｂ＋ｃも用いて閲覧用動画データを生成する。
【００８４】
次に、３回目のコラボレーション歌唱のために、２回目のコラボレーション歌唱で作成された合成動画コンテンツが、ユーザー端末３からの指示に従って選択され、お気に入り登録される（Ｓ１３）。これに伴い、コラボレーション歌唱用の録画用動画データが生成される（Ｓ１４）。
【００８５】
ここでは、合成回数が２回であることから映像レイアウトＣに決定される。従って、生成される録画用映像データは、右側上部に歌唱映像データａに基づく歌唱映像Ａが表示され、右側中部に歌唱映像データｂに基づく歌唱映像Ｂが表示され、右側下部に歌唱映像データｃに基づく歌唱映像Ｃが表示され、左側半部にキャプチャー映像が表示されるレイアウトになる。また、歌唱音声データａ＋ｂ＋ｃが、録画用音声データ（第１歌唱音声データ）として選択される。そして、これらの録画用映像データと録画用音声データの組が録画用動画データとなる。
【００８６】
次に、生成された録画用動画データがダウンロードされ（Ｓ１５）、カラオケ装置２で再生される。この再生に伴い、歌唱者の映像が歌唱映像データｄとして取得される。また、歌唱者の音声が歌唱音声データａ＋ｂ＋ｃの再生音声と合成され、歌唱音声データａ＋ｂ＋ｃ＋ｄとして取得される。そして、この歌唱音声データａ＋ｂ＋ｃ＋ｄのＭＰ３タグデータには、合成回数情報として「３」が設定され、コンテンツＩＤとして「α」、「β」、「γ」及び「δ」が設定される。さらに、これらの歌唱映像データｄと歌唱音声データａ＋ｂ＋ｃ＋ｄの組が、新たな歌唱動画データとしてホスト装置１へアップロードされる（Ｓ１６）。なお、以降の処理は、これまでの処理と同様にしてなされることから、説明を省略する。
【００８７】
以上説明したように、本実施形態のカラオケシステムでは、ＭＰ３タグデータに設定された合成回数情報に基づいて、コラボレーション歌唱時における背景映像の表示レイアウトが決定される。また、この合成回数情報に基づいて、ユーザー端末３で再生される閲覧用の合成動画コンテンツの表示レイアウトも決定される。前述したように、この合成回数情報は、合成対象の映像数を間接的に示している。このため、合成回数情報を用いて背景映像の表示レイアウトや合成動画コンテンツの表示レイアウトを決定すると、合成対象となる映像の数に適した表示レイアウトにできる。その結果、表示レイアウトの自由度を高めることができ、ひいてはコラボレーション歌唱に対する興趣を高めることができる。
【００８８】
また、本実施形態のカラオケシステムでは、図７のレイアウトＢ〜Ｆに示すように、最新のコラボレーション歌唱で表示される映像の表示面積が、他の映像の表示面積の表示面積よりも大きくなるように表示レイアウトが決定されている。すなわち、コラボレーション歌唱時においては、キャプチャー映像の表示面積が、背景となる各映像の表示面積よりも大きくなるように表示レイアウトが決定されている。また、ユーザー端末３で表示される合成動画コンテンツでは、その合成動画コンテンツに最後に加わった利用者（最新の利用者）の映像表示面積が、それ以前の歌唱動画コンテンツの映像表示面積よりも大きくなるように表示レイアウトが決定されている。これにより、最新の利用者の映像について十分な面積を確保できる。そして、コラボレーション歌唱時において、歌唱者は気分よく歌唱することができる。また、最新の利用者が目立つ映像の合成動画コンテンツを作成することができる。その結果、コラボレーション歌唱に対する興趣を高めることができる。
【００８９】
そして、歌唱音声データに対し、カラオケ装置２側で合成回数情報を設定しているので、ホスト装置１（サーバー）での監視処理や設定処理が省略され、処理負担が軽減される。また、表示レイアウトを決定するに際し、レイアウトテーブルを用いているので、表示レイアウトを容易に決定することができる。さらに、合成回数情報がＭＰ３タグデータに設定されているので、ＭＰ３タグデータを有効に活用することができる。
【００９０】
以上の実施形態の説明は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明はその趣旨を逸脱することなく、変更、改良され得ると共に本発明にはその等価物が含まれる。例えば、次のように構成してもよい。
【００９１】
まず、合成回数情報に関し、前述の実施形態では、合成回数を数値で直接的に表すものを例示したが、この構成に限定されない。例えば、記号を用いて間接的に表すものであってもよい。また、カラオケ装置２で合成回数情報の更新を行う例について説明したが、ホスト装置１で更新するように構成してもよい。加えて、音声の合成をホスト装置１で行ってもよい。この場合、ホスト装置１は、音声の合成に伴って合成回数情報をインクリメントする。
【００９２】
また、歌唱音声データに関し、ＭＰ３形式のデータを例示したが、ＭＰ３タグデータのように各種情報を書き込むことができれば、他の形式のデータを用いてもよい。
【００９３】
また、カラオケシステムを歌唱動画データの取得システムとして用いる場合、得られた歌唱映像データと第２歌唱音声データの組を、カラオケ装置２を通じてＤＶＤや外部メモリ等の媒体に記録するように構成してもよい。
【００９４】
また、合成動画コンテンツの表示レイアウトに関し、図７に示した例以外の表示レイアウトを採用してもよい。例えば、図１０に示すレイアウトＤ´のように、各映像の表示面積を段階的に小さくするようにしてもよい。さらに、レイアウトテーブルを用いずに表示レイアウトを設定してもよい。
【符号の説明】
【００９５】
１…ホスト装置（サーバー），２…カラオケ装置，３…ユーザー端末，３Ａ…パーソナルコンピュータ，３Ｂ…タブレットコンピュータ，３Ｃ…携帯電話機，４…通信回線，１１…ホスト側制御部，１１ａ…ＣＰＵ，１１ｂ…メモリ，１２…ホスト側通信部，１３…ホスト側記憶部，２１…カラオケ本体，２２…スピーカ，２３…モニタ，２４…マイク，２５…ビデオカメラ，２６…リモコン装置，３１…本体側制御部，３１ａ…ＣＰＵ，３１ｂ…メモリ，３２…本体側通信部，３３…本体側記憶部，３４…音響処理部，３５…表示処理部，３６…映像入力部，３７…操作部，４１…端末側制御部，４１ａ…ＣＰＵ，４１ｂ…メモリ，４２…端末側通信部，４３…端末側記憶部，４４…表示部，４５…入力部，ＫＢ…カラオケ店，ＲＭ…カラオケルーム
【図１】
2014109660.tif 000003
【図２】
2014109660.tif 000004
【図３】
2014109660.tif 000005
【図４】
2014109660.tif 000006
【図５】
2014109660.tif 000007
【図６】
2014109660.tif 000008
【図７】
2014109660.tif 000009
【図８】
2014109660.tif 000010
【図９】
2014109660.tif 000011
【図１０】
2014109660.tif 000012