(57)【要約】【課題】  音楽と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することが可能な画像生成システム等を提供する。【解決手段】  音楽と並行して出力される画像を生成する画像生成システムＳにおいて、相互に異なる属性を有する複数種類の音楽と並行して夫々出力されるべき画像の内容の雛形となるテンプレートであって、各種類の音楽に夫々対応して予め設定されている複数のテンプレートを蓄積するデータベース１と、蓄積されている複数のテンプレートの中から、実際に出力される音楽と並行して実際に出力されるべき画像に対応する一のテンプレートを抽出テンプレートとして抽出し、その抽出された抽出テンプレートを用いて、実際に出力されるべき画像に対応する画像情報を生成するテンプレート制御部１２と、を備える。【選択図】  図１
2005318295.tif 000002
【特許請求の範囲】
【請求項１】
音楽と並行して出力される画像を生成する画像生成システムにおいて、
相互に異なる属性を有する複数種類の前記音楽と並行して夫々出力されるべき前記画像の内容の雛形となる画像テンプレートであって、各種類の前記音楽に夫々対応して予め設定されている複数の画像テンプレートを蓄積する蓄積手段と、
前記蓄積されている複数の画像テンプレートの中から、実際に出力される前記音楽と並行して実際に出力されるべき前記画像に対応する一の前記画像テンプレートを抽出テンプレートとして抽出する抽出手段と、
前記抽出された抽出テンプレートを用いて、前記実際に出力されるべき画像に対応する画像情報を生成する生成手段と、
を備えることを特徴とする画像生成システム。
【請求項２】
請求項１に記載の画像生成システムにおいて、
前記実際に出力される音楽の内容を解析し、当該内容を示す内容情報を生成する解析手段を更に備え、
前記抽出手段は、前記生成された内容情報に基づいて前記抽出テンプレートを抽出し、
更に前記生成手段は、前記生成された内容情報に基づいて前記抽出テンプレートを編集し、前記画像情報を生成することを特徴とする画像生成システム。
【請求項３】
請求項２に記載の画像生成システムにおいて、
前記画像情報を構成する素材となる素材画像に対応する素材画像情報を蓄積する画像蓄積手段と、
前記生成された内容情報に基づいて、前記実際に出力される音楽に対応する前記素材画像情報を前記画像蓄積手段から抽出する素材画像情報抽出手段と、
を更に備え、
前記生成手段は、前記生成された内容情報と、前記抽出された素材画像情報と、に基づいて前記抽出テンプレートを編集し、前記画像情報を生成することを特徴とする画像生成システム。
【請求項４】
請求項１に記載の画像生成システムにおいて、
前記音楽に対応する音楽情報には、当該音楽の内容を示すキーワードに対応するキーワード情報が付加されていると共に、
前記実際に出力される音楽に対応する前記音楽情報に付加されている前記キーワード情報を当該音楽情報から抽出するキーワード情報抽出手段を更に備え、
前記抽出手段は、前記抽出されたキーワード情報に基づいて前記抽出テンプレートを抽出し、
更に前記生成手段は、前記生成された抽出テンプレートに対応する前記画像情報を生成することを特徴とする画像生成システム。
【請求項５】
請求項１に記載の画像生成システムにおいて、
前記音楽に対応する音楽情報には、当該音楽の属性を少なくとも示す付加情報が付加されていると共に、
前記画像情報を構成する素材となる素材画像に対応する素材画像情報を蓄積する画像蓄積手段と、
前記実際に出力される音楽に対応する前記付加情報を当該音楽情報から抽出する付加情報抽出手段と、
を更に備え、
前記抽出手段は、前記抽出された付加情報と、前記蓄積されている素材画像情報と、に基づいて前記抽出テンプレートを抽出し、
更に前記生成手段は、前記生成された抽出テンプレートに対応する前記画像情報を生成することを特徴とする画像生成システム。
【請求項６】
請求項１に記載の画像生成システムにおいて、
前記音楽に対応する複数の音楽情報を蓄積する音楽情報蓄積手段と、
前記画像情報を構成する素材となる素材画像に対応する素材画像情報を蓄積する画像蓄積手段と、
実際に出力される前記音楽を検索するためのキーワードを入力するために用いられる入力手段と、
前記入力されたキーワードの内容を解析し、当該内容に対応するキーワード内容情報を生成するキーワード内容情報生成手段と、
前記生成されたキーワード内容情報に基づいて、前記実際に出力される音楽に対応する前記音楽情報を、前記音楽情報蓄積手段から抽出する音楽情報抽出手段と、
前記抽出された音楽情報に対応する前記素材画像情報を、前記画像蓄積手段から抽出する画像情報抽出手段と、
前記抽出された音楽情報の内容を解析し、当該音楽情報の内容を示す音楽内容情報を生成する解析手段と、
を更に備え、
前記抽出手段は、前記抽出された音楽情報に基づいて前記抽出テンプレートを抽出し、
前記生成手段は、前記生成された音楽内容情報に基づき、前記抽出された抽出テンプレートを用いて前記画像情報を生成することを特徴とする画像生成システム。
【請求項７】
請求項６に記載の画像生成システムにおいて、
前記キーワード内容情報生成手段は、異なるタイミングで入力された複数のキーワードの内容を夫々解析し、当該各内容に対応する一の前記キーワード内容情報を生成することを特徴とする画像生成システム。
【請求項８】
請求項１に記載の画像生成システムにおいて、
前記音楽に対応する複数の音楽情報を蓄積する音楽情報蓄積手段と、
前記画像情報を構成する素材となる素材画像に対応する素材画像情報を蓄積する画像蓄積手段と、
前記出力される音楽及び画像を視聴する視聴者の気分を示す気分情報を取得する取得手段と、
前記取得された気分情報の内容を解析し、当該内容に対応する気分内容情報を生成する気分内容情報生成手段と、
前記生成された気分内容情報に基づいて、前記実際に出力される音楽に対応する前記音楽情報を、前記音楽情報蓄積手段から抽出する音楽情報抽出手段と、
前記実際に出力される音楽に対応する前記素材画像情報を、前記生成された気分内容情報に基づき前記画像蓄積手段から抽出する画像情報抽出手段と、
を更に備え、
前記抽出手段は、前記生成された気分内容情報に基づいて前記抽出テンプレートを抽出し、
前記生成手段は、前記抽出された抽出テンプレートを用いて前記画像情報を生成することを特徴とする画像生成システム。
【請求項９】
請求項１に記載の画像生成システムにおいて、
前記音楽及び前記画像と並行して出力される文字に対応する文字情報を蓄積する文字情報蓄積手段と、
前記音楽及び前記画像と並行して出力される効果音に対応する効果音情報を蓄積する効果音情報蓄積手段と、
前記出力される音楽及び画像を視聴する視聴者の気分を示す気分情報を取得する取得手段と、
前記取得された気分情報の内容を解析し、当該内容に対応する気分内容情報を生成する気分内容情報生成手段と、
前記生成された気分内容情報に基づいて、前記実際に出力される音楽に対応する前記音楽情報を、前記音楽情報蓄積手段から抽出する音楽情報抽出手段と、
前記生成された気分内容情報に基づいて、前記実際に出力される音楽に対応する前記文字情報を、前記文字情報蓄積手段から抽出する文字情報抽出手段と、
前記生成された気分内容情報に基づいて、前記実際に出力される音楽に対応する前記効果音情報を、前記効果音情報蓄積手段から抽出する効果音情報抽出手段と、
を更に備え、
前記生成手段は、前記生成された内容情報と、前記抽出された文字情報と、前記抽出された効果音情報と、に基づいて前記抽出テンプレートを編集し、前記画像情報を生成することを特徴とする画像生成システム。
【請求項１０】
請求項８又は９に記載の画像生成システムにおいて、
前記気分内容情報生成手段は、異なるタイミングで取得された複数の気分情報の内容を夫々解析し、当該各内容に対応する一の前記気分内容情報を生成することを特徴とする画像生成システム。
【請求項１１】
請求項２、３、６から１０のいずれか一項に記載の画像生成システムにおいて、
前記蓄積手段は、前記画像情報の生成に用いられた前記抽出テンプレートを、新たな前記画像テンプレートとして蓄積することを特徴とする画像生成システム。
【請求項１２】
請求項１から１１のいずれか一項に記載の画像生成システムにおいて、
当該画像システムが稼動している周囲の環境の変化を検出し、変化検出信号を生成する環境変化検出手段を更に備え、
前記生成された変化検出信号に基づいて前記画像情報を生成するための処理を実行することを特徴とするが画像生成システム。
【請求項１３】
請求項１から１１のいずれか一項に記載の画像生成システムにおける前記蓄積手段と、
前記蓄積手段に対して前記画像テンプレートを記録させる記録手段と、
を備えることを特徴とする蓄積装置。
【請求項１４】
相互に異なる属性を有する複数種類の前記音楽と並行して夫々出力されるべき前記画像の内容の雛形となる画像テンプレートであって、各種類の前記音楽に夫々対応して予め設定されている複数の画像テンプレートを蓄積する蓄積手段を備え、当該画像テンプレートを用いて前記画像を生成する画像生成システムにおいて実行される画像生成方法であって、
前記蓄積されている複数の画像テンプレートの中から、実際に出力される前記音楽と並行して実際に出力されるべき前記画像に対応する一の前記画像テンプレートを抽出テンプレートとして抽出する抽出工程と、
前記抽出された抽出テンプレートを用いて、前記実際に出力されるべき画像に対応する画像情報を生成する生成工程と、
を備えることを特徴とする画像生成方法。
【請求項１５】
音楽と並行して出力される画像を生成する画像生成システムに含まれるコンピュータを、
相互に異なる属性を有する複数種類の前記音楽と並行して夫々出力されるべき前記画像の内容の雛形となる画像テンプレートであって、各種類の前記音楽に夫々対応して予め設定されている複数の画像テンプレートを蓄積する蓄積手段、
前記蓄積されている複数の画像テンプレートの中から、実際に出力される前記音楽と並行して実際に出力されるべき前記画像に対応する一の前記画像テンプレートを抽出テンプレートとして抽出する抽出手段、及び、
前記抽出された抽出テンプレートを用いて、前記実際に出力されるべき画像に対応する画像情報を生成する生成手段、
として機能させることを特徴とする画像生成用プログラム。
【請求項１６】
請求項１５に記載の画像生成用プログラムが前記コンピュータで読取可能に記録されていることを特徴とする情報記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本願は、画像生成システム、画像生成方法、画像生成用プログラム並びに情報記録媒体の技術分野に属し、より詳細には、音楽と並行して同時に再生・出力される画像を生成する画像生成システム及び画像生成方法並びに当該画像の生成に用いられる画像生成用プログラム及び当該画像生成用プログラムを記録した情報記録媒体の技術分野に属する。
【背景技術】
【０００２】
近年のデジタルスチルカメラの普及に伴い、当該デジタルスチルカメラにより撮影された画像と、音楽と、を組み合わせて一つのコンテンツを撮影者独自に作成することも可能となっている。この点に関する従来技術として、以下の特許文献１に開示されているものがある。
【特許文献１】特開２００１−３３９６８２（図２、図７及び図１４）
【０００３】
この特許文献１に開示されている従来の技術では、音楽の再生時間を取得して対応する画像の再生時間を決定し、その音楽と共に再生（表示）される画像を切り替える切替タイミングを、ある一定の時間、若しくは視聴者が任意に設定した時間、或いは音楽の小節の検知による自動設定、更には音楽の特徴音の検知による自動設定により設定している。また、複数の当該画像の切替パターンについては視聴者が任意に設定する音楽のジャンルにより数種類のパターンから予め設定されている。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記した従来の技術によると、視聴者により作成される連続画像の変化のバリエーションが限られてしまい、特に同一音楽に対応する複数の画像を作成する場合、視聴者が任意で編集しない限りその画像の変化態様が単一若しくは似通ったものとなってしまい、結果として、作成した画像を音楽と共に再生しても、その聴取者が飽きてしまう場合が多いと言う問題点があった。
【０００５】
そこで、本願は上記の問題点に鑑みて為されたもので、その目的の一例は、音楽と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することが可能な画像生成システム及び画像生成方法並びに当該画像の生成に用いられる画像生成用プログラム及び当該画像生成用プログラムを記録した情報記録媒体を提供することにある。
【課題を解決するための手段】
【０００６】
上記の課題を解決するために、請求項１に記載の発明は、音楽と並行して出力される画像を生成する画像生成システムにおいて、相互に異なる属性を有する複数種類の前記音楽と並行して夫々出力されるべき前記画像の内容の雛形となる画像テンプレートであって、各種類の前記音楽に夫々対応して予め設定されている複数の画像テンプレートを蓄積するデータベース等の蓄積手段と、前記蓄積されている複数の画像テンプレートの中から、実際に出力される前記音楽と並行して実際に出力されるべき前記画像に対応する一の前記画像テンプレートを抽出テンプレートとして抽出するテンプレート制御部等の抽出手段と、前記抽出された抽出テンプレートを用いて、前記実際に出力されるべき画像に対応する画像情報を生成するテンプレート制御部等の生成手段と、を備える。
【０００７】
上記の課題を解決するために、請求項１４に記載の発明は、相互に異なる属性を有する複数種類の前記音楽と並行して夫々出力されるべき前記画像の内容の雛形となる画像テンプレートであって、各種類の前記音楽に夫々対応して予め設定されている複数の画像テンプレートを蓄積する蓄積手段を備え、当該画像テンプレートを用いて前記画像を生成する画像生成システムにおいて実行される画像生成方法であって、前記蓄積されている複数の画像テンプレートの中から、実際に出力される前記音楽と並行して実際に出力されるべき前記画像に対応する一の前記画像テンプレートを抽出テンプレートとして抽出する抽出工程と、前記抽出された抽出テンプレートを用いて、前記実際に出力されるべき画像に対応する画像情報を生成する生成工程と、を備える。
【０００８】
上記の課題を解決するために、請求項１５に記載の発明は、音楽と並行して出力される画像を生成する画像生成システムに含まれるコンピュータを、相互に異なる属性を有する複数種類の前記音楽と並行して夫々出力されるべき前記画像の内容の雛形となる画像テンプレートであって、各種類の前記音楽に夫々対応して予め設定されている複数の画像テンプレートを蓄積する蓄積手段、前記蓄積されている複数の画像テンプレートの中から、実際に出力される前記音楽と並行して実際に出力されるべき前記画像に対応する一の前記画像テンプレートを抽出テンプレートとして抽出する抽出手段、及び、前記抽出された抽出テンプレートを用いて、前記実際に出力されるべき画像に対応する画像情報を生成する生成手段、として機能させる。
【０００９】
上記の課題を解決するために、請求項１６に記載の発明は、請求項１５に記載の画像生成用プログラムが前記コンピュータで読取可能に記録されている。
【発明を実施するための最良の形態】
【００１０】
次に、本願を実施するための最良の形態について、図１乃至図１５に基づいて説明する。なお、以下に説明する各実施形態は、音楽としての曲に係る曲情報を複数蓄積し、視聴者からの要求に応じて当該曲を再生すると共に、その曲の内容に相応しい画像をデジタルスチルカメラで撮影され、収録又は保存された画像に基づいて自動作成する画像生成システムに対して本願を適用した場合の実施の形態である。
【００１１】
（Ｉ）第１実施形態
初めに、本願に係る第１実施形態について、図１乃至図７を用いて説明する。なお、図１は実施形態に係る画像生成システムの概要構成を示すブロック図であり、図２は後述するテンプレートの入手元を例示する図であり、図３は実施形態に係る曲情報及び素材画像に付加されている付加情報を例示する図であり、図４は当該画像生成システムにおいて再生する曲等を検索する際に用いられる検索座標空間を示す図であり、図５は当該画像生成システムにおいて再生する曲等を検索する際に用いられるキーワードを例示する図であり、図６は後述するセンサにより検出され得る環境の変化を例示する図であり、図７は第１実施形態に係る曲と画像の再生処理を示すフローチャートである。
【００１２】
図１に示すように、第１実施形態に係る画像生成システムＳは、不揮発性のメモリ又はハードディスク等の記録媒体からなる蓄積手段、画像蓄積手段、文字情報蓄積手段及び効果音情報蓄積手段としてのデータベース１と、検索処理部７と、入力手段としての操作部８と、画像入力部９と、インターネット１６（又は放送等の外部）から情報を取得する受信部１０と、楽曲解析部１１と、抽出手段、生成手段、解析手段、素材画像情報抽出手段、キーワード情報抽出手段、付加情報抽出手段、キーワード内容情報生成手段、音楽情報抽出手段、画像情報抽出手段及び効果音情報抽出手段としてのテンプレート制御部１２と、テンプレート入出力部１３と、ディスプレイ等からなる動作状態表示用の表示部１４と、スピーカ１７に接続されている再生制御部１５と、温度センサ及び時計等の各種検知装置を含む環境変化検出手段としてのセンサ１８と、上記各構成部材を相互に情報の授受が可能に接続するバス１９と、により構成されている。なお、図示しない外部装置内に、上記受信部１０、上記表示部１４、上記スピーカ１７及び上記センサ１８を設けることにより、第１実施形態に係る画像生成システムＳから、受信部１０、表示部１４、スピーカ１７及びセンサ１８を分離してもよい。
【００１３】
また、上記データベース１は、複数のテンプレートを蓄積記録するテンプレート記録部２と、デジタルスチルカメラにより撮影された静止画像等であって表示部１４において表示される静止画像に対応する静止画像情報を蓄積記録する静止画像記録部３と、表示部１４において表示される動画像に対応する動画像情報を記録する動画像記録部４と、表示部１４において文字を表示するための文字情報を記録する文字情報記録部５と、曲及び画像と共に再生される効果音に対応する効果音情報を記録する効果音情報記録部６と、により構成されている。
【００１４】
次に、全体動作を説明する。
【００１５】
先ず、データベース１を構成する上記各記録部は、上記テンプレート、静止画像情報、動画像情報、文字情報及び効果音情報を、夫々の属性を示すフォルダ名又はディレクトリ名が冠されている階層構造を形成して夫々記録する。
【００１６】
このとき、当該テンプレートとは、再生・出力されるべき曲と並行して表示部１４上に表示されるべき画像（動画像）を生成する際に雛型になるものであり、後述する如く、各曲の属性等に対応するように画像に切換タイミングや表示順序等が予め設定されたものがテンプレート記録部２内に複数格納されている。そして、当該テンプレートとして記述されている情報（切換タイミング等）に則って再生すべき画像が連続して再生されるものである。
【００１７】
また、当該テンプレートは、図２に例示する如く、元々テンプレート記録部２に記録されていたデフォルトテンプレートの他に、図１に示すテンプレート入出力部１３を介して外部から取得され得るものである。そして、当該外部から取得されるテンプレートとして具体的には、例えば図２に例示するような単独追加テンプレート、配信単独追加テンプレート又はミュージック付テンプレート等が挙げられる。
【００１８】
一方、静止画像情報記録部３に記録される静止画像は、上記デジタルスチルカメラで撮影されたものが格納されている他に、インターネット１６等から画像入力部９を介して入力された静止画像も含まれている。このとき、当該静止画像の夫々には、例えば図３に例示するような付加情報が、静止画像記録部３内に当該静止画像を記録させる際に付加される。
【００１９】
更に、動画像記録部４に記録されている動画像は、主としてインターネット１６等から画像入力部９を介して入力された動画像である。このとき、当該動画像自体にも、上記静止画像記録部３内に記録されている静止画像と同様の、図３に例示する如き付加情報が付加されている。
【００２０】
更にまた、文字情報記録部５に記録されている文字情報は、画像生成システムＳの視聴者が過去において独自に入力したフレーズや、他の動画像と共に取得した字幕等が、別個に文字情報として記録されているものである。
【００２１】
また、効果音情報記録部６に記録されている効果音情報は、当該視聴者が過去において独自に録音した環境音や、他の動画像と共に取得した音等が、効果音として別個に記録されているものである。
【００２２】
次に、検索処理部７は、後述する画像生成処理におけるキーワード検索及び曲情報の検索等を、データベース１内に格納されている全ての情報を対象として行う。ここで、当該検索に用いられる検索座標空間について、具体的に図４を用いて説明する。
【００２３】
実施形態のデータベース１内に格納されている全ての情報は、図４に示すように、曲のテンポを横軸とし曲のコード構成を縦軸とする座標空間内の座標に一対一に対応付けられている。すなわち、図２においては、データベース１内に記録されている各曲のテンポ（スピード（より具体的にはbit per minute値））の当該各曲内における平均値をＸ軸とし、更に各曲におけるメジャーコード及びマイナーコードのその曲に占める割合をＹ軸とした座標空間を予め設定し、データベース１内に記録されているテンプレート、静止画像、動画像、曲、効果音及び文字情報（以下、適宜テンプレート等と称する）の夫々が、その属性として当該座標空間内のどの位置に属するかが、当該各テンプレート等毎に一意に決められている。そして、その座標空間内の座標値（Ｘ、Ｙ）が、当該テンプレート等毎に一対一に対応付けられた上でデータベース１内に記録されている。そして、検索処理部７は、当該座標値を手掛かりに、その時に所望されているテンプレート等をデータベース１内において検索する。
【００２４】
次に、当該検索処理部７における検索処理に用いられるキーワードについて、具体的に図５に例示しつつ説明する。
【００２５】
検索処理部７におけるデータベース１を対象とした検索処理においては、先ず、いわゆるフリーキーワードとして予め図５（ａ）に示す如きキーワードが、大まかな分類項目毎に予め設定されている。そして、検索処理部７は、実際の検索処理においてはこれらのキーワードを候補として表示し視聴者に選ばせても良いし、或いは視聴者から自由に入力されたキーワードと同一又は類似のキーワードを抽出して当該検索処理に用いる。そして、これらのキーワードと、データベース１を構成するフォルダ名又はディレクトリ名等と、を比較しながら、そのキーワードに対応する。
【００２６】
一方、図５（ａ）に例示するキーワードに加えて、実施形態の画像生成システムＳでは、図４に示した座標空間に予め対応付けられているキーワード（図５（ｂ）参照。以下、単位座標対応キーワードと称する）をも検索処理に用いる。このとき、当該各座標対応キーワードは、図４に示す座標空間内の一定範囲の夫々について一対一に対応付けられている。図４に示す例では、座標対応キーワード「ノリノリ」の範囲が当該座標空間内の右上方に設定されており、その中には一の曲と一のテンプレートが対応付けられていることになる。
【００２７】
次に、センサ１８は、上述した如く温度計や、画像生成システムＳが車載用である場合の速度計等を含んでおり、後述するトリガとしての機能を有している。このとき、当該センサ１８を介して外部から取得する情報としては、例えば図６に示す情報が挙げられる。なお、図６に示す外部環境情報は、実施形態に係る画像生成システムが主に車載用として使用される場合を想定した外部環境情報であり、図示しないいわゆるＧＰＳ（Global Positioning System）システム、速度計、室温計、回転計及び照度センサ等から取得されるものである。
【００２８】
なお、以下の説明では、図６に示す如き車載用のセンサ１８について説明するが、これ以外に、本願に係るセンサとしては、例えば、本願に係る画像生成システムを店舗用として用いる場合には温度・湿度センサ、顧客数センサ、照明又はタイマなどがあり、また本願に係る画像生成システムを家庭用として用いる場合には温度・湿度センサ、生体センサ、照明又はタイマ等がある。
【００２９】
更に、操作部８においては、後述する画像生成処理において必要な操作が視聴者により行われ、当該操作に対応する操作信号がバス１９を介して操作対象である各構成部材に出力される。
【００３０】
また、画像入力部９は、必要に応じて静止画像、動画像又は曲を外部から取得してバス１９を介してデータベース１等へ出力する。
【００３１】
次に、曲解析部１１は、各曲のスピード及びコード進行を解析し、その結果を検索処理部７等にバス１９を介して出力する。
【００３２】
また、再生制御部１５は、後述する画像生成処理において生成されたテンプレートに基づいて画像及び曲等を再生し、再生された曲及び効果音に対応する曲情報及び効果音情報をスピーカ１７に出力して放音させると共に、当該画像を表示部１４に出力して表示させる。なお、再生制御部１５は、再生するべき曲が指定されたとき、これを図示しないＣＤ等の記録媒体から読み出しスピーカ１７を介して再生する機能も有している。
【００３３】
一方、表示部１４は、画像生成システムＳ自体の動作状態を示す情報を、バス１９を介して取得し、当該動作状態に対応する画像を表示部１４に出力する。
【００３４】
また、テンプレート入出力部１３は、上述したようにテンプレートを外部から取得する場合又は外部へ出力する場合に、そのための入出力インターフェースとして機能する。
【００３５】
最後に、テンプレート制御部１２は、後述する画像生成処理実行の中心となるものであり、具体的には図示しないＣＰＵ及び揮発性メモリ等が構成されている。
【００３６】
次に、第１実施形態に係る画像生成処理について、具体的に図７を用いて説明する。なお、図７に示す画像生成処理は、曲と並行して再生される画像の生成に加えて、当該生成された画像の表示及び対応する曲の再生まで行うものである。
【００３７】
図７に示すように、第１実施形態に係る画像生成処理においては、初めに、再生されることが所望されている曲に対応する曲情報を再生制御部１５において図示しないＣＤ等から読み込み（ステップＳ１）、これを曲解析部１１においてその内容（スピード及びコード構成）を解析する（ステップＳ２）。
【００３８】
次に、その解析結果と図４に示す座標空間とを比較し、その再生すべき曲の当該座標空間内における座標値を定義する（ステップＳ３）。
【００３９】
次に、その定義付けられた座標値を有している静止画像又は動画像を静止画像記録部３又は動画像情報記録部４内において検索して読み込み（ステップＳ４）、更にその定義付けられた座標値を有しているテンプレート（基本テンプレート）をテンプレート記録部２内において検索して読み込む（ステップＳ５）。
【００４０】
そして、上記ステップＳ２乃至Ｓ４において取得した各情報を用いて、上記基本テンプレートを基にして新たなテンプレートをテンプレート制御部１２において作成する（ステップＳ６）。
【００４１】
ここで、当該ステップＳ６の処理について具体的には、ステップＳ４において取得した画像の表示切換順序、当該画像の表示切換タイミング、対応する文字情報の表示タイミング、対応する効果音の再生タイミング、当該取得した画像の表示切換パターン並びに当該取得した画像の表示効果態様が、夫々決定される。このとき、画像の表示切換順序、画像の表示切換パターン並びに画像の表示効果態様は、例えば一度表示された画像及び一度採用した表示切換パターン並びに表示効果態様は表示又は採用しないように選択しつつ且つランダムに当該表示切換順序、表示切換パターン及び表示態様効果が決定される。また、画像の表示切換タイミング、文字情報の表示タイミング及び効果音の再生タイミングは、例えばステップＳ２における解析によって得られたコードの切換タイミングにおいて夫々の表示切換又は再生切換を行うように決定される。
【００４２】
そして、ステップＳ６の処理により新たなテンプレートが作成されると、それに沿って再生すべき曲と並行して作成したテンプレートに含まれる切換タイミング及び切換順序に則った画像表示が実行されると共に文字情報又は効果音の出力が実行される（ステップＳ７）。
【００４３】
そして、その曲と画像の再生・表示が完了したとき、曲の再生を終了するか否かを表示部１４や図示しないインジケータ等において確認し（ステップＳ８）、終了するときは（ステップＳ８；ＹＥＳ）、そのまま第１実施形態に係る画像生成処理並びに曲及び画像の再生・表示処理を終了し、一方、同じ曲について他の画像を用いた再生を行うときは（ステップＳ８；ＮＯ）、再度上記ステップＳ４に戻って処理を再開する。
【００４４】
以上説明したように、第１実施形態に係る画像生成処理によれば、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【００４５】
また、実際に出力される曲の内容を解析し、その内容に対応するテンプレートを抽出して画像を生成するので、当該曲により相応しい画像を生成することができる。
【００４６】
更に、実際に出力される曲の内容に沿った画像を選択してテンプレートを新たに作成し、それを用いて画像を生成するので、最初から画像を作成するよりも簡易にその曲に適した画像を生成することができる。
【００４７】
（II）第２実施形態
次に、本願に係る他の実施形態である第２実施形態について、図８を用いて説明する。なお、図８は、第２実施形態に係る曲と画像の再生処理を示すフローチャートである。
【００４８】
また、第２実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。更に、図８に示すフローチャートにおいて、図７に示すフローチャートと同様の処理については、同様のステップ番号を付して細部の説明は省略する。
【００４９】
上述した第１実施形態においては、再生すべき曲の内容を解析し、その内容に相応しいテンプレートを新たに作成して画像を生成する場合について説明したが、以下に説明する第２実施形態においては、視聴者が指定したキーワードにより曲と画像を選択する。
【００５０】
すなわち、図８に示すように、第１実施形態に係る画像生成処理においては、初めに、これから再生しようとする曲を検索するための検索キーワードが操作部８において入力されると（ステップＳ１０）、図示しない曲のデータベース（当該曲のデータベースは実施形態に係るデータベース１内にテンプレート記録部２等と共に構築されていてもよい。）において各曲に付加されている曲名やアーティスト名、或いはジャンル名等の付加情報を読み込み（ステップＳ１１）、その付加情報と入力されたキーワードとを比較して検索処理部７において再生すべき曲を選択する（ステップＳ１２）。
【００５１】
一方、この曲の選択処理と並行して、データデース１内に含まれている各画像のフォルダ名等を読み込み（ステップＳ１３）、ステップＳ１０において入力されたキーワードと当該読み込んだフォルダ名等とを比較して画像生成に用いるべき画像が格納されているフォルダを選択する（ステップＳ１４）。
【００５２】
そして、選択したフォルダ内に格納されている画像を読み込み（ステップＳ４）、更に、ステップＳ１１において読み込んだ付加情報の中から文字情報を抽出し（ステップＳ１５）、その画像と文字情報とから、これらに対応する基本テンプレート又はキーワードに予め対応して初期設定されているテンプレートをテンプレート記録部２内において検索して読み込む（ステップＳ１６）。
【００５３】
そして、再生すべき曲の当該再生と並行して、その読み込んだテンプレートに含まれる切換タイミング及び切換順序に則った画像表示が実行されると共に文字情報又は効果音の出力が実行される（ステップＳ７）。
【００５４】
そして、その曲と画像の再生・表示が完了したとき、曲の再生を終了するか否かを表示部１４において確認し（ステップＳ８）、終了するときは（ステップＳ８；ＹＥＳ）、そのまま第１実施形態に係る画像生成処理並びに曲及び画像の再生・表示処理を終了し、一方、同じキーワードについて他の曲や画像を用いた再生を行うときは（ステップＳ８；ＮＯ）、再度上記ステップＳ１１又は１３に戻って処理を再開する。
【００５５】
以上説明したように、第２実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【００５６】
これに加えて第２実施形態に係る画像生成処理によれば、実際に出力される曲の内容を示すキーワードに基づいてテンプレートを抽出し、そのテンプレートを用いて画像を生成するので、曲の内容に適した画像をより簡易に生成することができる。
【００５７】
（III）第３実施形態
次に、本願に係る他の実施形態である第３実施形態について、図９を用いて説明する。なお、図９は、第３実施形態に係る曲と画像の再生処理を示すフローチャートである。
【００５８】
また、第３実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。更に、図９に示すフローチャートにおいて、図７に示すフローチャートと同様の処理については、同様のステップ番号を付して細部の説明は省略する。
【００５９】
上述した第１実施形態においては、再生すべき曲の内容を解析し、その内容に相応しいテンプレートを新たに作成して画像を生成する場合について説明したが、以下に説明する第３実施形態においては、視聴者が指定した曲に予め付加されている付加情報に基づいてテンプレートを選択して画像を生成する。
【００６０】
すなわち、図９に示すように、第３実施形態に係る画像生成処理においては、初めに、再生すべき曲に付加されている付加情報（上述したように、曲名、アーティスト名、ジャンル名及びレコード会社名等が含まれている）を読み込み（ステップＳ２０）、その付加情報に含まれている文字情報等に基づいて当該付加情報に相応しい画像を静止画像記録部３及び動画像記録部４内において検索し（ステップＳ２１）、更にその検索した画像と上記付加情報とから、これらに対応する基本テンプレートをテンプレート記録部２内において検索して読み込む（ステップＳ２２）。なお、上記ステップＳ２１の処理に代えて、受信部１０を介して外部から当該付加情報に相応しい画像を取得して後続するステップＳ２２の処理に用いてもよい。
【００６１】
そして、再生すべき曲の当該再生と並行して、その読み込んだテンプレートに含まれる切換タイミング及び切換順序に則った画像表示が実行されると共に文字情報又は効果音の出力が実行される（ステップＳ７）。
【００６２】
そして、その曲と画像の再生・表示が完了したとき、曲の再生を終了するか否かを表示部１４において確認し（ステップＳ８）、終了するときは（ステップＳ８；ＹＥＳ）、そのまま第１実施形態に係る画像生成処理並びに曲及び画像の再生・表示処理を終了し、一方、同じ曲について他の画像を用いた再生を行うときは（ステップＳ８；ＮＯ）、再度上記ステップＳ２０に戻って処理を再開する。
【００６３】
以上説明したように、第３実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【００６４】
これに加えて第３実施形態に係る画像生成処理によれば、出力される曲の属性を示す付加情報と、予め蓄積されている又は外部から取得した画像と、を用いて曲とともに再生すべき画像を生成するので、その出力される曲に適した画像をより簡易に生成することができる。
【００６５】
（IV）第４実施形態
次に、本願に係る他の実施形態である第４実施形態について、図１０を用いて説明する。なお、図１０は、第４実施形態に係る曲と画像の再生処理を示すフローチャートである。
【００６６】
また、第４実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。更に、図１０に示すフローチャートにおいて、図７に示すフローチャートと同様の処理については、同様のステップ番号を付して細部の説明は省略する。
【００６７】
上述した第１実施形態においては、再生すべき曲の内容を解析し、その内容に相応しいテンプレートを新たに作成して画像を生成する場合について説明したが、以下に説明する第４実施形態においては、基本的には第１実施形態の場合と同様の処理ではあるが、再生用の画像を生成する際における図４に示す座標空間の活用法が異なる。
【００６８】
すなわち、図１０に示すように、第４実施形態に係る画像生成処理においては、初めに、再生されることが所望されている曲に対応する曲情報を再生制御部１５において図示しないＣＤ等から読み込み（ステップＳ１）、これを曲解析部１１においてその内容（スピード及びコード構成）を解析する（ステップＳ２）。
【００６９】
次に、その解析結果と図４に示す座標空間とを比較し、その再生すべき曲の当該座標空間内における座標値を定義する（ステップＳ３）。
【００７０】
次に、その定義付けられた座標値の近辺にその座標値を有している静止画像又は動画像を静止画像記録部３又は動画像情報記録部４内において検索して読み込み（ステップＳ２５）、更にその定義付けられた座標値の近辺にその座標値を有している基本テンプレートをテンプレート記録部２内において検索して読み込む（ステップＳ２６）。
【００７１】
そして、上記ステップＳ１乃至Ｓ３及びステップＳ２５乃至Ｓ２７において取得した各情報を用いて、基本テンプレートを基にして新たなテンプレートをテンプレート制御部１２において作成する（ステップＳ２７）。ここで、当該ステップＳ２７において実行されるテンプレートの作成処理の詳細は上述した第１実施形態におけるテンプレート作成処理（ステップＳ６）と同様であるので、細部の説明は省略する。
【００７２】
そして、ステップＳ２７の処理により新たなテンプレートが作成されると、それに沿って再生すべき曲と並行して作成したテンプレートに含まれる切換タイミング及び切換順序に則った画像表示が実行されると共に文字情報又は効果音の出力が実行される（ステップＳ２８）。
【００７３】
そして、その曲と画像の再生・表示が完了したとき、その画像の表示に用いられていた新たなテンプレートの、図４に示す座標空間内の座標値を新たに定義し（ステップＳ２９）、その定義した座標値と共に当該新たなテンプレートをテンプレート記録部２に格納し（ステップＳ３０）、更に使用した素材画像の使用回数（現状では一回）を示す情報を静止画像記録部３及び動画像記録部４に記録する（ステップＳ３１）。
【００７４】
使用回数の記録が完了すると、次に、曲の再生を終了するか否かを表示部１４において確認し（ステップＳ３２）、終了するときは（ステップＳ３２；ＹＥＳ）、そのまま第４実施形態に係る画像生成処理並びに曲及び画像の再生・表示処理を終了し、一方、同じ曲について他の画像を用いた再生を行うときは（ステップＳ３２；ＮＯ）、再度上記ステップＳ２５に戻って処理を再開する。
【００７５】
以上説明したように、第４実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【００７６】
また、実際に出力される曲の内容を解析し、その内容に対応するテンプレートを抽出して画像を生成するので、当該曲により相応しい画像を生成することができる。
【００７７】
更に、実際に出力される曲の内容に沿った画像を選択してテンプレートを新たに作成し、それを用いて画像を生成するので、最初から画像を作成するよりも簡易にその曲に適した画像を生成することができる。
【００７８】
更にまた、画像の生成に用いられたテンプレートを蓄積していくので、似通った状態で曲を出力する場合に再度同様のテンプレートを生成する処理を省略して迅速に画像を生成することができる。
【００７９】
（Ｖ）第５実施形態
次に、本願に係る他の実施形態である第５実施形態について、図１１を用いて説明する。なお、図１１は、第５実施形態に係る曲と画像の再生処理を示すフローチャートである。
【００８０】
また、第５実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。更に、図１１に示すフローチャートにおいて、図１０に示すフローチャートと同様の処理については、同様のステップ番号を付して細部の説明は省略する。
【００８１】
上述した第４実施形態においては、再生すべき曲の内容を解析し、その内容に相応しいテンプレートを新たに作成して画像を生成する場合について説明したが、以下に説明する第５実施形態においては、視聴者が指定したキーワードにより曲と画像を選択する。
【００８２】
すなわち、図１１に示すように、第５実施形態に係る画像生成処理においては、初めに、これから再生しようとする曲を検索するための検索キーワードが操作部８において入力されると（ステップＳ３５）、その入力内容と図４に示す座標空間とを比較し、その入力されたキーワードの当該座標空間内における座標値を定義する（ステップＳ３６）。
【００８３】
次に、その定義付けられた座標値の近辺にその座標値を有している曲を図示しない曲のデータベース内において検索して読み込み（ステップＳ３７）、その定義付けられた座標値の近辺にその座標値を有している静止画像又は動画像を静止画像記録部３又は動画像情報記録部４内において検索して読み込み（ステップＳ２５）、更にその定義付けられた座標値の近辺にその座標値を有している基本テンプレートをテンプレート記録部２内において検索して読み込む（ステップＳ２６）。
【００８４】
これ以後は、上述した第４実施形態におけるステップＳ２７乃至Ｓ３２の処理が第４実施形態の場合と同様に実行され、一連の画像生成処理及び曲再生処理を完了する。
【００８５】
以上説明したように、第５実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【００８６】
また、出力させる曲を検索するためのキーワードを入力して当該曲を検索し、その曲に対応する画像とその曲の内容の解析結果とを用いて再生用の画像を生成するので、再生すべき曲を選ぶ段階から簡易な処理で必要な曲を選択することができる。
【００８７】
なお、上述した第５実施形態において、過去に入力されていたキーワードと今般入力されたキーワードとを併せて用いてそれらを解析し、双方に対応する曲の選択及び画像生成を行うように構成することもできる。
【００８８】
この場合には、異なるタイミングで入力された複数のキーワードを用いて一の曲を検索するので、視聴者の意図をより適切に反映して曲を選択することができる。
【００８９】
（VI）第６実施形態
次に、本願に係る他の実施形態である第６実施形態について、図１２を用いて説明する。なお、図１２は、第６実施形態に係る曲と画像の再生処理を示すフローチャートである。
【００９０】
また、第６実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。
【００９１】
上述した第１実施形態等においては、再生すべき曲の内容を解析し、その内容に相応しいテンプレートを新たに作成して画像を生成する場合について説明したが、以下に説明する第６実施形態においては、曲を再生すると共に画像を視聴しようとしている視聴者のそのときの気分に関する情報が、曲の選択及び画像の生成に活用される。
【００９２】
すなわち、図１２に示すように、第６実施形態に係る画像生成処理においては、初めに、当該視聴者の現在における気分を示す文字情報が気分情報として操作部８において入力される（ステップＳ４０）。
【００９３】
ここで、当該気分情報とは、具体的には図４に示す座標空間における各象限に記載されている、「幸せ」、「楽しい」、「切ない」又は「哀しい」のいずれかが文字情報として操作部８において入力される。
【００９４】
次に、その入力された気分情報の座標値の象限にその座標値を有している曲を図示しない曲のデータベース内において検索して読み込む（ステップＳ４１）と共に、その曲の座標値の近辺にその座標値を有している静止画像又は動画像を静止画像記録部３又は動画像情報記録部４内において検索して読み込み（ステップＳ４２）、更にその曲の座標値の近辺にその座標値を有している基本テンプレートをテンプレート記録部２内において検索して読み込む（ステップＳ４３）。
【００９５】
これに加えて、その曲の座標値の近辺にその座標値を有している文字情報を文字情報記録部５内において検索して読み込む（ステップＳ４４）と共に、その座標値の近辺にその座標値を有している効果音情報を効果音記録部６内において検索して読み込む（ステップＳ４５）。
【００９６】
そして、上記ステップＳ４２、Ｓ４４及びＳ４５において選択された画像、文字情報及び効果音情報を用いて作成した画像を、ステップＳ４３において選択されたテンプレートに則ってステップＳ４１において選択した曲を再生しつつ表示する（ステップＳ４６）。
【００９７】
そして、その曲と画像の再生・表示が完了したとき、曲の再生を終了するか否かを表示部１４において確認し（ステップＳ４７）、終了しないときは（ステップＳ４７；ＮＯ）、前回のステップＳ４１乃至Ｓ４５の処理で選択された曲、画像、テンプレート、文字情報及び効果音情報が再度選択されないように識別フラグ等を設定する処理を行い（ステップＳ４８）、同じ気分情報に対応する他の曲及び画像が再生・表示されるように上記ステップＳ４１に戻る。
【００９８】
一方、ステップＳ４７の判定において、曲の再生を終了するときは（ステップＳ４７；ＹＥＳ）、直前に再生された画像、文字情報及び効果音情報を、その気分情報及び曲に対応する新たなテンプレートを合成するか否かを使用者に対して確認し（ステップＳ４９）。そして、新たなテンプレートを合成する場合は（ステップＳ４９；ＹＥＳ）当該新テンプレートを合成し（ステップＳ５０）、一連の処理を終了する。
【００９９】
一方、ステップＳ４９の判定において新たなテンプレートを合成しないときは（ステップＳ４９；ＮＯ）そのままそのまま一連の処理を終了する。
【０１００】
以上説明したように、第６実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【０１０１】
これに加えて第６実施形態に係る画像生成処理によれば、視聴者の気分を示す気分情報を取得し、その気分情報に基づいて曲を抽出すると共に対応するテンプレートを指定して画像を生成するので、視聴者の気分に応じた適切な曲及び画像を出力することができる。
【０１０２】
更に、出力すべき曲に対応する文字又は効果音に基づいてテンプレートを編集し、その編集後のテンプレートを用いて画像を生成するので、実際に視聴される画像及び曲の双方に基づいて画像を生成することができる。
【０１０３】
（VII）第７実施形態
次に、本願に係る他の実施形態である第７実施形態について、図１３を用いて説明する。なお、図１３は、第７実施形態に係る曲と画像の再生処理を示すフローチャートである。また、図１３に示すフローチャートにおいて、図９に示すフローチャートと同一の処理については、同一のステップ番号を付して細部の説明を省略する。
【０１０４】
更に、第７実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。
【０１０５】
上述した第１実施形態等においては、再生すべき曲の内容を解析し、その内容に相応しいテンプレートを新たに作成して画像を生成する場合について説明したが、以下に説明する第７実施形態においては、画像生成システムが設置されている周囲の環境の変化をセンサ１８において検出した結果が画像の生成に反映される。
【０１０６】
すなわち、図１３に示すように、第７実施形態に係る画像生成処理においては、初めに、センサ１８において予め設定されている閾値を、そのときの検出対象となっている環境要因の値が越えたことにより、センサ１８からその旨の情報が入力されたか否かが常時監視されており（ステップＳ５５）、その入力が無いときは（ステップＳ５５；ＮＯ）そのまま監視を継続し、一方、その監視中において当該情報が入力されたときは（ステップＳ５５；ＹＥＳ）、上記第３実施形態と同様の処理を実行する（ステップＳ２０乃至Ｓ２２並びにＳ７及びＳ８）。
【０１０７】
以上説明したように、第７実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【０１０８】
これに加えて第７実施形態に係る画像生成処理によれば、出力される曲の属性を示す付加情報と、予め蓄積されている画像と、を用いて曲とともに再生すべき画像を生成するので、その出力される曲に適した画像をより簡易に生成することができる。
【０１０９】
また、周囲の変化に応じて画像の生成タイミングを制御することができるので、周囲の環境により適切に対応して画像を生成することができる。
【０１１０】
（VIII）第８実施形態
次に、本願に係る他の実施形態である第８実施形態について、図１４を用いて説明する。なお、図１４は、第８実施形態に係る曲と画像の再生処理を示すフローチャートである。また、図１４に示すフローチャートにおいて、図１１に示すフローチャートと同一の処理については、同一のステップ番号を付して細部の説明を省略する。
【０１１１】
更に、第８実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。
【０１１２】
上述した第５実施形態においては、視聴者が指定したキーワードにより曲と画像を選択する場合について説明したが、以下に説明する第８実施形態においては、画像生成システムが設置されている周囲の環境の変化をセンサ１８において検出した結果が画像の生成に反映される。
【０１１３】
すなわち、図１４に示すように、第８実施形態に係る画像生成処理においては、初めに、そのときの検出対象となっている環境要因の値が越えた旨の情報がセンサ１８から入力されたか否かが常時監視されており（ステップＳ５６）、その入力が無いときは（ステップＳ５６；ＮＯ）そのまま当該入力を待つべく待機し、一方、当該入力があったときは（ステップＳ５６；ＹＥＳ）、当該入力があったタイミングで、例えばランダムにキーワードを設定して（ステップＳ５７）、後のステップＳ３６以降の処理に移行する。
【０１１４】
一方、ステップＳ５６の判定において、当該キーワードが入力されたときは（ステップＳ５６；ＹＥＳ）、上記第５実施形態と同様の処理を実行する（ステップＳ２５乃至Ｓ３２並びにＳ３６及びＳ３９）。
【０１１５】
以上説明したように、第８実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【０１１６】
また、出力させる曲を検索するためのキーワードを入力して当該曲を検索し、その曲に対応する画像とその曲の内容の解析結果とを用いて再生用の画像を生成するので、再生すべき曲を選ぶ段階から簡易な処理で必要な曲を選択することができる。
【０１１７】
これに加えて第８実施形態に係る画像生成処理によれば、周囲の変化に応じたタイミングでキーワードを設定することができるので、周囲の環境により適切に対応して画像を生成することができる。
【０１１８】
（IX）第９実施形態
最後に、本願に係る他の実施形態である第９実施形態について、図１５を用いて説明する。なお、図１５は第９実施形態に係る曲と画像の再生処理を示すフローチャートである。また、図１５に示すフローチャートにおいて、図１２に示すフローチャートと同一の処理については、同一のステップ番号を付して細部の説明を省略する。
【０１１９】
更に、第９実施形態に係る画像生成システムの構成は、第１実施形態に係る画像生成システムＳの構成と同様であるので、細部の説明は省略する。
【０１２０】
上述した第６実施形態においては、曲を再生すると共に画像を視聴しようとしている視聴者のそのときの気分に関する情報が、曲の選択及び画像の生成に活用される場合について説明したが、以下に説明する第９実施形態においては、画像生成システムが設置されている周囲の環境の変化をセンサ１８において検出した結果が画像の生成に反映される。
【０１２１】
すなわち、図１５に示すように、第９実施形態に係る画像生成処理においては、初めに、そのときの検出対象となっている環境要因の値が越えた旨の情報がセンサ１８から入力されたか否かが常時監視されており（ステップＳ６０）、その入力が無いときは（ステップＳ６０；ＮＯ）そのまま当該入力を待つべく待機し、一方、当該入力があったときは（ステップＳ６０；ＹＥＳ）、当該入力があったタイミングで、例えばランダムに四つの中から気分情報を設定して（ステップＳ６１）、後のステップＳ４１以降ステップＳ５０までの処理に移行する。
【０１２２】
以上説明したように、第９実施形態に係る画像生成処理によれば、第１実施形態の場合と同様に、複数のテンプレートを予め蓄積しておき、実際に出力される曲に対応するテンプレートを抽出してその曲と共に出力されるべき画像を生成するので、曲と共に再生される連続画像を視聴者自ら作成する場合に、飽きることがなく変化に富んだ画像を作成することができる。
【０１２３】
これに加えて第９実施形態に係る画像生成処理によれば、視聴者の気分を示す気分情報を取得し、その気分情報に基づいて曲を抽出すると共に対応するテンプレートを指定して画像を生成するので、視聴者の気分に応じた適切な曲及び画像を出力することができる。
【０１２４】
更に、出力すべき曲に対応する文字又は効果音に基づいてテンプレートを編集し、その編集後のテンプレートを用いて画像を生成するので、実際に視聴される画像及び曲の双方に基づいて画像を生成することができる。
【０１２５】
更にまた、周囲の変化に応じたタイミングで気分情報を設定することができるので、周囲の環境により適切に対応して画像を生成することができる。
【０１２６】
なお、上述した各実施形態において、新たなテンプレートを作成した場合、これを例えば不揮発性の携帯型メモリに記録させておいても良い。この場合には、当該テンプレートを画像生成システムＳから切り離すことができ、テンプレートとしての用途を拡大することができる。すなわち、当該テンプレートを個人用に携帯して外出先において新たな画像形成に用いてもよいし、或いは、当該テンプレートを他の者と共有することで、一つのテンプレートが活用される範囲を拡張することができる。
【０１２７】
また、図１に示すデータベース１を、画像生成システムＳ内ではなく、インターネット上のサーバ内に構築し、必要に応じてこのサーバから各情報を読み出すように構成することもできる。
【０１２８】
更に、図７乃至図１５のフローチャートに対応するプログラムをフレキシブルディスク又はハードディスク等の情報記録媒体に記録しておき、又はインターネット等を介して取得して記録しておき、これらを汎用のコンピュータで読み出して実行することにより、当該コンピュータを実施形態に係るテンプレート制御部１２として活用することも可能である。
【図面の簡単な説明】
【０１２９】
【図１】第１実施形態に係る画像生成システムの概要構成を示すブロック図である。
【図２】第１実施形態に係るテンプレートの種類を例示する図である。
【図３】第１実施形態に係る画像の付加情報を例示する図である。
【図４】第１実施形態の検索座標空間を例示する図である。
【図５】第１実施形態に係るキーワードを例示する図であり、（ａ）はフリーキーワードを例示する図であり、（ｂ）は座標対応キーワードを例示する図である。
【図６】第１実施形態に係る環境要因を例示する図である。
【図７】第１実施形態に係る画像生成処理を示すフローチャートである。
【図８】第２実施形態に係る画像生成処理を示すフローチャートである。
【図９】第３実施形態に係る画像生成処理を示すフローチャートである。
【図１０】第４実施形態に係る画像生成処理を示すフローチャートである。
【図１１】第５実施形態に係る画像生成処理を示すフローチャートである。
【図１２】第６実施形態に係る画像生成処理を示すフローチャートである。
【図１３】第７実施形態に係る画像生成処理を示すフローチャートである。
【図１４】第８実施形態に係る画像生成処理を示すフローチャートである。
【図１５】第９実施形態に係る画像生成処理を示すフローチャートである。
【符号の説明】
【０１３０】
１    データベース
２    テンプレート記録部
３    静止画像記録部
４    動画像記録部
５    文字情報記録部
６    効果音情報記録部
７    検索処理部
８    操作部
９    画像入力部
１０    受信部
１１    曲解析部
１２    テンプレート制御部
１３    テンプレート入出力部
１４    表示部
１５    再生制御部
１６    インターネット
１７    スピーカ
１８    センサ
【図１】
2005318295.tif 000003
【図２】
2005318295.tif 000004
【図３】
2005318295.tif 000005
【図４】
2005318295.tif 000006
【図５】
2005318295.tif 000007
【図６】
2005318295.tif 000008
【図７】
2005318295.tif 000009
【図８】
2005318295.tif 000010
【図９】
2005318295.tif 000011
【図１０】
2005318295.tif 000012
【図１１】
2005318295.tif 000013
【図１２】
2005318295.tif 000014
【図１３】
2005318295.tif 000015
【図１４】
2005318295.tif 000016
【図１５】
2005318295.tif 000017