(57)【要約】【課題】撮影時に撮影される画像データに対し、感情を表す表現を挿入する場合に、自動的に挿入できるようにして鑑賞化の高い作品を簡単に作成することができる画像処理装置を提供する。【解決手段】所定の撮影画像から成るイベントの内容を表したイベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得手段と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得手段と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾する画像修飾手段とを備えたことを特徴とする。【選択図】      図２６
2004266629.tif 000002
【特許請求の範囲】
【請求項１】
所定の撮影画像から成るイベントの内容を表したイベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得手段と、
前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得手段と、
前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾する画像修飾手段とを備えたことを特徴とする画像処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、電子カメラやビデオカメラ等の画像記録再生装置に関する。
【０００２】
【従来の技術】
近年、写真をデジタル信号としてメモリカードや光ディスク等に記憶する電子スチルカメラが提供されている。これらの電子スチルカメラで撮影された写真等の画像データは、従来の銀塩フィルムを用いたカメラで撮影された写真と比べ、光メモリなどの可搬性メモリに記憶することにより物理的なスペースを必要とすることなく大量に保持することが可能になっている。
【０００３】
また、デジタルビデオカメラ等の電子スチルカメラは特にホームユーザに普及し、撮影した画像データは、個々の所有するコンピュータなどの記憶装置に保持されるようになった。このような電子スチルカメラの普及によって、ユーザが撮影した画像データや音声データ等の映像データを編集・加工などして電子アルバム等の作品を作成できるようになってきている。
【０００４】
しかし、現状の電子アルバム等の作品を作成するには手間がかかり、より鑑賞化の高い作品を作るには困難な状況にある。そのため、これら映像データを簡単に編集・加工を行える要望が強まってきている。
【０００５】
簡単に画像及び音声などの映像データを編集・加工する方法として、撮影時に撮影される画像データに対し、映像に写っている人物の名前や場所などの画像関連情報を付与し、予め用意されたスクリプトにユーザが入力した画像関連情報を当て嵌め、画像データと共に再生する方法がある（例えば、特許文献１参照）。この技術では、作品を作り上げるために必要な情報を明示的にユーザに入力させることにより、簡単に鑑賞化の高い作品を作り上げることが可能になっている。
【０００６】
【特許文献１】
特開２０００−４８５４３号公報
【０００７】
【発明が解決しようとする課題】
しかしながら、上記のような従来技術において、感情を表す表現を挿入する場合、例えば、嬉しさや悲しさを表すような表現を映像データに挿入する場合、撮影される人物が指定入力し、その対応するテロップや挿絵を挿入していた。このような、撮影中に感想などのコメント等の指示を仰ぐことは面倒であり、撮影中にそのような入力を行えない場合もある。
【０００８】
また、上記特許文献１に開示されたようなスクリプトで再生される場合、同じようなイベント内容の映像データを編集すると、被写体等が異なるのみで似たような作品が作成されてしまい、鑑賞化の高い作品を作成することができないという問題があった。本来ならば、撮影時に起きた出来事や撮影された人物などによりテロップや挿絵等を挿入すべきであり、その方がより鑑賞化の高い作品を作ることができるのである。
【０００９】
本発明は上記従来の問題点に鑑み、撮影時に撮影される画像データに対し、感情を表す表現を挿入する場合に、自動的に挿入できるようにして鑑賞化の高い作品を簡単に作成することができる画像処理装置を提供することを目的とする。
【００１０】
【課題を解決するための手段】
上記目的を達成するために、本発明の画像処理装置は、所定の撮影画像から成るイベントの内容を表したイベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得手段と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得手段と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾する画像修飾手段とを備えたことを特徴とする。
【００１１】
【発明の実施の形態】
以下、本発明の実施の形態を図面に基づいて説明する。
【００１２】
［第１実施形態］
〔画像記録再生装置のハード構成〕
図１は、本発明の第１実施形態に係る画像記録再生装置の一構成例を示すブロック図である。
【００１３】
図中の１はシステムバスであり、後述する各ブロックは、このシステムバス１に接続されている。２は、ＣＰＵである。３はプログラムメモリ（ＰＭＥＭと称す）であり、処理のためのプログラムを適宜外部記憶装置５から選択／読み込みされ、このプログラムがＣＰＵ２で実行される。また、ＰＭＥＭ３は、テキストメモリでもあり、入力装置９から入力されたデータをコード情報として記憶する。８は入力制御部であり、タブレットやマウス、キーボードなどの入力装置９が接続される。
【００１４】
４は通信制御部であり、通信ポートを経由して印刷装置との接続を行ったり、電話回線等により外部のネットワークとの接続を行う。１２は音声制御部であり、マイクやスピーカーなどの音声入出力装置が接続される。９はビデオ・イメージ・メモリ（ＶＲＡＭ）、１０は表示出力制御部、１１はＣＲＴなどの表示出力装置である。外部記憶装置制御部６は、ハード・ディスク（ＨＤ）、ＣＤ−ＲＯＭ及びメモリカードなどの外部記憶装置５が接続される。
【００１５】
〔第１実施形態のデータ構成〕
図２は、本実施形態におけるデータ構成の一例を示す図である。
【００１６】
２１は、外部記憶装置５もしくはＰＭＥＭ３に存在し、各情報テーブルを保持するテーブル領域である。このテーブル領域２１には、イベント内容情報テーブル２１ａ、イベントリスト情報テーブル２１ｂ、イベント詳細入力文章テーブル２１ｃ、被写体質問リストテーブル２１ｄ、被写体特徴情報テーブル２１ｅ、再成スクリプトテーブル２１ｆ、視点リスト情報テーブル２１ｇ、被写体情報テーブル２１ｈ、音楽情報テーブル２１ｉ、飾り絵情報テーブル２１ｊ、及び変換式情報テーブル２１ｋが存在する。
【００１７】
２２は、ＰＭＥＭ３上に存在し、テーブル領域２１に存在する各情報テーブルより取得した情報を一時的に保持するバッファ領域である。このバッファ領域２２には、イベント内容情報バッファ２２ａ、イベントシーンリスト情報バッファ２２ｂ、イベント詳細情報バッファ２２ｃ、イベント詳細入力文章バッファ２２ｄ、被写体特徴情報バッファ２２ｅ、被写体質問リストバッファ２２ｆ、被写体情報バッファ２２ｇ、再成スクリプトバッファ２２ｈ、及び視点リスト情報バッファ２２ｉが存在する。
【００１８】
２３は撮影データ記憶部であり、外部記憶装置５に存在し、撮影した画像データ等を記憶する。
【００１９】
以下に、テーブル領域２１に存在する各情報テーブルについて詳細に説明する。
【００２０】
図３は、本実施形態におけるイベント内容情報テーブル２１ａの一例を示す図である。
【００２１】
イベント内容情報テーブル２１ａには、撮影される事柄を示すイベント内容が格納されている。さらに本実施形態では、イベント内容に対する詳細なイベント事項が分類付けされている。例えば、「出産」のイベント内容情報には、「出産」に関わる詳細な出来事として「妊娠判明」「妊娠中」などのイベント内容情報が関連付けられている。本実施形態では、図３に示すようなデータテーブルにおいて保持しているが、ＸＭＬ等で保持されたデータより取得しても構わない。
【００２２】
図４は、本実施形態におけるイベントリスト情報テーブル２１ｂの一例を示す図である。
【００２３】
イベントリスト情報テーブル２１ｂには、図３の各イベント内容情報に対する撮影ポイントを示す情報（イベントシーン情報と称す）が格納されている。このイベントシーン情報とは、そのイベントにおいて撮影されるであろうシーン及び撮影すると電子アルバム等の作品を作成するのに効果的なシーンを示す。例えば、「お七夜」のイベント内容情報には、「命名」「お赤飯作り」「お祝い会」などのイベントシーン情報が関連付けられている。本実施形態では、図４に示すようなデータテーブルにおいて保持しているが、ＸＭＬ等で保持されたデータより取得しても構わない。
【００２４】
図５は、本実施形態におけるイベント詳細入力文章テーブル２１ｃの一例を示す図である。
【００２５】
イベント詳細入力文章テーブル２１ｃは、イベント内容情報もしくはイベントシーン情報に対するイベント詳細情報の取得方法に関する情報が保持されている。本実施形態においては、この撮影された画像データに対して付与される情報（誰が、いつ、何を、どうしたなどの付帯情報）の入力を簡素化するために、図６に示すイベント詳細設定画面等を用いる。
【００２６】
図５及び図６を用いて説明すると、イベント内容情報「お七夜」に対するイベント詳細入力文章情報は、
「＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞のお七夜が（場所→）＜ｉｎ＞場所１＜￥ｉｎ＞で行われた。参加者は、＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞。」となる。
【００２７】
＜ｉｎ＞＜￥ｉｎ＞で囲まれた部分は、操作者からの付帯情報を取得することを示す。図６のイベント詳細設定画面に示すように＜ｉｎ＞＜￥ｉｎ＞で囲まれた部分は、リストボックス等により指定する。リストボックス内に当て嵌まる事柄が存在しない場合は、操作者からの入力を取得する。＜ｂｕｔｔｏｎ＞＜￥ｂｕｔｔｏｎ＞は、前記に示す＜ｂ＞＜￥ｂ＞情報を操作者が繰り返し追加入力できるようにするためのものである。このコントロールが指示されると、「＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞」が繰り返し処理され、操作者の追加入力が可能となる。
【００２８】
図７は、本実施形態における被写体質問リストテーブル２１ｄの一例を示す図である。
【００２９】
被写体質問リストテーブル２１ｄは、連番、条件情報、質問情報及び設定情報で構成される被写体質問情報から成る。連番は、被写体質問情報を示す任意の連番である。条件情報は、年齢や性別などの特徴情報から成り、この条件情報が設定された被写体質問情報はこの条件に見合う場合に被写体質問情報としてリストアップされる。これは、質問情報から導かれる被写体タイプを詳細化するためのものであり、必ずしも必要ではない。質問情報は、被写体の特徴を抽出するための質疑応答を行うための文章である。
【００３０】
設定情報は、質問の応答による設定内容及びカウントする被写体タイプを示す。例えば、被写体の特徴を抽出するための質問情報として、連番１の被写体質問情報は、性別を確認する質問情報が格納されている。そして、操作者から得られた回答により男性であるか女性であるかの性別情報に格納される。連番２の被写体質問情報は、年齢を確認する質問情報が格納されている。これも同様に得られた年齢は年齢情報に格納される。連番７は、性別が男性で、連番３の応答が“３”の結果の場合に行われる被写体質問情報である。これらの情報は、回答により被写体タイプに＋１加算される。
【００３１】
連番７のように設定情報に被写体タイプが記載されている場合は、その被写体タイプに＋１を加算し、関連する全ての被写体質問情報による質疑応答が行われた後、一番加算数の大きい被写体タイプを被写体特徴情報として抽出する。連番１から６までのような条件情報が設定されていない被写体質問情報は、被写体特徴情報に関係なく質疑応答が行われる。また、これら取得された被写体特徴情報は、被写体情報と関連付けされて被写体特徴情報バッファ２２ｅに格納される。本実施形態においては、特徴情報を抽出するための被写体質問情報は７つしか挙げていないがこれだけに留まらない。
【００３２】
図８は、本実施形態における視点リスト情報テーブル２１ｇの一例を示す図である。
【００３３】
視点リスト情報テーブル２１ｇは、視点リスト情報を示す任意の連番と、イベント内容情報と、そのイベント内容情報に関わる被写体を示す視点情報とが格納されている。例えば、「出産」に関わる内容が撮影された場合、視点情報として、生まれた「赤ちゃん」、その赤ちゃんを産んだ「母」、その赤ちゃんの「父」及びその出産に携わった「医者」や「助産婦」などが挙げられる。
【００３４】
図９は、本実施形態における書体情報テーブル２１ｈの一例を示す図である。
【００３５】
書体情報テーブル２１ｈは、書体情報を示す任意の連番と、被写体特徴情報と、その被写体特徴情報に対応する書体名情報が格納されている。この書体名情報と被写体特徴情報の対応付けは、書体からイメージされる被写体の特徴情報を対応付けたもの、もしくは被写体の特徴情報において当て嵌まる書体を対応付けしたものである。例えば、「どっしりした体格」という被写体特徴情報において「相撲書体」が対応付けされる。
【００３６】
本実施形態における音楽情報テーブル２１ｉは、音楽情報を示す任意の連番と、イベント内容情報及びイベントシーン情報などによる条件情報と、その条件情報に対応する音楽名情報とが格納されている。この音楽名情報と条件情報の対応付けは、音楽からイメージされるイベントシーン情報などに対応付けたもの、もしくはイベントシーン情報などにおいて当て嵌まる音楽を対応付けしたものである。
【００３７】
図１０は、本実施形態における変換式情報テーブル２１ｋの一例を示す図である。
【００３８】
変換式情報テーブル２１ｋは、変換式情報を示す任意の連番と、作成する文字列を示す作成文字列と、被写体特徴情報を用いてどのように変換もしくは作成を行うかを表す変換式とから成る。
【００３９】
〔第１実施形態における画像記録再生方法〕
（Ａ）全体的な処理の流れ
上記述べたような情報テーブルを用いて、本実施形態における画像記録再生方法を以下に述べる。図１１は、本実施形態における画像記録再生システムの全体的な処理の流れを示すフローチャートである。
【００４０】
まずステップＳ１１において、入力制御部７より、画像関連情報（撮影された映像に関する情報、例えば、イベント内容情報、イベント詳細情報など）の取得指示が行われたかどうかを判断する。画像関連情報の取得指示が行われた場合、ステップＳ１６において、画像関連情報の取得処理を行う。画像関連情報の取得処理については、図１２を用いて後述する。画像関連情報の取得指示が行われなかった場合は、ステップＳ１２において、入力制御部７より、イベントシーン情報の表示指示が行われたかどうかを判断する。
【００４１】
イベントシーン情報の表示指示が行われた場合は、ステップＳ１７において、イベントシーン情報の表示処理を行う。イベントシーン情報の表示処理については、図１９を用いて後述する。イベントシーン情報の表示指示が行われなかった場合、ステップＳ１３において、入力制御部７より、撮影データ取得指示が行われたかどうかを判断する。撮影データの取得指示が行われた場合は、ステップＳ１８において、外部記憶装置５より、撮影データの取得処理を行い、ステップＳ１９において、画像関連情報の取得指示を行う。
【００４２】
ステップＳ１３において、撮影データの取得指示が行われなかった場合は、ステップＳ１４において、入力制御部７により、再生指示が行われたかどうかを判断する。再生指示が行われた場合、ステップＳ２０において、再生処理を行う。再生処理については、図２１を用いて後述する。再生処理の指示が行われなかった場合、ステップＳ１５において、入力制御部７より、終了指示が行われたかどうかを判断する。終了指示が行われた場合は終了処理を行う。終了指示が行われていない場合、ステップＳ１１から処理を繰り返す。
【００４３】
（Ｂ）各個別処理の詳細
以下に、上記した各個別の処理について具体例を用いて詳細に説明する。
【００４４】
１．画像関連情報取得処理
図１２は、図１１における画像関連情報取得処理（ステップＳ１６）の詳細な流れを示すフローチャートである。
【００４５】
まず、イベント内容情報バッファ２２ａにおいて、イベント内容情報が既に設定済みであるかどうかを判断する（ステップＳ２１）。イベント内容情報が既に設定されている場合、ステップＳ２４のイベント詳細情報取得処理に移行する。イベント内容情報がまだ取得されていない場合は、イベント内容情報取得処理を行う（ステップＳ２２）。イベント内容情報取得処理については、図１３において後述する。
【００４６】
ステップＳ２２において、イベント内容情報が取得された場合、次にそのイベント内容情報に対するイベントシーン情報取得処理を行う（ステップＳ２３）。イベントシーン情報取得処理については、図１５において後述する。イベントシーン情報取得処理が行われた後、イベント詳細情報取得処理において、入力されたイベント内容情報に関するイベント詳細情報を取得する（ステップＳ２４）。イベント詳細情報取得処理については、図１６において後述する。
【００４７】
１−１．イベント内容情報取得処理
図１３は、図１２におけるイベント内容情報取得処理（ステップＳ２２）の詳細な流れを示すフローチャートである。
【００４８】
まずイベント内容情報テーブル２１ａにおいて、イベント内容情報を取得する（ステップＳ３１）。取得されたイベント内容情報は、図１４のイベント設定画面に示すように分類レベルごとに表示する（ステップＳ３２）。
【００４９】
図１４に示すイベント設定画面は、表示出力装置１１において表示される。図１４に示すイベント設定画面においては、ツリー構造によりイベント内容情報を表示している。なお、図１４のイベント設定画面に示すようにイベント内容情報をテキスト文により入力し、そのテキスト文を言語解析し、同意とするイベント内容情報を選択表示しても構わない。
【００５０】
次に、操作者により、図１４のイベント設定画面においてイベント内容情報が選択されて決定指示が行われた場合（ステップＳ３３）、イベント内容情報の取得が行われる（ステップＳ３４）。取得されたイベント内容情報は、イベント内容情報バッファ２２ａに記憶される。図１４のイベント設定画面の具体例を用いて説明すると、「お七夜」が選択された場合、イベント内容情報バッファ２２ａには、「お七夜」が格納される。また、「誕生」が選択された場合、イベント内容情報バッファ２２ａには、「出産」「誕生」が格納される。具体例で示したように、選択されたイベント内容情報に親イベント内容情報が存在する場合は、親イベント内容情報も格納される。
【００５１】
１−２．イベントシーン情報取得処理
図１５は、図１２におけるイベントシーン情報取得処理（ステップＳ２３）の詳細な流れを示すフローチャートである。
【００５２】
まずイベント内容情報バッファ２２ａにおいて、イベント内容情報が設定されているかを判断する（ステップＳ６１）。イベント内容情報が存在する場合、ステップＳ６３のイベントシーンリストの取得処理に移行する。イベント内容情報が存在しない場合、前述した図１３のイベント内容情報取得処理を行う（ステップＳ６２）。
【００５３】
続いて、イベントリスト情報テーブル２１ｂより、イベント内容情報に対するイベントシーン情報を取得する（ステップＳ６３）。取得されたイベントシーン情報は、イベントシーンリストバッファ２２ｂに格納される（ステップＳ６４）。図４のイベントリスト情報テーブル２１ｂの具体例を用いて説明すると、図１４のイベント設定画面において「お七夜」が設定された場合、イベントシーン情報「命名」「お赤飯作り」「お祝い会」「だっこ」が取得され、イベントシーンリストバッファ２２ｂに格納される。
【００５４】
１−３．イベント詳細情報取得処理
図１６は、図１２におけるイベント詳細情報取得処理（ステップＳ２４）の詳細な流れを示すフローチャートである。
【００５５】
まずイベント詳細情報バッファ２２ｃよりイベント詳細情報の読み込みを行う（ステップＳ４１）。ステップＳ４１でイベント詳細情報が取得できたかを判断する（ステップＳ４２）。取得できた場合は、ステップＳ４４の再生映像データの判断処理に移行する。取得できなかった場合、イベント詳細入力文章テーブル２１ｃより、イベント内容情報におけるイベント詳細入力文章情報を取得する。
【００５６】
図５に示すイベント詳細入力文章テーブル２１ｃの具体例を用いて説明すると、図１４におけるイベント内容設定画面において、イベント内容が「お七夜」に設定された場合、図５における「お七夜」を参照し「＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞のお七夜が（場所→）＜ｉｎ＞場所１＜￥ｉｎ＞で行われた。参加者は、＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞。」のイベント詳細入力文章情報を取得する。
【００５７】
次に、編集加工する再生撮影データが存在するかを判断する（ステップＳ４４）。存在しない場合は、ステップＳ４３で取得されたイベント詳細入力文章情報を表示する処理に移行する。存在する場合は、再生撮影データをシーンごとに分割する撮影シーン分割処理を行う（ステップＳ４５）。
【００５８】
その後、撮影シーン分割処理により取得されたシーン分割による代表画像と、イベントシーンリストバッファ２２ｂに格納されているイベントシーン情報とを表示する（ステップＳ４６）。この割り付け画面において操作者がイベントシーン情報のリストから割り付けるイベントシーンを選択し、代表画面にドラック＆ドロップして設定する。
【００５９】
次のステップＳ４７においては、代表画像に設定されたイベントシーン情報を取得する。この設定されたイベントシーン情報により、対応するイベント詳細入力文章情報を取得する（ステップＳ４８）。例えば、図１７（ａ）に示すイベントシーン割付画面において、代表画面１に「命名」のイベントシーン情報が割り当てられた場合、イベント詳細入力文章テーブル２１ｃより、「命名」に対するイベント詳細入力文章「命名したのは、＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜／ｂｕｔｔｏｎ＞。＜ｉｎ＞命名意味＜￥ｉｎ＞という意味で命名された。」が取得される。
【００６０】
代表画面において割り付けされたイベントシーン情報に対してイベント詳細入力文章情報が取得される。図６の具体例に示すように、取得されたイベント詳細入力文章情報から重複を取り除いて、全てのイベント詳細入力文章情報を表示する（ステップＳ４９）。このとき、既にイベント詳細情報が入力されていた場合、その設定内容を選択項目として表示する。イベント詳細設定が操作者により行われた場合、設定されたイベント詳細情報を取得する（ステップＳ５０）。取得された情報は、イベント詳細情報バッファ２２ｃに格納される（ステップＳ５１）。
【００６１】
次に、取得されたイベント詳細情報から、被写体を示す情報（被写体情報：名前情報が入力された情報）を取得する（ステップＳ５２）。被写体情報が取得されていた場合、被写体特徴情報の取得処理を行う（ステップＳ５３）。被写体特徴情報の取得処理については、図１８において後述する。
【００６２】
図６に示す具体例を用いて説明する。図６は、イベント内容情報「お七夜」、イベントシーン情報「命名」「お赤飯作り」が設定されたものである。イベントシーン情報より、イベント詳細入力文章情報「＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞のお七夜が（場所→）＜ｉｎ＞場所１＜￥ｉｎ＞で行われた。参加者は、＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞。命名したのは、＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜／ｂｕｔｔｏｎ＞。＜ｉｎ＞命名意味＜￥ｉｎ＞という意味で命名された。＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞が、お赤飯を作ってくれた。」が取得される。
【００６３】
操作者により最終的なイベント詳細設定の画面が図６に示すようなものであった場合、イベント詳細入力文章情報における＜ｉｎ＞名前１＜￥ｉｎ＞より、「武人（長男）」、「武夫（父）」、「まどか（母）」、「清美（祖母）」、「武田（医者）」が被写体情報として抽出される。抽出された被写体情報は被写体情報バッファに格納される。そして、これらの被写体情報に対して被写体特徴情報の取得が行われる。被写体特徴情報の取得は必ずしも全ての被写体情報に対して行う必要はなく、操作者により指定された被写体情報のみ行ってもよい。この場合、被写体特徴情報はデフォルト情報が設定される。
【００６４】
１−３−１．被写体特徴情報の取得
図１８は、図１６における被写体特徴情報取得処理（ステップＳ５３）の詳細な流れを示すフローチャートである。
【００６５】
被写体情報バッファ２２ｇより、被写体特徴情報を抽出する被写体情報が存在するかどうかを判断する（ステップＳ６１）。存在しないと判断された場合は、処理をぬける。ステップＳ６１で存在すると判断された場合には、その被写体情報に対する被写体特徴情報を被写体特徴情報テーブル２１ｅより読み込む（ステップＳ６２）。
【００６６】
読み込みが行われた場合、その被写体情報及び被写体特徴情報を表示し、被写体特徴情報の変更を行うかを判断する。この場合、操作者より入力装置８から被写体情報の変更を行うかどうかが指定される。また、ステップＳ６２において被写体特徴情報が存在していなかった場合は、被写体特徴情報の新規作成を行うかを判断する（ステップＳ６３）。新規作成もしくは変更が行われないと判断された場合は、ステップＳ６１に移行し次の被写体情報の設定を行う。
【００６７】
ステップＳ６３において、変更もしくは新規作成を行うと判断された場合は、被写体情報に対する被写体質問情報を被写体質問リストテーブル２１ｄより取得し被写体質問リスト情報バッファ２２ｆに格納する（ステップＳ６４）。次に、取得した被写体質問情報を表示出力装置１１に出力する（ステップＳ６５）。また、この際に、ステップＳ６２において、被写体特徴情報が取得されていた場合、以前の回答された被写体回答情報の表示も行う（ステップＳ６６）。
【００６８】
そして、操作者より回答が行われた場合は、被写体回答情報の取得を行う（ステップＳ６７）。取得された被写体回答情報より、被写体タイプが抽出され被写体特徴情報が取得される。取得された被写体特徴情報は表示出力装置１１に表示される（ステップＳ６８）。被写体特徴情報及び被写体回答情報は、被写体特徴情報として被写体情報と対応して格納される（ステップＳ６９）。
【００６９】
２．イベントシーン情報表示処理
図１９は、図１１におけるイベントシーン情報表示処理（ステップＳ１７）の動作を示すフローチャートである。
【００７０】
まずイベントシーンリストバッファ２２ｂよりイベントシーン情報を取得し（ステップＳ１３１）、取得したイベントシーン情報を表示出力装置１１に表示する（ステップＳ１３２）。さらに、ステップＳ１３３において、操作者よりイベントシーン情報のリストからイベントシーンが選択されたかを判断する。選択された場合、選択されたイベントシーンを取得する（ステップＳ１３４）。これより、選択されたイベントシーンは末尾に表示されるようにイベントシーン情報を並び替える（ステップＳ１３５）。
【００７１】
ステップＳ１３３において、イベントシーンが選択されなかった場合、終了かを判断する（ステップＳ１３６）。終了であった場合は、イベントシーン情報をイベントシーンリストバッファ２２ｂに保存し終了する（ステップＳ１３７）。終了でなかった場合は、ステップＳ１３２に戻る。
【００７２】
図２０を用いて具体例を説明する。図２０は、「夏祭り」のイベントシーン情報が出力装置に表示されている状態を示す。操作者より入力装置８からイベントシーン情報の表示指示が発生すると、イベントシーンリストバッファ２２ｂより「夏祭り」のイベントシーン情報「お神輿」「金魚すくい」「盆踊り」等が取得されて表示出力装置１１にリスト表示される。そして、操作者がイベントシーン「金魚すくい」を選択し、イベントシーン情報表示の終了指示が行われた場合、イベントシーン情報は「お神輿」「盆踊り」「金魚すくい」の順番でイベントシーンリストバッファ２２ｂに格納される。次にイベントシーン情報表示の指示が行われた場合、「お神輿」「盆踊り」「金魚すくい」の順番に表示される。
【００７３】
３．再生処理
図２１は、図１１における再生処理（ステップＳ２０）の詳細な流れを示すフローチャートである。
【００７４】
視点リスト情報テーブル２１ｇより、設定されているイベント内容情報に対する視点リスト情報を取得し（ステップＳ７１）、取得した視点リスト情報を表示出力装置１１に表示する（ステップＳ７２）。表示した視点リスト情報から操作者が指定した視点情報の取得を行う（ステップＳ７３）。続いて、再生スクリプトテーブル２１ｆより、イベント内容情報及びイベントシーン情報に対応した再生スクリプトの取得を行い（ステップＳ７４）、取得した再生スクリプトより映像の再生処理を行う（ステップＳ７５）。映像の再生処理について、図２３を用いて後述する。
【００７５】
本実施形態の視点リスト情報テーブル２１ｇの一例を図８に挙げる。イベント内容情報「運動会」−「徒競争」の場合、視点リスト情報は、「１位走者」「１位走者母」「１位走者父」「１最下位走者」「最下位走者母」などが取得され、これらの視点情報と、その他の視点として「標準」がリスト表示される。そして、操作者において「１位走者」の視点情報が取得された場合、ステップＳ７５の映像の再生処理は視点情報「１位走者」により再生される。例えば、イベント内容情報「徒競争」でイベントシーン情報「ゴールシーン」の場合、図２２に示すような再生スクリプトにより視点ごとに映像データが再生される。
【００７６】
視点情報が「１位走者母」で１位の走者が１０歳の男の子「武人」の場合、「１位走者のゴールシーン」が再生され、「武人くん、とってもよくがんばったね！１位、おめでとう！！！」というスーパインポーズが挿入される。このスーパーインポーズの書体は、視点情報「１位走者の母」の被写体特徴情報により書体名が取得されて設定される。また、視点情報が「最下位走者母」で最下位の走者が１０歳の女の子「武子」の場合、「最下位走者のゴールシーン」が再生され、「武子ちゃん、残念だったね。今度はがんばろう！！」というスーパインポーズが挿入される。
【００７７】
以下、上記再生処理における各個別の処理の詳細について説明する。
【００７８】
３−１．映像の再生処理
図２３は、図２１における映像の再生処理（ステップＳ７５）の詳細な流れを示すフローチャートである。
【００７９】
まずステップＳ８１において、再生スクリプトで書体設定処理が指示されたと判断された場合、書体設定処理に移行する（ステップＳ８２）。書体設定処理については、図２４（ａ）を用いて後述する。書体設定が指示されていない場合、文字列作成処理が指示されたかを判断する（ステップＳ８３）。指示されている場合、文字列作成処理を行う（ステップＳ８４）。文字列作成処理については、図２４（ｂ）を用いて後述する。ステップＳ８３において、文字列作成が指示されていない場合、音楽設定処理が指示されているかを判断する（ステップＳ８５）。指示されている場合、音楽設定処理を行う（ステップＳ８６）。音楽設定処理については、図２５を用いて後述する。音楽設定処理が指示されていないと判断された場合、飾り絵の設定指示が行われたかを判断する（ステップＳ８７）。飾り絵設定指示が行われた場合、飾り絵設定処理を行う（ステップＳ８８）。飾り絵設定処理については、図２６を用いて後述する。飾り絵設定処理指示が行われていない場合、画像もしくは音楽映像を再生する（ステップＳ８９）。
【００８０】
３−１−１．書体設定処理
図２４（ａ）は、図２３における書体設定処理（ステップＳ８２）の詳細な流れを示すフローチャートである。
【００８１】
まずステップＳ９１において、被写体特徴情報バッファ２２ｅより、設定する被写体情報に対する被写体特徴情報の取得を行う。続いて書体情報テーブル２１ｈより、取得された被写体特徴情報に対する書体名情報の取得を行う（ステップＳ９２）。さらに、スーパインポーズやテロップなどで表示される文字列の書体名を設定する（ステップＳ９３）。
【００８２】
３−１−２．作成文字列処理
図２４（ｂ）は、図２３における文字列作成処理（ステップＳ８４）の詳細な流れを示すフローチャートである。
【００８３】
まずステップＳ１０１において、作成する文字列の取得を行い、作成文字列に対する被写体情報の被写体特徴情報を取得する（ステップＳ１０２）。さらに、作成文字列に対する変換式を図１０の変換式情報テーブル２１ｋより取得し（ステップＳ１０３）、被写体特徴情報及び変換式より作成文字列を変更する（ステップＳ１０４）。
【００８４】
具体例を挙げて、書体設定処理及び作成文字列処理について説明する。例えば、イベント内容情報「徒競争」において、イベントシーン「スタート」の映像データに対し、走ることの意気込みを示すスーパインポーズを入れることを想定する。この場合、再生スクリプトにおいて、「行く」の作成文字列が設定される。次に、走ることの意気込みを示すスーパインポーズを入れる映像データの被写体情報及びその被写体特徴情報を取得する。例えば、「徒競争」のイベントシーン情報「スタート」が割り付けられたイベント詳細入力文章情報「＜ｂ＞＜ｉｎ＞続柄１＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞は＜ｉｎ＞気持ち１＜￥ｉｎ＞感じでスタート。＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞」において、「被写体情報（続柄１＝長男、名前１＝武人）、気持ち１＝緊張した」というイベント詳細情報が取得され、この被写体情報（武人）の被写体特徴情報が「性別情報＝男性、年齢情報＝１０歳、既婚情報＝独身、出身情報、出身情報＝関東出身、血液型情報＝Ａ型、被写体タイプ＝ロマンチスト、根暗ら」であり、そして、イベント内容情報及びイベントシーン情報より、次のような再生スクリプトが取得された場合におけるスーパインポーズの表示処理を述べる。
【００８５】
スクリプト１：「スーパインポーズ書体名＝Ｃａｌｌ  書体設定処理（被写体特徴情報）」
スクリプト２：「スーパインポーズ作成文字列＝Ｃａｌｌ  作成文字列処理（作成文字列＝行く、被写体特徴情報）」
スクリプト３：「ビデオソース＝ビデオ１」
まず、スクリプト１において、スーパインポーズを行う文字列の書体名を設定する。スーパインポーズを行う被写体情報「（続柄１＝長男、名前１＝武人）」に対する被写体特徴情報「根暗ら」から書体名「波体書体」が取得される。これは、書体情報テーブル２１ｈにおいて、被写体特徴情報「根暗ら」に対し書体名「波体書体」が対応付けされていることとする。取得された書体名「波体書体」がスーパインポーズ書体名として設定される。そして、スクリプト２において、「行く」に対してスーパインポーズの文字列を作成する。「行く」に対する変換式が図２４（ｃ）に示すようになっているとする。
【００８６】
上記の変換式及び被写体特徴情報「男性、ロマンチスト」から、作成される文「行く」に対し、「男性」であるため、「ぞ」が追加される。そして「ロマンチスト」の被写体特徴情報をもつため、「神様、お願い〜。」が追加される。そのため、作成される文章は、「行くぞ。神様、お願い〜。」となる。
【００８７】
３−１−３．音楽設定処理
図２５は、図２３における音楽設定処理（ステップＳ８６）の詳細な流れを示すフローチャートである。
【００８８】
まず設定するイベント内容情報、イベントシーン情報及びイベント詳細情報などより音楽情報取得検索条件を設定する（ステップＳ１１１）。続く音楽情報テーブル２１ｉより、ステップＳ１１１の検索条件から音楽情報を取得し（ステップＳ１１２）、取得された音楽情報を設定する（ステップＳ１１３）。
【００８９】
具体例を挙げて、音楽設定処理について説明する。例えば、イベント内容情報「結婚式」、イベントシーン情報「新郎・新婦入場」、イベント詳細情報として、「新婦服装＝ウェディングドレス」であった場合における音楽設定処理を述べる。再生スクリプトには、次のように記載されている。
【００９０】
「ＢＧＭ＝Ｃａｌｌ  音楽設定処理（イベント内容情報，イベントシーン情報，イベント詳細情報）」
これより、イベント内容情報「結婚式」−イベントシーン情報「新郎・新婦入場」及びイベント詳細情報「洋式」より、音楽情報テーブル２１ｉから、条件情報が「イベント内容情報（「結婚式」）イベントシーン情報（「新郎・新婦入場」）、イベント詳細情報（「服装」＝「ウェディングドレス」）」を得る。こうして、音楽情報テーブル２１ｉを参照し、音楽情報「結婚行進曲」がＢＧＭとして設定される。
【００９１】
３−１−４．飾り絵設定処理
図２６は、図２３における飾り絵設定処理（ステップＳ８８）の詳細な流れを示すフローチャートである。
【００９２】
まずステップＳ１２１において、被写体特徴情報の取得を行うと共に、飾り絵を挿入する映像データが含まれるイベントシーン情報の取得を行う（ステップＳ１２２）。続くステップＳ１２３では、挿入する飾り絵の修飾データタイプを取得する。修飾データタイプとは、予め容易された画像データ（特殊ポーズで予め撮影されている画像データ）に対し、その特殊ポーズに合わせて飾り絵が合成された修飾画像を挿入する場合と、撮影した画像データにおいて修飾絵を合成する場合（合成タイプと称す）とに分かれる。
【００９３】
次のステップＳ１２４において、飾り絵設定における使用する修飾データタイプを判断する。そして、合成タイプの修飾画像を挿入する場合、続くステップＳ１２５において、修飾絵を挿入する被写体情報の位置を取得し、それ以外の領域において修飾絵を挿入し、さらに、ステップＳ１２６において、挿入する修飾絵の情報を取得する。これは、イベントシーン情報、被写体特徴情報、及びイベント詳細情報から取得する。そして、ステップＳ１２７において、修飾絵と画像データの合成を行う。
【００９４】
ステップＳ１２４において、合成タイプで修飾画像を挿入すると判断されなかった場合、ステップＳ１２９において、修飾画像の検索を行う。ステップＳ１３０において、修飾画像が検索されなかった場合は、挿入する画像データの取得を行い（ステップＳ１３１）、ステップＳ１２５に移行して合成タイプの処理を行う。ステップＳ１３０において修飾画像が検索された場合、修飾画像データの再生を行う（ステップＳ１３２）。
【００９５】
以上のように本実施形態によれば、嬉しさや悲しさ等の感情を表す表現を映像データに挿入する場合において、撮影される人が指定入力し、これに対応するテロップや挿絵を挿入しなくとも、イベント内容情報及びイベント詳細情報により、自動的に挿入することが可能となる。
【００９６】
さらに、映像データがスクリプトで再生される場合、同じようなイベント内容の映像データを編集すると、従来では被写体等が異なるのみで似たような作品が作成されていたが、本実施形態では、撮影時に起きた出来事や撮影された人物などにより、テロップや挿絵等の変更を行ったり、撮影内容に関わる視点の変更を行ったりすることができ、そのため、１つの撮影データによって、より楽しめる作品をバリエーション豊富に作成することが可能になる。
【００９７】
また、本実施形態のように、撮影された被写体の特徴情報を質疑応答により求め被写体タイプを表示することにより性格判断を行うという意識の下で特徴情報の入力が行えるため、被写体特徴情報などの付帯情報の付与における煩わしさを解消することができる。
【００９８】
〔第１実施形態の変形例〕
（１）本実施形態におけるイベント設定画面では、イベント内容情報をツリー構造により表示したが、本実施形態の表示方法に限らず、分類ごとに表示せずに全ての項目を一覧表示しても構わない。また、五十音順に表示するなどしても構わない。また、図２７に示すように分類レベルごとにスクロールによる一覧表示を行い、選択された分類レベルにおいて詳細なイベント内容情報が存在する場合、さらに分類レベルごとに一覧表示される。このようなスクロールによる表示を行うことにより電子スチルカメラ等の狭い表示画面に適した表示方法で出力することも可能である。
【００９９】
（２）  本実施形態におけるイベント詳細設定画面では、イベント詳細入力文章情報の取得を行い、予め用意されている入力文章を作成していくことにより、イベント詳細情報の取得を行っている。イベント詳細情報の取得は、この埋め込み方式に限らず、本実施形態で述べた被写体特徴情報の取得処理のように質疑応答方式により取得することも可能である。例えば、図２８（ａ）にイベント詳細情報テーブルの一例を示す。このイベント詳細情報テーブルは、イベント詳細質問情報を示す任意の連番と、イベント内容情報と、繰り返し取得する処理かどうかを示す判断フラグと、入力されるイベント詳細情報の属性を示す属性情報と、イベント詳細情報を取得するための質問情報とから成る。このイベント詳細情報テーブルより、設定されたイベント内容情報に対するイベント詳細質問情報を取得し、図２８（ｂ）に示すように質疑応答を繰り返し、イベント詳細情報の取得を行う。
【０１００】
（３）本実施形態におけるイベントシーン割付画面では、割り付けるイベントシーンの代表画面をいくつか表示するようにしたが、これに限らず、電子スチルカメラ等の狭い表示装置においてイベントシーンの割り付けを行う場合、図１７（ｂ）に示すイベントシーン割付画面において実現する。このイベントシーン割付画面においては、１つの代表画面が表示されており、割り当てるイベントシーンがスクロール形式で表示されるようになっている。
【０１０１】
（４）  本実施形態におけるイベントリスト情報テーブル２１ｂのイベントシーン情報は、撮影時におけるイベントシーン情報表示処理において表示されるイベントシーン情報と、イベントシーン割付処理において表示されるイベントシーン情報とが同一であるとしたが、これに限らずそれぞれの処理における表示判断フラグ及びその判別処理を加えることにより、イベントシーン情報の表示内容を変更することが可能である。
【０１０２】
（５）  本実施形態における被写体特徴情報の取得は、被写体特徴情報を判別するための質問情報を表示し、操作者からの回答情報により、被写体タイプを取得していたが、これに限らず、被写体タイプとその被写体タイプを表す説明情報などを表示し、操作者に直に被写体タイプを選択させることも可能である。
【０１０３】
［第２実施形態］
第２実施形態では、イベント詳細情報や被写体特徴情報などの設定を、映像再生時の度に行う手間を省くようにしたものである。
【０１０４】
本実施形態のハード構成は、第１実施形態の図１に示した構成と同様である。
【０１０５】
〔第２実施形態のデータ構成〕
図２９は、本発明の第２実施形態におけるデータ構成の一例を示すブロック図であり、図２と共通の要素には同一の符合を付し、その説明を省略する。
【０１０６】
本実施形態のデータ構成は、第１実施形態の図２に示したデータ構成において、テーブル領域２１に、イベント詳細情報テーブル２１ｌ、個人情報テーブル２１ｍ、被写体属性情報テーブル２１ｎ、被写体名情報テーブル２１ｏ、及び事象情報テーブル２１ｐを加えた構成となっている。
【０１０７】
図３０（ａ）は、本実施形態における被写体属性情報テーブル２１ｎの一例を示す図である。
【０１０８】
被写体属性情報テーブル２１ｎは、被写体属性情報を示す任意の連番と、被写体の属性を示す属性分類情報と、その属性分類に当て嵌まる属性名情報とから成る。属性名情報は、家族や親族を表す情報と、友人やイベント関連者を表す情報から成る。属性名情報には、属性分類情報を指定することが可能である。被写体属性リストを作成する場合、これらの属性分類は属する属性名情報を展開して表示される。また、その他の入力も行えるようにする。
【０１０９】
図３０（ｂ）は、本実施形態における被写体名情報テーブル２１ｏの一例を示す図である。
【０１１０】
被写体名情報テーブル２１ｏは、被写体名情報を示す任意の連番と、被写体属性分類及び被写体属性名を示す被写体名分類情報と、被写体の名前を示す被写体名情報とから成る。
【０１１１】
図３０（ｃ）は、本実施形態における事象情報テーブル２１ｐの一例を示す図である。
【０１１２】
事象情報テーブル２１ｐは、事象情報を示す任意の連番と、事象の内容を示す事象分類情報と、その事象分類情報に当て嵌まる事象情報とから成る。
【０１１３】
〔第２実施形態の画像記録再生方法〕
上記述べたような情報テーブルを使用して本実施形態における画像記録再生方法を以下に述べる。
【０１１４】
本実施形態の全体的な処理の流れは、上記第１実施形態の図１１で説明したものと同様であり、ただ、個別的な処理において、画像関連情報取得処理のみが第１実施形態と異なる。以下、第２実施形態の画像関連情報取得処理について詳細に説明する。
【０１１５】
１．画像関連情報取得処理
図３１は、第２実施形態における画像関連情報取得処理（図１１のステップＳ１６）の詳細な流れを示すフローチャートである。
【０１１６】
まずイベント内容情報バッファ２２ａにおいて、イベント内容情報が既に設定済みであるかどうかを判断する（ステップＳ２０１）。ステップＳ２０１において、イベント内容情報が設定されていない場合、ステップＳ２０４に移行する。
【０１１７】
ステップＳ２０１において、イベント内容情報が既に設定されている場合、ステップＳ２０２において、イベント内容情報を変更するかの問い合わせを表示出力装置１１において表示し操作者からの指示により変更を行うかを判断する。ステップＳ２０２において変更指示が行われた場合、イベントシーン情報バッファ２２ｂの初期化を行う（ステップＳ２０３）。そして、ステップＳ２０４に移行する。
【０１１８】
ステップＳ２０２において、変更指示が行われなかった場合、ステップＳ２０６のイベント詳細情報取得処理に移行する。ステップＳ２０１において、イベント内容情報がまだ取得されていない場合、イベント内容情報取得処理を行う（ステップＳ２０４）。イベント内容情報取得処理については、前出の図１２のステップＳ２２と同様の処理を行う。
【０１１９】
ステップＳ２０４において、イベント内容情報が取得された場合、次にそのイベント内容情報に対するイベントシーン情報取得処理を行う（ステップＳ２０５）。イベントシーン情報取得処理については、図３２において後述する。イベントシーン情報取得処理が行われた後、イベント詳細情報取得処理において、入力されたイベント内容情報に関するイベント詳細情報を取得する（ステップＳ２０６）。イベント詳細情報取得処理については、図３３を用いて後述する。
【０１２０】
１−１．イベントシーン情報取得処理
図３２は、図３１におけるイベントシーン情報取得処理（ステップＳ２０５）の詳細な流れを示すフローチャートである。
【０１２１】
まずイベントシーンリストバッファ２２ｂにおいて、イベントシーン情報が保存されているかを判断する（ステップＳ６０１）。保存されている場合は、何もしないで終了する。次のステップＳ６０２では、イベント内容情報バッファ２２ａにおいて、イベント内容情報が設定されているかを判断する。イベント内容情報が存在する場合、ステップＳ６０４のイベントシーンリストの取得処理に移行する。イベント内容情報が存在しない場合は、前述した図１２のステップＳ２２のイベント内容情報取得処理を行う（ステップＳ６０３）。
【０１２２】
ステップＳ６０４では、イベントリスト情報テーブル２１ｂより、イベント内容情報に対するイベントシーン情報を取得し、取得したイベントシーン情報は、イベントシーンリストバッファ２２ｂに格納される（ステップＳ６０５）。イベントリスト情報テーブル２１ｂの具体例（図４）を用いて説明すると、図１４のイベント設定画面において、「お七夜」が設定された場合、イベントシーン情報「命名」「お赤飯作り」「お祝い会」「だっこ」が取得され、イベントシーンリストバッファ２２ｂに格納される。
【０１２３】
１−２．イベント詳細情報取得処理
図３３は、図３１におけるイベント詳細情報取得処理（ステップＳ２０６）の詳細な流れを示すフローチャートである。
【０１２４】
まずイベント詳細情報バッファ２２ｃよりイベント詳細情報の読み込みを行う（ステップＳ４０１）。ステップＳ４０１でイベント詳細情報が取得できたかを判断する（ステップＳ４０２）。取得できた場合は、ステップＳ４１０のイベント詳細情報変更判断処理に移行する。
【０１２５】
ステップＳ４０２において、イベント詳細情報が取得できなかった場合、再生撮影データが存在するかを判断する（ステップＳ４０３）。存在しない場合、ステップＳ４０７のイベント詳細情報の設定処理に移行する。ステップＳ４０３において、再生撮影データが存在すると判断された場合、再生撮影データをシーンごとに分割する撮影シーンの分割処理を行う（ステップＳ４０４）。この処理は、公知のシーンチェンジ検出技術などにより行われる。
【０１２６】
次に、ステップＳ４０４で取得されたシーン分割による代表画像と、イベントシーンリストバッファ２２ｂより取得されるイベントシーン情報において、撮影シーン割付処理画面を表示する（ステップＳ４０５）。例えば、前出の図１７に示すようなイベントシーン割付画面において、撮影シーン分割処理により取得されたシーン分割による代表画像と、イベントシーンリストバッファ２２ｂに格納されているイベントシーン情報とを表示する。この割付画面において、操作者がイベントシーン情報のリストから割り付けるイベントシーンを選択し代表画面にドラック＆ドロップして設定する。
【０１２７】
続くステップＳ４０６においては、代表画像に設定されたイベントシーン情報を取得し、続くステップＳ４０７では、そのイベントシーン情報及びイベント内容情報により、対応するイベント詳細情報の設定処理を行い、さらにステップＳ４０８では、取得されたイベント詳細情報より、被写体情報が存在するかを判断する。被写体情報が存在すると判断された場合、被写体特徴情報の取得を行う（ステップＳ４０９）。被写体特徴情報の取得は、前出の図１６のステップＳ５３と同様の処理を行う。
【０１２８】
ステップＳ４０２において、イベント詳細情報が存在すると判断された場合、そのイベント詳細情報を変更するかどうかを判断する（ステップＳ４１０）。変更すると判断された場合、ステップＳ４０７において、格納されているイベント詳細情報に基づきイベント詳細情報の変更設定処理を行う。ステップＳ４１０において、イベント詳細情報が変更されないと判断された場合、被写体特徴情報を変更するかどうかを判断する（ステップＳ４１１）。変更されると判断された場合、ステップＳ４０８に移行する。変更されないと判断された場合、何も行わずに終了する。
【０１２９】
上記したように、第１回目の再生時にはステップＳ４０１においてイベント詳細情報バッファ２２ｃにイベント詳細情報が格納されていないため、イベント内容情報やイベントシーン情報からイベント詳細情報を取得する処理をステップＳ４０３以降の処理で行う。第２回目以降及び第１回目においてイベント詳細情報が取得できなかった場合、且つ操作者からのイベント詳細情報の変更もしくは被写体特徴情報の変更がなければ、第１回目の再生時の情報により映像再生が行われる。
【０１３０】
１−２−１．イベント詳細情報設定処理
図３４は、図３３におけるイベント詳細情報設定処理（ステップＳ４０７）の詳細な流れを示すフローチャートである。
【０１３１】
まずイベント詳細入力文章テーブル２１ｃを用いて、イベント内容情報及びイベントシーン情報からイベント詳細入力文章情報の取得を行う（ステップＳ２９１）。図３３におけるステップＳ４１０において、既に取得されているイベント詳細情報の変更を行うと指示されたかどうかを判断する（ステップＳ２９２）。
【０１３２】
ステップＳ２９２において、変更を行うと指示されていたと判断した場合は、ステップＳ３００のイベント詳細入力情報表示処理を行う。ステップＳ２９２において、変更を行うと指示されていなかったと判断した場合、ステップＳ２９１で取得されたイベント詳細入力文章情報において、被写体の続柄など被写体名の属性を示す情報（被写体属性情報と称す）を入力する部分が存在するかを判断する（ステップＳ２９３）。
【０１３３】
ステップＳ２９３において、被写体属性情報を入力する部分がないと判断された場合、ステップＳ２９５に移行する。ステップＳ２９３において、被写体属性情報を入力する部分が存在すると判断された場合は、ステップＳ２９４において、被写体属性リスト作成処理を行う。続くステップＳ２９５では、イベント詳細入力文章情報に被写体名情報を入力する部分が存在するかを判断する。
【０１３４】
ステップＳ２９５において、被写体名情報を入力する部分が存在しないと判断された場合は、ステップＳ２９８において、事象情報を入力する部分が存在するかを判断する処理に移行する。ステップＳ２９５において、被写体名情報を入力する部分が存在すると判断された場合は、ステップＳ２９６において、被写体名情報に関連する被写体属性情報がある場合に、その関連する被写体属性情報を取得する。その後、取得した関連被写体属性情報及びイベント詳細入力文章情報に指定されている取得する被写体名分類情報より被写体名リストを取得し、被写体名リスト作成を行う（ステップＳ２９７）。
【０１３５】
次に、イベント詳細入力文章情報に事象情報を入力する部分が存在するかを判断する処理に移行する（ステップＳ２９８）。ステップＳ２９８において、事象情報を入力する部分が存在しないと判断された場合、ステップＳ３００のイベント詳細入力情報表示処理に移行する。ステップＳ２９８において、事象情報を入力する部分が存在すると判断された場合、事象情報リストを作成する（ステップＳ２９９）。ステップＳ３００では、上記の処理により完成されたイベント詳細入力文章情報より、イベント詳細入力情報の表示を行い、ステップＳ３０１では、イベント詳細入力が行われたかを判断する。
【０１３６】
ステップＳ３０１において、イベント詳細入力でないと判断された場合、ステップＳ３０４において設定終了が入力されたかを判断する処理に移行し、ステップＳ３０１において、イベント詳細入力が行われたと判断された場合、ステップＳ３０２において、入力されたイベント詳細情報の取得を行い、それに関連するイベント詳細入力情報の作成を行う。その後、再度作成されたイベント詳細入力情報の表示を行い（ステップＳ３０３）、ステップＳ３０１に移行する。
【０１３７】
ステップＳ３０４において、イベント詳細情報の設定の終了が指示された場合には、入力されたイベント詳細情報を保存し（ステップＳ３０５）、イベント詳細情報より個人情報生成を行い、これを保存して終了する（ステップＳ３０６）。
【０１３８】
次に、図３４のイベント詳細情報取得処理の流れについて、具体例を示して説明する。
【０１３９】
撮影した映像データに対する、第１回目の再生時と第２回目の再生時の順に、イベント内容情報「お七夜」及びイベントシーン情報「命名」が設定された場合を例にして説明する。
【０１４０】
まず、ステップＳ２９１において、イベント詳細入力文章テーブル２１ｃよりイベント内容情報の「お七夜」及びイベントシーン情報の「命名」に対するイベント詳細入力文章情報「＜ｉｎ＞続柄８＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞のお七夜が＜ｉｎ＞場所１＜￥ｉｎ＞で行われた。参加者は、＜ｂ＞＜ｉｎ＞続柄９＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞。」「命名したのは、＜ｂ＞＜ｉｎ＞続柄９＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜／ｂｕｔｔｏｎ＞。＜ｉｎ＞命名意昧＜￥ｉｎ＞という意昧で命名された。」を取得する。
【０１４１】
第１回目の再生時には、ステップＳ２９２において、変更指示と判断されないためステップＳ２９３に移行する。ステップＳ２９３では、ステップＳ２９１で取得したイベント詳細入力文章情報において、被写体属性情報が存在するかを判断する。この場合、属性分類名「続柄８」「続柄９」が存在しているため（図３５（ａ）に示す下線部分に相当する部分）、被写体属性情報が存在していると判断される。
【０１４２】
続くステップＳ２９４においては、被写体属性リストを作成する。すなわち、図３０（ａ）の被写体属性情報テーブル２１ｎから、属性分類「続柄８」の属性名「長男、次男、三男、四男、長女、次女、三女・四女」、及び属性分類「続柄９」の属性名「父、母、父方祖母、母方祖母、父方祖父、母方祖父、続柄８、属性１」を取得して、リストを作成する。属性分類「続柄８」にリストされる属性名は、「長男、次男、三男、四男、長女、次女、三女、四女、その他」、属性分類「続柄９」にリストされる属性名は、「父、母、父方祖母、母方祖母、父方祖父、母方祖父、長男、次男、三男、四男、長女、次女、三女・四女、医者、看護婦、助産婦、その他」となる。
【０１４３】
次に、ステップＳ２９１で取得したイベント詳細入力文書情報において、社会面情報が存在するかを判断する。この場合、初対面名前が存在しているため（図３５（ｂ）に示す下線部分に相当する部分）、被写体色刷り情報が存在していると判断される。そして、被写体名情報に対する被写体属性情報を取得する（ステップＳ２９６）。
【０１４４】
続くステップ２６７においては、取得した被写体属性情報に対する被写体名を表示するために、被写体名情報テーブル２１ｏから属性名に対する被写体名を取得しリストを作成する。第１回目の再生時においては、イベント詳細情報及び個人情報が取得されていないため、被写体名リスト「名前８」「名前９」は空白となる。
【０１４５】
次に、ステップ２９１で取得したイベント詳細入力情報において、事象情報が存在しているかを判断する。この場合、事象情報「場所８」「命名意味」が存在しているため（図３５（ｃ）の下線部分に相当する部分）、事象情報が存在していると判断される。
【０１４６】
事象情報であるかの判断は、事象情報テーブル２１ｐによる事象分類情報より判断する。図３０（ｃ）の事象情報テーブル２１ｐより、事象分類情報「場所８」の事象情報「自宅，父実家，母実家，病院」及び事象分類情報「命名意味」の事象情報「（空白）」を取得しリストを作成する。事象分類情報「場所８」にリストされる事象は、「自宅，父実家，母実家，病院，その他」、属性分類「命名意味」にリストされる属性名は、「（空白）」となる。上記より取得された情報を基に、ステップＳ３００において、図３６（ａ）に示すようなイベント詳細設定画面が表示される。
【０１４７】
図３６（ａ）に示すイベント詳細設定画面において、１番目のリストボックスには、「続柄８」の被写体属性情報のリストが表示される。「その他」を選択した場合は、操作者が続柄を入力することが可能である。その場合、属性分類情報「続柄８」に追加される。２番目のリストボックスは、被写体名情報を示す名前の入力が行えるようになっている。入力された名前は、属性分類情報と共に被写体名が登録される。３番目のリストボックスでは、「場所８」の事象情報を示すリストボックスが表示される。４番目のリストボックスは、「続柄９」の被写体属性情報のリストが表示される。５番目のリストボックスは、被写体名情報を示す名前の入力が行えるようになっている。６番目のリストボックスは、「命名意味」を示す事象情報のリストボックスが表示される。入力されると事象情報「命名意味」に格納される。
【０１４８】
例えば、図３６（ｂ）に示すようにイベント詳細設定が行われた場合、次のイベント詳細情報が取得される。
【０１４９】
2004266629.tif 000003
そして、これらの情報は、ステップＳ３０５において、イベント詳細情報テーブル２１ｌにイベント内容情報及びイベントシーン情報とともに対応付けされて格納される。また、属性情報及び被写体名情報から個人情報として、この場合、父と子の関係「父（武夫）」「子−長男（武夫）」、母と子の関係「母（清美）」「子−長男（武夫）」、夫婦の関係「夫（武夫）−妻（清美）」などの情報が作成されて個人情報テーブルに格納される。
【０１５０】
次に、第２回目に同じ映像の再生を行った場合について、図３３及び図３４を用いて説明する。
【０１５１】
図３３のステップＳ４０１において、イベント詳細情報テーブル２１ｌより、イベント内容情報「お七夜」と、イベントシーン情報「命名」のイベント詳細情報を読み込む。これにより、第１回目で設定された情報、つまり前記イベント詳細情報１からイベント詳細情報５までの情報が取得される。
【０１５２】
ステップＳ４０２において、イベント詳細情報が存在していると判断されるため、ステップＳ４１０では、イベント詳細情報の変更を行うかを判断する。変更を行わない場合は、ステップＳ４１１において、被写体特徴情報の変更を行うかを判断する。変更を行わない場合はそのまま終了し、ステップＳ４０１で取得した情報を基に映像再生がなされる。ステップＳ４１０において、イベント詳細情報の変更が指示された場合、図３４のイベント詳細情報の設定処理を行う。
【０１５３】
ステップＳ２９１において、イベント内容情報「お七夜」と、イベントシーン情報「命名」のイベント詳細入力文章情報である「＜ｉｎ＞続柄８＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞のお七夜が＜ｉｎ＞場所１＜￥ｉｎ＞で行われた。参加者は、＜ｂ＞＜ｉｎ＞続柄９＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜￥ｂｕｔｔｏｎ＞。」「命名したのは、＜ｂ＞＜ｉｎ＞続柄９＜￥ｉｎ＞＜ｉｎ＞名前１＜￥ｉｎ＞＜￥ｂ＞＜ｂｕｔｔｏｎ＞参加者＜／ｂｕｔｔｏｎ＞。＜ｉｎ＞命名意味＜￥ｉｎ＞という意味で命名された。」とを取得する。
【０１５４】
ステップＳ２９２において、イベント詳細情報の変更指示が入力されたと判断された場合、ステップＳ３００で、ステップＳ４０１で取得されたイベント詳細情報を基にイベント詳細設定画面を表示する。具体的には、図３６（ｂ）の設定画面が表示される。このとき、被写体属性情報に対する被写体名情報は個人情報テーブル２１ｍより取得され、被写体名リストに表示される。例えば、イベント詳細情報３において第１回目の再生時には、被写体属性情報に対する被写体名情報は空白であったが、被写体属性情報「父，母，父方祖母，母方祖母，父方祖父，母方祖父，長男，次男，三男，四男，長女，次女，三女，四女，医者，看護婦，助産婦，その他」に対する被写体名情報は、「武夫，まどか，清美，空白，空白，空白，武人，空白，空白，空白，空白，空白，空白，空白，武田，空白，空白，その他」となる。
【０１５５】
以降、操作者より設定変更が行われた場合は第１回目の再生時における処理と同様に行われる。また、設定画面において、イベント詳細情報の入力変更が行われた場合、その入力情報を基にイベント詳細設定画面の情報が変更される（ステップＳ３０２、ステップＳ３０３）。例えば、イベント詳細情報４：命名した人「（父）武夫」の被写体属性情報「（父）」が「（祖母）」に変更された場合、被写体名情報「武夫」が「清美」に自動的に変更される。
【０１５６】
以上ように第２実施形態によれば、再生時の設定した内容を保持しておくことにより、イベント詳細情報や被写体特徴情報などの設定を、映像再生時の度に行う必要がないため、より簡単に感情表現を効果的に挿入した鑑賞化の高い作品を作成することが可能になる。
【０１５７】
なお、第２実施形態における個人情報の生成処理は、イベント詳細情報の設定内容を参照することにより作成していたが、これに限らず、予め家族構成や友人情報及びスケジュールなどの情報を取得処理により生成することも可能である。予めこのようにして個人情報を取得することにより、第１回目のイベント詳細設定画面においても個人情報を基に被写体名情報などを設定しておくことができるため、イベント詳細情報設定画面の入力を削減することに可能となる。
【０１５８】
上述した図１１、図１２、図１３、図１５、図１６、図１８、図１９、図２１、図２３、図２４（ａ），（ｂ）、図２５、図２６、図３１、図３２、図３３、及び図３４のフローチャートに従ったプログラムを例えばプログラムメモリ３に格納し動作することにより、上述の制御方法を実現させることが可能となる。
【０１５９】
本発明は、上述した実施形態の装置に限定されず、複数の機器から構成されるシステムに適用しても、１つの機器から成る装置に適用してもよい。前述した実施形態の機能を実現するソフトウェアのプログラムコードを記憶した記憶媒体をシステムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、完成されることは言うまでもない。
【０１６０】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。プログラムコードを供給するための記憶媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭを用いることができる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけではなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０１６１】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、次のプログラムコードの指示に基づき、その拡張機能を拡張ボードや拡張ユニットに備わるＣＰＵなどが処理を行って実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０１６２】
［実施態様］
本発明の実施態様の例を以下に列挙する。
【０１６３】
＜実施態様１＞
所定の撮影画像から成るイベントの内容を表したイベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得手段と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得手段と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾する画像修飾手段とを備えたことを特徴とする画像処理装置。
【０１６４】
＜実施態様２＞
前記撮影画像を所定の撮影場面ごとに分割するシーン分割手段と、前記イベント内容情報に関連付けられた撮影場面を表すイベントシーン情報を取得するイベントシーン情報取得手段と、前記シーン分割手段により分割された撮影場面に対して、前記イベントシーン情報を割り当てるイベントシーン割り当て手段とを備え、前記イベント詳細情報取得手段は、前記イベントシーン割り当て手段の割り当て結果に基づいて、前記イベント詳細情報を取得することを特徴とする実施態様１記載の画像処理装置。
【０１６５】
＜実施態様３＞
前記画像修飾手段は、前記イベントシーン情報、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾することを特徴とする実施態様２記載の画像処理装置。
【０１６６】
＜実施態様４＞
前記画像修飾手段は、撮影画像データを修飾するための文字列データの書体を変更する手段を有することを特徴とする実施態様１乃至３記載の画像処理装置。
【０１６７】
＜実施態様５＞
前記画像修飾手段は、撮影画像データを修飾するための文字列データを変更する手段を有することを特徴とする実施態様１乃至３記載の画像処理装置。
【０１６８】
＜実施態様６＞
前記画像修飾手段は、撮影画像データを修飾するための音楽データを変更する手段を有することを特徴とする実施態様１乃至３記載の画像処理装置。
【０１６９】
＜実施態様７＞
前記画像修飾手段は、撮影画像データを修飾するための飾り絵データを変更する手段を有することを特徴とする実施態様１乃至３記載の画像処理装置。
【０１７０】
＜実施態様８＞
前記画像修飾手段は、撮影画像に関わった被写体情報を取得する被写体取得手段と、前記被写体取得手段において取得された被写体情報を、画像再生する視点情報として設定しその視点情報ごとに画像の再生を行う視点再生手段とを有することを特徴とする実施態様１乃至７記載の画像処理装置。
【０１７１】
＜実施態様９＞
前記イベント詳細情報取得手段は、撮影画面を説明する入力文章を予め設け、この入力文章を外部入力により埋め込み作成することで前記イベント詳細情報を取得することを特徴とする実施態様１乃至８記載の画像処理装置。
【０１７２】
＜実施態様１０＞
前記イベント詳細情報取得手段は、外部入力による質疑応答形式で前記イベント詳細情報を取得することを特徴とする実施態様１乃至８記載の画像処理装置。
【０１７３】
＜実施態様１１＞
前記被写体特徴情報取得手段は、前記被写体特徴情報を取得するための質疑応答を行う質疑応答手段と、前記質疑応答手段より取得された回答情報から被写体のタイプを判別する被写体タイプ判別手段とを有することを特徴とする実施態様１乃至１０記載の画像処理装置。
【０１７４】
＜実施態様１２＞
所定の撮影画像から成るイベントの内容を表したイベント内容情報を取得するイベント内容情報取得手段と、前記イベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得手段と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得手段と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾し再生する画像再生手段と、
前記取得したイベント内容情報及びイベント詳細情報を再成詳細情報として保持する再成詳細情報保持手段と、
少なくとも前記イベント内容情報及び前記イベント詳細情報を再生詳細情報として保持する再生詳細情報保持手段と、
前記取得したイベント内容情報及びイベント詳細情報を再成詳細情報として保持する再成詳細情報保持手段と、前記イベント詳細情報及び前記被写体特徴情報に基づいて被写体個人情報を生成し保持する個人情報取得手段とを備えたことを特徴とする画像再生装置。
【０１７５】
＜実施態様１３＞
前記再生詳細情報が保持されているか否かを判断する第１の判断手段と、前記再生詳細情報が保持されていない場合に、前記イベント内容情報取得手段及び前記イベント詳細情報取得手段を作動し、前記再生詳細情報保持手段による再生詳細情報の保持を行う手段と、前記被写体個人情報が保持されているか否かを判断する第２の判断手段と、前記被写体個人情報が保持されていない場合に、前記イベント詳細情報取得手段または被写体特徴情報取得手段を作動し、前記個人情報取得手段による被写体個人情報の取得を行う手段とを備えたことを特徴とする実施態様１２記載の画像再生装置。
【０１７６】
＜実施態様１４＞
前記撮影画像を所定の撮影場面ごとに分割するシーン分割手段と、前記イベント内容情報に関連付けられた撮影場面を表すイベントシーン情報を取得するイベントシーン情報取得手段と、前記シーン分割手段により分割された撮影場面に対して、前記イベントシーン情報を割り当てるイベントシーン割り当て手段とを備え、前記イベント詳細情報取得手段は、前記イベントシーン割り当て手段において割り当てられた撮影場面に基づいて、撮影画像の詳細内容を示す被写体情報及び被写体事象情報の外部入力を促すイベント詳細入力文章を生成する入力文章生成手段と、前記イベント詳細入力文章を表示する入力文章表示手段と、前記イベント詳細入力文章に対する外部からの回答情報を取得する手段とを備えることを特徴とする実施態様１２または１３記載の画像再生装置。
【０１７７】
＜実施態様１５＞
前記入力文章生成手段は、前記イベント詳細入力文章中に含まれる被写体情報に関する被写体個人情報を取得する手段と、前記被写体情報に関する被写体個人情報が存在した場合に、その被写体個人情報に基づいてイベント詳細入力文章を生成する手段と、前記イベント詳細入力文章に対する外部からの回答情報を取得した場合に、該回答情報を基にイベント詳細入力文章を変更する手段とを有することを特徴とする実施態様１４記載の画像再生装置。
【０１７８】
＜実施態様１６＞
前記個人情報取得手段は、前記イベント詳細情報取得手段において取得された被写体情報及び被写体事象情報より、被写体間の関係を取得する手段を有することを特徴とする実施態様１２乃至１５記載の画像再生装置。
【０１７９】
＜実施態様１７＞
所定の撮影画像から成るイベントの内容を表したイベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得工程と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得工程と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾する画像修飾工程とを備えたことを特徴とする画像処理装置の制御方法。
【０１８０】
＜実施態様１８＞
前記撮影画像を所定の撮影場面ごとに分割するシーン分割工程と、前記イベント内容情報に関連付けられた撮影場面を表すイベントシーン情報を取得するイベントシーン情報取得工程と、前記シーン分割工程により分割された撮影場面に対して、前記イベントシーン情報を割り当てるイベントシーン割り当て工程とを備え、前記イベント詳細情報取得工程は、前記イベントシーン割り当て工程の割り当て結果に基づいて、前記イベント詳細情報を取得することを特徴とする実施態様１７記載の画像処理装置の制御方法。
【０１８１】
＜実施態様１９＞
前記画像修飾工程は、前記イベントシーン情報、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾することを特徴とする実施態様１８記載の画像処理装置の制御方法。
【０１８２】
＜実施態様２０＞
前記画像修飾工程は、撮影画像データを修飾するための文字列データの書体を変更する工程を有することを特徴とする実施態様１７乃至１９記載の画像処理装置の制御方法。
【０１８３】
＜実施態様２１＞
前記画像修飾工程は、撮影画像データを修飾するための文字列データを変更する工程を有することを特徴とする実施態様１７乃至１９記載の画像処理装置の制御方法。
【０１８４】
＜実施態様２２＞
前記画像修飾工程は、撮影画像データを修飾するための音楽データを変更する工程を有することを特徴とする実施態様１７乃至１９記載の画像処理装置の制御方法。
【０１８５】
＜実施態様２３＞
前記画像修飾工程は、撮影画像データを修飾するための飾り絵データを変更する工程を有することを特徴とする実施態様１７乃至１９記載の画像処理装置の制御方法。
【０１８６】
＜実施態様２４＞
前記画像修飾工程は、撮影画像に関わった被写体情報を取得する被写体取得工程と、前記被写体取得工程において取得された被写体情報を、画像再生する視点情報として設定しその視点情報ごとに画像の再生を行う視点再生工程とを有することを特徴とする実施態様１７乃至２３記載の画像処理装置の制御方法。
【０１８７】
＜実施態様２５＞
前記イベント詳細情報取得工程は、撮影画面を説明する入力文章を予め設け、この入力文章を外部入力により埋め込み作成することで前記イベント詳細情報を取得することを特徴とする実施態様１７乃至２４記載の画像処理装置の制御方法。
【０１８８】
＜実施態様２６＞
前記イベント詳細情報取得工程は、外部入力による質疑応答形式で前記イベント詳細情報を取得することを特徴とする実施態様１７乃至２４記載の画像処理装置の制御方法。
【０１８９】
＜実施態様２７＞
前記被写体特徴情報取得工程は、前記被写体特徴情報を取得するための質疑応答を行う質疑応答工程と、前記質疑応答工程より取得された回答情報から被写体のタイプを判別する被写体タイプ判別工程とを有することを特徴とする実施態様１７乃至２６記載の画像処理装置の制御方法。
【０１９０】
＜実施態様２８＞
所定の撮影画像から成るイベントの内容を表したイベント内容情報を取得するイベント内容情報取得工程と、前記イベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得工程と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得工程と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾し再生する画像再生工程と、
前記取得したイベント内容情報及びイベント詳細情報を再成詳細情報として保持する再成詳細情報保持工程と、
少なくとも前記イベント内容情報及び前記イベント詳細情報を再生詳細情報として保持する再生詳細情報保持工程と、
前記取得したイベント内容情報及びイベント詳細情報を再成詳細情報として保持する再成詳細情報保持工程と、前記イベント詳細情報及び前記被写体特徴情報に基づいて被写体個人情報を生成し保持する個人情報取得工程とを備えたことを特徴とする画像再生装置の制御方法。
【０１９１】
＜実施態様２９＞
前記再生詳細情報が保持されているか否かを判断する第１の判断工程と、前記再生詳細情報が保持されていない場合に、前記イベント内容情報取得工程及び前記イベント詳細情報取得工程を作動し、前記再生詳細情報保持工程による再生詳細情報の保持を行う工程と、前記被写体個人情報が保持されているか否かを判断する第２の判断工程と、前記被写体個人情報が保持されていない場合に、前記イベント詳細情報取得工程または被写体特徴情報取得工程を作動し、前記個人情報取得工程による被写体個人情報の取得を行う工程とを備えたことを特徴とする実施態様２８記載の画像再生装置の制御方法。
【０１９２】
＜実施態様３０＞
前記撮影画像を所定の撮影場面ごとに分割するシーン分割工程と、前記イベント内容情報に関連付けられた撮影場面を表すイベントシーン情報を取得するイベントシーン情報取得工程と、前記シーン分割工程により分割された撮影場面に対して、前記イベントシーン情報を割り当てるイベントシーン割り当て工程とを備え、前記イベント詳細情報取得工程は、前記イベントシーン割り当て工程において割り当てられた撮影場面に基づいて、撮影画像の詳細内容を示す被写体情報及び被写体事象情報の外部入力を促すイベント詳細入力文章を生成する入力文章生成工程と、前記イベント詳細入力文章を表示する入力文章表示工程と、前記イベント詳細入力文章に対する外部からの回答情報を取得する工程とを備えたことを特徴とする実施態様２８または２９記載の画像再生装置の制御方法。
【０１９３】
＜実施態様３１＞
前記入力文章生成工程は、前記イベント詳細入力文章中に含まれる被写体情報に関する被写体個人情報を取得する工程と、前記被写体情報に関する被写体個人情報が存在した場合に、その被写体個人情報に基づいてイベント詳細入力文章を生成する工程と、前記イベント詳細入力文章に対する外部からの回答情報を取得した場合に、該回答情報を基にイベント詳細入力文章を変更する工程とを有することを特徴とする実施態様３０記載の画像再生装置の制御方法。
【０１９４】
＜実施態様３２＞
前記個人情報取得工程は、前記イベント詳細情報取得工程において取得された被写体情報及び被写体事象情報より、被写体間の関係を取得する工程を有することを特徴とする実施態様２８乃至３１記載の画像再生装置の制御方法。
【０１９５】
＜実施態様３３＞
画像処理装置の制御方法を実行するための制御プログラムを提供する媒体であって、前記制御プログラムは、所定の撮影画像から成るイベントの内容を表したイベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得ステップと、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得ステップと、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾する画像修飾ステップとを有することを特徴とする制御プログラムを提供する媒体。
【０１９６】
＜実施態様３４＞
画像処理装置の制御方法を実行するための制御プログラムであって、
所定の撮影画像から成るイベントの内容を表したイベント内容情報を取得するイベント内容情報取得工程と、前記イベント内容情報に関する詳細情報をイベント詳細情報として取得するイベント詳細情報取得工程と、前記イベント詳細情報に基づいて、前記イベントにおける被写体の特徴を示す被写体特徴情報を取得する被写体特徴情報取得工程と、前記イベント詳細情報及び前記被写体特徴情報に基づいて、撮影画像データを修飾し再生する画像再生工程と、
前記取得したイベント内容情報及びイベント詳細情報を再成詳細情報として保持する再成詳細情報保持工程と、
少なくとも前記イベント内容情報及び前記イベント詳細情報を再生詳細情報として保持する再生詳細情報保持工程と、
前記取得したイベント内容情報及びイベント詳細情報を再成詳細情報として保持する再成詳細情報保持工程と、前記イベント詳細情報及び前記被写体特徴情報に基づいて被写体個人情報を生成し保持する個人情報取得工程とを備えたことを特徴とする制御プログラム。
【０１９７】
【発明の効果】
以上詳細に説明したように本発明によれば、感情を表す表現を撮影画像データに挿入する場合において、撮影される人が指定入力しその対応するテロップや挿絵を挿入しなくとも、イベント内容情報及びイベント詳細情報を用いて自動的に挿入することが可能である。このように感情表現を効果的に挿入することができるので、より鑑賞化の高い作品を簡単に作成することが可能となる。
【０１９８】
また、イベント詳細情報や被写体特徴情報などの設定を画像再生時の度に行う必要がないため、より簡単に感情表現を効果的に挿入した鑑賞化の高い作品を作成することが可能になる。
【図面の簡単な説明】
【図１】本発明の第１実施形態に係る画像記録再生装置の一構成例を示すブロック図である。
【図２】第１実施形態におけるデータ構成の一例を示す図である。
【図３】第１実施形態におけるイベント内容情報テーブル２１ａの一例を示す図である。
【図４】第１実施形態におけるイベントリスト情報テーブル２１ｂの一例を示す図である。
【図５】第１実施形態におけるイベント詳細入力文章テーブル２１ｃの一例を示す図である。
【図６】イベント詳細設定画面を示す図である。
【図７】第１実施形態における被写体質問リストテーブル２１ｄの一例を示す図である。
【図８】第１実施形態における視点リスト情報テーブル２１ｇの一例を示す図である。
【図９】第１実施形態における書体情報テーブル２１ｈの一例を示す図である。
【図１０】第１実施形態における変換式情報テーブル２１ｋの一例を示す図である。
【図１１】第１実施形態における画像記録再生システムの全体的な処理の流れを示すフローチャートである。
【図１２】図１１における画像関連情報取得処理の詳細な流れを示すフローチャートである。
【図１３】図１２におけるイベント内容情報取得処理の詳細な流れを示すフローチャートである。
【図１４】イベント設定画面を示す図である。
【図１５】図１２におけるイベントシーン情報取得処理の詳細な流れを示すフローチャートである。
【図１６】図１２におけるイベント詳細情報取得処理の詳細な流れを示すフローチャートである。
【図１７】イベントシーン割付画面を示す図である。
【図１８】図１６における被写体特徴情報取得処理の詳細な流れを示すフローチャートである。
【図１９】図１１におけるイベントシーン情報表示処理の動作を示すフローチャートである。
【図２０】「夏祭り」のイベントシーン情報が出力装置に表示されている状態を示す図である。
【図２１】図１１における再生処理の詳細な流れを示すフローチャートである。
【図２２】再生スクリプトを示す図である。
【図２３】図２１における映像の再生処理の詳細な流れを示すフローチャートである。
【図２４】図２３における書体設定処理と文字列作成処理の詳細な流れを示すフローチャートと、スーパインポーズの文字列を作成する際の変換式を示す図である。
【図２５】図２３における音楽設定処理（ステップＳ８６）の詳細な流れを示すフローチャートである。
【図２６】図２３における飾り絵設定処理（ステップＳ８８）の詳細な流れを示すフローチャートである。
【図２７】イベント設定画面の一例を示す図である。
【図２８】イベント詳細情報テーブルの一例等を示す図である。
【図２９】本発明の第２実施形態におけるデータ構成の一例を示すブロック図である。
【図３０】第２実施形態における被写体属性情報テーブル２１ｎの一例等を示す図である。
【図３１】第２実施形態における画像関連情報取得処理（図１１のステップＳ１６）の詳細な流れを示すフローチャートである。
【図３２】図３１におけるイベントシーン情報取得処理（ステップＳ２０５）の詳細な流れを示すフローチャートである。
【図３３】図３１におけるイベント詳細情報取得処理の詳細な流れを示すフローチャートである。
【図３４】図３３におけるイベント詳細情報設定処理の詳細な流れを示すフローチャートである。
【図３５】イベント詳細入力文章情報の一例を示す図である。
【図３６】イベント詳細設定画面の一例を示す図である。
【符号の説明】
１  システムバス
２  ＣＰＵ
３  プログラムメモリ（ＰＭＥＭ）
４  通信制御部
９  ビデオ・イメージ・メモリ（ＶＲＡＭ）
１０  表示出力制御部
１１  表示出力装置
１２  音声制御部
【図１】
2004266629.tif 000004
【図２】
2004266629.tif 000005
【図３】
2004266629.tif 000006
【図４】
2004266629.tif 000007
【図５】
2004266629.tif 000008
【図６】
2004266629.tif 000009
【図７】
2004266629.tif 000010
【図８】
2004266629.tif 000011
【図９】
2004266629.tif 000012
【図１０】
2004266629.tif 000013
【図１１】
2004266629.tif 000014
【図１２】
2004266629.tif 000015
【図１３】
2004266629.tif 000016
【図１４】
2004266629.tif 000017
【図１５】
2004266629.tif 000018
【図１６】
2004266629.tif 000019
【図１７】
2004266629.tif 000020
【図１８】
2004266629.tif 000021
【図１９】
2004266629.tif 000022
【図２０】
2004266629.tif 000023
【図２１】
2004266629.tif 000024
【図２２】
2004266629.tif 000025
【図２３】
2004266629.tif 000026
【図２４】
2004266629.tif 000027
【図２５】
2004266629.tif 000028
【図２６】
2004266629.tif 000029
【図２７】
2004266629.tif 000030
【図２８】
2004266629.tif 000031
【図２９】
2004266629.tif 000032
【図３０】
2004266629.tif 000033
【図３１】
2004266629.tif 000034
【図３２】
2004266629.tif 000035
【図３３】
2004266629.tif 000036
【図３４】
2004266629.tif 000037
【図３５】
2004266629.tif 000038
【図３６】
2004266629.tif 000039