(57)【特許請求の範囲】
【請求項１】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、
前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、
前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、 また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、 当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める映像情報の編集方法。
【請求項２】
前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項１記載の映像情報の編集方法。
【請求項３】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、
前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、
前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとしたことし、
前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした映像情報の編集方法。
【請求項４】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、
前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大とした映像情報の編集方法。
【請求項５】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成し、
前記各シーン評価値が、所定の第一条件を満たす前記シーンを、前記本編映像から選択し、
さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成し、
前記各ショット評価値が、所定の第二条件を満たす前記ショットを選択する映像情報の編集方法。
【請求項６】
選択された各ショットを連結した映像の長さが所定の映像時間を超えた場合に、前記所定の第一条件又は第二条件の少なくとも一方を修正して、所定の映像時間となるまで前記処理を反復する請求項５記載の映像情報の編集方法。
【請求項７】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う前記各シーン評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める請求項５記載の映像情報の編集方法。
【請求項８】
前記シーンの推移に伴う前記シーン評価値の積算値について、或るシーンに至るまでの積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該谷のシーンと以降に隣接する当該山のシーンとの積算値の増大分の大きさに基づくか、又は積算値の増大分の大きさの順位に基づいて、当該山に隣接する手前の谷から当該山に至る上り坂に位置するシーンと山頂直後の下りシーンを対象として、前記所定の第一条件を適用する請求項５記載の映像情報の編集方法。
【請求項９】
前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項７記載の映像情報の編集方法。
【請求項１０】
前記各シーン評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした請求項７記載の映像情報の編集方法。
【請求項１１】
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値である請求項５記載の映像情報の編集方法。
【請求項１２】
前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を他の前記項目に掛ける重み付け値よりも大とした請求項１１記載の映像情報の編集方法。
【請求項１３】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、
前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、
選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化し、
前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、 また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、 当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める映像情報の編集方法。
【請求項１４】
前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項１３記載の映像情報の編集方法。
【請求項１５】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、
前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、
選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化し、
前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした映像情報の編集方法。
【請求項１６】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、
前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、
選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化し、
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大とした映像情報の編集方法。
【請求項１７】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、
前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成し、
前記各シーン評価値が所定の第一条件を満たす前記シーンを、前記本編映像から選択し、
さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成し、
前記各ショット評価値が所定の第二条件を満たす前記ショットを選択する映像情報の編集方法。
【請求項１８】
選択された各ショットを連結した映像の長さが所定の映像時間を超えた場合に、前記所定の第一条件又は第二条件の少なくとも一方を修正して、所定の映像時間となるまで前記処理を反復する請求項１７記載の映像情報の編集方法。
【請求項１９】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う、前記各シーン評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める請求項１７記載の映像情報の編集方法。
【請求項２０】
前記シーンの推移に伴う前記シーン評価値の積算値について、或るシーンに至るまでの積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該谷のシーンと以降に隣接する当該山のシーンとの積算値の増大分の大きさに基づくか、又は積算値の増大分の大きさの順位に基づいて、当該山に隣接する手前の谷から当該山に至る上り坂に位置するシーンと山頂直後の下りシーンを対象として、前記所定の第一条件を適用する請求項１７記載の映像情報の編集方法。
【請求項２１】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項１９記載の映像情報の編集方法。
【請求項２２】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、前記各シーン評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした請求項１９記載の映像情報の編集方法。
【請求項２３】
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値である請求項１７記載の映像情報の編集方法。
【請求項２４】
前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大とした請求項２３記載の映像情報の編集方法。
【請求項２５】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、
前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と
を備え、
前記所定の条件を前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める映像情報の編集装置。
【請求項２６】
前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項２５記載の映像情報の編集装置。
【請求項２７】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、
前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と
を備え、
前記所定の条件を前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした映像情報の編集装置。
【請求項２８】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、
前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と
を備え、
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を他の前記項目に掛ける重み付け値よりも大とした映像情報の編集装置。
【請求項２９】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成する手段と、
前記各シーン評価値が、所定の第一条件を満たす前記シーンを、前記本編映像から選択する手段と、
さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成する手段と、
前記各ショット評価値が、所定の第二条件を満たす前記ショットを選択する手段と
を備える映像情報の編集装置。
【請求項３０】
選択された各ショットを連結した映像の長さが前記所定の映像時間を超えた場合に、前記所定の第一条件又は第二条件の少なくとも一方を修正して、前記所定の映像時間になるまで前記処理を反復する手段を備える請求項２９記載の映像情報の編集装置。
【請求項３１】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う、前記各シーン評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める請求項２９記載の映像情報の編集装置。
【請求項３２】
前記シーンの推移に伴う前記シーン評価値の積算値について、或るシーンに至るまでの積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該谷のシーンと以降に隣接する当該山のシーンとの積算値の増大分の大きさに基づくか、又は積算値の増大分の大きさの順位に基づいて、当該山に隣接する手前の谷から当該山に至る上り坂に位置するシーンと山頂直後の下りシーンを対象として、前記所定の第一条件を適用する請求項２９記載の映像情報の編集装置。
【請求項３３】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項３１記載の映像情報の編集装置。
【請求項３４】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、前記各シーン評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした請求項３１記載の映像情報の編集装置。
【請求項３５】
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値である請求項２９記載の映像情報の編集装置。
【請求項３６】
前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大とした請求項３５記載の映像情報の編集装置。
【請求項３７】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、
前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と、
選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化する手段と
を備え、
前記所定の条件を前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める映像情報の編集装置。
【請求項３８】
前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項３７記載の映像情報の編集装置。
【請求項３９】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、
前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と、
選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化する手段と
を備え、
前記所定の条件を前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、
前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした映像情報の編集装置。
【請求項４０】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、
前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と、
選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化する手段と
を備え、
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大とした映像情報の編集装置。
【請求項４１】
連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、
前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成する手段と、
前記各シーン評価値が所定の第一条件を満たす前記シーンを、前記本編映像から選択する手段と、
さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成する手段と、
前記各ショット評価値が所定の第二条件を満たす前記ショットを選択する手段と、
前記選択された各ショットに対応する前記記録位置情報又は経過時間情報の情報と、前記ショット評価値を少なくとも含むデータをコード化する手段と
を備える映像情報の編集装置。
【請求項４２】
選択された各ショットを連結した映像の長さが前記所定の映像時間を超えた場合に、前記所定の第一条件又は第二条件の少なくとも一方を修正して、前記所定の映像時間になるまで前記処理を反復する手段を備える請求項４１記載の映像情報の編集装置。
【請求項４３】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、
前記シーンの推移に伴う、前記各シーン評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定める請求項４１記載の映像情報の編集装置。
【請求項４４】
前記シーンの推移に伴う前記シーン評価値の積算値について、或るシーンに至るまでの積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、
また或るシーンに至るまでの積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、
当該谷のシーンと以降に隣接する当該山のシーンとの積算値の増大分の大きさに基づくか、又は積算値の増大分の大きさの順位に基づいて、当該山に隣接する手前の谷から当該山に至る上り坂に位置するシーンと山頂直後の下りシーンを対象として、前記所定の第一条件を適用する請求項４１記載の映像情報の編集装置。
【請求項４５】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、前記閾値は、前記谷から続き隣接する前記山に至る上り坂か、前記山から続き隣接する前記谷に至る下り坂に応じて設定される請求項４３記載の映像情報の編集装置。
【請求項４６】
前記所定の第一条件を前記シーンに関する前記シーン評価値の絶対値が予め定めた閾値に達することとし、前記各シーン評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくした請求項４３記載の映像情報の編集装置。
【請求項４７】
前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値である請求項４３記載の映像情報の編集装置。
【請求項４８】
前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を他の前記項目に掛ける重み付け値よりも大とした請求項４７記載の映像情報の編集装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像情報の編集方法及び編集装置に関し、特に映像タイトルのプレビュー映像生成に関わる映像情報の編集方法及び編集装置に関するものである。
【０００２】
【従来の技術】
映画やテレビドラマ、ドキュメンタリー等の物語性のある映像タイトルは、地上波／衛星放送による番組やインターネット等のネットワーク系、或いはＤＶＤその他のパッケージメディア等により商品として提供され、視聴者側は所望のものを購入することにより入手している。
【０００３】
視聴者側が、こうした物語性のある映像タイトルを選択する際には、予告編等のプレビュー映像が有効な手掛かりとなる。
【０００４】
一般的に、劇場上映の映画には予告編があるが、これをプレビュー映像としてそのまま放送やインターネット等のネットワーク系、或いはＤＶＤその他のパッケージメディア等に流用しようとすると、所要時間が適切でない、余分な広告宣伝やナレーションが入っているなどの問題があるため、必ずしも適するものではなかった。
【０００５】
そこで、現行では映像タイトルの送り手側が独自のプレビュー映像を各映像タイトル毎に準備し、視聴者側へ提供することがなされている。
【０００６】
ところで、視聴者側には、映像タイトルのあらすじ、ハイライト、主な出演者などの、自分の興味関心がある視点に重点が置かれたプレビュー映像を見た上，で本編の購入・鑑賞を決めたいという欲求がある。そこで視聴者の要求を満たすためには用途目的に応じた数種類のプレビュー映像を準備するのが好ましいが、現状において送り手側が準備しているのは１つのプレビュー映像にすぎないため、視聴者側が要求する、多種のプレビュー映像に応じることができないといる問題があった。
【０００７】
さらに、プレビュー映像の制作には特殊な感性や才能が必要であり、多額の費用を要する。とりわけ昨今はコンテンツの大量流通時代にあるゆえ、こうした人材は不足しており、ましてや多様な視点からのプレビューや用途に合った時間（長さ）のプレビュー映像を、短時間に安値に制作するのは困難を極めているのが現状である。
【０００８】
【発明が解決しようとする課題】
本発明は、前記のような従来技術における問題点を解決するためなされたもので、多種類のプレビュー映像の編集が容易であり、かつ所望の時間長さのプレビュー映像の編集を容易に可能とする映像情報の編集方法及び編集装置提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、 また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、 当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定めることを特徴とする。
【００１０】
また、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとしたことし、前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくしたことを特徴とする。
【００１１】
さらに、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大としたことを特徴とする。
【００１２】
また、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成し、前記各シーン評価値が、所定の第一条件を満たす前記シーンを、前記本編映像から選択し、さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成し、前記各ショット評価値が、所定の第二条件を満たす前記ショットを選択することを特徴とする。
【００１３】
また、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化し、前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定めることを特徴とする。
【００１４】
また、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化し、前記所定の条件を、前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくしたことを特徴とする。
【００１５】
また、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成し、前記ショット単位又は前記シーン単位の前記各評価値が所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択し、選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化し、前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大としたことを特徴とする。
【００１６】
さらに、本発明に係る映像情報の編集方法は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切り、前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成し、前記各シーン評価値が所定の第一条件を満たす前記シーンを、前記本編映像から選択し、さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成し、前記各ショット評価値が所定の第二条件を満たす前記ショットを選択することを特徴とする。
【００１７】
本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段とを備え、前記所定の条件を前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定めることを特徴とする。
【００１８】
また、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段とを備え、前記所定の条件を前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくしたことを特徴とする。
【００１９】
また、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段とを備え、前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を他の前記項目に掛ける重み付け値よりも大としたことを特徴とする。
【００２０】
また、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成する手段と、前記各シーン評価値が、所定の第一条件を満たす前記シーンを、前記本編映像から選択する手段と、さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成する手段と、前記各ショット評価値が、所定の第二条件を満たす前記ショットを選択する手段とを備えることを特徴とする。
【００２１】
また、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と、選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化する手段とを備え、前記所定の条件を前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記シーンの推移に伴う前記各シーンに関する前記評価値の積算値について、或るシーンに至るまでの当該積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に当該シーンを山とし、また或るシーンに至るまでの前記積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつ当該シーン以降の当該積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に当該シーンを谷として、当該山又は谷のシーンと隣接する当該谷又は山のシーン間の領域毎に、前記閾値を定めることを特徴とする。
【００２２】
また、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と、選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化する手段とを備え、前記所定の条件を前記ショット又は前記シーンに関する前記評価値の絶対値が予め定めた閾値に達することとし、前記各評価値が正又は負いずれかの値で形成されている際に、正の評価値に適用される前記閾値の絶対値を、負の評価値に適用される前記閾値の絶対値に等しいか又は小さくしたことを特徴とする。
【００２３】
また、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各ショット又は前記各シーンに対応して与えられた情報に基づき当該各ショット又は当該各シーンの評価値を作成する手段と、前記ショット単位又は前記シーン単位の前記各評価値が、所定の条件を満たす前記ショット又は前記シーンを、前記本編映像から選択する手段と、選択された当該ショット又は当該シーンに対応する前記記録位置情報又は経過時間情報と、対応する前記評価値を少なくとも含むデータをコード化する手段とを備え、前記ショット評価値は、前記本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値を当該各項目につき加算演算した値であり、前記ショット評価値は、前記特定された出演者の出現に関する項目に掛ける重み付け値を、他の前記項目に掛ける重み付け値よりも大としたことを特徴とする。
【００２４】
さらに、本発明に係る映像情報の編集装置は、連続する動画映像が記録位置情報又は経過時間情報を伴って記録されて成る本編映像を、区切り指示のタイミングで、動画の単位であるショット単位か、又は当該ショットを少なくとも一つ含んで成るシーン単位に、かつ前記記録位置情報又は経過時間情報をそれぞれ対応付けて区切る手段と、前記各シーンに対応して与えられた情報に基づき当該各シーン評価値を作成する手段と、前記各シーン評価値が所定の第一条件を満たす前記シーンを、前記本編映像から選択する手段と、さらに、前記選択された各シーンに含まれる前記各ショット毎に対応して与えられた情報に基づき当該各ショット評価値を作成する手段と、前記各ショット評価値が所定の第二条件を満たす前記ショットを選択する手段と、前記選択された各ショットに対応する前記記録位置情報又は経過時間情報の情報と、前記ショット評価値を少なくとも含むデータをコード化する手段とを備えることを特徴とする。
【００２５】
【発明の実施の形態】
本発明に係る映像情報の編集方法及び編集装置は、その一例として、映画やテレビ番組などの映像タイトルの本編映像を、シーン単位及びショット単位（定義が後述される）に分割し、与件として外部から付与された、各シーン単位の物語の意味的な評価情報と、各ショット単位の映像特性上の評価情報を、各シーン及び各ショットに付加してセマンティック・スコアを編集し、記録保存し、このセマンティック・スコアを用いて、用途目的毎に設定された所定のルールに基づき本編映像の切り出しポイントを自動決定し、よって用途目的及び所定時間長さに合わせたプレビュー映像を自動編成させるか、自動編成のためのセマンティック・スコアを記録・活用するか、或いは当該プレビュー映像を自動生成させるためのセマンティック・コードを編集する機能を備えるものである。
【００２６】
上記のような、本編映像を材料として、独自の視点に基づいたプレビュー映像を編成する作業は、著作物の作成作業と見做し得る。そこで本発明では、こうした機能を備える抽出映像の編成装置を、オーサリングツール又はオーサリング装置と称する。さらに、本編映像を材料として、独自の視点に基づいたプレビュー映像の生成を可能にするセマンティック・コードを編集する機能を備える映像情報の編集装置も、広義のオーサリングツール又はオーサリング装置として扱うことができる。
【００２７】
実施形態の説明に先立って、用語の定義と説明をする。
【００２８】
ショットとは、連続する動画映像の最小単位である。映画におけるフイルムショットに相当する。
【００２９】
シーンとは、幾つかのショットの集まりで物語の意味を構成する単位である。
【００３０】
記録位置情報とは、記録メディア上に記録されたシーンやショットの、この記録メディア上の記録位置を示す情報であり、絶対セクタ番号、絶対トラック番号、タイムコード、絶対レコード番号等といった、記録位置に関わるあらゆる情報が対象となる。
【００３１】
映像の意味的評価とは、その映像の与える、例えば物語の展開上のインパクトに関わる評価であり、評価者によってなされるか、又は所定の規準にしたがい自動評価がなされる。この評価値が、映像の意味的評価情報として与えられる。したがって、本発明にあっては、映像の意味的評価情報は、「与件」として扱われる。
【００３２】
また、映像の意味的評価情報は通常、シーン単位で与えられるが、ショット単位で与えられる場合もある。
【００３３】
映像特性上の評価とは、その映像の備える特性に関わる評価であり、例えば俳優の台詞の存在（台詞の有無）や、大音響など特殊効果等に関わる評価である。この評価値が、映像特性上の評価情報となる。
【００３４】
この評価は、評価者によってなされるか、又は所定の規準にしたがい評価値が自動演算される。或いは、評価者が所定の単一又は複数の映像特性項目の有無を確認し、この有無情報を与件として評価値が自動演算される。
【００３５】
また、映像特性上の評価情報は通常、ショット単位で与えられるが、シーン単位で与えられる場合もある。
【００３６】
本編映像とは、各映像タイトル（例えば一本の放送番組や一本の映画やドラマなど）を構成する複数のシーンやショットの集合であり、当該映像タイトルの最初から最後までの時間幅に形成されている映像である。通常、放送番組やネットを介して配信される映像タイトルや、カセット磁気テープや光ディスク等のパッケージ系の記録メディアに記録され提供されている映像タイトルは、こうした本編映像から構成されている。
【００３７】
プレビュー映像とは、本編映像からの抽出分を含んで成る、用途目的に応じた抄録などの短編映像である。したがってプレビュー映像を構成する映像と同じ映像が、本編映像中に存在する。プレビュー映像の各用途目的は、各モードとして扱われる。したがって用途目的が多種類ある場合は、モードも多種類となる。
【００３８】
因みに、このようなモード例としては、あらすじ型モード、ハイライト型モード、俳優オリエンテッド・モード等がある。
【００３９】
さらにプレビュー映像は、本編映像を構成する各シーンや各ショットから、映像の意味的評価値又は映像特性上の評価値のいずれか、又は両方が、それぞれの所定の条件を満たすものが抽出されて連結された映像を少なくとも含んで構成される。したがってプレビュー映像には、本編映像から抽出されたシーンのみの連結で構成される場合や、本編映像から抽出されたショットのみの連結で構成される場合や、本編映像から抽出されたショットとシーンが混成された連結で構成される場合等がある。
【００４０】
二段階スクリーニングは、プレビュー映像の編成に関わる手法であり、第一段階のスクリーニングとして、本編映像から、与件として付与された各シーン単位の映像の意味的評価値が所定の条件に適うシーンのみを抽出し、第二段階のスクリーニングとして、この抽出シーンのみを対象として、当該シーンを構成する各ショット中から、映像特性上の評価値が所定の条件に適うショットを抽出し、この抽出されたショットを連結してプレビュー映像を編成する。
【００４１】
したがって、プレビュー映像のモードによって、抽出シーンや適合ショットが他のモードのそれらと異なるのが一般的である。
【００４２】
プレビュー映像編成ルールは、本編映像から抽出されるべき映像を、プレビューのモード並びに時間長さに応じて選択し指定するためのルールである。
【００４３】
セマンティック・スコアは、映像タイトルの本編映像を構成する全シーンに、与件として与えられた映像の意味的評価値（シーン・スコア）を対応させ、また全ショット又は少なくとも一部のショット毎に、映像特性上の評価値（ショット・スコア）を対応させ、これら情報と、少なくとも各シーン及び各ショットの記録位置情報あるいは経過時間情報（タイムコード）とが対応付けられ、夫々が項目として記録されている他、各シーン及び各ショットの各種の属性が記録されている、表形式の情報である。
【００４４】
セマンティック・スコアの内容に基づいて、本編映像の該当するシーンが抽出され、抽出シーンからショットが選定されて連結され、プレビュー映像が編成される。
【００４５】
セマンティック・スコアは、映像本編のメタ情報の１つであり、本編の圧縮映像の編集・自動生成、視聴者端末でのプレビュー自動生成、物語の展開を感覚的に表現したインタラクティブなブラウザーの生成等を行うための効率的なデータコード（セマンティック・コード）となる。
【００４６】
セマンティック・コードは、セマンティック・スコアの全項目から少なくとも一部を選択して、その内容をコード化した、コード形式の情報である。したがってセマンティック・コードには、一例として、或る選択されたシーン内でさらに選択されたショットの、記録位置情報又は経過時間情報及びその映像特性上の評価結果が、それぞれコード記述されている。
【００４７】
このようなセマンティック・コードは、各映像タイトルに係る関連情報、すなわちメタ情報として編集され、視聴者端末でのプレビュー自動生成、物語の展開を感覚的に表現したインタラクティブなブラウジングを行うための効率的なデータコードとなる。例えば、セマンティック・コードに基づいて、本編映像の該当するショットが抽出されて連結され、プレビュー映像が形成される。
【００４８】
また本発明で記述された映像信号とは、動画像に関わる信号と音声に関わる信号とをまとめて、便宜的に「映像信号」と定義している。
【００４９】
以下、この発明の好適な実施形態を添付図を参照して詳細に説明する。なお、以下に述べる実施形態は、この発明の本質的な構成と作用を示すための好適な例の一部であり、したがって技術構成上好ましい種々の限定が付されている場合があるが、この発明の範囲は、以下の説明において特にこの発明を限定する旨の記載がない限り、これらの形態に限られるものではない。
【００５０】
図１は、本発明に係る抽出映像の編成方法の一実施形態の過程説明図である。
【００５１】
図２は、図１に続く過程説明図である。
【００５２】
また図３は、抽出映像編成の各過程を説明する概念図である。
【００５３】
さらに図４は、セマンティック・スコア編成過程における作業結果を打ち出した例を示す図である。
【００５４】
図５は、本発明の方法のショット・スコア作成過程における作業結果を打ち出した例を示す図である。
【００５５】
図６は、本発明の方法のショット・スコア作成過程における作業結果を打ち出した別の例を示す図である。同図では、出演者型モードの例として、出演者（ティナ）が登場しているショットを強調表示したものである。
【００５６】
図７は、本発明の方法により編成されたセマンティック・スコアの一例の説明図である。
【００５７】
以下、両図１及び図２に沿い、図３〜図７を適宜参照して本実施形態に係る抽出映像の編成方法の各過程を説明する。
【００５８】
図１に示されるように、開始すると直ちに初期値やパラメータの設定過程に入る。
【００５９】
プロセスＰｒ１において、映像圧縮パラメータの初期値の入力がなされると、プロセスＰｒ２において、予め設定されているパラメータのデフォルト値ＤＴ１を、この入力値に基づき更新する。
【００６０】
なお、上記の映像圧縮とは、本編映像からその一部分を抽出して短編、とりわけプレビュー映像を編成することを意味する。また、パラメータには、編成された短編の所望の映像時間（例として６０秒）、本編映像からシーンを抽出する際の規準となるシーン評価値（又はシーン・スコア）の閾値、主な出演者のリスト（例えば俳優Ａ１、Ａ２、Ａ３など）、主要ピークとなる条件（例えばピークギャップ≧０．８など）、映像特性の重み付け係数（例えば後述される係数Ｗ１＝３からＷ８＝１など）及びカット秒数とカット位置が含まれる。
【００６１】
ここで、例えば２時間の映画から１〜２分の要約映像を作成する場合に、本編のショット又はシーンのままでは時間が長すぎて、多くのカットを入れることができない。商業用の予告編は１秒から長くても２〜３状のカットで構成される場合が殆どである。そして、一般的にショットの始めは説明的あるいは導入的な映像が多く、最後の部分で最も強い問題提起や解決を持ってくる場合が多いので、ショット又はシーンから要約映像を自動で抽出するアルゴリズムとしては、最後から規定秒数だけ切り取ることが有効である。
【００６２】
そこで、本発明では、ショット又はシーン映像から切り出す映像の規定カット秒数として、例えばピークのシーンの閾値、ピークに至る上り坂の閾値と下り坂の閾値、あるいはシーンスコアがプラスの閾値とマイナスの閾値を別々の秒数で指定する。
【００６３】
シーンの評価（採点）法は、映像の意味的評価法であり、一例として物語の複雑化を表すシーンを（＋）値とし、鎮静化を表すシーンを（−）値とし、その度合いを夫々、絶対値０．１から１．０までの１０段階で表す方法がある。複雑化とは、新たな問題の発生や、それによってもたらされる登場人物の心理的葛藤の高まりを意味し、鎮静化とは、問題の解決や、それによってもたらされる登場人物の精神的解放やカタルシスを意味する。
【００６４】
上記のシーン・スコアの閾値につきさらに説明すると、映画やテレビ番組等の予告編に見られるプレビューは、一般に問題の発生や新しい状況・人間関係の新たな展開など複雑化の部分を多くして興味を引きつけ、解決場面や結末などの鎮静化のシーンは余り示さない場合が多い。したがってシーン選択のデフォルトの閾値として、複雑化シーンを反映させたシーン評価値Ｆ（＋）≧０．６、鎮静化シーンを反映させたシーン評価値Ｆ（−）≦−０．８とする。
【００６５】
映画やテレビ番組には、導入部に物語の状況説明やドラマの発端がさりげなく仕組まれている。したがって導入部のデフォルトの閾値は０．１ポイント下げて、複雑化シーンを反映させたシーン評価値Ｆ（＋）≧０．５、鎮静化シーンを反映させたシーン評価値Ｆ（−）≦−０．７とする。
【００６６】
このように、プロセスＰｒ２によって所望のパラメータを、映像抽出処理の実行に先立って設定することができる。また、これらのパラメータは、後述するように編成作業の進捗に伴い修正更新可能となっている。
【００６７】
さらに、続くプロセスＰｒ３において、圧縮モードの選択が為される。圧縮モードとは、前記のように抽出して編成した短編、とりわけプレビュー映像が用途目的に応じた構成で編成されたものであり、あらすじ型モード、ハイライト型モード、出演者型モードなどがある。
【００６８】
このモード選択が為されると、次いでプロセスＰｒ４において、当該モードに適用されるルールが設定される。このルールは、前記の二段階スクリーニングにしたがい二段階から構成されていて、第１段階は本編映像から抽出すべきシーンを選定するための条件から成り、第２段階は抽出された各シーンを構成する複数個のショット中の、いずれかのショットを選定するための条件から成る。これらルールは、モード毎に設定される。また、後述するように編成作業の進捗に伴い更新可能である。
【００６９】
このルールの例を説明すると、あらすじ型ルールは、あらすじがわかりやすく、ストーリー順を追ったモードである。これを実現するために、抽出シーン選定の条件として、導入部（ＵＳ１）では複雑化シーンはシーン評価値Ｆ（＋）≧０．５、鎮静化シーンはシーン評価値Ｆ（−）≦−０．７の閾値に該当するシーンを選定し、これに続く部分では、複雑化シーンはシーン評価値Ｆ（＋）≧０．６、鎮静化シーンはシーン評価値Ｆ（−）≦−０．８の閾値に該当するシーンを選定する。
【００７０】
また、あらすじ型ルールにおけるショット選定の条件としては、その規準となるショット・スコアＳｈｔとして
Ｓｈｔ＝３×Ａ＋２×Ｂ＋２×Ｃ＋２×Ｄ＋Ｅ＋Ｆ＋Ｇ＋Ｈ
を適用する。ここでＡ〜Ｈは後述される項目であり、Ａ〜Ｈに掛けられた係数は前記の、映像特性の重み付け係数Ｗ１〜Ｗ８である。
【００７１】
そして、ショット・スコアＳｈｔが最大のショットを選定するか、又は後述するサブルールに基づいて選定する。
【００７２】
また、ハイライト型ルールは、エピソードの大きな山場を中心としたハイライト映像主体のモードである。これを実現するために、エピソードの大きさＥｐを、谷から山へ登るシーン・スコアの積算値の上昇値として、Ｅｐの順位が第１位であるＥｐ１、第２位のＥｐ２、及び第３位のＥｐ３における上り坂に含まれる全シーンと直後の１シーン及び、最終ピーク（Ｐｚ）に至る上り坂（ＵＳｚ）と直後の１シーンの中で、複雑化シーンはシーン評価値Ｆ（＋）≧０．７、鎮静化シーンはシーン評価値Ｆ（−）≦−０．８の閾値に該当するシーンを選定する。ＵＳｚがＥｐ１、Ｅｐ２、Ｅｐ３に含まれる場合はＥｐ４を加え、同様の処理をする。
【００７３】
ショット選定の条件としては、その規準となるショット・スコアＳｈｔとして
Ｓｈｔ＝３×Ａ＋２×Ｂ＋２×Ｃ＋２×Ｄ＋Ｅ＋Ｆ＋Ｇ＋Ｈ
を適用する。そして、ショット・スコアＳｈｔが最大のショットを選定するか、又は後述するサブルールに基づいて選定する。
【００７４】
さらに、出演者型ルールは、主な出演者に着目したモードであり、例えば主な出演者は３人まで指定可能とし、指定された主な出演者がＡ１の場合、シーン選定のためには導入部及び一般の部分のシーン抽出に前記の設定された閾値を適用し、さらにショット選定の規準となるショット・スコアＳｈｔとしては、
Ｓｈｔ＝３×Ａ１＋２×Ｂ＋２×Ｃ＋２×Ｄ＋Ｅ＋Ｆ＋Ｇ＋Ｈ
を適用する。このように、当該出演者Ａ１が出ているショットのみ重み付け（Ｗ１＝３）とし、その他の主な出演者は、一般の出演者（Ｗ１＝１）とみなす。そして、ショット・スコアＳｈｔが最大のショットを選定するか、又は後述するサブルールに基づいて選定する。
【００７５】
また、主な出演者のうち出演シーンが少ない出演者の場合は、閾値を０．１だけ緩めて適用する。
【００７６】
以上のようにして初期設定が完了すると、処理過程に入る。
【００７７】
プロセスＰｒ５以降は、ショットとシーンの自動分解過程である。なお図１に示す本実施形態ではショット区切りを自動的に実行する自動分解の方法を適用しているが、この構成に限定されることなく、後述の装置の実施形態で説明がなされるように、操作者が所望の区切りを任意に設定してショット分解する構成も有効である。
【００７８】
プロセスＰｒ５において自動検出過程を開始し、プロセスＰｒ６において本編映像データ（ＭＰＥＧ１やＭＰＥＧ２規格による）ＤＴ２からショットを自動検出して、検出結果からプロセスＰｒ７においてショット・インデクス表を生成させる。このショット・インデクス表には、ショット番号と、このショットの始点及び終点のタイムコードが記憶される。
【００７９】
なお、映像タイトルをショットに自動分解するツールとして、例えばＭＰＥＧ画像処理を応用したアプリケーションソフトＳｌｉｐｃｌｉｐがあり、これにより一例として９５分の映画タイトル「マスク」を処理すれば、図３及び図４に示されるように、１２７４のショット（インデックス）が得られる。
【００８０】
次いでプロセスＰｒ８でシーンの自動検出を実行する。ここでは、上記のように自動分解された連続した数個のショットをまとめて、１個のシーンとし、プロセスＰｒ９においてシーン・インデクス表を作成する。このシーン・インデクス表には、シーン番号と、このシーンの始点となるショット番号及び終点となるショット番号が、いずれもタイムコードと対応連結されて記憶される。
【００８１】
このシーン分解についても同様に、上記Ｓｌｉｐｃｌｉｐで映像を見ながら、物語の意味的単位でフラグを立て、ショットをまとめてシーンに編成することができる。上記の映画タイトル「マスク」を例にとれば、図３及び図４に示されるように、１２７４のショットが１５０のシーンにまとめられる。
【００８２】
以上でショット及びシーンの分解が完了すると、次いでプロセスＰｒ１０以降で、各シーン評価値即ちシーン・スコアを決定するためのシーン評価過程に入る。
【００８３】
なお、プロセスＰｒ１０での処理に先立って、操作者によって各シーンが物語の意味的重要度に応じて特定のレベル（例えば２０段階）で採点され、この採点結果が与件として、入力される。
【００８４】
操作者によって実行される、このようなシーンの採点法の例として、フライターク手法がある。これによればシーンの意味が、物語の複雑化に向かっていれば（＋）、鎮静化に向かう場合は（−）とする。複雑化、鎮静化の度合いを各々１０段階に分け、−１．０〜０．０〜＋１．０の２１段階の中で採点する。複雑化と鎮静化の評価は、新たな問題の発生やその解決といった情報の側面と、複雑化による心理的緊張感の高揚や鎮静化による精神的解放感、カタルシスといった心理的側面の両面から、操作者が映像を見て判断することになる。
【００８５】
あるいは、他の手法によって採点評価がなされる。
【００８６】
前記の採点結果が、プロセスＰｒ１０で与件として外部から入力されると、プロセスＰｒ１１において、これを当該シーンのシーン・スコアとする。そしてシーン・スコア表（図４）を編成する。シーン・スコア表には、各シーン番号とそのシーンのシーン・スコアを対応付けて記憶させる。
【００８７】
上記のようにしてシーン・スコア表が編成されると、図２に移り、次いでプロセスＰｒ１２において映像推移特性グラフの作成及び関連データの生成を行う。
【００８８】
まずシーン・スコア表を参照し、シーンの推移に伴うシーン・スコアの積算値を算出する。第ｎ番目のシーンのシーン・スコアをＳｃ（ｎ）とすると、第ｎ番目のシーンでのシーン・スコアの積算値Ｆ（ｎ）は、漸化式
Ｆ（ｎ）＝Ｓｃ（ｎ）＋Ｆ（ｎ−１）
で示される。ここで、Ｆ（ｎ−１）はシーン（ｎ−１）までのシーン・スコアの積算値である。この積算値Ｆ（ｎ）の推移は、図４に数値で示されている。
【００８９】
これを、横軸をシーン番号、縦軸を積算値としてプロットすることにより、図３に示されるように、映像推移特性が折れ線グラフで表示される。このグラフは、物語の構造を捉え、意味あるシーンの抽出に役立つ。なお横軸は時間軸（シーンの終了時点のタイムコード）とすることも可能である。
【００９０】
この映像推移特性グラフに基づき、主要な山と谷の算出、谷から山への上昇値の算出、主要スロープ即ち上り坂と下り坂の決定、選択シーンの表示がなされる。
【００９１】
グラフ上の微細な山と谷の中から所定のルールにより、主な山Ｐ（Ｐｅａｋ）と主な谷Ｖ（Ｖａｌｌｅｙ）を抽出する。
【００９２】
主要山谷を求めるため、前記の初期設定がなされたギャップ値（山谷ギャップ値）Ｇが適用される。
【００９３】
ここでギャップ値Ｇは、その絶対値が上り坂と下り坂とで同じ値に設定されるのが一般的である。例えばデフォルト値で、上り坂及び下り坂につきＧ＝０．８とする。
【００９４】
以下、このデフォルト値を例に説明する。
【００９５】
主な山Ｐｉ（ｉ＝１、２、３、‥‥）：当該シーンにおける積算値をノードとして、その直前の谷における積算値と比べて０．８ポイントに達する積算値の上昇があり、かつ当該シーンから続く下り坂が、−０．８ポイントに達するギャップ（すなわちギャップの絶対値が０．８ポイントに達する）で下降がある場合、そのノードを主な山Ｐｉとする。
【００９６】
ここで、最初の山Ｐ１では、直前の谷はスタート点となる。スタート点の積算値は０である。
【００９７】
主な谷Ｖｉ（ｉ＝１、２、３、‥‥）：当該シーンにおける積算値をノードとして、その直前の山における積算値と比べて−０．８ポイントに達する積算値の下降があり、かつ、そこから続く上り坂が０．８ポイントに達するギャップで上昇がある場合、そのノードを主な谷Ｖｉとする。尚、始点をＶ０とする。
【００９８】
なお上記で、上り坂での設定ギャップＧ＝０．６とし、下り坂での設定ギャップＧ＝−０．８とするように、上り坂と下り坂で別個にギャップＧを設定することも可能である。
【００９９】
このようにして、図３に示されるように、主な山Ｐ（ｉ）と主な谷Ｖ（ｉ）が、時間の早い順にＶ０、Ｐ１、Ｖ１、Ｐ２、Ｖ２、・・・Ｐｎ、Ｖｎとして並ぶ。これらの山谷の傾向により、物語の起・承・（複数のエピソードからなる）・転・結に分類できる。
【０１００】
Ｖ（ｎ−１）からＰｎの上り坂をＵＳｎ（Ｕｐ  Ｓｌｏｐｅ  ｎ）とし、ＰｎからＶｎの下り坂をＤＳｎ（Ｄｏｗｎ  Ｓｌｏｐｅ  ｎ）とする。
【０１０１】
物語を構成するエピソードは、山Ｐｎを挟む上り坂ＵＳｎと下り坂ＤＳｎで構成されているものと捉え、エピソードの大きさを上り坂の上昇値ではかるものとする。エピソードの大きさＥｐは、
Ｅｐ＝ＹＰｎ−ＹＶ（ｎ−１）
ここでＹＶ（ｎ−１）は一つ前の谷であるＶ（ｎ−１）におけるシーン・スコアの加算値Ｆ（ｎ−１）、ＹＰｎは今回の山であるＰ（ｎ）におけるシーン・スコアの加算値Ｆ（ｎ）である。
【０１０２】
次いで主要スロープが決定される。主要上り坂は、上昇値の大きい方から順位付けする。主要下り坂は、下降値の絶対値の大きい方から順位付けする。
【０１０３】
また、自動検出時のデフォルト値の一例として、起・承・転・結を次のようにして捉える。
起：ＵＳ１（＝最初のエピソードの上り坂）
承：ＤＳ１〜ＤＳ（ｚ−１）、ただしＤＳｚを最後のエピソードの下り坂とする。
転：ＵＳｚ（＝最後のエピソードの上り坂）
結：ＤＳｚ（＝最後のエピソードの下り坂）
【０１０４】
さらに、上記のようにして自動検出された起・承・転・結に対し、編成者が任意に修正を加えて目的効果に適った起・承・転・結とすることができる。図３に示される起・承・転・結は、このような自動検出された起・承・転・結に基づいて、編成者が区切り調整を加えたものである。
【０１０５】
次いでプロセスＰｒ１３以降で、抽出シーンを選定する。上記のグラフ及びデータ及びシーン・スコアにより、前記のシーンの抽出条件、例えば閾値に達するシーンを抽出して、適用シーンにフラグを立てる。
【０１０６】
なお、閾値には、導入部（ＵＳ１）においては前記のように複雑化を反映させたシーン評価値Ｆ（＋）≧０．５や、鎮静化を反映させたシーン評価値Ｆ（−）≦−０．７を適用し、導入部（ＵＳ１）以外については、複雑化を反映させたシーン評価値Ｆ（＋）≧０．６と、鎮静化を反映させたシーン評価値Ｆ（−）≦−０．８を適用する。
【０１０７】
また、前記の山と隣接する谷との間の領域毎に、異なる閾値を設定することもできる。すなわち、山と谷の番号毎に閾値を設定し、又は上り坂や下り坂毎に閾値を設定できる。
【０１０８】
さらに、谷から続き隣接する山に至る上り坂か、山から続き隣接する谷に至る下り坂に応じて、閾値を設定することができる。
【０１０９】
さらに、一般的に、映像の意味的推移に基づき設定され与件として与えられる、鎮静化を反映させた負のシーン評価値をもつシーンのインパクトは、絶対値が同じである、複雑化を反映させた正のシーン評価値を持つシーンのインパクトよりも低い。したがって、鎮静化を反映させたシーン評価値に適用する閾値の絶対値を、複雑化を反映させたシーン評価値に適用する閾値の絶対値よりも大に設定することが好ましい。
【０１１０】
また、要約映像としてスコアが高いシーンやピークでかつショット・スコアが高い映像のみを抽出してアセンブルすると、インパクトが強いカット同士が並んで予期せぬモンタージュ効果を生じ、誤解を招くような映像の流れとなることがある。これを未然に防ぐにために、ほぼエピソードの変わり目に相当する谷の部分からスコアが弱い情景シーンを抽出して加えることによって、自然な流れの要約映像が得られる。少なくとも不自然なモンタージュ効果を削減することができる。
【０１１１】
なお、谷から谷の間は１つのエピソードとして関連する映像が続くため、例えば、
Ａ：主な出演者が出ている。
Ｂ：台詞がある。
Ｃ：叫び声、大声、爆発音及びその他の音響効果が強調されている。
Ｄ：人物がバストショット（大写し）である。
などの条件が満たされているショットである密度の濃い映像の連続でプラスのモンタージュ効果が得られる場合が多い。
【０１１２】
そこで、本発明では、例えば、セマンティック・スコアの絶対値が閾値以下でかつそのショットにおける特定の映像特性を含まないショットを谷又はそれに最も近接するシーン（同距離にある場合は上り坂のシーンを優先）から１つ抽出し、本編の時間順にアセンブルを行う。
【０１１３】
セマンティック・スコアは各種要約映像をはじめ、本編映像の重要部分の検索やブラウジングに活用するなど、重要なメタ情報である。これのスコアリングは、内容を熟知した個人でも可能であるが、より信頼性のあるデータとするために複数人の評価からコンテンツを代表する総合スコアを求めることが望ましい。この評価者はコンテンツの作成関係グループの場合もあり、また、例えばターゲットとなる視聴者を代表する特定モニタを集めて評価してもらうなどの手法がとられる。
【０１１４】
セマンティック・スコアは物語の複雑化のシーンをプラス、鎮静化のシーンをマイナスとし、その強さを０〜１．０の値としている性格上、符号が異なる場合は絶対値が大きいシーンでも単純平均をとると０に近い値となり、シーンのインパクトを性格に反映することができない。
【０１１５】
そこで、複数シーンスコアから総合シーンスコアを次のようにして生成する。値の大きさは絶対値平均で求め、符号はサンプルの符号の多数決により決定する。
【０１１６】
すなわち、有効なシーンスコアが複数セットある場合には、サンプル数をｎ、各サンプルのシーンスコアＳとして、
【０１１７】
【数１】
0004449216.tif 000002
【０１１８】
とする。
【０１１９】
上記総合シーンスコアの符号はｎサンプルの符号の多数決により決定する。
【０１２０】
同値の場合は、プラスグループ値の総和とマイナスループ値の総和とを比較し、大きい方の符号を上記総合シーンスコアの符号とする。
【０１２１】
さらに、同値の場合は、総合シーンスコア＝０とする。
【０１２２】
なお、単純平均で大きさと符号を同時に決め、分散の大きさを勘案して抽出シーンを決めることも可能であるが、この場合はシーンスコアの積分値であるセマンティックグラフの形が歪んでしまい、ピークの検出などに支障を来す。
【０１２３】
さらに、例えば映像の推移において「転」や「結」の部分では、物語の核心、すなわち推理物での真犯人の開示などのシーンがあり、これらのシーン・スコアは一般的に大であるから、抽出シーンの候補となる可能性が大きい。しかし、プレビュー映像でこれらを開示するのは、本編映像の鑑賞意欲を著しく損ねるため、このような核心シーンは意識的に除外することが好ましい。
【０１２４】
したがって、「転」や「結」の部分では、前記の閾値をさらに厳しくするといったパラメータの変更調整を行うか、又は抽出シーンの適合性を別途チェックすることが好ましい。
【０１２５】
上記のようにして抽出すべきシーンが、パラメータ及びルールにしたがい自動選定されると、これら抽出シーンを図３のグラフ上に、例えば縦線などにより強調修飾を施して自動表示することができる。
【０１２６】
以上の過程により、抽出シーンが特定された。
【０１２７】
次いで、これら各抽出シーンにつき、プロセスＰｒ１７Ａ以降で、適用すべきショットを選定する。
【０１２８】
なお、プロセスＰｒ１７Ａでの処理に先立って、プロセスＰｒ１５において、操作者によって各ショットが映像特性上の各項目を備えるかのチェックがなされ、このチェック結果が与件として、プロセスＰｒ１６へ入力される。
【０１２９】
操作者によって実行される、このような項目チェックの例を説明する。
【０１３０】
各ショットの映像特性上の項目として、以下のＡ〜Ｈを採用する。
【０１３１】
Ａ・主な出演者が出ている（予め選定した主演・助演Ａ１、Ａ２、Ａ３の何れかが出ている）。重み付けのデフォルト値＝３
Ｂ・台詞がある。重み付けのデフォルト値＝２
Ｃ・叫び声、大声、爆発音及びその他の音響効果が強調されている。重み付けのデフォルト値＝２
Ｄ・ＢＧＭがもりあがる。重み付けのデフォルト値＝２
Ｅ・その他の出演者がいる。重み付けのデフォルト値＝１
Ｆ・人物がバストショット以上で出ている。重み付けのデフォルト値＝１
Ｇ・激しい画面変化がある。重み付けのデフォルト値＝１
Ｈ・ＳＦＸやフラッシュなどの特殊画像効果がある。重み付けのデフォルト値＝１
【０１３２】
前記の作業がマニュアルで行われる場合は、例えば前記のＳｌｉｐｃｌｉｐで映像を見ながら、表計算ソフト中に予め用意したテンプレート上に映像特性の有無を１、０で採点し、書き込む等の処理がなされる。このようにして、映像効果に寄与するこれら項目Ａ〜Ｈの有無が、前記抽出シーンを構成する全ショットにつきチェックされ、有無情報が与件として外部から入力される。
【０１３３】
プロセスＰｒ１６では、与えられたチェック結果に基づき、図５及び図６に示されるような表を作成し、さらに各ショットにつきショット・スコアを算出する。
【０１３４】
図５は、あらすじ型モードによって選択されたシーンのショット・スコアを示した例であり、図６は、出演者型モードの例である。主な出演者（ティナ）が登場するショットが網点で強調表示されている。
【０１３５】
ショット・スコアは、これら項目Ａ〜Ｈの有無情報に基づき、映像特性に与えられた前記の重み付け係数Ｗ１〜Ｗ８を掛け、これらを積算することによって得られる。
【０１３６】
例えばあらすじ型プレビューの場合、ショット・スコアＳｈｃは、
Ｓｈｃ＝３×Ａ＋２×Ｂ＋２×Ｃ＋２×Ｄ＋Ｅ＋Ｆ＋Ｇ＋Ｈ
として算出される。
【０１３７】
ここで、プロセスＰｒ１６において実行される、上記の項目Ａ〜Ｈの確認及びショット・スコアＳｈｃの算出は、例えば暫定的に作成される、図５及び図６に示される表と、対応する重み付け係数Ｗ１〜Ｗ８を読み出し対応させた上で演算することにより、例えばマイクロコンピュータの論理処理機能を利用して、自動実行させることができる。
【０１３８】
以上のようにして、各ショットのショット・スコアが生成される。
【０１３９】
なお、上記では本編映像からの各ショットの上記項目Ａ〜Ｈ有無の採点が操作者によってなされ、与件として外部から情報入力されるものとしたが、これに限定されることなく、これら項目の有無の採点を自動化することも可能である。
【０１４０】
例えば、上記の項目Ａの、主な出演者が出ていることの有無や、項目Ｂの、台詞があることの有無は、予め選定した主演・助演Ａ１、Ａ２、Ａ３などの台詞音声を独立したチャネルに記録している本編映像を用いて、この音声チャネルから閾値以上の音レベルの発生を自動検出することにより、項目Ａや項目Ｂの有無採点を自動化できる。
【０１４１】
なお、このような録音は、とりわけ洋画のふきかえや、アフレコ構成において容易に準備することが可能となっている。
【０１４２】
同様に、項目Ｃの、音響効果が強調されていることの有無についても、当該音声チャネルから閾値以上の音レベルの発生を自動検出することにより、有無採点を自動化できる。
【０１４３】
この他、特殊映像効果の有無についても、画像認識の技法により自動認識評価することが可能である。
【０１４４】
したがって、本実施形態における上記のプロセスＰｒ１５では、外部の操作者からの与件の入力によるもののみではなく、自動実行するものについても含まれる。なお、プロセスＰｒ１６におけるショット・スコア算出過程は、本実施形態においては前記のようにマイクロコンピュータの論理処理機能を利用した自動実行となる。
【０１４５】
また、上記の、各ショットが映像特性上の各項目を備えるかのチェックからショット・スコア算出過程に至る過程は、上記のようにシーンが選択された後に実行されることが効率上好ましいが、これに限定されることなく、例えば前記のシーン評価の過程と平行して、あるいはそれに先立って実行することもできる。ただしこの場合は、処理対象となるショットの数が多くなる。
【０１４６】
次いでプロセスＰｒ１７Ａにおいて、最適ショットの自動算出がなされる。この自動算出で適用される算出ルールが、第二の条件である。
【０１４７】
適用される算出ルールの例として、抽出された各シーン内の各ショットのスコアを自動検索し、最高のショット・スコアを持つショットを最適ショットとする。また、サブルールとして、同点のショット・スコアを持つショットがあれば、早いショットから採用される。また、ショット・スコアの得点がない場合は、そのシーン冒頭のショットが採用される。
【０１４８】
この処理をマイクロコンピュータの論理処理機能を利用した自動実行とする際には、例えば当該シーン内の最初のショットの番号とショット・スコアをバッファメモリへ格納する。ここでショット・スコアがゼロ値であっても、格納するようにする。
【０１４９】
次いで、二番目のショットのショット・スコアを読み出して、バッファメモリへ格納されたショットのショット・スコアと比較し、二番目のショットのショット・スコアがバッファメモリ内のショット・スコアよりも大であれば、二番目のショットの番号とショット・スコアによりバッファメモリ内容を更新する。
【０１５０】
一方、二番目のショットのショット・スコアが、ゼロ値も含めて、バッファメモリ内のショット・スコアと等しいか、又は小であれば、バッファメモリ内容を更新しない。このようにして当該シーン内の全てのショットにつき上記の検索と比較を実行することにより、最適ショットがバッファメモリ内に格納された状態となる。
【０１５１】
また別のサブルールとして、シーン内でショット・スコアが高い順に指定数のショットの自動取り出しを行い、秒数を限って（例えば各ショット２秒）時間順に自動配列することも可能である。
【０１５２】
次に、プロセスＰｒ１７Ｂにおいて特定区間セグメントによる最適ショット区間のフィルタリングを行う。
【０１５３】
すなわち、プロセスＰｒ１７Ｂでは、プロセスＰｒ１７Ａで抽出されたショット又はシーンの時間を、別途定められた特定区間を示すセグメント情報にてフィルタリングすることによって、圧縮された要約映像を抽出する。
【０１５４】
上記セグメント情報は、例えば音声信号分析や画像テロップ部分を検出する画像分析によって検出された台詞がある部分の映像区間を示す情報が有効である。これにより、重要なシャットの中でも要約映像として特に効果的な部分のみを抽出することができる。このセグメント情報は、ショットの映像特性評価の過程で自動検出若しくは手動で区間指定することができる。なお、音声信号分析により台詞の部分の検出には、例えば特開平１０−３０１５９３号に記載されている音声区間と非音声区間を判別する手法や特開平１１−１１９７９６号に記載されている背景雑音のレベルによることなく音声信号区間と背景雑音区間を高精度に区別する手法を採用することができる。又、全く別の過程で得られた与件情報として取り入れることもできる。
【０１５５】
上記のようにして、抽出された各シーンすべてについての最適ショットが選定されると、プロセスＰｒ１８において圧縮映像データの算出がなされる。算出される値は、圧縮映像ショット数、圧縮映像合計時間、平均ショット時間となる。
【０１５６】
次いでプロセスＰｒ１９において、圧縮映像合計時間の自動調整がなされる。
【０１５７】
圧縮映像合計時間が、前記の指定されている所望の映像時間内に収まらない場合は、導入部を含めて前記の閾値をマイナス側、プラス側の順で、絶対値で０．１ポイントだけ自動的に高めて厳しくし、ＤＳ１からはじめてショットのタイムコードが若い順に適用外となるショットを外して合計時間を再算定し、合計時間が規定時間に納まるまで順次削減し、最後にＵＳ１内の該当ショットを外して、時間を自動的に調整していく。
【０１５８】
さらに、この過程において、上記の自動編成により編入されているショットの中で、目的効果上明らかに不適切なショットの削除調整がなされる。
【０１５９】
上記を反復して、圧縮映像合計時間が所望の映像時間に合致するまで自動調整がなされ、適用ショットが確定する。
【０１６０】
次いで、プロセスＰｒ２０において、上記の各データが最終チェックされ、確定される。また、上記の各過程で選定がなされた各種のデータが、セマンティック・スコアとして編成される。
【０１６１】
図７は、このようにして編成されたセマンティック・スコアの例である。同図のように、ショット毎又はシーン毎の区切り（タイムコードで表示）、映像意味的評価値（シーン・スコア）、映像特性評価値（ショット・スコア）、各出演者の出現ショット（細線で表示）、せりふの出現ショット（太線で表示）、キーワードの出現ショット、音響効果、画像効果などが、シーンの推移に沿って相互に関連付けられて記録されている。
【０１６２】
次に、プロセスＰｒ２１において、上記で確定した適用ショットのタイムコードに基づき、本編映像データＤＴ２から適用ショットの映像を順次、切り出してコピーし、圧縮映像データＤＴ３とする。
【０１６３】
最後に、プロセスＰｒ２２において、圧縮映像データＤＴ３をアセンブルし、プレビュー映像を編成する。アセンブルの順序は、基本的に本編映像の時間順とする。
【０１６４】
また、各プレビューモードに選択されたシーンを視覚的に確認・チェックするために、グラフの折れ線上に選択されたシーンをここで強調表示することもできる。この際に、関連データとして選択されたシーン数、合計時間、シーンの平均時間を表示する。
【０１６５】
アセンブルされたプレビュー映像は、ハードディスク等の記録装置へ記録保存する。必要に応じてこのプレビュー映像を適切なメディアに取り出し、利用する。
【０１６６】
本実施形態に係る方法によれば、シーン・スコアとショット・スコアとを、容易にかつ効率的に作成することができる。しかも映像特性グラフで物語の構造とプレビューシーンの位置を確認しながら編集できるため、物語の全貌を把握した適切なプレビュー映像の作成が容易にできる。
【０１６７】
また、シーン選択がなされることで第一段階のスクリーニングを行い、スクリーニングされたシーン内のショットのみにつき、ショット・スコアの検討を含む第二段階のスクリーニングを行うので、演算回数が削減され、よって迅速な処理が可能になる。
【０１６８】
また、圧縮モードの選択即ち、所望のモードに対応するプレビュー編成ルールを選択することにより、あらすじ型、ハイライト型、主な出演者型等の目的に合致したプレビュー映像を容易に生成させることができる。
【０１６９】
また、本実施形態によれば、前記のパラメータやルールを、初期設定時のみでなく、編成の進捗中に変更や更新・修正することにより、圧縮映像の時間調整や、タイトルのジャンル特性に適したプレビュー映像の制作ができ、よってフレキシブルな制作が可能になる。
【０１７０】
次に、本発明に係る映像情報の編集方法の一実施形態を説明する。
【０１７１】
図９は、本実施形態に係る映像情報の編集方法の要部の過程説明図である。
【０１７２】
この映像情報の編集方法は、セマンティック・スコアの記録保存を特徴とするものであり、そのプロセス構成は、プロセスＰｒ１〜Ｐｒ１９と、プロセスＰｒ２０’を備えて構成される。
【０１７３】
このうち、各プロセスＰｒ１〜Ｐｒ１９は前記の図１〜図２に示された前記実施形態におけると同様であり、よって説明は省略される。
【０１７４】
プロセスＰｒ２０’では、プロセスＰｒ２０’に至るまでの各過程で発生し、あるいは使用された、外部からの入力信号がサンプリングされたデータや、同定や選定がなされた各種のデータが相互に関連付けられた、例えば前記図７に示されたセマンティック・スコアとして、表形式に編成され、記録保存される。この記録保存は、磁気ディスク装置等になされる。
【０１７５】
この記録保存されたセマンティック・スコアは、任意の時点で読み出しが可能であり、また外部への供給も可能である。
【０１７６】
これにより、セマンティック・スコアを任意の時点で読み出して、セマンティック・スコアのみの使用に供することができる。
【０１７７】
次に、本発明に係る映像情報の編集方法の他の実施形態を説明する。
【０１７８】
図１０は、本実施形態に係る映像情報の編集方法の要部の過程説明図である。  この映像情報の編集方法は、セマンティック・コードの編成とその出力及び記録保存を特徴とするものであり、そのプロセス構成は、プロセスＰｒ１〜Ｐｒ１９と、プロセスＰｒ２０’’を備えて構成される。
【０１７９】
このうち、各プロセスＰｒ１〜Ｐｒ１９は前記の図１〜図２に示された前記実施形態におけると同様であり、よって説明は省略される。
【０１８０】
プロセスＰｒ２０’’では、プロセスＰｒ２０’’に至るまでの各過程で発生し、あるいは使用された、外部からの入力信号がサンプリングされたデータや、同定や選定がなされた各種のデータから、プレビュー映像の編成に必要なデータのみが取り出されてコード化され、セマンティック・コードが編成される。
【０１８１】
セマンティック・コードは、一例として図８に示されるように、抽出シーンのみについて映像意味的評価値（シーン・スコア）、適用ショットのみについて、その映像特性評価値（ショット・スコア）及びタイムコードによる区切り、各出演者の出現ショット、キーワードの出現ショットなどのデータが、シーンの推移に沿って相互に関連付けられ、コード化されている。
【０１８２】
このセマンティック・コードは、任意の時点で外部への出力供給が可能である。さらに然るべき記録手段に記録保存することにより、任意の時点での読み出しと使用を可能にする。
【０１８３】
これにより、セマンティック・コードを任意の時点で出力させ、又は読み出して、セマンティック・コードのみの使用に供することができる。
【０１８４】
次に、図１１は本発明に係る抽出映像の編成装置の一実施形態のブロック構成図である。また図１２は、この装置の映像推移特性表に基づき画面表示された映像推移特性グラフの一例を示す図である。
【０１８５】
図１１に示されるように、本実施形態に係る抽出映像の編成装置Ａｔｈｒ１は、外付けの記録メディア再生装置ＶＰが接続されるオーサリング装置であり、マイクロコンピュータに代表される中央演算処理装置ＣＰＵ、混成半導体メモリにいずれも読み出し専用に搭載された、中央演算処理装置ＣＰＵによって読み取り実行可能な入力手段Ｐｒｇ１１及び表示編成手段Ｐｒｇ７、中央演算処理装置ＣＰＵによって読み取り実行可能なプログラムが格納された読み出し専用メモリＲＯＭから成る記録媒体２、ＤＲＡＭなどの半導体メモリから成る一時記憶装置３、画面表示のためのモニタ装置Ｍｎｔ、編成されたプレビュー映像信号の書き込み・読み出し可能な映像記録装置ＶＲを備えている。この他、全体の制御回路や電源回路や入出力端子類が備わっているが、図示は省略されている。
【０１８６】
入力手段Ｐｒｇ１１は、ショット／シーン区切入力手段Ｉｐ１、映像意味的評価値入力手段Ｉｐ２、シーン指定入力手段Ｉｐ３、パラメータ設定手段Ｉｐ４、プレビュー映像編成ルール設定手段Ｉｐ５、映像特性上の評価値入力手段Ｉｐ６を備える。
【０１８７】
記録媒体２は、不揮発性半導体メモリ等のワンチップ構成とされ、いずれもコンピュータによって実行されるプログラムである、ショット・インデクス表編成手段Ｐｒｇ１、シーン・インデクス表編成手段Ｐｒｇ２、シーン・スコア表編成手段Ｐｒｇ３、映像推移特性編成手段Ｐｒｇ４、適用シーン抽出手段Ｐｒｇ５、ショット・スコア編成及びショット抽出手段Ｐｒｇ６、プレビュー映像時間調整手段Ｐｒｇ８、プレビュー映像編成手段Ｐｒｇ９を備える。
【０１８８】
上記の各プログラムの実行によって、一時記憶装置３内には、ショット・インデクス表Ｔａｂ１、シーン・インデクス表Ｔａｂ２、シーン・スコア表Ｔａｂ３、映像推移特性表Ｔａｂ４、抽出シーン表Ｔａｂ５、抽出ショット表Ｔａｂ６が生成される。
【０１８９】
表示編成手段Ｐｒｇ７も、コンピュータによって実行されるプログラムであるが、記録媒体２とは別のチップに搭載されている。このチップは、表示編成手段Ｐｒｇ７を搭載するとともに、モニタ装置Ｍｎｔの駆動回路を兼備する。
【０１９０】
映像記録装置ＶＲは、映像信号をテープ又はディスク形状の磁気記録メディア又は光記録メディアへ再生可能に記録するものである。
【０１９１】
ショット／シーン区切入力手段Ｉｐ１は、ショット／シーン区切指示ｉ１を受けてショット・インデクス表編成手段Ｐｒｇ１とシーン・インデクス表編成手段Ｐｒｇ２へ区切指示を送出する。ショット／シーン区切指示ｉ１は、手動入力によるものの他、前記実施形態におけるような自動入力も可能である。
【０１９２】
映像意味的評価値入力手段Ｉｐ２は、映像意味的評価値ｉ２を与件として外部から受けてシーン・スコア表編成手段Ｐｒｇ３へ評価値を送出する。
【０１９３】
シーン指定入力手段Ｉｐ３は、シーン指定入力値ｉ３を受けてシーン・スコア表編成手段Ｐｒｇ３へシーン指定情報を送出する。
【０１９４】
パラメータ設定手段Ｉｐ４は、パラメータ設定値ｉ４を受けて、シーン選定に関わるパラメータを適用シーン抽出手段Ｐｒｇ５へ、ショット選定に関わるパラメータをショット・スコア編成及びショット抽出手段Ｐｒｇ６へ、またプレビュー映像時間設定値をプレビュー映像時間調整手段Ｐｒｇ８へ、夫々送出する。
【０１９５】
プレビュー映像編成ルール設定手段Ｉｐ５は、モードごとのプレビュー映像編成ルール指示ｉ５を受けて、シーン選定に関わるルールを適用シーン抽出手段Ｐｒｇ５へ、ショット選定に関わるルールをショット・スコア編成及びショット抽出手段Ｐｒｇ６へ、夫々送出し、またプレビュー映像時間調整手段Ｐｒｇ８からルール調整指示を受ける。これによるルール調整は、適用シーン抽出手段Ｐｒｇ５とショット・スコア編成及びショット抽出手段Ｐｒｇ６へ送出されるプレビュー映像編成ルールに反映される。
【０１９６】
映像特性上の評価値入力手段Ｉｐ６は、映像特性上の評価値又は評価に関わる情報ｉ６を受け、ショット・スコア編成及びショット抽出手段Ｐｒｇ６へ送出する。なお情報ｉ６の例としては、ショットの評価値そのもの、或いは、ショットの評価に関与する映像項目の有無情報、等がある。情報ｉ６は、手動入力によるものの他、自動入力も可能である。
【０１９７】
以下、抽出映像の編成装置Ａｔｈｒ１の動作を説明する。
【０１９８】
最初に、映像タイトルを、ショットに分解して区切り情報を記憶する。操作者が記録メディア再生装置ＶＰから本編映像Ｓｇを再生しながら、導入部のタイトル映像や不要部分の映像をスキップし、ショット分解すべき部分まで映像が推移すると、図示されないスイッチやボタンやキーを操作して、ショット分解開始の指示入力ｉ１を発生させる。これ以降は、ショット・インデクス表編成手段Ｐｒｇ１から始まる上記各手段の動作となる。
【０１９９】
上記各手段の動作を、添付の動作フローチャートに沿って説明する。
【０２００】
ショット・インデクス表編成手段Ｐｒｇ１は、図１３に示されるように、ショット／シーン区切入力手段Ｉｐ１からショット区切開始指示を受けると（ステップＳ１０）、記録メディア再生装置ＶＰへ再生スタートの制御信号Ｃｇを出力し（ステップＳ１１）、記録メディア再生装置ＶＰから本編映像Ｓｇを取り込み、このショット区切指示のタイミングで本編映像Ｓｇからタイムコード等を切り出し（ステップＳ１２）、各ショットとそのタイムコードとを対応させたデータをショット・インデクス表Ｔａｂ１へ記憶する（ステップＳ１３）。
【０２０１】
ショット区切終了指示を受けると（ステップＳ１４）、記録メディア再生装置ＶＰから本編映像Ｓｇを取り込み、このショット区切指示のタイミングで本編映像Ｓｇからタイムコード等を切り出し（ステップＳ１５）、各ショットとそのタイムコードとを対応させたデータをショット・インデクス表Ｔａｂ１へ記憶し（ステップＳ１６）、記録メディア再生装置ＶＰへ再生ストップの制御信号Ｃｇを出力する（ステップＳ１７）。
【０２０２】
シーン・インデクス表編成手段Ｐｒｇ２は、図１４に示されるように、ショット／シーン区切入力手段Ｉｐ１からシーン区切開始指示を受けると（ステップＳ２０）、記録メディア再生装置ＶＰへ再生スタートの制御信号Ｃｇを出力し（ステップＳ２１）、記録メディア再生装置ＶＰから本編映像Ｓｇを取り込んで現在のアドレス（カレントアドレスすなわち現在のタイムコード）を切り出し（ステップＳ２２）、ショット・インデクス表Ｔａｂ１からデータを取り込み、カレントアドレスと対照して、このシーンを構成する始点のショット番号を確定させ（ステップＳ２３）、タイムコード付きのショットデータとこのシーンを対応させた情報をシーン・インデクス表Ｔａｂ２へ記憶する（ステップＳ２４）。
【０２０３】
シーン区切終了指示を受けると（ステップＳ２５）、本編映像Ｓｇを取り込んで現在のアドレス（カレントアドレスすなわち現在のタイムコード）を切り出し（ステップＳ２６）、ショット・インデクス表Ｔａｂ１からデータを取り込み、カレントアドレスと対照して、このシーンを構成する終点のショット番号を確定させ（ステップＳ２７）、タイムコード付きのショットデータとこのシーンを対応させた情報をシーン・インデクス表Ｔａｂ２へ記憶し（ステップＳ２８）、記録メディア再生装置ＶＰへ再生ストップの制御信号Ｃｇを出力する（ステップＳ２９）。
【０２０４】
また、シーン抽出のみによるプレビュー映像編成の場合には、シーン区切指示のタイミングでタイムコード等を切り出し、シーン・インデクス表Ｔａｂ２へ記憶する。
【０２０５】
シーン・スコア表編成手段Ｐｒｇ３は、図１５に示されるように、シーン指定入力手段ＩＰ３からシーン指定情報を受けて（ステップＳ３０）、シーン・インデクス表Ｔａｂ２を参照して指定シーンの始点と終点を読み出し（ステップＳ３１）、記録メディア再生装置ＶＰへサーチ及び当該シーン再生の制御信号Ｃｇを出力し（ステップＳ３２）、このシーンの再生が終了すると（ステップＳ３３）、映像意味的評価値入力手段Ｉｐ２から評価値を受け（ステップＳ３４）、この評価値と、このシーン番号と、このシーンを構成するショット情報とを、シーン・スコア表Ｔａｂ３へ記憶する（ステップＳ３５）。
【０２０６】
映像推移特性編成手段Ｐｒｇ４は、図１６に示されるように、シーン・スコア表Ｔａｂ３からデータを読み出し（ステップＳ４０）、シーン・スコア（Ｆ値）を積算し（ステップＳ４１）、主要な山と谷を算出し（ステップＳ４２）、スロープ上昇値を算出し（ステップＳ４３）、主要スロープを決定して（ステップＳ４４）、これらを映像推移特性表Ｔａｂ４へデータ書き込みする（ステップＳ４５）。
【０２０７】
適用シーン抽出手段Ｐｒｇ５は、図１７に示されるように、パラメータ設定手段Ｉｐ４からパラメータを受け、プレビュー映像編成ルール設定手段Ｉｐ５からモード毎のプレビュー映像編成ルールを受け（ステップＳ５０）、シーン・スコア表Ｔａｂ３又は映像推移特性表Ｔａｂ４からデータを取り込み、抽出シーンを選定して（ステップＳ５１）、このシーン番号と、このシーンを構成するショット情報を抽出シーン表Ｔａｂ５へ記憶する（ステップＳ５２）。
【０２０８】
図１８は、ショット・スコア編成及びショット抽出手段Ｐｒｇ６の、二段階スクリーニングによる動作を示す。
【０２０９】
パラメータ設定手段Ｉｐ４とプレビュー映像編成ルール設定手段Ｉｐ５からモード指定及びショット抽出に関わるパラメータとルールを取り込み（ステップＳ６１）、取り込んだルールによって指定されたモードに基づいて、抽出シーン表Ｔａｂ５から当該モード用に抽出されているシーンのデータを取り込んで、このシーンを構成している各ショット（対象ショット）を確認し、ショット・インデクス表Ｔａｂ１から、ひとつの対象ショットの始点と終点のタイムコードデータを取り込み（ステップＳ６２）、記録メディア再生装置ＶＰへこのショットのサーチと再生の制御信号Ｃｇを出力し（ステップＳ６３）、このショットの再生が終了すると（ステップＳ６４）、このショットの映像特性上の評価値を編成し（ステップＳ６５）、対象ショットすべてにつき上記を実行し（ステップＳ６６）、すべての対象ショット中から抽出ショットを選定して（ステップＳ６７）、タイムコード付きで抽出ショット表Ｔａｂ６へ記憶する（ステップＳ６８）。
【０２１０】
上記の、ショットの映像特性上の評価値を確定させる動作は、操作者が外部から映像特性上の評価値そのものを入力ｉ６として映像特性上の評価値入力手段Ｉｐ６を介して与えるものとしている。これと異なり、例えば前記実施形態におけるように、外部から映像特性上の項目の有無情報のみが与えられるものであれば、この有無情報に基づき評価値を演算するステップを追加すればよい。
【０２１１】
また、二段階スクリーニング以外の、シーンのみ、ショットのみ等については後述される。
【０２１２】
表示編成手段Ｐｒｇ７は、図１９に示されるように、本編映像Ｓｇの表示を指示する表示コマンドＣｍが入力されると（ステップＳ７０）、記録メディア再生装置ＶＰから本編映像Ｓｇを取り込み、モニタ装置Ｍｎｔに表示させる。
【０２１３】
また、他の手段Ｐｒｇ１〜Ｐｒｇ６、Ｐｒｇ８〜Ｐｒｇ９から、映像推移特性表Ｔａｂ４と抽出シーン表Ｔａｂ５を除く各表の表示コマンドＣｍを受け（ステップＳ７２）、表Ｔａｂ１〜Ｔａｂ３、Ｔａｂ６からデータＲＧを取り込み、モニタ装置Ｍｎｔへ表示する（ステップＳ７３）。
【０２１４】
また、映像推移特性表Ｔａｂ４の表示コマンドＣｍを受けると（ステップＳ７４）、映像推移特性表Ｔａｂ４からデータを取り込み、図１２に示される映像推移グラフをモニタ装置Ｍｎｔへ表示する（ステップＳ７５）。ここで画面表示されるのは、図１２に示されるように、各シーンにおける積算シーン・スコア（Ｆ値）、主要ピーク（山と谷）、主要スロープ（上り坂と下り坂）等である。
【０２１５】
また、抽出シーン表Ｔａｂ５の表示コマンドＣｍを受けると（ステップＳ７６）、抽出シーン表Ｔａｂ５から当該モードのデータを取り込み、図１２に示される映像推移グラフ上に抽出されたシーンの印を修飾表示する（ステップＳ７７）。図１２では、色調がグラフと異なる縦点線で表示される。
【０２１６】
プレビュー映像時間調整手段Ｐｒｇ８は、パラメータ設定手段Ｉｐ４から所望映像時間の入力を待機して、入力があればその所望映像時間を使い、所定時間内に入力がなければ、デフォルト値を所望映像時間として使い（ステップＳ８０〜Ｓ８２）、抽出ショット表Ｔａｂ６から当該モードの抽出ショットを読み出し（ステップＳ８３）、ショット・インデクス表Ｔａｂ１から対応するタイムコードを読み出し（ステップＳ８４）、時間積算して（ステップＳ８５）、所望映像時間に納まるかをチェックし（ステップＳ８６）、納まらなければ、パラメータとプレビュー映像編成ルールの更新調整をパラメータ設定手段Ｉｐ４とプレビュー映像編成ルール設定手段Ｉｐ５へ指示し、所望映像時間に納まれば、プレビュー映像編成手段Ｐｒｇ９へ、抽出ショットを順位付け、始点及び終点のタイムコード付きで確定データを出力する（ステップＳ８７）。
【０２１７】
プレビュー映像編成手段Ｐｒｇ９は、図２１に示されるように、プレビュー映像時間調整手段Ｐｒｇ８から確定データを受け（ステップＳ９０）、この確定データに基づき、各ショットの始点及び終点のタイムコードを載せた制御信号Ｃｇを記録メディア再生装置ＶＰへ順次送り、記録メディア再生装置ＶＰから再生された本編映像の抽出分を取り込み、アセンブルしてプレビュー映像を編成し（ステップＳ９１）、編成されたプレビュー映像信号を映像記録装置ＶＲへ出力して記録させる（ステップＳ９２）。
【０２１８】
また、前記の適用シーン抽出手段Ｐｒｇ５が、ステップＳ５１において実行する抽出シーン選定手順として、着目するシーン・スコアの絶対値が予め定めた閾値に達するものを抽出するようにする。これにより、より効果が大きいシーンを限定する処理が容易になる。
【０２１９】
また、適用シーン抽出手段Ｐｒｇ５が、ステップＳ５１において実行する抽出シーン選定手順の閾値として、シーンの推移に伴う各シーン・スコアの積算値について、着目シーンに至るまでの積算値の連続的な増大分が予め定められた第一ギャップ値を超え、かつこのシーン以降の積算値の連続的な減少分の絶対値が予め定められた第二ギャップ値を超える時に、このシーンを山とし、又はこのシーンに至るまでの積算値の連続的な減少分の絶対値が予め定められた第三ギャップ値を超え、かつこのシーン以降の積算値の連続的な増大分が予め定められた第四ギャップ値を超える時に、このシーンを谷として、前記山又は谷のシーンと隣接する谷又は山のシーン間の領域毎に、閾値を定めるようにしてもよい。これにより、指定されたモードに最適のシーンを抽出できる。またモード毎の、閾値設定の例については、前記の実施形態で詳述されている。
【０２２０】
あるいは、適用シーン抽出手段Ｐｒｇ５が、ステップＳ５１において実行する抽出シーン選定の際に対象とするシーンとして、谷のシーンと以降に隣接する山のシーンとの積算値の増大分の大きさに基づくか、又は積算値の増大分の大きさの順位に基づいて、この山に隣接する手前の谷からこの山に至る上り坂に位置するシーンと、山頂直後の下りシーンのみを対象とする構成にすることも可能である。これにより、対象シーン数が絞られ、効率的な選定作業ができる。
【０２２１】
さらに、適用シーン抽出手段Ｐｒｇ５が、ステップＳ５１において実行する抽出シーン選定手順の閾値を、谷から続き隣接する山に至る上り坂か、山から続き隣接する谷に至る下り坂に応じて設定するように構成してもよい。
【０２２２】
これにより、抽出されるシーンが特定部分に偏らず、全体から採用されるようになり、バランスが保たれたプレビュー映像のための抽出がなされる。
【０２２３】
さらに、各シーン・スコアが正又は負いずれかの値で形成されている際に、適用シーン抽出手段Ｐｒｇ５が、ステップＳ５１において実行する抽出シーン選定手順の閾値につき、正のシーン・スコアに適用される閾値の絶対値を、負のシーン・スコアに適用される閾値の絶対値に等しいか又は小さく構成させることも、前記実施形態で詳述した理由で有効である。
【０２２４】
また、前記のショット・スコア編成及びショット抽出手段Ｐｒｇ６が、ステップＳ６４において実行するショット・スコア編成の手順において、ショット・スコアを、本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値をこれら各項目につき加算演算した値とすることが好ましい。
【０２２５】
これにより、所定の重み付けを目的に応じて変更することができ、モードの目的に適したショットの抽出を効果的になすことができる。とりわけ、特定された出演者の出現に関する項目に掛ける重み付け値を、他の項目に掛ける重み付け値よりも大とすることにより、出演者型モードの目的に適したショットの抽出を効果的になすことができる。
【０２２６】
次に、抽出シーンのみでプレビュー映像を編成する場合の動作を説明する。  記録メディア再生装置ＶＰからの本編映像Ｓｇが再生出力され、操作者が記録メディア再生装置ＶＰ附属の表示器Ｍｖｐ又は本装置の備えるモニタ装置Ｍｎｔでこの映像を観ながら、シーンとして区切りたい位置でシーン区切入力信号ｉ１を入力すると、これを受けてショット／シーン区切入力手段Ｉｐ１がシーン・インデクス表編成手段Ｐｒｇ２へ区切指示を送り、シーン・インデクス表編成手段Ｐｒｇ２はこのタイミングで本編映像Ｓｇからタイムコードや絶対トラックアドレスを切り出し、シーン・インデクス表Ｔａｂ２にこの区切りに対応するタイムコードや絶対トラックアドレスが記憶される。この操作が本編映像全体について連続してなされ、本編映像の再生が終了すると本編映像全体をシーンに区切ったタイムコード群がシーン・インデクス表Ｔａｂ２内に形成されることになる。
【０２２７】
図示されない全体制御手段が本編映像Ｓｇの再生の終了を検知すると、シーン・スコア表編成手段Ｐｒｇ３を起動させ、シーン・スコア表編成手段Ｐｒｇ３はシーン・インデクス表Ｔａｂ２を参照して、最初のシーンから順に、本編映像をワンシーンずつ記録メディア再生装置ＶＰに再生させる。
【０２２８】
操作者がワンシーンの映像を観て、その意味的な評価値ｉ２をキー入力すると、映像意味的評価値入力手段Ｉｐ２を介してシーン・スコア表編成手段Ｐｒｇ３へ入力され、シーン・スコア表編成手段Ｐｒｇ３はこれをシーン・スコア表Ｔａｂ３に当該シーンのタイムコードとともに記憶させる。ここで操作者が特定のシーンの評価値を入力したい場合や、特定のシーンの評価値を変更したい場合、そのシーン指定ｉ３を入力し、さらに当該シーンの更新評価値ｉ２をキー入力すると、シーン指定入力手段ＩＰ３と映像意味的評価値入力手段Ｉｐ２を夫々介してシーン・スコア表編成手段Ｐｒｇ３へ送られ、シーン・スコア表編成手段Ｐｒｇ３はこれらに基づきシーン・スコア表Ｔａｂ３の内容を更新する。
【０２２９】
次に操作者が、所望のプレビュー映像時間と、シーン選択に関するパラメータとを、入力ｉ４としてパラメータ設定手段Ｉｐ４に入力し、さらにプレビュー映像編成ルール指示を入力ｉ５としてプレビュー映像編成ルール設定手段Ｉｐ５へ入力すると、パラメータ設定手段Ｉｐ４は所望のプレビュー映像時間を一時記憶し、シーン選択に関するパラメータとプレビュー映像編成ルール指示を適用シーン抽出手段Ｐｒｇ５へ送る。適用シーン抽出手段Ｐｒｇ５は、シーン・スコア表Ｔａｂ３内のデータを参照しつつ、これらパラメータとルールに基づき抽出すべきシーンを選択して、抽出シーン表Ｔａｂ５に記憶させる。記憶された内容にはタイムコードが含まれる。以上によってすべての抽出すべきシーンが記憶される。
【０２３０】
適用シーン抽出手段Ｐｒｇ５の作業が完了すると、全体制御手段はプレビュー映像時間調整手段Ｐｒｇ８を起動するとともに、パラメータ設定手段Ｉｐ４へ指令を送る。パラメータ設定手段Ｉｐ４は一時記憶した所望のプレビュー映像時間をプレビュー映像時間調整手段Ｐｒｇ８へ入力し、プレビュー映像時間調整手段Ｐｒｇ８は抽出シーン表Ｔａｂ５から抽出シーンのデータＰ８ａを逐次読み出して、抽出シーンすべてを連結した映像時間長さを演算する。演算された映像時間長さが所望のプレビュー映像時間を超えるか、又は不足する際には、プレビュー映像編成ルール設定手段Ｉｐ５へルールを厳しくするか、又は緩める修正指示を送るか、又はパラメータ設定手段Ｉｐ４へパラメータを厳しくするか、又は緩める修正指示を送る。
【０２３１】
適用シーン抽出手段Ｐｒｇ５はこれら修正分に基づき抽出すべきシーンを再選択して、抽出シーン表Ｔａｂ５の記憶を更新し、プレビュー映像時間調整手段Ｐｒｇ８は抽出シーン表Ｔａｂ５から更新された抽出シーンのデータＰ８ａを逐次読み出して、抽出シーンすべてを連結した映像時間長さを演算する。上記を反復して、所望のプレビュー映像時間に合致したプレビュー映像のためのデータがプレビュー映像編成手段Ｐｒｇ９へ送られる。
【０２３２】
プレビュー映像編成手段Ｐｒｇ９は記録メディア再生装置ＶＰを制御して本編映像Ｓｇを再生出力させ、プレビュー映像時間調整手段Ｐｒｇ８から送られたデータに基づき各抽出シーンを逐次、映像記録装置ＶＲへ録画する。これにより、プレビュー映像が編成される。
【０２３３】
次に、前記のように抽出シーンによるスクリーニングを経ることなしに、抽出ショットのみでプレビュー映像を編成する場合の動作を説明する。
【０２３４】
記録メディア再生装置ＶＰからの本編映像Ｓｇが再生出力され、操作者が記録メディア再生装置ＶＰ附属の表示器Ｍｖｐ又は本装置の備えるモニタ装置Ｍｎｔでこの映像を観ながら、ショットとして区切りたい位置でショット区切入力信号ｉ１を入力すると、これを受けてショット／シーン区切入力手段Ｉｐ１がショット・インデクス表編成手段Ｐｒｇ１へ区切指示を送り、ショット・インデクス表編成手段Ｐｒｇ１はこのタイミングで本編映像Ｓｇからタイムコードや絶対トラックアドレスを切り出し、ショット・インデクス表Ｔａｂ１にこの区切りに対応するタイムコードや絶対トラックアドレスが記憶される。この操作が本編映像全体について連続してなされ、本編映像の再生が終了すると本編映像全体をショットに区切ったタイムコード群がショット・インデクス表編成手段Ｐｒｇ１内に形成されることになる。
【０２３５】
次いで操作者がショット・スコア演算に関わるパラメータｉ４を入力すると、パラメータ設定手段Ｉｐ４がこれをデータＰ６ａとしてショット・スコア編成及びショット抽出手段Ｐｒｇ６へ送り、また操作者が最適ショット算出に関わるルールｉ５を入力すると、プレビュー映像編成ルール設定手段Ｉｐ５がこれをデータＰ６ｂとしてショット・スコア編成及びショット抽出手段Ｐｒｇ６へ送る。  ショット・スコア編成及びショット抽出手段Ｐｒｇ６は、ショット・インデクス表Ｔａｂ１を参照して、最初のショットから順に、本編映像をワンショットずつ記録メディア再生装置ＶＰに再生させ、本編映像Ｓｇを取り込む。
【０２３６】
操作者がワンショットの映像を観て、そのショットの映像特性上の評価値ｉ６をキー入力すると、これが映像特性上の評価値入力手段Ｉｐ６を介してショット・スコア編成及びショット抽出手段Ｐｒｇ６へ入力され、ショット編成及びショット抽出手段Ｐｒｇ６はこの評価値に基づいて当該ショットのスコアを演算し、さらにこのショット・スコアに基づき、当該ショットが抽出に適するショットであるかを判定し、選定されたショットのデータを抽出ショット表Ｔａｂ６へ記憶させる。記憶されたデータ内容にはタイムコードが含まれる。以上をすべてのショットにつき実行して、すべての抽出ショットが記憶される。
【０２３７】
次に操作者が、所望のプレビュー映像時間を入力ｉ４としてプレビュー映像時間調整手段Ｐｒｇ８へ入力すると、プレビュー映像時間調整手段Ｐｒｇ８は抽出ショット表Ｔａｂ６から抽出ショットのデータを逐次読み出して、抽出ショットすべてを連結した映像時間長さを演算する。演算された映像時間長さが所望のプレビュー映像時間を超えるか、又は不足する際には、プレビュー映像編成ルール設定手段Ｉｐ５へルールを厳しくするか、又は緩める修正指示を送るか、又はパラメータ設定手段Ｉｐ４へパラメータを厳しくするか、又は緩める修正指示を送る。
【０２３８】
ショット・スコア編成及びショット抽出手段Ｐｒｇ６はこれら修正分に基づき抽出すべきショットを再選択して、抽出ショット表Ｔａｂ６内の記憶を更新し、プレビュー映像時間調整手段Ｐｒｇ８は抽出ショット表Ｔａｂ６から更新された抽出ショットのデータを逐次読み出して、再抽出ショットすべてを連結した映像時間長さを演算する。上記を反復して、所望のプレビュー映像時間に合致するプレビュー映像のためのデータがプレビュー映像編成手段Ｐｒｇ９へ送られる。プレビュー映像編成手段Ｐｒｇ９は、記録メディア再生装置ＶＰを制御して本編映像Ｓｇを再生出力させ、このデータに基づき各抽出シーンを逐次、映像記録装置ＶＲへ録画する。これにより、プレビュー映像が編成される。
【０２３９】
記録メディア再生装置ＶＰは、映像信号が、その記録位置に関わる記録位置情報又はタイムコードとともに記録されている記録メディアを装着し、又は内蔵し、この記録メディアから、その記録位置情報又はタイムコードに基づきアクセスされた映像信号を読み出して再生信号とする機能を備えるものであり、それ独自のマイクロコンピュータを備える、独立した装置である。このような記録メディアとして適するものは、テープ又はディスク形状の磁気記録メディア又は光記録メディアのうち、記録位置情報がアクセス可能に記録される形式のものとなる。
【０２４０】
このような記録位置情報は、例えばビデオテープ媒体にあっては傾斜トラックに関する絶対トラック番号や、タイムコードが、当該傾斜トラック又は長手トラックにアクセス可能に記録される。またハード磁気ディスク媒体や光ディスク／光磁気ディスク媒体にあってはトラック番号やセクタ番号等で記録される。これらの記録位置情報が、再生時に現在のアドレスすなわちカレントアドレスとして外部へ出力され、また再生が開始されるべきターゲットアドレスとして外部から指定入力がなされた際にサーチされる。
【０２４１】
また、記録メディア再生装置ＶＰは、本実施形態では外付けの装置として示されているが、抽出映像の編成装置Ａｔｈｒ１へ内蔵させることも可能である。例えば、このような記録メディア再生装置内蔵システムとして、ＤＶＤ＋ＲＡＭ（書換え随時のＤＶＤ）を内蔵させたパーソナルコンピュータをプラットフォームとしたオーサリングシステムが適用可能である。
【０２４２】
記録メディア再生装置ＶＰは、抽出映像の編成装置Ａｔｈｒ１から入力される制御信号Ｃｇを受けて再生の開始／停止／一時停止をはじめ、制御信号Ｃｇに載せられたターゲットアドレスに基づき所定のトラック番地から再生を開始し、本編映像Ｓｇを抽出映像の編成装置Ａｔｈｒ１へ出力する。
【０２４３】
なお、前記のショット分解は、手動操作による分解と、自動分解とがある。
【０２４４】
手動操作によるショット分解の作業は、本編映像Ｓｇを再生しながら行うが、ここで
１．ワンショット分解のたびに本編映像の再生を一時停止又は停止させ、次のワンショット分解の開始時に本編映像の再生を再スタートさせる流儀、
２．本編映像の再生を連続的に流し、途中で再生を一時停止又は停止させることなく、ショット区切りを連続して行う流儀、
の二通りがある。本実施形態は、「１．」のワンショット分解による。ショット・スコアの打ち込みを、このショット分解と同時に実行する場合は、このワンショット分解が適する。
【０２４５】
上記のように、本実施形態の抽出映像の編成装置Ａｔｈｒ１は、セマンティック・スコアを容易に作成できる。この結果、職業的クリエイターでなくとも、平易な操作で、一定レベル以上のプレビュー映像を安定的かつ効率的に作成することができる。
【０２４６】
しかも、二段階スクリーニングを適用する場合は、より少ない作業でプレビュー映像を編成できるから、効率的である。
【０２４７】
さらに、前記のように、多様な閾値設定を可能にし、またショット・スコアに、複数の特性を異にする映像特性項目を反映させることにより、多様な目的のプレビュー映像が編成でき、しかも、モードを選択することにより、あらすじ型、ハイライト型、主な出演者型等の目的に合ったタイプのプレビュー映像を作り分けることができる。
【０２４８】
さらに、パラメータやルールを自動修正することにより、同一セマンティック・スコアを用いて、編成したプレビュー映像の時間調整が自動的になされ、よりフレキシブルな制作が可能になる。
【０２４９】
さらに、セマンティックグラフ（映像推移特性のグラフ表示）で物語の構造と、抽出シーンの位置を確認しながら編集できるため、物語の全貌を把握した適切なプレビュー映像の編成が可能となる。
【０２５０】
次に、本発明に係る映像情報の編集装置の一実施形態を、図２２〜図２３に基づいて説明する。
【０２５１】
図２２は、映像情報の編集装置Ａｔｈｒ２のブロック構成図であり、セマンティック・スコアを編集して記録保存する機能を備えることを特徴とする。なお前記実施形態と同一の部分は、同一符号を付して説明は省略される。
【０２５２】
映像情報の編集装置Ａｔｈｒ２は、外付けの記録メディア再生装置ＶＰが接続されるオーサリング装置であり、マイクロコンピュータに代表される中央演算処理装置ＣＰＵ、混成半導体メモリにいずれも読み出し専用に搭載された、中央演算処理装置ＣＰＵによって読み取り実行可能な入力手段Ｐｒｇ１１及び表示編成手段Ｐｒｇ７、中央演算処理装置ＣＰＵによって読み取り実行可能なプログラムが格納された読み出し専用メモリＲＯＭから成る記録媒体２２、ＤＲＡＭなどの半導体メモリから成る一時記憶装置３、画面表示のためのモニタ装置Ｍｎｔ、編集された編成されたセマンティック・スコアの記録・読み出し可能なデータ記録装置ＶＲ’を備えている。また、データ記録装置ＶＲ’に接続される出力端子Ｔ１を設けることもできる。この他、全体制御回路や電源回路等が備わっているが、図示は省略されている。
【０２５３】
記録媒体２２は、不揮発性半導体メモリ等のワンチップ構成とされ、いずれもコンピュータによって実行されるプログラムである、ショット・インデクス表編成手段Ｐｒｇ１、シーン・インデクス表編成手段Ｐｒｇ２、シーン・スコア表編成手段Ｐｒｇ３、映像推移特性編成手段Ｐｒｇ４、適用シーン抽出手段Ｐｒｇ５、ショット・スコア編成及びショット抽出手段Ｐｒｇ６、プレビュー映像時間調整手段Ｐｒｇ８、セマンティック・スコア記録手段Ｐｒｇ２０’を備える。
【０２５４】
上記の各プログラムの実行によって、一時記憶装置３内には、ショット・インデクス表Ｔａｂ１、シーン・インデクス表Ｔａｂ２、シーン・スコア表Ｔａｂ３、映像推移特性表Ｔａｂ４、抽出シーン表Ｔａｂ５、抽出ショット表Ｔａｂ６が生成される。
【０２５５】
図２３は、セマンティック・スコア記録手段Ｐｒｇ２０’の動作フローチャートである。ステップＳ１００において、プレビュー映像時間調整手段Ｐｒｇ８から確定データの入力を待機し、入力があると、これによってセマンティック・スコアデータが確定されたことを確認し、次いで、この確定データ以外に必要とされるデータがある場合は、ショット・インデクス表Ｔａｂ１から抽出ショット表Ｔａｂ６が格納するデータから必要とされるデータＤを読み込み（ステップＳ１０２）、セマンティック・スコアを例えば表形式でテンポラリ・メモリ上に編集し、これをデータ記録装置ＶＲ’へ記録保存する。
【０２５６】
また、ここで編集したセマンティック・スコアを、出力端子Ｔ１から外部出力することもできる。
【０２５７】
この外部へのセマンティック・スコアの出力は、セマンティック・スコア記録手段Ｐｒｇ２０’がテンポラリ・メモリから直接、出力させるか、又はデータ記録装置ＶＲ’を経て出力させる。
【０２５８】
このように、図２２に示される実施形態の映像情報の編集装置Ａｔｈｒ２は、抽出シーンの選定条件とプレビュー映像制作ルールのパラメータの任意変更による圧縮映像（プレビュー映像）の時間調整や、映像タイトルのジャンル特性に適したプレビュー映像の自動生成を可能にする、セマンティック・スコアを編集して記録保存する。しかも任意の時点でのセマンティック・スコアの読み出し使用を可能にするか、又は外部への供給を可能にする。
【０２５９】
次に、本発明に係る映像情報の編集装置の他の実施形態を、図２４〜図２５に基づいて説明する。
【０２６０】
図２４は、映像情報の編集装置Ａｔｈｒ３のブロック構成図であり、セマンティック・コードを編集して出力するとともに記録保存する機能を備えることを特徴とする。なお前記実施形態と同一の部分は、同一符号を付して説明は省略される。
【０２６１】
映像情報の編集装置Ａｔｈｒ３は、外付けの記録メディア再生装置ＶＰが接続されるオーサリング装置であり、マイクロコンピュータに代表される中央演算処理装置ＣＰＵ、混成半導体メモリにいずれも読み出し専用に搭載された、中央演算処理装置ＣＰＵによって読み取り実行可能な入力手段Ｐｒｇ１１及び表示編成手段Ｐｒｇ７、中央演算処理装置ＣＰＵによって読み取り実行可能なプログラムが格納された読み出し専用メモリＲＯＭから成る記録媒体３２、ＤＲＡＭなどの半導体メモリから成る一時記憶装置３、フラッシュメモリ４、画面表示のためのモニタ装置Ｍｎｔ、出力端子Ｔ１を備えている。この他、全体制御回路や電源回路が備わっているが、図示は省略されている。
【０２６２】
記録媒体３２は、不揮発性半導体メモリ等のワンチップ構成とされ、いずれもコンピュータによって実行されるプログラムである、ショット・インデクス表編成手段Ｐｒｇ１、シーン・インデクス表編成手段Ｐｒｇ２、シーン・スコア表編成手段Ｐｒｇ３、映像推移特性編成手段Ｐｒｇ４、適用シーン抽出手段Ｐｒｇ５、ショット・スコア編成及びショット抽出手段Ｐｒｇ６、プレビュー映像時間調整手段Ｐｒｇ８、セマンティック・コード編成手段Ｐｒｇ２０’’を備える。
【０２６３】
上記の各プログラムの実行によって、一時記憶装置３内には、ショット・インデクス表Ｔａｂ１、シーン・インデクス表Ｔａｂ２、シーン・スコア表Ｔａｂ３、映像推移特性表Ｔａｂ４、抽出シーン表Ｔａｂ５、抽出ショット表Ｔａｂ６が生成される。またセマンティック・コード編成手段Ｐｒｇ２０’’の実行によって、フラッシュメモリ４にセマンティック・コード表Ｔａｂ１２が生成される。
【０２６４】
図２５は、セマンティック・コード編成手段Ｐｒｇ２０’’の動作フローチャートである。ステップＳ１１０において、プレビュー映像時間調整手段Ｐｒｇ８から確定データの入力を待機し、入力があると、これによってデータが確定されたことを確認し、次いで、この確定データをコード化して、モード毎のセマンティック・コードを編集し、フラッシュメモリ４にセマンティック・コード表Ｔａｂ１２として記憶させる（ステップＳ１１１）。ここで外部出力要求があれば（ステップＳ１１２）、フラッシュメモリ４に記憶されているコード化データを出力端子Ｔ１から出力される。
【０２６５】
このように、図２４に示される実施形態の映像情報の編集装置Ａｔｈｒ３は、映像タイトルのジャンル特性に適したプレビュー映像の自動生成を可能にする、セマンティック・コードを編集して出力し、また記録保存する。しかも任意の時点でのセマンティック・コードの使用を可能にする。
【０２６６】
前記のように、本実施形態に係る映像情報の編集装置は、映像タイトルの本編映像を構成する各シーン及び各ショットを、物語の意味的側面並びに映像特性上からそれぞれ評価することにより得られるシーン・スコアとショット・スコアに基づき、また、多種の目的用途に合わせた所定のプレビュー映像編成ルールを用いて、多種の目的用途のプレビュー映像の編成が可能なセマンティック・コードを編集する。このセマンティック・コードは、映像タイトルの本編映像から各種の目的用途に合わせたプレビュー映像の自動生成を可能とする。
【０２６７】
すなわち、多種の目的用途に合わせた各種のモード毎に条件が設定されているプレビュー映像編成ルールを用い、モードを選択して各モード毎の条件を抽出し、このモード毎の条件に基づいて、例えばあらすじ型、ハイライト型、主な出演者型等の各種のモードのプレビュー映像の自動生成を可能とするセマンティック・コードを編集制作することができる。この結果、作成されたセマンティック・コードには、少なくとも、各モード毎に設定されたデータが、コード形式で記載される。
【０２６８】
また、ショット又はシーン映像から切り出す映像の規定カット秒数として、ピークのシーンの閾値、ピークに至る上り坂の閾値と下り坂の閾値、あるいはシーンスコアがプラスの閾値とマイナスの閾値を別々の秒数で指定する。
【発明の効果】
【０２６９】
本発明に係る映像情報の編集方法及び映像情報の編集装置によれば、ショット単位又はシーン単位でなされた評価値が所定の条件を満たすショット又はシーンを選択し、選択したショット又はシーンの情報を含むデータを記録保存するから、この記録保存されたデータを使用した、ショットのみの連結映像編成、シーンのみの連結映像編成、ショットとシーンを混合した連結映像編成の各々が可能になり、したがって、より目的用途に対応した連結映像の編成が可能なデータの提供を可能にする。
【０２７０】
しかも多種類の連結映像の編成が容易であり、さらに、映像時間長さを所望の時間長さに合わせるよう自動調整を行うことにより、任意の時間長さの連結映像を自動的に編成可能なデータを提供することができる。
【０２７１】
とりわけ、本発明に係る映像情報の編集方法及び映像情報の編集装置では、所定の第一条件を満たすシーン評価値のシーンを選択し、選択した各シーンに含まれるショット中から、所定の第二条件を満たすショット評価値のショットを選択する構成であると、より少ない抽出処理回数で選択ショットが効率的に得られ、選択したショット又はシーンの情報を含むデータを効率的に記録保存することができる。
【０２７２】
また、本発明に係る映像情報の編集方法及び映像情報の編集装置によれば、ショット単位又はシーン単位でなされた評価値が所定の条件を満たすショット又はシーンを選択し、選択したショット又はシーンの情報を含むデータをコード化して出力するか、記録保存するから、このコード化されたデータを使用した、ショットのみの連結映像編成、シーンのみの連結映像編成、ショットとシーンを混合した連結映像編成の各々が可能になり、したがって、より目的用途に対応した連結映像の編成を可能にするコード化データの提供ができる。
【０２７３】
しかも多種類の連結映像の編成が容易であり、さらに、映像時間長さを所望の時間長さに合わせるよう自動調整を行うことにより、任意の時間長さの連結映像を自動的に編成可能な、コード化されたデータを提供することができる。
【０２７４】
とりわけ、本発明に係る映像情報の編集方法及び映像情報の編集装置では、所定の第一条件を満たすシーン評価値のシーンを選択し、選択した各シーンに含まれるショット中から、所定の第二条件を満たすショット評価値のショットを選択する構成であると、より少ない抽出処理回数で選択ショットが効率的に得られ、選択したショット又はシーンの情報を含むコード化されたデータを効率的に出力でき、また記録保存することができる。
【０２７５】
さらに、本発明に係る映像情報の編集方法及び編集装置では、抽出シーンの選定において、シーン評価値の絶対値が予め定めた閾値に達するものを抽出することにより、より効果が大きいシーンを限定する処理を容易にできる。
【０２７６】
また、本発明に係る映像情報の編集方法及び編集装置では、では、抽出シーン選定で用いる閾値として、シーンの推移に伴う各シーン評価値の積算値によって定まる山又は谷のシーンと隣接する谷又は山のシーン間の領域毎に、閾値を定めることにより、指定用途に最適のシーンを抽出できる。
【０２７７】
あるいは、本発明に係る映像情報の編集方法及び編集装置では、抽出シーン選定の際に対象とするシーンとして、谷のシーンと以降に隣接する山のシーンとの積算値の増大分の大きさに基づくか、又は積算値の増大分の大きさの順位に基づいて、この山に隣接する手前の谷からこの山に至る上り坂に位置するシーンと、山頂直後の下りシーンのみを対象とすることにより、対象シーン数が絞られ、効率的な選定作業が可能になる。
【０２７８】
さらに、本発明に係る映像情報の編集方法及び編集装置では、抽出シーン選定に用いる閾値を、谷から続き隣接する山に至る上り坂か、山から続き隣接する谷に至る下り坂に応じて設定することにより、抽出されるシーンが特定部分に偏らず、全体から採用され、バランスが保たれた連結映像のための抽出が可能になる。
また、本発明に係る映像情報の編集方法及び編集装置では、ショット評価値を、本編映像中の該当部分において少なくとも台詞の存在、又は所定レベル以上の音量、又は特定された出演者の出現、又は特殊画像効果を含む映像特性が存在する項目のそれぞれに、所定の重み付けをした値をこれら各項目につき加算演算した値とすることにより、所定の重み付けを目的に応じて変更することができ、目的に適したショットの抽出を効果的になすことができる。とりわけ、特定された出演者の出現に関する項目に掛ける重み付け値を、他の項目に掛ける重み付け値よりも大とすることにより、出演者に重点を置いたショットの抽出を効果的になすことができる。
【図面の簡単な説明】
【０２７９】
【図１】  図１は、本発明に係る抽出映像の編成方法の一実施形態の過程説明図である。
【図２】  図２は、図１に続く過程説明図である。
【図３】  図３は、本発明の方法による抽出映像編成の各過程を説明する概念図である。
【図４】  図４は、本発明の方法のセマンティック・スコア編成過程における作業例で、映画「マスク」のシーン・スコア表を示す図である。
【図５】  図５は、本発明の方法のショット・スコア作成過程における作業例で、映画「マスク」のショット・スコア表を示す図である。
【図６】  図６は、本発明の方法のショット・スコア作成過程における別の作業例で、映画「マスク」の主な出演者ティナのショット・スコア表を示す図である。
【図７】  図７は、本発明の方法により編成されたセマンティック・スコアの一例の説明図である。
【図８】  図８は、本発明の方法により編成されたセマンティック・コードの一例の説明図である。
【図９】  図９は、本発明に係る映像情報の編集方法の一実施形態の要部の過程説明図である。
【図１０】  図１０は、本発明に係る映像情報の編集方法の他の実施形態の要部の過程説明図である。
【図１１】  図１１は、本発明に係る抽出映像の編成装置の一実施形態のブロック構成図である。
【図１２】  図１２は、本発明の装置の映像推移特性表に基づき画面表示された映像推移特性グラフの一例を示す図である。
【図１３】  図１３は、図１１に示されるショット・インデクス表編成手段の動作フローチャートである。
【図１４】  図１４は、図１１に示されるシーン・インデクス表編成手段の動作フローチャートである。
【図１５】  図１５は、図１１に示されるシーンスコア表編成手段の動作フローチャートである。
【図１６】  図１６は、図１１に示される映像推移特性編成手段の動作フローチャートである。
【図１７】  図１７は、図１１に示される適用シーン抽出手段の動作フローチャートである。
【図１８】  図１８は、図１１に示されるショット・スコア編成及びショット抽出手段の動作フローチャートである。
【図１９】  図１９は、  図１１に示される表示編成手段の動作フローチャートである。
【図２０】  図２０は、図１１に示されるプレビュー映像時間調整手段の動作フローチャートである。
【図２１】  図２１は、図１１に示されるプレビュー映像編成手段の動作フローチャートである。
【図２２】  図２２は、本発明に係る映像情報編集装置の一実施形態のブロック構成図である。
【図２３】  図２３は、図２２に示される映像情報編集装置のセマンティック・スコア記録手段の動作フローチャートである。
【図２４】  図２４は、本発明に係る映像情報編集装置の他の実施形態のブロック構成図である。
【図２５】  図２５は、図２４に示される映像情報編集装置のセマンティック・コード編成手段の動作フローチャートである。
【図１】
0004449216.tif 000003
【図２】
0004449216.tif 000004
【図３】
0004449216.tif 000005
【図４】
0004449216.tif 000006
【図５】
0004449216.tif 000007
【図６】
0004449216.tif 000008
【図７】
0004449216.tif 000009
【図８】
0004449216.tif 000010
【図９】
0004449216.tif 000011
【図１０】
0004449216.tif 000012
【図１１】
0004449216.tif 000013
【図１２】
0004449216.tif 000014
【図１３】
0004449216.tif 000015
【図１４】
0004449216.tif 000016
【図１５】
0004449216.tif 000017
【図１６】
0004449216.tif 000018
【図１７】
0004449216.tif 000019
【図１８】
0004449216.tif 000020
【図１９】
0004449216.tif 000021
【図２０】
0004449216.tif 000022
【図２１】
0004449216.tif 000023
【図２２】
0004449216.tif 000024
【図２３】
0004449216.tif 000025
【図２４】
0004449216.tif 000026
【図２５】
0004449216.tif 000027