(57)【要約】【目的】動画や静止画、３Ｄ画像などの映像データを人間の感覚特性を反映せしめた特殊効果を加えて編集・合成し、新たな画像データとなすシステムと映像データを提案する。【構成】感覚的特性を反映した映像データの編集・合成作業を実現すべく映像構成要素から感覚刺激要素を抽出し、感覚刺激要素が感覚的特性をどの程度刺激するかについて符号化・数値化等して特性値として感覚刺激要素と特性値の対照関係を確定し、コンピュータを利用して、感覚的特性の特性値を付し得るように調整した素材映像データを記憶手段にストックし、ストック中から選択・組合わせ可能なものを任意に選択・組合わせしめ、対照関係に基づいて映像データを編集・合成して新たな映像データとするに際して、特性値を活かすように演算処理して相応しい映像的特殊効果を素材となる映像データに付して出力装置に出力して人間の感覚的特性が反映した映像データの編集・合成を自動的に行う。【選択図】    図１
2005045480.tif 000002
【特許請求の範囲】
【請求項１】
所望の感覚的特性を反映した映像データの編集・合成作業を実現するために、
形、模様、明暗、色、色調、動きなどといった映像を構成する諸要素の中から人間が視覚的刺激として影響を受けるものを感覚刺激要素として素材となる映像データなどから抽出し、各感覚刺激要素が人間の感性を含む感覚的特性をどの程度刺激するかについて、特定の者の判断結果又は不特定・多数の者の意見を統計的処理することによって求められる結果に基づいて客観的比較処理が可能な符号化・数値化等による等級化を行なって特性値となすことで各感覚刺激要素と特性値との対照関係を確定し、
コンピュータを利用して、人間の様々な感覚的特性に関する特性値を付し得るように調整された素材となる複数の映像データを記憶手段にストックさせ、それらストックした映像データ中から所望の感覚的特性の方向を充足するものとして選択・組合わせ可能なものを適宜に表示して任意な選択・組合わせを行なわしめて上記対照関係による特性値に基づいて映像データを編集・合成手段により編集・合成して新たな映像データとするに際して、
上記対照関係を利用して得られる、選択・組合わせされた映像データ中の所望の感覚的特性に関する特性値を活かすように所定法則に従って演算手段により演算処理し、その結果に対してそれに相応しいものとして予め定めて記憶手段にストックしておいた所定の映像的特殊効果を素材となる映像データに付して編集・合成し、または、編集・合成された新たな映像データに追加的に付してモニターその他の出力装置に出力させ、それにより映像に関する人間の感覚的特性が反映した映像データの編集・合成が自動的になされるようにしたことを特徴とする、映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【請求項２】
素材となる映像データが音楽や効果音などの音声データと組合わされたものであり、その音声データについても感覚刺激要素を符号化・数値化等して特性値を与え、素材となる音声データ付き映像データの編集・合成作業に際して、音声データの特性値に基づいた映像的特殊効果や音響的特殊効果を自動的に付加してモニターやスピーカの如き出力装置により出力させることを特徴とする、請求項１に記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【請求項３】
素材となる映像データを所望の感覚的特性についての特性値に基づいて編集・合成してモニターその他の出力装置により出力するに際して、編集・合成作業と同時進行的に出力可能な部分を逐時的に出力させることで新たな映像データのリアルタイムな出力が可能とされたことを特徴とする、請求項１または請求項２に記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【請求項４】
所望の感覚的特性に関する設定を素材となる映像データの編集・合成作業中にも適時に変更可能なものとなし、それを変更後の編集・合成作業に反映させることを特徴とする、請求項１〜請求項３の何れか１つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【請求項５】
編集・合成して出力される映像データと併せて、所望の感覚的特性とは直接的に関連のない映像データや音声データを付加情報として、少なくとも部分的にモニターやスピーカなどの出力装置を利用して出力できることを特徴とする、請求項１〜請求項４の何れか１つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【請求項６】
素材となる映像データ、感覚刺激要素と特性値との対照関係データ、特性値の演算処理に用いる所定法則に関するデータ、演算処理結果に対して付すべき特殊効果に関するデータの少なくとも１つがインターネットのようなネットワークを利用して送信可能であり、編集・合成と出力装置への出力又は出力装置への出力のみを受信者側で行なうものとし、また、必要に応じて編集・合成や付加情報の出力に関する操作を送信者側からも遠隔操作として行なえるようにしていることを特徴とする、請求項１〜請求項５の何れか１つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【請求項７】
請求項１〜請求項６の何れか一つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システムによって作成されたことを特徴とする映像構成要素の特性値に基づいた映像データ。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、動画や静止画、３Ｄ画像などの映像データを、人間の所望感覚特性を適宜に反映せしめて所定の特殊効果を加えながら編集・合成し新たな画像データとなすシステムおよびそのシステムにより作成された映像データを提案するものである。
【０００２】
【従来の技術】
各種の映像データを加工・編集・合成するためのシステムやプログラムは多くのものが実用化されている。つまり、１つ又は複数の素材となる映像データに対して可能な各種処理を加えて特定の目的に沿った新たな映像データを作成している。
【０００３】
この場合、特定目的に適った新たな映像データを得るための素材データや処理手法の選択は作業を行なう者（作成者）の感性の頼るものが多く、作る者や見る者の感性を反映させるといった特定目的を実現するための利用できる編集・合成技術そのものに関する研究はなされており、そのための手法も多数提案されてはいる。
【０００４】
【発明が解決しようとする課題】
上記したような従来の技術では、例えば、人間の所望の感性に適ったなどという特定目的を充足する新たな映像データを作成しようとする場合、素材データの収集や編集・合成作業に用いる処理手法の選択は、新たな映像データを作成するクリエイターの感性に頼ったものとならざるを得ず、十分な自動化は不可能であった。
【０００５】
すなわち、素材映像データに対してどのような特殊効果を施して編集・合成すれば所望の感覚特性に適った新たな映像データを自動的に作成できるかは、例えば、素材映像データの様々な映像構成要素が人間の感覚特性にどのような影響を与えているかについて符号化・数値化して客観的な特性値となし、その特性値を有する映像構成要素に対してどのような特殊効果を加えれば所望の感覚特性に合致した新たな映像データが作成できるかについての関連付けの巧拙に関わると解釈できるが、このような特性値や関連付けは従来技術においては何ら提案されていない。
【０００６】
したがって、従来技術では、素材となる映像データから所望の感覚特性に合致した新たな映像データを作成するには、映像クリエイターが選択・組合わせされた素材データについて最初から最後まで編集・合成作業を行なわなければ作成することができなかった。つまり、映像データの自動作成システム自体は従来から提案されているが、これを利用して所望の感覚特性に合致した新たな映像データを編集・合成作業を行ないながらリアルタイムで同時にモニター等の出力装置に出力させることなどは到底不可能であった。
【０００７】
また、従来技術では、所望の感覚特性を反映した映像データの出力は、映像クリエイターが完成したものを再生するという手法しか採ることができないので、映像データの出力を行ないながら同時進行的に編集・合成作業を行ない、出力内容に対する聴衆その他の者の要望を入れながら編集・合成作業の方針を適時に変更し、それを出力内容に即時的に反映させるといったインタラクティブな手法を実現することも不可能であった。
【０００８】
【課題を解決するための手段】
本発明は、上記したような従来技術における課題を解消することについて、実験と検討を繰り返し行い創案されたものであって、映像データの構成要素について特定の感覚特性などに関する特性値を与え、その特性値を利用して望ましい感覚特性を新たな映像データに付与するシステムによってリアルタイムの映像データ出力を可能とすると共にこのシステムによって作成された映像データをも新規なものとして提案するものであって、具体的には以下の如くである。
【０００９】
（１）  所望の感覚的特性を反映した映像データの編集・合成作業を実現するために、
形、模様、明暗、色、色調、動きなどといった映像を構成する諸要素の中から人間が視覚的刺激として影響を受けるものを感覚刺激要素として素材となる映像データなどから抽出し、各感覚刺激要素が人間の感性を含む感覚的特性をどの程度刺激するかについて、特定の者の判断結果又は不特定・多数の者の意見を統計的処理することによって求められる結果に基づいて客観的比較処理が可能な符号化・数値化等による等級化を行なって特性値となすことで各感覚刺激要素と特性値との対照関係を確定し、
コンピュータを利用して、人間の様々な感覚的特性に関する特性値を付し得るように調整された素材となる複数の映像データを記憶手段にストックさせ、それらストックした映像データ中から所望の感覚的特性の方向を充足するものとして選択・組合わせ可能なものを適宜に表示して任意な選択・組合わせを行なわしめて上記対照関係による特性値に基づいて映像データを編集・合成手段により編集・合成して新たな映像データとするに際して、
上記対照関係を利用して得られる、選択・組合わせされた映像データ中の所望の感覚的特性に関する特性値を活かすように所定法則に従って演算手段により演算処理し、その結果に対してそれに相応しいものとして予め定めて記憶手段にストックしておいた所定の映像的特殊効果を素材となる映像データに付して編集・合成し、または、編集・合成された新たな映像データに追加的に付してモニターその他の出力装置に出力させ、それにより映像に関する人間の感覚的特性が反映した映像データの編集・合成が自動的になされるようにしたことを特徴とする、映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【００１０】
（２）  素材となる映像データが音楽や効果音などの音声データと組合わされたものであり、その音声データについても感覚刺激要素を符号化・数値化等して特性値を与え、素材となる音声データ付き映像データの編集・合成作業に際して、音声データの特性値に基づいた映像的特殊効果や音響的特殊効果を自動的に付加してモニターやスピーカの如き出力装置により出力させることを特徴とする、前記（１）項に記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【００１１】
（３）  素材となる映像データを所望の感覚的特性についての特性値に基づいて編集・合成してモニターその他の出力装置により出力するに際して、編集・合成作業と同時進行的に出力可能な部分を逐時的に出力させることで新たな映像データのリアルタイムな出力が可能とされたことを特徴とする、前記（１）項または（２）項に記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【００１２】
（４）  所望の感覚的特性に関する設定を素材となる映像データの編集・合成作業中にも適時に変更可能なものとなし、それを変更後の編集・合成作業に反映させることを特徴とする、前記（１）項〜（３）項の何れか１つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【００１３】
（５）  編集・合成して出力される映像データと併せて、所望の感覚的特性とは直接的に関連のない映像データや音声データを付加情報として、少なくとも部分的にモニターやスピーカなどの出力装置を利用して出力できることを特徴とする、前記（１）項〜（４）項の何れか１つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【００１４】
（６）  素材となる映像データ、感覚刺激要素と特性値との対照関係データ、特性値の演算処理に用いる所定法則に関するデータ、演算処理結果に対して付すべき特殊効果に関するデータの少なくとも１つがインターネットのようなネットワークを利用して送信可能であり、編集・合成と出力装置への出力又は出力装置への出力のみを受信者側で行なうものとし、また、必要に応じて編集・合成や付加情報の出力に関する操作を送信者側からも遠隔操作として行なえるようにしていることを特徴とする、前記（１）項〜（５）項の何れか１つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システム。
【００１５】
（７）  前記（１）項〜（６）項の何れか一つに記載の映像構成要素の特性値に基づいた映像データの自動編集・合成システムによって作成されたことを特徴とする映像構成要素の特性値に基づいた映像データ。
【００１６】
【作用】
（ａ）  所望の感覚的特性を反映した映像データの編集・合成作業を実現するために、形、模様、明暗、色、色調、動きなどといった映像を構成する諸要素の中から人間が視覚的刺激として影響を受けるものを感覚刺激要素として素材となる映像データなどから抽出することで、「さわやか」、「爽快な感じ」、「力強さ」、「激しさ」、「重々しさ」、「クールな感じ」などというように抽象的な語句により表現される人間の特定の感覚的特性に影響を与える映像データを構成する種々の感覚刺激要素を選び出して感覚的特性との関連付けをすることができる。
【００１７】
（ｂ）  各感覚刺激要素が人間の感性を含む感覚的特性をどの程度刺激するかについて、特定の者の判断結果又は不特定・多数の者の意見を統計的処理することによって求められる結果に基づいて客観的比較処理が可能な符号化・数値化等による等級化を行なって特性値となすことで、感覚刺激要素と感覚的特性との関係を特定の優れた映像クリエイターの感性や不特定多数者の意見の統計的処理に基づく結果に基づいて客観的で説得力のある特性値として得ることができる。
【００１８】
（ｃ）  各感覚刺激要素と特性値との対照関係を確定することで、この対照関係を用いて素材となる映像データがある感覚的特性（例えば、「さわやかさ」）についてどの程度の特性値を有しているかを求めることができるようになる。
【００１９】
（ｄ）  コンピュータを利用して、人間の様々な感覚的特性に関する特性値を付し得るように調整された素材となる複数の映像データを記憶手段にストックさせ、それらストックした映像データ中から所望の感覚的特性の方向を充足するものとして選択・組合わせ可能なものを適宜に表示して任意な選択・組合わせを行なわしめて上記対照関係による特性値に基づいて映像データを編集・合成手段により編集・合成して新たな映像データとすることで、記憶手段にストックした素材となる映像データの中から必要とする感覚的特性（例えば、「さわやかさ」という感覚的特性）に合致するもののみを抜き出して表示し、その中の１つ又は複数を適宜に選び出さしめて素材となる映像データを、対照関係を付けられた特性値を利用しながら、必要とする感覚的特性の方向に従って編集・合成できるように準備することが可能となる。
【００２０】
（ｅ）  上記対照関係を利用して得られる、選択・組合わせされた映像データ中の所望の感覚的特性に関する特性値を活かすように所定法則に従って演算手段により演算処理し、その結果に対してそれに相応しいものとして予め定めて記憶手段にストックしておいた所定の映像的特殊効果を素材となる映像データに付して編集・合成し、または、編集・合成された新たな映像データに追加的に付してモニターその他の出力装置に出力させ、それにより映像に関する人間の感覚的特性が反映した映像データの編集・合成が自動的になされるようにしたことで、ある感覚的特性（例えば、「さわやかさ」）に関する特性値を、強調する、弱める、加算する、平均値をとる、最大値・最小値をとるなどといった所定法則に従って演算処理を行ない、その結果に対して相応しいものとして準備された特殊効果を素材となる映像データ、または、編集・合成処理を経た映像データに付すことができ、必要とする感覚的特性の方向性に合致した新たな映像データを得て、これをモニター等に出力する一連の作業を自動的に行なうことができるようになる。
【００２１】
（ｆ）    素材となる映像データが音楽や効果音などの音声データと組合わされたものであり、その音声データについても感覚刺激要素を符号化・数値化等して特性値を与え、素材となる音声データ付き映像データの編集・合成作業に際して、音声データの特性値に基づいた映像的特殊効果や音響的特殊効果を自動的に付加してモニターやスピーカの如き出力装置により出力させることで、映像データと一体化された音声データについても所望の感覚的特性に関して特性値を捉え、本発明により作成される新たな映像データのために利用する映像や音響に関する特殊効果を定める指標となし、音声付映像データに関しても所望の感覚的特性を反映した編集・合成が実現できるようになる。
【００２２】
（ｇ）  素材となる映像データを所望の感覚的特性についての特性値に基づいて編集・合成してモニターその他の出力装置により出力するに際して、編集・合成作業と同時進行的に出力可能な部分を逐時的に出力させることで新たな映像データのリアルタイムな出力が可能とされるので、望ましい感覚的特性（「さわやかさ」など）を決めて、素材となる映像データの選択を行なえば、それに沿った編集・合成作業が自動的に開始され、また、モニターなどに対する出力が可能となり、実際に出力せしめたい新たな映像データの選択の幅が拡大する。
【００２３】
（ｈ）  所望の感覚的特性に関する設定を素材となる映像データの編集・合成作業中にも適時に変更可能なものとなし、それを変更後の編集・合成作業に反映させることで、新しい画像データをモニター等に出力中であっても、設定している感覚的特性の内容を変更し（「さわやかさ」から「クールな感じ」など）、変更後の編集・合成作業にそれが反映するので、同じ素材画像データであってもこの設定変更によって様々な変化を加えた新たな画像データとすることができ、再現性のない一回性の画像データ出力を適宜に実行することができるようになる。
また、感覚的特性の設定についての変更は、必ずしも本発明システムを操作する者の明確な意思に基づくものである必要はなく、例えば、モニター周辺の温度変化や音量変化、人々の動きの変化などを適切なセンサー装置によって検知して、これらの変化に相応しい感覚的特性の変更設定（例えば、「さわやかさ」の感覚的特性設定が周囲の音量低下という変化によって「落ち着き」に切り替わるなど）を予め定めておくことで、本発明システムにおける編集・合成作業の方向性変更を利用者の感覚的嗜好変化に応じたものとして実現することも可能になる。
【００２４】
（ｉ）    編集・合成して出力される映像データと併せて、所望の感覚的特性とは直接的に関連のない映像データや音声データを付加情報として、少なくとも部分的にモニターやスピーカなどの出力装置を利用して出力できることで、ニュース情報その他の付加情報を適時・適所に出力表示して情報提供媒体として本発明システムを利用することができる。
【００２５】
（ｊ）  素材となる映像データ、感覚刺激要素と特性値との対照関係データ、特性値の演算処理に用いる所定法則に関するデータ、演算処理結果に対して付すべき特殊効果に関するデータの少なくとも１つがインターネットのようなネットワークを利用して送信可能であり、編集・合成と出力装置への出力又は出力装置への出力のみを受信者側で行なうものとし、または、編集・合成や付加情報の出力に関する操作を送信者側からも遠隔操作として行なえるようにしていることで、隔地者間でインターネットのようなネットワークを利用して本発明システムを実現しようとする際に、送信者側からの送信データを必要最小限のものとしながら有効に実施することができ、また、必要とされる編集・合成作業その他の処理を臨機応変に受信者側でも送信者側でも行なうものとなし得る。
【００２６】
（ｋ）  本発明による映像構成要素の特性値に基づいた映像データの自動編集・合成システムによって作成された映像データによって、人間の感性その他の特性が然るべき形態で反映していることが確実である映像データを適宜な映像コンテンツとして提供することが可能となる。
【発明の実施の形態】
上記した本発明の具体的な実施形態の若干例を、添付図面を利用しながら説明すると以下のとおりである。
すなわち、図１は本発明の映像データの自動編集・合成システム１についてその中心となる基本概念部分を模式図化したものである。
【００２７】
本発明システムの自動編集・合成作業の対象となる素材映像データ２は様々な形式のものが使用し得るようにすべきであるが、以下に示す特性値３を適切に付すことができるように調整されたものである必要がある。
【００２８】
素材となる映像データ２は当然に多くの要素によって構成されているが、この中で人間が視覚的刺激として影響を受けるものを感覚刺激要素４として抽出することが可能である。具体的な例としては、形、模様、色、動きなどが考えられる。なお、本発明での映像データ２は、静止画と動画の双方を含み、場合によっては音声データと組合されたものも含むものである。
【００２９】
上記の感覚刺激要素４については、所定の感覚的特性（例えば、「カッコ良さ」）をどの程度刺激するかに関して、一定の基準に従って符号化・数値化による特性値３を定めることが可能である。図１の場合には、「カッコ良さ」という感覚的特性について０〜３の数字によって４段階の等級付けを行なう例を示している。
【００３０】
ある感覚刺激要素４（例えば、「形」）が「カッコ良さ」という感覚的特性についてどの程度の特性値３を有しているかを機械的に決定できるようにすることは困難である。そこで、本発明では、優れた感性を有する映像クリエーターなどの特定の者による判断、または、不特定多数の者の意見を統計的処理することによって求められる結果に基づいて感覚刺激要素４の所定感覚的特性に関する特性値５を定めることを提唱するものである。
【００３１】
ここで、本発明の最終的な目的は、素材の映像データ２から所定の感覚的特性（カッコ良さ）を反映した新たな映像データを作成することにあるので、統計的処理によって得られる平均的感性に基づく特性値３を利用するよりは優れた感性を有する特定の映像クリエーターの判断による特性値３を利用する方が目的達成には望ましいと考えることができる。
また、特性値３は素材映像データ２の構成要素である感覚刺激要素４のすべてについて付さなければならないものではなく、感覚的特性を反映した新たな映像データを作成する上で必要且つ十分な範囲で付しておけば足りる。
【００３２】
このようにして、素材となる映像データ２の構成要素である適宜な感覚刺激要素４に対して所定の感覚的特性（カッコ良さ）に関する特性値３が割り当てられて相互の対照関係が確定される。この対照関係は感覚的特性の種類に応じて異なるものである。例えば、「カッコ良さ」という感覚的特性に関してある素材映像データ２の感覚刺激要素４である「形」が特性値３として「３」という数値であっても、「さわやかさ」という感覚的特性に関しては同じ「形」の特性値３が「２」という数値で表現されることが当然にあり得るのである。
【００３３】
本発明では、上記の特性値３を利用して所望の感覚的特性（カッコ良さ）を十分に反映するように素材となる映像データ２を編集・合成するものである。
すなわち、１つの素材映像データ２を編集する場合には、所望の感覚的特性（カッコ良さ）に関する特性値３を付された感覚刺激要素４を抽出し、それらの要素に対して付された特性値３の数値に応じた所定の映像的特殊効果を加える編集処理を行なうものである。
【００３４】
ある感覚的特性（カッコ良さ）に基づいて、特性値３の数値に応じてどのような映像的特殊効果を対応させるのが適切かについては、映像クリエーターの感性を利用したり、不特定多数者の意見を統計的に処理して得られる結果を利用して決定することができ、このような関係が確定されればそのデータを用いることで以後はコンピュータなどを用いて自動的に映像的特殊効果を加える編集処理を実行することができるようになる。
【００３５】
また、所定の感覚的特性をより強く反映させるために特性値３に対して一定の法則にしたがった演算処理を加えて新たな特性値３ａとなし、これに対して相応しい映像的特殊効果を与える編集処理とすることも可能である。図示の場合には、所望の感覚的特性として「よりカッコ良く」を満たす編集処理を行なわしめるために、特性値３の数値を１つずつ上げる（最大値「３」はそのまま）という演算処理を行なう場合について示している。所望の感覚的特性をより反映させるために特性値３にどのような演算処理を加えるかの判断も特定の映像クリエーターの感性や多数者の意見の統計的処理結果を参考に確定しておくことが可能である。
【００３６】
また、上記してきた編集・合成作業の基準となる所定の感覚的特性は作業途中に変更してそれを以降の編集・合成作業の結果に反映させるものとすることもできる。例えば、「カッコ良さ」という感覚的特性に基づいて編集作業を一定程度まで行ないながら、ある時点で「さわやかさ」という感覚的特性に変更し以降の編集処理を「さわやかさ」に基づいて行なわせることが可能である。この場合、感覚的特性の変更に伴って取扱う感覚刺激要素４やその特性値３も変更されることになるが、編集・合成後の映像データは一連のものとしてモニター等に出力可能なものでなければならないので、加える映像的特殊効果の変更は出力処理上違和感を生じないように調整されなければならない。したがって、変更可能な感覚的特性は作業状況に応じて一定の制限を付すものとして構わない（正反対の方向の感覚的特性への変更を許容しないなど）。
【００３７】
以上は、素材となる１つの映像データ２を所望の感覚的特性に基づいて編集処理する場合について述べてきたが、素材となる２つ以上の映像データ２、２ａを組合わせて合成処理する場合も略同様に考えることができる。
すなわち、この場合には一方の素材映像データ２と他方の素材映像データ２ａの各感覚刺激要素４についてそれぞれの特性値３をもとめ、同一または同種の感覚刺激要素４についての各特性値３に関しては両者の関係に基づいて一定の演算処理を施して合成処理のための新たな特性値３ａを求めるのである。
【００３８】
例えば、「カッコ良さ」という感覚的特性に関して、素材映像データ２の感覚刺激要素４である「形」の特性値３が「２」の数値であり、素材映像データ２ａの「形」に関する特性値３が「１」の数値をとる場合に、両者の合成結果として映像的特殊効果を付与する際には「形」に関する新たな特性値３ａは両者の和である「３」という数値を採るものとして扱うなどということである。
【００３９】
２つ以上の画像データ２、２ａ…を合成して新たな画像データを得るための新たな特性値３ａを求めるための所定の演算処理法則は、上記のような加算処理に限られるわけではなく、最大値・最小値を採る、平均値を採る、など状況に応じて相応しい演算処理を行なうものとすればよいが、どのような演算処理を採用すべきかは映像クリエーターの感性や多数者の意見を統計的処理した結果に基づいて定めるものとすればよい。
【００４０】
何れにしても、素材となる映像データ２、２ａ…に基づいて所望の感覚的特性（例えば、「カッコ良さ」）を反映するように自動編集・合成処理することが、映像データ２、２ａ…とその構成要素である感覚刺激要素４およびそれと対照関係を付けられた特性値３、さらにその特性値３に相応しいものとして予め定められた所定の映像的特殊効果を採用することで技術的に可能であることが理解される。
【００４１】
また、本発明システム１を採用することで、限られた数の素材映像データ２、２ａ、…であっても、所望の感覚的特性（「カッコ良さ」、「さわやかさ」…）に基づいた編集・合成処理を施すことで無数といっても良い変化に富んだ映像データとしてモニター等による出力が可能であることが理解されるべきである。
【００４２】
さらに、感覚的特性に関する初期設定や途中での変更を許容することで、本発明システム１を稼動する具体的な状況に即した映像データの編集・合成作業を任意に選択することができ、限られた素材映像データ２であっても応用範囲の広い出力が実現できることになる。
【００４３】
本発明システム１による映像データの編集・合成作業は、モニター等に対する出力と同時進行的に行なうことができるものであり、したがって、感覚的特性についての設定やその変更を行なえば即座にそれに応じた編集・合成結果が出力されるリアルタイムな処理が可能である。つまり、周囲環境や状況に合わせて適宜な操作を手動または自動的に行なうものと構成して、双方向性を備えたリアルタイムな映像データの編集・合成および出力が実現することができるものである。
【００４４】
図２は、２つ以上の素材となる映像データ２ａ、２ｂ、２ｃ、２ｄ、２ｄ、２ｆを合成して新たな映像データを作成し出力する場合についてその手順をフローチャート的に説明している。
すなわち、上記した６つの素材映像データを構成する感覚刺激要素４（動き、色、形、模様）について、ここでは「さわやかな」という感覚的特性に基づいてそれぞれの特性値３を抽出している。
【００４５】
「動き」、「形」、「色」、「模様」といった感覚刺激要素４は素材となる映像データ２に対してそれぞれ複数存在することもあり得るので、与えられる特性値４も１つに限らず複数個となることもあり得る。また、合成処理する素材映像２、２同士で感覚刺激要素４を共通している場合には適宜な演算処理を加えて新たな特性値として処理するものである。
【００４６】
上記のように確定された特性値３については希望する感覚的特性（「さわやかな」）に関して予め定めた特殊効果が対応するようにされているので、合成された映像データにこのような特殊効果を付して新たな映像データとなして映像出力するものである。
なお、特殊効果の確定作業は素材となる映像データ２の編集・合成作業の前後どちらで行なっても構わない。
【００４７】
【実施例１】
本発明による具体的な実施例の１つを図３に基づいて説明する。
これは、店舗内の顧客５向けに店舗内ディスプレイ６を用いて本発明システム１により編集・合成された映像データを出力する場合に関するものであり、素材となる映像データ２、２ａ、…などはクライアント７側からの要求によってインターネットなどのネットワークを利用して配信者８側から配信する構成となっているものである。
【００４８】
配信者８側においては、素材となる映像データ２、２ａ、…を準備し、それらの感覚刺激要素４と特性値３の対照関係に関するデータを感覚的特性に基づいて整理調整してデータベース化しておく。また、編集・合成作業を行なうために必要な特性値３に対する演算処理に関する所定法則についての情報や、各特性値３に対応すべき映像的特殊効果に関する情報やプログラム（動作情報の設定ソフトなど）も合わせて蓄積しておき、何れもクライアント７側からの要求に応じてオンラインで提供できるように準備しておくものである。
配信者８からクライアント７への具体的なデータ配信は、専用のコンテンツ管理サーバー９を用いて行なうようになっている。
【００４９】
クライアント７側のコンテンツ再生装置１０には本発明により編集・合成された映像データを適切に再生するための専用ソフトがインストールされており、また、通常は、感覚的特性の種類に基づいて決定される感覚刺激要素４と特性値３との対照関係のデータや特性値３の演算処理に関する所定法則のデータや特性値３に対応する映像的特殊効果に関するデータは、配信データを最小限サイズに収めるために、予めクライアント７側の再生装置１０内にストックしておくものとする。ただし、これらのデータはより良い映像データの編集・合成処理のために常に改良を重ねられるものであるから、適時にこれらのデータ中所望のものを配信者８に要求しオンラインで入手して改定することも勿論許容される。
【００５０】
クライアント７は、店舗内の顧客５に提供するに相応しい映像データを感覚的特性にしたがった表現（「カッコ良い」、「さわやか」、「明るい」、「楽しい」、「落ち着いた」など）を利用して選択し、配信者８に条件に合致する素材映像データ２、２ａ、…を配信するように要求する。配信者８は条件に合致する素材映像データ２のリストを適当な見出し（「海のイメージ」、「山のイメージ」、「森のイメージ」など）やサンプル画像と共にクライアント７に送信し、クライアント７はこのリストから実際に編集・合成処理して店舗内ディスプレイ６に出力したい素材映像データ２を確定するものとしてもよい。
【００５１】
クライアント７は、配信された素材映像データ２、２ａ、…の編集・合成処理を開始するために初期設定としての所望する感覚的特性に関する指示データを入力する。この初期設定は、特に指示がなされなければ、映像データ配信を要求した際に選択した感覚的特性の内容を活用するものとして構わない。また、映像データ配信を要求する際には感覚的特性についての選択をせず、単に「海のイメージ」、「山のイメージ」という指定で素材映像データ２を入手し、クライアント７側で編集・合成作業を開始する際に初めて感覚的特性の指示を行なうものとすることもできる。
【００５２】
何れにしても、素材映像データ２の配信を受け、所望の感覚的特性に関する初期設定を済ませれば、クライアント７は本発明システム１による映像データの自動編集・合成処理を実際に開始して、所望の感覚的特性を反映するように映像的特殊効果を付して作成される新たな映像データをコンテンツ再生装置１０から店舗内ディスプレイ６に出力させることができるようになる。
【００５３】
クライアント７は、具体的に店舗内の顧客５の様子を見ながら、状況に合わせて感覚的特性に関する設定を変更できることは上記してきたとおりであり、顧客５の実際の反応を確認しながら編集・合成作業の方向性に変化を加えて、店舗内の状況に相応しい映像データをリアルタイムに提供するような操作を行なうことが可能である。
【００５４】
このようなリアルタイムの編集・合成に関する操作が実現できるので、クライアント７側の操作者として感性に優れた映像クリエーターの如きが操作を担当する場合には、店舗内の状況等からインスピレーションを受けながら感性に即した編集・合成作業をライブ演奏感覚の如きリアルタイム処理で行なって店舗内ディスプレイ６に出力することも可能で、芸術性の高い映像データを再現性のないものとして提供するようなことも可能である。
【００５５】
本発明では、上記してきたように所望の感覚的特性を反映した編集・合成処理をディスプレイ６に対する出力と同時進行的に行なうことができるので、新たな映像データの作成に関して顧客５などの反応を自動的に反映させる双方向性を持たせることも可能である。
【００５６】
すなわち、クライアント７の店舗内に顧客５の動きや音量の変化、室温の変化などを感知するセンサーを設置し、これらのセンサーによる感知結果を、外部コントロール機器１１を介して顧客５の感覚的特性に関する嗜好であると適切に解釈し適切な操作指示をコンテンツ再生装置１０に行なうようにすることで、店舗内の顧客の希望を反映しながら新たな映像データを作成し、即座に顧客５に対して提供するシステムとすることが可能である。例えば、店舗内の顧客５の動作が激しく、音量も増加し、室温も上昇している場合にはより激しい方向に編集・合成し、動きが少なく音量も低下し、室温上昇もないような場合にはより落ち着いた静かな方向に編集・合成するように規定しておけば顧客５の嗜好を反映していると判断できる。
【００５７】
本発明システム１により作成される新たな映像データには、ニュース情報のような付加情報１２を組合わせてディスプレイ６に表示させることもできる。組合わせの手法は多様に考えられるが、ニュース情報の如く場合には本発明システム１の外部からダイレクトに提供される方が相応しいので、図示のように外部コンテンツ提供サーバー１３からコンテンツ管理サーバー９経由でクライアント７側のコンテンツ再生装置１０に配信されるものとしておけばよい。
【００５８】
クライアント７側の希望によって表示する企業ロゴやキャッチフレーズなどに関する付加情報１２については、配信者８側で素材映像データ２を配信する際に添付するように調整してもよいし、クライアント７側のコンテンツ再生装置１０で独自に付加して表示するものとしてもよい。
【００５９】
何れにしても、このような付加情報１２については感覚的特性に基づいた編集・合成処理などは行なわず、ディスプレイ６により出力する新たな映像データの一部に適宜に表示するものとしておけばよい。
【００６０】
さらに、編集・合成処理に関する操作については、クライアント７側のコンテンツ再生装置１０で行なうのが一般的であるが、インターネットのようなネットワークを通じて配信者８側も接続している場合には配信者８側がこの操作を遠隔操作的に実行することもできることが理解されるべきである。
また、新たな映像データを出力するディスプレイ６も１つに限られるわけではなく、複数であって何ら問題はない。この場合には、出力するディスプレイ６毎に編集・合成処理の方向性が異なるものとなっても構わない。すなわち、ベースとなる素材映像データ２、２ａ、…は共通にしながら、ディスプレイ６毎に映像的特殊効果を異なるものとすることも本発明においては可能である。
【００６１】
【実施例２】
本発明システム１を実際に稼動する場合に準備すべき「感覚的特性」や「感覚刺激要素」についての表現例と「映像的特殊効果」の実例についてその幾つかを以下に示す。
【００６２】
「感覚的特性」の表現例
（基本的な感覚的特性表現）：「さわやか」、「爽快な感じ」、「力強さ」、「激しさ」、「荒々しさ」、「重々しさ」、「クールな感じ」、「デザイナブルな」
（追加的な感覚的特性表現）：「ゆったりとした」、「落ち着かない」、「リズム感のある」、「ダンス」、「チカチカした」、「冷たい」、「暖かい」、「暑い」、「寒い」、「落ち着く」、「リラックス」、「昂揚」、「興奮」、「まったり」、「ダラダラ」、「アップライトな」、「明るい」、「暗い」、「ダークな」
【００６３】
「感覚刺激要素」の表現例
（１）色の感じ（色調）：「緑っぽい」、「青っぽい」、「赤っぽい」、「オレンジっぽい」、「白っぽい」、「黒っぽい」
（２）動きの感じ（動きの速度）：「ゆっくり」、「激しく」、「１倍速」
（３）形の感じ（形状）：「円」、「四角」、「円錐」、「球」、「板」、「トンネル」
（４）追加的要素：「明るさ」、「明」、「暗」
（５）感覚刺激要素としての制作手法：「実写」、「３Ｄアニメ」、「２Ｄアニメ」、「モーショングラフィックス」、「合成」
【００６４】
「映像的特殊効果」の実例：「明暗」、「フラッシュ」、「ブラー」、「フェードアウト」「フェードイン」、「ディゾルブ」、「カットイン」、「カットアウト」、「ホワイトアウト」、「ブラックアウト」、「ワイプ」、「４分割」、「９分割」、「マルチ分割」、「ピクチャーイン」、「セピア色」、「レインボー」、「カラーコレクト」、「色抜き」、「アルファ合成」、「球体」、「破裂」、「波紋」、「回転」、「トンネル」、「立方体」、「円錐」、「板」
【００６５】
上記のような準備を行なって本発明を実施し、モニターとなる視聴者に対して調査したところ、過半数の人から編集・合成の基礎となった特定の感覚的特性が作成された映像データの出力内容から感じられたとの回答を得ることができた。したがって、本発明システムを稼動することにより所望の感覚的特性を反映した映像データの自動的な編集・合成作業が実際に可能であると理解される。
【００６６】
【発明の効果】
以上説明したような本発明によるならば、映像データの構成要素である感覚刺激要素に特定の感覚的特性に基づいて特性値を与え、これを利用して編集・合成処理を自動的に行ない新たな映像データを所定の感性を反映したものとして得ることができ、限られた素材データから多様に変化し得る映像データをリアルタイムに作成することが可能となる。したがって、限られた数の映像コンテンツを素材として状況に応じた編集・合成処理を施した映像データを作成して即時的に提供することができ、店舗などに設置された多数のディスプレイに対してそれぞれに相応しい映像データを出力することなどが簡易且つ低コストに実現できるものであり、高性能化した近時の各種ディスプレイに表示せしむべき映像コンテンツ不足の状況を解消する手段として新たな需要を喚起し得るものであるから、工業的にその価値が高い発明である。
【図面の簡単な説明】
【図１】本発明システムの中心となる基本概念部分の模式図である。
【図２】複数の素材となる映像データを合成する場合の手順についてフローチャート的に説明した図面である。
【図３】本発明の実施形態の１例としてネットワークを利用する場合について示したフローチャート的説明図である。
【符号の説明】
１    本発明による画像データの編集・合成システム
２  素材となる映像データ
２ａ    別の素材となる映像データ
３  特性値
３ａ    新たな特性値
４  感覚刺激要素
５  顧客
６  店舗内ディスプレイ
７  クライアント
８  配信者
９  コンテンツ管理サーバー
１０  コンテンツ再生装置
１１  外部コントロール機器
１２  付加情報
【図１】
2005045480.tif 000003
【図２】
2005045480.tif 000004
【図３】
2005045480.tif 000005