(57)【要約】【課題】複数の動画・静止画データのシーンカット編集や特殊効果挿入のタイミングを自動的に抽出し、音楽付きビデオを容易に編集可能とする。【解決手段】複数の前記動画・静止画データを選択して読み込み（ステップＳ１）、合成対象の音楽データを選択して読み込んだ後（ステップＳ２）、読み込んだ音楽データから予め定めた周波数以下の低域成分のみを抽出して（ステップＳ３）、該低域成分の出力レベルのピーク値を選出し（ステップＳ４）、選出したピーク値からテンポ情報とする閾値を算出して、読み込んだ前記音楽データからテンポ情報の時間位置を取り出し（ステップＳ５）、該テンポ情報を基に、読み込んだ前記動画・静止画データをカット編集して、ビデオデータを作成し（ステップＳ６）、前記音楽データと合成する（ステップＳ７）。前記閾値として、前記低域成分の出力レベルのピーク値に対して予め設定された比率となる出力レベル値とする。【選択図】　　　　図１
2004096617.tif 000002
【特許請求の範囲】
【請求項１】
読み込まれた動画・静止画データのビデオ編集を行なうビデオ編集方法であって、複数の前記動画・静止画データを選択して読み込む画像読込みステップと、読み込んだ前記動画・静止画データと合成する音楽データを選択して読み込む音楽読込みステップと、読み込んだ前記音楽データからテンポ情報を取り出すテンポ取出しステップと、該テンポ情報を基に、読み込んだ複数の前記動画・静止画データをカット編集する画像編集ステップとを備えて、ビデオ編集を行なうことを特徴とするビデオ編集方法。
【請求項２】
請求項１に記載のビデオ編集方法において、予め定められた周波数以下となる前記音楽データの低域成分の出力レベルが予め設定された閾値を超える時点を自動的に抽出することにより、前記テンポ情報が前記音楽データから取り出されることを特徴とするビデオ編集方法。
【請求項３】
請求項２に記載のビデオ編集方法において、前記閾値が、前記低域成分の出力レベルのピーク値に対して予め設定された比率となる出力レベル値に設定されていることを特徴とするビデオ編集方法。
【請求項４】
読み込まれた動画・静止画データのビデオ編集を行なうビデオ編集装置であって、複数の前記動画・静止画データを選択して読み込む画像読込み手段と、読み込んだ前記動画・静止画データと合成する音楽データを選択して読み込む音楽読込み手段と、読み込んだ前記音楽データからテンポ情報を取り出すテンポ取出し手段と、該テンポ情報を基に、読み込んだ複数の前記動画・静止画データをカット編集する画像編集手段とを備えて、ビデオ編集を行なうことを特徴とするビデオ編集装置。
【請求項５】
汎用情報処理装置又は組込み型専用情報処理装置上で動作して、読み込まれた動画・静止画データのビデオ編集を行なうビデオ編集プログラムであって、複数の前記動画・静止画データを選択して読み込む画像読込みステップと、読み込んだ前記動画・静止画データと合成する音楽データを選択して読み込む音楽読込みステップと、読み込んだ前記音楽データからテンポ情報を取り出すテンポ取出しステップと、該テンポ情報を基に、読み込んだ複数の前記動画・静止画データをカット編集する画像編集ステップとを備えて、ビデオ編集を行なうことを特徴とするビデオ編集プログラム。
【請求項６】
請求項５に記載のビデオ編集プログラムをコンピュータ読取り可能な記録媒体に記録していることを特徴とするプログラム記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ビデオ編集方法、ビデオ編集装置、ビデオ編集プログラム、及び、プログラム記録媒体に関し、特に、汎用情報処理装置又は組込み型専用情報処理装置上で動作するアプリケーションプログラムに適用可能なビデオ編集方法、ビデオ編集装置、ビデオ編集プログラム、及び、プログラム記録媒体に関する。
【０００２】
【従来の技術】
ビデオを編集するためのビデオ編集方法及びビデオ編集装置に関しては、例えば、以下のようなビデオ編集アプリケーションプログラムを用いている従来例が開示されている（例えば、特許文献１，２参照のこと）。
即ち、一般的なビデオ編集アプリケーションプログラムにおいては、シーンカット機能、シーンの変わり目を繋ぐトランジション挿入機能、シーンに特殊効果を挿入するフィルタエフェクト機能が具備されている。ビデオ編集者は、かかる個々の機能を駆使して、所望の個々のシーンを切り出し、切り出したそれぞれのシーンに対してフィルタエフェクト（特殊効果）を追加し、しかる後に、シーン間をトランジションを追加して繋ぎ、更に、ＢＧＭ（Ｂａｃｋ　Ｇｒｏｕｎｄ　Ｍｕｓｉｃ）を追加することにより、一つのビデオ作品を作成している。
【０００３】
【特許文献１】
特開平７−０６５５４９号公報（第２−３頁、第１図）
【特許文献２】
特開平７−１７０４７８号公報（第２−４頁、第１図）
【０００４】
【発明が解決しようとする課題】
ここで、従来の技術においては、シーンカットやトランジションのタイミング、切り出したシーンに特殊効果を挿入するタイミングは、編集者自らが判断して行なっていた。
しかしながら、例えば、ミュージッククリップなど音声データのテンポや曲調に合わせた映像を作成するような場合にあっては、編集者自らが、テンポや曲調に合わせて、シーンカットや特殊効果を挿入するタイミングを見計らって、編集を行なう必要があり、音楽付きビデオの編集作業が困難になっていた。
本発明は、そのような状況に鑑みてなされたものであり、テンポや曲調に合わせて自動的に編集されたビデオを作成することができるようにせんとするものである。即ち、複数枚からなる動画・静止画シーンのカット編集や特殊効果挿入のタイミングを自動的に抽出し、音楽付きビデオを容易に編集可能なビデオ編集方法を実現せんとするものである。
【０００５】
【課題を解決するための手段】
第１の技術手段は、読み込まれた動画・静止画データのビデオ編集を行なうビデオ編集方法であって、複数の前記動画・静止画データを選択して読み込む画像読込みステップと、読み込んだ前記動画・静止画データと合成する音楽データを選択して読み込む音楽読込みステップと、読み込んだ前記音楽データからテンポ情報を取り出すテンポ取出しステップと、該テンポ情報を基に、読み込んだ複数の前記動画・静止画データをカット編集する画像編集ステップとを備えて、ビデオ編集を行なうビデオ編集方法とすることを特徴とするものである。
【０００６】
第２の技術手段は、前記第１の技術手段に記載のビデオ編集方法において、予め定められた周波数以下となる前記音楽データの低域成分の出力レベルが予め設定された閾値を超える時点を自動的に抽出することにより、前記テンポ情報が前記音楽データから取り出されるビデオ編集方法とすることを特徴とするものである。
【０００７】
第３の技術手段は、前記第２の技術手段に記載のビデオ編集方法において、前記閾値が、前記低域成分の出力レベルのピーク値に対して予め設定された比率となる出力レベル値に設定されているビデオ編集方法とすることを特徴とするものである。
【０００８】
第４の技術手段は、読み込まれた動画・静止画データのビデオ編集を行なうビデオ編集装置であって、複数の前記動画・静止画データを選択して読み込む画像読込み手段と、読み込んだ前記動画・静止画データと合成する音楽データを選択して読み込む音楽読込み手段と、読み込んだ前記音楽データからテンポ情報を取り出すテンポ取出し手段と、該テンポ情報を基に、読み込んだ複数の前記動画・静止画データをカット編集する画像編集手段とを備えて、ビデオ編集を行なうビデオ編集装置とすることを特徴とするものである。
【０００９】
第５の技術手段は、汎用情報処理装置又は組込み型専用情報処理装置上で動作して、読み込まれた動画・静止画データのビデオ編集を行なうビデオ編集プログラムであって、複数の前記動画・静止画データを選択して読み込む画像読込みステップと、読み込んだ前記動画・静止画データと合成する音楽データを選択して読み込む音楽読込みステップと、読み込んだ前記音楽データからテンポ情報を取り出すテンポ取出しステップと、該テンポ情報を基に、読み込んだ複数の前記動画・静止画データをカット編集する画像編集ステップとを備えて、ビデオ編集を行なうビデオ編集プログラムとすることを特徴とするものである。
【００１０】
第６の技術手段は、前記第５の技術手段に記載のビデオ編集プログラムをコンピュータ読取り可能な記録媒体に記録しているプログラム記録媒体とすることを特徴とするものである。
【００１１】
【発明の実施の形態】
本発明に係るビデオ編集方法、ビデオ編集装置、ビデオ編集プログラム、及び、プログラム記録媒体の実施形態の一例について、以下に図面を参照しながら説明する。
本実施例においては、本発明に係るビデオ編集方法を汎用情報処理装置であるパソコン上で動作するプログラムにより実現する場合を例にとって説明することとするが、本発明は、かかる場合のみに限られるものではなく、如何なる汎用情報処理装置上、又は、組込み型専用情報処理装置上で動作するプログラムに対しても適用することが可能であり、かかるプログラムを市場に流通可能なプログラム記録媒体に記録させておくことも可能であるし、更には、かかるビデオ編集方法を組み込んだ専用の回路部から構成されているビデオ編集装置として実現することも可能である。
【００１２】
ここに、図１は、本発明に係るビデオ編集方法の実施形態の一例を説明する処理の流れを示す処理フローチャートであり、図２は、図１に示すビデオ編集方法を実現するビデオ編集プログラムが実装されるパソコンの構成を示すブロック構成図である。
図２において、パソコン１０は、全体を制御するＣＰＵ１の制御に基づいて、必要とするビデオ編集プログラムの各処理プログラムを順次ハードディスク６からメモリ５に読み出して、所望の動作を行なう。プログラムの動作に従って、例えば、ハードディスク６に蓄積されているビデオシーンをディスプレイ２に逐次画面表示し、画面表示されたビデオシーンの中から切り出すべきシーンを、編集者が、スピーカ８から出力される音楽情報を参照しながら、キーボード３やマウス４を用いて選択指示することにより、逐次ビデオ編集がなされ、例えば、ハードディスク６上に編集結果を保存させることも可能であるが、図１に示すビデオ編集方法に示すように、本発明は、かかる音楽付きビデオ編集処理を自動的に実現している点に特徴を有している。
【００１３】
ここで、ハードディスク６に蓄積されるビデオシーンは、例えば、デジカルカメラにより撮影された複数の動画データや静止画データをメモリカード７ａに蓄積した後、該メモリカード７ａをＰＣカードスロット７に装着して、ハードディスク６に読み込むこととしても良いし、例えば、ＵＳＢケーブルを介して、直接、デジタルカメラからビデオシーンをハードディスク６に取り込むこととしても良い。また、ＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｋ）やＣＤ（Ｃｏｍｐａｃｔ　Ｄｉｓｋ）などを介して、あるいは、インターネットからダウンロードして、ビデオシーンをハードディスク６に取り込むこととしても構わない。
【００１４】
一方、音楽ファイルも、同様に、デジタルカメラから、メモリカード７ａやＵＳＢケーブルを介してハードディスク６に取り込むこととしても良いし、ＤＶＤやＣＤや音楽ＣＤあるいはＭＤ（Ｍｉｎｉ　Ｄｉｓｋ）などを介して、あるいは、インターネットからダウンロードしてハードディスク６に取り込むこととしても良いし、あるいは、パソコン１０上で作成しても構わない。
【００１５】
また、図３は、図１に示すビデオ編集方法を実現するパソコン上のビデオ編集プログラムの動作を説明する動作説明図である。
即ち、編集者がビデオ編集の対象とする複数枚の動画・静止画データ２１ａを取り込むと共に動画・静止画データ２１ａと合成するための音楽データ２２ａを取り込む領域として、ビデオ編集用のユーザインタフェースを提供するソフトウェアＧＵＩ２０（ＧＵＩ：Ｇｒａｐｈｉｃａｌ　Ｕｓｅｒ　Ｉｎｔｅｒｆａｃｅ）の画像領域２１及び音楽領域２２に、それぞれハードディスク６に保存されている画像ファイル６ａ及び音楽ファイル６ｂから選択して設定する様子を模式的に示している。
【００１６】
なお、ソフトウェアＧＵＩ２０に取り込まれた動画・静止画データ２１ａはディスプレイ２にプレビュー用として画面表示すると共に、取り込まれた音楽データ２２ａをスピーカ８から試聴用として出力することも可能である。ここに、ソフトウェアＧＵＩ２０に取り込まれた複数枚の動画・静止画データ２１ａの各シーンの切り替えタイミング（即ち、カット編集するタイミング）やトランジションのタイミングや切り出したシーンに特殊効果を挿入するタイミングは、取り込まれた音楽データ２２ａのテンポに合わせて行なわれるように設定することが重要である。
【００１７】
図４は、ビデオ編集プログラムが音楽データのテンポを取り出す際に参照する閾値を算出する動作を説明するための算出説明図である。図５は、取り出した音楽データのテンポに基づいて、ビデオシーンを編集する動作を説明するためのビデオ編集説明図である。
【００１８】
図１に示すフローチャートを用いて、本実施例におけるビデオ編集方法について以下に説明する。まず、ビデオ編集の対象とする複数の動画データや静止画データは、前述のごとく、デジタルカメラなどにより撮影されてメモリカード７ａに蓄積され、図２のＰＣカードスロット７を介して、ハードディスク６に画像ファイル６ａとして保存されている。一方、音楽データも、例えば、インターネットからダウンロードしたり、又は、パソコン１０上で作成されて、同様に、ハードディスク６に音楽ファイル６ｂとして保存されている。
【００１９】
ビデオの編集者は、ハードディスク６に保存されている画像ファイル６ａの中からビデオ編集せんとする複数枚のシーンからなる動画・静止画データ２１ａを選択して読み出して、当該ビデオ編集プログラムのソフトウェアＧＵＩ２０内の画像領域２１に取り出す（ステップＳ１）。更に、ハードディスク６に保存されている音楽ファイル６ｂの中から選択された動画・静止画データ２１ａに合成せんとしている音楽データ２２ａを選択して読み出して、当該ビデオ編集プログラムのソフトウェアＧＵＩ２０内の音楽領域２２に取り出す（ステップＳ２）。
【００２０】
次に、ソフトウェアＧＵＩ２０内の音楽領域２２に取り出された音楽データ２２ａから、ビデオ編集のタイミング（テンポ情報）を取得する処理が実行される。
一般に、音楽データの低域成分には、音楽のリズム（テンポ）を構成するベースやドラムなどの楽器からの音の成分が含まれているので、予め定めた周波数以下例えば２００Ｈｚ以下の低域成分のみを抽出する（ステップＳ３）。更に、抽出された低域成分の中から最も出力レベルが高いピーク値を選び出す（ステップＳ４）。しかる後に、選出された該ピーク値に対して予め設定された比率例えば８０％となる出力レベルを、当該音楽データ２２ａのテンポ情報を抽出するための閾値とする（ステップＳ５）。即ち、音楽データの低域成分が該閾値を超える時点が、ビデオ編集のタイミング（テンポ情報）の情報を与えることとなる。
【００２１】
例えば、図４において、音楽データ波形２２ａ１は、音楽データ２２ａから抽出された低域成分の音楽データ波形を示し、該低域成分の出力レベルのピークを示すピーク値２２ａ２の８０％値として算出された閾値２２ａ３がビデオ編集のタイミング（テンポ情報）の情報を与えることとなる。
【００２２】
即ち、ソフトウェアＧＵＩ２０内の音楽領域２２に入力されてくる音楽データ２２ａの中から抽出された低域成分の音楽データ波形２２ａ１の出力レベルが、閾値２２ａ３となる時点を、ソフトウェアＧＵＩ２０内の画像領域２１に取り出された動画・静止画データ２１ａのシーンを切り替えるタイミングとして設定することにより、音楽データ２２ａのテンポに同期させて、動画・静止画データ２１ａのシーンを切り替えていくビデオ編集が可能となる。更に、かかるシーンの切り替えタイミング（即ち、カット編集するタイミング）を基準として、トランジションの挿入タイミングや切り出したシーンに特殊効果を挿入するタイミングが決定されていく。
【００２３】
かくのごとく、複数枚からなる動画・静止画データ２１ａのシーンを切り替えるタイミングとして用いる閾値２２ａ３として、動画・静止画データ２１ａに合成する音楽データ２２ａから抽出された低域成分の出力レベルのピーク値２２ａ２の８０％値を用いることとしているが、かかる閾値２２ａ３は、合成する音楽データのテンポ情報に同調させて、シーンの切り出しが可能であり、自動的に、かつ、容易に音楽データ２２ａから該テンポ情報を抽出することが可能な値として、予め任意に設定される値を用いる限り如何なる値でも良い。なお、ステップＳ３乃至ステップＳ５は、前述のごとく、読み込んだ音楽データ２２ａからテンポ情報を取り出すテンポ取出しステップを構成している。
【００２４】
ビデオデータ（映像データ）の編集に当たっては、図５のビデオ編集説明図に示すように、音楽データ２２ａの低域成分２２ａ１の出力レベルが閾値２２ａ３となるタイミング（即ち、テンポ情報を示すタイミング）をシーン切り替えタイミングＴｉ（ｉ＝１，２，３，…）として、該シーン切り替えタイミングＴｉに至る毎に、入力されてくる複数枚の動画・静止画データ２１ａのシーン０　２１ａ０をシーンｉ　２１ａｉ（ｉ＝１，２，３，…）に順次切り替えさせて、即ち、動画・静止画データ２１ａをカット編集して、カット編集したそれぞれのシーンに対してフィルタエフェクト（特殊効果）を施し、しかる後に、シーン間にトランジションを追加して、シーン同士を繋ぐことにより、ビデオデータ（映像データ）３０を作成する（ステップＳ６）。即ち、ステップＳ６は、ステップＳ３乃至ステップＳ５のテンポ取出しステップにより取り出された前記テンポ情報を基に、読み込まれた動画・静止画データ２１ａをカット編集する画像編集ステップを構成している。
【００２５】
作成されたビデオデータ（映像データ）３０と入力されている音楽データ２２ａとを合成し、音声付ビデオデータを出力する（ステップＳ７）。而して、音楽データ２２ａのテンポに同期させて、複数枚の動画・静止画データ２１ａのシーンを切り替えていくビデオ編集を、確実、かつ、容易に実現することが可能となる。
【００２６】
【発明の効果】
以上に説明したごとく、本発明に係るビデオ編集方法、ビデオ編集装置、ビデオ編集プログラム、及び、プログラム記録媒体によれば、音楽データのリズム（テンポ）に合わせて動画・静止画シーンを切り替えるタイミングを自動的に設定したビデオ編集が可能となり、音楽情報付きのビデオ編集を容易に行なうことが可能となる。
【図面の簡単な説明】
【図１】本発明に係るビデオ編集方法の実施形態の一例を説明する処理の流れを示す処理フローチャートである。
【図２】図１に示すビデオ編集方法を実現するビデオ編集プログラムが実装されるパソコンの構成を示すブロック構成図である。
【図３】図１に示すビデオ編集方法を実現するパソコン上のビデオ編集プログラムの動作を説明する動作説明図である。
【図４】ビデオ編集プログラムが音楽データのテンポを取り出す際に参照する閾値を算出する動作を説明するための算出説明図である。
【図５】取り出した音楽データのテンポに基づいて、ビデオシーンを編集する動作を説明するためのビデオ編集説明図である。
【符号の説明】
１…ＣＰＵ、２…ディスプレイ、３…キーボード、４…マウス、５…メモリ、６…ハードディスク、６ａ…画像ファイル、６ｂ…音楽ファイル、７…ＰＣカードスロット、７ａ…メモリカード、８…スピーカ、１０…パソコン、２０…ソフトウェアＧＵＩ、２１…画像領域、２１ａ…動画・静止画データ、２２…音楽領域、２２ａ…音楽データ、２２ａ１…低域成分の音楽データ波形、２２ａ２…低域成分の音楽データ波形のピーク値、２２ａ３…閾値、３０…ビデオデータ（映像データ）、Ｔｉ…シーン切り替えタイミング。
【図１】
2004096617.tif 000003
【図２】
2004096617.tif 000004
【図３】
2004096617.tif 000005
【図４】
2004096617.tif 000006
【図５】
2004096617.tif 000007