(57)【特許請求の範囲】
【請求項１】
第１のフレームレートの映像データを記憶するメモリと、
前記メモリに記憶されている第１のフレームレートの映像データを他端末に移動させるとき、該第１のフレームレートよりも低い第２のフレームレートの映像データに変換する変換手段と、
前記変換手段によって第２のフレームレートに変換された映像データを、他端末に移動させる移動手段と、
前記第２のフレームレートの映像データを取得した他端末が前記第２のフレームレートの映像データに対して編集を行った編集点を取得し、この編集点に該当する前記第１のフレームレートの映像データの複数の編集点候補のフレームの画像特徴を抽出し、画像特徴の変化が大きい編集点候補を編集点として前記第１のフレームレートの映像データに対して編集を行う映像編集手段を具備することを特徴とする映像装置。
【請求項２】
前記画像特徴は、前記第２のフレームレートの映像データに対して編集された編集点に該当する前記第１の映像データの複数の編集点候補に対応するフレームの輝度の分散、色の分散、動きベクトルの総量の内、少なくとも一つ以上の値であることを特徴とする請求項１に記載の映像装置。
【請求項３】
前記変換手段は、映像データのフレームを間引くことで前記第１のフレームレートから前記第２のフレームレートへ変換させることを特徴とする請求項１に記載の映像装置。
【請求項４】
第１の映像装置と第２の映像装置とを有する映像編集システムにあって、
前記第１の映像装置は、
第１のフレームレートの映像データを記憶する記憶手段と、
前記記憶手段に記憶されている第１のフレームレートの映像データを前記第２の映像装置に移動させるとき、第１のフレームレートよりも低い第２のフレームレートの映像データに変換する変換手段と、
前記第２の映像装置が前記第２のフレームレートの映像データに対して編集した編集点情報を取得し、この編集点に該当する前記第１のフレームレートの映像データの複数の編集点候補のフレームの画像特徴を抽出し、画像特徴の変化が大きい編集点候補を編集点として前記第１のフレームレートの映像データに対して編集を行う第１の映像編集手段とを備え、
前記第２の映像装置は、
前記第２のフレームレートの映像データを取得し、第２のフレームレートの映像データに対して編集点を指示する第２の映像編集手段を具備する
ことを特徴とする映像編集システム。
【請求項５】
前記画像特徴は、前記第２のフレームレートの映像データに対して編集された編集点に該当する前記第１の映像データの複数の編集点候補に対応するフレームの輝度の分散、色の分散、動きベクトルの総量の内、少なくとも一つ以上の値であることを特徴とする請求項４に記載の映像編集システム。
【請求項６】
前記変換手段は、映像データのフレームを間引くことで前記第１のフレームレートから前記第２のフレームレートへ変換させることを特徴とする請求項４に記載の映像編集システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像装置が記憶している映像データを、携帯端末等の画像処理能力が異なる他の装置で再生可能となるように変換する映像装置および映像編集システムに関する。
【背景技術】
【０００２】
（背景技術１）
編集スタジオに備えられた編集機（第１の装置）と編集スタジオ外部に持ち運び可能なビデオカメラ（第２の装置）とを有するシステムにおいて、ビデオテープカセットのビデオテープの編集点記憶方法がある（例えば、特許文献１参照。）。この特許文献１では、編集スタジオ外部等において、ビデオカメラ側で、撮影済みビデオテープカセットのユーザ編集を行い、編集情報（カット画像のイン点とアウト点データ）をビデオテープカセットに記録する。次に編集スタジオに戻り、このビデオテープカセットを編集機に装着すると、ビデオテープカセットに記録された編集情報（カット画像のイン点とアウト点データ）が読み出されて編集が行われる。このように、編集スタジオ外部においても編集作業を行い、その編集情報を生かして、編集スタジオでの編集を効率的に行っている。  
この編集機側で処理する映像と、ビデオカメラ側で処理する映像とは、ビデオテープカセットに記録された共通の映像であり、その映像の画像の荒さやフレームレート等の画像品質も同じである。
【０００３】
（背景技術２）
サーバ（第１の装置）とクライアント端末（第２の装置）を有して、データベース情報の遠隔制御を行うシステムがある（例えば、特許文献２参照。）。この特許文献２では、サーバは、画像等の実体データをデータベースに保存している。そして、サーバは、実体データをラスタ画像に変換して、インターネットを介してクライアント端末へ送信する。クライアント端末のユーザは、ラスタ画像に対して編集を行い、スクリプト情報（編集用リスト）のみをインターネットを介してサーバへ送信する。サーバは、受信したスクリプト情報を実行して、画像等の実体データの編集や加工を自動で行う。このように、実体データをラスタ画像に変換して、インターネットを介してクライアント端末へ送信することにより、実体データの漏洩を防ぐことができる。また、遠隔制御で編集を行うことができる。  
このサーバ側で処理する実体データと、クライアント端末側で処理するラスタ画像とは、画像品質が異なる。
【０００４】
（背景技術３）
テレビ番組や映画等のオリジナル映像をＤＶＤレコーダ（第１の装置）本体に録画すると共に、このオリジナル映像を携帯電話機用のＳＤビデオフォーマットに変換してＳＤメモリカードに録画するＤＶＤレコーダがある。そして、このＳＤビデオフォーマットのＳＤメモリカードを挿入して映像を再生および編集できるＳＤビデオ対応の携帯電話機（第２の装置）が市販されている。  
このＤＶＤレコーダ本体に録画されているオリジナル映像と、携帯電話機で再生および編集するＳＤビデオフォーマットの映像とは、画像品質が異なる。
【特許文献１】特開２００４−１９３６７２号公報（第６〜７頁、図７、図８、図９）
【特許文献２】特開２００４−６２５４１号公報（第６〜７頁、図２）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来の背景技術１〜３では、第１の装置側が処理するオリジナル映像の画像品質と、第２の装置側が処理する映像の画像品質とが異なる場合において、第２の装置側で編集処理を行い、この編集情報を基に、第１の装置側でオリジナル映像に対して編集を行う時の画像品質の差異にどう対応するかの記載がない。
【０００６】
本発明は、上記の問題点を解決するためになされたもので、第１の装置側が処理するオリジナルのビデオ映像の画像品質と、第２の装置側が処理する携帯映像の画像品質とが異なる場合において、第２の装置側でユーザが映像に対して編集作業を行い、この編集情報を基に、第１の装置側でオリジナルの映像に対して画像品質の差異を考慮して編集を自動で行う。これにより、第１の装置側でユーザが編集作業を行うことなく、第２の装置側で編集することが可能となると共に、第１の装置側のオリジナルのビデオ映像の編集が自動で、画像品質の差異を考慮して行うことができる映像装置および映像編集システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明の映像装置は、第１のフレームレートの映像データを記憶するメモリと、前記メモリに記憶されている第１のフレームレートの映像データを他端末に移動させるとき、該第１のフレームレートよりも低い第２のフレームレートの映像データに変換する変換手段と、前記変換手段によって第２のフレームレートに変換された映像データを、他端末に移動させる移動手段と、前記第２のフレームレートの映像データを取得した他端末が前記第２のフレームレートの映像データに対して編集を行った編集点を取得し、この編集点に該当する前記第１のフレームレートの映像データの複数の編集点候補のフレームの画像特徴を抽出し、画像特徴の変化が大きい編集点候補を編集点として前記第１のフレームレートの映像データに対して編集を行う映像編集手段を具備することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、第１の装置側が処理するオリジナルのビデオ映像の画像品質と、第２の装置側が処理する携帯映像の画像品質とが異なる場合において、第２の装置側でユーザが携帯映像に対して編集作業を行った場合、この編集情報を基に、第１の装置側でオリジナルのビデオ映像に対して画像品質の差異を考慮して編集を自動で行う。これにより、第１の装置側でユーザが編集作業を行うことなく、第２の装置側で編集することが可能となると共に、第１の装置側のオリジナルのビデオ映像の編集が自動で、画像品質の差異を考慮して行うことが可能となる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明の実施例を、図面を参照して説明する。
【実施例】
【００１０】
図１は、本発明の実施例に係る映像編集システムのシステム図である。映像編集システムは、ビデオ装置１００、携帯端末２００、記憶媒体であるＳＤカード３００等から構成される。ＳＤカード３００は、ビデオ装置１００と携帯端末２００間の情報伝達媒体として使用される。ビデオ装置１００は、ビデオ映像格納部１を有する。ビデオ映像格納部１には、ＴＶ等から録画した映像や、ＣＤ映像が格納されている。その映像の圧縮方式は例えばＭＰＥＧ−２が使われており、映像のフレームレートは高速であり、画像品質は高い。ビデオ装置１００は、ビデオ映像格納部１のビデオ映像を携帯端末２００で取り扱える携帯映像に変換して、ビデオ映像識別情報と共にＳＤカード３００に記録する。携帯端末２００はビデオ装置１００に比べて画像処理能力が低いために、携帯端末２００で取り扱う携帯映像は、例えばＭＰＥＧ−４であり、映像のフレームレートは低速であり、ビデオ映像に比べると画像品質は低い。
【００１１】
ＳＤカード３００は携帯端末２００に挿入される。携帯端末２００とＳＤカード３００は持ち運び可能であり、ユーザは、任意の場所で、携帯映像の再生と編集を行うことができる。携帯端末２００は、ＳＤカード３００の携帯映像を携帯映像格納部１２に記録する。そして、携帯端末２００のユーザは、携帯映像格納部１２の携帯映像を再生しながら、チャプター分割、チャプター削除、その他の編集作業を行う。そしてこの携帯編集情報とビデオ映像識別情報がＳＤカード３００に記録される。この携帯編集情報とビデオ映像識別情報を記録するＳＤカード３００は、携帯映像が記録されたＳＤカード３００とは別のＳＤカードであってもよい。
【００１２】
携帯編集情報とビデオ映像識別情報が記録されたＳＤカード３００はビデオ装置１００に挿入される。ビデオ装置１００は、ＳＤカード３００に記録された携帯編集情報に基づいて、ビデオ映像格納部１のビデオ映像に対して編集を行う。ＳＤカード３００に携帯映像が記録されていたとしてもそれは使用しない。編集時、携帯映像の低速フレームレートの携帯編集情報を、ビデオ映像の高速レートに対して、後述（図４）の最適化編集を行う。  
なお、ビデオ装置１００、携帯端末２００共に、通信機能等を有する場合には、両者間の情報伝達媒体は、記憶媒体であるＳＤカードに限らず、ＬＡＮや無線ＬＡＮ等の通信媒体でもよく、ＬＡＮ等を介して、携帯映像および携帯編集情報を送信受信してもよい。
【００１３】
図２は、本発明の実施例に係るビデオ装置のブロック図である。ビデオ装置１００は、ビデオ映像格納部１、映像変換部２、ＳＤカードＩ／Ｆ３、ビデオ映像編集部４等から構成される。ＳＤカード３００は、ＳＤカードＩ／Ｆ３に装着されて、情報の書き込み、読取りが行われる。ビデオ映像格納部１には、ＴＶ等から録画した映像や、ＣＤ映像が格納されている。映像変換部２は、ビデオ映像格納部１に格納されているビデオ映像を携帯映像に変換して、ビデオ映像識別情報と共に、ＳＤカードＩ／Ｆ３に装着されているＳＤカード３００に記録する。
【００１４】
携帯端末２００により携帯編集情報およびビデオ映像識別情報が記録されたＳＤカード３００は、ＳＤカードＩ／Ｆ３に装着されて、ビデオ映像編集部４により携帯編集情報およびビデオ映像識別情報が読み取られる。そして、ビデオ映像編集部４は、ＳＤカード３００に記録された携帯編集情報に基づいて、ビデオ映像識別情報に該当するビデオ映像格納部１のビデオ映像に対して編集を行う。この時、携帯映像の低速フレームレートの携帯編集点情報を、ビデオ映像の高速レートに対して、後述（図４）の最適化編集を行う。
【００１５】
なお、ビデオ装置１００は、通信機能等を有する場合には、図示しない通信Ｉ／Ｆ部を介して、携帯端末２００との間で、携帯映像の送信、携帯編集情報等の受信を行ってもよい。
【００１６】
図３は、本発明の実施例に係る携帯端末のブロック図である。携帯端末２００は、ＳＤカードＩ／Ｆ１１、携帯映像格納部１２、携帯映像再生部１３、キー入力部１４、携帯映像編集部１５、携帯編集情報格納部１６等から構成される。ビデオ装置１００により携帯映像およびビデオ映像識別情報が記録されたＳＤカード３００は、ＳＤカードＩ／Ｆ１１に装着されて携帯映像およびビデオ映像識別情報が読み出され、携帯映像格納部１２にコピーされる。そして、携帯映像格納部１２の携帯映像は、携帯映像再生部１３で再生されて表示される。携帯端末２００のユーザは、再生映像を見ながら、キー入力部１４を操作して、チャプター分割のための分割点の指定や、削除するチャプターのＩＮ点（チャプターの開始点）やＯＵＴ点（チャプターの終了点）の指定、画像へのエフェクト（フェード、ワイプ、ミックス等）とそのパラメータの指定、テロップの挿入、タイトル名の挿入、サムネル画像の作成等の編集作業を行う。携帯映像編集部１５は、これらの編集情報を携帯編集情報として、ビデオ映像識別情報と共に携帯編集情報格納部１６に記録する。編集情報格納部１６は、この携帯編集情報およびビデオ映像識別情報をＳＤカードＩ／Ｆ１１に装着されたＳＤカード３００に記録する。
【００１７】
なお、携帯端末２００は、通信機能等を有する場合には、図示しない通信Ｉ／Ｆ部を介して、ビデオ装置１００との間で、携帯映像の受信、携帯編集情報等の送信を行ってもよい。
【００１８】
図４は、本発明の実施例に係る映像編集システムの編集点のタイミング図である。ビデオ装置１００に格納されているビデオ映像は、画像品質が高く、映像のフレームレートは高速である。このフレームのタイミングをＴ１〜Ｔ１３で示す。フレームレートは、例えばタイミングＴ２、Ｔ３間の間隔が短く、フレームレートは高速である。ビデオ装置１００は、携帯端末２００用にビデオ映像を携帯映像に変換する。この時、携帯映像のフレームレートは、例えば５分の１となり、ビデオ映像のフレームタイミングＴ１〜Ｔ１３の内、タイミングＴ２、Ｔ７、Ｔ１２のフレームタイミングとなる。
【００１９】
携帯端末２００では、この携帯映像のタイミングＴ２、Ｔ７、Ｔ１２、・・・に対して、チャプター分割のための分割点や削除するチャプターのＩＮ点やＯＵＴ点である携帯編集点の指定が行われる。まず、携帯端末２００のユーザは、携帯映像の再生表示を見ながら、チャプター分割のための分割点や削除するチャプターのＩＮ点やＯＵＴ点をキー入力部１４を操作して指定する。携帯映像編集部１５は、キー入力部１４から編集点の指示があった時のタイミングである例えばＴ７を携帯編集点として、携帯編集情報格納部１６に記録する。また、ユーザにより指定されたチャプターのＩＮ点やＯＵＴ点の種別およびチャプターの削除や分割等の種別情報も携帯編集情報格納部１６に記録する。携帯編集情報格納部１６は、この携帯編集情報および対象となるビデオ映像識別情報をＳＤカードＩ／Ｆ１１に装着されたＳＤカード３００に記録する。
【００２０】
ビデオ装置１００は、この携帯編集情報およびビデオ映像識別情報が記録されたＳＤカード３００を読み取り、携帯端末２００により指定された携帯編集点がタイミングＴ７であることがわかる。ビデオ装置１００のビデオ映像編集部４は、この携帯編集点タイミングＴ７を、ビデオ映像格納部１に格納されているビデオ映像識別情報のビデオ映像に対して適用する。この時、携帯端末２００により指定された携帯編集点のタイミングはフレームレートが遅いために、携帯端末２００により指定された携帯編集点タイミングＴ７は、ビデオ映像のフレームタイミングの５個分に相当する。この例では、タイミングＴ３〜Ｔ７の５個に相当する。そのため、ビデオ映像編集部４は、タイミングＴ３〜Ｔ７の５個の内、どのタイミングが最適であるかを次に示すように行う。
【００２１】
ビデオ映像編集部４は、タイミングＴ３〜Ｔ７の５個のビデオ映像のフレームそれぞれの輝度の分散、色の分散、動きベクトルの総量等の特徴量の内、少なくとも一つ以上の値を特徴量とし、各フレームの特徴量を算出する。そして、その変化が多いタイミングを最適な編集点として決定する。この例では、タイミングＴ３、Ｔ４のフレーム映像は類似しており、タイミングＴ５からフレーム映像の特徴が変化し、またタイミングＴ５〜Ｔ７の映像は類似していると算出した場合である。この変化が多いタイミングＴ５をビデオ映像の編集点として、オリジナルのコンテンツであるビデオ映像に対して編集を行う。例えば、携帯端末２００から指定された携帯編集情報が、携帯編集点はタイミングＴ７であり、削除チャプターのＩＮ点だとすると、ビデオ映像編集部４は、ビデオ映像のタイミングＴ５以降から図示しないタイミングのＯＵＴ点までのチャプターを削除する編集を行う。このように、複数の編集点候補の中から、映像フレーム映像の特徴が変化するポイントを算出して、編集することにより、編集後の映像の繋ぎ目をスムーズにすることができる。
【００２２】
なお、ビデオ装置と携帯端末に限らず、他の装置の組み合わせにおいても、それぞれの装置が取り扱う映像のフレームレートが異なる場合に、適用することができる。  
また、ビデオ装置と携帯端末間の情報伝達用の記憶媒体は、ＳＤカードに限らず、メモリースティック等の記憶媒体であってもよい。  
また、ビデオ装置と携帯端末間の情報伝達用の通信媒体は、ＬＡＮや無線ＬＡＮに限らず、Ｂｌｕｅｔｏｏｔｈ、ＵＳＢ、ＩＥＥＥ１３９４などであってもよい。また、家庭内のようなローカルなネットワークだけでなく、インターネットなどのオープンなネットワークでも利用することが可能である。
【００２３】
本発明の実施例によれば、ビデオ装置の高速フレームレートのオリジナルコンテンツのビデオ映像に対して、携帯端末は、低速フレームレートの携帯映像で編集を行い、ビデオ装置は、この携帯編集情報を基にして、ビデオ装置の高速フレームレートのオリジナルコンテンツのビデオ映像に対して最適化を行い、スムーズな編集映像を得ることができる。
【図面の簡単な説明】
【００２４】
【図１】本発明の実施例に係る映像編集システムのシステム図。
【図２】本発明の実施例に係るビデオ装置のブロック図。
【図３】本発明の実施例に係る携帯端末のブロック図。
【図４】本発明の実施例に係る映像編集システムの編集点のタイミング図。
【符号の説明】
【００２５】
１  ビデオ映像格納部
２  映像変換部
３  ＳＤカードＩ／Ｆ
４  ビデオ映像編集部
１１  ＳＤカードＩ／Ｆ
１２  携帯映像格納部
１３  携帯映像再生部
１４  キー入力部
１５  携帯映像編集部
１６  携帯編集情報格納部
１００  ビデオ装置
２００  携帯端末
３００  ＳＤカード
【図１】
0004537905.tif 000002
【図２】
0004537905.tif 000003
【図３】
0004537905.tif 000004
【図４】
0004537905.tif 000005