(57)【要約】      （修正有）【課題】メディアデータの視覚表示を用いてメディアデータを再構成する方法と装置を提供する。【解決手段】装置１０において、表示部１３はメディアデータアイテムの時間的メタデータに応じて時間順でメディアデータアイテムの視覚表示を消費する。操作部１２は、ユーザ入力の受け取りに応じて、第１のメディアデータアイテムの視覚表示の位置を変更する。他のメディアデータアイテムの視覚表示の位置が、第１のメディアデータアイテムの視覚表示の位置変更に対応して、自動的に変更される。【選択図】図２
2016116222.tif 000002
【特許請求の範囲】
【請求項１】
メディアデータの視覚表示を用いて前記メディアデータを再構成する方法であって、前記メディアデータの各アイテムは時間的メタデータに関連し、前記方法は、
メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じた時間順で表示するステップと、
ユーザ入力の受け取りに応じて、第１のメディアデータアイテムの視覚表示の位置を、第１の時間的位置から第２の時間的位置に変更するステップであって、前記第１のメディアデータアイテムの視覚表示の位置変更に対応して、前記第１と第２の時間的位置の間の前記メディアデータアイテムの視覚表示の位置は自動的に変更される、ステップとを有する
方法。
【請求項２】
前記第２の時間的位置が前記第１の時間的位置より時間的に前にあるとき、前記第１と前記第２の時間的位置の間にある前記メディアデータアイテムの視覚表示の位置は、前記時間順に対して後方向に変更される、
請求項１に記載の方法。
【請求項３】
前記第２の時間的位置が前記第１の時間的位置より時間的に後にあるとき、前記第１と前記第２の時間的位置の間にある前記メディアデータアイテムの視覚表示の位置は、前記時間順に対して前方向に変更される、
請求項１に記載の方法。
【請求項４】
前記第１のメディアデータアイテムの視覚表示と、自動的に変更された前記メディアデータアイテムの視覚表示との位置関係は、位置変更後でも同じである、
請求項１ないし３いずれか一項に記載の方法。
【請求項５】
前記メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じて、クラスター化してグループに分けるステップと、前記メディアデータアイテムの時間的メタデータに応じて、前記グループを時間順で表示するステップとをさらに有する、
請求項１ないし４いずれか一項に記載の方法。
【請求項６】
前記第１のメディアデータアイテムの視覚表示の第１の時間的位置は、第１のグループにあり、前記第１のメディアデータアイテムの視覚表示の第２の時間的位置は、第２のグループにある、又はどのグループにも属しない空白エリアにある、
請求項５に記載の方法。
【請求項７】
前記グループは、垂直方向に時間順に表示され、前記グループの各々において、前記メディアデータアイテムの視覚表示が水平方向に時間順に表示され、またはその逆である、
請求項５または６に記載の方法。
【請求項８】
メディアデータアイテムの視覚表示はドラッグ可能なグラフィカルアイコンを含む、
請求項１ないし７いずれか一項に記載の方法。
【請求項９】
前記第１のメディアデータアイテムの視覚表示の位置を変更するステップは、ユーザ入力の受け取りに応じて、前記第１のメディアデータアイテムのグラフィカルアイコンをドラッグアンドドロップするステップを含む、
請求項８に記載の方法。
【請求項１０】
前記メディアデータの各アイテムはビデオデータのショットであり、前記メディアデータアイテムの時間的メタデータは前記ショットのタイムコードであり、前記メディアデータアイテムの各グループは前記ビデオデータのシーンである、
請求項１ないし９いずれか一項に記載の方法。
【請求項１１】
前記メディアデータアイテムの視覚表示の位置変更に対応して前記メディアデータアイテムの時間的メタデータを修正するステップをさらに有する、
請求項１ないし１０いずれか一項に記載の方法。
【請求項１２】
メディアデータの視覚表示を用いて前記メディアデータを再構成するように構成された装置であって、前記メディアデータの各アイテムは時間的メタデータに関連し、前記装置は、
メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じた時間順で表示するように構成された表示部と、
ユーザ入力を受け取るように構成された入力部と、
ユーザ入力の受け取りに応じて、第１のメディアデータアイテムの視覚表示の位置を、第１の時間的位置から第２の時間的位置に変更するように構成された操作部であって、前記第１のメディアデータアイテムの視覚表示の位置変更に対応して、前記第１と第２の時間的位置の間の前記メディアデータアイテムの視覚表示の位置は自動的に変更される、操作部とを有する
装置。
【請求項１３】
前記操作部は、前記メディアデータアイテムの時間的メタデータに応じて、前記メディアデータアイテムの視覚表示をクラスター化してグループに分けるように構成され、前記表示部は、前記メディアデータアイテムの時間的メタデータに応じて時間順で、前記グループを表示するように構成されている、
請求項１２に記載の装置。
【請求項１４】
メディアデータと前記メディアデータの時間的メタデータとを受け取るように構成された受取部と、前記メディアデータと前記時間的メタデータを記憶するように構成された記憶部とをさらに有する、
請求項１２または１３に記載の装置。
【請求項１５】
メディアデータの視覚表示を用いて前記メディアデータを再構成する命令を記憶したコンピュータ読み取り可能記憶媒体であって、前記命令は、コンピュータにより実行されると、前記コンピュータに、
メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じた時間順で表示するステップと、
ユーザ入力の受け取りに応じて、第１のメディアデータアイテムの視覚表示の位置を、第１の時間的位置から第２の時間的位置に変更するステップであって、前記第１のメディアデータアイテムの視覚表示の位置変更に対応して、前記第１と第２の時間的位置の間の前記メディアデータアイテムの視覚表示の位置は自動的に変更される、ステップとを実行させる、
コンピュータ読み取り可能記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
メディアデータの再構成をする方法と装置であって、そのメディアデータに関連した視覚表示と時間的メタデータを提案する。また、かかる方法及び装置に適したコンピュータ読み取り可能媒体も提案する。
【背景技術】
【０００２】
ニュースビデオ、プレスレポート、コマーシャル、及び映画などのメディアのプロダクションにおいては、いろいろなタイプの大量のメディアデータが生成され、その後編集される。かかるメディアデータの管理は、プロダクションプロシージャとその効率性にとって必須（ｅｓｓｅｎｔｉａｌ  ａｎｄ  ｃｒｕｃｉａｌ）のものである。この管理のための一般的なアプローチにひとつは、メタデータの利用である。メタデータは簡単にはデータに関するデータとして定義できる。メタデータアイテムは、メディアデータの個別情報を記述し、又はさまざまな情報の集まりである。
【０００３】
さまざまなタイプのメタデータの中で、時間的メタデータは、メディアデータの時間的特性を記述し、重要なメタデータであり、より利用される。ビデオデータの場合、ビデオの構造を明らかにする時間的セグメンテーションメタデータがビデオの管理と構成のためには特に有用である。時間的セグメンテーションメタデータは、通常、ビデオのショット境界の検出により取得できる。これは本技術分野で知られたさまざまな手法により実現できる。ショット境界（ｓｈｏｔ  ｂｏｕｎｄａｒｙ）はビデオ中のカットまたはフェード（ｆａｄｅ）であり、２つのショット境界間のショットを確定する。同じセットにある複数のショットは、グループ分けされ、ビデオのシーンになり得る。ビデオの構成は、一般的に、かかるショット及びシーンにより記述される。
【０００４】
ビデオ中のショット境界の検出する場合、既存の手法により満足できる結果が得られる。例えば、ショットメタデータは、Ｅｄｉｔ  Ｄｅｃｉｓｉｏｎ  Ｌｉｓｔ（ＥＤＬ）などの手法により生成できる。しかし、ビデオ中のシーンの検出では通常、多くのエラーが発生し、トラブルとなり、修正が必要となる。また、ビデオの時間的構成に関するメタデータが無く、そのため生成しなければならない場合がある。例えば、アナログビデオアーカイブをデジタル化する場合、対象ビデオに時間的構成に関するメタデータが無い場合、又は時間的メタデータが製作（ｐｒｏｄｕｃｔｉｏｎ）中に失われる場合である。
【発明の概要】
【０００５】
それゆえ、メディアデータを再構成する改善されたソリューションを提案する。これは特にメディアデータの視覚表示と時間的メタデータを利用するものである。
【０００６】
一実施形態では、メディアデータを再構成する方法であって、メディアデータの視覚表示と時間的メタデータを用いるものを提案する。前記方法は、メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じた時間順で表示するステップと、ユーザ入力の受け取りに応じて第１のメディアデータアイテムの視覚表示の位置を変更するステップであって、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置は、前記第１のメディアデータアイテムの視覚表示の位置変更に応じて自動的に変更される、ステップとを有する。少なくとも１つの第２のメディアデータアイテムは、第１のメディアデータアイテムに対して時間的に前にあり、又は後にある。
【０００７】
具体的に、第１のメディアデータアイテムの視覚表示の位置が時間順に対して後ろ向きに変更されたとき、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置は、第１のメディアデータアイテムに対して時間的に前にあるが、自動的に変更される。同様に、第１のメディアデータアイテムの視覚表示の位置が時間順に対して前向きに変更されたとき、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置は、第１のメディアデータアイテムに対して時間的に後にあるが、自動的に変更される。好ましくは、位置変更後、第１のメディアデータアイテムの視覚表示と、前記少なくとも１つの第２のメディアデータアイテムの視覚表示との位置関係（ｒｅｌａｔｉｖｅ  ｐｏｓｉｔｉｏｎ）は変化しない。
【０００８】
一実施形態では、前記方法は、さらに、メディアデータの時間的メタデータに応じて、メディアデータアイテムの視覚表示をクラスター化してグループに分けるステップを有する。前記メディアデータアイテムの時間的メタデータに応じて、前記グループを時間順で表示する。
【０００９】
したがって、第１のメディアデータアイテムの視覚表示の位置を変更するステップは、第１のメディアデータアイテムを、第１のグループから、第２のグループ又は空白エリアに移動して、新しいグループを生成するステップを含む。一実施形態では、少なくとも１つの第２のメディアデータアイテムは、第１のメディアデータアイテムの位置変更に対応して、第２のグループ又は新しいグループに自動的に移動される。
【００１０】
一実施形態では、前記グループは、垂直方向に時間順に表示され、前記グループの各々において、前記メディアデータアイテムの視覚表示が水平方向に時間順に表示され、またはその逆である。
【００１１】
一実施形態では、メディアデータアイテムの視覚表示はドラッグ可能なグラフィカルアイコンを含む。前記第１のメディアデータアイテムの視覚表示の位置を変更するステップは、ユーザ入力の受け取りに応じて、前記第１のメディアデータアイテムのグラフィカルアイコンをドラッグアンドドロップするステップを含む。
【００１２】
一実施形態では、メディアデータアイテムの各アイテムはビデオデータのショットであり、その時間的メタデータはショットのタイムコードである。また、前記メディアデータアイテムの各グループは前記ビデオのシーンである。
【００１３】
一実施形態では、前記方法は、前記メディアデータの視覚表示の位置変更に対応して、前記メディアデータの時間的メタデータを修正するステップをさらに有する。
【００１４】
一実施形態では、メディアデータの視覚表示を用いて前記メディアデータを再構成するように構成された装置を紹介する。該装置は表示部、入力部及び操作部を有する。表示部は、メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じた時間順で表示するように構成される。入力部はユーザ入力を受け取るように構成される。操作部は、ユーザ入力の受け取りに応じて第１のメディアデータアイテムの視覚表示の位置を変更するように構成され、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置は、前記第１のメディアデータアイテムの視覚表示の位置変更に応じて自動的に変更される。少なくとも１つの第２のメディアデータアイテムは、第１のメディアデータアイテムに対して時間的に前にあり、又は後にある。好ましくは、該装置は、メディアデータとそのメタデータとを受け取るように構成された受取部と、それらを記憶するように構成された記憶部とをさらに有する。
【００１５】
一実施形態では、操作部は、メディアデータの時間的メタデータに応じて、メディアデータアイテムの視覚表示をクラスター化してグループに分けるようにさらに構成される。表示部は、グループを、前記メディアデータアイテムの時間的メタデータに応じて、時間順で表示するように構成される。
【００１６】
また、コンピュータ読み取り可能記憶媒体は、前記メディアデータの視覚表示を用いて前記メディアデータを再構成する命令を記憶している。前記命令は、コンピュータにより実行されると、前記コンピュータに、メディアデータアイテムの視覚表示を、前記メディアデータアイテムの時間的メタデータに応じた時間順で表示するステップと、ユーザ入力の受け取りに応じて第１のメディアデータアイテムの視覚表示の位置を変更するステップであって、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置は、前記第１のメディアデータアイテムの視覚表示の位置変更に応じて自動的に変更される、ステップとを実行させる。少なくとも１つの第２のメディアデータアイテムは、第１のメディアデータアイテムに対して時間的に前にあり、又は後にある。
【００１７】
提案の方法と装置によりメディアデータを再構成する改善されたソリューションが提供される。メディアデータアイテムの明らかな視覚表示を表示することにより、アイテム間の構造と関係をユーザが容易に読み取り理解できる。また、構造の再構成を、最小限のマニュアル作業の手間と、自動的修正の助けを受けて、最適に行うことができる。
【００１８】
メディアデータがビデオショットである場合、ショットを再割り当てしてクラスター化してシーンに分けることがより簡単かつ効率的になる。１つだけのショットをマニュアルで動かし、他のショットの移動は自動的に行うことにより、複数のショットをシーンに再構成することが一度にできる。ビデオシーンをより詳細にレビューしたり、効率的に生成、削除、管理したりできる。
【図面の簡単な説明】
【００１９】
より良く理解するため、提案のソリューションをここで図面を参照してより詳細に説明する。言うまでもなく、本ソリューションは、開示する実施形態には限定されず、説明する特徴は、添付した特許請求の範囲で確定される提案のソリューションの範囲から逸脱することなく、目的に応じて組み合わせ及び／または修正することができる。
【図１】メディアデータを再構成するように構成された装置の好ましい一実施形態を示す模式図である。
【図２】メディアデータの再構成をする方法の好ましい一実施形態を示すフローチャートである。
【図３】メディアデータの再構成をする方法の好ましい一実施形態をより詳細に示すフローチャートである。
【図４】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の一実施形態を示す模式図である。
【図５（ａ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【図５（ｂ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【図５（ｃ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【図５（ｄ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【図５（ｅ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【図５（ｆ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【図５（ｇ）】メディアデータの視覚表示を用いてそのメディアデータの再構成をする方法の他の一実施形態を示す模式図である。
【発明を実施するための形態】
【００２０】
図１は、メディアデータの視覚表示を用いてそのメディアデータを再構成するように構成された装置１０の好ましい一実施形態を模式的に示している。装置１０は、入力部１１、操作部１２及び表示部１３を有する。
【００２１】
表示部１３は、メディアデータの視覚表示を時間順に表示するように構成されている。具体的に、メディアデータアイテムの各々は、時間的メタデータと関連付けられ、その視覚表示の時間的順序は、時間メタデータにより決定される。
【００２２】
入力部１１は、ユーザ入力を受け取るように構成され、装置１０とインターラクトし、及び／又は指示を提供するユーザからの入力を受け取ることができる任意タイプの入力デバイスであり得る。あるいは、外部ユーザ入力デバイスを用いて、装置に接続して、ユーザ入力を受け取ることもできる。
【００２３】
操作部１２は、ユーザ入力を受け取ると、メディアデータアイテムの視覚表示の位置を変更するように構成されている。具体的に、第１のメディアデータアイテムの視覚表示の位置が、受け取られたユーザ入力により変更されるとき、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置が、第１のメディアデータアイテムより時間的に前または後にあるが、第１のメディアデータアイテムの位置変更に対応して、操作部１２により自動的に変更される。
【００２４】
好ましくは、装置１０は、さらに、受取部１４と記憶部１５とを有する。受取部１４は、内部または外部の情報源、データベース、及び／又は装置１０に関係するデバイスから、メディアデータ及びそれのメタデータを受け取るように構成されている。言い換えると、受取部１４は、メディアデータを受け取ったさらに処理するのに適切な任意のタイプのデバイスであり得る。記憶部１５は、受取部１４から受け取るメディアデータとメタデータを記憶及びアーカイブするように構成され、例えば、データ記憶をできる任意のタイプのメモリデバイスであり得る。あるいは、メディアデータとメタデータは、装置１０の内部または外部の、他の補助記憶デバイスに記憶されることも可能である。また、受取部１４と記憶部１５は、任意的に、１つのデバイスにまとめることができる。
【００２５】
図２は、メディアデータの視覚表示を用いてそのメディアデータを再構成する方法の好ましい一実施形態を模式的に示している。概して、本方法は、メディアデータアイテムの視覚表示（ｖｉｓｕａｌ  ｒｅｐｒｅｓｅｎｔａｔｉｏｎｓ）を表示（ｄｉｓｐｌａｙ）するステップ２０と、ユーザ入力の受け取りに応じて、第１のメディアデータの視覚表示の位置を変更するステップ２１とを有する。第１のメディアデータアイテムの位置が変更されると、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置（これは第１のメディアデータアイテムに対して時間的に前または後にある）も自動的に変更される。
【００２６】
図１を参照して、本方法の好ましい実施形態を、装置１０の実施形態を参照して、以下に詳しく説明する。メディアデータの各アイテムは、さまざまなタイプのメタデータと、好ましくは時間的メタデータと、関連づけできる。ここで用いるように、「メディアデータ」及び「メタデータ」との用語は、例えば、ビデオデータ、オーディオデータ、テキストデータ、マルチメディアストリームを含むファイル、デジタル写真を含むファイル、又はこれらの組み合わせを記述する。
【００２７】
装置１０の表示部１３は、メディアデータアイテムの視覚表示を表示する（ステップ２０）。より具体的には、図３に示したように、メディアデータは、最初に、装置１０の受取部１４により受け取られ（ステップ２２）、記憶部１５に記憶される。メディアデータのメタデータは、好ましくは、メディアデータ自体と同時に受け取られ、記憶される（ステップ２２）。あるいは、メタデータは、任意の適した方法により後で取得でき、例えば、受け取られたメディアデータから操作部１２により生成され、記憶部１５に記憶されてもよい。さらに処理される前に、受け取られたメディアデータの各アイテムは、好ましくは、時間的メタデータと関連付けられる。
【００２８】
メディアデータとそのメタデータは、後で操作部１２により処理される（ステップ２３）。操作部１２は、メディアデータの視覚表示（ｖｉｓｕａｌ  ｒｅｐｒｅｓｅｎｔａｔｉｏｎｓ）を表示（ｄｉｓｐｌａｙ）する命令を、表示部１３に出す。上記の通り、表示部１３は、メディアデータの視覚表示を、そのメディアデータの時間的メタデータにより決定される時間順で表示する。
【００２９】
装置１０の入力部１１は、第１のメディアデータアイテムの視覚表示（ｖｉｓｕａｌ  ｒｅｐｒｅｓｅｎｔａｔｉｏｎ）の位置を変更するユーザ入力を受け取る（ステップ２４）。ユーザ入力を受け取ると、装置１０の操作部１２は、ユーザ命令を実行する。
【００３０】
第１のメディアデータアイテムの視覚表示の位置が変更されると（ステップ２１）、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置の自動的変更が行われる。少なくとも１つの第２のメディアデータアイテムは、その時間的メタデータに応じて、第１のメディアデータアイテムに時間的にまえにあり、又は後にある。
【００３１】
好ましくは、第１のメディアデータアイテムと、少なくとも１つの第２のメディアデータアイテムの視覚表示の位置関係（ｒｅｌａｔｉｖｅ  ｐｏｓｉｔｉｏｎ）は、その視覚表示の位置変更の前後で、同じである。より具体的には、第１のメディアデータアイテムと少なくとも１つのメディアデータアイテムの視覚表示は、同期して変更される。第１のメディアデータアイテムの視覚表示の位置変更はユーザ入力によりトリガー（ｔｒｉｇｇｅｒｅｄ）されるが、少なくとも１つの第２のメディアデータアイテムの視覚表示の変更は、第１のメディアデータアイテムの変更に実質的に追随して、操作部１２により自動的に行われる。
【００３２】
もちろん、複数のユーザ入力が入力部１１により連続的に受け取られると、視覚表示の変更（ステップ２１）は、個々のユーザ入力に対応して繰り返し行われる。
【００３３】
図４は、メディアデータの視覚表示を用いてそのメディアデータを再構成する方法の一実施形態を模式的に示している。ここには４つのメディアデータアイテムが示され、視覚表示で表され、例えば装置１０の表示部１３により表示（ｄｉｓｐｌａｙ）されている。表示部１３は、例えば、コンピュータディスプレイ、テレビスクリーンなどであり、これらは装置１０に含まれ、または接続されている。言うまでもなく、表示されるメディアデータの量は制限されず、さまざまな要求に応じて柔軟である。この実施形態では、メディアデータアイテムの各々の視覚表示は、実線のフレームで囲んだ四角形の形式のグラフィカルアイコンである。もちろん、他の任意の形状またはタイプの視覚表示（ｖｉｓｕａｌ  ｒｅｐｒｅｓｅｎｔａｔｉｏｎ）を、例えば正方形、三角形、グラフィカルピクチャなどを用いることもできる。視覚表示のサイズ、色、その他の視覚的特徴（ｖｉｓｕａｌ  ｆｅａｔｕｒｅｓ）はフレキシブルであり、ユーザの必要性と嗜好に応じて選択可能である。好ましくは、視覚表示すなわちグラフィカルアイコンは、例えば、ユーザ入力の受け取りに応じて、例示の装置１０を介してドラッグ可能（ｄｒａｇｇａｂｌｅ）である。
【００３４】
説明を明確にする目的で、この実施形態のメディアデータアイテムはビデオデータのショット（ｓｈｏｔ）であると仮定する。メディアデータの時間的メタデータは、例えばショットのタイムコードである。任意的に、タイムコードは、図４に示したように、「００：００；００」の形式で、またはその他の代替的な形式で視覚的に表示することもできる。ビデオショットの視覚表示は、ショットに関する情報を提供するそのショットのサムネイル（図示せず）であってもよいし、その他の任意のタイプのグラフィカルアイコンであってもよい。
【００３５】
図４の点線フレームで囲まれた四角形は、メディアデータの視覚表示により占有されていない空のスペースを示す。点線フレームは、実際の利用目的や必要性に応じて、ユーザに対して可視的であっても不可視的であってもよい。
【００３６】
図４（ａ）は、４つのビデオショットの最初の視覚表示を示す。これはショットのタイムコードに応じた時間順で表示されている。この場合、時間順は水平方向で示されており、時間的に前にあるショットが左側にある。ショットの表示されたタイムコードは、時間順も示している。
【００３７】
図４（ｂ）ないし図４（ｅ）は、ユーザ入力の受け取りに応じて視覚表示の位置が変更される例示的な２つの場合を示している。ユーザは、例えば、マウス、リモートコントロールまたは任意タイプの好適な入力デバイスを用いて、グラフィカルアイコンの位置を変更する命令を装置１０にできる。好ましくは、ユーザは、入力デバイスを用いて、グラフィカルアイコンを所望の位置にドラッグアンドドロップ（ｄｒａｇ  ａｎｄ  ｄｒｏｐ）することができる。
【００３８】
図４（ｂ）では、ショット００：０５；００のグラフィカルアイコンの位置が、表示された時間順に対して後ろ向きに、すなわち左側に変更される。この変更に対応して、ショット００：００；００のグラフィカルアイコンの位置が、ショット００：０５；００より時間的に前にあるが、自動的に変更される。好ましくは、ショット００：００；００のグラフィカルアイコンの自動的な位置変更は、ユーザによりトリガーされるショット００：０５；００のマニュアル変更と同様に行われる。この方法で、図４（ｃ）に示した結果として、ショット００：００；００と００：０５；００の位置関係は、位置変更の前後で変わらない。
【００３９】
図４（ｄ）は、ショット００：０５；００のグラフィカルアイコンの位置が、表示された時間順に対して前向きに、すなわち右側に変更される場合を示す。したがって、図４（ｅ）に示したように、２つのショット００：１０；００と００：１５；００のグラフィカルアイコンの位置は、ショット００：０５；００より時間的に後にあるが、ショット００：０５；００のマニュアル変更に対応して、自動的に変更される。
【００４０】
図５は、メディアデータの視覚表示を用いてそのメディアデータを再構成する他の方法の一実施形態を模式的に示している。図３を参照して、この実施形態では、本方法は、さらに、メディアデータアイテムの時間的メタデータに応じて、そのメディアデータアイテムの視覚表示をグループにクラスター化するステップ（ステップ２５）を有する。グループは、時間的メタデータにも応じて対応して時間順で表示される。
【００４１】
図５（ａ）は、この実施形態における８つのメディアデータアイテムの最初の視覚表示を示す。前述の実施形態と同様に、メディアデータアイテムの各々はビデオデータのショットであり、その時間的メタデータはショットのタイムコードである。この実施形態が前述の実施形態と異なるのは、視覚表示がさらにグループにクラスター化され、水平及び垂直の両方向において時間順で表示される点である。
【００４２】
一例として、ショットはそのタイムコードに応じてグループにクラスター化され、各グループはビデオ中のシーンとして参照される。ショットとシーンのクラスター化は、例えば、例示的な装置１０の操作部１２により、本技術分野で知られた既存の任意の手法を用いて実現される。シーンは垂直方向で時間順に視覚表示され、時間的に前にあるものは上に、後にあるものは下に配置される。グループの各々において、ショットは上記の通り水平方向に視覚的かつ時間的に表示される。もちろん、シーンとショットの時間順はその他の任意の方法や構成でも視覚表示されてよい。
【００４３】
垂直方向に沿って、シーンは好ましくは個別ギャップにより分離されており、これは図５（ａ）に示した点線間の空白エリアとして示されている。対照的に、同じシーングループ中で水平に整列（ａｌｉｇｎｅｄ）されたショットは、好ましくは、その間に大きなギャップ無しに互いに続けて配置される。もちろん、空白エリアのサイズとグラフィカルな特徴は、場合と必要性に応じて柔軟に決定できる。
【００４４】
ショットの視覚表示の位置は、ユーザ入力の受け取りに応じて変更できる（ステップ２１）。具体的に、ショットのグラフィカルアイコン（ｇｒａｐｈｉｃａｌ  ｉｃｏｎｓ）は、それをユーザ入力によりドラッグアンドドロップすることにより、シーングループ間で移動し得る。また、ショットのグラフィカルアイコンは、新しいシーングループを生成するため、空白エリアにドラッグし得る。
【００４５】
ショットが時間的に前にあるシーングループまたは空白エリアに移動されると、すなわちグラフィカルアイコンの位置が上に移動されると、移動されたショットの元の位置及び行き先の位置との間のすべてのショットも自動的に上に、すなわち行き先の位置または空白エリアに移動される。同様に、ショットが時間的に後のシーングループまたは空白エリアに移動されると、すなわち下向きに移動されると、移動されるショットの元の位置と行き先位置との間のすべてのショットが、自動的に下向きに、行き先シーングループまたは空白エリアに移動される。
【００４６】
好ましくは、ショットのグラフィカルアイコンの位置のマニュアルまたは自動的な変更に従って、視覚表示のその他の追加的かつ自動的な修正が行われる。
【００４７】
好ましくは、再構成されるシーングループの各々のショットのグラフィカルアイコンが、時間的メタデータ（すなわち、この実施形態ではショットのタイムコード）に応じた時間順で自動的に並べられる。換言すると、ユーザは、あるシーングループから他のシーングループに、選択したショットのグラフィカルアイコンをドラッグアンドドロップ（ｄｒａｇ  ａｎｄ  ｄｒｏｐ）でき、グラフィカルアイコンをドロップする正確な位置を気にする必要はない。マニュアル操作の後、シーングループの各々において、すべてのグラフィカルアイコンは最適な時間順に自動的に並び替えられる。
【００４８】
あるシーングループは、その中のすべてのショットアイコンが移動され出て行き空になると、この空のシーングループは自動的に削除され、見えなくなってもよい。また、好ましくは、シーングループの各々は、１つだけの空白エリアにより互いに垂直方向に分離される。連続した二以上の空白エリアがグラフィックアイコンのマニュアル及び／又は自動的位置変更により生じたとき、それらは結合され、単一の空白エリアと同じサイズと同じグラフィカル特徴を有する一つの空白エリアになる。他方、２つのシーングループが互いに対して垂直に配置され、間に空白エリアが無い場合、空白エリアが視覚表示に追加される。
【００４９】
換言すると、マニュアル及び／又は自動的変更の後に、グラフィカルアイコンとギャップが自動的に対応して修正され、メディアデータアイテムの最適な視覚表示を提供する。
【００５０】
図５（ｂ）ないし図５（ｇ）は、説明した方法の実施形態によるメディアデータの視覚表示の位置変更の例示的な複数の実施形態を示す。
【００５１】
図５（ｂ）は、図５（ａ）に示したユーザ入力（ｂ）による変更結果を示す。操作（ｂ）はショット００：２０；００を前にある空白エリアに移動する。対応して、ショット００：１５；００も、ショット００：２０；００より前にあり、ショット００：２０；００と行き先空白エリア（ｄｅｓｔｉｎａｔｉｏｎ  ｅｍｐｔｙ  ａｒｅａ）とお間にあるが、行き先空白エリアに移動される。行き先空白エリアに新しいシーングループが生成され、ショット００：１５；００と００：２０；００とを含む。この新しいシーングループでは、ショット００：１５；００と００：２０；００が水平方向に時間順に視覚的に表示される。元のシーングループは空になり、削除される。空白エリアは、新しいシーングループと、「００：１０；００」のシーングループとの間に新しい空白エリアを追加することにより、自動的に適合される。結局、視覚表示は図５（ａ）に示した元の表示と同じように見える。
【００５２】
図５（ｃ）は、図５（ａ）に示した操作（ｃ）による結果を示す。ショット００：２０；００は前にあるシーングループに移動される。結果として、ショット００：１５；００は、ショット００：２０；００より前にあり、ショット００：２０；００と行き先グループとの間にあるが、ショット００：１０；００と００：２０；００とを含む同じシーングループに自動的に移動される。３つのショット００：１０；００、００：１５；００及び００：２０；００は自動的に並べられ、水平方向に時間順に視覚的に表示される。空のシーングループ（ｅｍｐｔｙ  ｓｃｅｎｅ  ｇｒｏｕｐ）と隣接する２つの空白エリア（ｅｍｐｔｙ  ａｒｅａｓ）は合わせられ、結合されて１つの空白エリアになる。
【００５３】
図５（ｄ）では、図５（ａ）に示した操作（ｄ）に対応して、ショット００：２０；００が第１のシーングループに移動される。上記の方法によると、２つのショット００：１０；００と００：１５；００とは、移動されたショット００：２０；００と行き先シーングループとの間にあり、同じ行き先グループに自動的に移動される。得られる２つの空のシーングループとその間の空白エリアとは適切に適合される。
【００５４】
図５（ｅ）では、図５（ａ）に示した操作（ｅ）に対応して、ショット００：２０；００が後の空白エリアに移動される。ショット００：２０；００のみを含む新しいシーングループが適宜生成され、２つの空白エリアが加えられて空白エリアが適合される。ここでは他のショットのグループ間での自動的変更は必要ないが、移動されたショットと行き先空白エリアとの間に他のショットが無いので、後のシーングループの位置は適宜修正され、水平方向で変更される。ここで特に分かることは、ショット００：２０；００の位置が水平方向の時間順で前に変更されたとき、すなわちこの実施形態では下向きに変更されたとき、ショット００：２０；００に後のショットと、対応するシーングループとは、自動的に同様に、すなわち垂直方向の時間順で前方向に変更される。
【００５５】
図５（ｆ）は、図５（ａ）に示した操作（ｆ）の変更結果を示す。ショット００：２０；００は後のシーングループに移動される。ここでは、新しい空白エリア又は新しいシーングループの生成は必要ない。しかし、２つのショット００：２０；００と００：２５；００を含む行き先シーングループにおいて、この２つのショットは、水平方向に時間順に応じて自動的に並べられ視覚的に表示され、その結果、ショット００：２０；００が左になり、一方、後者のショット００：２５；００は結局右側に配置される。
【００５６】
図５（ｇ）では、図５（ａ）に示した操作（ｇ）に対応して、ショット００：２０；００が、元の視覚表示中にしめされた最後のシーングループに移動される。上記の実施形態によると、移動されたショット００：２０；００と行き先シーングループとの間のショット００：２５；００が自動的に移動される。結局、ショット００：２０；００、００：２５；００、００：３０；００及び００：３５；００は、同じシーングループにあり、自動的に時間順に並べられる。これに対応して空白エリアが適合される。
【００５７】
図１と図３を参照して、メディアデータを再構成する方法の一実施形態は、好ましくは、さらに、前記メディアデータの視覚表示の位置変更に続いて、前記位メディアデータのメタデータを修正するステップ（ステップ２６）を有する。前述の実施形態で説明した通り、メディアデータの最初の視覚表示は、例えば、受取部１４により受け取られ、記憶部１５に記憶されたメディアデータとそのメタデータとを用いて、装置１０の操作部１２により生成される。換言すると、メディアデータの最初の視覚表示は、メディアデータのメタデータにより、特に例示の実施形態における時間的メタデータにより、決定され構成される。
【００５８】
この方法の実施形態により、メディアデータの時間的構造を視覚的にレビューして再構成する簡単かつ効率的な方法が提供される。好ましくは、メディアデータの視覚表示の変更後、メディアデータの対応メタデータは、例えば操作部１２により、自動的に、同様の方法で修正される。修正されたメタデータは、例示の装置１０の記憶部１５に記録及び記憶され、元のメタデータと置き換わる、又は新しいメタデータとして保存され得る。
【００５９】
例えば、図５（ａ）と図５（ｃ）を参照して、元のメタデータにより最初の視覚表示が決まり（ｄｅｃｉｄｅｓ  ａｎｄ  ｒｅｓｕｌｔｓ  ｉｎ）、その中で、８つのビデオショットが５つのシーングループに分布する。図５（ａ）に示した操作（ｃ）の後に、８つのビデオショットは図５（ｃ）に示したように４つのシーングループに再構成される。メディアデータのこの再構成、すなわちここではビデオショットの再構成は、好ましくは、記憶部１５に記録され、対応してビデオショットの時間的メタデータを修正する。メタデータのこの追加的修正により、メディアデータの視覚表示と、対応するそのメタデータとが同期して維持され得るように、メディアデータの再構成の改善されたソリューションが提供される。
【図１】
2016116222.tif 000003
【図２】
2016116222.tif 000004
【図３】
2016116222.tif 000005
【図４】
2016116222.tif 000006
【図５（ａ）】
2016116222.tif 000007
【図５（ｂ）】
2016116222.tif 000008
【図５（ｃ）】
2016116222.tif 000009
【図５（ｄ）】
2016116222.tif 000010
【図５（ｅ）】
2016116222.tif 000011
【図５（ｆ）】
2016116222.tif 000012
【図５（ｇ）】
2016116222.tif 000013
【外国語明細書】
2016116222000001.pdf