(57)【要約】【課題】フォトムービー等の連続表示用の画像群の作成結果のプレビュー表示に必要なＣＰＵの負荷をより小さくし、また、処理時間を短縮可能な画像編集装置を提供する。【解決手段】画像編集装置１００は、素材画像を取得する画像取得部１２０と、取得された素材画像のうち、（Ａ）再生処理に要する負荷が事前に定められた負荷基準よりも大きい画像に対しては、当該画像に対応する、再生処理に要する負荷がより小さい画像であるプロキシ画像を新たに生成する変換処理を施し、（Ｂ）再生処理に要する負荷が負荷基準以下である画像に対しては、変換処理を施さない、変換部１４０と、プロキシ画像、及び、プロキシ画像に対応する画像以外の素材画像を、事前に定められた順序でプレビューとして再生するプレビュー再生部１６０とを備える。【選択図】図１
2012100241.tif 000002
【特許請求の範囲】
【請求項１】
素材画像を取得する画像取得部と、
前記取得された素材画像のうち、（Ａ）再生処理に要する負荷が事前に定められた負荷基準よりも大きい画像に対しては、当該画像に対応する、前記再生処理に要する負荷がより小さい画像であるプロキシ画像を新たに生成する変換処理を施し、（Ｂ）前記再生処理に要する負荷が前記負荷基準以下である画像に対しては、前記変換処理を施さない変換部と、
前記プロキシ画像、及び、当該プロキシ画像に対応する前記画像以外の前記素材画像を、事前に定められた順序でプレビューとして再生するプレビュー再生部とを備える
画像編集装置。
【請求項２】
前記変換部は、事前に計測された前記プレビュー再生部の前記再生処理能力に応じて前記負荷基準を決定する
請求項１に記載の画像編集装置。
【請求項３】
前記変換部は、前記再生処理能力が高いほど、より大きくなるように前記負荷基準を決定する
請求項２に記載の画像編集装置。
【請求項４】
前記変換部は、再生処理に要する負荷が前記負荷基準よりも大きい画像に対しては、当該画像を、前記再生処理に要する負荷がより小さいファイル形式へと変換することで、前記プロキシ画像を生成する
請求項１〜３のいずれか１項に記載の画像編集装置。
【請求項５】
前記変換部は、再生処理に要する負荷が前記負荷基準よりも大きい画像に対しては、当該画像を、解像度又はビットレートがより小さい画像へと変換することで、前記プロキシ画像を生成する
請求項１〜３のいずれか１項に記載の画像編集装置。
【請求項６】
前記変換部は、再生処理に要する負荷が前記負荷基準よりも大きい画像に対しては、当該画像を、前記再生処理に要する負荷が前記負荷基準よりも小さい画像へ変換することで、前記プロキシ画像を生成する
請求項１〜３のいずれか１項に記載の画像編集装置。
【請求項７】
前記変換部は、前記複数の画像の各々が有する属性情報と、前記属性情報を有する画像の再生処理に要する負荷である負荷レベルとを対応付けて記憶しており、前記負荷レベルが前記負荷基準よりも大きい画像に対しては、当該画像を、前記負荷レベルのうち最も低い負荷レベルに対応付けられた前記属性情報を有する画像へ変換することで、前記プロキシ画像を生成する
請求項１に記載の画像編集装置。
【請求項８】
前記変換部は、（１）前記素材画像へ新たな画像が追加されたタイミング、（２）前記素材画像、及び、前記素材画像の各々を表示する前記順序がユーザーにより確定されたタイミング、及び、（３）ユーザーによる明示の指示を取得したタイミング、のうち少なくとも１つのタイミングで、前記取得された素材画像のなかに、再生処理に要する負荷が前記負荷基準よりも大きい画像が含まれているか否かを判定し、前記負荷が前記負荷基準よりも大きい画像に対してのみ、前記変換処理を施す
請求項１〜７のいずれか１項に記載の画像編集装置。
【請求項９】
前記変換部は、前記変換処理を施している間に、ユーザーが前記変換処理の中止を指示した場合には、該変換処理を中止し、
前記プレビュー再生部は、前記変換処理が中止されるまでに前記変換部が生成した前記プロキシ画像と、当該プロキシ画像に対応する前記画像以外の前記素材画像を、前記順序で再生する
請求項１〜８のいずれか１項に記載の画像編集装置。
【請求項１０】
請求項１〜９のいずれか１項に記載の画像編集装置と、
前記素材画像に含まれる各々の画像を、前記順序で再生する、オリジナルストーリー生成部とを備える
画像編集システム。
【請求項１１】
素材画像を取得する画像取得ステップと、
前記取得された素材画像のうち、（Ａ）再生処理に要する負荷が事前に定められた負荷基準よりも大きい画像に対しては、当該画像に対応する、前記再生処理に要する負荷がより小さい画像であるプロキシ画像を新たに生成する変換処理を施し、（Ｂ）前記再生処理に要する負荷が前記負荷基準以下である画像に対しては、前記変換処理を施さない、変換ステップと、
前記プロキシ画像、及び、当該プロキシ画像に対応する前記画像以外の前記素材画像を、事前に定められた順序でプレビューとして再生するプレビュー再生ステップとを含む
画像編集方法。
【請求項１２】
請求項１１に記載の画像編集方法をコンピュータに実行させる
プログラム。
【請求項１３】
請求項１２に記載のプログラムを記録した
コンピュータ読み取り可能な記録媒体。
【請求項１４】
素材画像を取得する画像取得部と、
前記取得された素材画像のうち、（Ａ）再生処理に要する負荷が事前に定められた負荷基準よりも大きい画像に対しては、当該画像に対応する、前記再生処理に要する負荷がより小さい画像であるプロキシ画像を新たに生成する変換処理を施し、（Ｂ）前記再生処理に要する負荷が前記負荷基準以下である画像に対しては、前記変換処理を施さない、変換部と、
前記プロキシ画像、及び、当該プロキシ画像に対応する前記画像以外の前記素材画像を、事前に定められた順序でプレビューとして再生するプレビュー再生部とを備える
集積回路。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像編集装置に関し、特に画像の編集操作が可能な画像編集装置に関する。
【背景技術】
【０００２】
取得した静止画像データ及び動画像データといった素材を簡単に編集できる画像編集装置及びプログラムが知られている。例えば、特許文献１は、静止画に動的な視的効果を付与し、画像に様々なストーリー性を与えたフォトムービーを作成するフォトムービー作成装置を開示している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−１５７１９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
フォトムービー、動画像及び静止画像からなるスライドショーを作成する際、作成されたスライドショーのファイルを出力する前に、作成結果をプレビュー表示させて仕上がりの確認をしたい場合がある。このとき、フォトムービー及びスライドショーを構成する動画像及び静止画像のファイル形式の相違や解像度の大小等によっては、プレビュー表示にＣＰＵの再生処理能力が不足することがある。そのため、ユーザーは、プレビュー表示を快適に確認する場合には、高性能のＣＰＵを備えた画像編集装置を用いる必要があった。
【０００５】
本発明は上記課題を鑑みてなされたものであり、フォトムービー等の連続表示用の画像群の作成結果のプレビュー表示に必要なＣＰＵ負荷をより小さくし、処理時間をより短縮することが可能な画像編集装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明のある局面に係る画像編集装置は、素材画像を取得する画像取得部と、前記取得された素材画像のうち、（Ａ）再生処理に要する負荷が事前に定められた負荷基準よりも大きい画像に対しては、当該画像に対応する、前記再生処理に要する負荷がより小さい画像であるプロキシ画像を新たに生成する変換処理を施し、（Ｂ）前記再生処理に要する負荷が前記負荷基準以下である画像に対しては、前記変換処理を施さない変換部と、前記プロキシ画像、及び、当該プロキシ画像に対応する前記画像以外の前記素材画像を、事前に定められた順序でプレビューとして再生するプレビュー再生部とを備える。
【０００７】
この構成によると、画像編集装置は、プレビュー再生部による再生処理負荷が所定基準よりも高い画像については、画像編集装置が備えるＣＰＵの処理能力に応じて、より再生処理の負荷が小さいプロキシ画像を作成した上で、プレビューを再生することができる。一方、プレビュー再生部による再生処理負荷が所定基準よりも低い画像については、不要なプロキシ画像の作成処理をカットすることで、動画像のリサイズやデコード及びエンコードに必要な処理を省くことができる。その結果、画像編集装置は、フォトムービー等の連続表示用の画像群の作成結果のプレビュー表示に必要なＣＰＵ負荷をより小さくし、画像編集装置の処理時間を短縮することができる。また、画像編集装置のユーザーがより快適にプレビューを確認することができる。
【０００８】
ここで、前記変換部は、事前に計測された前記プレビュー再生部の前記再生処理能力に応じて前記負荷基準を決定してもよい。
【０００９】
具体的には、前記変換部は、前記再生処理能力が高いほど、より大きくなるように前記負荷基準を決定してもよい。
【００１０】
これにより、プレビュー再生部の再生処理能力が高いほど、負荷基準は大きくなる。また、変換部は、再生処理に要する負荷が、負荷基準よりも大きい動画像に対してのみ、プロキシ画像を新たに生成する。したがって、負荷基準を大きくすることで、プロキシ画像の生成を必要最小限度に抑えることができる。その結果、プレビューの再生に必要な画像編集装置１００の処理時間を短縮することができる。
【００１１】
また、前記変換部は、再生処理に要する負荷が前記負荷基準よりも大きい画像に対しては、当該画像を、前記再生処理に要する負荷がより小さいファイル形式へと変換することで、前記プロキシ画像を生成するとしてもよい。
【００１２】
具体的には、前記変換部は、再生処理に要する負荷が前記負荷基準よりも大きい画像に対しては、当該画像を、解像度又はビットレートがより小さい画像へと変換することで、前記プロキシ画像を生成するとしてもよい。
【００１３】
また、前記変換部は、再生処理に要する負荷が前記負荷基準よりも大きい画像に対しては、当該画像を、前記再生処理に要する負荷が前記負荷基準よりも小さい画像へ変換することで、前記プロキシ画像を生成するとしてもよい。
【００１４】
これにより、画像編集装置１００が備えるＣＰＵの処理能力にかかわらず、再生処理の円滑さと、再生される画像の品質とのトレードオフを最適に解消したプレビュー再生が可能となる。
【００１５】
さらにまた、前記変換部は、前記複数の画像の各々が有する属性情報と、前記属性情報を有する画像の再生処理に要する負荷である負荷レベルとを対応付けて記憶しており、前記負荷レベルが前記負荷基準よりも大きい画像に対しては、当該画像を、前記負荷レベルのうち最も低い負荷レベルに対応付けられた前記属性情報を有する画像へ変換することで、前記プロキシ画像を生成するとしてもよい。
【００１６】
これにより、画像編集装置１００が備えるＣＰＵの処理能力にかかわらず、確実に、再生時のコマ落ち等を防止し、円滑な再生処理を実現することができる。
【００１７】
なお、前記変換部は、（１）前記素材画像へ新たな画像が追加されたタイミング、（２）前記素材画像、及び、前記素材画像の各々を表示する前記順序がユーザーにより確定されたタイミング、及び、（３）ユーザーによる明示の指示を取得したタイミング、のうち少なくとも１つのタイミングで、前記取得された素材画像のなかに、再生処理に要する負荷が前記負荷基準よりも大きい画像が含まれているか否かを判定し、前記負荷が前記負荷基準よりも大きい画像に対してのみ、前記変換処理を施すとしてもよい。
【００１８】
これにより、ストーリーを編集することにより、プレビューで表示される画像が変更された場合であっても、変換部は必要なプロキシ画像への変換を行うことができる。
【００１９】
また、前記変換部は、前記変換処理を施している間に、ユーザーが前記変換処理の中止を指示した場合には、該変換処理を中止し、前記プレビュー再生部は、前記変換処理が中止されるまでに前記変換部が生成した前記プロキシ画像と、当該プロキシ画像に対応する前記画像以外の前記素材画像を、前記順序で再生するとしてもよい。
【００２０】
これにより、プレビュー表示が不要のユーザーは、プレビュー表示用のストーリー作成（主に、プロキシ画像の作成）に要する処理時間をカットすることができる。さらに、プレビュー表示が不要の場合、プレビュー表示用のストーリーを作成することなく、ただちにオリジナルストーリーの再生処理を実行することができる。
【００２１】
本発明の他の局面にかかる画像編集システムは、前記画像編集装置と、前記素材画像に含まれる各々の画像を、前記順序で再生する、オリジナルストーリー生成部とを備える。
【００２２】
なお、本発明は、このような画像編集装置として実現できるだけでなく、画像編集装置に含まれる特徴的な手段をステップとする画像編集方法として実現したり、そのような特徴的なステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）等の記録媒体及びインターネット等の伝送媒体を介して流通させることができるのは言うまでもない。
【００２３】
さらに、本発明は、このような画像編集装置の機能の一部又は全てを実現する半導体集積回路（ＬＳＩ）として実現したり、このような画像編集装置を含む画像編集システムとして実現したりできる。
【発明の効果】
【００２４】
本発明によれば、フォトムービー等の連続表示用の画像群の作成結果のプレビュー表示に必要なＣＰＵ負荷をより小さくし、処理時間をより短縮することが可能な画像編集装置を提供することができる。
【図面の簡単な説明】
【００２５】
【図１】図１は、実施の形態にかかる画像編集システムの構成を示すブロック図である。
【図２】図２は、実施の形態にかかる画像編集装置を備える画像編集システムを実現するコンピュータのハードウェア構成を示すブロック図である。
【図３】図３は、実施の形態にかかるプレビュー再生部による動画像の再生処理能力に関するパフォーマンス計測の処理の流れを示すフローチャートである。
【図４】図４は、実施の形態にかかる画像編集システムが備える液晶ディスプレイに表示される選択画面のイメージ図である。
【図５】図５は、実施の形態にかかる画像編集システムが備える液晶ディスプレイに表示される確認画面のイメージ図である。
【図６】図６は、実施の形態にかかる画像編集システムが備える液晶ディスプレイに表示される編集画面のイメージ図である。
【図７】図７は、実施の形態に係る画像編集装置が、プレビューを作成する処理の手順を示すフローチャートである。
【図８】図８は、実施の形態にかかる動画ファイル形式テーブルを示す模式図である。
【図９】図９は、実施の形態にかかる画像編集装置が備える変換部によるプロキシ画像作成の処理の流れを示すフローチャートである。
【図１０】図１０は、実施の形態に係る画像編集システムによる、ストーリーに含まれる素材画像の個別追加による編集処理の概要を示すフローチャートである。
【発明を実施するための形態】
【００２６】
以下、本発明に係る画像編集装置の実施の形態について、図面を参照しながら詳細に説明する。
【００２７】
図１は、本発明の実施の形態に係る画像編集装置１００を備える画像編集システム２００の構成を示すブロック図である。
【００２８】
画像編集システム２００は、複数の動画像を含む素材画像から、フォトムービーを作成し、作成したフォトムービーを再生する。なお、素材画像には、動画像の他、静止画像が含まれていてもよい。以後、動画像と静止画像をあわせて、画像という。
【００２９】
画像編集システム２００によれば、フォトムービー作成において、ユーザーはデフォルトで用意されたＢＧＭや、ユーザーが任意に登録したＢＧＭを採用することができる。
【００３０】
すなわち、本実施の形態に係る画像編集システム２００は、ユーザーが選択したテンプレートと、ユーザーが設定したＢＧＭとに従って、ユーザーにより入力された素材画像を連続して再生することで、フォトムービーを作成する。
【００３１】
ここで、テンプレートとは、連続して再生される素材画像に含まれる複数の画像の各々の表示時間、素材画像間の切り替え効果、及び、ＢＧＭ等の組合せが、再利用可能な形で類型化された電子データである。ユーザーは、テンプレートに素材画像やＢＧＭ等を埋込み、また、既定の切り替え効果等を変更することで、具体的なフォトムービーを生成する。
【００３２】
また、以後、どのテンプレートを使用し、どの動画像が、どのような順序で、どのような切り替え効果で、どのような再生時間で配置され、どのＢＧＭが使用されるのか、といったフォトムービーの再生に必要な全ての事項が具体的に特定された情報を、ストーリー情報とよぶ。
【００３３】
テンプレートは、例えば画像編集システム２００が備えるＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ＳＲＡＭ（Static Random Access Memory）等の記録媒体に事前に記憶されていてもよく、ユーザーにより別途取得されることで、画像編集システム２００に追加・更新されてもよい。
【００３４】
図１に示されるように、画像編集システム２００は、オリジナルストーリー生成部１８０と、画像編集装置１００とを備える。
【００３５】
オリジナルストーリー生成部１８０は、素材画像に含まれる複数の画像の各々を、ストーリー情報で特定される条件に従って、連続して再生することでフォトムービーを作成する。
【００３６】
このようにして画像編集システム２００によって作成されたフォトムービーを以下の説明においては、ストーリーと呼ぶことにする。すなわち、ストーリーとは、ストーリー情報で特定される条件に従い、画像編集システム２００が素材画像を連続して配置した動画像である。
【００３７】
画像編集装置１００は、画像編集システム２００により作成されたストーリーを、ユーザーが確認するための確認用動画であるプレビューを作成し、再生する。
【００３８】
画像編集装置１００は、画像取得部１２０と、変換部１４０と、プレビュー再生部１６０とを備える。
【００３９】
画像取得部１２０は、素材画像を取得する。素材画像は、例えば、画像編集システム２００が備えるＧＵＩ（Graphical User Interface（図示なし））によってユーザーにより選択される。
【００４０】
変換部１４０は、画像取得部１２０により取得された素材画像のうち、再生処理に要する負荷が事前に定められた負荷基準よりも大きい動画像に対しては、当該動画像に対応する、再生処理に要する負荷がより小さい動画像であるプロキシ画像を新たに生成する変換処理を施す。一方、再生処理に要する負荷が負荷基準以下である動画像に対しては、変換処理を施さない。
【００４１】
このとき、変換部１４０は、事前に計測されたプレビュー再生部１６０の再生処理能力に応じて前記負荷基準を決定する。すなわち、変換部１４０は、プレビュー再生部１６０の再生処理能力が高いほど、より大きくなるように負荷基準を決定する。
【００４２】
プレビュー再生部１６０は、プロキシ画像、及び、プロキシ画像に対応する（すなわち、変換部１４０によってプロキシ画像が生成された）動画像以外の素材画像を、事前に定められた順序でプレビューとして再生する。
【００４３】
ここで、「プレビューとして再生する」とは、連続して配置された素材画像及び少なくとも１つ以上のプロキシ画像をストーリーとして再生することをいう。プレビュー再生とは、プレビュー再生部１６０が、連続して配置された素材画像及び少なくとも１つ以上のプロキシ画像であるプレビューを再生することをいう。
【００４４】
次に、図２を用いて、画像編集装置１００のシステムの構成および動作について詳細に説明する。
【００４５】
図２は、実施の形態にかかる画像編集装置１００を備える画像編集システム２００を実現するコンピュータ９０のハードウェア構成を示すブロック図である。
【００４６】
画像編集装置１００及び画像編集システム２００を実現するコンピュータ９０は、ＣＰＵ（Central Processing Unit）１０１、システム管理メモリ１０２、ワークメモリ１０３、ＨＤＤ１０４、マウス１０５、キーボード１０６、ＵＳＢコネクタ１０７、表示デバイス１０８、液晶ディスプレイ１０９等から構成されている。
【００４７】
ＣＰＵ１０１は、画像編集装置１００及び画像編集システム２００が備える各構成部の処理を実行する演算処理部である。ＣＰＵ１０１は、システム管理メモリ１０２、ワークメモリ１０３、ＨＤＤ１０４、表示デバイス１０８、ＵＳＢコネクタ１０７に電気的に接続されている。ＣＰＵ１０１は、表示デバイス１０８を介して、液晶ディスプレイ１０９に表示される画面を変更することができる。また、ＣＰＵ１０１は、ＵＳＢコネクタ１０７を介して、マウス１０５やキーボード１０６を用いてのユーザーの操作情報を受け付ける。また、図示していないが、画像編集装置１００及び画像編集システム２００の各部に供給される電力等のシステムを全体的に制御している。
【００４８】
システム管理メモリ１０２は、ＯＳ（Operating System；オペレーティングシステム）などが保持されているメモリである。また、システム管理メモリ１０２には、システム時刻などが格納されている。システム時刻は、ＣＰＵ１０１がＯＳのプログラムを動作させることにより更新される。
【００４９】
ワークメモリ１０３は、ＣＰＵ１０１が各種処理動作を実行するために必要な情報を一時的に格納するメモリである。ワークメモリ１０３には、ＣＰＵ１０１により、ストーリーボードエリア上に配置された「箱」それぞれに対応する情報、出力ファイル形式情報等が格納される。また、ワークメモリ１０３は、「箱」の個数に対応して複数の格納領域を有している。
【００５０】
ここで、「箱」とは、後述するストーリーボードエリア上において、ストーリーを構成する素材画像に含まれる複数の動画像又は静止画像の各々を配置可能な領域のことである。そして、ワークメモリ１０３は、複数の格納領域のそれぞれに後述する箱の情報を格納する。ＣＰＵ１０１は、複数の格納領域のそれぞれに格納された箱の情報を取得し、更新することができる。
【００５１】
また、ワークメモリ１０３は、ユーザーがストーリーをエンコード処理することによりファイル出力する際に所望する出力ファイル形式情報を格納する。出力ファイル形式には、出力ビデオ形式と、出力オーディオ形式と、出力多重化形式がある。出力ファイル形式とは、例えば、ＡＶＣＨＤ形式、ＭＰＥＧ−２形式等である。ＣＰＵ１０１は、ワークメモリ１０３に格納されている出力ファイル形式に従って、画像データのエンコード処理を実行する。なお、出力ファイル形式は、ユーザーが任意に選択可能であり、ユーザーが選択する出力ファイル形式が変更されると、ワークメモリ１０３に格納される出力ファイル形式も変更される。ＣＰＵ１０１は、ユーザーにより選択された出力ファイル形式に従って、完成したストーリーを一連のストリームとして作成される動画像ファイルを出力する。
【００５２】
なお、システム管理メモリ１０２及びワークメモリ１０３として、例えば、ＲＡＭ、ＲＯＭ、ＳＲＡＭ等が使用できる。
【００５３】
ＨＤＤ１０４は、画像データなどを格納する大容量のディスクドライブである。また、ＨＤＤ１０４は、画像編集装置１００及び画像編集システム２００が備える各処理部の機能を実現するプログラムの実行ファイルを格納している。ＣＰＵ１０１は、ユーザーによる画像編集システム２００の起動指示に従って、ＨＤＤ１０４に格納されている実行ファイルをワークメモリ１０３に展開する。これにより、ＣＰＵ１０１は、画像編集システム２００が備える各処理部の種処理動作を実行できるようになる。また、ＨＤＤ１０４は、素材画像として選択可能な画像データや、音楽データを記録可能である。ＣＰＵ１０１は、ユーザーによる操作を受け付けたときや、必要に応じて適宜ＨＤＤ１０４にアクセス可能である。
【００５４】
マウス１０５は、ユーザーが編集操作時に使用するポインティングデバイスである。ユーザーは、マウス１０５を操作することにより、後述する画像編集システム２００の操作画面上において、素材画像を選択したり、順序を移動させたり、ストーリーの編集効果等を設定することができる。
【００５５】
キーボード１０６は、ユーザーが編集操作時に文字入力などを行う、キーボードデバイスである。
【００５６】
ＵＳＢコネクタ１０７は、マウス１０５とキーボード１０６とを画像編集システム２００に接続するためのコネクタである。
【００５７】
表示デバイス１０８は、ＣＰＵ１０１で演算された画面情報を映像化するデバイス（例えば、ビデオカード等）であり、画面情報である映像信号を液晶ディスプレイ１０９に出力する。
【００５８】
液晶ディスプレイ１０９は、表示デバイス１０８で映像化した画面情報を表示する表示デバイスである。なお、液晶ディスプレイ１０９は、表示装置の具体例であり、ＣＲＴ（Cathode Ray Tube）、プラズマディスプレイ等、他の表示装置を使用してもよい。
【００５９】
次に、プレビュー再生部１６０がストーリーを再生処理するときのパフォーマンス（すなわち、プレビュー再生部１６０による素材画像に含まれる動画像の再生処理能力）を計測する手順について、図３を参照して説明する。なお、プレビュー再生部１６０による動画像の再生処理能力は、一般に、コンピュータ９０が備えるＣＰＵ１０１の処理能力に依存するため、ここでも、プレビュー再生部１６０の処理能力とはすなわちＣＰＵ１０１の処理能力のこととして扱う。
【００６０】
図３は、プレビュー再生部１６０による動画像の再生処理能力に関するパフォーマンス計測の処理の流れを示すフローチャートである。なお、ここでは、本実施の形態に係る画像編集装置１００及び画像編集システム２００は、プログラムとしてユーザーに提供され、コンピュータ９０に実行させることで実現されることを前提に説明する。
【００６１】
ユーザーは、本実施の形態にかかる画像編集装置１００を備える画像編集システム２００のインストーラを、画像編集システム２００とともに、又は、画像編集システム２００とは別に、ＣＤやＤＶＤ等の記録メディアから取得したり、インターネットを介してダウンロードすることにより取得したりできる。
【００６２】
ユーザーが、コンピュータ９０に画像編集システム２００のインストールを指示すると、ＣＰＵ１０１は、本実施の形態にかかる画像編集システム２００を利用可能な状態にするために、取得したインストーラをワークメモリ１０３に展開し、画像編集システム２００のインストールを実行する（Ｓ２００）。
【００６３】
ここで、インストーラは、プレビュー再生部１６０による動画像の再生処理能力を計測するためのテストデータを有している。インストーラはテストデータを用いてプレビュー再生部１６０による動画像の再生処理能力を計測する（Ｓ２０１）。具体的には、インストーラは、プレビュー再生部１６０に１種類以上のテストデータをデコードさせてみて、デコードが完了するまでに要する時間を計測する。このとき用いるテストデータは、例えば、ＡＶＣＨＤ  ６０ｉ形式の５秒間の動画像データ、ＡＶＣＨＤ  ３０Ｐ形式の５秒間の動画像データ等、再生時間が共通で、再生処理に要する負荷が異なる複数種類の動画像データであることが望ましい。
【００６４】
続いて、インストーラは、計測結果から、プレビュー再生部１６０の再生処理能力を、何段階かのうちのいずれかのレベルとして判定し、ＨＤＤ１０４に記録する（Ｓ２０２）。一例として、インストーラは、計測結果を、以下のように規定された５段階のレベルのいずれかとして、判定することが考えられる。
【００６５】
・レベル５：
５秒間のテストデータをＡＶＣＨＤ  ６０ｉでデコードした場合に、３秒以内でデコードが完了するという条件を満たすもの。
【００６６】
・レベル４：
５秒間のテストデータをＡＶＣＨＤ  ６０ｉでデコードした場合に、４秒以内でデコードが完了するという条件を満たすもの。
【００６７】
・レベル３：
５秒間のテストデータをＡＶＣＨＤ  ３０Ｐでデコードした場合に、４秒以内でデコードが完了するという条件を満たすもの。
【００６８】
・レベル２：
５秒間のテストデータをＡＶＣＨＤ  １０Ｐでデコードした場合に、４秒以内でデコードが完了するという条件を満たすもの。
【００６９】
・レベル１：
どのレベルの条件も満たさないもの。
【００７０】
上記５段階のレベルは、５がプレビュー再生部１６０（すなわち、コンピュータ９０が備えるＣＰＵ１０１）の再生処理能力が最も高いことを示し、１がプレビュー再生部１６０の再生処理能力が最も低いことを示す。
【００７１】
なお、インストーラは、画像編集ソフトにより再生処理対象となる、動画像のファイル形式、解像度、ビットレートのすべてについてテストデータを有しておき、これらを用いてプレビュー再生部１６０で再生処理能力を計測してもよい。または、インストーラは、ＡＶＣＨＤ  ６０ｉ形式のテストデータについてプレビュー再生部１６０の再生処理能力の計測が完了した後、この計測結果に基づいて、他の動画像のファイル形式、解像度、ビットレートにおけるプレビュー再生部１６０の再生処理能力を推定してもよい。
【００７２】
このようにして、インストーラは、画像編集ソフトにより再生処理対象となる動画像のファイル形式、解像度、ビットレートにおけるパフォーマンスレベル（すなわち、再生処理能力）を取得すると、取得結果をＨＤＤ１０４に記録する。
【００７３】
以上のように、プレビュー再生部１６０の再生処理能力（すなわち、ＣＰＵ１０１の処理能力）の計測が完了し、画像編集システム２００をコンピュータ９０上にて利用可能な状態にセットアップできたら、インストーラは、画像編集システム２００のインストールを終了する（Ｓ２０３）。
【００７４】
なお、ここでは、プレビュー再生部１６０の再生処理能力の計測を、画像編集システム２００のインストーラが行うとして説明したが、もちろん、これ以外の処理部が行ってもよい。例えば、プレビュー再生部１６０自身が計測してもよく、画像編集システム２００が備える他の任意の処理部が行ってもよい。また、画像編集システム２００の製造時に、画像編集システム２００が備えるＨＤＤ１０４に事前に記録しておいてもよい。
【００７５】
次に、本実施の形態に係る画像編集システム２００の操作画面について説明する。
【００７６】
図４は、液晶ディスプレイ１０９に表示される、「選択画面」のイメージ図である。ユーザーは、「選択画面」において、ストーリーを作成するための、素材画像と、テンプレートと、ＢＧＭとを選択する。
【００７７】
図４に示されるように、液晶ディスプレイ１０９に表示される選択画面は、素材選択エリア３００、テンプレート選択エリア３０１、ＢＧＭユーザー指定エリア３０２、決定釦３０３、登録釦３０４等を有する。
【００７８】
素材選択エリア３００は、ストーリーを作成するための素材となりうる動画像を表示するエリアである。図４に示されるように、素材選択エリア３００には、複数の画像が表示される。ユーザーは、素材選択エリア３００に表示された画像の中から、これから作成すべきストーリーを構成するための素材画像を選択する。
【００７９】
素材選択エリア３００に表示される画像は、ＨＤＤ１０４に格納された動画像データに対応する画像の全てでもよいし、特定のフォルダに格納された画像データに対応する画像のみを選択的に抽出したものでもよい。又は、特定のフォルダに格納された動画像データの中から、更にユーザーにより（例えばＧＵＩ等を用いて）選別された動画像データに対応する画像を抽出したものでもよい。なお、素材選択エリア３００に表示された動画像について、ストーリーに組み入れたい動画像としての優先度をユーザーが設定できるようにしてもよい。この場合、素材選択エリア３００に表示された動画像は、ストーリー作成時に組み入れられる動画像の候補となるが、すべての動画像を採用できない場合に、優先度が高く設定された動画像を優先的に採用することができる。これにより、ユーザーが所望する動画像を採用したストーリーを作成することができる。
【００８０】
テンプレート選択エリア３０１は、ユーザーが選択可能なテンプレートを表示するエリアである。ユーザーが選択可能なテンプレートとして、例えば図４に示されるように、「人物中心のスローテンポテンプレート」、「人物中心のアップテンポテンプレート」、「風景中心のスローテンポテンプレート」、「風景中心のアップテンポテンプレート」等が表示される。ユーザーはマウス１０５を操作することにより、テンプレートを選択することができる。このように、テンプレートを複数種類用意することで、作成するストーリーの雰囲気を変更することができる。
【００８１】
ＢＧＭユーザー指定エリア３０２は、ストーリーに使用するＢＧＭをユーザーが任意に指定するためのエリアである。ユーザーは、マウス１０５を操作して、登録釦３０４を押下することにより、ストーリー作成に使用するＢＧＭの登録を行うことができる。また、ユーザーは、マウス１０５を操作して、ＢＧＭの試聴を実行することができる。
【００８２】
決定釦３０３は、ユーザーが、ストーリー作成のための素材画像、テンプレート及びＢＧＭの選択を決定するための釦である。ユーザーは、マウス１０５を操作して、決定釦３０３を押下することにより選択を完了することができる。ストーリー作成のための選択が完了すると、素材選択エリア３００で選択された画像、テンプレート選択エリア３０１で選択されたテンプレート、及び、ＢＧＭユーザー指定エリア３０２で指定されたＢＧＭ情報に対応するＢＧＭに基づいて、画像編集システム２００によりストーリーが生成される。決定釦３０３が押下され、プレビュー（プレビュー用ストーリーともいう）が作成されると、ＣＰＵ１０１は、液晶ディスプレイ１０９が選択画面から確認画面へと表示画面を変更するよう表示デバイス１０８を介して制御する。なお、プレビューの作成動作についての詳細は、後述する。
【００８３】
図５は、液晶ディスプレイ１０９に表示される、画像編集システム２００の「確認画面」のイメージ図である。ユーザーは、「確認画面」において、作成したストーリーの出来映えを確認する。
【００８４】
図５に示されるように、液晶ディスプレイ１０９に表示される確認画面は、ストーリー情報表示エリア４００、プレビューエリア４０１、ストーリーボードエリア４０２、ストーリー保存釦４０３、ファイル出力釦４０４、及び、編集釦４０５等を有する。
【００８５】
ストーリー情報表示エリア４００は、選択画面でユーザーが選択した内容に関する情報を表示するエリアである。
【００８６】
プレビューエリア４０１は、本実施の形態に係る画像編集装置１００により作成されたプレビューを、再生する表示エリアである。ユーザーは作成したストーリーの内容を、プレビューとして、実際に映像で確認することができる。
【００８７】
プレビューエリア４０１は、プレビュー画面、再生釦、早送り釦、巻き戻し釦等から構成されている。ユーザーは、マウス１０５を操作することにより、再生釦、早送り釦、巻き戻し釦を選択可能であり、画像編集システム２００にプレビューの各種再生動作を実行させることができる。
【００８８】
すなわち、図２を参照して、画像編集システム２００は、本実施の形態に係る画像編集装置１００が備えるプレビュー再生部１６０が出力する映像信号を、例えば、プレビューエリア４０１に表示させる。
【００８９】
ストーリーボードエリア４０２は、作成したストーリーの内容を表示するエリアである。ストーリーボードエリア４０２には、複数の「箱」が配列上に並んで表示される。複数の箱の各々は、素材画像に含まれる複数の動画像又は静止画像の各々に対応する。箱の配置された順序は、ストーリー上の表示の順序に対応する。それぞれの箱には、素材選択エリア３００に表示されていた画像から選択された複数の画像の各々が、いずれの箱に対応するかを表す画像が配置されて表示される。また、画像編集システム２００は、箱に重ねるようにして、画像と画像との間の切り替え効果を示すアイコンを合わせて表示してもよい。また、箱に重ねるようにして、各箱に配置された動画像をムービー表示する際の再生時間を合わせて表示してもよい。これにより、ユーザーはストーリー上に、どの素材が、どのような順序で、どのような効果で、どのような再生時間で配置されているかを、ストーリーボードエリアに表示された複数の箱の画像から確認することができる。
【００９０】
ストーリー保存釦４０３は、マウス１０５の操作により選択することができる。ユーザーは、ストーリー保存釦４０３を押下することにより、ストーリー情報を、ＨＤＤ１０４に保存することができる。なお、図示していないが、例えば上の階層の画面において、ストーリー読出し釦を設けておき、ここで保存したストーリー情報を読み出せるように構成してもよい。
【００９１】
ファイル出力釦４０４は、マウス１０５の操作により選択することができる。ユーザーは、ファイル出力釦４０４を押下することにより、作成されたストーリー情報に基づいて動画ファイルを作成することができる。すなわち、ファイル出力釦４０４が押下されると、画像編集システム２００は、ストーリーに対応する新たな動画ファイルを作成し、書き出す。このとき作成される動画ファイルの出力形式は、予めユーザーが選択できるようにしておいてもよい。すなわち、ユーザーがＡＶＣＨＤファイル形式を選択している場合は、画像編集システム２００は、ＡＶＣＨＤファイル形式の動画ファイルを作成する。
【００９２】
編集釦４０５は、マウス１０５の操作により選択することができる。ユーザーは、編集釦４０５を押下することにより、ＣＰＵ１０１は、液晶ディスプレイ１０９が確認画面から編集画面へと表示画面を変更するよう表示デバイス１０８を介して制御する。すなわち、編集釦４０５が押下されると、画像編集システム２００は、編集画面を表示する。
【００９３】
図６は、液晶ディスプレイ１０９に表示される画像編集システム２００の「編集画面」
のイメージ図である。ユーザーは、「編集画面」において、一旦作成したストーリーを編集する。
【００９４】
図６に示されるように、液晶ディスプレイ１０９に表示される編集画面は、素材選択エリア８００、編集操作エリア８０１、プレビューエリア８０２、ストーリーボードエリア８０３、ストーリー保存釦８０４、及び、ファイル出力釦８０５等を有する。
【００９５】
素材選択エリア８００は、図４における素材選択エリア３００と同様であるため、説明は省略する。プレビューエリア８０２は、図５におけるプレビューエリア４０１と同様であるため、説明は省略する。ストーリー保存釦８０４、ファイル出力釦８０５は、図５におけるストーリー保存釦４０３、ファイル出力釦４０４と同様であるため、説明を省略する。
【００９６】
編集操作エリア８０１は、ストーリーを構成するそれぞれの箱（すなわち、ストーリーボードエリア８０３に表示される、箱８２０a、箱８２０b、・・・）に対する、映像効果、切替効果等の編集項目を編集操作するエリアである。ユーザーは、マウス１０５を操作することにより、それぞれの箱に設定したい映像効果や切替効果を選択・変更できる。
【００９７】
ストーリーボードエリア８０３は、ユーザーが作成しようとしているストーリーを表示するエリアである。ストーリーボードエリアには、複数の箱（８２０a、８２０bなど）が配列上に並んでおり、上述した選択画面から確認画面に遷移したときに作成されたストーリーの概略を表示する。
【００９８】
ユーザーは、素材選択エリア８００に表示された画像を、マウス１０５の操作により、ストーリーボードエリア８０３上の所望の箱にドラッグ＆ドロップ操作することができる。これにより、ストーリーボードエリア８０３の所望の箱に、画像が配置される。ドラッグ＆ドロップ操作先の箱にすでに他の画像が配置されている場合は、すでに配置されている画像をドラッグ＆ドロップ操作された画像に置換する。また、ユーザーは、ストーリーボードエリア８０３の一箱に配置された画像を、マウス１０５によりドラッグ＆ドロップ操作して他の箱に配置し直すこともできる。ストーリーボードエリア８０３における動画像の配置された順序は、ストーリーの順序に対応する。そのため、ストーリーボードエリア８０３において動画像の配置された場所を変更することは、ストーリーの順序を変更することに対応する。また、ユーザーは、箱をマウス１０５で選択状態にでき、箱を選択状態にしたままで、編集操作エリア８０１のいずれかの編集項目を操作すると、選択された箱に対応する映像効果や切替効果を変更することができる。
【００９９】
続いて、本実施の形態に係る画像編集装置１００が、プレビューを作成する手順について説明する。
【０１００】
プレビューは、上述したように、画像編集システム２００が、液晶ディスプレイ１０９に表示させる操作画面を、選択画面から確認画面へと表示画面を変更するタイミングにて作成される。すなわち、画像編集システム２００は、ストーリーに含められる素材画像を表示する順序がユーザーにより確定されたタイミングで、画像編集装置１００にプレビューを作成させる。
【０１０１】
図７は、本実施の形態に係る画像編集装置１００が、プレビューを作成する処理の手順を示すフローチャートである。
【０１０２】
まず、図４に示される選択画面において、ストーリー作成に使用する、素材、テンプレート、ＢＧＭの選択を終えたら、ユーザーは決定釦３０３を押下することにより、選択内容を確定する（Ｓ５００）。決定釦３０３が押下されるまで、ユーザーはストーリー作成に使用する、素材、テンプレート、ＢＧＭの選択操作が可能である（Ｓ５００におけるＮｏ）。
【０１０３】
決定釦３０３が押下されると、画像編集システム２００は、確定された選択内容に従って、ストーリーを作成する（Ｓ５０１）。ここで作成されるストーリーは、プレビュー用のストーリーではなく、プレビュー用のストーリーを作成する基になるオリジナルのストーリーである。オリジナルストーリーとは、ストーリー情報で特定される条件に従い、画像編集システム２００が素材画像に含まれる各々の動画像のファイル形式を変換処理することなく、テンプレートに従って配置された一連の画像群のことである。
【０１０４】
次に、本実施の形態に係る画像編集装置１００が備える画像取得部１２０は、オリジナルストーリーに含まれる動画像である素材画像を取得する（Ｓ５０２）。
【０１０５】
続いて、変換部１４０は画像編集システム２００のコンピュータ９０へのインストール時に計測された、プレビュー再生部１６０の再生処理能力であるパフォーマンスレベルをＨＤＤ１０４から読み出す。そして、変換部１４０は、抽出された動画像のそれぞれについて、プレビュー再生部１６０の再生処理能力で問題なく再生可能であるか否かを判定する。
【０１０６】
具体的には、変換部１４０は、プレビュー再生部１６０の再生処理能力により定まる負荷基準と、動画像のファイル形式、解像度、ビットレートによって定まる負荷レベルとを比較し（Ｓ５０３）、各々の動画像の負荷レベルが負荷基準以下であれば（Ｓ５０４でＹｅｓ）、問題なく再生可能であると判断する。一方、負荷レベルが負荷基準を超えている場合には（Ｓ５０４でＮｏ）、変換部１４０はプロキシ画像を作成する（Ｓ５０５）。
【０１０７】
ここで、動画像の負荷レベルについて、図８を参照して説明する。
【０１０８】
図８は、本実施の形態における動画ファイル形式テーブルを示す模式図である。動画ファイル形式テーブルは、画像編集システム２００において再生可能な動画のファイル形式、解像度及びビットレートと、これに対応付けられた負荷レベルの組み合わせを列挙したものである。すなわち、画像編集システム２００は、複数の動画像の各々が有する属性情報と、これら属性情報を有する動画像の再生処理に要する負荷である負荷レベルとを対応付けて、動画ファイル形式テーブルとして、ＨＤＤ１０４や、システム管理メモリ１０２等に記憶している。
【０１０９】
動画のファイル形式としては、例えば、ＡＶＣＨＤ、ＡＶＣＨＤ  Ｌｉｔｅ、ＭＯＶ等が列挙される。
【０１１０】
解像度は、それぞれの動画のファイル形式に対して対応するサイズが列挙される。
【０１１１】
ビットレートは、それぞれの動画のファイル形式と、解像度に対応するレートが列挙される。
【０１１２】
負荷レベルは、プレビュー再生部１６０が、どの程度の再生処理能力を有していれば（又は、ＣＰＵ１０１がどの程度の処理能力を有していれば）、ストーリーのプレビュー表示のときにユーザーが快適に確認できるかについての指標である。ここで、「快適に確認できる」とは、具体的には、動画の再生時にフレームのコマ落ちが発生せず、事前に定められたフレームレートで再生可能なことをいう。
【０１１３】
ここでは説明のため、プレビュー再生部１６０の再生処理能力の尺度（レベル１〜レベル５）と、動画ファイル形式テーブルに示される動画ごとの負荷レベル（１〜５）の尺度とは一致するものとする。
【０１１４】
また、負荷基準として、計測されたプレビュー再生部１６０の再生処理能力を示す値を使用するとする。
【０１１５】
このとき、図８の例によれば、取得された動画像のファイル形式がＡＶＣＨＤ、解像度が１９２０×１０８０、ビットレートが１７Ｍｂｐｓの場合、対応する負荷レベルは、動画ファイル形式テーブルより５と定まる。よって、変換部１４０は、負荷基準である、プレビュー再生部１６０の再生処理能力が５であれば、この動画像に対してプロキシ画像を作成する必要はないと判定し、負荷基準が４以下であれば、この動画像に対応するプロキシ画像を作成する必要があると判定する。
【０１１６】
また、取得した動画像のファイル形式がＭＯＶ、解像度が６４０×４８０、ビットレートが１５Ｍｂｐｓの場合、対応する負荷レベルは、２と定まる。よって、変換部１４０は、負荷基準である、プレビュー再生部１６０の再生処理能力が２以上あれば、この動画像に対してプロキシ画像を作成する必要はないと判定し、負荷基準が１であれば、この動画像に対応するプロキシ画像を作成する必要があると判定する。
【０１１７】
逆にいえば、変換部１４０は、プレビュー再生部１６０の再生処理能力で定まる負荷基準が、取得された動画像に対応する負荷レベル以上であれば、その動画像に対応するプロキシ画像を作成する必要はないと判定する。逆に、変換部１４０は、負荷基準が、取得された動画像に対応する負荷レベル未満であれば、その動画像に対応するプロキシ画像を作成する必要があると判定する。
【０１１８】
再度、図７を参照して、変換部１４０は、プロキシ画像を作成する必要があると判定した場合に（Ｓ５０４でＮｏ）、プロキシ画像を作成する（Ｓ５０５）。変換部１４０は、プロキシ画像として、例えば、再生処理負荷の低いＭＯＶファイル形式で、解像度３２０×２４０、ビットレート３Ｍｂｐｓのファイルを作成する。図８に示されるように、ＭＯＶファイル形式で、解像度が３２０×２４０、ビットレートが３Ｍｂｐｓである動画像に対応する負荷レベルは１である。よって、負荷基準が１であっても、プレビュー再生部１６０は、ユーザーが快適に確認できるプレビュー表示を実行することができる。
【０１１９】
ここで、ステップＳ５０５において変換部１４０が行う、プロキシ画像作成の詳細動作について説明する。
【０１２０】
変換部１４０は、再生処理に要する負荷が負荷基準よりも大きい動画像に対しては、当該動画像を、再生処理に要する負荷がより小さいファイル形式へと変換することで、プロキシ画像を生成する。
【０１２１】
または、変換部１４０は、再生処理に要する負荷が負荷基準よりも大きい動画像に対しては、当該動画像を、解像度又はビットレートがより小さい動画像へと変換することで、プロキシ画像を生成してもよい。
【０１２２】
または、変換部１４０は、再生処理に要する負荷が負荷基準よりも大きい動画像に対しては、当該動画像を、再生処理に要する負荷が負荷基準よりも小さい動画像へ変換することで、プロキシ画像を生成してもよい。
【０１２３】
または、変換部１４０は、負荷レベルが負荷基準よりも大きい動画像に対しては、当該動画像を、動画ファイル形式テーブルに記録されている負荷レベルのうち最も低い負荷レベルに対応付けられた属性情報を有する動画像へ変換することで、プロキシ画像を生成してもよい。
【０１２４】
以下、図９を参照して、より詳細に説明する。
【０１２５】
図９は、本実施の形態にかかる画像編集装置１００が備える変換部１４０によるプロキシ画像作成の処理の流れを示すフローチャートである。
【０１２６】
まず、変換部１４０は、ステップＳ５０４において、プロキシ画像を作成する必要があると判定された動画像をデコードする（Ｓ７００）。
【０１２７】
続いて、変換部１４０は、ステップＳ７００でデコードされた動画像を、３２０×２４０の解像度にリサイズ（縮小）する（Ｓ７０１）。次に、ＣＰＵ１０１は、ステップＳ７０２でリサイズされた動画像を、より負荷レベルが小さい動画フォーマットとなるようにエンコードする（Ｓ７０２）。ここでは、ＭＯＶ形式にエンコードする。
【０１２８】
その結果得られる動画像の負荷レベルは１となり、プレビュー再生部１６０によって、コマ落ちなく表示可能となる。
【０１２９】
なお、本実施の形態に係る変換部１４０は、プロキシ画像として、負荷レベルが１の動画像（ＭＯＶフォーマットで、解像度が３２０×２４０であり、ビットレートが３Ｍｂｐｓであるもの）へと変換したが、必ずしも負荷レベルが１の動画像に変換する必要はない。変換部１４０は、負荷基準（すなわち、プレビュー再生部１６０の再生処理能力）以下の任意の負荷レベルに対応する動画像へ変換すればよい。
【０１３０】
なお、変換部１４０は、ステップＳ７０２のエンコードのみで動画像の負荷レベルが負荷基準よりも小さくできる場合には、ステップＳ７０１のリサイズ処理をしなくともよい。
【０１３１】
以上が、ステップＳ５０５における変換部１４０の処理の内容である。
【０１３２】
再度、図７を参照して、画像取得部１２０はすべての動画像を取得したかどうかを判定し（Ｓ５０６）、未処理の動画像が残っている場合（Ｓ５０６でＮｏ）はステップＳ５０２に戻って、新たな動画像を取得する。
【０１３３】
一方、画像取得部１２０がすべての動画像を抽出し終えたら（Ｓ５０６でＹｅｓ）、画像編集装置１００は、プレビュー用のストーリー情報を作成する（Ｓ５０７）。
【０１３４】
プレビュー用のストーリー情報とは、オリジナルストーリーのストーリー情報で特定される動画像のうち、プロキシ画像が作成された動画像については、元の動画像に代わり、プロキシ画像の識別子（例えばファイル名）が指定された、ストーリー情報である。
【０１３５】
プレビュー再生部１６０は、素材画像として選択された動画像データのそれぞれを、ストーリー情報で特定される順番に従って再生する。その結果、プレビュー再生部１６０は、負荷基準よりも再生処理負荷が低い（負荷レベルが小さい）素材である動画像についてはファイル形式を変換処理せずそのまま再生し、負荷基準よりも再生処理負荷が高い（負荷レベルが大きい）素材である動画像については、より再生処理負荷の低いファイル形式等に変換処理されたプロキシ画像を、素材画像の代わりに再生することになる。
【０１３６】
以上の動作により、画像編集装置１００は、プレビュー再生のための処理を終了する。
【０１３７】
続いて、画像編集システム２００により、ストーリーに含まれる素材画像を個別に置換するときの、画像編集装置１００によるプレビューの再作成処理について説明する。
【０１３８】
ユーザーは、上述した図６に示される編集画面において、すでに作成されたストーリーに対して、そこで使用される素材画像の一部を置き換える編集操作が可能である。この編集操作の結果、ストーリーに含まれる動画像に変更が生じるため、画像編集装置１００は、再度、プレビュー再生のための処理を行う必要が生じる。
【０１３９】
図１０は、本実施の形態に係る画像編集システム２００による、ストーリーに含まれる素材画像の個別追加による編集処理の概要を示すフローチャートである。
【０１４０】
なお、ステップＳ９０１からステップＳ９０３における処理内容は、図７におけるステップＳ５０３からステップＳ５０５の動作内容と同様のため詳細な説明は省略する。
【０１４１】
まず、ユーザーはマウス１０５を用いて、素材選択エリア８００から素材画像に加える新たな動画像を選択する。続いて、ユーザーは選択した動画像を、マウス１０５を用いてストーリーボードエリア８０３上の所望の箱にドラッグ＆ドロップすることにより、素材を該箱に配置する（Ｓ９００）。このとき、画像編集システム２００は、ドラッグ＆ドロップ先の箱にすでに動画像が配置されているときは、すでに配置されていた動画像を新たに配置された動画像で置換する。
【０１４２】
続いて、変換部１４０は、置換対象となる動画像について、ステップＳ９０２、ステップＳ９０３において、プレビュー再生部１６０の再生処理能力が所定基準、すなわち、置換対象となる動画像の負荷レベル以上であるか否かを判定する（Ｓ９０２）。その結果、プレビュー再生部１６０の再生処理能力が負荷レベル以上である場合（Ｓ９０２でＹｅｓ）には、変換部１４０はプロキシ画像を作成しないと判定する。一方、プレビュー再生部１６０の再生処理能力が負荷レベル未満である場合（Ｓ９０２でＮｏ）には、変換部１４０はプロキシ画像を作成する（Ｓ９０３）。
【０１４３】
以上の動画像ファイルの置換編集が終了すると、画像編集装置１００は、プレビュー用のストーリーを更新する（Ｓ９０４）。
【０１４４】
以上説明したとおり、本実施の形態に係る画像編集装置１００は、素材画像を取得する画像取得部１２０と、取得された素材画像のうち、（Ａ）再生処理に要する負荷が事前に定められた負荷基準よりも大きい画像に対しては、当該画像に対応する、再生処理に要する負荷がより小さい画像であるプロキシ画像を新たに生成する変換処理を施し、（Ｂ）再生処理に要する負荷が前記負荷基準以下である画像に対しては、変換処理を施さない変換部１４０と、プロキシ画像、及び、当該プロキシ画像に対応する画像以外の素材画像を、事前に定められた順序でプレビューとして再生するプレビュー再生部１６０とを備える。
【０１４５】
これにより、画像編集装置１００は、プレビュー再生部１６０による再生処理負荷が所定基準よりも高い画像については、ユーザーが快適なプレビュー表示を確認できるように、より再生処理の負荷が小さいプロキシ画像を作成した上で、プレビューを再生することができる。一方、プレビュー再生部１６０による再生処理負荷が所定基準よりも低い画像については、不要なプロキシ画像の作成処理をカットすることで、動画像のリサイズやデコード及びエンコードに必要な処理を省くことができる。
【０１４６】
また、実施の形態に係る画像編集装置１００において、所定基準は、プレビュー再生部１６０の再生処理能力（すなわち、ＣＰＵ１０１の処理能力）に応じて変更される。ＣＰＵ１０１の処理能力が高い場合は、処理能力がより低いＣＰＵに比べ、プロキシ画像が作成されにくくなるように、基準を変更する。これにより、ＣＰＵ１０１の処理能力が高い場合は、不要なプロキシ画像の作成処理をカットすることができる。一方、ＣＰＵ１０１の処理能力が低い場合は、ユーザーが快適なプレビュー表示を確認できるように、プロキシ画像を作成した上で、プレビュー再生することができる。
【０１４７】
また、実施の形態にかかる画像編集装置１００において、所定基準は、プレビュー再生部１６０の再生処理能力（すなわち、ＣＰＵ１０１の処理能力）に応じて変更されるとしたが、これに限定されない。プレビュー再生のときに、再生処理を担当する演算装置（ＣＰＵ１０１以外であってもよい）について、再生処理能力を計測し、該計測結果に基づいてプロキシ画像を作成するか否かを判定するようにしてもよい。
【０１４８】
本発明は、上記実施の形態に限定されず、他の実施の形態も考えられる。以下、他の実施の形態についてまとめて説明する。
【０１４９】
上記実施の形態において、プレビュー再生部１６０の再生処理能力を計測するためのテストデータをＡＶＣＨＤ６０ｉ形式の５秒間の動画像データとして例示したが、本発明はこれに限定されない。すなわち、プレビュー再生部１６０の再生処理能力を計測することができるテストデータであれば、他の動画像ファイル形式でもよいし、より長時間のものであっても短時間のものであってもよい。
【０１５０】
上記実施の形態において、すでに作成されたストーリーに対して、素材を置き換える編集操作について説明したが、本発明はこれに限定されない。すなわち、すでに作成されたストーリーに対して、素材を追加する場合にも本発明を適用可能である。素材を追加するときは、追加対象となる動画像について、プレビュー再生部１６０の再生処理能力が所定基準を満たすか否かによりプロキシ画像を作成するか否かを変換部１４０が判定する。
【０１５１】
上記実施の形態においては、動画像について説明したが、静止画像であっても、再生処理負荷が所定基準より高いか低いかに応じて、再生処理負荷の低い形式のファイルを作成することにより、ユーザーが快適に確認できるプレビュー表示が可能である。すなわち、静止画像の再生処理負荷が、所定基準以上であれば、変換部１４０は、再生処理負荷がより低い形式へ当該静止画像を変換することによりプロキシ画像を作成してもよい。
【０１５２】
上記実施の形態においては、所定基準よりも再生処理負荷が高い素材についてのファイル形式の変換処理が完了するまでプレビュー表示用のストーリーが作成されない場合を例示したが、ファイル形式の変換処理中において、ユーザーの操作を受け付けて、該変換処理をキャンセルするようにしてもよい。キャンセルした時点で、変換処理が完了していない動画像については、そのままの状態でプレビュー表示用のストーリーを作成するようにしてもよい。
【０１５３】
すなわち、変換部１４０は、変換処理を施している間に、ユーザーが変換処理の中止を指示した場合には、該変換処理を中止し、プレビュー再生部１６０は、変換処理が中止されるまでに変換部１４０が生成したプロキシ画像と、当該プロキシ画像に対応する動画像以外の素材画像を、事前に定められた（ストーリー情報によって特定される）順序で再生してもよい。
【０１５４】
これにより、プレビュー表示が不要のユーザーは、プレビュー表示用のストーリー作成に要する処理時間をカットすることができる。すなわち、プレビュー表示が不要の場合、プレビュー表示用のストーリーを作成することなく、ただちにオリジナルストーリーの表示を実行することができる。
【０１５５】
なお、上記実施の形態においては、画像編集システム２００が、液晶ディスプレイ１０９に表示させる操作画面を、選択画面から確認画面へと表示画面を変更するタイミングで、画像編集装置１００がプレビューを作成した。しかし、画像編集装置１００がプレビューを作成するタイミングは、これに限られない。例えば、（１）素材画像へ新たな動画像が追加されたタイミング、（２）素材画像、及び、素材画像の各々を表示する順序がユーザーにより確定されたタイミング、及び、（３）ユーザーによる明示の指示を取得したタイミング、のうち少なくとも１つのタイミングで、画像編集装置１００がプレビューを作成してもよい。このとき、画像編集装置１００の内部処理としては、変換部１４０は、（１）素材画像へ新たな動画像が追加されたタイミング、（２）素材画像、及び、素材画像の各々を表示する順序がユーザーにより確定されたタイミング、及び、（３）ユーザーによる明示の指示を取得したタイミング、のうち少なくとも１つのタイミングで、取得された素材画像のなかに、当該動画像の再生処理に要する負荷が負荷基準よりも大きい動画像が含まれているか否かを判定し、負荷が負荷基準よりも大きい動画像に対してのみ、変換処理を施すことになる。
【０１５６】
なお、変換部１４０は、プロキシ画像を作成する際に、ステップＳ７０１の処理を行わなくてもよい。すなわち、画像に対して、リサイズを行わず、エンコードのみを施してもよい。また、変換部１４０は、ステップＳ７０２によってＭＯＶ形式以外のファイル形式へエンコードしてもよい。
【０１５７】
なお、上記実施の形態に係る画像編集装置に含まれる各処理部は典型的には集積回路であるＬＳＩとして実現される。これらは個別に１チップ化されてもよいし、一部又はすべてを含むように１チップ化されてもよい。
【０１５８】
ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
【０１５９】
また、集積回路化はＬＳＩに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。ＬＳＩ製造後にプログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）、又はＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。
【０１６０】
さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて各処理部の集積化を行ってもよい。バイオ技術の適用等が可能性として考えられる。
【０１６１】
また、本発明の実施の形態に係る、画像編集装置の機能の一部又は全てを、ＣＰＵ等のプロセッサがプログラムを実行することにより実現してもよい。
【０１６２】
さらに、本発明は上記プログラムであってもよいし、上記プログラムが記録された記録媒体であってもよい。また、上記プログラムは、インターネット等の伝送媒体を介して流通させることができるのは言うまでもない。
【０１６３】
また、上記実施の形態に係る画像編集装置の機能のうち少なくとも一部を組み合わせてもよい。
【０１６４】
さらに、本発明の主旨を逸脱しない限り、本実施の形態に対して当業者が思いつく範囲内の変更を施した各種変形例も本発明に含まれる。
【産業上の利用可能性】
【０１６５】
本発明は、画像編集装置に関し、特に画像の編集操作が可能な画像編集装置に関する。つまり、本発明は画像編集装置への適用に限定されず、画像の編集操作が可能であれば、携帯電話、ビデオカメラ等の画像編集装置にも適用可能である。また、同様の機能を実行可能なプログラムを格納したＣＤやＤＶＤ等の記録メディアにも適用可能である。
【符号の説明】
【０１６６】
９０  コンピュータ
１００  画像編集装置
１０１  ＣＰＵ
１０２  システム管理メモリ
１０３  ワークメモリ
１０４  ＨＤＤ
１０５  マウス
１０６  キーボード
１０７  ＵＳＢコネクタ
１０８  表示デバイス
１０９  液晶ディスプレイ
１２０  画像取得部
１４０  変換部
１６０  プレビュー再生部
１８０  オリジナルストーリー生成部
２００  画像編集システム
３００  素材選択エリア
３０１  テンプレート選択エリア
３０２  ＢＧＭユーザー指定エリア
３０３  決定釦
３０４  登録釦
４００  ストーリー情報表示エリア
４０１  プレビューエリア
４０２  ストーリーボードエリア
４０３  ストーリー保存釦
４０４  ファイル出力釦
４０５  編集釦
８００  素材選択エリア
８０１  編集操作エリア
８０２  プレビューエリア
８０３  ストーリーボードエリア
８０４  ストーリー保存釦
８０５  ファイル出力釦
【図１】
2012100241.tif 000003
【図２】
2012100241.tif 000004
【図３】
2012100241.tif 000005
【図４】
2012100241.tif 000006
【図５】
2012100241.tif 000007
【図６】
2012100241.tif 000008
【図７】
2012100241.tif 000009
【図８】
2012100241.tif 000010
【図９】
2012100241.tif 000011
【図１０】
2012100241.tif 000012