(57)【要約】【課題】簡単な作業によってユーザが希望するハイライト部分による動画像を得る。【解決手段】  画像記録制御装置は、動画像を取得する画像取得部と、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、を具備する。【選択図】図１
2019114847.tif 000002
【特許請求の範囲】
【請求項１】
動画像を取得する画像取得部と、
上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、
上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、
を具備したことを特徴とする画像記録制御装置。
【請求項２】
上記表示制御部は、上記記録候補部を繰り返し表示する
ことを特徴とする請求項１に記載の画像記録制御装置。
【請求項３】
複数の上記記録候補部のうち選択された記録候補部のみを記録する記録制御部
を更に具備したことを特徴とする請求項１に記載の画像記録制御装置。
【請求項４】
上記特定部は、ユーザ操作に基づいて上記特定期間を特定するか又は上記動画像の画像解析によって上記特定期間を特定する
ことを特徴とする請求項１に記載の画像記録制御装置。
【請求項５】
上記特定部は、上記ユーザ操作により指定されたタイミング又は上記画像解析により指定されたタイミングよりも所定時間前のタイミングを上記特定期間の開始タイミングとする
ことを特徴とする請求項４に記載の画像記録制御装置。
【請求項６】
上記特定部は、上記特定期間の期間長を予め定めされた所定の期間長とする
ことを特徴とする請求項１に記載の画像記録制御装置。
【請求項７】
上記記録候補部の期間を変更する期間変更部
を更に具備したことを特徴とする請求項１に記載の画像記録制御装置。
【請求項８】
上記記録候補部の採用又は不採用を設定する選択部
を更に具備したことを特徴とする請求項１に記載の画像記録制御装置。
【請求項９】
上記記録候補部の期間を変更すると共に、上記記録候補部の採用又は不採用を設定する編集制御部
を更に具備したことを特徴とする請求項１に記載の画像記録制御装置。
【請求項１０】
複数の上記記録候補部を結合して得た動画像を記録する記録制御部
を更に具備したことを特徴とする請求項１、７、８又は９に記載の画像記録制御装置。
【請求項１１】
動画像を取得する画像取得ステップと、
上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定ステップと、
上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御ステップと、
を具備したことを特徴とする画像記録方法。
【請求項１２】
コンピュータに、
動画像を取得する画像取得ステップと、
上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定ステップと、
上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御ステップと、
を実行させるための画像記録プログラム。
【請求項１３】
動画像を取得する撮像部と、
上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、
上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、
を具備したことを特徴とする撮像装置。
【請求項１４】
上記表示制御部は、上記撮像部による上記動画像の撮像終了直後に、上記記録候補部に相当するコマの表示を行う
ことを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
上記表示制御部は、上記記録候補部に相当するコマの表示に際して、上記記録候補部の期間の変更又は上記記録候補部の選択のためのグラフィカルユーザインタフェースを提供する
ことを特徴とする請求項１４に記載の撮像装置。
【請求項１６】
動画像を取得する撮像部を有する撮像装置と、
表示部を有し、上記撮像装置との間で通信が可能な情報端末装置と、を具備し、
上記撮像装置又は情報端末装置に設けられ、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、
上記撮像装置又は情報端末装置に設けられ、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、
を具備したことを特徴とする画像記録制御システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画の編集記録が可能な画像記録制御装置、画像記録方法、画像記録プログラム、撮像装置及び画像記録制御システムに関する。
【背景技術】
【０００２】
近年、デジタルカメラなどの撮影機能付き携帯機器（撮影機器）は、静止画のみならず、動画撮影機能を有するものが多い。動画撮影を行った得た動画は、鑑賞上、無駄な部分や変化の乏しい部分が比較的多く、変化が少なく見栄えが良くない場合がある。そこで、撮影によって取得した動画像を編集することで鑑賞、観察に適した動画を作成する映像編集が行われることがある。
【０００３】
このような動画像の映像編集装置においては、長時間に渡って記録された動画像から、所望の編集ポイントを探して編集作業を行う必要があり、比較的長時間の煩雑な作業を必要とする。そこで、特許文献１においては、静止画の撮影指示に従ってダイジェスト動画を生成すると共に、予め定められた条件に従ってダイジェスト動画から削除箇所を削除する技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第６２０６６９９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の装置においては、予め定められた条件に従って不要な部分を削除して動画像を短くすることはできるが、動画像を簡単、迅速に編集できるものではなく、必ずしもユーザの希望に沿ったシーンやハイライト部分による動画像を生成することができるとは限らないという問題があった。
【０００６】
本発明は、簡単な作業によってユーザが希望するハイライト部分による動画像を得ることができる画像記録制御装置、画像記録方法、画像記録プログラム、撮像装置及び画像記録制御システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一態様による画像記録制御装置は、動画像を取得する画像取得部と、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、を具備する。
【０００８】
本発明の一態様による画像記録方法は、動画像を取得する画像取得ステップと、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定ステップと、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御ステップと、を具備する。
【０００９】
本発明の一態様による画像記録プログラムは、コンピュータに、動画像を取得する画像取得ステップと、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定ステップと、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御ステップと、を実行させる。
【００１０】
本発明の一態様による撮像装置は、動画像を取得する撮像部と、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、を具備する。
【００１１】
本発明の一態様による画像記録制御システムは、動画像を取得する撮像部を有する撮像装置と、表示部を有し、上記撮像装置との間で通信が可能な情報端末装置と、を具備し、上記撮像装置及び情報端末装置のいずれかに、上記動画像の開始から終了までの間に、１つ以上の特定期間の画像部分を記録候補部として特定する特定部と、上記記録候補部の期間の変更又は上記記録候補部の選択のために、上記記録候補部に相当するコマのみを識別可能に表示する表示制御部と、を具備する。
【発明の効果】
【００１２】
本発明によれば、簡単な作業によってユーザが希望するハイライト部分による動画像を得ることができるという効果を有する。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施の形態に係る画像記録制御装置を示すブロック図。
【図２】第１の実施の形態の動作を説明するためのフローチャート。
【図３】図３はハイライト記録処理の流れを示す説明図。
【図４】ハイライト編集における画面表示の表示例を示す説明図。
【図５】ハイライト編集における画面表示の表示例を示す説明図。
【図６】ハイライト編集処理の処理の流れを示すフローチャート。
【図７】本発明の第２の実施の形態を示すブロック図。
【図８】撮像装置６０の動作を示すフローチャート。
【図９】携帯端末７０の動作を示すフローチャート。
【図１０Ａ】第２の実施の形態の動作を説明するための説明図。
【図１０Ｂ】第２の実施の形態の動作を説明するための説明図。
【図１０Ｃ】第２の実施の形態の動作を説明するための説明図。
【図１０Ｄ】第２の実施の形態の動作を説明するための説明図。
【図１０Ｅ】第２の実施の形態の動作を説明するための説明図。
【発明を実施するための形態】
【００１４】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【００１５】
（第１の実施の形態）
図１は本発明の第１の実施の形態に係る画像記録制御装置を示すブロック図である。本実施の形態は、画像記録制御装置を撮像装置によって構成した例を示している。
【００１６】
本実施の形態の画像記録制御装置は、動画の撮影時や再生時において、ハイライト部分を特定する操作又はハイライト部分の自動検出によって、撮像画像中の比較的短時間のハイライト部分の候補を特定すると共に、複数のハイライト部分を結合することで、変化に富んだ面白味のある動画を得るものである。この場合において、本実施の形態においては、各ハイライト部分の候補は、撮像画像中の比較的短時間の特定期間（以下、候補期間という）に設定され、この候補を例えば繰り返し再生しながらユーザの候補期間の変更操作及び合成編集操作を受け付けることにより、簡単な操作によって面白味のある動画の生成を可能にする。なお、候補期間は、検索の容易さと確認の確実さとを比較考慮して、例えば、数秒間（２〜３秒間や、４〜５秒間等）が好ましいが、これに限らず、動画の内容に応じて適宜変更可能である。
ここで、繰り返して表示するのは、短期間の動画ならさっと見てしまった方が早いという発想であるが、動画として見ることで、時間推移の体感もでき動画としての効果も簡単に確認できる。
また、例えば秒３０コマの動画なら２秒分の６０コマを全部静止画として表示してもよいし、候補部の先頭コマと終了コマとその他コマなどを静止画として一覧表示してもよい。これによって簡単にハイライト部分がどこからどこまでかを確認することが出来る。その時は、時間推移が実感できないので、ハイライト動画の再生時間などを同時に表示するようにしてもよい。
【００１７】
ハイライト部分の候補（以下、ハイライト候補部という）の特定は、撮影時及び再生時のいずれにおいても可能である。以下の説明では、撮影時にハイライト候補部を特定する例を示しているが、再生時でも撮影時と同様にハイライト候補部の特定は可能である。なお、後述するように、本実施の形態においては、複数のハイライト候補部のうちの採用したハイライト候補部を結合して記録することもできるようになっており、ハイライト候補部は記録候補部とも言える。
【００１８】
図１において、撮像装置１０は、例えばデジタルカメラ等によって構成することができる。撮像装置１０には制御部１１が設けられている。制御部１１は、ＣＰＵ等を用いたプロセッサによって構成されて、図示しないメモリに記憶されたプログラムに従って動作して各部を制御するものであってもよいし、ハードウェアの電子回路で機能の一部又は全部を実現するものであってもよい。
【００１９】
撮像装置１０は、ＣＣＤやＣＭＯＳセンサ等の撮像素子２３を備えた撮像部２１を有している。画像取得部としての撮像部２１は、光学系２２を介して入射した光学像を撮像素子２３によって光電変換することで、撮像信号（撮像画像）を取得する。なお、撮像素子２３としては、像面位相差法においてデフォーカス量を求めるためのフォーカス制御用の画素を有するものであってもよい。
【００２０】
光学系２２は、ズームやフォーカシングのための図示しないレンズ等を備えている。光学系２２は、これらのレンズを駆動する図示しないズーム（変倍）機構、ピント及び絞り機構を備えており、それぞれ変倍制御部２４、ピント制御部２５及び絞り制御部２６によって駆動制御されるようになっている。なお、光学系２２のレンズとしては、撮像部２１に取り付けられた固定のレンズであってもよく、また、交換式のレンズであってもよい。
【００２１】
制御部１１は、変倍制御部２４、絞り制御部２６及びピント制御部２５を制御して、光学系２２のズーム、絞り及びピントを調節することができるようになっている。撮像部２１は、制御部１１に制御されて撮像を行い、撮像画像（動画像及び静止画像）の撮像信号を制御部１１に出力する。また、撮像装置１０にはマイクロホン２７が設けられている。マイクロホン２７は、撮像装置１０の周囲の音声を収音して、音声信号を制御部１１に供給するようになっている。
【００２２】
撮像装置１０には操作部３５が設けられている。操作部３５は、図示しないレリーズボタン、ファンクションボタン、撮影モード設定、パラメータ操作等の各種スイッチ、ダイヤル、リング部材等を含み、ユーザ操作に基づく操作信号を制御部１１に出力する。制御部１１は、操作部３５からの操作信号に基づいて、撮像部２１を含む各部を制御するようになっている。
【００２３】
また、後述する表示部３１の表示画面上には、タッチパネル３２が設けられている。タッチパネル３２は、ユーザが指で指し示した表示画面上の位置に応じた操作信号を発生することができる。この操作信号は、制御部１１に供給される。これにより、制御部１１は、ユーザがタッチした表示画面上の位置やユーザが表示画面上を指でスライドさせるスライド操作を検出することができ、ユーザ操作に対応した処理を実行することができるようになっている。
【００２４】
制御部１１は、撮像部２１に撮像素子の駆動信号を出力すると共に、撮像部２１からの撮像画像（動画像及び静止画像）を取込む。制御部１１の画像処理部１２は、取込んだ撮像画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。なお、制御部１１は、マイクロホン２７からの音声信号に対しても所定の音声信号処理を行う。
【００２５】
制御部１１には記録再生制御部１４が設けられている。記録再生制御部１４は、信号処理後の撮像画像及び音声を圧縮処理し、圧縮後の画像及び音声を記録部３８に与えて記録させることができる。記録部３８は、所定の記録媒体によって構成されて、制御部１１から与えられた情報を記録すると共に、記録されている情報を制御部１１に出力することができる。記録部３８としては、例えばカードインターフェースを採用することができ、記録部３８はメモリカード等の記録媒体に画像情報及び音声情報等を記録可能である。また、記録再生制御部１４は、記録部３８に記録されている情報を読み出して利用させることができる。即ち、記録再生制御部１４は、記録部３８に記録されている動画データを再生して、再生動画を出力することができる。
【００２６】
また、制御部１１には、表示制御部１３が設けられている。表示制御部１３は、撮像部２１からの撮像画像や記録再生制御部１４からの再生画像が与えられて、これらの画像表示を表示部３１に対して行うことができる。また、表示制御部１３は、撮像装置１０の操作を行うためのメニュー表示等を表示部３１に表示させることもできるようになっている。表示部３１は、例えば撮像装置１０の筐体背面に設けられており、ＬＣＤ（液晶表示装置）等の表示画面を有している。
【００２７】
撮像装置１０には通信部３７が設けられており、制御部１１には、通信制御部１５が設けられている。通信部３７は、通信制御部１５に制御されて、図示しない外部機器との間で情報を送受することができるようになっている。通信部３７は、例えば、ブルートゥース（登録商標）等の近距離無線による通信及び例えば、Ｗｉ−Ｆｉ（登録商標）等の無線ＬＡＮによる通信が可能である。なお、通信部３７は、ブルートゥース（登録商標）やＷｉ−Ｆｉ（登録商標）に限らず、各種通信方式での通信を採用することが可能である。通信制御部１５は、通信部３７を介して、撮像部２１によって取得された動画データを外部に送信することができる。
【００２８】
また、撮像装置１０は時計部３６を有している。時計部３６は、時刻情報を発生して制御部１１に供給することができる。制御部１１は、この時刻情報を用いて、画像編集に際して、時間情報を管理することができる。
【００２９】
本実施の形態においては、制御部１１には編集制御部１６が設けられている。編集制御部１６は、撮像中において、タッチパネル３２や操作部３５のユーザ操作に基づいて、撮像画像におけるハイライト部分の開始位置を特定することができるようになっている。例えば、特定部としての編集制御部１６は、ユーザ操作が行われたタイミングをハイライト候補部の開始位置に設定し、候補期間分の長さの撮像画像をハイライト候補部として特定するようになっていてもよい。また、編集制御部１６は、ユーザ操作が行われたタイミングより所定期間前のタイミングをハイライト候補部の開始位置に設定し、候補期間分の長さの撮像画像をハイライト候補部として特定するようになっていてもよい。なお、録画中にユーザの声が含まれてもよい場合には、制御部１１に音声認識処理を実行させ、マイクロホン２７によって取得した音声の認識結果に基づいてハイライト候補部の開始位置を特定するようになっていてもよい。
【００３０】
また、本実施の形態においては、画像処理部１２は、編集制御部１６におけるハイライト候補部の判定のための画像解析を行うことができるようになっている。例えば、画像処理部１２は、撮像画像のフレーム毎に、輝度分布、輝度微分値分布、動きベクトル分布等を求めて、例えば、動きの変化が大きい画像、適切な明るさの画像等を判定するための評価値を算出することができる。また、画像処理部１２は、公知の顔認識処理によって、撮像画像中の人物や動物の顔等を検出するための評価値を求めることができる。また、例えば、画像処理部１２は、スポーツの特定のシーンや、特定の背景等の各種画像の画像特徴と撮像画像の画像特徴との比較によって、様々なイベントにおけるハイライト部分の判定に用いる評価値を算出することができる。
【００３１】
編集制御部１６は、画像処理部１２が求めた評価値に基づいて、撮像画像中のハイライト候補部を特定することができるようになっている。なお、この場合にも、ハイライト候補部の長さは、所定の候補期間分とする。また、編集制御部１６は、画像処理部１２の評価値に基づくハイライト候補部の開始タイミングよりも所定時間前のタイミングをハイライト候補部の開始位置に設定し、候補期間分の長さの撮像画像をハイライト候補部として特定するようになっていてもよい。編集制御部１６は、ユーザ操作に基づいて候補期間を設定することができるようになっている。
【００３２】
編集制御部１６は、記録再生制御部１４を制御して、撮像画像中のハイライト候補部と候補期間以外の期間の画像とを区別できるように撮像画像を記録部３８に記録させるようになっている。例えば、編集制御部１６は、ハイライト候補部の開始位置を指定する、ユーザ操作又は画像処理部１２からの評価値のタイミングから候補期間に対応する期間を本録画期間とし、その他の期間を仮録画期間として、本録画期間の撮像画像を本録画記録データとして記録させ、仮録画期間の撮像画像を仮録画記録データとして記録させるようになっていてもよい。なお、編集制御部１６は、撮像画像の録画記録データに対応して、本録画期間と仮録画期間とを示すインデックスを設定して記録し、このインデックスを用いて仮録画期間と本録画期間とを区別できるようになっていてもよい。
【００３３】
選択部及び期間変更部としての編集制御部１６は、表示制御部１３を制御して、ハイライト候補部を表示部３１の表示画面上に、例えば繰り返し表示させながら、ハイライト候補部の選択、ハイライト候補部の開始及び終了位置の変更による候補期間の設定、候補期間が再設定された任意のハイライト候補部の結合等についてのＧＵＩ（グラフィカルユーザインタフェース）を提供するようになっている。なお、編集制御部１６は、ハイライト候補部に相当するコマのみを識別可能に表示することができればよく、ハイライト候補部以外のコマが表示されてもよく、また、ハイライト候補部を繰り返し表示させなくてもよい。
【００３４】
編集制御部１６は、ユーザ操作の結果に従って記録再生制御部１４を制御して、ハイライト候補部を結合した合成画像や、結合前の撮像画像等を記録部３８に記録することができるようになっている。
【００３５】
次に、このように構成された実施の形態の動作について図２から図６を参照して説明する。図２は第１の実施の形態の動作を説明するためのフローチャートである。また、図３はハイライト記録処理の流れを示す説明図である。図４及び図５はハイライト編集における画面表示の表示例を示す説明図である。また、図６はハイライト編集処理の処理の流れを示すフローチャートである。
【００３６】
いま、被写体として猫等のペットを撮影する例について説明する。図３は横軸に時間をとり、猫の状態と記録データとの関係を示している。図３のタイミングＴ１，Ｔ３では、猫が顔を向こう（撮像装置１０の反対側）に向けており、タイミングＴ２では猫が顔をこちら（撮像装置１０側）に向けており、タイミングＴ４では猫が顔をこちらに向けて尻尾を振っていることを示している。
【００３７】
ユーザは、顔をこちらに向けている状態の猫を動画撮影することを希望しているものとする。しかしながら、このような状態のみを動画撮影しようと考えてユーザが撮影待機していても、猫の未来の状態は予測できず、偶然を待って撮影を開始したとしても、撮影タイミングを逸してしまうことがある。そこで、本実施の形態においては、猫が振り向いていないシーンを含めて、撮影を開始する。
【００３８】
撮像装置１０の制御部１１は、ステップＳ１において撮影開始操作が行われたか否かを判定する撮影待機状態である。例えば、図３のタイミングＴ１において撮影開始操作が行われるものとする。編集制御部１６は、撮影開始操作が行われたものと判定すると、判撮像画像の仮録画を開始する（ステップＳ２）。
【００３９】
即ち、撮像部２１は、向こうを向いている猫の動画像の撮像を開始し、撮像画像を制御部１１に出力する。画像処理部１２は、入力された撮像画像に所定の信号処理を施す。記録再生制御部１４は、信号処理後の撮像画像を仮録画記録データとして、記録部３８に順次記録する（ステップＳ３）。次に、編集制御部１６は、ステップＳ４において録画終了操作が行われたか否かを判定する。
【００４０】
録画終了操作が行われていない場合には、編集制御部１６は、仮録画中において、本録画を開始するか否かを判定する（ステップＳ５）。例えば、編集制御部１６は、ユーザによりハイライト候補部の開始を指定する操作があった場合には、本録画を開始する。いま、ユーザは、タイミングＴ２において猫が顔をこちらに向けると、操作部３５やタッチパネル３２を操作して、本録画の開始を指示するものとする。そうすると、編集制御部１６は、記録再生制御部１４を制御して、仮録画を終了（ステップＳ６）させると共に、本録画を開始させる（ステップＳ７）。
【００４１】
本録画は、本録画の開始から候補期間に対応する期間が経過するまで行われる。編集制御部１６は、この期間が経過すると、記録再生制御部１４を制御して、本録画を終了し（ステップＳ９）、処理をステップＳ２に戻して仮録画を再開する。以後、ステップＳ２〜Ｓ９の処理が繰り返されて、仮録画及び本録画が行われる。図３の例では、タイミングＴ４において、猫がこちらを向いて尻尾を振っていることを認識したユーザの操作によって、タイミングＴ４において、再び仮録画から本録画に移行することを示している。
【００４２】
編集制御部１６は、ステップＳ４において、録画の終了操作が行われたことを判定すると、仮録画を終了してハイライト編集処理に移行する。なお、本録画中に終了操作が行われた場合には、本録画の終了後に録画処理を終了してハイライト編集処理に移行する。図３の例は、この場合の例を示している。
【００４３】
このように、本実施の形態においては、ユーザの録画開始操作に従って仮録画が開始され、ユーザの指定したタイミングにおいて、本録画が候補期間に対応する期間だけ行われる。
【００４４】
図３の例では、編集制御部１６は、本録画の期間と本録画直前の仮録画の所定の期間（ｎ秒）を候補期間に設定して、この候補期間の仮録画記録データ及び本録画記録データをハイライト候補部の録画記録データとする。このように、ハイライト候補部に仮録画の最後の所定期間を含めることで、ユーザがハイライト候補部と認識したタイミングから所定期間遅延して本録画が開始された場合でも、認識したハイライト候補部の先頭部分がハイライト候補部に含まれることを可能にする。なお、編集制御部１６は、本録画期間のみを候補期間に設定して、本録画記録データをハイライト候補部の記録データとしてもよい。
【００４５】
次に、図４から図６を参照してハイライト編集処理について説明する。録画終了操作が行われると、編集制御部１６は、ハイライト編集処理に移行し、表示制御部１３を制御して、プレビュー画面表示処理を実行する。
【００４６】
図４はこのプレビュー表示画面を示している。表示部３１の表示画面３１ａの略中央には、プレビュー表示部４１が設けられる。表示画面３１ａの下端には、タイムラインバー４２が設けられる。タイムラインバー４２は、撮像画像の時間軸を示しており、タイムラインバー４２の左端が撮像画像の先頭位置に対応し、右端が撮像画像の終了位置に対応する。タイムラインバー４２上のマーク４３ａ，４３ｂは、ハイライト候補部を示しており、斜線によって現在選択されているハイライト候補部を示している。なお、斜線は、実際には、他と異なる着色や模様や明るさ等を示すものである。図４の例では、１つの撮像画像中の３箇所にハイライト候補部が設定され、２つ目のマーク４３ｂによって示されるハイライト候補部がプレビュー表示部４１に表示されている（図示省略）ことを示している。
【００４７】
なお、編集制御部１６は、ユーザがマーク４３ａ，４３ｂ上をタッチすることによって、タッチされたマーク４３ａ，４３ｂに対応するハイライト候補部を選択してプレビュー表示部４１に表示させることができる。また、編集制御部１６は、プレビュー表示部４１において、タッチパネル３２上を例えば左右にスライド操作することによって、プレビュー表示部４１に表示させるハイライト候補部を切換えるようになっていてもよい。
【００４８】
ハイライト編集処理においては、編集制御部１６は、先ず図６のステップＳ１１において先頭のハイライト候補部を選択し、選択したハイライト候補部をプレビュー表示部４１上にプレビュー表示させる（ステップＳ１２）。なお、このプレビュー表示４１では、ハイライト候補部に相当するコマのみを識別可能に表示することができればよい。従って、ハイライト候補部に相当するコマのみを表示してもよく、ハイライト候補部に相当するコマとそれ以外のコマとを区別可能に表示してよい。また、ハイライト候補部を繰り返し表示させてもさせなくてもよい。
【００４９】
編集制御部１６は、表示制御部１３により、ハイライト候補部の候補期間の変更処理のためのＧＵＩを提供する。図４の例では、表示制御部１３は、表示画面３１ａの右端に、採用ボタン４４ａ、不採用ボタン４４ｂ、開始ボタン４５ａ、終了ボタン４５ｂ、時間を戻すマイナスボタン４６ａ、時間を進めるプラスボタン４６ｂ及び終了ボタン４７を表示する。
【００５０】
編集制御部１６は、ステップＳ１３において、ユーザによる候補期間の調整が行われたか否かを判定する。編集制御部１６は、調整操作が行われた場合には、ステップＳ１４においてハイライト開始位置を前後に移動させる操作が行われた否かを判定し、ステップＳ１５においてハイライト終了位置を前後に移動させる操作が行われた否かを判定する。
【００５１】
編集制御部１６は、ユーザが、開始ボタン４５ａを操作した後、マイナスボタン４６ａ又はプラスボタン４６ｂを操作することで、ステップＳ１４からステップＳ１６に処理を移行して、プレビュー表示部４１に表示されているハイライト候補部の開始位置を前の時間にずらすか又は後の時間にずらすことができる。また、同様に、編集制御部１６は、ユーザが、終了ボタン４５ｂを操作した後、マイナスボタン４６ａ又はプラスボタン４６ｂを操作することで、ステップＳ１５からステップＳ１７に処理を移行して、プレビュー表示部４１に表示されているハイライト候補部の終了位置を前の時間にずらすか又は後の時間にずらすことができる。
【００５２】
編集制御部１６は、ステップＳ１６，Ｓ１７から処理をステップＳ１２に戻して、プレビュー表示を継続する。こうして、ユーザは、ハイライト候補部のプレビュー表示を確認しながら、各ハイライト候補部について、候補期間を変更することが可能である。なお、ユーザによる候補期間の変更操作はプレビュー表示に反映される。
【００５３】
編集制御部１６は、ステップＳ１３において調整操作が行われない場合には、処理をステップＳ２１に移行して、候補期間調整後のハイライト候補部を採用するか否かを判定する。編集制御部１６は、ユーザが採用ボタン４４ａを操作した場合には、選択されてプレビュー表示されているハイライト候補部を採用して保存候補として選択し（ステップＳ２２）、ユーザが不採用ボタン４４ｂを操作した場合には、選択されてプレビュー表示されているハイライト候補部を不採用として保存候補から解除する（ステップＳ２３）。
【００５４】
編集制御部１６は、次のステップＳ２４において、他のハイライト候補部の選択操作があったか、終了ボタン４７の操作があったか否かを判定する。編集制御部１６は、他のハイライト候補部の選択操作があった場合には、処理をステップＳ１２に戻して、選択されたハイライト候補部をプレビュー表示し、終了ボタン４７の操作があった場合には、ステップＳ３１に移行して、保存候補の動画情報のリストアップ表示を行って、ハイライト記録処理に進む。
【００５５】
ハイライト候補部の候補期間は、比較的短く、且つユーザに確実に確認できる時間を考慮して設定されており、ユーザは、短時間に特定されたハイライト候補部を確認することができる。更に、全体としては、長時間の録画が行われていたとしても、ハイライト候補部の確認は比較的短い時間で行うことができると共に、候補期間の変更及びハイライト候補部の採用・不採用の操作も容易であることから、ユーザは、極めて簡単に、変化に富んだ面白味のある動画像を得るためのハイライト候補部を確定することができる。
【００５６】
図５はステップＳ３１において表示されるリストアップ表示を示している。表示部３１の表示画面３１ａの略中央には、複数のプレビュー表示部５１ａ，５１ｂが設けられる。表示画面３１ａの下端には、タイムラインバー５２が設けられる。タイムラインバー５２は、撮像画像の時間軸を示しており、タイムラインバー５２の左端が撮像画像の先頭位置に対応し、右端が撮像画像の終了位置に対応する。タイムラインバー５２上のマーク５３ａ，５３ｂ，５４は、撮像時に設定されたハイライト候補部を示しており、斜線によってステップＳ２１において採用されたハイライト候補部を示している。なお、斜線は、実際には、他と異なる着色や模様や明るさ等を示すものである。
【００５７】
図５の例では、３箇所のハイライト候補部のうちマーク５３ａ，５３ｂにて示す２つのハイライト候補部が採用され、これらのハイライト候補部がそれぞれプレビュー表示部５１ａ，５１ｂに表示されている（図示省略）ことを示している。なお、図５では、２つのプレビュー表示部５１ａ，５１ｂのみが表示されている例を示しているが、編集制御部１６は、採用された全てのハイライト候補部をプレビュー表示するようになっている。これにより、ユーザは、採用したハイライト候補部を一望することができ、編集後に得られる動画像を容易に予測することができる。
【００５８】
また、編集制御部１６は、表示制御部１３により、表示画面３１ａの右端に、結合記録ボタン５５、個別記録ボタン５６、元動画維持ボタン５７及び終了ボタン５８を表示する。編集制御部１６は、ハイライト記録処理において、ステップＳ３２において、結合記録ボタン５５が操作されて保存候補を結合して記録することが指定された否かを判定し、ステップＳ３３において、個別記録ボタン５６が操作されて保存候補を個々に記録することが指定された否かを判定し、ステップＳ３４において、元動画維持ボタン５７が操作されて仮記録及び本記録された一連の動画を記録することが指定された否かを判定する。
【００５９】
編集制御部１６は、結合記録ボタン５５が操作された場合には、ステップＳ３２からステップＳ３５に移行して保存候補を結合して記録を行うように記録再生制御部１４を制御する。また、編集制御部１６は、個別記録ボタン５６が操作された場合には、ステップＳ３３からステップＳ３６に移行して保存候補を個別に記録するように記録再生制御部１４を制御する。また、編集制御部１６は、元動画維持ボタン５７が操作された場合には、ステップＳ３４からステップＳ３７に移行して、仮記録及び本記録された一連の動画を記録するように、記録再生制御部１４を制御する。
【００６０】
編集制御部１６は、ステップＳ３２〜Ｓ３４において、ボタン５５〜５７の操作が行われていないと判定した場合には、次のステップＳ３８において終了ボタン５８が操作されたか否かを判定する。終了ボタン５８が操作された場合には、処理を終了し、操作されていない場合には、処理をステップＳ３２に戻して、ボタン５５〜５８の操作の判定待ちとなる。こうして、ユーザが採用するハイライト候補部は、候補期間が必要に応じて調整された後、結合されて記録されたり、個別に記録されたりする。これにより、ユーザは、変化に富んだ面白味のある動画を簡単に作成することができる。
【００６１】
このように、本実施の形態においては、撮影時において、比較的短い候補期間のハイライト候補部を設定し、ハイライト候補部を繰り返し再生しながらユーザの候補期間の変更操作及び合成編集操作を受け付けることにより、簡単な操作によって、ユーザが希望する変化に富んだ面白味のある動画を生成することができる。
【００６２】
（第２の実施の形態）
図７は本発明の第２の実施の形態を示すブロック図である。図７において図１と同一の構成要素には同一符号を付して説明を省略する。本実施の形態は、画像記録制御装置を、撮像装置及び携帯端末により構成する例を示している。
【００６３】
本実施の形態は、第１の実施の形態におけるハイライト候補部の特定処理、ハイライト編集処理及びハイライト記録処理の一部又は全部の処理を携帯端末７０において行うものである。これらの処理の全部を情報端末装置である携帯端末７０において実現する場合には、撮像装置６０としては、最低限被写体を撮像し、撮像画像を外部に伝送する機能さえ有していればよく、第１の実施の形態における撮像装置１０を採用してもよい。即ち、図１の編集制御部１６は、ハイライト候補部の特定処理、ハイライト編集処理及びハイライト記録処理の全ての処理の制御を行ったが、本実施の形態においては、編集制御部１６は、これらの処理のうち一部の処理のみを行ってもよく、これらの処理を全く行わなくてもよい。
【００６４】
図７の例では、撮像装置６０は、通信部３７に代えて通信部３７ａ，３７ｂを設けた点が撮像装置１０と異なる。通信部３７ａ，３７ｂは、通信制御部１５に制御されて、外部機器との間で情報を送受することができるようになっている。通信部３７ａは、例えば、Ｗｉ−Ｆｉ（登録商標）等の無線ＬＡＮによる通信が可能であり、通信部３７ｂは、例えば、ブルートゥース（登録商標）等の近距離無線による通信が可能である。なお、通信部３７ａ，３７ｂは、ブルートゥース（登録商標）やＷｉ−Ｆｉ（登録商標）に限らず、各種通信方式での通信を採用することが可能である。通信制御部１５は、通信部３７ａ，３７ｂを介して、動画データを送信することができる。
【００６５】
一方、携帯端末７０は、例えばスマートフォン等によって構成することができる。携帯端末７０には制御部７１が設けられている。制御部７１は、ＣＰＵ等を用いたプロセッサによって構成されて、図示しないメモリに記憶されたプログラムに従って動作して各部を制御するものであってもよいし、ハードウェアの電子回路で機能の一部又は全部を実現するものであってもよい。
【００６６】
携帯端末７０には、通信部８１ａ，８１ｂ，８２が設けられており、制御部７１には通信部８１ａ，８１ｂ，８２を制御する通信制御部７２が設けられている。通信部８１ａは、例えば、Ｗｉ−Ｆｉ（登録商標）等の無線ＬＡＮによる通信が可能であり、通信部８１ｂは、例えば、ブルートゥース（登録商標）等の近距離無線による通信が可能である。また、通信部８２は、公衆電話回線を利用した通信が可能である。これにより、撮像装置６０と携帯端末７０とは、通信部３７ａ，８１ａを介して通信可能であると共に、通信部３７ｂ，８１ｂを介して通信可能である。通信部８１ａ，８１ｂによって撮像装置６０からの画像を受信することができ、通信部８１ａ，８１ｂは、画像取得部として機能する。
【００６７】
携帯端末７０は、表示部９１、タッチパネル９２、記録部９３及び操作部９４を備えている。これらの表示部９１、タッチパネル９２、記録部９３及び操作部９４の構成は、それぞれ撮像装置６０の表示部３１、タッチパネル３２、記録部３８及び操作部３５と同様である。また、制御部７１には、画像処理を行う画像処理部７３、表示部９１の表示を制御する表示制御部７４及び記録部９４の記録再生を制御する記録再生制御部７５が設けられいてる。これらの画像処理部７３、表示制御部７４及び記録再生制御部７５の構成は、それぞれ撮像装置６０の画像処理部１２、表示制御部１３及び記録再生制御部１４と同様である。
【００６８】
制御部７１には編集制御部７６が設けられている。編集制御部７６は、編集制御部１６と同様の構成であり、ハイライト候補部の特定処理、ハイライト編集処理及びハイライト記録処理に関して、編集制御部１６の機能を補うようになっている。編集制御部７６は、ハイライト候補部の特定処理、ハイライト編集処理及びハイライト記録処理について、編集制御部１６が行う処理以外の処理のみを行うことができればよく、例えば、編集制御部１６がハイライト候補部の特定処理のみを行う場合には、編集制御部７６は、ハイライト編集処理及びハイライト記録処理を行うようになっていればよい。
【００６９】
次に、このように構成された実施の形態の動作について図８から図９及び図１０Ａから図１０Ｅを参照して説明する。図８は撮像装置６０の動作を示すフローチャートであり、図９は携帯端末７０の動作を示すフローチャートである。図１０Ａ〜図１０Ｅは第２の実施の形態の動作を説明するための説明図である。
【００７０】
本実施の形態は、撮像装置６０により撮影した動画像に対して、撮像装置６０及び携帯端末７０によって、ハイライト候補部の特定処理、ハイライト編集処理及びハイライト記録処理を行うものである。例えば、撮像装置６０によってハイライト候補部の特定処理のみを行い、携帯端末７０によってハイライト編集処理及びハイライト記録処理を行う例について説明する。
【００７１】
図１０Ａは結婚式において動画撮影をする様子を示している。図１０Ａに示すように、撮像装置６０の各部を収納した筐体６０ａの背面には表示部３１の表示画面３１ａが設けられている。撮影者であるユーザ１００は、例えば、筐体６０ａを右手１０１で把持して、表示部３１の表示画面３１ａを見ながら被写体を視野範囲に捉えた状態で撮影を行う。
【００７２】
撮像装置６０の制御部１１は、図８のステップＳ４１において、撮影モードが設定されているか否かを判定する。撮影モードが設定されている場合には、制御部４１は次のステップＳ４２において、スルー画の取得を開始する。即ち、制御部１１は、撮影者の操作部３５の操作に基づいて変倍制御部２４、ピント制御部２５及び絞り制御部２６を制御して、ズーム、ピント及び絞りを調整する。撮像素子２３の受光面には光学系２２を介して被写体光学像が入射され、撮像部２１は撮像画像を取得する。
【００７３】
この撮像画像は、制御部１１によって読み出され、画像処理部１２によって画像処理された後、表示部３１に供給される。こうして、表示部３１の表示画面３１ａ上に、スルー画が表示される。なお、図１０Ａでは、表示画面３１ａ上にはスルー画が表示されていることを示している。ユーザ１００が撮影操作を行うと、記録再生制御部１４は、ステップＳ４２において撮影を開始し、画像処理部１２による信号処理後の撮像画像を記録部３８に与えて仮記録を開始する。
【００７４】
図１０Ｂは仮記録される動画像を示している。図１０Ｂでは撮影によって取得された動画像のうちの一部の区間のコマＫ１〜Ｋ５を示している。コマＫ１〜Ｋ５は、結婚式におけるキャンドルサービスの撮像画像を示しており、コマＫ４，Ｋ５は、ろうそくへの着火タイミングにおけるコマを示している。
【００７５】
いま、ユーザ１００がろうそくへの着火タイミングにおいてハイライト候補部を設定したいと考えるものとする。この場合には、ユーザ１００は、着火タイミングにおいて操作部３５を操作して、ハイライト候補部の開始位置を指定すればよい。例えば、操作部３５である筐体６０ａの背面に設けたボタン１０２を親指１０１Ｔによって押すことによって、編集制御部１６が、ハイライト候補部の開始位置を特定するように設定することも可能である。この場合には、ユーザ１００は、撮影途中において、親指１０１Ｔでボタン１０２を押すという極めて簡単な操作によって、ハイライト候補部の開始位置を特定することができ、構図やピント合わせ等の撮影操作に比較的集中して動画撮影を行うことが可能である。
【００７６】
編集制御部１６は、ステップＳ４３において、ユーザ１００の指定操作があったことを判定すると、当該指定操作のタイミングで識別信号を、仮記録している動画像に関連付けて仮記録する（ステップＳ４４）。なお、編集制御部１６は、画像処理部１２の画像解析結果に基づいて、自動的にハイライト候補部の開始位置を特定するようになっていてもよい（ステップＳ４３）。例えば、事前にキャンドルサービスの着火時における画像特徴の情報を記録部３８に記憶させておくことで、編集制御部１６は、着火タイミングを検出可能であり、このタイミングでハイライト候補部の開始位置を特定することができる。
【００７７】
制御部１１は、ステップＳ４５において、撮影終了操作があったか否かを判定する。撮影終了操作がない場合には、制御部１１は、処理をステップＳ４１に戻して、ステップＳ４１〜Ｓ４５を繰り返す。撮影終了操作が行われると、制御部１１は、ステップＳ４６において撮影終了処理を行い、撮影確認のためのサムネイル表示を行った後（ステップＳ４７）、仮記録している動画像及び識別信号を圧縮処理して記録し、ファイル化して処理をステップＳ４１に戻す。
【００７８】
なお、制御部１１は、ステップＳ４１において撮影モードが設定されていないと判定した場合には、ステップＳ４９において、通信設定が指示されているか否かを判定する。制御部１１は、通信設定が指示されている場合には、ステップＳ５０において携帯端末７０との間の通信に必要な通信設定を行って処理をステップＳ５１に移行し、通信設定が指示されていない場合には通信設定を行うことなく処理をステップＳ５１に移行する。
【００７９】
制御部１１は、ステップＳ５１において再生モードが指定されているか否かを判定する。再生モードが指定されている場合には、制御部１１は、次のステップＳ５２において、指定されたファイルの再生を行う。即ち、記録再生制御部１４は、記録部３８に記録されている画像を読出して再生し、記録再生制御部１４は、再生画像を表示部３１に与えて表示する。なお、第１の実施の形態と同様に、ハイライト候補部の特定は、再生モードにおいても同様に行うことが可能である。例えば、ステップＳ５２の再生時に、ステップＳ４３，Ｓ４４と同様の処理によってハイライト候補部の特定を行ってもよい。
【００８０】
また、再生画像を外部機器に与えて、外部機器において再生画像の表示を行うことも可能である。制御部１１は、ステップＳ５２の次のステップＳ５３において外部送信が指定されているか否かを判定する。外部送信が指定されている場合には、制御部１１は、指定されたファイル又はコマを送信する（ステップＳ５４）。制御部１１は、外部送信が指定されていない場合、又はステップＳ５４における送信が終了すると、ステップＳ５５において再生終了が指示されたか否かを判定する。制御部１１は、再生終了が指示されていない場合には、処理をステップＳ５３に戻してステップＳ５３〜Ｓ５５を繰り返し、再生終了が指示された場合には、処理をステップＳ５１に戻す。
【００８１】
制御部１１は、ステップＳ５１において、再生モードが指定されていないと判定した場合には処理をステップＳ５６に移行して、通信要求の有無を判定する。通信要求が発生していない場合には、制御部１１は、処理をステップＳ５６からステップＳ４１に戻す。通信要求が発生すると、制御部１１は、ステップＳ５６からステップＳ５７に処理を移行してサムネイル一覧を通信相手に送信する。記録部３８に記録されている動画像毎にサムネイルが生成されており、サムネイル一覧は記録されている各動画像を示す。
【００８２】
制御部１１は、選択信号を受信すると、選択されたサムネイルに対応する動画像のハイライト候補部を通信相手に送信する（ステップＳ５９）。制御部１１は、ステップＳ６０において通信が終了したか否かを判定する。制御部１１は、通信が終了していなければ、処理をステップＳ５８に戻し、通信が終了すると、処理をステップＳ５６に戻す。
【００８３】
なお、ステップＳ５９において送信するデータとしては、通信相手の携帯端末７０において候補期間の変更が可能なように、ハイライト候補部を含む前後の所定期間の画像データを含むものであってもよい。また、ステップＳ５９においては、先ず、特定されたハイライト候補部の画像データのみを送信し、携帯端末７０からの要求に従って、ハイライト候補部の前後の画像データを送信するようになっていてもよい。更に、ステップＳ５９においては、選択された動画像の全体を送信すると共に、ハイライト候補部を特定するための識別信号を、送信する動画像に関連付けて送信するようになっていてもよい。
【００８４】
結婚式等のイベントにおいては、動画撮影の直後にハイライト編集を行うことが困難な場合が多い。本実施の形態においては、例えば、イベント終了後において、携帯端末７０に必要な情報を転送することで、ハイライト編集を行うことができる。しかも、スマートフォン等の携帯端末７０は、イベントからの帰宅途中の電車内等において操作することができ、変化に富んだ動画の作成を簡単に行うことができ利便性が高い。
【００８５】
図１０Ｃはこのようなハイライト編集の様子を示している。撮像装置６０からハイライト候補部を含む画像データが転送される携帯端末７０のユーザ１１０は、左手１１１Ｌによって携帯端末７０の各部が収納された筐体７０ａを把持し、右手の指１１１Ｒによって表示部９１の表示画面９１ａ上に配設されたタッチパネル９２を操作する。
【００８６】
携帯端末７０の制御部７１は、図９のステップＳ６１において、モード表示を行う。制御部７１は、ステップＳ６２において動画編集が指定されているか否かを判定する。ユーザ１１０が動画編集を指示すると、制御部７１は、ステップＳ６２から処理をステップＳ６３に移行して、サムネイル一覧を取得して表示する。即ち、撮像装置６０の制御部１１は、ステップＳ５７においてサムネイル一覧を送信し、携帯端末７０の制御部７１は、取得したサムネイル一覧を表示部９１の表示画面９１ａ上に表示する。
【００８７】
ユーザ１１０が表示画面９１ａ上に表示されたサムネイル一覧から所定のサムネイルを選択する操作を行うと、制御部１１は、ステップＳ６４においてサムネイルが選択されたものと判定し、選択されたサムネイルを拡大表示する。図１０Ｃは、この場合の表示例を示しており、表示画面９１ａ上には、ハイライト編集モードを指示するためのボタン１１３と、選択された画像のプレビュー表示１１２ａとが表示されている。
【００８８】
制御部１１は、ステップＳ６４の次のステップＳ７１において、ハイライト編集が指示されたか否かを判定する。ユーザ１１０が指１１１Ｒでボタン１１３をタッチ操作すると、制御部１１は、ステップＳ６４から処理をステップＳ７１に移行して、選択されている動画像のハイライト候補部を繰り返し表示する。なお、制御部１１は、ステップＳ６４においてサムネイル選択が行われない場合又はステップＳ７０においてハイライト編集が指示されない場合には、処理をステップＳ６５に移行して、処理を戻す操作が行われたか否かを判定する。制御部１１は、処理を戻す操作が行われると、ステップＳ６１に処理を戻し、処理を戻す操作が行われない場合には、ステップＳ６４に処理を戻して、サムネイルの選択待機状態となる。
【００８９】
また、制御部１１は、ステップＳ６２において、動画編集が指示されていないと判定した場合には、処理をステップＳ６７に移行して、通信設定等が指定されているか否かを判定する。通信設定等が指定されている場合には、制御部１１は、ステップＳ６８において、通信設定等を行う。例えば、制御部１１は、ステップＳ６７において、画像受信が指定されたと判定した場合には、ステップＳ６８において画像受信を行う。制御部１１は、ステップＳ６７において通信設定等が指定されていないと判定した場合又はステップＳ６８の処理後に、他のモードに移行する。
【００９０】
図１０ＤはステップＳ７１におけるハイライト候補部の繰り返し表示における表示例を示している。編集制御部７６は、ステップＳ７１において表示制御部７４を制御して、図１０Ｄに示す表示を表示画面９１ａ上に表示させる。図１０Ｄの例では、表示画面９１ａの上方にプレビュー表示１１２ｂが表示され、プレビュー表示１１２ｂの左端に対応してボタン１１４ＳＢ，１１４ＳＦ及び表示１１５ａが表示され、プレビュー表示１１２ｂの右端に対応してボタン１１４ＥＢ，１１４ＥＦ及び表示１１５ｂが表示される。また、表示画面９１ａの下端には、決定ボタン１１６及び戻るボタン１１７も表示される。なお、本実施の形態においても、プレビュー表示１１２ｂは、ハイライト候補部に相当するコマのみを識別可能に表示することができればよい。従って、ハイライト候補部に相当するコマのみを表示してもよく、ハイライト候補部に相当するコマとそれ以外のコマとを区別可能に表示してよい。
【００９１】
編集制御部１６は、プレビュー表示１１２ｂにおいて、所定の候補期間のハイライト候補部を、例えば繰り返し表示させる。なお、候補期間については、撮像装置６０によって指定されるようになっていてもよく、また、編集制御部１６が予め決められた所定値に設定するようになっていてもよい。編集制御部１６は、ステップＳ７２においてＯＫ操作が行われたか否かを判定しており、ユーザ１１０による決定ボタン１１６の操作を検出すると、ＯＫ操作が行われたものと判定して、処理をステップＳ７３に移行して、選択されているハイライト候補部を記録部９３に記録する。
【００９２】
編集制御部１６は、ステップＳ７２においてＯＫ操作が行われていないと判定した場合には、次のステップＳ７４において、タイミングシフト操作が行われたか否かを判定する。ユーザ１１０が、ボタン１１４ＳＢ，１１４ＳＦ，１１４ＥＢ，１１４ＥＦのいずれかをタッチ操作すると、編集制御部１６は、処理をステップＳ７５に移行して、操作されたボタンに対応してハイライト候補部の候補期間を変更する。例えば、編集制御部１６は、ユーザ１１０がボタン１１４ＳＢをタッチ操作すると、ハイライト候補部の開始位置を前方にシフトさせ、ユーザ１１０がボタン１１４ＳＦをタッチ操作すると、ハイライト候補部の開始位置を後方にシフトさせる。また、編集制御部１６は、ユーザ１１０がボタン１１４ＥＢをタッチ操作すると、ハイライト候補部の終了位置を前方にシフトさせ、ユーザ１１０がボタン１１４ＥＦをタッチ操作すると、ハイライト候補部の終了位置を後方にシフトさせる。
【００９３】
編集制御部１６は、ステップＳ７５において候補期間が調整されたハイライト候補部をステップＳ７１において繰り返し表示させる。なお、表示１１５ａは、識別信号のタイミングを基準にして、ハイライト候補部の調整後の開始位置が３秒前であることを示し、表示１１５ｂは、識別信号のタイミングを基準にして、ハイライト候補部の調整後の終了位置が３秒後であることを示している。
【００９４】
図１０Ｅはこの調整によるハイライト候補部を示している。図１０Ｅの例は、図１０ＢのコマＫ４のタイミングに対応して識別信号が記録され、ステップＳ７５における候補期間の調整の結果、コマＫ４のタイミングの前後３秒ずつの計６秒間がハイライト候補部として設定されたことを示している。
【００９５】
編集制御部１６は、ステップＳ７４の次のステップＳ７６において、戻る操作が行われたか否かを判定している。編集制御部１６は、ユーザ１１０により戻るボタン１１７が操作されたものと判定すると、ハイライト候補部を記録することなく、処理をステップＳ６５に戻す。また、編集制御部１６は、ステップＳ７６において戻るボタン１１７が操作されていないと判定した場合には、処理をステップＳ７１に戻し、ハイライト候補部を繰り返し表示する。
【００９６】
こうして、ユーザ１１０は、ハイライト候補部の候補期間の調整を簡単に行うことができる。なお、この場合には、記録部９３には、候補期間調整後のハイライト候補部が記録される。編集制御部１６は、記録部９３に記録されている複数のハイライト候補部を結合することによって、簡単に、変化に富んだ面白味のある動画像を生成することができる。また、この場合において、編集制御部１６は、第１の実施形態と同様に、採用するハイライト候補部と不採用のハイライト候補部とをユーザ操作に応じて決定し、採用したハイライト候補部のみを結合した動画像を生成するようになっていてもよい。
【００９７】
このように本実施の形態においては、第１の実施の形態と同様の効果が得られると共に、撮像装置と携帯端末とに分散して処理を行っていることから、画面表示や入力操作の操作性に優れたスマートフォン等の携帯端末を利用した編集作業等が可能であり、利便性に優れている。例えば、据え置きの撮像部に対して、その設置場所に束縛されない自由な操作でのハイライト動画作成が可能となる。特に長時間撮像結果に変化がなく、変化が起こった時の変化の仕方を確認するような用途においては、自由度が高くないと利便性が低下する。
【００９８】
また、ハイライト候補部の特定処理、ハイライト編集処理及びハイライト記録処理や、記録等について、外部サーバのサービスを利用することも可能である。この場合には、これらの処理の一部を外部サーバに実行させることで、撮像装置や携帯端末等の処理を軽減して編集作業をスムーズにすると共に、ユーザの希望に添ったハイライト候補部の特定を高精度に実現することも可能である。
【００９９】
なお、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを採用する例を説明したが、動画の撮影が可能なものであれば、レンズ型カメラでも、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。また、内視鏡、顕微鏡のような産業用、医療用の光学機器でもよく、監視カメラや車載用カメラ、据え置き型のカメラ、例えば、テレビジョン受信機やパーソナルコンピュータ等に取り付けられているカメラであってもよい。
【０１００】
さらに、実施形態において、部（セクションやユニット）として記載した部分は、専用の回路や、複数の汎用の回路を組み合わせて構成してもよく、必要に応じて、予めプログラムされたソフトウェアに従って動作を行うマイクロプロセッサ及びＣＰＵ等のプロセッサ、あるいはシーケンサを組み合わせて構成されてもよい。また、その制御の一部又は全部を外部の装置が引き受けるような設計も可能で、この場合、有線や無線の通信回路が介在する。ここでは、単純化のため通信部を特記していないが、本願の特徴的な処理や補足的な処理をサーバやパソコン等の外部機器が行う実施形態も想定される。つまり、複数の機器が連携して、本発明の特徴を成立させる場合も、本願はカバーしている。この時の通信には、ブルートゥース（登録商標）やＷｉ−Ｆｉ（登録商標）、電話回線等が用いられる。また、この時の通信は、ＵＳＢ等で行われてもよい。専用の回路、汎用の回路や制御部を一体としてＡＳＩＣとして構成してもよい。
【０１０１】
本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【０１０２】
なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。
【０１０３】
また、ここで説明した技術のうち、主にフローチャートで説明した制御や機能は、多くがプログラムにより設定可能であり、そのプログラムをコンピュータが読み取り実行することで上述した制御や機能を実現することができる。そのプログラムは、コンピュータプログラム製品として、フレキシブルディスク、ＣＤ−ＲＯＭ等、不揮発性メモリ等の可搬媒体や、ハードディスク、揮発性メモリ等の記憶媒体に、その全体あるいは一部を記録又は記憶することができ、製品出荷時又は可搬媒体或いは通信回線を介して流通又は提供可能である。利用者は、通信ネットワークを介してそのプログラムをダウンロードしてコンピュータにインストールしたり、あるいは記録媒体からコンピュータにインストールしたりすることで、容易に本実施の形態の画像記録制御装置を実現することができる。
【符号の説明】
【０１０４】
１０…撮像装置、１１…制御部、１２…画像処理部、１３…表示制御部、１４…記録再生制御部、１５…通信制御部、１６…編集制御部、２１…撮像部、２２…光学系、２３…撮像素子、２４…変倍制御部、２５…ピント制御部、２６…絞り制御部、３１…表示部、３２…タッチパネル、３５…操作部、３６…時計部、３７…通信部、３８…記録部。
【図１】
2019114847.tif 000003
【図２】
2019114847.tif 000004
【図３】
2019114847.tif 000005
【図４】
2019114847.tif 000006
【図５】
2019114847.tif 000007
【図６】
2019114847.tif 000008
【図７】
2019114847.tif 000009
【図８】
2019114847.tif 000010
【図９】
2019114847.tif 000011
【図１０Ａ】
2019114847.tif 000012
【図１０Ｂ】
2019114847.tif 000013
【図１０Ｃ】
2019114847.tif 000014
【図１０Ｄ】
2019114847.tif 000015
【図１０Ｅ】
2019114847.tif 000016