(57)【特許請求の範囲】
【請求項１】
撮影した動画像の画像データを生成する画像データ生成部と、
センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成するセンサ信号生成部と、
前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録する記録部と
を備え、
前記センサ信号生成部は、
前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する
撮影装置。
【請求項２】
前記センサがジャイロセンサであり、前記撮影装置の動きを表す検知信号を出力する
請求項１に記載の撮影装置。
【請求項３】
前記センサが加速度センサであり、前記撮影装置の傾斜方向を表す検知信号を出力する
請求項１に記載の撮影装置。
【請求項４】
前記センサがイメージセンサであり、前記撮影装置のユーザの顔の認識結果を表す検知信号を出力する
請求項１に記載の撮影装置。
【請求項５】
前記センサ信号生成部は、
前記検知信号について、所定時間ごとの所定周波数範囲のパワースペクトルの面積値を算出して得られる信号を前記センサ信号として生成する
請求項１に記載の撮影装置。
【請求項６】
画像データ生成部が、撮影した動画像の画像データを生成し、
センサ信号生成部が、センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成し、
記録部が、前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録するステップ
を含み、
前記センサ信号生成部が、前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する
撮影方法。
【請求項７】
コンピュータを、
撮影した動画像の画像データを生成する画像データ生成部と、
センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成するセンサ信号生成部と、
前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録する記録部とを備え、
前記センサ信号生成部は、
前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する撮影装置として機能させる
プログラム。
【請求項８】
請求項７に記載のプログラムが記録されている記録媒体。
【請求項９】
記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出すデータ読み出し部と、
前記読み出された画像データを保持するデータ保持部と、
前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定するフレーム特定部と、
前記特定されたフレームを除外した一連の動画像の画像データを再構成する再構成部と
を備え、
前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである
画像再生装置。
【請求項１０】
前記センサデータは、
前記動画像を撮影した撮影装置のジャイロセンサにより出力される検知信号であって、前記撮影装置の動きを表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータである
請求項９に記載の画像再生装置。
【請求項１１】
前記センサデータは、
前記動画像を撮影した撮影装置の加速度センサにより出力される検知信号であって、前記撮影装置の傾斜方向を表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータである
請求項９に記載の画像再生装置。
【請求項１２】
前記センサデータは、
前記動画像を撮影した撮影装置のイメージセンサにより出力される検知信号であって、前記撮影装置のユーザの顔の認識結果を表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータである
請求項９に記載の画像再生装置。
【請求項１３】
データ読み出し部が、記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出し、
データ保持部が、前記読み出された画像データを保持し、
フレーム特定部が、前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定し、
再構成部が、前記特定されたフレームを除外した一連の動画像の画像データを再構成するステップ
を含み、
前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである
画像再生方法。
【請求項１４】
コンピュータを、
記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出すデータ読み出し部と、
前記読み出された画像データを保持するデータ保持部と、
前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定するフレーム特定部と、
前記特定されたフレームを除外した一連の動画像の画像データを再構成する再構成部とを備え、
前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである
画像再生装置として機能させる
プログラム。
【請求項１５】
請求項１４に記載のプログラムが記録されている記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、撮影装置および方法、画像再生装置および方法、プログラム、並びに記録媒体に関し、特に、記録された画像の再生の要否をより自由に決めることができるようにする撮影装置および方法、画像再生装置および方法、プログラム、並びに記録媒体に関する。
【背景技術】
【０００２】
従来より、カムコーダによる動画の記録は、ユーザの手元にある動画撮影ボタンによって制御される。
【０００３】
記録した動画の再生は、カムコーダまたはパーソナルコンピュータなどで行うことができる。この際、例えば、再生が不要なシーンがあった場合、そのまま連続的に視聴してしまうか、早送りボタンや早送りアイコンでユーザが能動的にスキップするようになされていた。
【０００４】
不要なシーンの例としては、所望の被写体の撮影が終了したにも係らず、ユーザがＲＥＣボタンを切り忘れたために継続して録画されてしまったシーンなどが考えられる。この他にも、意図しない大きな手振れが含まれているシーンや急激にカメラの向きが変更されたシーン、ユーザの歩行やカメラが受けた衝撃によるぶれの大きなシーンなどが考えられる。
【０００５】
これらの記録を防止するための方式として、ユーザの歩行の加速度を検出し、歩行をやめると録画開始を行う技術が提案されている（例えば、特許文献１参照）。
【０００６】
また、衝撃をうけるとその後一定時間画像を記録しないようにする技術も提案されている（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００９−２６７７９２号公報
【特許文献２】特開平６−２３７４６３公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、特許文献１または特許文献２の技術を採用したとしてもなお、次のような問題がある。
【０００９】
特許文献１や特許文献２の技術は、換言すれば、再生時における不要なシーンを撮影時に決めてしまい記録そのものを行わないような構成ともいえる。このような構成を採用した場合、ユーザが撮影したかったシーンがリジェクトされてしまう可能性があるという問題があった。
【００１０】
近年では、装置の省電力化や記録媒体の大容量化が図られており、データの記録に係るコストは年々低下しているともいえる。このような状況下では、不要なシーンを撮影時に決めて記録そのものを行わないようにした場合も、とりあえず記録しておいて、再生時に不要なシーンをカットした場合も、コスト負担はほとんど変わらないと考えられる。
【００１１】
また、再生が不要なシーンを特定する際の基準（例えば、どれだけぶれたらシーンをスキップするのか）は、撮影時のコンディションやユーザの許容値によって異なるが、それを撮影前に決めることは極めて困難である。
【００１２】
さらに、歩行時、衝撃印加時以外のシーンの自動的な排除に関しては、従来の手法では対応できないという問題があった。
【００１３】
本技術はこのような状況に鑑みて開示するものであり、記録された画像の再生の要否をより自由に決めることができるようにするものである。
【課題を解決するための手段】
【００１４】
本技術の第１の側面は、撮影した動画像の画像データを生成する画像データ生成部と、センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成するセンサ信号生成部と、前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録する記録部とを備え、前記センサ信号生成部は、前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する撮影装置である。
【００１５】
前記センサがジャイロセンサであり、前記撮影装置の動きを表す検知信号を出力するようにすることができる。
【００１６】
前記センサが加速度センサであり、前記撮影装置の傾斜方向を表す検知信号を出力するようにすることができる。
【００１７】
前記センサがイメージセンサであり、前記撮影装置のユーザの顔の認識結果を表す検知信号を出力するようにすることができる。
【００２１】
前記センサ信号生成部は、前記検知信号について、所定時間ごとの所定周波数範囲のパワースペクトルの面積値を算出して得られる信号を前記センサ信号として生成するようにすることができる。
【００２２】
本技術の第１の側面は、画像データ生成部が、撮影した動画像の画像データを生成し、センサ信号生成部が、センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成し、記録部が、前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録するステップを含み、前記センサ信号生成部が、前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する撮影方法である。
【００２３】
本技術の第１の側面は、コンピュータを、撮影した動画像の画像データを生成する画像データ生成部と、センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成するセンサ信号生成部と、前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録する記録部とを備え、前記センサ信号生成部は、前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する撮影装置として機能させるプログラムである。
【００２４】
本開示の第１の側面においては、撮影した動画像の画像データが生成され、センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号が生成され、前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータが同一の記録媒体に記録される。その際、前記センサの検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号が前記センサ信号として生成される。
【００２５】
本技術の第２の側面は、記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出すデータ読み出し部と、前記読み出された画像データを保持するデータ保持部と、前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定するフレーム特定部と、前記特定されたフレームを除外した一連の動画像の画像データを再構成する再構成部とを備え、前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである画像再生装置である。
【００２６】
前記センサデータは、前記動画像を撮影した撮影装置のジャイロセンサにより出力される検知信号であって、前記撮影装置の動きを表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータであるようにすることができる。
【００２７】
前記センサデータは、前記動画像を撮影した撮影装置の加速度センサにより出力される検知信号であって、前記撮影装置の傾斜方向を表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータであるようにすることができる。
【００２８】
前記センサデータは、前記動画像を撮影した撮影装置のイメージセンサにより出力される検知信号であって、前記撮影装置のユーザの顔の認識結果を表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータであるようにすることができる。
【００２９】
本技術の第２の側面は、データ読み出し部が、記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出し、データ保持部が、前記読み出された画像データを保持し、フレーム特定部が、前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定し、再構成部が、前記特定されたフレームを除外した一連の動画像の画像データを再構成するステップを含み、前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである画像再生方法である。
【００３０】
本技術の第２の側面は、コンピュータを、記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出すデータ読み出し部と、前記読み出された画像データを保持するデータ保持部と、前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定するフレーム特定部と、前記特定されたフレームを除外した一連の動画像の画像データを再構成する再構成部とを備え、前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである画像再生装置として機能させるプログラムである。
【００３１】
本技術の第２の側面においては、記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータが読み出され、前記読み出された画像データが保持され、前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームが特定され、前記特定されたフレームを除外した一連の動画像の画像データが再構成される。その際、前記センサデータは、前記動画像を撮影した撮影装置のセンサにより出力される検知信号を閾値判定により２値化して得られる信号、または、複数の閾値を用いた段階的判定により多値化して得られる信号に対して、さらに遅効処理またはローパスフィルタ処理を施して得られる信号をセンサ信号として生成して、デジタルデータ化したデータである。
【発明の効果】
【００３２】
本技術によれば、記録された画像の再生の要否をより自由に決めることができる。
【図面の簡単な説明】
【００３３】
【図１】本技術を適用した撮影装置の一実施の形態に係る構成例を示すブロック図である。
【図２】本技術を適用した再生装置の一実施の形態に係る構成例を示すブロック図である。
【図３】ジャイロセンサから出力される検知信号の波形の例を示したグラフである。
【図４】動き信号の例を示す図である。
【図５】動き信号の別の例を示す図である。
【図６】動き信号のさらに別の例を示す図である。
【図７】動き信号のさらに別の例を示す図である。
【図８】動き信号のさらに別の例を示す図である。
【図９】動き信号のさらに別の例を示す図である。
【図１０】動き信号のさらに別の例を示す図である。
【図１１】動き信号のさらに別の例を示す図である。
【図１２】画像データおよび動きデータの記録の方式の例を説明する図である。
【図１３】画像データおよび動きデータの記録の方式の別の例を説明する図である。
【図１４】画像データおよび動きデータの記録の方式のさらに別の例を説明する図である。
【図１５】記録処理の例を説明するフローチャートである。
【図１６】再生処理の例を説明するフローチャートである。
【図１７】シーンスキップ制御処理の例を説明するフローチャートである。
【図１８】撮影装置の外観の例を示す図である。
【図１９】パーソナルコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００３４】
以下、図面を参照して、ここで開示する技術の実施の形態について説明する。
【００３５】
図１は、本技術を適用した撮影装置の一実施の形態に係る構成例を示すブロック図である。この撮影装置１０は、例えば、カムコーダとして構成される。
【００３６】
同図に示される撮影装置１０は、入力部２１、レンズアクチュエータ２２、ジャイロセンサ２３、撮像部２４、手振れ補正演算部２５、動き量演算部２６、エンコーダ２７、記録部２８、および表示部２９を有する構成とされている。
【００３７】
入力部２１は、例えば、ユーザによる操作入力を受け付ける。例えば、ユーザにより撮影開始、撮影終了、ズームイン、ズームアウトなどの操作が入力される。
【００３８】
レンズアクチュエータ２２は、動画の撮影中に手振れなどの振動が加えられたときに、加えられた振動の分だけレンズを移動させることにより、その振動による影響を打ち消す機能（手振れ補正機能）を実現する。レンズアクチュエータ２２は、後述するジャイロセンサ２３から出力される検知信号に基づいて、撮影中に手振れなどの振動を検知するようになされている。
【００３９】
ジャイロセンサ２３は、２軸または３軸の角速度を検知して出力するようになされている。すなわち、ジャイロセンサ２３は、例えば、ピッチ方向、ヨー方向、ロール方向の回転を検知し、撮影装置１０のぶれを検出する。ジャイロセンサから出力される検知信号は、レンズアクチュエータ２２、および動き量演算部２６に出力される。
【００４０】
撮像部２４は、例えば、ＣＣＤセンサ、ＣＭＯＳセンサなどの光電変換素子を有するセンサなどにより構成され、撮影装置１０のレンズを介して入射する光に対応する信号を画像信号として出力するようになされている。
【００４１】
手振れ補正演算部２５は、ジャイロセンサ２３から供給される検知信号に基づいて、手振れの大きさ、向きなどを表す信号を生成し、レンズアクチュエータ２２に出力するようになされている。
【００４２】
動き量演算部２６は、ジャイロセンサ２３から供給される検知信号に基づいて、撮影装置１０の動き量を表す信号である動き信号を生成する。なお、動き信号の詳細については後述する。動き量演算部２６により生成された動き信号は、後述するエンコーダ２７の出力とともに記録部２８に出力される。この際、エンコーダ２７から出力される画像データを再生した場合の再生時刻に対応づけられて動き信号が出力されるようになされている。
【００４３】
エンコーダ２７は、撮像部２４から供給される画像信号を、ＭＰＥＧ方式など所定の符号化方式によりエンコードするようになされている。エンコーダ２７から出力されるエンコードされた画像データは、動き量演算部２６により生成された動き信号とともに記録部２８に出力される。
【００４４】
記録部２８は、画像データと動き信号をＨＤＤ、半導体メモリカードなどの記録媒体に記録するようになされている。この際、上述したように、画像データを再生した場合の再生時刻に対応づけて動き信号が記録されるようになされている。なお、動き信号は、例えば、記録される際に符号化されるなど、何等かの方式でデジタルデータ化されて、動きデータとして記録されるようになされている。
【００４５】
表示部２９は、例えば、ＬＣＤなどのディスプレイにより構成され、撮像部２４から出力される画像信号に基づいて、画像を表示するようになされている。
【００４６】
図２は、図１の撮影装置１０に対応する再生装置であって、本技術を適用した再生装置の一実施の形態に係る構成例を示すブロック図である。この再生装置５０は、例えば、ＨＤＤレコーダ、パーソナルコンピュータなどとして構成される。
【００４７】
同図に示される再生装置５０は、入力部６１、ドライブ６２、演算デコーダ６３、表示部６４、およびキャッシュメモリ６５を有する構成とされている。
【００４８】
入力部６１は、例えば、ユーザによる操作入力を受け付ける。例えば、ユーザにより再生開始、再生終了、シーンスキップに係る指令などの操作が入力される。
【００４９】
ドライブ６２には、撮影装置１０の記録部２８により画像データおよび動きデータが記録された記録媒体が装着される。ドライブ６２は、例えば、入力部６１を介して入力されるユーザの操作に基づいて、記録媒体から画像データおよび動きデータを読み出すようになされている。記録媒体から読み出された画像データおよび動きデータは、演算デコーダ６３に供給される。
【００５０】
演算デコーダ６３は、例えば、記録媒体から読み出された画像データおよび動きデータをデコードし、キャッシュメモリ６５を用いて所定の演算処理を施すなどして得られた画像信号を、表示部６４に出力するようになされている。
【００５１】
演算デコーダ６３は、例えば、動きデータをデコードして得られた動き信号に基づいて、動画の中でのカムコーダの動き（手振れ、衝撃、レンズの向きの大幅な変化など）を表す情報を取得し、その情報に基づいてシーンスキップを制御するようになされている。
【００５２】
例えば、演算デコーダ６３は、符号化された画像データをデコードして得られる画像データを、キャッシュメモリ６５に保持する。その一方で、演算デコーダ６３は、動画の中でのカムコーダの動きを表す情報を参照してスキップすべきフレームを特定し、その特定されたフレームを除外した一連の動画の画像データを再構成する。そして、演算デコーダ６３は、再構成された画像データに対応する画像信号を生成して表示部６４に出力する。この際、演算デコーダ６３は、例えば、入力部６１を介して入力されるユーザの操作に基づいて、どの程度の動きまたはどの区間の動きを有するフレームをスキップすべきかを判定する。
【００５３】
表示部６４は、例えば、ＬＣＤなどのディスプレイにより構成され、演算デコーダ６３から供給される画像信号に対応する画像を表示するようになされている。
【００５４】
次に、上述した動き信号について説明する。図３は、横軸を時間、縦軸を信号のレベルとし、ジャイロセンサ２３から出力される検知信号の波形の例を示したグラフである。なお、この例では、ジャイロセンサ２３のヨー方向の回転の検知信号の波形の例が示されている。
【００５５】
図３に示されるような、ジャイロセンサ２３から出力される検知信号をそのまま動き信号として用いるようにしてもよい。
【００５６】
図４は、動き信号の別の例を示す図である。同図は、横軸を時間、縦軸を信号のレベルとし、図３に示される信号を、閾値判定により２値化して得られる信号の波形の例を示したグラフである。この例では、例えば、レベルがＤＣセンター値から±100digit超えた場合、閾値を超えたものと判定し、閾値を超える検知信号が出力されている場合１を、それ以外の場合は０を出力するように、図３の信号を２値化している。
【００５７】
このように、ジャイロセンサ２３から出力される検知信号を２値化することで、例えば、動画の中でカムコーダの動きが大きい部分と動きが小さい部分を簡単に把握することができる。
【００５８】
図４に示されるような、ジャイロセンサ２３から出力される検知信号を閾値判定により２値化して得られる信号を、動き信号として用いるようにしてもよい。
【００５９】
図５は、動き信号のさらに別の例を示す図である。同図は、横軸を時間、縦軸を信号のレベルとし、図４に示される信号を遅効処理して得られる信号の波形の例を示したグラフである。ここで、遅効行処理は、例えば、図３の信号の０または１の反転後、所定時間は次の反転を許さないように加工する処理とされる。
【００６０】
例えば、図４に示されるような信号に基づいてシーンスキップの制御を行う場合、閾値をまたぐ度に、再生の要否を細かいサイクルで繰り返し判断する必要があるので再生時の負荷が大きい。図５に示されるように遅効処理することで、上述のような細かいサイクルでの繰り返しの判断が不要となる。
【００６１】
図５に示されるような、ジャイロセンサ２３から出力される検知信号を閾値判定により２値化し、さらに遅効処理して得られた信号を、動き信号として用いるようにしてもよい。
【００６２】
図６は、動き信号のさらに別の例を示す図である。同図は、横軸を時間、縦軸を信号のレベルとし、図３に示される信号を、２つの閾値を用いた段階的判定により３値化し、さらに遅効処理して得られる信号の波形の例を示したグラフである。
【００６３】
例えば、図６に示されるような信号に基づいてシーンスキップの制御を行う場合、このように複数の閾値を設けることで、再生時に、再生不要と判断される動きの大きさを複数の大きさから選択できるようになる。
【００６４】
図６に示されるような、ジャイロセンサ２３から出力される検知信号を複数の閾値を用いた段階的判定により多値化し、さらに遅効処理して得られた信号を、動き信号として用いるようにしてもよい。
【００６５】
図７は、動き信号のさらに別の例を示す図である。同図は、横軸を時間、縦軸を信号のレベルとし、図３に示される信号を、２つの閾値を用いた段階的判定により３値化して得られる信号に対してローパスフィルタ処理を施した信号の波形の例を示したグラフである。すなわち、図６の場合のように遅効処理を施す代わりに、ローパスフィルタ処理が施された信号とされる。
【００６６】
図７に示されるような、ジャイロセンサ２３から出力される検知信号を複数の閾値を用いた段階的判定により多値化し、さらにローパスフィルタ処理が施された信号を、動き信号として用いるようにしてもよい。
【００６７】
図８は、動き信号のさらに別の例を示す図である。この例の場合、ジャイロセンサから出力された検知信号について、所定時間ごとの所定周波数範囲のパワースペクトルの面積値を算出し、パワースペクトルの面積値を時間軸上にプロットして得られた波形の例を示している。すなわち、図８の横軸は時間とされ、縦軸はパワースペクトルの面積とされている。
【００６８】
図８に示されるような動き信号においては、例えば、周期的な動きや、瞬間的な強い動きなどの影響を排除することができる。すなわち、動画において手振れが発生しているのか否かがはっきりしない部分では、信号のレベルが高くならないため、はっきりした手振れや衝撃だけを把握することができる。このような信号が動き信号として用いられるようにしてもよい。
【００６９】
図９は、動き信号のさらに別の例を示す図である。この例の場合、横軸を時間、縦軸を信号のレベルとし、図８に示される信号を、閾値判定により２値化して得られる信号の波形の例を示したグラフが示されている。このような信号が動き信号として用いられるようにしてもよい。
【００７０】
図１０は、動き信号のさらに別の例を示す図である。この例の場合、横軸を時間、縦軸を信号のレベルとし、図９に示される信号を遅効処理して得られる信号の波形の例を示したグラフが示されている。このような信号が動き信号として用いられるようにしてもよい。
【００７１】
図１１は、動き信号のさらに別の例を示す図である。この例の場合、横軸を時間、縦軸を信号のレベルとし、図８に示される信号を、２つの閾値を用いた段階的判定により３値化して得られる信号に対してローパスフィルタ処理を施した信号の波形の例を示したグラフが示されている。このような信号が動き信号として用いられるようにしてもよい。
【００７２】
次に、画像データおよび動きデータの記録の方式について説明する。
【００７３】
図１２は、動き信号の波形を、画像データのタイムラインに同期させて記録する方式を説明する図である。同図に示される波形１１１は、例えば、図３、図８を参照して上述した場合と同様に動き信号の波形を表している。
【００７４】
記録部２８は、例えば、波形１１１をサンプリングして量子化することにより、画像データのタイムラインに同期させて記録する。なお、量子化されて得られた各値をタイムライン上の時刻を表すデータとともにファイル化するなどして記録することにより動きデータが、画像データとともに記録されることになる。
【００７５】
このようにすることで、例えば、再生装置５０の演算デコーダ６３で動きデータを再生することにより、図３、図８を参照して上述した場合と同様の動き信号の波形を再生することができる。この場合、例えば、画像の再生前に、ユーザが波形１１１をみて、スキップすべきシーンをタイムライン上で指定するなどの編集を行うことも可能となる。
【００７６】
図１３は、画像データおよび動きデータの記録の方式の別の例を説明する図である。同図は、例えば、図４乃至図７、図９乃至図１１に示されるように多値化（２値化を含む）された動き信号に基づいて動きの大きさをステータスとして抽出し、動画データのフレーム毎にステータスを記録する場合の例を示している。いまの場合、例えば、動き信号が３値化されているものとされ、動きの大きさを手振れや衝撃などの「強度」として表し、強度１乃至強度３のステータスが設定されている。
【００７７】
図１３に示されるように、タイムライン上に記載された０乃至３の数値により各フレームのステータスが表されている。このステータスは、例えば、動画データを構成するパケットのヘッダに格納するなどして記録することができる。
【００７８】
また、同図に示されるように、タイムライン上にフレームのステータスに応じて色（ここではハッチング）分けされたバーを表示するようにすれば、動画の中で手振れの多い（動きの大きい）区間や手振れの少ない区間を一目で認識することができる。
【００７９】
図１４は、画像データおよび動きデータの記録の方式の別の例を説明する図である。図１４は、例えば、図４乃至図７、図９乃至図１１に示されるように多値化（２値化を含む）された動き信号に基づいて動きの大きさの変化を抽出し、動画データのタイムラインに対応づけられたフラグとして記録する場合の例を示している。いまの場合、例えば、図１４の右下に示されるように、タイムスタンプと、動きの大きさの変化を表す情報である「状態」が対応づけられたデータ１２１をファイル化するなどして記録することにより動きデータが、画像データとともに記録されることになる。
【００８０】
図１４のデータ１２１によれば、タイムスタンプ「００：００」において動きの大きさは「０」であり、タイムスタンプ「０１：０５」において動きの大きさが「０」から「１」に変化したこと（「０→１」）が表されている。同様に、タイムスタンプ「０２：４０」において動きの大きさが「１」から「２」に変化したこと、タイムスタンプ「０３：００」において動きの大きさが「２」から「３」に変化したこと、タイムスタンプ「０４：１２」において動きの大きさが「３」から「２」に変化したこと、・・・が表されている。
【００８１】
例えば、動きの大きさの変化に基づいて、シーンスキップの開始点と終了点をフラグによって指定することにより、スキップすべきシーンを制御するようにしてもよい。このようにフラグ化された動きデータを記録することで、例えば、再生時に動きの変化点を把握しやすくなり、シーンスキップの開始点や終了点を簡単に識別することができる。また、例えば、フレーム毎にステータスを記録する場合と比較して、記録の負荷を低く抑えることができる。
【００８２】
このようにして、画像データおよび動きデータが記録される。
【００８３】
次に、図１５のフローチャートを参照して、図１の撮影装置１０による記録処理の例について説明する。
【００８４】
ステップＳ２１において、撮影装置１０による撮影が開始される。
【００８５】
ステップＳ２２において、動き量演算部２６は、ジャイロセンサ２３から供給される検知信号を取得する。
【００８６】
ステップＳ２３において、動き量演算部２６は、動き信号を生成する。このとき、例えば、図３乃至図１１を参照して上述したような動き信号が生成される。
【００８７】
ステップＳ２４において、エンコーダ２７は、撮像部２４から供給される画像信号を、ＭＰＥＧ方式など所定の符号化方式によりエンコードする。
【００８８】
なお、上述したように、ステップＳ２３の処理により生成される動き信号は、ステップＳ２４の処理でエンコードされた画像データを再生した場合の再生時刻（すなわち、タイムライン）に対応づけられるようになされている。
【００８９】
ステップＳ２５において、記録部２８は、ステップＳ２３の処理により生成される動き信号を、タイムラインに対応づけてデジタルデータ化するなどして動きデータを生成する。
【００９０】
ステップＳ２６において、記録部２８は、ステップＳ２４でエンコードされた画像データと、ステップＳ２５で生成された動きデータを記録媒体に記録する。例えば、画像データと動きデータとを含むデータファイルが生成される。
【００９１】
ステップＳ２７において、撮影の終了が指令されたか否かが判定される。例えば、入力部２１を介して所定の撮影終了操作が行われた場合、撮影の終了が指令されたと判定される。
【００９２】
ステップＳ２７において、撮影の終了が指令されていないと判定された場合、処理は、ステップＳ２２に戻る。
【００９３】
一方、ステップＳ２７において、撮影の終了が指令されたと判定された場合、記録処理は終了する。
【００９４】
このようにして、記録処理が実行される。
【００９５】
次に、図１６のフローチャートを参照して、図２の再生装置５０による再生処理の例について説明する。なお、この処理は、再生装置５０において、動画の再生が指令されたとき実行されるものとし、処理の実行に先立って、図１５を参照して上述した記録処理の結果記録されたデータを有する記録媒体が、再生装置５０のドライブ６２に装着されているものとする。
【００９６】
ステップＳ４１において、ドライブ６２に装着された記録媒体から画像データおよび動きデータが読み出される。
【００９７】
ステップＳ４２において、演算デコーダ６３は、ステップＳ４１の処理で読み出された画像データおよび動きデータをデコードする。
【００９８】
ステップＳ４３において、キャッシュメモリ６５は、ステップＳ４２の処理でデコードされて得られた画像データを保持する。
【００９９】
ステップＳ４４において、演算デコーダ６３は、図１７のフローチャートを参照して後述するシーンスキップ制御処理を実行する。これにより、例えば、スキップすべきシーンのフレームが特定されて画像データが再構成される。
【０１００】
ステップＳ４５において、演算デコーダ６３は、ステップＳ４４の処理に伴って再構成された画像データに対応する画像信号を生成する。
【０１０１】
ステップＳ４６において、表示部６４は、ステップＳ４５の処理で生成された画像信号に対応する画像を表示する。
【０１０２】
このようにして、再生処理が実行される。
【０１０３】
次に、図１７のフローチャートを参照して、図１６のステップＳ４４のシーンスキップ制御処理の詳細な例について説明する。
【０１０４】
ステップＳ６１において、演算デコーダ６３は、動きデータに基づいて得られた動き信号を解析する。これにより、例えば、動画の中でのカムコーダの動き（手振れ、衝撃、レンズの向きの大幅な変化など）を表す情報が取得される。
【０１０５】
ステップＳ６２において、演算デコーダ６３は、ステップＳ６１での解析の結果に基づいてスキップすべきフレームを特定する。
【０１０６】
このとき、例えば、図１２に示されるようなタイムラインと動き信号を表示部６４に表示させることにより、スキップすべきシーンをユーザに指定させ、そのシーンを構成するフレームがスキップすべきフレームとして特定される。
【０１０７】
また、例えば、図１３に示されるように、各フレームのステータスが記録されていた場合、予め設定されたステータスのフレームをスキップすべきフレームとして特定する。例えば、スキップすべきフレームの判定基準としてステータス１以上と設定されていた場合、ステータス１乃至ステータス３のフレームがスキップすべきフレームとして特定される。また、例えば、スキップすべきフレームの判定基準としてステータス２以上と設定されていた場合、ステータス２とステータス３のフレームがスキップすべきフレームとして特定される。さらに、例えば、スキップすべきフレームの判定基準としてステータス３以上と設定されていた場合、ステータス３のフレームがスキップすべきフレームとして特定される。
【０１０８】
あるいはまた、例えば、図１４に示されるように、フラグ化された動きデータが記録されていた場合、そのフラグに基づいてユーザが指定した区間内のフレームがスキップすべきフレームとして特定される。
【０１０９】
ステップＳ６３において、演算デコーダ６３は、ステップＳ６２の処理で特定されたフレームを除外した一連の動画の画像データを再構成する。これにより、例えば、手振れ、衝撃、レンズの向きの大幅な変化などが含まれるシーンがスキップされて動画が再生されることになる。
【０１１０】
このようにして、シーンスキップ制御処理が実行される。
【０１１１】
このように、本技術によれば、撮影（記録）時に、タイムラインに対応付けられて動きデータが記録され、再生時には、動きデータに基づいて所定のシーンがスキップされるようになされている。
【０１１２】
従来より、例えば、ユーザの歩行の加速度を検出し、歩行をやめると録画開始を行う技術、衝撃をうけるとその後一定時間画像を記録しないようにする技術が提案されていた。
【０１１３】
しかしながら、それらの技術は、換言すれば、再生時における不要なシーンを撮影時に決めてしまい記録そのものを行わないような構成ともいえる。このような構成を採用した場合、ユーザが撮影したかったシーンがリジェクトされてしまう可能性があるという問題があった。
【０１１４】
また、近年では、装置の省電力化や記録媒体の大容量化が図られており、データの記録に係るコストは年々低下しているともいえる。このような状況下では、不要なシーンを撮影時に決めて記録そのものを行わないようにした場合も、とりあえず記録しておいて、再生時に不要なシーンをカットした場合も、コスト負担はほとんど変わらないと考えられる。
【０１１５】
さらに、再生が不要なシーンを特定する際の基準（例えば、どれだけぶれたらシーンをスキップするのか）は、撮影時のコンディションやユーザの許容値によって異なるが、それを撮影前に決めることは極めて困難である。
【０１１６】
これに対して、本技術によれば、撮影時には全シーンを記録するようにし、再生時に再生不要なシーンが特定されるようにしたので、例えば、ユーザが撮影したかったシーンがリジェクトされてしまうことはない。
【０１１７】
また、例えば、タイムラインに対応付けられたステータスに基づいて、スキップすべきシーンを特定することもできるので、撮影時のコンディションやユーザの許容値によって異なる基準に柔軟に対応することができる。
【０１１８】
さらに、一般的は再生不要と考えられるような手振れの大きいシーンであっても、例えば、幼い子供が撮影していた場合などは、ユーザにとっての貴重な思いでとなる場合もあり、このようなシーンを一概にカットすることなく保存できる。従って、本技術では、ユーザの思い出を全て記録することができる。
【０１１９】
さらに、再生不要と判断するための基準を設定しておけば、自動的にシーンをスキップさせることもできる。
【０１２０】
従って、本技術によれば、記録された画像の再生の要否をより自由に決めることができる。
【０１２１】
以上においては、ジャイロセンサ２３の検知信号に基づいて、動き信号が生成される例について説明したが、例えば、加速度センサから出力される検知信号に基づいて動き信号が生成されるようにしてもよい。
【０１２２】
このようにすることで、例えば、手振れ、衝撃などの動きだけでなく、加速度センサを、重力のベクトル方向をリファレンスとした傾斜センサとして用いることによりカメラが下を向いているときに撮影されたフレームなどを特定することができる。例えば、撮影終了後、終了のボタンの押下を忘れた場合など、カメラが下向きになったまま地面の画像が延々と撮影されていることがある。加速度センサから出力される検知信号に基づいて動き信号を生成してタイムラインに対応づけて動きデータが記録されるようにすれば、カメラが下向きの間のシーンをスキップさせることもできる。
【０１２３】
あるいはまた、撮影装置１０にイメージセンサを搭載し、イメージセンサから出力される検知信号に基づいて得られるセンサデータがタイムラインに対応付けられて記録されるようにしてもよい。
【０１２４】
図１８は、撮影装置１０の外観の例を示す図である。同図は、撮影者側から見た撮影装置１０の外観の例を示しており、この場合、被写体は、紙面の奥行方向やや左側に存在することになる。同図に示されるように、例えば、撮影者に向けて画像を表示する表示部２９のディスプレイの下部にイメージセンサ３１が設けられる。
【０１２５】
イメージセンサ３１は、例えば、小型のＣＣＤカメラを有する構成とされ、撮影された画像の中の顔画像を認識するようになされている。すなわち、例えば、イメージセンサ３１により、ユーザの顔が認識されたか否かを表す検知信号が出力される。このようにすることで、例えば、ユーザが被写体の方向を向いて撮影したときのフレームを特定することができる。
【０１２６】
通常、画像を撮影する場合、ユーザは被写体の方向を向いて撮影する。一方、例えば、撮影終了後、終了のボタンの押下を忘れた場合などは、ユーザは被写体の方向を向いていないと考えられる。つまり、イメージセンサ３１によりユーザの顔が認識されたときに撮影されたフレームの画像は再生する価値の高いものと考えられるが、イメージセンサ３１によりユーザの顔が認識されていないときに撮影されたフレームの画像は再生する価値は低いと考えられる。
【０１２７】
このように、イメージセンサ３１から出力される検知信号に基づいて得られるセンサデータがタイムラインに対応付けられて記録されるようにすれば、やはり、再生不要のシーンを簡単に判定することが可能となる。また、上述した動きデータに基づくシーンのスキップの判定とともに、センサデータを利用して再生要否を判定するようにすれば、より実効的に、かつ自動的にシーンをスキップさせることもできる。
【０１２８】
つまり、本技術においてタイムラインに対応付けて記録する情報は、必ずしも動きを表す情報である必要はなく、所定のセンサによりセンシングされたデータなど、各種の付帯情報とするようにしてもよい。
【０１２９】
なお、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば図１９に示されるような汎用のパーソナルコンピュータ７００などに、ネットワークや記録媒体からインストールされる。
【０１３０】
図１９において、ＣＰＵ（Central Processing Unit）７０１は、ＲＯＭ（Read Only Memory）７０２に記憶されているプログラム、または記憶部７０８からＲＡＭ（Random Access Memory）７０３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ７０３にはまた、ＣＰＵ７０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１３１】
ＣＰＵ７０１、ＲＯＭ７０２、およびＲＡＭ７０３は、バス７０４を介して相互に接続されている。このバス７０４にはまた、入出力インタフェース７０５も接続されている。
【０１３２】
入出力インタフェース７０５には、キーボード、マウスなどよりなる入力部７０６、ＬＣＤ(Liquid Crystal display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部７０７、ハードディスクなどより構成される記憶部７０８、モデム、ＬＡＮカードなどのネットワークインタフェースカードなどより構成される通信部７０９が接続されている。通信部７０９は、インターネットを含むネットワークを介しての通信処理を行う。
【０１３３】
入出力インタフェース７０５にはまた、必要に応じてドライブ７１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア７１１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部７０８にインストールされる。
【０１３４】
上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、インターネットなどのネットワークや、リムーバブルメディア７１１などからなる記録媒体からインストールされる。
【０１３５】
なお、この記録媒体は、図１９に示される、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスク（フロッピディスク（登録商標）を含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク（MD（Mini-Disk）（登録商標）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア７１１により構成されるものだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているＲＯＭ７０２や、記憶部７０８に含まれるハードディスクなどで構成されるものも含む。
【０１３６】
なお、本明細書において上述した一連の処理は、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１３７】
また、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【０１３８】
なお、本技術は以下のような構成も取ることができる。
【０１３９】
（１）  撮影した動画像の画像データを生成する画像データ生成部と、
センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成するセンサ信号生成部と、
前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録する記録部と
を備える撮影装置。
（２）  前記センサがジャイロセンサであり、前記撮影装置の動きを表す検知信号を出力する
（１）に記載の撮影装置。
（３）  前記センサが加速度センサであり、前記撮影装置の傾斜方向を表す検知信号を出力する
（１）に記載の撮影装置。
（４）  前記センサがイメージセンサであり、前記撮影装置のユーザの顔の認識結果を表す検知信号を出力する
（１）に記載の撮影装置。
（５）  前記センサ信号生成部は、
前記センサの検知信号を閾値判定により２値化して得られる信号を前記センサ信号として生成する
（１）乃至（４）のいずれかに記載の撮影装置。
（６）  前記センサ信号生成部は、
複数の閾値を用いた段階的判定により多値化して得られる信号を前記センサ信号として生成する
（１）乃至（４）のいずれかに記載の撮影装置。
（７）  前記センサ信号生成部は、
前記検知信号に所定の処理を施し、さらに遅効処理またはローパスフィルタ処理を施して得られる信号を前記センサ信号として生成する
（１）乃至（６）のいずれかに記載の撮影装置。
（８）  前記センサ信号生成部は、
前記検知信号について、所定時間ごとの所定周波数範囲のパワースペクトルの面積値を算出して得られる信号を前記センサ信号として生成する
（１）乃至（７）のいずれかに記載の撮影装置。
（９）  画像データ生成部が、撮影した動画像の画像データを生成し、
センサ信号生成部が、センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成し、
記録部が、前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録するステップ
を含む撮影方法。
（１０）  コンピュータを、
撮影した動画像の画像データを生成する画像データ生成部と、
センサから出力される検知信号に基づいて、前記生成された画像データが動画像として再生される場合のタイムラインに対応づけられたセンサ信号を生成するセンサ信号生成部と、
前記画像データ、および前記センサ信号をデジタルデータ化したセンサデータを同一の記録媒体に記録する記録部とを備える撮影装置として機能させる
プログラム。
（１１）  （１０）に記載のプログラムが記録されている記録媒体。
（１２）  記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出すデータ読み出し部と、
前記読み出された画像データを保持するデータ保持部と、
前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定するフレーム特定部と、
前記特定されたフレームを除外した一連の動画像の画像データを再構成する再構成部と
を備える画像再生装置。
（１３）  前記センサデータは、
前記動画像を撮影した撮影装置のジャイロセンサにより出力される検知信号であって、前記撮影装置の動きを表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータである
（１２）に記載の画像再生装置。
（１４）  前記センサデータは、
前記動画像を撮影した撮影装置の加速度センサにより出力される検知信号であって、前記撮影装置の傾斜方向を表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータである
（１２）に記載の画像再生装置。
（１５）  前記センサデータは、
前記動画像を撮影した撮影装置のイメージセンサにより出力される検知信号であって、前記撮影装置のユーザの顔の認識結果を表す検知信号に基づいて生成されたセンサ信号をデジタルデータ化したデータである
（１２）に記載の画像再生装置。
（１６）  データ読み出し部が、記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出し、
データ保持部が、前記読み出された画像データを保持し、
フレーム特定部が、前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定し、
再構成部が、前記特定されたフレームを除外した一連の動画像の画像データを再構成するステップ
を含む画像再生方法。
（１７）  コンピュータを、
記録媒体に記録されている動画像の画像データ、および、前記画像データが動画像として再生される場合のタイムラインに対応づけられて記録されているセンサデータを読み出すデータ読み出し部と、
前記読み出された画像データを保持するデータ保持部と、
前記読み出されたセンサデータに基づいて、前記保持された画像データの中で再生不要なフレームを特定するフレーム特定部と、
前記特定されたフレームを除外した一連の動画像の画像データを再構成する再構成部とを備える画像再生装置として機能させる
プログラム。
（１８）  （１７）に記載のプログラムが記録されている記録媒体。
【符号の説明】
【０１４０】
１０  撮影装置，  ２１  入力部，  ２２  レンズアクチュエータ，  ２３  ジャイロセンサ，  ２４  撮像部，  ２５  手振れ補正演算部，  ２６  動き量演算部，  ２７  エンコーダ，  ２８  記録部，  ２９  表示部，  ５０  再生装置，  ６１  入力部，  ６２  ドライブ，  ６３  演算デコーダ，  ６４  表示部，  ６５  キャッシュメモリ
【図１】
0005780418.tif 000002
【図２】
0005780418.tif 000003
【図３】
0005780418.tif 000004
【図４】
0005780418.tif 000005
【図５】
0005780418.tif 000006
【図６】
0005780418.tif 000007
【図７】
0005780418.tif 000008
【図８】
0005780418.tif 000009
【図９】
0005780418.tif 000010
【図１０】
0005780418.tif 000011
【図１１】
0005780418.tif 000012
【図１２】
0005780418.tif 000013
【図１３】
0005780418.tif 000014
【図１４】
0005780418.tif 000015
【図１５】
0005780418.tif 000016
【図１６】
0005780418.tif 000017
【図１７】
0005780418.tif 000018
【図１８】
0005780418.tif 000019
【図１９】
0005780418.tif 000020