(57)【要約】【課題】保存対象を特定する為のターゲット画像を予め任意に登録しておくだけで、一連の画像の中から所望する画像を抽出して記録保存できるようにする。【解決手段】ＣＰＵ１は、保存対象を特定する為のターゲット画像が記憶部２内に登録されている状態において、カメラ撮影部６からのモニタ画像を登録ターゲットに基づいて順次解析した結果、登録ターゲットを含むモニタ画像を認識した場合には、この画像を保存対象として抽出して記録媒体３内に保存する。【選択図】  図１
2004207842.tif 000002
【特許請求の範囲】
【請求項１】
一連の画像の中から所望する画像を抽出して記録保存する画像撮影装置であって、
保存対象を特定する為のターゲット画像を予め任意に登録する登録手段と、
この登録手段によって登録された登録ターゲットに基づいて一連の画像を順次解析する画像解析手段と、
この画像解析手段によって画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を保存対象として抽出して記録保存する記録制御手段と、
を具備したことを特徴とする画像処理装置。
【請求項２】
前記登録手段によって複数種のターゲット画像が登録されている場合に、前記記録制御手段は、何れかの登録ターゲットを含む画像を認識する毎に、この画像を保存対象として抽出して記録保存すると共に、この保存画像が記録されている記録範囲をターゲット別に検出して記録し、
前記複数種の登録ターゲットのうち、何れかの登録ターゲットが再生対象として選択指定された場合に、この選択ターゲットに対応付けられている前記記録範囲に基づいて前記保存画像を検索し、この範囲内の画像を抽出して再生出力する、
ようにしたことを特徴とする請求項1記載の画像処理装置。
【請求項３】
保存されている一連の保存画像の中から所望する画像を抽出して再生出力する画像処理装置であって、
再生対象を特定する為のターゲット画像を予め任意に登録する登録手段と、
この登録手段によって登録された登録ターゲットに基づいて前記一連の保存画像を解析する画像解析手段と、
この画像解析手段によって画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を再生対象として抽出して出力する再生制御手段と、
を具備したことを特徴とする画像処理装置。
【請求項４】
前記登録手段によって登録されている複数種のターゲット画像のうち、その何れかの登録ターゲットが再生対象として選択指定された場合に、前記再生制御手段は、この選択ターゲットを含む画像を再生対象として抽出して出力する
ようにしたことを特徴とする請求項３記載の画像処理装置。
【請求項５】
保存されている一連の保存画像として、複数種の保存画像が記録されている記録媒体内から所望する画像を抽出して再生出力する場合に、前記画像解析手段は、複数種の保存画像を登録ターゲットに基づいて順次解析し、
前記再生制御手段は、複数種の保存画像毎に、登録ターゲットを含む画像を再生対象として抽出して出力する、
ようにしたことを特徴とする請求項３記載の画像処理装置。
【請求項６】
前記登録手段は、外部から任意に入力供給された画像あるいは撮影画像の中から任意に選択指定された画像をターゲット画像として登録する、
ようにしたことを特徴とする請求項１あるいは３記載の画像処理装置。
【請求項７】
前記画像解析手段は、撮影された一連の画像を登録ターゲットに基づいて順次解析することによって、この一連の画像の中に登録ターゲットが含まれているかを認識する、
ようにしたことを特徴とする請求項１あるいは３記載の画像処理装置。
【請求項８】
前記再生制御手段は、登録ターゲットを含む画像を再生対象として抽出して出力する際に、この登録ターゲットが含まれていない直前の画像から再生動作を開始する、
ようにしたことを特徴とする請求項３記載の画像処理装置。
【請求項９】
コンピュータに対して、
保存対象を特定する為のターゲット画像を予め任意に登録する機能と、
登録された登録ターゲットに基づいて一連の画像を順次解析する機能と、
画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を保存対象として抽出して記録保存する機能と、
を実現させるためのプログラム。
【請求項１０】
コンピュータに対して、
再生対象を特定する為のターゲット画像を予め任意に登録する機能と、
登録された登録ターゲットに基づいて前記一連の保存画像を解析する機能と、
画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を再生対象として抽出して出力する機能と、
を実現させるためのプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、一連の画像の中から所望する画像を抽出して記録保存したり、保存されている一連の保存画像の中から所望する画像を抽出して再生出力する画像撮影装置およびプログラムに関する。
【０００２】
【従来の技術】
従来、テレビジョン放送の自動録画装置としては、予め予約指定した放送番組の前置画像情報の一部を記憶しておき、予約指定した放送番組の画像情報と一致した時に録画を開始するようにした指定放送番組自動録画装置が知られている（特許文献１参照）。
また、天気予報番組のうち、毎回同じような画面をキーとして記憶しておき、このキー画面に該当する放送を検出した際に、録画を開始すると共に、所定時間分、その放送内容を録画するようにした自動録画装置が知られている（特許文献２参照）。
【０００３】
ところで、ビデオカメラにあっては、一連の撮影画像を記録媒体内に順次保存した後に、この保存画像を再生出力させて不要画像を消去しながら画像編集を行うようにしている。つまり、希望する被写体を対象として撮影した場合でも、その被写体が写っていない不要な画像も多く含まれていることが多く、このような不要画像を画像再生時に消去する画像編集を行うようにしているが、その編集には時間と労力を必要とする。
そこで、従来においては、自動撮影を行うビデオカメラ装置として、装着されたＰＣカードに記録されているプログラムコードを読み取って装置を制御することにより自動撮影を行うようにしたビデオカメラ装置が知られている（特許文献３参照）。
【０００４】
【特許文献１】
特開平０５−０５６３８６号公報
【特許文献２】
特開平１０−０４２２４７号公報
【特許文献３】
特開平１１−３４１３３９号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上述した放送番組の自動録画装置にあっては、前置画像情報あるいはキー画面を予め設定しておくことによって、それに該当する指定番組を自動録画することができるが、前置画像情報あるいはキー画面は、録画開始を指示する為の“開始トリガ”として機能するものであり、録画を開始してからは予約番組の全てを録画するようにしている為、その中の一部だけを見たい場合でも、録画された予約番組を最初から再生しなければならない。
特に、その放送が長時間番組であれば、その録画の再生には多くの時間を要することになり、また、早送り再生を行ったとしても、早送り画面の中から希望する画面が出現したかを確認し続けなければならず、面倒な作業を余儀なくされる他に、見たい場面を見逃してしまうおそれもあった。
一方、ＰＣカード内のプログラムコードにしたがって自動撮影を行うビデオカメラ装置にあっては、ＰＣカードを装着することによって自動撮影を行うことができるが、誰でも容易に利用できるエンドユーザ向きとは言えず、また、汎用性の点においても問題が残る。
【０００６】
第１の発明の課題は、保存対象を特定する為のターゲット画像を予め任意に登録しておくだけで、一連の画像の中から所望する画像を抽出して記録保存できるようにすることである。
第２の発明の課題は、再生対象を特定する為のターゲット画像を予め任意に登録しておくだけで、保存されている一連の保存画像の中から所望する画像を抽出して再生出力できるようにすることである。
【０００７】
【課題を解決するための手段】
請求項１記載の発明（第１の発明）は、一連の画像の中から所望する画像を抽出して記録保存する画像撮影装置であって、保存対象を特定する為のターゲット画像を予め任意に登録する登録手段と、この登録手段によって登録された登録ターゲットに基づいて一連の画像を順次解析する画像解析手段と、この画像解析手段によって画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を保存対象として抽出して記録保存する記録制御手段とを具備するものである。
更に、コンピュータに対して、上述した請求項１記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項９記載の発明）。
【０００８】
したがって、請求項１、９記載の発明は、保存対象を特定する為のターゲット画像（例えば、人物画像）を予め任意に登録しておき、この登録ターゲットに基づいて一連の画像（例えば、撮影画像、放送番組）を順次解析した結果、登録ターゲットを含む画像を認識した場合には、この画像を保存対象として抽出して記録保存するようにしたから、例えば、カメラ装置にあっては、膨大な撮影画像の中から希望する人物等の被写体が写っている画像のみを記録保存することができ、画像保存量を大幅に削減することが可能となる他、画像再生時に不要画像を消去する等の編集作業も不要となり、また、予約した放送番組を自動録画する録画装置にあっては、例えば、歌番組において、希望する特定歌手が出現している部分の画像のみを記録保存することができ、予約放送が長時間番組であっても、録画量を大幅に削減することが可能となる他に、画像再生時に早送り再生の作業も不要となる等、実用性の高い画像処理装置を提供することができる。
【０００９】
なお、請求項１記載の発明は次のようなものであってもよい。
前記登録手段によって複数種のターゲット画像が登録されている場合に、前記記録制御手段は、何れかの登録ターゲットを含む画像を認識する毎に、この画像を保存対象として抽出して記録保存すると共に、この保存画像が記録されている記録範囲をターゲット別に検出して記録し、前記複数種の登録ターゲットのうち、何れかの登録ターゲットが再生対象として選択指定された場合に、この選択ターゲットに対応付けられている前記記録範囲に基づいて前記保存画像を検索し、この範囲内の画像を抽出して再生出力する（請求項２記載の発明）。
【００１０】
したがって、請求項２記載の発明によれば、請求項１記載の発明と同様の効果を有する他に、複数種のターゲット画像が登録されている場合に、何れかの登録ターゲットを含む画像を認識する毎に、この画像を保存対象として抽出して記録保存すると共に、この保存画像が記録されている記録範囲をターゲット別に検出して記録し、何れかの登録ターゲットが再生対象として選択指定された場合には、この選択ターゲットに対応付けられている記録範囲に基づいて保存画像を検索し、この範囲内の画像を抽出して再生出力するようにしたから、複数種のターゲット画像が登録されている場合でも、登録ターゲット毎にその登録ターゲットを含む画像を記録保存することができ、また、再生時にあっても、希望する登録ターゲットを選択するだけで、その登録ターゲットを含む画像を即座に再生することが可能となる。
【００１１】
外部から任意に入力供給された画像あるいは撮影画像の中から任意に選択指定された画像をターゲット画像として登録するようにすれば（請求項６記載の発明）、外部から任意に入力供給された画像をターゲット画像として登録するか、過去に撮影した画像を利用してターゲット画像として登録するかを選択することができ、その登録作業を容易に行うことが可能となる。
また、撮影された一連の画像を登録ターゲットに基づいて順次解析することによって、この一連の画像の中に登録ターゲットが含まれているかを認識するようにすれば（請求項７記載の発明）、ビデオカメラあるいはデジタルスチールカメラによる自由奔放な撮影にも対処することが可能となり、撮影タイミングを逃すような事態を解消することができる。
【００１２】
請求項３記載の発明（第２の発明）は、保存されている一連の保存画像の中から所望する画像を抽出して再生出力する画像処理装置であって、再生対象を特定する為のターゲット画像を予め任意に登録する登録手段と、この登録手段によって登録された登録ターゲットに基づいて前記一連の保存画像を解析する画像解析手段と、この画像解析手段によって画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を再生対象として抽出して出力する再生制御手段とを具備するものである。
更に、コンピュータに対して、上述した請求項３記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１０記載の発明）。
【００１３】
したがって、請求項３、１０記載の発明は、再生対象を特定する為のターゲット画像を予め任意に登録しておき、この登録ターゲットに基づいて一連の保存画像（例えば、撮影画像、放送番組の録画像）を解析した結果、登録ターゲットを含む画像を認識した場合には、この画像を再生対象として抽出して出力するようにしたから、例えば、カメラ装置にあっては、膨大な撮影画像の中から希望する人物等の被写体が写っている画像のみを再生することができ、画像再生時に不要画像を消去する等の編集作業も不要となり、また、予め指定した放送番組を自動録画する録画装置にあっては、例えば、希望する歌手が出現している部分画像のみを再生することができ、予約放送が長時間番組であっても、早送り再生作業も不要となる等、実用性の高い画像処理装置を提供することが可能となる。
【００１４】
なお、請求項３記載の発明は次のようなものであってもよい。
前記登録手段によって登録されている複数種のターゲット画像のうち、その何れかの登録ターゲットが再生対象として選択指定された場合に、前記再生制御手段は、この選択ターゲットを含む画像を再生対象として抽出して出力する（請求項４記載の発明）。
したがって、請求項４記載の発明によれば、請求項３記載の発明と同様の効果を有する他に、複数種のターゲット画像が登録されている場合でも、希望する登録ターゲット選択するだけで、その登録ターゲットを含む画像を即座に再生することが可能となる。
【００１５】
保存されている一連の保存画像として、複数種の保存画像が記録されている記録媒体内から所望する画像を抽出して再生出力する場合に、前記画像解析手段は、複数種の保存画像を登録ターゲットに基づいて順次解析し、前記再生制御手段は、複数種の保存画像毎に、登録ターゲットを含む画像を再生対象として抽出して出力する（請求項５記載の発明）。
したがって、請求項５記載の発明によれば、請求項３記載の発明と同様の効果を有する他に、複数種の保存画像毎に、登録ターゲットを含む画像を再生対象として抽出して出力するようにしたから、複数種の保存画像に跨った再生が可能となる。
【００１６】
外部から任意に入力供給された画像あるいは撮影画像の中から任意に選択指定された画像をターゲット画像として登録するようにすれば（請求項６記載の発明）、外部から任意に入力供給された画像をターゲット画像として登録するか、過去に撮影した画像を利用してターゲット画像として登録するかを選択することができ、その登録作業を容易に行うことが可能となる。
【００１７】
また、撮影された一連の画像を登録ターゲットに基づいて順次解析することによって、この一連の画像の中に登録ターゲットが含まれているかを認識するようにすれば（請求項７記載の発明）、ビデオカメラあるいはデジタルスチールカメラによる自由奔放な撮影にも対処することが可能となり、撮影タイミングを逃すような事態を解消することができる。
【００１８】
前記再生制御手段は、登録ターゲットを含む画像を再生対象として抽出して出力する際に、この登録ターゲットが含まれていない直前の画像から再生動作を開始するようにすれば（請求項８記載の発明）、再生を開始した直後から登録ターゲットを再生するのではなく、それよりも前の画像（例えば、動画再生であれば、数秒〜１０秒程度前の画像）から再生を開始するようにしている為、登録ターゲットの場面を見逃す等のおそれもない。
【００１９】
【発明の実施の形態】
（第１実施形態）
以下、図１〜図４を参照してこの発明の第１実施形態を説明する。
図１は、この実施形態におけるビデオカメラ装置の基本的構成要素を示したブロック図である。
このビデオカメラ装置は、ハンディタイプのビデオカメラ（パーソナルカメラ）、人物監視用等に利用される設置型の監視カメラ、自動車内に搭載されている車載カメラ等であり、その用途は問わないが、固体撮像素子を通してカラー撮影された撮影画像を記録媒体内に保存する機能と共に、この保存画像を読み出して再生出力する機能を有している。
【００２０】
特に、この実施形態におけるビデオカメラ装置は、保存対象を特定する為のターゲット画像（例えば、人物画像）を予め任意に登録しておくと、一連の撮影画像（モニタ画像）の中から登録ターゲット画像を含む画像を抽出して記録保存するようにしたものであり、更に、再生対象を特定する為のターゲット画像を予め任意に登録しておくと、保存されている一連の保存画像（録画された撮影画像：録画像）の中から登録ターゲット画像を含む画像を抽出して再生出力するようにしたものである。
【００２１】
この場合、録画モードとしては、２種類のモード、すなわち、撮影画像を順次記録保存する「通常録画モード」と、登録ターゲットを含む画像を記録保存する「ターゲット録画モード」とを有している。また、再生モードとしては、３種類のモード、すなわち、「通常録画モード」によって録画された撮影画像をそのまま再生する「通常再生モード」と、上述の「ターゲット録画モード」によって録画された登録ターゲットを含む画像のうち、任意に選択指定された登録ターゲットを検索して再生出力する「ターゲット検索再生モード」と、上述の「通常録画モード」によって録画された画像のうち、登録ターゲットを含む画像を再生出力する「ターゲット再生モード」とを有している。
なお、この第１実施形態の特徴部分を詳述する前に、この実施形態のハードウェア上の構成について以下、説明しておく。
【００２２】
ＣＰＵ１は、記憶部２内のオペレーティングシステムや各種アプリケーションソフトにしたがってこのビデオカメラ装置の全体動作を制御する中央演算処理装置である。記憶部２は、プログラム記憶領域とデータ記憶領域とを有し、磁気的、光学的、半導体メモリ等やその駆動系によって構成されている。この記録部２はハードディスク等の固定的なメモリの他、ＣＤ−ＲＯＭ、ＤＶＤ等の着脱自在な記憶媒体を装着可能な構成であってもよい。
【００２３】
撮影画像を記録保存する記録媒体３は、ＣＤ−ＲＯＭ、ＤＶＤ等によって構成された着脱自在なもので、上述した「通常録画モード」が指定されている場合には、一連の撮影画像を順次記録保存し、「ターゲット録画モード」が指定されている場合には、撮影画像の中から抽出された登録ターゲットを含む画像を記録保存するようにしている。なお、記録媒体３は、その先頭から撮影順に録画されるが、その録画領域を概念的に区別すると、「通常録画モード」時に撮影された画像の通常録画領域３１と、「ターゲット録画モード」時に撮影された画像のターゲット録画領域３２とに分けられる。
【００２４】
一方、ＣＰＵ１にはその入出力周辺デバイスであるキー入力部４、表示部５、カメラ撮影部６がバスラインを介して接続されており、入出力プログラムにしたがってＣＰＵ１はそれらの動作を制御する。
キー入力部４はキーボードやタッチパネルを構成する操作部であり、撮影ボタン、再生ボタン等の各種のボタンを有し、各種コマンドや文字情報を入力する。表示部５は、フルカラー表示を行う液晶表示部であり、ファインダ画面、画像再生画面、タッチスクリーンとして利用される。
カメラ撮影部６は、光学系を通して取り込んだ被写体像を受光するエリアセンサ（固体撮像素子）、アナログ／デジタル変換部、オートフォーカス部等の各種電子部品を備えた通常の構成となっている。なお、カメラ本体には、図示していないが、画像処理装置等に接続される外部接続用端子が設けられており、外部供給された画像情報の取り込みを可能としている。
【００２５】
図２は、記憶部２内に設けられているターゲット登録メモリ２１の内容を示した図である。
このターゲット登録メモリ２１は、予め保存対象を特定する為のターゲット画像あるいは再生対象を特定する為のターゲット画像が登録されるメモリであり、複数分のターゲット画像を記憶可能な構成となっている。このターゲット登録メモリ２１は、登録ターゲット毎に、その「ターゲット番号」、「ターゲット画像」、「媒体上の記録位置」の各項目が記憶される。ここで、「ターゲット番号」は、ターゲット画像を識別する識別情報であり、ターゲット画像が登録される毎に自動生成された一連番号である。
【００２６】
「ターゲット画像」は、保存対象／再生対象が人物であれば、その人物の顔画像（顔を中心として撮影された画像）であり、人物以外の自動車、動物等であれば、その全体を撮影した画像である。この場合、「ターゲット画像」としては、例えば、保存対象／再生対象をその前後左右から撮影した複数枚分の画像であってもよく、保存対象／再生対象が人物であれば、その人物の顔画像の他に、全体画像を含めたものであってもよく、保存対象／再生対象を確実に認識することができる画像であれば、その撮影部位や枚数は問わない。
【００２７】
ここで、「ターゲット画像」の登録時において、ＣＰＵ１は、例えば、外部から任意に入力供給された画像を「ターゲット画像」として登録したり、記録媒体３内に保存されている撮影画像の中から任意に選択指定された画像を「ターゲット画像」として登録するようにしている。
「媒体上の記録位置」は、上述の「ターゲット録画モード」が指定されている場合において、撮影画像の中から抽出された登録ターゲットを含む画像を記録保存する毎に、その記録開始位置と記録終了位置を示すもので、登録ターゲットが検出される毎に、当該登録ターゲットに対応付けてその記録開始位置と記録終了位置とが順次記録される。
【００２８】
次に、この第１実施形態におけるビデオカメラ装置の動作概念を図３および図４に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作を逐次実行する。また、伝送媒体を介して伝送されてきた上述のプログラムコードにしたがった動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体の他、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施形態特有の動作を実行することもできる。
【００２９】
図３および図４は、ビデオカメラ装置において録画モード／再生モードに応じた全体動作を示したフローチャートである。
先ず、ＣＰＵ１は、操作有無を監視しており（ステップＡ１）、何らかの操作が行われた場合には、ターゲット登録が指示されたかをチェックする（ステップＡ２）。いま、撮影を開始する前に、希望するターゲットを登録する為に、その登録が指示された場合には、ターゲット画像の入力を受け付けて、その登録処理を行う（ステップＡ３〜Ａ５）。
【００３０】
ここで、ＣＰＵ１は、外部から任意の画像が「ターゲット画像」として入力供給されたり、記録媒体３内に保存されている撮影画像の中から任意に選択された画像が「ターゲット画像」として入力指定された場合には（ステップＡ３）、入力された「ターゲット画像」を取り込むと共に、「ターゲット番号」を生成し、「ターゲット番号」付きの「ターゲット画像」をターゲット登録メモリ２１に書き込んで登録する（ステップＡ４）。
このようにして１ターゲット分の登録が終了した後、他のターゲットの登録が指示されたかをチェックし（ステップＡ５）、他の登録指示を受けた場合には、ステップＡ３に戻り、以下、上述の登録処理を繰り返すが（ステップＡ３〜Ａ５）、登録終了が指示された場合には、ステップＡ１に戻って操作待ち状態となる。
【００３１】
いま、ターゲット登録を行った後に、「ターゲット録画モード」が選択指定された場合には（ステップＡ６）、ターゲット録画処理が開始される。すなわち、ＣＰＵ１は、ターゲット録画モードへの切換えと同時に、モニタ撮影を開始する（ステップＡ７）。そして、ターゲット登録メモリ２１内に登録されている各ターゲット画像を読み出し、この各登録ターゲット画像とモニタ画像とを比較しながらモニタ画像内に何れかのターゲット画像が含まれているかをサーチする画像解析を行い（ステップＡ８）、ターゲット画像の有無をチェックする（ステップＡ９）。この場合、登録ターゲットが人物であれば、その人物像の中から特徴部分を抽出して特徴比較を行うが、その際、顔の向き、大きさ等を補正した後に、顔の輪郭、目、口、鼻、額等の形、位置、大きさ等を比較する。なお、その他にも、性別、顔、眼鏡の有無、身長、体型、髪型、色を総合的に比較して人物認識を行うようにしてもよい。
【００３２】
ここで、モニタ画像内に何れの登録ターゲットも含まれていない場合には（ステップＡ９でＮＯ）、ターゲット録画の終了指示（ターゲット録画モードの解除指示）を受けたかをチェックし（ステップＡ１０）、終了指示を受けるまでステップＡ８に戻ってモニタ解析を行う。なお、ターゲット録画の終了指示を受けた場合には、モニタ撮影を終了させた後（ステップＡ１１）、操作待ち状態に戻る（ステップＡ１）。
【００３３】
一方、登録ターゲットが含まれていることを認識した場合には、つまり、モニタ画像内に何れかの登録ターゲットが含まれていることを認識した場合には（ステップＡ９でＹＥＳ）、この時のモニタ画像を保存対象として特定し、このモニタ画像を記録媒体３内に録画する動作を開始すると共に（ステップＡ１２）、その時の記録位置（記録媒体３内の保存先アドレス）を撮影開始位置として求め、この撮影開始位置を当該「ターゲット番号」に対応付けてターゲット登録メモリ２１に書き込む（ステップＡ１３）。その際、モニタ画像内に複数の登録ターゲットが含まれている場合には、登録ターゲット毎に、この撮影開始位置を当該「ターゲット番号」に対応付けてターゲット登録メモリ２１に書き込む処理が繰り返される。
【００３４】
更に、モニタ画像を解析しながらその中に何れかの登録ターゲットが含まれているかを監視し続け（ステップＡ１４）、登録ターゲットが含まれていれば、そのモニタ画像を録画する動作を続行する（ステップＡ１５）。以降、ターゲット録画の終了指示が有るまで（ステップＡ１６）、登録ターゲットが含まれているモニタ画像を録画し続けるが（ステップＡ１４、Ａ１５）、ターゲット録画の終了指示を受けた場合には（ステップＡ１６）、モニタ撮影を終了させた後（ステップＡ１７）、操作待ち状態に戻る（ステップＡ１）。
【００３５】
また、モニタから登録ターゲットが外れた場合には（ステップＡ１４でＮＯ）、録画動作を終了させた後（ステップＡ１８）、その時の記録位置（記録媒体３内の保存先アドレス）を撮影終了位置として求め、この撮影終了位置を当該「ターゲット番号」に対応付けてターゲット登録メモリ２１に書き込む（ステップＡ１９）。その際、モニタ画像内に複数の登録ターゲットが含まれている場合には、登録ターゲット毎に、この撮影終了位置を当該「ターゲット番号」に対応付けてターゲット登録メモリ２１に書き込む処理が繰り返される。そして、ステップＡ１８に戻り、登録ターゲット画像とモニタ画像とを比較してモニタ画像内に何れかのターゲット画像が含まれているかをサーチしながら上述の動作を繰り返す。
【００３６】
他方、上述の「ターゲット検索再生モード」に切換えられた場合には、図４のステップＡ２０でそのことが検出され、ターゲット検索再生処理が開始される。すなわち、ＣＰＵ１は、ターゲット登録メモリ２１をアクセスして、各登録ターゲット画像を読み出して、メニュー画面内に一覧表示させる（ステップＡ２１）。このメニュー画面の中から所望するターゲットが再生対象として選択指定されると（ステップＡ２２）、この選択ターゲットに対応する「ターゲット番号」に基づいてターゲット登録メモリ２１を検索してその記録位置（開始／終了位置）を読み出すと共に（ステップＡ２３）、この記録位置に基づいて記録媒体３内のターゲット録画領域３２を検索して、該当する画像を読み出して再生出力する（ステップＡ２４）。
【００３７】
この状態において、再生終了が指示された場合には（ステップＡ２５）、再生動作を終了させた後に（ステップＡ２９）、最初の操作待ち状態に戻るが（図３のステップＡ１）、再生終了が指示されなければ、次再生が指示されたかをチェックする（ステップＡ２６）。この次再生指示は、同一の選択ターゲットが含まれている次の録画再生へジャンプすべきことを指示するものであり、その指示を受けた場合に、ＣＰＵ１は、ターゲット登録メモリ２１をアクセスし、選択ターゲットに対応付けられている次の記録位置が有ることを条件に（ステップＡ２８）、この記録位置を読み出し（ステップＡ２３）、この記録位置に基づいて画像再生動作を行う（ステップＡ２４）。
また、次再生指示が無ければ、現在の録画再生を続行しながら（ステップＡ２７）、再生終了指示の有無をチェックすると共に（ステップＡ２５）、次再生指示の有無をチェックする（ステップＡ２６）。
【００３８】
また、「ターゲット再生モード」に切換えられた場合には（ステップＡ３０）、ターゲット再生処理を実行開始する。すなわち、ＣＰＵ１は、ターゲット登録メモリ２１をアクセスして、各登録ターゲット画像を読み出して、メニュー画面内に一覧表示させると共に、このメニュー画面の中から所望するターゲットが再生対象として選択指定されると、この選択ターゲットに対応する「ターゲット画像」を読み出す（ステップＡ３１）。この場合、全ての登録ターゲットを再生対象として選択指定するようにしてもよい。そして、この「ターゲット再生モード」においては、記録媒体３内の通常録画領域３１に保存されている撮影画像（録画像）を再生対象として順次読み出して、その画像解析を行うが（ステップＡ３２）、その際、選択ターゲット画像と録画像とを比較しながら録画像内に選択ターゲット画像が含まれているかをサーチする画像解析を行い（ステップＡ３３）、選択ターゲット画像の有無をチェックする（ステップＡ３４）。
【００３９】
ここで、選択ターゲット画像が無ければ、最初の操作待ち状態に戻るが（図３ステップＡ１）、選択ターゲット画像が含まれている場合には、その直前画像より録画像の再生を開始する（ステップＡ３５）。この場合、最初に選択ターゲットが出現している画像よりも数秒〜１０秒程度前の画像から再生を開始する。そして、画像再生を行っている間に再生終了が指示された場合には（ステップＡ３６）、再生動作を終了させた後に（ステップＡ４０）、最初の操作待ち状態に戻る（ステップＡ１）。
【００４０】
また、再生終了が指示されていない状態においては、再生画像内に選択ターゲットが含まれているかをサーチしながら再生画像解析を行い（ステップＡ３７）、選択ターゲットが含まれていることを条件に、再生動作を続行する（ステップＡ４１）。ここで、再生画像内に選択ターゲットが含まれていないことが検出された場合には（ステップＡ３７）、次の録画像が有ることを条件に（ステップＡ３９）、その録画像を読み出して画像解析を行いながら（ステップＡ３２）、以下、上述の動作を繰り返す。なお、次の録画像が無ければ（ステップＡ３８でＮＯ）、再生動作を終了させた後に（ステップＡ３９）、操作待ち状態に戻る（ステップＡ１）。
【００４１】
なお、他の処理（ステップＡ４２）は、「通常録画モード」へ切換えられた場合に、撮影画像を順次記録保存する通常の録画処理を行い、「通常再生モード」に切換えられた場合に、録画像をそのまま再生する通常の再生処理を行う。その際、早送り再生等のボタン操作に応じた処理も合わせて行われる。
【００４２】
以上のように、この第１実施形態においてビデオカメラ装置は、保存対象を特定する為のターゲット画像が記憶部２内に登録されている状態において、ＣＰＵ１は、カメラ撮影部６からのモニタ画像を登録ターゲットに基づいて順次解析した結果、登録ターゲットを含むモニタ画像を認識した場合には、この画像を保存対象として抽出して記録媒体３内に保存するようにしたから、膨大な撮影画像の中から希望する人物等の被写体が写っている画像のみを記録保存することができ、画像保存量を大幅に削減することが可能となる他、画像再生時に不要画像を消去する等の編集作業も不要となる。
【００４３】
また、複数種のターゲット画像が登録されている場合に、何れかの登録ターゲットを含む画像を認識する毎に、この画像を保存対象として抽出して記録保存すると共に、この保存画像が記録されている記録範囲をターゲット別に検出して記録し、何れかの登録ターゲットが再生対象として選択指定された場合には、この選択ターゲットに対応付けられている記録位置（開始・終了位置）に基づいて保存画像を検索し、この開始位置〜終了位置内の画像を抽出して再生出力するようにしたから、複数種のターゲット画像が登録されている場合でも、登録ターゲット毎にその登録ターゲットを含む画像を記録保存することができ、また、再生時にあっても、希望する登録ターゲット選択するだけで、その登録ターゲットを含む画像を即座に再生することが可能となる。
【００４４】
ターゲット画像登録時において、外部から任意に入力供給された画像をターゲット画像として登録するか、過去に撮影した画像を利用してターゲット画像として登録するかを選択することができ、その登録作業を容易に行うことが可能となる。
また、撮影画像を登録ターゲットに基づいて順次解析することによって、この画像の中に登録ターゲットが含まれているかを認識するようにしたから、自由奔放な撮影にも対処することが可能となり、撮影タイミングを逃すような事態を解消することができる。
【００４５】
一方、再生対象を特定する為のターゲット画像を予め登録されている状態において、ＣＰＵ１は、この登録ターゲットに基づいて録画像を解析した結果、登録ターゲットを含む画像を認識した場合には、この録画像を再生対象として抽出して出力するようにしたから、膨大な録画像の中から希望する人物等の被写体が写っている画像のみを再生することができ、画像再生時に不要画像を消去する等の編集作業も不要となる。
【００４６】
この場合、複数のターゲット画像が登録されている場合でも、希望する登録ターゲット選択するだけで、その登録ターゲットを含む画像を即座に再生することが可能となる。
また、複数の録画像毎に、ターゲットを含む画像を再生対象として抽出して出力するようにしたから、複数の録画像に跨った再生が可能となる。
更に、再生を開始した直後からターゲットを再生するのではなく、それよりも前の画像から再生を開始するようにしている為、ターゲットを見逃す等のおそれもない。
【００４７】
なお、上述した第１実施形態は、ビデオカメラ装置に適用した場合を例示したが、動画に限らず、勿論、デジタルスチールカメラにも適用可能である。この場合、ファインダ画像をモニタ画像として解析し、登録ターゲットが含まれていることを検出した際に、そのファインダ画像（モニタ画像）を記録保存するようにすればよい。なお、録画像（静止画）の再生は、ビデオカメラの場合と基本的には同様である。
【００４８】
（第２実施形態）
以下、この発明の第２実施形態について図５〜図７を参照して説明する。なお、上述した第１実施形態は、ビデオカメラ装置に適用した場合を例示したが、この第２実施形態はテレビジョン（ＴＶ）放送を録画する自動録画装置に適用したものである。
ここで、両実施形態において基本的に同一のものは、同一符号を付して示し、その説明を省略する他、以下、第２実施形態の特徴部分を中心に説明するものとする。
【００４９】
図５は、自動録画装置の基本的な構成要素を示したブロック図である。
この録画装置は、通常備えられているＣＰＵ１１、ＴＶチューナ１２、ＴＶモニタ画面１３、操作部１４、通常録画メモリ１５、予約メモリ１６等の他に、この実施形態においては、ターゲット登録メモリ１７、ターゲット録画メモリ１８を有する構成となっている。
予約メモリ１６は、予約番組毎に、任意に入力指定された番組開始時刻とその終了時刻とがセットされる通常のメモリである。ターゲット登録メモリ１７は、録画対象として予め任意に入力された複数のターゲット画像を登録可能なもので、「ターゲット番号」に対応して「ターゲット画像」を記憶する構成となっている。通常録画メモリ１５は、予約放送番組の全ての画像を通常通り順次録画する為のメモリであるのに対し、ターゲット録画メモリ１８は、予約放送番組の画像の中から登録ターゲットが含まれている画像のみが抽出されて自動録画されるメモリである。つまり、ターゲット録画メモリ１８は、予約番組毎に、その一部の画像のみが抽出録画されるメモリである。
【００５０】
次に、この第２実施形態における自動録画装置の動作概念を図６および図７に示すフローチャートを参照して説明する。
図６は、自動録画装置の動作（予約録画）を示したフローチャートである。
先ず、ＣＰＵ１１は、予約メモリ１６をアクセスし、未録画の予約情報が登録されているかをチェックし（ステップＢ１）、予約が有れば、その予約番組の開始時刻に達したかを検出する（ステップＢ２）。いま、開始時刻を検出すると、ターゲット登録メモリ１７をアクセスして、各登録ターゲット画像を読み出しておくと共に（ステップＢ３）、その放送画像を取得して録画動作の開始準備を行う（ステップＢ４）。なお、放送の終了時刻を検出すると（ステップＢ５）、他に予約が有るかをチェックするが（ステップＢ１）、全ての予約録画が終了していれば、この時点で録画動作を終了させる。
【００５１】
いま、録画動作が開始された場合には、取得した放送画像を通常録画メモリ１５内に順次録画すると共に（ステップＢ６）、この通常録画メモリ１５内の録画像と各登録ターゲット画像とを比較しながら何れかの登録ターゲットが含まれているかをサーチする画像解析を行い（ステップＢ７）、ターゲット画像の有無をチェックする（ステップＢ８）。
ここで、何れかの登録ターゲットも含まれていなければ、放送終了ではないことを条件に（ステップＢ５）、通常録画のみを行うが（ステップＢ６）、登録ターゲット画像が含まれていることを認識した場合には（ステップＢ８でＹＥＳ）、その直前画像を通常録画メモリ１５から取得してターゲット録画メモリ１８に録画した後（ステップＢ９）、登録ターゲットが含まれている放送画像をターゲット録画メモリ１８に順次録画する（ステップＢ１０）。
【００５２】
以降、登録ターゲット画像が引き続き含まれている場合には（ステップＢ１１）、その間、通常録画メモリ１５内への録画と共に（ステップＢ１２）ターゲット録画メモリ１８への録画を続行するが（ステップＢ１３）、登録ターゲットが居なくなった場合には（ステップＢ１１でＮＯ）、放送終了時刻かをチェックし（ステップＢ５）、放送中であれば、通常録画メモリ１５内への録画を行った後（ステップＢ６）、ターゲット画像の有無をチェックする（ステップＢ７、Ｂ８）。以下、放送終了時刻が検出されるまで上述の動作を繰り返す
【００５３】
図７は、自動録画装置の録画再生動作を示したフローチャートである。
先ず、ＣＰＵ１は、録画再生が指示された場合、「通常再生」か「ターゲット再生」か「ターゲット検索再生」かを選択可能な再生メニュー画面を表示し（ステップＣ１）、このメニュー画面の中から選択指定された再生メニューを判別し（ステップＣ２）、「通常再生」が選択された場合には、通常録画メモリ１５をアクセスして録画内容メニュー画面を表示し（ステップＣ３）、このメニュー画面の中から選択指定された録画内容を通常録画メモリ１５から読み出して再生出力させる（ステップＣ４）。
【００５４】
一方、「ターゲット再生」が選択された場合には（ステップＣ２）、ターゲット登録メモリ１７の内容を読み出して、ターゲット登録メニュー画面を表示し（ステップＣ５）、その中から任意のターゲットが再生対象として選択された場合には（ステップＣ６）、選択ターゲット対応の録画をターゲット録画メモリ１８の中から検索抽出して再生出力させる（ステップＣ７）。なお、その際、全ての登録ターゲットが再生対象として選択することも可能であり、全ての登録ターゲットが選択された場合には、ターゲット録画メモリ１８内の全ての内容を順次読み出して再生出力するようにしている。
【００５５】
また、「ターゲット検索再生」が選択された場合には（ステップＣ２）、ターゲット登録メモリ１７をアクセスして、各登録ターゲット画像を読み出して、メニュー画面内に一覧表示させる（ステップＣ８）。このメニュー画面の中から所望するターゲットが再生対象として選択指定されると（ステップＣ９）、この選択ターゲット画像をターゲット登録メモリ１７から読み出すと共に（ステップＣ１０）、通常録画メモリ１５内の録画像と選択ターゲット画像とを比較しながら選択ターゲットが含まれているかをサーチする画像解析を行い（ステップＣ１１）、選択ターゲット画像の有無をチェックする（ステップＣ１２）。ここで、選択ターゲット画像を検出すると、その直前画像より再生動作を開始し（ステップＣ１３）、以下、録画像の終了まで（ステップＣ１４）ターゲット検索を行いながら画像再生する動作を繰り返す。
【００５６】
以上のように、この第２実施形態における自動録画装置は、録画対象を特定する為のターゲット画像がターゲット登録メモリ１７内に登録されている状態において、ＣＰＵ１は、予約番組の放送画像をこの登録ターゲットに基づいて順次解析した結果、登録ターゲットを含む画像を認識した場合には、この画像を録画対象として抽出して録画するようにしたから、例えば、歌番組において、希望する特定の歌手が出現している部分の画像のみを録画することができ、予約放送が長時間番組であっても、録画量を大幅に削減することが可能となる他に、画像再生時に早送り再生の作業も不要となる。
【００５７】
また、再生対象を特定する為のターゲット画像がターゲット登録メモリ１７内に登録されている状態において、ＣＰＵ１は、録画像をこの登録ターゲットに基づいて解析した結果、登録ターゲットを含む録画像を認識した場合には、この録画像を再生対象として抽出して出力するようにしたから、例えば、希望する歌手が出現している部分画像のみを再生することができ、予約放送が長時間番組であっても、早送り再生作業も不要となる。
その他、この第２実施形態においても、上述第１実施形態と同様の効果を有する。
【００５８】
なお、上述した第２実施形態においては、予約メモリ１６内に予約番組毎に、その開始時刻と終了時刻とを記憶するようにしたが、放送番組のスタート画像（タイトル画像等）を予約情報として登録しておき、放送画像内にこのスタート画像が含まれていることを検出した場合に、予約録画を開始するようにしてもよい。更に、放送番組のエンド画像も含めて登録しておけば、その放送終了時に合わせて録画終了のタイミングも、そのスタート時と同様の手法によって実現することが可能となる。
【００５９】
なお、上述した第１および第２実施形態においては、任意のターゲットを入力して登録するようにしたが、例えば、カメラ装置にあっては、過去に何回も撮影した人物等をその撮影画像の中から解析することによって検出し、頻繁に撮影した人物等を保存対象／再生対象のターゲットとして自動登録するようにしてもよく、また、放送録画装置にあっては、過去に予約した番組に何回も出現する人物等をその放送画像の中から解析することによって検出し、予約番組に頻繁に現れる人物等を保存対象／再生対象のターゲットとして自動登録するようにしてもよい。
【００６０】
また、上述した各実施形態においては、スタンド・アローン・タイプの装置を例示したが、これに限らず、その各構成要素が２以上の筐体に物理的に分離され、通信回線やケーブル等の有線伝送路あるいは電波、マイクロウエーブ、赤外線等の無線伝送路を介してデータを送受信する分散型のシステムを構成するものであってもよい。
【００６１】
一方、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（例えば、ＣＤ−ＲＯＭ、フロッピィデスク、ＲＡＭカード等）を提供するようにしてもよい。
すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、保存対象を特定する為のターゲット画像を予め任意に登録する機能と、登録された登録ターゲットに基づいて一連の画像を順次解析する機能と、画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を保存対象として抽出して記録保存する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００６２】
また、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、再生対象を特定する為のターゲット画像を予め任意に登録する機能と、登録された登録ターゲットに基づいて前記一連の保存画像を解析する機能と、画像解析を行った結果、前記登録ターゲットを含む画像を認識した場合には、この画像を再生対象として抽出して出力する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００６３】
【発明の効果】
第１の発明（請求項１記載の発明）によれば、保存対象を特定する為のターゲット画像（人物画像等）を予め任意に登録しておき、この登録ターゲットに基づいて一連の画像（例えば、撮影画像、放送番組）を順次解析した結果、登録ターゲットを含む画像を認識した場合には、この画像を保存対象として抽出して記録保存するようにしたから、例えば、カメラ装置にあっては、膨大な撮影画像の中から希望する人物等の被写体が写っている画像のみを記録保存することができ、画像保存量を大幅に削減することが可能となる他、画像再生時に不要画像を消去する等の編集作業も不要となり、また、予約した放送番組を自動録画する録画装置にあっては、例えば、歌番組において、希望する特定歌手が出現している部分の画像のみを記録保存することができ、予約放送が長時間番組であっても、録画量を大幅に削減することが可能となる他に、画像再生時に早送り再生の作業も不要となる等、実用性の高い画像処理装置を提供することができる。
第２の発明（請求項３記載の発明）によれば、再生対象を特定する為のターゲット画像を予め任意に登録しておき、この登録ターゲットに基づいて一連の保存画像（例えば、撮影画像、放送番組の録画像）を解析した結果、登録ターゲットを含む画像を認識した場合には、この画像を再生対象として抽出して出力するようにしたから、例えば、カメラ装置にあっては、膨大な撮影画像の中から希望する人物等の被写体が写っている画像のみを再生することができ、画像再生時に不要画像を消去する等の編集作業も不要となり、また、予め指定した放送番組を自動録画する録画装置にあっては、例えば、希望する歌手が出現している部分画像のみを再生することができ、予約放送が長時間番組であっても、早送り再生作業も不要となる等、実用性の高い画像処理装置を提供することが可能となる。
【図面の簡単な説明】
【図１】第１実施形態におけるビデオカメラ装置の基本的構成要素を示したブロック図。
【図２】記憶部２内に設けられているターゲット登録メモリ２１の内容を示した図。
【図３】ビデオカメラ装置において録画モード／再生モードに応じた全体動作を示したフローチャート。
【図４】図３に続く、ビデオカメラ装置の全体動作を示したフローチャート。
【図５】第２実施形態における自動録画装置の基本的な構成要素を示したブロック図。
【図６】自動録画装置の録画動作を示したフローチャート。
【図７】自動録画装置の録画再生動作を示したフローチャート。
【符号の説明】
１、１１  ＣＰＵ
２  記憶装置
４  キー入力部
５  表示部
６  カメラ撮影部
１２  ＴＶチューナ
１３  ＴＶモニタ画面
１５  通常録画メモリ
１６  予約メモリ
１７、２１  ターゲット登録メモリ
１８  ターゲット録画メモリ
【図１】
2004207842.tif 000003
【図２】
2004207842.tif 000004
【図３】
2004207842.tif 000005
【図４】
2004207842.tif 000006
【図５】
2004207842.tif 000007
【図６】
2004207842.tif 000008
【図７】
2004207842.tif 000009