(57)【要約】【課題】  見たい画像を容易に探し出すことが可能な画像音声蓄積装置を提供する。【解決手段】  撮影時に１フレーム毎に所定画像領域の特徴色を作成してディスク１３７に画像ファイルとは別の特徴色ファイルで書き込んでおく。また、画像再生時には表示画面の一部に水平方向又は垂直方向にインジケータを表示し、そのインジケータ内に特徴色ファイルから読み出した各フレームの特徴色を時系列に表示させ、表示画面のサーチ動作に連動してインジケータ内の各フレームの特徴色をスクロールさせる。そうすることで、目的の画像位置を容易に認識でき、サーチ時間を短縮することができる。【選択図】        図１
2007006331.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と、前記撮像手段により撮影した画像情報を情報記録媒体に格納する手段と、撮影時に１フレーム毎に予め決められた画素領域の特徴色を作成する手段と、作成された特徴色を特徴色ファイルとして前記情報記録媒体に記憶させる手段と、画像再生時に表示画面の一部に水平方向又は垂直方向にインジケータを表示し、そのインジケータ内に前記特徴色ファイルからの各フレームの特徴色を時系列に表示させる手段とを備えたことを特徴とする画像音声蓄積装置。
【請求項２】
前記表示手段は、前記表示画面のサーチ動作に連動して前記インジケータの一方の端部から新たに表示するフレームの特徴色を順次表示することにより、前記インジケータ内の特徴色をスクロールさせることを特徴とする請求項１に記載の画像音声蓄積装置。
【請求項３】
前記表示画面のインジケータの略中心位置にカーソルが設けられ、前記表示手段は、前記インジケータのカーソルに位置する特徴色が、現在表示している画像の特徴色となるように表示することを特徴とする請求項１又は２に記載の画像音声蓄積装置。
【請求項４】
前記特徴色作成手段は、撮像画像領域の略全面に渡って、水平方向又は垂直方向に、概略フレーム幅全体に渡る帯状の所定画素領域毎に特徴色を作成することを特徴とする請求項１〜３のいずれか１項に記載の画像音声蓄積装置。
【請求項５】
前記特徴色は、前記帯状の所定画素領域毎の加重平均をとることで算出された平均色であることを特徴とする請求項４に記載の画像音声蓄積装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像或いは音声情報を蓄積する画像音声蓄積装置、特に、画像再生時或いはビジュアルサーチ時等の画像検索技術に関するものである。
【背景技術】
【０００２】
近年、画像音声蓄積装置、例えば、カムコーダ（カメラ付きレコーダ）にはテープ媒体からディスク媒体を用いるものが出回っており、ランダムアクセス性も向上している。通常、このようなカムコーダでは、目的の部分を検索する場合には、画面を見ながら早送り、再生、ビジュアルサーチを繰り返し行うことによって、いわゆる頭出しを行っている。
【０００３】
また、特開平１０−２００８５５号公報には、フレーム画像のサムネイルの画像列を時間順に表示する装置が記載されている（特許文献１）。
【特許文献１】特開平１０−２００８５５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
従来技術では、見たい部分を検索し探し出す場合には、画面に注目しながら何度も早送り、再生、ビジュアルサーチを繰り返す必要があり、面倒な作業であった。
【０００５】
また、特許文献１に記載された技術は、一般的な編集装置に見られる表示方式であるが、サムネイル画像の幅が大きく、時間分解能がとれない問題点があった。
【０００６】
本発明の目的は、画像再生時やビジュアルサーチ時に画面上に各フレームの特徴色を時系列に表示することにより、見たい部分を容易に探し出すことが可能な画像音声蓄積装置を提供することにある。
【課題を解決するための手段】
【０００７】
本発明は、上記目的を達成するため、撮像手段と、前記撮像手段により撮影した画像情報を情報記録媒体に格納する手段と、撮影時に１フレーム毎に予め決められた画素領域の特徴色を作成する手段と、作成された特徴色を特徴色ファイルとして前記情報記録媒体に記憶させる手段と、画像再生時に表示画面の一部に水平方向又は垂直方向にインジケータを表示し、そのインジケータ内に前記特徴色ファイルからの各フレームの特徴色を時系列に表示させる手段とを備えたことを特徴とする。
【０００８】
本発明においては、撮影時に１フレーム毎に所定画像領域の特徴色を作成して情報記録媒体に画像ファイルとは別の特徴色ファイルで書き込んでおく。また、画像再生時には表示画面の一部に水平方向又は垂直方向にインジケータを表示し、そのインジケータ内に特徴色ファイルから読み出した各フレームの特徴色を時系列に表示させる。そして、表示画面のサーチ動作に連動してインジケータ内の各フレームの特徴色をスクロールさせることによって目的の画像を容易に検索可能とする。
【発明の効果】
【０００９】
本発明によれば、表示画面の一部に水平方向又は垂直方向にインジケータを表示し、このインジケータの中にフレーム毎の特徴色を時系列に表示することにより、目的の画像位置を容易に認識でき、サーチ時間を短縮することができる。
【発明を実施するための最良の形態】
【００１０】
次に、発明を実施するための最良の形態について図面を参照して詳細に説明する。図１は本発明に係る画像音声蓄積装置の一実施形態の構成を示すブロック図である。画像音声蓄積装置は、大別してカメラ部１０、システム制御部１１、表示部１２、蓄積部１３から構成されている。
【００１１】
カメラ部１０は、フォーカスレンズ１０１、ＩＲＩＳ１０２、ＣＣＤ１０３、カメラ信号処理部１０４、ＡＤＣ１０５、カメラ制御部１０６から構成されている。
【００１２】
システム制御部１１は、システムコントローラ１１１、モードを切り替えるダイヤルスイッチ１１２、記録を指示する記録ボタン１１３、再生を指示する再生ボタン１１４、フォワードサーチキー１１５、バックワードサーチキー１１６を含んでいる。
【００１３】
表示部１２は、ＬＣＤドライバー１２１、ＶＥＮＣ１２３、ＬＣＤ表示部１２４、ＤＡＣ１２５等を含んでいる。蓄積部１３は、特徴色スーパ１３１、ＣＯＤＥＣ１３２、特徴色作成部１３５、ディスクドライブ１３６を含んでいる。特徴色スーパ１３１とＣＯＤＥＣ１３２内のＤＥＣを含んで特徴色スーパ部１３８とする（図６に示す）。ディスク１３７は交換可能な光ディスク等の記録媒体であり、カメラ部１０によって撮影された画像や音声データ等が書き込まれる。
【００１４】
次に、本実施形態の動作を説明する。
【００１５】
（１）動画記録のスタンバイ動作
まず、ダイヤルスイッチ１１２により「カメラ」を選択すると、システム制御部１１はカメラモードとなり、システムコントローラ１１１からカメラ部１１のカメラ制御部１０６に撮像処理を指示する。カメラ制御部１０６はフォーカスレンズ１０１、ＩＲＩＳ１０２を制御し、ＣＣＤ１０３に映像を写し込む。
【００１６】
ＣＣＤ１０３からの信号はカメラ信号処理回路１０４で適切な信号のレベルに変換された後、ＡＤＣ１０５によりデジタル情報に変換され、表示部１２と蓄積部１３に送られる。表示部１２では、入力された信号をＬＣＤドライバー１２１によりＬＣＤ用の電気信号に変換し、ＬＣＤ表示部１２４上にカメラ部１０によって撮影された映像を表示する。
【００１７】
（２）動画記録動作
ここで、記録ボタン１１３を押下すると、システム制御部１１のシステムコントローラ１１１はＣＯＤＥＣ１３２にエンコード開始指示を出す。これを受けて、ＣＯＤＥＣ１３２はカメラ部１０のＡＤＣ１０５から送られてくる動画情報をＭＰＥＧ等の動画圧縮方式を用いて圧縮し、ディスクドライブ１３６に出力する。更に、システムコントローラ１１１はディスクドライブ１３６に記録開始を指示する。
【００１８】
この時、システムコントローラ１１１は特徴色作成部１３５に特徴色作成を指示し、特徴色作成部１３５は詳しく後述するように特徴色をフレーム毎に作成し、ディスクドライブ１３６に送る。ディスクドライブ１３６は圧縮された動画情報とは別ファイルで特徴色をディスク１３７に記録する。
【００１９】
次に、図２と図３を用いて特徴色作成部１３５の特徴色作成方法を説明する。図２は記録時の動作を示すフローチャートである。まず、記録ボタン１１３が押下され、撮影が開始されると（Ｓ２０１）、特徴色作成部１３５は内部の図示しないストライプカウンタＮを０に初期化する（Ｓ２０２）。次に、図３に示すように画面表示部の最上部から８画素下の５１２×１６画素に関して加重平均をとり、後述する特徴色スーパ部１３１内の特徴色ＲＡＭに書き込む（Ｓ２０３）。
【００２０】
図３は特徴色が画面中央寄りの平均色である場合の例を示す。特徴色とは、図３に示すように画面上の特定領域の平均色（いわばその領域の代表色）であり、後述するようにその特徴色に基づいて目的の画面を探し出すようにするものである。図３のＡ部は後述するインジケータに表示する場合の１フレームの特徴色を示す。インジケータ内に１フレーム当たり横幅１画素、縦方向幅３０画素で表示する。縦方向幅３０画素は図２で説明したようにＮ＝０〜Ｎ＝２９の各領域の特徴色に対応する。
【００２１】
次いで、ストライプカウンタＮ＝Ｎ＋１（Ｎ＝１）とし（Ｓ２０４）、Ｎ＝２９であるかを判定する（Ｓ２０５）。この時はＮ＝１であるのでＳ２０３に戻り、図３に示すように前回領域の次の領域（５１２×１６画素）に関して加重平均をとり、同様に特徴色ＲＡＭに書き込む。
【００２２】
以下、図３に示すように順に５１２×１６画素づつ加重平均をとり、特徴色ＲＡＭに書き込んでいく。Ｎ＝２９の画面最下部における３０番目の領域を加重平均をとり特徴色ＲＡＭに書き込むと、ディスク１３７の特徴色ファイルに１フレーム分、合計３０個分の平均値の書き込みが終了する（Ｓ２０６）。このようにしてＳ２０７で撮影が終了するまでＳ２０２〜Ｓ２０６の処理を繰り返し行うことにより、１フレーム毎に特徴色を作成し、特徴色ＲＡＭに書き込む。
【００２３】
（３）動画再生動作
次に、動画再生時の動作を図４のフローチャートを用いて説明する。まず、図１のダイヤルスイッチ１１２を「ビデオ」とし、再生する動画ファイルを選択して再生ボタン１１４を押下すると、システムコントローラ１１１は各部を制御し、選択された動画ファイルとそれに関連する特徴色ファイルをディスク１３７から読み込む。また、その動画ファイルを蓄積部１３のＣＯＤＥＣ１３２によってデコードし再生する。
【００２４】
（４）フォワード方向ビジュアルサーチ動作
ここで、図１のフォワードサーチキー１１５を押下すると（Ｓ４０１）、フォワード方向ビジュアルサーチモードとなり、前後のフレームの特徴色を表示画面にインジケータとしてスーパインポーズしながら、実際の時間よりも２倍から数倍のフレームレートで再生表示する。
【００２５】
具体的には、システムコントローラ１１１は１フレームに表示する特徴色情報を特徴色ファイルから特徴色スーパ部１３８に転送し、表示画面にインジケータとして表示する（Ｓ４０２）。図５（ａ）は表示画面のインジケータ内に特徴色を表示した状態を示す。
【００２６】
この例では表示画面の一部に水平方向にインジケータを表示している。インジケータの左端は、例えば、２５０フレーム前の特徴色、右端は２５０フレーム後の特徴色とする。インジケータ内の特徴色は上述のように１フレーム当たり横幅１画素、縦方向の幅は３０画素であり、図５（ａ）の例ではインジケータ内に５００フレーム分の特徴色が時系列に表示されている。
【００２７】
また、図中に示すカーソルは画面中心位置に設けられ、システムコントローラ１１１は現在表示画面に表示している画像の特徴色が画面中心のカーソルの位置にくるようにインジケータの特徴色を表示する。スーパインポーズの方法については詳しく後述する。
【００２８】
次に、システムコントローラ１１１はフォワードサーチキー１１５のサーチ動作に連動して特徴色の新たに表示する部分を特徴色ファイルから特徴色スーパ部１３８の特徴色ＲＡＭに転送する（Ｓ４０３）。図５（ａ）のインジケータ内の破線部はこの新たに表示するフレームの特徴色を示す。
【００２９】
また、サーチフレーム数に合わせてインジケータをスクロールし、新たに表示する特徴色を表示画面にスーパインポーズする（Ｓ４０４）。これは、図５（ｂ）の破線部に相当する。このようにしてフォワードサーチキー１１５のサーチ動作に連動してＳ４０３、Ｓ４０４の処理を行うことで、インジケータの右端側から次のフレームの特徴色、その次のフレームの特徴色というように順次特徴色を表示し、その結果、サーチ動作に連動してインジケータ内の特徴色は図５の左方向にスクロールする。Ｓ４０５でサーチ動作終了後、Ｓ４０６で再生終了すると、すべての再生処理を終了する。
【００３０】
ここで、図５（ａ）は見たい画像の手前をサーチ中の表示画面とし、この状態から、図５（ｂ）に示すようにカーソル（画面中心部）におけるインジケータ上部が黄色に輝くまでサーチすれば（インジケータに聖火ランナーの聖火の色が現れる）、目的の聖火ランナーが登場する画面を容易に頭出しすることが可能となる。図５（ｃ）は見たい画像の後ろをサーチ中の表示画面を示す。
【００３１】
（５）バックワード方向ビジュアルサーチ動作
図１のバックワードサーチキー１１６を押下すると、実再生速度の２〜数倍のフレームレートで逆方向再生を行うバックワード方向サーチモードとなる。この場合には、表示画面のインジケータのスクロール方向がフォワード方向サーチ動作とは逆方向の右方向となるだけで、基本的な動作は上述のフォワード方向サーチ動作の場合と同様である。
【００３２】
なお、インジケータの表示に関して、１フレームを１画素幅で表示すると説明したが、その場合、例えば、水平方向に５１２画素のインジケータを表示したとすると、インジケータの幅は、約５１２／６０＝１７．７秒分となる。更に、多くの範囲を表示する場合には、数本毎の間引き表示をしたり、或いは平均をとって表示する等の方法がある。
【００３３】
（６）スーパインポーズの方法
次に、ＭＰＥＧ動画像の中にインジケータ画像をスーパインポーズする方法を図６、図７を用いて説明する。図６は図１の特徴色スーパ部１３８の構成を示すブロック図、図７はスーパインポーズ時における画面アドレスを説明する図である。
【００３４】
まず、図７において、アドレス（ＭＸｍｉｎ、ＭＹｍｉｎ）は全画面表示におけるＭＰＥＧ画像の左上画像アドレスであり、一般的には（０、０）である。また、（ＭＸｍａｘ、ＭＸｍａｘ）は右下画像アドレスであり、ＮＴＳＣ方式の場合には、（７１９、４７９）であるが、周辺部に縁取りや文字表示領域を入れることもあるのでこの限りではない。
【００３５】
また、この画面表示領域の一部に水平方向に矩形の特徴色表示領域（インジケータ）が設けられている。アドレス（ＣＸｍｉｎ、ＣＹｍｉｎ）は特徴色表示領域の左上アドレス、アドレス（ＣＸｍａｘ、ＣＹｍａｘ）は特徴色表示領域の右下アドレスである。
【００３６】
次に、図６において、８０１は再生マルチプレクサ、８０２は上述のように特徴色を記憶する特徴色ＲＡＭ、８０３は特徴色ＲＡＭ８０２を制御する特徴色ＲＡＭ制御部、８０４は図１におけるＣＯＤＥＣ１３２内のＤＥＣを示す。太線は再生時の信号の経路を示す。
【００３７】
ディスクドライブ１３６により再生されたＭＰＥＧ画像等の動画データはＣＯＤＥＣ１３２によりデコードされ、再生マルチプレクサ８０１に供給される。表示画面上にインジケータのスーパインポーズがなく、動画のみが表示されている場合には、システムコントローラ１１１はマルチプレクサ８０１にＣＯＤＥＣ１３２からの信号をＬＣＤドライバー１２１やＤＡＣ１２５に出力するように選択信号ＣＶＡＬＩＤをＬにネゲートしておく。
【００３８】
次に、システムコントローラ１１１は上述のように表示画面にインジケータのスーパインポーズを行う条件になると、表示画面の画像アドレス（ｘ、ｙ）を読み出すタイミングが図７に示すようにインジケータをインポーズする領域に入った場合、即ち、画面中央下部の矩形の特徴色表示領域のタイミングで選択信号ＣＶＡＬＩＤをＨにアサートする。次式はインジケータをインポーズする領域のアドレスを示す。
【００３９】
ＣＸｍｉｎ≦ｘ≦ＣＸｍａｘ  且つ、  ＣＹｍｉｎ≦ｙ≦ＣＹｍａｘ
そうすると、再生マルチプレクサ８０１は選択信号ＣＶＡＬＩＤがＨの期間だけ特徴色ＲＡＭ８０２の出力をＬＣＤドライバー１２１とＤＡＣ１２５に出力する。これによって、図７の特徴色表示領域のみが特徴色ＲＡＭ８０２の出力に切り替えられ、上述のようなスーパインポーズを実現できる。
【００４０】
図８は本発明の他の実施形態のインジケータの表示形態を示す。図８ではインジケータを横棒の形式ではなく、垂直方向に縦棒の形式で表示している。この実施形態では、図３とは逆に垂直方向に所定画素領域毎に特徴色を作成し、表示画面に垂直方向にインジケータを表示する。特徴色のスクロール方向は縦方向になる。それ以外の装置の構成、動作は図１の実施形態と同様である。
【図面の簡単な説明】
【００４１】
【図１】本発明の一実施形態の構成を示すブロック図である。
【図２】図１の実施形態の記録時における特徴色作成方法を説明するフローチャートである。
【図３】特徴色作成方法を説明する図である。
【図４】図１の実施形態の再生時の動作を説明するフローチャートである。
【図５】再生時に特徴色を表示画面にインジケータとして表示する動作を説明する図である。
【図６】特徴色スーパ部の一例を示すブロック図である。
【図７】スーパインポーズ時の表示画面アドレスを説明する図である。
【図８】本発明の他の実施形態のインジケータの表示形態を示す図である。
【符号の説明】
【００４２】
１０  カメラ部
１１  システム制御部
１２  表示部
１３  蓄積部
１０１  フォーカスレンズ
１０２  ＩＲＩＳ
１０３  ＣＣＤ
１０４  カメラ信号処理部
１０５  ＡＤＣ
１０６  カメラ制御部
１１１  システムコントローラ
１１２  ダイヤルスイッチ
１１３  記録ボタン
１１４  再生ボタン
１１５  フォワードサーチキー
１１６  バックワードサーチキー
１２１  ＬＣＤドライバー
１２３  ＶＥＮＣ
１２４  ＬＣＤ表示部
１２５  ＤＡＣ
１３１  特徴色スーパ
１３２  ＣＯＤＥＣ
１３５  特徴色作成部
１３６  ディスクドライブ
１３７  ディスク
１３８  特徴色スーパ部
８０１  再生マルチプレクサ
８０２  特徴色ＲＡＭ
８０３  特徴色ＲＡＭ制御部
８０４  ＤＥＣ
【図１】
2007006331.tif 000003
【図２】
2007006331.tif 000004
【図３】
2007006331.tif 000005
【図４】
2007006331.tif 000006
【図５】
2007006331.tif 000007
【図６】
2007006331.tif 000008
【図７】
2007006331.tif 000009
【図８】
2007006331.tif 000010