(57)【要約】【課題】音声データに対して画像データを付加して記録可能とする。【解決手段】撮像装置は、撮像手段と、記録媒体から音声データを再生する音声再生手段と、前記音声データの再生中における任意のタイミングで画像データの付加を指示する指示手段と、前記指示手段の指示に応じて前記音声データの再生を一時停止すると共に、この一時停止後に前記撮像手段により撮影された画像データを前記指示手段の指示に応じたタイミングで再生するための再生手順を示すタイミング設定データを生成する制御手段と、前記タイミング設定データと前記画像データとを前記記録媒体に記録する記録手段とを備える。【選択図】      図３
2005020191.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と、
記録媒体から音声データを再生する音声再生手段と、
前記音声データの再生中における任意のタイミングで画像データの付加を指示する指示手段と、
前記指示手段の指示に応じて前記音声データの再生を一時停止すると共に、この一時停止後に前記撮像手段により撮影された画像データを前記指示手段の指示に応じたタイミングで再生するための再生手順を示すタイミング設定データを生成する制御手段と、
前記タイミング設定データと前記画像データとを前記記録媒体に記録する記録手段とを備える撮像装置。
【請求項２】
前記撮像手段は静止画データ及び動画データを出力することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記制御手段は、前記画像データの記録が終了したことに応じて、再び前記音声データの再生を開始することを特徴とする請求項１記載の撮像装置。
【請求項４】
前記タイミング設定データは、前記音声データの先頭からの経過時間情報及び、前記画像データのファイル名情報を含むことを特徴とする請求項１記載の撮像装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は撮像装置に関し、特に音声信号と共に画像信号を記録する装置に関する。
【０００２】
【従来の技術】
この種の装置として、従来、デジタルカメラが知られている。
【０００３】
デジタルカメラでは、本体にマイクとスピーカを装備し、静止画のみならず動画像と音声の撮影機能をもつ製品も増えている。このようなデジタルカメラの中には、特許文献１のように、マイクとスピーカを利用し、音声のみの録音・再生機能を持ったものもあり、アフレコや音声メモといった機能を実現している。
【０００４】
【特許文献１】
特開平１０−４０６５１号公報
【０００５】
【発明が解決しようとする課題】
しかし、従来、デジタルカメラの持つスピーカとマイクの機能を使い、すでに撮影済みの画像に対して音声を付加するアフレコ機能はあったが、すでに録音した音声データに対して画像データを付加する機能はなかった。
【０００６】
本発明はこの様な問題を解決し、音声データに対して画像データを付加して記録可能とすることを目的とする。
【０００７】
【課題を解決するための手段】
前記目的を達成するため、本発明においては、撮像手段と、記録媒体から音声データを再生する音声再生手段と、前記音声データの再生中における任意のタイミングで画像データの付加を指示する指示手段と、前記指示手段の指示に応じて前記音声データの再生を一時停止すると共に、この一時停止後に前記撮像手段により撮影された画像データを前記指示手段の指示に応じたタイミングで再生するための再生手順を示すタイミング設定データを生成する制御手段と、前記タイミング設定データと前記画像データとを前記記録媒体に記録する記録手段とを備える構成とした。
【０００８】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を説明する。
【０００９】
図１は、本発明が適用されるデジタルカメラの構成を示す図である。
【００１０】
図１において、１００はデジタルカメラである。１０は撮影レンズ、１２は絞り機能を備えるシャッター、１４は光学像を電気信号に変換する撮像素子、１６は撮像素子１４のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。
【００１１】
１８は撮像素子１４、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
【００１２】
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御部４０、測距制御部４２に対して制御を行う、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行っている。さらに、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００１３】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００１４】
２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＴＦＴ  ＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダ機能を実現することが可能である。また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合には画像処理装置１００の電力消費を大幅に低減することが出来る。
【００１５】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。これにより、複数枚の静止画像を連続して撮影する連射撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００１６】
３２は適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
【００１７】
４０は絞り機能を備えるシャッター１２を制御する露光制御部であり、フラッシュ４８と連携することによりフラッシュ調光機能も有する。４２は撮影レンズ１０のフォーカシングを制御する測距制御部、４４は撮影レンズ１０のズーミングを制御するズーム制御部、４６はバリアである保護手段１０２の動作を制御するバリア制御部である。４８はフラッシュであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。露光制御部４０、測距制御部４２はＴＴＬ方式を用いて制御されており、撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御部４０、測距制御部４２に対して制御を行う。
【００１８】
５０は画像処理装置１００全体を制御するシステム制御回路、５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。５４はシステム制御回路５０でのプログラムの実行に応じて、文字、画像、音声等を用いて動作状態やメッセージ等を表示する液晶表示装置、スピーカ等の表示部であり、画像処理装置１００の操作部近辺の視認し易い位置に単数或いは複数個所設置され、例えばＬＣＤやＬＥＤ、発音素子等の組み合わせにより構成されている。また、表示部５４は、その一部の機能が光学ファインダ１０４内に設置されている。表示部５４の表示内容のうち、ＬＣＤ等に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、ブザー設定表示、時計用電池残量表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及び２１０の着脱状態表示、通信Ｉ／Ｆ動作表示、日付・時刻表示、等がある。また、表示部５４の表示内容のうち、光学ファインダ１０４内に表示するものとしては、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示、等がある。
【００１９】
５６は電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。６０、６２、６４、６６、６８及び７０は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００２０】
ここで、これらの操作手段の具体的な説明を行う。
【００２１】
６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することが出来る。６２はシャッタースイッチＳＷ１で、不図示のシャッターボタンの操作途中でＯＮとなり、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始を指示する。６４はシャッタースイッチＳＷ２で、不図示のシャッターボタンの操作完了でＯＮとなり、撮像素子１２から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行い、記録媒体２００或いは２１０に画像データを書き込む記録処理という一連の処理の動作開始を指示する。６６は画像表示ＯＮ／ＯＦＦスイッチで、画像表示部２８のＯＮ／ＯＦＦを設定することが出来る。
【００２２】
この機能により、光学ファインダ１０４を用いて撮影を行う際に、ＴＦＴ  ＬＣＤ等から成る画像表示部への電流供給を遮断することにより、省電力を図ることが可能となる。
【００２３】
６８はクイックレビューＯＮ／ＯＦＦスイッチで、撮影直後に撮影した画像データを自動再生するクイックレビュー機能を設定する。なお、本実施例では特に、画像表示部２８をＯＦＦとした場合におけるクイックレビュー機能の設定をする機能を備えるものとする。７０は各種ボタンやタッチパネル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等がある。
【００２４】
８０は電源制御部で、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されており、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。８２はコネクタ、８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源である。
【００２５】
９０及び９４はメモリカードやハードディスク等の記録媒体とのインターフェース、９２及び９６はメモリカードやハードディスク等の記録媒体と接続を行うコネクタ、９８はコネクタ９２及び或いは９６に記録媒体２００或いは２１０が装着されているか否かを検知する記録媒体着脱検知部である。
【００２６】
なお、本実施例では記録媒体を取り付けるインターフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインターフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインターフェース及びコネクタを組み合わせて備える構成としても構わない。インターフェース及びコネクタとしては、ＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成して構わない。さらに、インターフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成した場合、ＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、Ｐ１２８４カード、ＳＣＳＩカード、ＰＨＳ等の通信カード、等の各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことが出来る。
【００２７】
１０２は、画像処理装置１００のレンズ１０を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護部である。１０４は光学ファインダであり、画像表示部２８による電子ファインダ機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダ１０４内には、表示部５４の一部の機能、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示などが設置されている。１１０は通信手段で、ＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、Ｐ１２８４、ＳＣＳＩ、モデム、ＬＡＮ、無線通信、等の各種通信機能を有する。１２０はマイク、１２２スピーカで、音声の録音・再生が可能である。１１２は通信手段１１０により画像処理装置１００を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。２００はメモリカードやハードディスク等の記録媒体である。
【００２８】
記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、画像処理装置１００とのインターフェース２０４、画像処理装置１００と接続を行うコネクタ２０６を備えている。２１０はメモリカードやハードディスク等の記録媒体である。記録媒体２１０は、半導体メモリや磁気ディスク等から構成される記録部２１２、画像処理装置１００とのインターフェース２１４、画像処理装置１００と接続を行うコネクタ２１６を備えている。
【００２９】
図２は、デジタルカメラ１００の斜視図である。
【００３０】
２０１はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、動画撮影モード等の各機能モードを切り替え設定することができる。２０２はシャッターボタンを示す。カメラの撮影画像は画像表示部に表示されるが、これは通常ＬＣＤ（液晶ディスプレイ）を使用しているので、以下、ＬＣＤと称する。静止画像及び或るいは動画像の再生等のための画面もこのＬＣＤ２０５に表示される。２０４はＳＥＴボタンで、設定メニューの決定等に使用する。２０３は削除ボタンで、画像の削除を指定することができる。２−６は左右ボタンで、再生時の画像送りや設定の変更等に使用する。
【００３１】
記録媒体に記録された画像に対して、音声データをつけることもできる。画像を再生中に２０８のＭＩＣボタンを押して録音を行い、画像データに音声データを付加することができる。また、録音のみも可能であり、一例として録音を行うための録音モードがある。録音モードでは、シャッターボタン２０２を押すと録音を開始し、シャッターボタンがもう一度押されると録音を停止する。
【００３２】
再生モードでは、画像の閲覧や音声の再生を行うことができる。ＬＣＤ２０５には画像が再生され、左右ボタン２０６で記録された画像を順に送りながら再生することができる。画像データに音声データが付加されている場合は、その画像を再生中にＳＥＴボタン２０４を押すことにより、音声データを再生することができる。
【００３３】
また、音声データのみの場合は、画像データは一例として音声データであることを示す印のみが表示されるが、それを再生中にＳＥＴボタン２０４を押すことにより、音声データを再生することができる。
【００３４】
図４は、記憶媒体に記録されるデータのディレクトリ構造の一例を示す。
【００３５】
撮影した画像データはＤＣＩＭというディレクトリ下の、＊＊＊ＣＡＮＯＮという画像データファイルを示すディレクトリに置かれ、ＩＭＧ＿＊＊＊＊．ＪＰＧは、ＪＰＥＧ（国際標準規格）に従う圧縮画像データファイルで、ＭＶＩ＿＊＊＊＊．ＡＶＩは、ＭｏｔｉｏｎＪＰＥＧで圧縮された動画像ファイルを各々示す。本例では音声ファイルを一例としてＷＡＶファイルとし、ＳＮＤ＿＊＊＊＊．ＷＡＶは音声ファイルであり、ＳＮＤ＿＊＊＊＊．ＤＡＴは、音声ファイルＳＮＤ＿＊＊＊＊．ＷＡＶに設定された画像とそのタイミングを示すデータを記録する。
【００３６】
本形態では一例として、＊＊＊ＣＡＮＯＮは”９９９”まで記憶可能で、ＩＭＧ＿＊＊＊＊．ＪＰＧ（または、ＩＭＧ＿＊＊＊＊．ＣＲＷ、または、ＭＶＩ＿＊＊＊＊．ＡＶＩ）は、それぞれ各＊＊＊ＣＡＮＯＮ毎に１００個まで記録可能とする。
【００３７】
図５は、ＳＮＤ＿＊＊＊＊．ＤＡＴに記憶されているデータを示す。
【００３８】
図５のタイミングデータは、画像データを再生するべき音声データの先頭からのタイミングを示してしている。例えば、音声データの先頭ではＩＭＧ＿０００３．ＪＰＧを再生し、先頭から２５秒後にはＩＭＧ＿００５．ＪＰＧを再生し、先頭から１分３０後にはＭＶＩ＿０１０２．ＡＶＩを再生することを示している。静止画像だけでなく、動画像も設定することが可能である。
【００３９】
図３は、音声データの任意のタイミングで再生すべき画像を設定する処理の流れを示すフローチャートである。
【００４０】
ある音声データについて、まず、ユーザは音声の再生を行う。ユーザは音声再生中に画像を設定したいタイミングでＭＩＣボタンを押し、画像の設定要求を行う（Ｓ３−０２）。カメラは音声再生を一時停止し（Ｓ３−０３）、ユーザは撮影を行う（Ｓ３−０４）。ユーザが撮影を完了すると、もし、すでにタイミング設定ファイルがなかった場合（Ｓ３−０５）は設定ファイルを新規作成する（Ｓ３−０６）。そして、撮影した画像のファイル名とタイミングを設定ファイル（ＳＮＤ＿＊＊＊＊．ＤＡＴ）に書き込む（Ｓ３−０７）。そして、音声再生を再開する（Ｓ３−０８）。
【００４１】
一つの音声データに対して、複数の画像を付加することができ、音声ファイルが再生終了する（Ｓ３−０１）までに再度ＭＩＣボタンを押せば、そのタイミングで画像を撮影し、付加することができる。
【００４２】
また、すでに撮影済の画像に対して音声データを付加する場合にも、同様に、ＳＮＤ＿＊＊＊＊．ＤＡＴを作成し、０秒後にＩＭＧ＿＊＊＊＊．ＪＰＧを設定したものとし、この音声データを再生しながら、新たに任意のタイミングで画像を撮影し、音声データに付加することも可能である。
【００４３】
図６は、この様に画像データが付加された音声データの再生時の処理を示すフローチャートである。
【００４４】
ユーザが音声ファイル再生を指示すると、対応するタイミング設定ファイルＳＮＤ＿＊＊＊＊．ＤＡＴを確認しながら音声データを再生し、タイミング設定ファイルに指定されたタイミングになると（Ｓ６−０２）、設定されている画像を表示する（Ｓ６−０３）。この処理を音声ファイル再生終了まで繰り返す（Ｓ６−０１）。
【００４５】
例えば、具体的に図５のようなタイミング設定ファイルが付加された音声データを再生する場合、音声データ開始と同時にＩＭＧ＿０００３．ＪＰＧを再生して表示する。或いは音声開始後０秒後のタイミングで記録されている画像は代表画像として、音声を再生しなくても再生モードで画像を送るときにその音声ファイルを表示した時に表示される画像とし、音声ファイルに次に設定された画像が表示されるまでそのまま表示しつづけるようにしてもよい。そして、２５秒後にはＩＭＧ＿００５．ＪＰＧを再生して表示する。１分３０後には動画であるＭＶＩ＿０１０２．ＡＶＩが設定されているのでこの動画を再生する。動画は音声を持っていても、現在再生中の音声を優先し、動画は音声抜きで再生するようにしてもよい。
【００４６】
このような音声ファイルと設定された画像の表示は、カメラ本体のＬＣＤ表示だけでなく、パソコン上でも同様な処理を行うようなアプリケーションを提供することも可能である。
【００４７】
なお、音声データ内の任意のタイミングで画像を設定するとき、すでに記録済みの画像データから設定する画像を選択し設定することも可能である。
【００４８】
【発明の効果】
以上説明したように、本発明によれば、音声データに対して任意のタイミングで画像データを付加して再生することが可能となる。
【図面の簡単な説明】
【図１】本発明が適用されるデジタルカメラの構成を示す図である。
【図２】デジタルカメラの外観図である。
【図３】撮影時の動作を示すフローチャートである。
【図４】ディレクトリ構造を示す図である。
【図５】タイミング設定データを示す図である。
【図６】音声再生時の動作を示すフローチャートである。
【図１】
2005020191.tif 000003
【図２】
2005020191.tif 000004
【図３】
2005020191.tif 000005
【図４】
2005020191.tif 000006
【図５】
2005020191.tif 000007
【図６】
2005020191.tif 000008