(57)【特許請求の範囲】
【請求項１】
画像データと第１の音声データとを関連付けて保存する保存手段と、
音声を集音し、電気信号に変換する集音手段と、
音声を集音するときに操作される操作手段と、
前記画像データを選択する選択手段と、
前記保存手段を制御し、前記集音手段により集音された音声に対応する第２の音声データを、前記選択手段により選択された前記画像データに関連付けられた前記第１の音声データに追加して保存させる制御手段と、
前記画像データ、前記第１の音声データ、および前記第２の音声データからなるデータセットに属するすべての音声データの録音時間の総和を計算する計算手段と、
前記第１の音声データが再生される場合、前記第１の音声データの再生に続いて前記第２の音声データを再生するように制御する再生制御手段と
を備えることを特徴とする情報処理装置。
【請求項２】
被写体からの光を集光する集光手段と、
前記集光手段により集光された前記被写体からの光を電気信号に変換する光電変換手段と、
前記電気信号を前記画像データに変換する変換手段とをさらに備える
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
所定の面積の押圧検出部を有し、押圧された位置を表す信号を出力する検出手段と、
前記検出手段により出力された信号を線画データに変換する第２の変換手段とをさらに備え、
前記保存手段は、さらに前記線画データを保存し、前記線画データが保存されてから第１の時間が経過するまでに前記集音手段により集音された音声に対応する第３の音声データを前記線画データと関連付けて保存し、
前記選択手段は、さらに前記線画データを選択し、
前記制御手段は、さらに前記保存手段を制御し、前記集音手段により集音された音声に対応する第４の音声データを、前記選択手段により選択された前記線画データに関連付けられた前記第３の音声データに追加して保存させ、
前記再生制御手段は、前記第３の音声データが再生される場合、前記第３の音声データの再生に続いて前記第４の音声データを再生するように制御する
ことを特徴とする請求項１または請求項２に記載の情報処理装置。
【請求項４】
前記保存手段に保存されている前記データセットのリストを表示する表示手段と、
前記計算手段により計算された前記録音時間の総和を前記表示手段に表示させる表示制御手段とをさらに備える
ことを特徴とする請求項１乃至請求項３のいずれかに記載の情報処理装置。
【請求項５】
前記制御手段は、前記第２の音声データを追加して前記保存手段に保存させるとき、前記データセットの時間情報であって、前記データセットに属する音声データの録音日時が含まれる時間情報に、追加して保存される前記第２の音声データの録音日時が含まれるように、前記時間情報を更新する
ことを特徴とする請求項１乃至請求項４のいずれかに記載の情報処理装置。
【請求項６】
前記集音手段により変換された電気信号を、デジタルデータである音声データに変換する第３の変換手段をさらに備える
ことを特徴とする請求項１乃至請求項５のいずれかに記載の情報処理装置。
【請求項７】
前記選択手段は、新たに画像データが保存された場合、第２の時間だけ、その画像データを選択する
ことを特徴とする請求項１乃至請求項６のいずれかに記載の情報処理装置。
【請求項８】
保存手段が画像データと第１の音声データとを関連付けて保存する保存ステップと、
集音手段が音声を集音し、電気信号に変換する集音ステップと、
操作手段が音声を集音するときに操作される操作ステップと、
選択手段が前記画像データを選択する選択ステップと、
制御手段が前記保存ステップでの動作を制御し、前記集音ステップで集音された音声に対応する第２の音声データを、前記選択ステップで選択された前記画像データに関連付けられた前記第１の音声データに追加し、前記画像データ、前記第１の音声データ、および前記第２の音声データからなるデータセットに属するすべての音声データの録音時間の総和を計算して前記保存ステップで保存させる制御ステップと、
前記第１の音声データが再生される場合、再生制御手段が前記第１の音声データの再生に続いて前記第２の音声データを再生するように制御する再生制御ステップと
を備えるプログラムが記録されていることを特徴とする記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、情報処理装置および記録媒体に関し、特に、関連する複数の種類のデータを保存、管理する情報処理装置および記録媒体に関する。
【０００２】
【従来の技術】
最近の半導体技術の進歩に伴い、所謂電子カメラやビデオカメラなどのデジタルデータとして画像を記録する撮像装置が普及している。また、個人情報やスケジュールを管理する電子手帳なども普及している。
【０００３】
電子手帳には、ユーザによる押圧操作を検出する所謂タッチタブレットが設けられているものがあり、そのような装置においては、ユーザにより手書きで入力されたメモなどの線画を記録することができる。
【０００４】
さらに、画像などに付随させて音声を記録する装置もある。
【０００５】
【発明が解決しようとする課題】
しかしながら、画像に付随させて音声を記録した場合、その画像に付随する音声をさらに追加すると、その音声は、既に記録されている音声データとは別の音声データとして記録されるので、その画像に付随する音声を再生するとき、２つの音声データを選択して再生させる必要があり、操作が煩雑になるという問題を有している。
【０００６】
本発明は、そのような状況に鑑みてなされたもので、追加した音声のデータを、画像のデータが属するデータセットのデータとして順次記録することにより、音声を再生する場合、データセットを指定する操作だけで、そのデータセットに属する音声データに対応する音声を連続して再生することができるようにするものである。
【０００７】
【課題を解決するための手段】
請求項１に記載の情報処理装置は、画像データと第１の音声データとを関連付けて保存する保存手段と、音声を集音し、電気信号に変換する集音手段と、音声を集音するときに操作される操作手段と、画像データを選択する選択手段と、保存手段を制御し、集音手段により集音された音声に対応する第２の音声データを、選択手段により選択された画像データに関連付けられた第１の音声データに追加して保存させる制御手段と、画像データ、第１の音声データ、および第２の音声データからなるデータセットに属するすべての音声データの録音時間の総和を計算する計算手段と、第１の音声データが再生される場合、第１の音声データの再生に続いて第２の音声データを再生するように制御する再生制御手段とを備えることを特徴とする。
【０００８】
請求項８に記載の記録媒体に記録されているプログラムは、保存手段が画像データと第１の音声データとを関連付けて保存する保存ステップと、集音手段が音声を集音し、電気信号に変換する集音ステップと、操作手段が音声を集音するときに操作される操作ステップと、選択手段が画像データを選択する選択ステップと、制御手段が保存ステップでの動作を制御し、集音ステップで集音された音声に対応する第２の音声データを、選択ステップで選択された画像データに関連付けられた第１の音声データに追加し、画像データ、第１の音声データ、および第２の音声データからなるデータセットに属するすべての音声データの録音時間の総和を計算して保存ステップで保存させる制御ステップと、第１の音声データが再生される場合、再生制御手段が第１の音声データの再生に続いて第２の音声データを再生するように制御する再生制御ステップとを備えることを特徴とする。
【００１１】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。図１および図２は、本発明の情報処理装置を応用した電子カメラの一構成例を示す斜視図である。この電子カメラ１においては、被写体を撮影するときに、被写体に向けられる面が面Ｘ１とされ、ユーザ側に向けられる面が面Ｘ２とされている。面Ｘ１の上端部には、被写体の撮影範囲の確認に用いられるファインダ２、被写体からの光を集光する撮影レンズ３（集光手段）、および、被写体を照明する光を適宜発光する発光部（ストロボ）４が設けられている。
【００１２】
さらに、面Ｘ１には、ストロボ４を発光させて撮影を行う場合に、所謂赤目を軽減するために、ストロボ４が発光する前に発光する赤目軽減ランプ１５、被写体周辺の測光を行う測光素子１６、測色を行う測色素子１７、および、被写体までの距離を測定する測距素子１８が設けられている。
【００１３】
一方、面Ｘ１に対向する面Ｘ２の上端部（面Ｘ１のファインダ２、撮影レンズ３、発光部４などが形成されている上端部に対応する部分）には、ファインダ（接眼部）２、および、この電子カメラ１に記録されている音声を出力するスピーカ５が設けられている。また、面Ｘ２には、液晶ディスプレイ（ＬＣＤ）６（表示手段）および操作キー７が配置されている。さらに、ＬＣＤ６の表面には、ペン型指示部材での押圧操作により指示された位置に対応する位置情報を出力するタッチタブレット６Ａ（検出手段）が配置されている。
【００１４】
このタッチタブレット６Ａは、ガラス、樹脂などの透明な材料によって形成されており、ユーザは、タッチタブレット６Ａを介して、ＬＣＤ６に表示される画像を観察することができる。
【００１５】
操作キー７は、タッチタブレット６Ａの一部と、各キーに対応する印刷面で構成され、記録されているデータをＬＣＤ６に表示させる場合や撮像動作を行わせる場合などにおけるユーザによる押圧操作を検出し、その操作に対応する信号をＣＰＵ３９（選択手段、制御手段、第２の変換手段、表示制御手段）（図６）に出力するようになされている。
【００１６】
操作キー７のうちのメニューキー７Ａは、各種動作を選択するためのメニュー画面をＬＣＤ６に表示させる場合に操作されるキーである。例えば、メニュー画面においては、記録されている情報の一覧の表示や、各種設定を行う動作などの選択するための項目が表示される。エンターキー７Ｂは、ユーザによって選択された記録情報（画像データや音声データなど）を再生するときや、撮像動作を行わせるときに操作されるキーである。
【００１７】
クリアキー７Ｃは、記録情報の一覧から選択した記録情報を削除する場合に操作されるキーである。キャンセルキー７Ｄは、記録情報の再生処理を中断する場合に操作されるキーである。スクロールキー７Ｅは、記録情報の一覧がＬＣＤ６に表示されているときに、画面の表示内容を上下方向にスクロールさせるときに操作されるキーである。
【００１８】
さらに、面Ｘ２には、ＬＣＤ６を使用していないときに保護する摺動自在なＬＣＤカバー１４が設けられている。ＬＣＤカバー１４は、鉛直上方向に移動した場合、図３に示すように、ＬＣＤ６およびタッチタブレット６Ａを覆うようになされている。また、ＬＣＤカバー１４を鉛直下方向に移動した場合、ＬＣＤ６およびタッチタブレット６Ａが現れるとともに、ＬＣＤカバー１４の腕部１４Ａによって、面Ｙ２に配置された電源スイッチ１１がオン状態に切り換えられるようになされている。
【００１９】
この電子カメラ１の上面である面Ｚには、音声を集音するマイクロホン８（集音手段）、および図示せぬイヤホンが接続されるイヤホンジャック９が設けられている。
【００２０】
面Ｙ１（図１）には、被写体を撮像するときに操作されるレリーズボタン１０と、撮影時の連写モードを切り換えるときに操作される連写モード切り換えスイッチ１３が設けられている。なお、レリーズボタン１０は、全ストロークの約半分まで押した状態である半押し状態と、全ストロークの最後まで押した状態である全押し状態を検出することができるようになされている。
【００２１】
一方、面Ｙ１に対向する面Ｙ２（図２）には、音声を録音するときに操作される録音ボタン１２（操作手段）と、電源スイッチ１１が設けられている。
【００２２】
録音ボタン１２は、面Ｙ１のレリーズボタン１０とほぼ同じ高さに配置されている。なお、レリーズボタン１０と録音ボタン１２のうちの一方のボタンを押したときに、押圧操作によるモーメントに起因して、対向する側面に設けられた他方のボタンが誤って押されないようにするために、録音ボタン１２とレリーズボタン１０を鉛直方向において異なる位置（高さ）に配置するようにしてもよい。
【００２３】
連写モード切り換えスイッチ１３は、レリーズボタン１０が継続して全押しされたときの撮像動作を表す連写モードを設定するときに操作される。連写モード切り換えスイッチ１３が「Ｓ」と印刷された位置を指している場合（単写モードである場合）においては、レリーズボタン１０が全押しされると、１コマだけの撮影が行われる。
【００２４】
また、連写モード切り換えスイッチ１３が「Ｌ」と印刷された位置を指している場合（低速連写モードである場合）においては、レリーズボタン１０が継続して全押しされている間、１秒間に８コマの撮影が行われる。
【００２５】
さらに、連写モード切り換えスイッチ１３が「Ｈ」と印刷された位置を指している場合（高速連写モードである場合）においては、レリーズボタン１０が継続して全押しされている間、１秒間に３０コマの撮影が行われる。
【００２６】
次に、電子カメラ１の内部の構成について説明する。図４は、図１および図２に示す電子カメラ１の内部の構成例を示す斜視図である。ＣＣＤ２０（光電変換手段）は、撮影レンズ３の後段（面Ｘ２側）に設けられており、撮影レンズ３を介して結像する被写体からの光（画像）を電気信号に光電変換するようになされている。
【００２７】
ファインダ内表示素子２６は、ファインダ２の視野内に配置され、ファインダ２を覗いているユーザに対して、各種機能の設定状態などを表示するようになされている。
【００２８】
ＬＣＤ６の鉛直下側には、円柱形状の４本のバッテリ（例えば単３乾電池）２１が縦に並べられており、電源スイッチ１１がオン状態であるときに、このバッテリ２１に蓄積されている電力が各部に供給される。さらに、ＬＣＤ６の鉛直下側には、発光部４が発光するときに使用される電荷を蓄積するコンデンサ２２が配置されている。
【００２９】
回路基板２３には、この電子カメラ１の各部を制御する各種制御回路（ＣＰＵ３９、デジタルシグナルプロセッサ（ＤＳＰ）３３（図６）など）が設けられている。また、回路基板２３と、ＬＣＤ６およびバッテリ２１との間には、挿抜可能なメモリカード２４（保存手段）が設けられている。この電子カメラ１に入力される各種情報は、メモリカード２４にそれぞれ記録される。
【００３０】
さらに、電源スイッチ１１に隣接して配置されているＬＣＤスイッチ２５は、その突起部が押圧されている間だけオン状態となるスイッチであり、オフ状態からオン状態に移行したときにＬＣＤ６が点灯されるようになされている。例えば、ＬＣＤスイッチ２５がオン状態に切り換えられると、ＬＣＤ６には、ＣＣＤ２０により受光された被写体の画像がリアルタイムで表示される。即ち、ＬＣＤ６をビューファインダとして利用することができる。
【００３１】
ＬＣＤカバー１４を鉛直下方向に移動させた場合、図５（Ａ）に示すように、ＬＣＤカバー１４の腕部１４Ａによって、ＬＣＤスイッチ２５の状態は、電源スイッチ１１とともにオン状態に切り換えられる。
【００３２】
なお、ＬＣＤカバー１４が鉛直上側に位置する場合、電源スイッチ１１は、ＬＣＤスイッチ２５とは独立にユーザによって操作される。例えば、ＬＣＤカバー１４が閉じられ、電子カメラ１が使用されていない場合、図５（Ｂ）に示すように、電源スイッチ１１およびＬＣＤスイッチ２５がオフ状態になる。このとき、ＬＣＤ６は消灯される。この状態において、ユーザが電源スイッチ１１を図５（Ｃ）に示すように、オン状態に切り換えると、電源スイッチ１１はオン状態となるが、ＬＣＤスイッチ２５はオフ状態のままである。この場合、ＬＣＤ６は消灯したままであるが、他の回路はオン状態になるので、例えば撮像動作は可能になる。
【００３３】
次に、図６を参照して、この電子カメラ１の内部の電気的構成について説明する。ＣＣＤ２０は、所定の数の画素に対応する受光部を有し、各受光部に入射した光を光電変換し、所定の数の画素に対応する画像信号（電気信号）を生成するようになされている。
【００３４】
画像処理部３１は、ＣＰＵ３９に制御され、ＣＣＤ２０が光電変換した画像信号を所定のタイミングでサンプリングし、そのサンプリングした信号を、所定のレベルに増幅するようになされている。アナログ／デジタル変換回路（以下、Ａ／Ｄ変換回路という）３２（変換手段）は、画像処理部３１によりサンプリングされた画像信号をデジタル化してＤＳＰ３３に供給するようになされている。
【００３５】
ＤＳＰ３３は、バッファメモリ３６およびメモリカード２４に接続されるデータバスを制御し、Ａ／Ｄ変換回路３２より供給された画像データをバッファメモリ３６に一旦記憶させた後、その画像データを圧縮し、圧縮した画像データをメモリカード２４に記録させるようになされている。
【００３６】
また、ＤＳＰ３３は、Ａ／Ｄ変換回路３２より供給された画像データをフレームメモリ３５に記憶させ、ＬＣＤ６に表示させる他、メモリカード２４から圧縮された画像データを読み出し、その画像データを伸張した後、伸張後の画像データをフレームメモリ３５に記憶させ、ＬＣＤ６に表示させるようになされている。
【００３７】
さらに、ＤＳＰ３３は、ＣＣＤ２０にＣＣＤ水平駆動パルスを供給するとともに、ＣＣＤ駆動回路３４を制御し、ＣＣＤ２０にＣＣＤ垂直駆動パルスを供給させるようになされている。また、電子カメラ１の起動時において、ＤＳＰ３３は、ＣＣＤ２０の露光レベルが適正な値になるまで、電子シャッタタイムを調節しながら、ＣＣＤ２０を繰り返し動作させるようになされている。
【００３８】
バッファメモリ３６は、メモリカード２４に対するデータの入出力バッファと、圧縮処理などのバッファとして利用される。
【００３９】
マイクロホン８は、音声情報を入力し（音声を集音し）、その音声情報をＡ／ＤおよびＤ／Ａ変換回路４２（第３の変換手段）に供給するようになされている。
【００４０】
Ａ／ＤおよびＤ／Ａ変換回路４２は、マイクロホン８により検出された音声に対応するアナログ信号をデジタル信号に変換した後、そのデジタル信号をＣＰＵ３９に出力するとともに、ＣＰＵ３９より供給された音声データをアナログ化し、アナログ化した音声信号をスピーカ５に出力するようになされている。
【００４１】
測光素子１６は、被写体およびその周囲の光量を測定し、その測定結果を測光回路５１に出力するようになされている。
【００４２】
測光回路５１は、測光素子１６より供給された測光結果であるアナログ信号に対して所定の処理を施した後、デジタル信号に変換し、そのデジタル信号をＣＰＵ３９に出力するようになされている。
【００４３】
測色素子１７は、被写体およびその周囲の色温度を測定し、その測定結果を測色回路５２に出力するようになされている。
【００４４】
測色回路５２は、測色素子１７より供給された測色結果であるアナログ信号に対して所定の処理を施した後、デジタル信号に変換し、そのデジタル信号をＣＰＵ３９に出力するようになされている。
【００４５】
測距回路５５は、測距素子１８によって測定された電子カメラ１と被写体との測距値をデジタル信号に変換し、その信号をＣＰＵ３９に供給するようになされている。
【００４６】
タイマ４５は、時計回路を内蔵し、現在の時刻に対応するデータをＣＰＵ３９に出力するようになされている。
【００４７】
絞り駆動回路５３は、絞り５４の開口径を所定の値に設定するようになされている。
【００４８】
絞り５４は、撮影レンズ３とＣＣＤ２０の間に配置され、撮影レンズ３からＣＣＤ２０に入射する光の開口を変更するようになされている。
【００４９】
ＣＰＵ３９は、ストロボ駆動回路３７および赤目軽減ランプ駆動回路３８を制御して、赤目軽減ランプ１５を適宜発光させた後、ストロボ４を発光させるようになされている。ただし、ＣＰＵ３９は、ＬＣＤカバー１４が開いているとき（ビューファインダが利用されているとき）においては、ビューファインダで確認した光の状態で被写体を撮影するために、ストロボ４を発光させないようにする。
【００５０】
また、ＣＰＵ３９は、タイマ４５より供給される日時データを利用して、撮影した日時の情報を画像データや音声データの管理情報の一部として、メモリカード２４に記録するようになされている。
【００５１】
さらに、ＣＰＵ３９は、デジタル化された音声情報を圧縮した後、デジタル化および圧縮化された音声データを、バッファメモリ３６に一旦記憶させた後、メモリカード２４に記録するようになされている。
【００５２】
ＣＰＵ３９は、測色回路５２を制御し、測色素子１７の測色結果を受け取り、その結果に対応してホワイトバランスを補正するようになされている。
【００５３】
また、ＣＰＵ３９は、測距回路５５より供給された信号に対応してレンズ駆動回路３０を制御し、撮影レンズ３を移動させることにより、オートフォーカス動作を行う他、絞り駆動回路５３を制御して、測光素子１６の測光結果に対応して撮影レンズ３とＣＣＤ２０の間に配置されている絞り５４の開口径を変更させるようになされている。
【００５４】
さらに、ＣＰＵ３９は、ファインダ内表示回路４０を制御して、各種動作における設定などをファインダ内表示素子２６に表示させるようになされている。
【００５５】
ＣＰＵ３９は、インタフェース（Ｉ／Ｆ）４８を介して、所定の外部装置（図示せず）との間で各種データの授受を行うようになされている。
【００５６】
また、ＣＰＵ３９は、タッチタブレット６Ａからの位置情報を受け取り、その位置情報に対応する処理を適宜行うようになされている。ＣＰＵ３９は、タッチタブレット６ＡのＬＣＤ６に重畳する領域が押圧されると、タッチタブレット６Ａにおいて押圧された位置のＸ−Ｙ座標を読み取り、その座標データを線画のデータとしてバッファメモリ３６に記憶させ、例えばエンターキー７Ｂが押圧されたときに、バッファメモリ３６に蓄積された線画のデータを圧縮した後、入力日時のヘッダ情報とともに、メモリカード２４の線画データ記録領域に記録させるようになされている。ただし、線画の情報量が少ない場合には、線画を圧縮しないようにしてもよい。
【００５７】
なお、タッチタブレット６Ａにより押圧が検出された位置に対応してＬＣＤ６に点を表示させることにより、あたかもＬＣＤ６の表示画面に直接ペン入力をしたように認識させることができる。
【００５８】
線画のデータは、ファクシミリなどにおいて利用されるランレングス法によって圧縮される。ランレングス法とは、線画画面を水平方向に走査し、各ラインを、黒、白、赤、青などの各色の点が継続する数、および、無情報（ペン入力のない部分）の継続する数で符号化することにより、線画を圧縮する方法である。ランレングス法を使用することにより線画を効率的に圧縮することができる。また、圧縮された線画データを伸張したときの情報の欠落を抑制することができる。
【００５９】
タッチタブレット６Ａに入力された線画のデータは空間周波数の高い成分を多く含んでいるので、例えばＪＰＥＧ（Joint Photographic Experts Group）方式に従って圧縮処理を行うと圧縮効率が低くなり、圧縮や伸張に長い時間を必要とすることになる。さらに、ＪＰＥＧ方式による圧縮は非可逆圧縮であるので、伸張した後の線画において、情報の欠落によるギャザやにじみが目立つことになる。従って、この電子カメラ１においてはランレングス法が使用されている。
【００６０】
次に、図７のフローチャートを参照して、録画および録音時の電子カメラ１の動作について説明する。
【００６１】
最初にステップＳ１において、ＣＰＵ３９は、レリーズボタン１０が全押しされたか否かを判断し、レリーズボタン１０が全押しされていないと判断した場合、ステップＳ２において、録音ボタン１２が押圧されたか否かを判断し、録音ボタン１２が押圧されていないと判断した場合、ステップＳ１に戻る。即ち、ＣＰＵ３９は、レリーズボタン１０が全押しされるか、録音ボタン１２が押圧されるまで待機する。
【００６２】
レリーズボタン１０が全押しされると、ステップＳ３に進み、ＣＰＵ３９は、画像処理部３１を制御して、被写体の画像に対応する信号をサンプリングさせる。サンプリングされた信号は、Ａ／Ｄ変換回路３２によりデジタル信号である画像データに変換され、ＤＳＰ３３に出力される。ＤＳＰ３３は、その画像データをバッファメモリ３６に一旦記憶させた後、例えばＪＰＥＧ方式に従って圧縮する。
【００６３】
ステップＳ４において、ＣＰＵ３９は、メモリカード２４に記録されているデータセットの数Ｎを調べる。そして、ステップＳ５において、ＣＰＵ３９は、ＤＳＰ３３により圧縮された画像データを、番号（Ｎ＋１）のデータセットの画像データとして、メモリカード２４に記録させる。このとき、データセットの番号、撮影日時などの管理情報が、ヘッダとして、その画像データとともにメモリカード２４に記録される。
【００６４】
次に、ＣＰＵ３９は、ステップＳ６において、所定のデータセットに属する音声データをカウントするためのカウンタｉの値を１に設定し、ステップＳ７において、クロックをカウントして計時する計時カウンタをリセットする。
【００６５】
そして、画像データが記録された後、ＣＰＵ３９は、ステップＳ８において、録音ボタン１２が押圧されたか否かを判断し、録音ボタン１２が押圧されていないと判断した場合、ステップＳ９において、計時カウンタの値を参照し、画像データが記録されてから所定の時間が経過したか否かを判断する。
【００６６】
画像データが記録されてから所定の時間が経過したと判断された場合、ステップＳ１に戻り、レリーズボタン１０または録音ボタン１２が操作されるまで再度待機する。
【００６７】
一方、画像データが記録されてから所定の時間が経過していないと判断された場合、ステップＳ８に戻る。即ち、画像データが記録されてから所定の時間においては、録音ボタン１２が押圧されたか否かが判断される。
【００６８】
ステップＳ８において録音ボタン１２が押圧されたと判断された場合、ステップＳ１０に進み、録音処理が行われる。録音処理においては、録音ボタン１２が押圧されている間、マイクロホン８により集音された音声の信号がＡ／ＤおよびＤ／Ａ変換回路４２によりデジタル信号である音声データに変換され、ＣＰＵ３９に出力される。
【００６９】
そして、ステップＳ１１において、ＣＰＵ３９は、その音声データを圧縮した後、ステップＳ５で記録された画像データと同一の番号（Ｎ＋１）のデータセットの番号ｉの音声データとしてメモリカード２４に記録させる。このとき、音声データとともに、データセットの番号と、その音声データの番号を含む管理情報がヘッダとして記録される。
【００７０】
番号ｉの音声データをメモリカード２４に記録させた後、ステップＳ１２において、ＣＰＵ３９は、カウンタｉの値を１だけ増加させる。そして、ステップＳ７に戻り、ＣＰＵ３９は、所定の時間が経過するか、録音ボタン１２が押圧されるまで再度待機する。
【００７１】
また、ステップＳ２において、録音ボタン１２が押圧されたと判断された場合ステップＳ１３に進み、ステップＳ１０と同様の録音処理が行われる。
【００７２】
そして、ステップＳ１４において、ＣＰＵ３９は、メモリカード２４に記録されているデータセットの数Ｎを調べる。そして、ステップＳ１５において、ＣＰＵ３９は、録音した音声に対応する音声データを、番号（Ｎ＋１）のデータセット（即ち、新たなデータセット）の音声データ（番号１の音声データ）として、メモリカード２４に記録させる。なお、このとき、データセットの番号、録音日時などの管理情報が、ヘッダとして、その音声データとともにメモリカード２４に記録される。
【００７３】
次に、ＣＰＵ３９は、ステップＳ１５で音声データが記録されたので、ステップＳ１６において、音声データをカウントするためのカウンタｉの値を２に設定する。そしてステップＳ７に進み、画像データが記録されたときと同様の処理（ステップＳ７乃至ステップＳ１２）が行われる。
【００７４】
このように、画像データまたはそれに付随する音声データ、あるいは、単独の音声データが記録されてから所定の時間が経過するまでに入力された音声データは、その前のデータが属するデータセットの音声データとしてメモリカード２４に記録される。即ち、画像データまたは音声データが入力されてから所定の時間が経過するまでに入力された音声は、連続する１つの音声として保存される。
【００７５】
例えば、メモリカード２４にデータセットが記録されていない（Ｎ＝０）場合、レリーズボタン１０を全押しして撮像を行い、その後、予め設定された時間が経過する前に録音ボタン１２を３秒間だけ押圧して音声を入力すると、その画像および音声に対応する画像データおよび音声データは、図８に示すように番号１のデータセットの画像データおよび音声データとしてそれぞれメモリカード２４に記録される。このとき、画像データの管理情報と、音声データの管理情報には、同一のデータセットの番号（＝１）が含まれている。
【００７６】
そして、その音声データが記録されてから予め設定された時間が経過した後に、再度レリーズボタン１０が全押しされて撮像が行われると、撮像された画像に対応する画像データは、図８に示すように番号２のデータセットの画像データとして記録される。
【００７７】
さらに、その画像データが記録されてから予め設定された時間が経過した後に、録音ボタン１２が押圧されて録音が行われると、録音された音声に対応する音声データは、図８に示すように番号３のデータセットの音声データとして記録される。同様に、その音声データが記録されてから予め設定された時間が経過した後に、録音ボタン１２が押圧されて録音が行われると、録音された音声に対応する音声データは、番号４のデータセットの音声データとして記録される。
【００７８】
なお、タッチタブレット６Ａを利用して線画を入力した場合、上述のように撮像された画像のデータが記録される場合と同様に、線画の入力後にエンターキー７Ｂを押圧したときから、所定の時間だけ経過するまで、録音ボタン１２を押圧して録音を行うことにより、録音された音声の音声データは、その線画と同一のデータセットの音声データとして順次記録される。
【００７９】
次に、上述のようにして記録されたデータセットの一覧をＬＣＤ６に表示させるときの、電子カメラ１の動作について説明する。
【００８０】
記録されたデータセットの一覧をＬＣＤ６に表示させる場合、まず、メニューキー７Ａを押圧して、各種動作に対応する項目の一覧（図示せず）を表示させる。そして、それらの項目から、データセットの一覧の表示に対応する項目を選択する。
【００８１】
データセットの一覧の表示に対応する項目が選択されると、ＣＰＵ３９は、メモリカード２４に保存されている各データの管理情報を順次参照して、データセットの番号ごとにまとめて、データセットの番号、記録日時、記録されている画像の縮小画像であるサムネイル画像（画像データが記録されている場合だけ表示される）、音声マーク（音声データが記録されている場合だけ表示される）、および、音声時間（音声データが記録されている場合だけその秒数が表示される）を、例えば図９に示すようにＬＣＤ６に表示させる。
【００８２】
図９は、図８に示すように各データが記録された場合のデータセットの一覧の表示の一例を示している。番号１のデータセットには、８時３０分に記録された画像に対応する画像データと、３秒間の音声に対応する音声データが含まれている。番号２のデータセットには、８時３２分に記録された画像に対応する画像データが含まれている。番号３のデータセットには、９時２５分に記録された５秒間の音声に対応する音声データが含まれている。番号４のデータセットには、９時２７分に記録された２秒間の音声に対応する音声データが含まれている。
【００８３】
なお、データセットに線画データが含まれる場合、図示せぬマークが、そのデータセットの表示の一部として表示される。
【００８４】
次に、図１０のフローチャートを参照して、記録されているデータセットに音声データを追加するときの電子カメラ１の動作について説明する。
【００８５】
まず、ステップＳ２１において、上述のようにデータセットの一覧を表示させた後、ユーザによりデータセットの表示が押圧されると、ＣＰＵ３９は、その押圧操作に対応する信号をタッチタブレット６Ａから受け取り、そのデータセットの表示の表示色を反転させる。
【００８６】
次に、ステップＳ２２において、ＣＰＵ３９は、ユーザにより録音ボタン１２が押圧されると、Ａ／ＤおよびＤ／Ａ変換回路４２を動作させ、マイクロホン８により集音された音声に対応する音声データを受け取る。
【００８７】
そして、ステップＳ２３において、ＣＰＵ３９は、ユーザにより選択されたデータセットに音声データが含まれているか否かを判断し、そのデータセットに音声データが含まれていないと判断した場合、ステップＳ２４において、音声データの番号に１を設定する。
【００８８】
一方、データセットに音声データが含まれていると判断された場合、ステップＳ２５に進み、ＣＰＵ３９は、メモリカード２４の各音声データの管理情報を参照して、そのデータセットに含まれる音声データの数Ｍを調べ、ステップＳ２６において、その数Ｍに１を加算した数（Ｍ＋１）を、録音した音声に対応する音声データの番号に設定する。
【００８９】
このようにして録音した音声に対応する音声データの番号を設定した後、ステップＳ２７において、ＣＰＵ３９は、その音声データの番号、選択されたデータセットの番号、タイマ４５より供給された日時データなどで管理情報を生成し、ステップＳ２８において、その管理情報とともに音声データをメモリカード２４に記録させる。
【００９０】
以上のようにして、選択されたデータセットに音声データが追加される。即ち、選択されたデータセットの番号と、そのデータセットに属する音声データの数に１を加算した数である音声データの番号とを管理情報の一部として有する音声データがメモリカード２４に記録される。
【００９１】
例えば、図８に示すようにメモリカード２４に記録されているデータセットのうちの番号１のデータセットに音声データを追加する場合について説明する。
【００９２】
まず、図９に示すように、データセットの一覧を表示させた後、番号１のデータセットの表示を押圧することにより、番号１のデータセットが選択される。
【００９３】
次に、録音ボタン１２が押圧されると、押圧されている間の音声が、マイクロホン８により集音される。そして、その音声に対応する音声データがＣＰＵ３９に供給される。その音声データは、圧縮された後、番号１のデータセットの番号２の音声データとして図１１に示すようにメモリカード２４に記録される。このとき、録音された時間が５秒である場合、ＬＣＤ６に表示されているデータセットの表示のうちの音声時間の値が、図１２（Ａ）と図１２（Ｂ）に示すように３から８に変更される。即ち、音声時間の値として、番号１のデータセットに属するすべての音声データに対応する音声の長さの総和が表示される。
【００９４】
そして、再度、番号１のデータセットを選択し、２秒の音声を録音した場合、その音声に対応する音声データが、番号１のデータセットの番号３の音声データとして図１１に示すようにメモリカード２４に記録され、図１２（Ｃ）に示すように、番号１のデータセットの音声時間として、値１０が表示される。
【００９５】
なお、図１２においては、音声を追加しても、記録日時の表示は８時３０分のままであるが、記録日時を、音声を追加した時刻に更新するようにしてもよい。その場合、例えば９時２５分に、上述の番号２の音声データを番号１のデータセットに追加すると、番号１のデータセットの記録日時の表示が、図１３（Ｂ）に示すように「９：２５」に変化する。さらに９時２７分に、上述の番号３の音声データを番号１のデータセットに追加した場合、番号１のデータセットの記録日時の表示が、図１３（Ｃ）に示すように「９：２７」に変化する。
【００９６】
このようにして、記録されているデータセットのうちの、選択されたデータセットに音声データを追加することにより、そのデータセットを再生すると、そのデータセットの画像データに対応する画像がＬＣＤ６に表示され、そのデータセットの各音声データに対応する音声がその番号順に連続してスピーカ５から出力される。
【００９７】
なお、本発明は、上記実施の形態に限定されるものではなく、他の情報処理装置にも応用することが可能である。
【００９８】
また、上記各処理を行うプログラムは、メモリカード、その他の記録媒体に記録してユーザに提供したり、ネットワークを介してユーザに提供し、ユーザの電子カメラのメモリに記録して、利用させることができる。
【００９９】
【発明の効果】
以上のごとく、請求項１に記載の情報処理装置および請求項８に記載の記録媒体によれば、画像データと第１の音声データとを関連付けて保存し、画像データを選択した後、集音された音声に対応する第２の音声データを、選択した画像データに関連付けられた第１の音声データに追加して保存するようにし、画像データ、第１の音声データ、および第２の音声データからなるデータセットに属するすべての音声データの録音時間の総和を計算し、第１の音声データが再生される場合、第１の音声データの再生に続いて第２の音声データを再生するようにしたので、画像データを指定する操作だけで、その画像データに関連付けられた音声データに対応する音声を連続して再生することができる。
【図面の簡単な説明】
【図１】本発明の撮像装置を応用した電子カメラの一例を示す斜視図である。
【図２】別の視点から見た電子カメラを示す斜視図である。
【図３】ＬＣＤカバーを閉じた状態の一例を示す斜視図である。
【図４】図１の電子カメラの内部の構成例を示す斜視図である。
【図５】ＬＣＤスイッチと電源スイッチの状態を示す図である。
【図６】図１の電子カメラの内部の電気的構成の一例を示すブロック図である。
【図７】録画および録音時の電子カメラの動作について説明するフローチャートである。
【図８】メモリカードに記録されたデータの一例を示す図である。
【図９】データセットの一覧の表示の一例を示す図である。
【図１０】記録されているデータセットに音声データを追加するときの電子カメラの動作について説明するフローチャートである。
【図１１】メモリカードに記録されたデータの他の例を示す図である。
【図１２】音声データが追加されたときのデータセットの一覧の表示の一例を示す図である。
【図１３】音声データが追加されたときのデータセットの一覧の表示の他の例を示す図である。
【符号の説明】
１  電子カメラ
２  ファインダ
３  撮影レンズ（集光手段）
５  スピーカ
６  液晶ディスプレイ（ＬＣＤ）（表示手段）
６Ａ  タッチタブレット（検出手段）
７  操作キー
８  マイクロホン（集音手段）
１０  レリーズボタン
１２  録音ボタン（操作手段）
２０  ＣＣＤ（光電変換手段）
２４  メモリカード（保存手段）
３９  ＣＰＵ（選択手段、制御手段、第２の変換手段、表示制御手段）
４２  Ａ／ＤおよびＤ／Ａ変換回路（第３の変換手段）
【図１】
0004429394.tif 000002
【図２】
0004429394.tif 000003
【図３】
0004429394.tif 000004
【図４】
0004429394.tif 000005
【図５】
0004429394.tif 000006
【図６】
0004429394.tif 000007
【図７】
0004429394.tif 000008
【図８】
0004429394.tif 000009
【図９】
0004429394.tif 000010
【図１０】
0004429394.tif 000011
【図１１】
0004429394.tif 000012
【図１２】
0004429394.tif 000013
【図１３】
0004429394.tif 000014