(57)【要約】【課題】画像に対して特徴的な音声をユーザが容易に鑑賞することができる出力装置を提供すること。【解決手段】撮像画像と撮像時刻を対応づけて格納する画像格納部と、画像格納部が格納する画像を出力させる画像出力制御部と、画像格納部が格納する画像に関連づけて、画像格納部が格納する画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納部と、画像格納部が格納する撮像時刻と画像を出力する指示を受けた出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定部と、画像格納部が格納する撮像時刻から出力許容時間が経過する時刻までに録音された音声を、音声格納部が格納する少なくとも１つの音声から選択する音声選択部と、画像出力制御部が画像を出力させるタイミングに同期して、音声選択部が選択した音声を出力させる音声出力制御部とを備える。【選択図】図３
2006238219.tif 000002
【特許請求の範囲】
【請求項１】
撮像された画像と撮像時刻とを対応づけて格納する画像格納部と、
前記画像格納部が格納する画像を出力する画像出力部と、
前記画像格納部が格納する画像を前記画像出力部に出力させる画像出力制御部と、
前記画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部と、
前記画像格納部が格納する画像に関連づけて、前記画像格納部が格納する画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納部と、
前記音声格納部が格納する音声を出力する音声出力部と、
前記画像格納部が格納する撮像時刻と、前記出力時刻検出部が検出した出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定部と、
前記画像格納部が格納する撮像時刻から前記出力許容時間設定部が設定した前記出力許容時間が経過する時刻までに録音された音声を、前記音声格納部が格納する少なくとも１つの音声から選択する音声選択部と、
前記画像出力制御部が前記画像出力部に画像を出力させるタイミングに同期して、前記音声選択部が選択した音声を前記音声出力部に出力させる音声出力制御部と
を備える出力装置。
【請求項２】
前記出力許容時間設定部は、前記画像格納部が格納する画像が撮像された撮像時刻と、前記出力時刻検出部が検出した出力時刻との差がより大きい場合に、前記出力許容時間をより大きく設定する
請求項１に記載の出力装置。
【請求項３】
前記画像出力部の周囲の音声を録音する録音部と、
前記画像格納部が格納する撮像時刻と、前記出力時刻検出部が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合に、前記録音部に音声を録音させる録音制御部と
をさらに備え、
前記音声格納部は、前記画像格納部が格納する画像に対応づけて、前記録音部が録音した音声を格納する
請求項１に記載の出力装置。
【請求項４】
音声を集音して前記録音部に供給する集音部
をさらに備え、
前記録音制御部は、前記画像格納部が格納する画像に対応づけて前記音声格納部が音声を格納している場合において、前記集音部が集音した音量が、前記音声格納部が格納している音声の音量より大きい場合には、前記録音部に音声を録音させ、前記集音部が集音した音量が、前記音声格納部が格納している音声の音量より小さい場合には、前記録音部に音声を録音させない
請求項３に記載の出力装置。
【請求項５】
画像を撮像する撮像部
をさらに備え、
前記画像格納部は、前記撮像部が撮像した画像と撮像時刻とを対応づけて格納する
請求項３に記載の出力装置。
【請求項６】
撮像された画像と撮像時刻とを対応づけて格納する画像格納段階と、
前記画像格納段階において格納される画像を出力する画像出力段階と、
前記画像格納段階において格納される画像を前記画像出力段階において出力させる画像出力制御段階と、
前記画像出力段階において画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出段階と、
前記画像格納段階において格納される画像に関連づけて、前記画像格納段階において格納される画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納段階と、
前記音声格納段階において格納される音声を出力する音声出力段階と、
前記画像格納段階において格納される撮像時刻と、前記出力時刻検出段階において検出された出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定段階と、
前記画像格納段階において格納される撮像時刻から前記出力許容時間設定段階において設定された前記出力許容時間が経過する時刻までに録音された音声を、前記音声格納段階において格納される少なくとも１つの音声から選択する音声選択段階と、
前記画像出力制御段階において、前記画像出力段階で画像を出力させるタイミングに同期して、前記音声選択段階において選択された音声を前記音声出力段階において出力させる音声出力制御段階と
を備える出力方法。
【請求項７】
画像を出力する出力装置用のプログラムであって、前記出力装置を
撮像された画像と撮像時刻とを対応づけて格納する画像格納部、
前記画像格納部が格納する画像を出力する画像出力部、
前記画像格納部が格納する画像を前記画像出力部に出力させる画像出力制御部、
前記画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部、
前記画像格納部が格納する画像に関連づけて、前記画像格納部が格納する画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納部、
前記音声格納部が格納する音声を出力する音声出力部、
前記画像格納部が格納する撮像時刻と、前記出力時刻検出部が検出した出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定部、
前記画像格納部が格納する撮像時刻から前記出力許容時間設定部が設定した前記出力許容時間が経過する時刻までに録音された音声を、前記音声格納部が格納する少なくとも１つの音声から選択する音声選択部、
前記画像出力制御部が前記画像出力部に画像を出力させるタイミングに同期して、前記音声選択部が選択した音声を前記音声出力部に出力させる音声出力制御部
として機能させるプログラム。
【請求項８】
撮像された画像と撮像時刻とを対応づけて格納する画像格納部と、
前記画像格納部が格納する画像を出力する画像出力部と、
前記画像格納部が格納する画像を前記画像出力部に出力させる画像出力制御部と、
前記画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部と、
前記画像出力部の周囲の音声を録音する録音部と、
前記画像格納部が格納する撮像時刻と、前記出力時刻検出部が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合であって、前記画像出力部の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、前記録音部に音声を録音させる録音制御部と、
前記画像格納部が格納する画像に対応づけて、前記録音部が録音した音声を格納する音声格納部と
を備え、
前記録音制御部は、前記画像出力部が画像を出力しているときに前記画像出力部の周囲の音声の音量が前記閾値音量より小さかったことによって前記録音部に音声を録音させない場合に、前記画像出力部が画像を出力しなくなった後に前記画像出力部の周囲の音声の音量が前記閾値音量より大きくなったことによって前記録音部に音声を録音させる
出力装置。
【請求項９】
撮像された画像と撮像時刻とを対応づけて格納する画像格納段階と、
前記画像格納段階において格納される画像を画像出力部から出力する画像出力段階と、
前記画像格納段階において格納される画像を前記画像出力段階において出力させる画像出力制御段階と、
前記画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出段階と、
前記画像出力部の周囲の音声を録音する録音段階と、
前記画像格納段階において格納される撮像時刻と、前記出力時刻検出段階において検出された出力時刻との差が、予め設定された録音許容時間より小さい場合であって、前記画像出力部の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、前記録音段階において音声を録音させる録音制御段階と、
前記画像格納段階において格納される画像に対応づけて、前記録音段階において録音された音声を格納する音声格納段階と
を備え、
前記録音制御段階は、前記画像出力部が画像を出力しているときに前記画像出力部の周囲の音声の音量が前記閾値音量より小さかったことによって前記録音段階において音声を録音させない場合に、前記画像出力部が画像を出力しなくなった後に前記画像出力部の周囲の音声の音量が前記閾値音量より大きくなったことによって前記録音段階において音声を録音させる
出力方法。
【請求項１０】
画像を出力する出力装置用のプログラムであって、前記出力装置を
撮像された画像と撮像時刻とを対応づけて格納する画像格納部、
前記画像格納部が格納する画像を出力する画像出力部、
前記画像格納部が格納する画像を前記画像出力部に出力させる画像出力制御部、
前記画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部、
前記画像出力部の周囲の音声を録音する録音部、
前記画像格納部が格納する撮像時刻と、前記出力時刻検出部が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合であって、前記画像出力部の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、前記録音部に音声を録音させる録音制御部、
前記画像格納部が格納する画像に対応づけて、前記録音部が録音した音声を格納する音声格納部
として機能させ、
前記録音制御部を、前記画像出力部が画像を出力しているときに前記画像出力部の周囲の音声の音量が前記閾値音量より小さかったことによって前記録音部に音声を録音させない場合に、前記画像出力部が画像を出力しなくなった後に前記画像出力部の周囲の音声の音量が前記閾値音量より大きくなったことによって前記録音部に音声を録音させる
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、出力装置、出力方法、及びプログラムに関する。特に本発明は、画像及び音声を出力する出力装置及び出力方法、並びに出力装置用のプログラムに関する。
【背景技術】
【０００２】
従来、静止画だけでなく動画もメモリカードに記録することができ、また、静止画や動画の撮影記録時にマイクロホンで検出した音声を画像に対応させて記録できるデジタルスチルカメラがある（例えば、特許文献１参照。）。また、デジタルスチルカメラで撮影した静止画や動画を表示しながら、画像に対応させて記録された音声を再生することができる電子フォトスタンドが知られている。
【特許文献１】特開平７−１５４７３４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、撮影記録時に音声が記録されていない場合には、電子フォトスタンドで画像を再生したときに音声が再生されないため、画像が味気のないものになってしまう。また、撮影記録時の音声に雑音等の好ましくない音声が含まれている場合には、電子フォトスタンドで画像を再生したときに雑音等が再生されてしまい、ユーザは楽しく鑑賞することができない。また、ユーザにとっては画像と音声の編集等の煩雑な作業をすることなく、再生する画像に纏わる音声を簡単に鑑賞することができることが望ましい。
【０００４】
そこで本発明は、上記の課題を解決することができる出力装置、出力方法、及びプログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【課題を解決するための手段】
【０００５】
本発明の第１の形態における出力装置は、撮像された画像と撮像時刻とを対応づけて格納する画像格納部と、画像格納部が格納する画像を出力する画像出力部と、画像格納部が格納する画像を画像出力部に出力させる画像出力制御部と、画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部と、画像格納部が格納する画像に関連づけて、画像格納部が格納する画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納部と、音声格納部が格納する音声を出力する音声出力部と、画像格納部が格納する撮像時刻と、出力時刻検出部が検出した出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定部と、画像格納部が格納する撮像時刻から出力許容時間設定部が設定した出力許容時間が経過する時刻までに録音された音声を、音声格納部が格納する少なくとも１つの音声から選択する音声選択部と、画像出力制御部が画像出力部に画像を出力させるタイミングに同期して、音声選択部が選択した音声を音声出力部に出力させる音声出力制御部とを備える。
【０００６】
出力許容時間設定部は、画像格納部が格納する画像が撮像された撮像時刻と、出力時刻検出部が検出した出力時刻との差がより大きい場合に、出力許容時間をより大きく設定してよい。
【０００７】
画像出力部の周囲の音声を録音する録音部と、画像格納部が格納する撮像時刻と、出力時刻検出部が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合に、録音部に音声を録音させる録音制御部とをさらに備え、音声格納部は、画像格納部が格納する画像に対応づけて、録音部が録音した音声を格納してよい。
【０００８】
音声を集音して録音部に供給する集音部をさらに備え、録音制御部は、画像格納部が格納する画像に対応づけて音声格納部が音声を格納している場合において、集音部が集音した音量が、音声格納部が格納している音声の音量より大きい場合には、録音部に音声を録音させ、集音部が集音した音量が、音声格納部が格納している音声の音量より小さい場合には、録音部に音声を録音させなくてよい。
【０００９】
画像を撮像する撮像部をさらに備え、画像格納部は、撮像部が撮像した画像と撮像時刻とを対応づけて格納してよい。
【００１０】
本発明の第２の形態における出力方法は、撮像された画像と撮像時刻とを対応づけて格納する画像格納段階と、画像格納段階において格納される画像を出力する画像出力段階と、画像格納段階において格納される画像を画像出力段階において出力させる画像出力制御段階と、画像出力段階において画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出段階と、画像格納段階において格納される画像に関連づけて、画像格納段階において格納される画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納段階と、音声格納段階において格納される音声を出力する音声出力段階と、画像格納段階において格納される撮像時刻と、出力時刻検出段階において検出された出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定段階と、画像格納段階において格納される撮像時刻から出力許容時間設定段階において設定された出力許容時間が経過する時刻までに録音された音声を、音声格納段階において格納される少なくとも１つの音声から選択する音声選択段階と、画像出力制御段階において、画像出力段階で画像を出力させるタイミングに同期して、音声選択段階において選択された音声を音声出力段階において出力させる音声出力制御段階とを備える。
【００１１】
本発明の第３の形態によると、画像を出力する出力装置用のプログラムであって、出力装置を撮像された画像と撮像時刻とを対応づけて格納する画像格納部、画像格納部が格納する画像を出力する画像出力部、画像格納部が格納する画像を画像出力部に出力させる画像出力制御部、画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部、画像格納部が格納する画像に関連づけて、画像格納部が格納する画像が撮像又は出力されたときに録音された少なくとも１つの音声と録音時刻とを対応づけて格納する音声格納部、音声格納部が格納する音声を出力する音声出力部、画像格納部が格納する撮像時刻と、出力時刻検出部が検出した出力時刻との差に基づいて、出力許容時間を設定する出力許容時間設定部、画像格納部が格納する撮像時刻から出力許容時間設定部が設定した出力許容時間が経過する時刻までに録音された音声を、音声格納部が格納する少なくとも１つの音声から選択する音声選択部、画像出力制御部が画像出力部に画像を出力させるタイミングに同期して、音声選択部が選択した音声を音声出力部に出力させる音声出力制御部として機能させる。
【００１２】
本発明の第４の形態における出力装置は、撮像された画像と撮像時刻とを対応づけて格納する画像格納部と、画像格納部が格納する画像を出力する画像出力部と、画像格納部が格納する画像を画像出力部に出力させる画像出力制御部と、画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部と、画像出力部の周囲の音声を録音する録音部と、画像格納部が格納する撮像時刻と、出力時刻検出部が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合であって、画像出力部の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、録音部に音声を録音させる録音制御部と、画像格納部が格納する画像に対応づけて、録音部が録音した音声を格納する音声格納部とを備え、録音制御部は、画像出力部が画像を出力しているときに画像出力部の周囲の音声の音量が閾値音量より小さかったことによって録音部に音声を録音させない場合に、画像出力部が画像を出力しなくなった後に画像出力部の周囲の音声の音量が閾値音量より大きくなったことによって録音部に音声を録音させる。
【００１３】
本発明の第５の形態における出力方法は、撮像された画像と撮像時刻とを対応づけて格納する画像格納段階と、画像格納段階において格納される画像を画像出力部から出力する画像出力段階と、画像格納段階において格納される画像を画像出力段階において出力させる画像出力制御段階と、画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出段階と、画像出力部の周囲の音声を録音する録音段階と、画像格納段階において格納される撮像時刻と、出力時刻検出段階において検出された出力時刻との差が、予め設定された録音許容時間より小さい場合であって、画像出力部の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、録音段階において音声を録音させる録音制御段階と、画像格納段階において格納される画像に対応づけて、録音段階において録音された音声を格納する音声格納段階とを備え、録音制御段階は、画像出力部が画像を出力しているときに画像出力部の周囲の音声の音量が閾値音量より小さかったことによって録音段階において音声を録音させない場合に、画像出力部が画像を出力しなくなった後に画像出力部の周囲の音声の音量が閾値音量より大きくなったことによって録音段階において音声を録音させる。
【００１４】
本発明の第６の形態によると、画像を出力する出力装置用のプログラムであって、出力装置を、撮像された画像と撮像時刻とを対応づけて格納する画像格納部、画像格納部が格納する画像を出力する画像出力部、画像格納部が格納する画像を画像出力部に出力させる画像出力制御部、画像出力部に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する出力時刻検出部、画像出力部の周囲の音声を録音する録音部、画像格納部が格納する撮像時刻と、出力時刻検出部が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合であって、画像出力部の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、録音部に音声を録音させる録音制御部、画像格納部が格納する画像に対応づけて、録音部が録音した音声を格納する音声格納部として機能させ、録音制御部を、画像出力部が画像を出力しているときに画像出力部の周囲の音声の音量が閾値音量より小さかったことによって録音部に音声を録音させない場合に、画像出力部が画像を出力しなくなった後に画像出力部の周囲の音声の音量が閾値音量より大きくなったことによって録音部に音声を録音させる。
【００１５】
なお上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた発明となりうる。
【発明の効果】
【００１６】
本発明によれば、ユーザは画像に対して特徴的な音声を容易に鑑賞することができる。
【発明を実施するための最良の形態】
【００１７】
以下、発明の実施形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００１８】
図１は、本発明の一実施形態に係る音声出力システムの一例を示す。音声出力システムは、撮像装置１００及び出力装置１４０を備える。この例では、ユーザ１８０は、海岸に遊びにきている子供の画像を撮像装置１００を用いて撮像する。このとき、撮像装置１００は、撮像装置１００の周囲の音声を集音部１０２から集音して録音する。また、撮像装置１００は、撮像装置１００が撮像した画像を表示しているときにも、撮像装置１００の周囲の音声を集音部１０２から集音して録音する。そして、撮像装置１００は、撮像装置１００が撮像した画像及び録音した音声を、インターネット等の通信回線１５０を通じて出力装置１４０に送信する。
【００１９】
出力装置１４０は、撮像装置１００から受け取った画像を再生するときに、撮像装置１００から受け取った音声を同期させて再生する。このとき、出力装置１４０は、例えば１ヶ月前に撮像した画像を再生するときには、撮像した日に録音された音声の中からより大きい音量の音声を選択して、画像の再生に同期させて再生する。また、１０年前に撮像した画像を再生するときには、撮像した日の前後１年間の期間に録音された音声の中からより大きい音量の音声を選択して、画像の再生に同期させて再生する。このため、ユーザ１８０は、画像を撮像したときのより特徴的な音声を画像とともに鑑賞することができる。
【００２０】
出力装置１４０は、例えば、ＨＤＴＶ、電子フォトスタンド、コンピュータ等の、画像及び音声を出力する装置であってよい。また、出力装置１４０は、音声を文字として出力してもよい。例えば、出力装置１４０は、液晶等の表示デバイスに画像を表示するときに、音声を文字として表示デバイスに表示させる。なお、出力装置１４０は、画像を表示させる表示デバイスに文字を表示させてよく、画像を表示させる表示デバイスとは別の表示デバイスに文字を表示させてもよい。他にも、出力装置１４０は、プリンタ等の画像を印刷する印刷装置であってもよく、画像を印刷するとともに音声を文字として印刷してもよい。
【００２１】
撮像装置１００は、例えば、デジタルスチルカメラ、カメラ付携帯電話等であってよい。また、撮像装置１００が画像及び音声データを記録媒体に記録して、出力装置１４０は当該記録媒体からデータを受け取ることによって、画像及び音声を出力してもよい。また、撮像装置１００は、画像及び音声データを、通信回線１５０に接続されたサーバの、ユーザ１８０毎にそれぞれ設けられたディレクトリ、例えば撮像装置１００と関連付けられたディレクトリに格納してもよい。そして出力装置１４０は、ユーザ１８０毎にサーバに格納された画像及び音声データを受け取ってもよい。
【００２２】
図２は、撮像装置１００のブロック構成の一例を示す。撮像装置１００は、撮像部２０２、画像格納部２１０、画像出力制御部２１２、画像出力部２１４、音声格納部２２０、録音部２５０、集音部１０２、出力指示受付部２４０、録音制御部２４６、及び出力時刻検出部２４４を備える。
【００２３】
撮像部２０２は、画像を撮像する。具体的には、撮像部２０２は、被写体からの光をＣＣＤ等の撮像デバイスで受光して、被写体を撮像する。画像格納部２１０は、撮像部２０２によって撮像された画像と、当該画像が撮像された撮像時刻とを対応づけて格納する。
【００２４】
なお、撮像部２０２は所定の時間間隔で連続的に被写体を撮像してもよい。そして、撮像部２０２は、連続的に撮像して得られる所定の個数の画像を保持してもよい。そして、画像格納部２１０は、撮像部２０２が保持している画像のうち、撮像部２０２による撮像を指示された時刻に最も近いタイミングで撮像された画像を取得してもよい。
【００２５】
出力指示受付部２４０は、画像格納部２１０が格納する複数の画像を画像出力部２１４に出力させるべき旨の指示を受け付ける。このとき、画像出力制御部２１２は、画像格納部２１０が格納する画像を画像出力部２１４に出力させる。例えば、出力指示受付部２４０は、ユーザ１８０によって選択された出力すべき複数の画像を、画像出力制御部２１２に通知する。そして、画像出力制御部２１２は、出力指示受付部２４０から通知された出力すべき複数の画像を、画像格納部２１０に格納される画像から選択して画像出力部２１４に出力するよう指示する。
【００２６】
画像出力部２１４は、画像出力制御部２１２の指示に基づいて、画像格納部２１０が格納する画像を出力する。画像出力部２１４は、例えば画像を表示する液晶等の表示デバイスであってよく、画像を印刷する印刷デバイスであってもよい。出力時刻検出部２４４は、画像出力部２１４に画像を出力させる旨の指示入力を出力指示受付部２４０が受けた時刻である出力時刻を検出する。
【００２７】
集音部１０２は、画像出力部２１４の周囲の音声を集音して録音部２５０に供給する。録音部２５０は、集音部１０２によって集音された、画像出力部２１４の周囲の音声を録音する。
【００２８】
録音制御部２４６は、画像格納部２１０が格納する撮像時刻と、出力時刻検出部２４４が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合に、録音部２５０に音声を録音させる。そして、音声格納部２２０は、画像格納部２１０が格納する画像に関連づけて、画像格納部２１０が格納する画像が撮像又は出力されたときに録音部２５０によって録音された少なくとも１つの音声と録音時刻とを対応づけて格納する。このため、ユーザ１８０は、撮像した画像を出力しながら、ナレーションなどの音声を録音することができる。
【００２９】
なお、録音制御部２４６は、画像格納部２１０が格納する画像に対応づけて音声格納部２２０が音声を格納している場合において、集音部１０２が集音した音量が、音声格納部２２０が格納している音声の音量より大きい場合には、録音部２５０に音声を録音させ、集音部１０２が集音した音量が、音声格納部２２０が格納している音声の音量より小さい場合には、録音部２５０に音声を録音させない。このため、撮像装置１００は、画像を出力しているときのより音量の大きくより特徴的な音声を録音しておくことができるとともに、雑音等の音量のより小さい音声が録音されてしまうことを防ぐことができる。
【００３０】
また、録音制御部２４６は、画像格納部２１０が格納する撮像時刻と、出力時刻検出部２４４が検出した出力時刻との差が、予め設定された録音許容時間より小さい場合であって、画像出力部２１４の周囲の音声の音量が、予め定められた閾値音量より大きい場合に、録音部２５０に音声を録音させる。
【００３１】
具体的には、録音制御部２４６は、画像出力部２１４が画像を出力しているときに画像出力部２１４の周囲の音声の音量が閾値音量より小さかったことによって録音部２５０に音声を録音させない場合に、画像出力部２１４が画像を出力しなくなった後に画像出力部２１４の周囲の音声の音量が閾値音量より大きくなったことによって録音部２５０に音声を録音させる。このため、撮像装置１００は、撮像装置１００の周囲で発生した特徴的な音声を容易に録音させておくことができる。
【００３２】
図３は、出力装置１４０のブロック構成の一例を示す。出力装置１４０は、画像格納部３１０、画像出力制御部３１２、画像出力部３１４、出力指示受付部３４０、出力許容時間設定部３４２、出力時刻検出部３４４、音声格納部３２０、音声選択部３２６、音声出力制御部３２２、及び音声出力部３２４を備える。
【００３３】
画像格納部３１０は、撮像された画像と、当該画像が撮像された撮像時刻とを対応づけて格納する。具体的には、撮像装置１００が撮像した画像と、撮像装置１００の録音部２５０によって録音された音声とを対応づけて格納する。
【００３４】
音声格納部３２０は、画像格納部３１０が格納する画像に関連づけて、画像格納部３１０が格納する画像が撮像又は出力されたときに録音された少なくとも１つの音声と、当該音声が録音された録音時刻とを対応づけて格納する。
【００３５】
出力指示受付部３４０は、画像格納部３１０が格納する複数の画像を画像出力部３１４に出力させるべき旨の指示を受け付ける。例えば、出力指示受付部３４０は、ユーザ１８０に画像を選択させて、選択された画像を画像出力部３１４に出力するよう画像出力制御部３１２に指示する。
【００３６】
画像出力制御部３１２は、画像格納部３１０が格納する画像を画像出力部３１４に出力させる。具体的には、出力指示受付部３４０から出力を指示された画像を、画像出力部３１４に出力させる。画像出力部３１４は、画像出力制御部３１２の指示に基づいて、画像格納部３１０が格納する画像を出力する。画像出力部３１４は、例えば画像を表示する液晶等の表示デバイスであってよく、画像を印刷する印刷デバイスであってもよい。
【００３７】
出力時刻検出部３４４は、画像出力部３１４に画像を出力させる旨の指示入力を受けた時刻である出力時刻を検出する。そして、出力許容時間設定部３４２は、画像格納部３１０が格納する撮像時刻と、出力時刻検出部３４４が検出した出力時刻との差に基づいて、出力許容時間を設定する。具体的には、出力許容時間設定部３４２は、画像格納部３１０が格納する画像が撮像された撮像時刻と、出力時刻検出部３４４が検出した出力時刻との差がより大きい場合に、出力許容時間をより大きく設定する。例えば、出力許容時間設定部３４２は、出力を指示された出力時刻と撮像された撮像時刻との差を予め定められた数で割って得られた期間を、出力許容時間として設定する。
【００３８】
音声選択部３２６は、画像格納部３１０が格納する撮像時刻から出力許容時間設定部３４２が設定した出力許容時間が経過する時刻までに録音された音声を、音声格納部３２０が格納する少なくとも１つの音声から選択する。そして、音声出力制御部３２２は、画像出力制御部３１２が画像出力部３１４に画像を出力させるタイミングに同期して、音声選択部３２６が選択した音声を音声出力部３２４に出力させる。
【００３９】
音声出力部３２４は、音声選択部３２６が選択した音声を出力する。具体的には、音声出力部３２４は、音声を再生する再生デバイスであってよい。また、音声出力部３２４は、例えば液晶等の、文字を出力する表示デバイスを含んでよく、音声格納部２２０が格納する音声を表示デバイスに文字として出力させてもよい。また、音声出力部３２４は、印字デバイス等の、文字として印刷する印刷デバイスを含んでよく、音声格納部３２０が格納する音声を文字として出力してもよい。
【００４０】
出力装置１４０は、より近い過去に撮像された画像を、撮像時刻の近くで録音された音声の中から選択して出力するので、画像とともに出力される音声がユーザ１８０にとって不自然なものになることを防ぐことができる。また、音声選択部３２６は、遠い過去の画像を出力するときには、より広い時間範囲で録音された音声の中から音声を選択するので、ユーザ１８０により特徴的な音声を選択して提供することができる。したがって、本実施形態の撮像装置１００及び出力装置１４０によれば、ユーザ１８０は画像を撮像したときの特徴的な音声を、画像とともに容易に鑑賞することができる。
【００４１】
図４は、音声の録音と画像の撮像との時間関係の一例を示す。撮像装置１００は、動作モードとして、待機モード、撮像モード、及び出力モードを有する。そして、撮像装置１００は、待機モード、撮像モード、出力モードのいずれかに設定された期間に録音された音声を格納する。なお、撮像モードは、撮像装置１００が撮像及び／又は録音することのできる動作モードであってよい。また、出力モードは、例えば、撮像装置１００が画像及び／又は音声を出力することのできる動作モードであってよい。
【００４２】
なお、撮像装置１００は、起動された直後には待機モードに設定される。なお、撮像装置１００は、動作モードが待機モード又は出力モードに設定されている場合に、ユーザ１８０によって撮像動作又は録音動作に関する操作がなされた場合に撮像モードに遷移する。撮像動作に関する操作は、例えば、画像を撮像する操作、シャッタスピード、焦点距離等の、撮像条件を調整する操作等を含む。また、録音動作に関する操作は、例えば、音声を録音する操作、録音感度の調整等の、録音条件を調整する操作等を含む。また、撮像装置１００は、動作モードが待機モード又は撮像モードに設定されている場合に、ユーザ１８０によって撮像装置１００の出力動作に関する操作がなされた場合に、出力モードに遷移する。出力動作に関する操作は、例えば、画像を出力する操作、出力する画像を選択する操作、出力速度の調節等の、出力条件を調整する操作等を含む。なお、撮像装置１００は、撮像装置１００が撮像モード又は出力モードに設定されている場合に、ユーザ１８０による撮像装置１００の操作が所定の期間操作されなかったことを条件として、待機モードに遷移してよい。
【００４３】
画像格納部２１０は、撮像時刻ｔ４１１に撮像部２０２によって撮像された画像を、撮像時刻ｔ４１１に対応づけて格納している。このとき、音声格納部２２０は、撮像時刻ｔ４１１を含む期間に撮像装置１００が撮像モードに設定されていた期間（ｔ４０９〜ｔ４１３）に録音部２５０によって録音された音声＃４３１を、撮像時刻ｔ４１１に撮像された画像に対応づけて格納する。
【００４４】
なお、音声格納部２２０は、撮像時刻に最も近い時刻で録音された音声を、当該撮像時刻で撮像された画像に対応づけて格納してもよい。例えば、音声格納部２２０は、撮像時刻ｔ４１１を含む撮像モードに設定されている期間（ｔ４０９〜ｔ４１３）に音声が録音されなかった場合には、撮像時刻に近い時刻に録音された音声、例えば待機モードに設定されていた期間（ｔ４０８〜ｔ４０９）に録音部２５０によって録音された音声＃４３０を、撮像時刻ｔ４１１に撮像された画像に対応付けて格納しておいてもよい。
【００４５】
そして、ユーザ１８０が、時刻ｔ４１４において、撮像時刻ｔ４１１に撮像された画像を出力する旨を指示した場合に、録音制御部２４６は、出力を指示された出力時刻ｔ４１４と出力すべき画像が撮像された撮像時刻ｔ４１１との差（ｔ４１４−ｔ４１１）が、予め設定された録音許容時間Δｔ４６０より小さい場合に、録音部２５０に画像出力部２１４の周囲の音声を録音させる。なお、録音制御部２４６は、集音部１０２が集音する音声＃４３２の音量が、音声格納部２２０に格納されている音声＃４３１より大きいことを条件として、録音部２５０に画像出力部２１４の周囲の音声を録音させる。そして音声格納部２２０は、撮像時刻ｔ４１１に撮像された画像に対応づけて、録音部２５０によって録音された音声＃４３２を格納する。
【００４６】
同様に、ユーザ１８０が時刻ｔ４２１において、撮像時刻ｔ４１１に撮像した画像を出力するよう指示した場合には、録音制御部２４６は、出力を指示された出力時刻ｔ４２１と出力する画像が撮像された撮像時刻ｔ４１１との差（ｔ４２１−ｔ４１１）が予め設定された録音許容時間Δｔ４６０より小さく、かつ、集音部１０２によって集音される音量＃４３３が音声＃４３２の音量よりも大きいことを条件として、録音部２５０に集音部１０２によって集音される音声を録音させる。なお、音声格納部２２０は、撮像時刻ｔ４１１に撮像された画像に対応づけて、１以上の音声（＃４３１、＃４３２、及び＃４３３）を格納する。
【００４７】
このため、撮像装置１００は、画像を出力しているときのより音量の大きくより特徴的な音声を録音することができる。例えば、ユーザ１８０が海岸で撮像した画像を帰宅途中の車内で鑑賞すると、画像を鑑賞しているときの車内の楽しい様子も音声で録音しておくことができる。したがって、帰宅後に再度画像を鑑賞したときには、車内の様子の音声とともに楽しく鑑賞することができる。また、撮像装置１００が画像を出力しているときの撮像装置１００の周囲の音量の小さい雑音が録音されてしまうことを防ぐことができる。
【００４８】
図５は、音声の録音と画像の撮像との時間関係の他の一例を示す。撮像装置１００は、期間（ｔ５０２〜ｔ５０４）に待機モードに設定されており、その後の撮像モードに設定されている期間（ｔ５０４〜ｔ５０８）内の時刻ｔ５０６に、画像を撮像している。そして、撮像装置１００は、出力モードに設定されている期間（ｔ５０８〜ｔ５１０）内の時刻ｔ５０９において、撮像時刻ｔ５０６に撮像された画像を出力する旨の指示を受ける。撮像装置１００は、撮像時刻ｔ５０６に撮像された画像を出力した後の期間（ｔ５１０〜ｔ５１６）に、待機モードに設定されている。
【００４９】
このとき、録音制御部２４６は、撮像された撮像時刻を含む撮像モードに設定されている期間（ｔ５０４〜ｔ５０８）及び出力モードに設定されている期間（ｔ５０８〜ｔ５１０）において集音部１０２によって集音される音声が予め定めた閾値音量を下回る場合には、録音部２５０に音声を録音させない。この場合、音声格納部２２０は、時刻ｔ５１０の時点においては、撮像時刻ｔ５０６に撮像された画像に対応付けられた音声を格納していない。
【００５０】
そして、撮像装置１００が画像を出力する出力モードが終了して、待機モードになった期間（ｔ５１０〜ｔ５１６）において、集音部１０２によって集音される音声の音量が閾値音量を上回る場合に、録音部２５０に集音部１０２が集音する音声を録音させる。具体的には、録音制御部２４６は、閾値音量を上回る期間（ｔ５１２〜ｔ５１４）の音声を録音させる。
【００５１】
録音制御部２４６が閾値音量を上回る音声を録音部２５０に録音させるので、画像を撮像している時及び／又は画像を出力している時の音量の小さい雑音等が録音部２５０により録音されてしまうことを防ぐことができる。また、例えば、ユーザ１８０が海岸で撮像しているときの音声が小くて、撮像装置１００に音声が録音されなかった場合であっても、ユーザ１８０が海岸で撮像した画像を帰りの車内で鑑賞した後に、車内のラジオで流れていた音楽等を録音しておくことができる。したがって、ユーザ１８０は、帰宅後に再度画像を鑑賞するときには、車内で聴いた音楽等とともに楽しく鑑賞することができる。
【００５２】
図６は、音声選択部３２６が音声を選択する時間範囲の一例を示す。例えば、出力指示受付部３４０が、時刻ｔ８０４で撮像された画像を出力する指示を時刻ｔ８０６において受け付けた場合に、出力許容時間設定部３４２は、出力を指示された出力時刻ｔ８０６と出力される画像が撮像された撮像時刻ｔ８０４との差（ｔ８０６−ｔ８０４）に基づいて、音声出力部３２４から出力させる音声を選択させる許容範囲Δｔ８５２を決定する。そして、音声選択部３２６は、音声格納部３２０に格納されている音声のうち、時刻ｔ８０４からΔｔ８５２だけ前又は後の時間範囲（時刻ｔ８０４―Δｔ８５２〜時刻ｔ８０４＋Δｔ８５２）に録音された音声（＃８４１〜＃８４９）の中から音声を選択して、音声出力部３２４に出力させる。
【００５３】
なお、音声選択部３２６は、時刻ｔ８０４から許容範囲Δｔ８５２だけ前の時刻から時刻ｔ８０４までの期間に録音された音声を選択してもよく、時刻ｔ８０４から許容範囲Δｔ８５２だけ後の時刻までの期間に録音された音声を選択してもよい。
【００５４】
また、出力許容時間設定部３４２は、画像格納部３１０が格納する撮像画像が撮像された撮像時刻と、出力する指示を受け付けた時刻との差が大きいほど、音声出力部３２４から出力させる音声を選択させる許容範囲をより大きく設定する。図６の例では、出力許容時間設定部３４２は、時刻ｔ８０４よりも前の時刻ｔ８０２に撮像された画像を出力するよう時刻ｔ８０６において指示された場合には、許容範囲Δｔ８５２に比べて時間的により長い許容範囲Δｔ８５０を設定する。そして、音声選択部３２６は、時刻（ｔ８０２−Δｔ８５０）から時刻（ｔ８０２＋Δｔ８５０）までの時間範囲内で録音された音声（＃８１１〜＃８３４）の中から音声を選択する。
【００５５】
例えば、１０日前に撮像した画像を出力するときには、音声選択部３２６は撮像された撮像時刻の前後１日の間に録音された音声の中から出力する音声を選択する。また、４０年前に撮像された、ユーザ１８０が小学校３年生のときの運動会の画像を鑑賞するときには、音声選択部３２６は、撮像した時刻の前後４年の間に録音された音声の中から音声を選択する。この場合、ユーザ１８０は小学校３年生のときの運動会の画像を鑑賞しながら、小学校への入学式、卒業式等の、より特徴的な音声とともに鑑賞することができる。また、ユーザ１８０が小学校６年生のときに、小学校３年生のときの運動会の画像を鑑賞すると、画像を鑑賞しているときの音声が録音される。そして、ユーザ１８０が４０年後に小学校３年生のときの運動会の画像を再び再生すると、小学校６年生のときに鑑賞したときの様子が録音された音声とともに鑑賞することができ、ユーザ１８０は楽しく画像を鑑賞することができる。
【００５６】
なお、音声選択部３２６は、出力許容時間の範囲内で録音された音声のうち、最も音量の大きい音声を選択してよい。また、音声選択部３２６は、出力許容時間の範囲内で録音された音声のうち、人間の声を含む音声を選択してもよい。
【００５７】
また、音声選択部３２６は、撮像した画像を画像出力部３１４が出力しているときに出力許容時間の範囲内で録音された複数の音声のうちから第１の音声を選択し、画像出力部３１４が同一の画像を再度出力するときには、第１の音声とは異なる第２の音声を選択してもよい。このとき、音声選択部３２６は、音量の大きい順に音声を選択してよい。他にも、音声選択部３２６は、録音された時刻が、画像が撮像された撮像時刻から近い順に音声を選択してもよい。また、音声選択部３２６は、音声格納部３２０が格納する複数の音声毎に、音声出力部３２４に出力されるべき回数の比率である出力比率と、音声選択部３２６が選択した音声の回数とを記憶しておき、音声出力部３２４に出力した音声の回数の比率が、当該出力比率に近づくように音声を選択してもよい。
【００５８】
以上説明した音声出力システムによれば、ユーザ１８０は、画像を撮像したとき及び／又は画像を出力したときの特徴的な音声を、画像とともに容易に鑑賞することができる。なお、撮像装置１００は、出力装置１４０が備える構成要素と同じ動作及び機能を備える構成要素を備えてよい。また、出力装置１４０は、が備える構成要素と同じ動作及び機能を備える構成要素を備えてよい。
【００５９】
図７は、撮像装置１００及び出力装置１４０に係るコンピュータ１５００のハードウェア構成の一例を示す。コンピュータ１５００は、ホスト・コントローラ１５８２により相互に接続されるＣＰＵ１５０５、ＲＡＭ１５２０、グラフィック・コントローラ１５７５、及び表示装置１５８０を有するＣＰＵ周辺部と、入出力コントローラ１５８４によりホスト・コントローラ１５８２に接続される通信インターフェイス１５３０、ハードディスクドライブ１５４０、及びＣＤ−ＲＯＭドライブ１５６０を有する入出力部と、入出力コントローラ１５８４に接続されるＲＯＭ１５１０、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０を有するレガシー入出力部とを備える。
【００６０】
ホスト・コントローラ１５８２は、ＲＡＭ１５２０と、高い転送レートでＲＡＭ１５２０をアクセスするＣＰＵ１５０５、及びグラフィック・コントローラ１５７５とを接続する。ＣＰＵ１５０５は、ＲＯＭ１５１０、及びＲＡＭ１５２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等がＲＡＭ１５２０内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置１５８０上に表示させる。これに代えて、グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。
【００６１】
入出力コントローラ１５８４は、ホスト・コントローラ１５８２と、比較的高速な入出力装置であるハードディスクドライブ１５４０、通信インターフェイス１５３０、ＣＤ−ＲＯＭドライブ１５６０を接続する。ハードディスクドライブ１５４０は、コンピュータ１５００内のＣＰＵ１５０５が使用するプログラム、及びデータを格納する。通信インターフェイス１５３０は、ネットワークを介して撮像装置１００又は出力装置１４０と通信し、撮像装置１００又は出力装置１４０にプログラム、及びデータを提供する。ＣＤ−ＲＯＭドライブ１５６０は、ＣＤ−ＲＯＭ１５９５からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０、及び通信インターフェイス１５３０に提供する。
【００６２】
また、入出力コントローラ１５８４には、ＲＯＭ１５１０と、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０の比較的低速な入出力装置とが接続される。ＲＯＭ１５１０は、コンピュータ１５００が起動時に実行するブート・プログラムや、コンピュータ１５００のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ１５５０は、フレキシブルディスク１５９０からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０、及び通信インターフェイス１５３０に提供する。入出力チップ１５７０は、フレキシブルディスク・ドライブ１５５０や、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。
【００６３】
ＲＡＭ１５２０を介して通信インターフェイス１５３０に提供されるプログラムは、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５、またはＩＣカード等の記録媒体に格納されて利用者によって提供される。プログラムは、記録媒体から読み出され、ＲＡＭ１５２０を介して通信インターフェイス１５３０に提供され、ネットワークを介して撮像装置１００又は出力装置１４０に送信される。撮像装置１００又は出力装置１４０に送信されたプログラムは、撮像装置１００又は出力装置１４０においてインストールされて実行される。
【００６４】
撮像装置１００にインストールされて実行されるプログラムは、撮像装置１００を、図１、図２、図４、及び図５において説明した撮像装置１００として機能させる。また、出力装置１４０にインストールされて実行されるプログラムは、出力装置１４０を、図１、図３、及び図６において説明した出力装置１４０として機能させる。
【００６５】
以上に示したプログラムは、外部の記憶媒体に格納されてもよい。記憶媒体としては、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５の他に、ＤＶＤやＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスクまたはＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムをコンピュータ１５００に提供してもよい。
【００６６】
以上、実施形態を用いて本発明を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更又は改良を加えることができる。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【図面の簡単な説明】
【００６７】
【図１】音声出力システムの一例を示す図である。
【図２】撮像装置１００のブロック構成の一例を示す図である。
【図３】出力装置１４０のブロック構成の一例を示す図である。
【図４】音声の録音と画像の撮像との時間関係の一例を示す図である。
【図５】音声の録音と画像の撮像との時間関係の他の一例を示す図である。
【図６】音声選択部３２６が音声を選択する時間範囲の一例を示す図である。
【図７】撮像装置１００及び出力装置１４０に係るコンピュータ１５００のハードウェア構成の一例を示す図である。
【符号の説明】
【００６８】
１００  撮像装置
１０２  集音部
１４０  出力装置
１５０  通信回線
１８０  ユーザ
２０２  撮像部
２１０  画像格納部
２１２  画像出力制御部
２１４  画像出力部
２２０  音声格納部
２４０  出力指示受付部
２４４  出力時刻検出部
２４６  録音制御部
２５０  録音部
３１０  画像格納部
３１２  画像出力制御部
３１４  画像出力部
３２０  音声格納部
３２２  音声出力制御部
３２４  音声出力部
３２６  音声選択部
３４０  出力指示受付部
３４２  出力許容時間設定部
３４４  出力時刻検出部
【図１】
2006238219.tif 000003
【図２】
2006238219.tif 000004
【図３】
2006238219.tif 000005
【図４】
2006238219.tif 000006
【図５】
2006238219.tif 000007
【図６】
2006238219.tif 000008
【図７】
2006238219.tif 000009