(57)【特許請求の範囲】
【請求項１】
撮影画像に係る画像情報を読み出して、画像を再生する画像再生手段と、
上記画像情報とともに記録されている画像撮影時の撮影制御に係る撮影条件情報を読み出す読出手段と、
この読出手段により読み出した撮影条件情報に基づいて撮影状況を推定し、音楽と該画像との適合性を推定する適合性推定手段と、
上記画像再生手段が画像を再生するのに合わせて、この適合性推定手段により適合すると推定された音楽を再生する音楽再生手段と、
を具備したことを特徴とする画像再生装置。
【請求項２】
上記撮影条件情報は、ホワイトバランス情報、フォーカス情報、レンズの焦点距離に係るズーム情報、ストロボによる補助光の発光に係るストロボ情報、撮影時のシャッタ速度を示すシャッタスピード情報または絞り情報のうち少なくとも１つを含むことを特徴とする請求項１に記載の画像再生装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像再生装置、より詳しくは、画像の再生とともに音楽の再生も可能な画像再生装置に関する。
【０００２】
【従来の技術】
画像の再生を行うときに音楽の再生を同時に行う画像再生装置は、従来より種々のものが提案されている。
【０００３】
このような技術の一例としては、特開平８−２４９８６５号公報に、場面の情景を表示する動画像とこの動画像にふさわしい音楽を対応付けて記録し再生する音楽再生システムであって、複数の場面より構成される動画像情報を記憶したファイルと、複数の音楽が記録された記録媒体と、上記各音楽が記録媒体に記録されている場所を示す情報を記憶したファイルとを設けて、上記場面を指示することにより、該場面に対応する動画像を表示するとともに、その動画像にふさわしい音楽名を入力し、入力された音楽名に基づいて記録媒体から該当する音楽を検索し、検索された音楽を場面に対応付けて記憶する技術が記載されている。
【０００４】
【発明が解決しようとする課題】
しかしながら、上記特開平８−２４９８６５号公報に記載されたような技術手段では、予め動画像の場面と音楽とを関連付ける操作が必要となって手間がかかるために、こうした操作を一般ユーザに強いるのは困難である。
【０００５】
本発明は上記事情に鑑みてなされたものであり、面倒な操作を行うことなく画像の場面に合った音楽の再生を行うことができる画像再生装置を提供することを目的としている。
【０００６】
【課題を解決するための手段】
上記の目的を達成するために、第１の発明による画像再生装置は、撮影画像に係る画像情報を読み出して、画像を再生する画像再生手段と、上記画像情報とともに記録されている画像撮影時の撮影制御に係る撮影条件情報を読み出す読出手段と、この読出手段により読み出した撮影条件情報に基づいて撮影状況を推定し、音楽と該画像との適合性を推定する適合性推定手段と、上記画像再生手段が画像を再生するのに合わせてこの適合性推定手段により適合すると推定された音楽を再生する音楽再生手段とを備えたものである。
【０００７】
また、第２の発明による画像再生装置は、上記第１の発明による画像再生装置において、上記撮影条件情報が、ホワイトバランス情報、フォーカス情報、レンズの焦点距離に係るズーム情報、ストロボによる補助光の発光に係るストロボ情報、撮影時のシャッタ速度を示すシャッタスピード情報または絞り情報のうち少なくとも１つを含むものである。
【０００８】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
【０００９】
図１から図３は本発明の一実施形態を示したものであり、図１は、電子アルバムの主として電気的な構成を示すブロック図である。
【００１０】
図１に示すように、この画像再生装置としての電子アルバムは、例えばマイクロホンやその他の音楽再生装置から出力される音楽を入力するための音楽入力手段たる音楽入力端子１と、この音楽入力端子１から入力されるアナログの電気信号をデジタルデータに変換するための音楽Ａ／Ｄ回路２と、この音楽Ａ／Ｄ回路２から出力される音楽データを一時的にバッファリングしておくためのＦＩＦＯメモリ３と、バスを介して出力される音楽データを蓄積するためのＦＩＦＯメモリ４と、このＦＩＦＯメモリ４から出力されるデジタルの音楽データをアナログの電気信号に変換するための音楽Ｄ／Ａ回路５と、この音楽Ｄ／Ａ回路５の出力に基づき、音楽を再生する音楽再生手段であり音情報再生手段を兼ねたスピーカ６と、バスを介して後述する第２ＣＰＵ２２に接続されているメモリ７と、画像データや音楽データを含む各種のデータを記録するためのものであり、例えばこの電子アルバムに着脱自在に構成されたメモリカード等でなる記録媒体８と、この記録媒体８とのデータの授受を行うための音楽入力手段であり画像入力手段を兼ねた記録媒体インターフェース（Ｉ／Ｆ）９と、上記バスを介して出力される画像データを蓄積するためのＦＩＦＯメモリ１０と、このＦＩＦＯメモリ１０から出力される画像データに各種の処理を施すためのビデオエンコード回路１１と、このビデオエンコード回路１１の出力に基づき後述するＴＦＴパネル１３を制御するＴＦＴ液晶駆動回路１２と、このＴＦＴ液晶駆動回路１２の制御に基づき画像を視覚的に表示する画像再生手段であり表示手段たるＴＦＴパネル１３と、このＴＦＴパネル１３を背面側から照明するためのバックライトユニット１４と、上記ビデオエンコード回路１１の出力に基づきビデオ出力信号を生成するためのビデオ出力回路１５と、このビデオ出力回路１５により生成されたビデオ出力信号を外部の機器等に出力するためのビデオ出力端子１６と、上記ＦＩＦＯメモリ３，４，１０、メモリ７、記録媒体Ｉ／Ｆ９と上記バスを介して接続されていて、音楽再生機能、各種画像処理機能、画像伸長機能、メモリコントロール機能、記録媒体アクセス機能などを有する読出手段たる第２ＣＰＵ２２と、後述するＬＣＤパネル１８を制御するためのＬＣＤ表示回路１７と、このＬＣＤ表示回路１７により駆動されてこの電子アルバムに係る各種の情報を表示するためのＬＣＤパネル１８と、該電子アルバムと外部の電子機器等とでデータの授受を行うための外部データＩ／Ｆ１９と、使用者が該電子アルバムに情報入力を行うための選択手段であり選択決定手段たるキーマトリクス２０と、この電子アルバムの電源となる電池２３と、この電池２３から供給される電力を当該電子アルバム内の各回路に供給するための電源回路２４と、上記音楽Ｄ／Ａ回路５、ビデオエンコード回路１１、ＴＦＴ液晶駆動回路１２、バックライトユニット１４、ＬＣＤ表示回路１７、外部データＩ／Ｆ１９、キーマトリクス２０、電源回路２４を制御するとともに、上記第２ＣＰＵ２２による各機能を統括的にコントロールし、システム制御等を行うシステムコントロール機能や後述する画像付加情報解析機能、音楽自動選択機能を備えた適合性推定手段、状況推定手段、音楽群選別手段である第１ＣＰＵ２１と、を有して構成されている。
【００１１】
次に、図２はこのような電子アルバムにより画像の再生を行うときの処理を示すフローチャートである。
【００１２】
この動作が開始されると、まず該画像データの例えばヘッダ等に格納されている撮影情報（撮影条件情報）を読み出して、該撮影情報の解析を後述するように行い、画像に応じた適切な音楽を自動選択する（ステップＳ１）。
【００１３】
次に、選択された音楽を再生して上記スピーカ６から放音するとともに（ステップＳ２）、画像データを再生して上記ＴＦＴパネル１３に表示させ（ステップＳ３）、これらのデータが終わったところで終了する。
【００１４】
図３は、上記ステップＳ１において行われる撮影情報の解析の例を示す図表である。
【００１５】
上記撮影情報としては、例えばホワイトバランス（ＷＢ）情報、被写体までの距離情報を含むフォーカス情報、レンズの焦点距離に係るズーム情報、ストロボによる補助光の発光に係るストロボ情報、撮影時のシャッタ速度を示すシャッタスピード情報、撮影時の絞り開口径に係る絞り情報、撮影日付の情報などが挙げられる。
【００１６】
まず、例えばフォーカス情報が遠景であるような場合には、撮影シーンが風景であると推定して、風景写真に適した音楽、例えばクラシック等の雄大な音楽を選択する。
【００１７】
また、フォーカス情報が２〜４ｍであって、ズーム情報がワイドである場合には、複数の人物が集合した状態を撮影した集合写真であると推定して、集合写真に適した音楽、例えばポップス等の軽い音楽を選択する。
【００１８】
さらに、ホワイトバランス情報により、光源がローソク等の明かりである状況で撮影されたと推定し、またフォーカス情報が１〜２ｍである場合には、人物を撮影することを主体としたポートレート写真であると推定する。この２つの条件からローソクの明かりの中でのポートレート写真に適した音楽、例えばバラード等のムードのある音楽を選択する。
【００１９】
そして、フォーカス情報が１〜２ｍであり、ストロボの発光が行われていて、シャッタ速度が遅い場合には、夜景等を背景とした夜間ポートレート写真であると推定して、夜間ポートレート写真に適した音楽、例えば静かな音楽を選択する。
【００２０】
次に、ホワイトバランス情報により、光源が晴れまたは曇りの日中の屋外光であると推定され、フォーカス情報が２〜４ｍであり、ストロボの発光が行われておらず、シャッタ速度が速く絞りが開放になっている場合には、スポーツ写真であると推定して、スポーツ写真に適した音楽、例えば行進曲等の軽快な音楽を選択する。
【００２１】
続いて、フォーカス情報が遠景であり、ストロボの発光が行われておらず、シャタ速度が極端に遅く絞りが開放である場合には、夜景写真や天体写真であると推定して、これらの写真に適した音楽、例えばクラシック等の雄大な音楽を選択する。
【００２２】
そして、撮影日付に基づいて、撮影月などを判断することにより、撮影が行われた月や季節に応じたイベントの推定を行う。例えば撮影が１２月に行われたものである場合には、音楽としてクリスマスソング等を選択し、撮影が１月に行われたものである場合には、音楽として正月の音楽を選択するなどする。
【００２３】
このような本発明の実施形態によれば、撮影情報に基づいて撮影状況を推定し、その撮影状況に最も適していると推定される音楽を画像とともに自動的に再生するために、面倒な操作を行うことなく、画像の場面に合った音楽の再生を行うことができる。そして、この実施形態の処理は、画像を再生するのに合わせて、リアルタイムで音楽を再生するのに適している。
【００２４】
次に本発明の画像再生装置に関連する技術について説明する。
図４，図５は本発明の画像再生装置に関連する第１の関連技術を示したものであり、図４は電子アルバムにおいて音楽の選択を行うときの処理を示すフローチャート、図５は電子アルバムにより画像の再生を行うときの処理を示すフローチャートである。
【００２５】
この第１の関連技術において、本発明の実施形態と同様である部分については説明を省略し、主として異なる点についてのみ説明する。
【００２６】
この第１の関連技術の電子アルバムの構成は、上述した本発明の実施形態の図１に示したものとほぼ同様である。
【００２７】
このような電子アルバムにおいて、音楽の選択を行う際には、図４に示すような動作を行う。
【００２８】
すなわち、まず、伴奏を付加する対象となる画像データを選択して（ステップＳ１１）、音楽を自動的に選択するかあるいは手動によりユーザが選択するかを判断する（ステップＳ１２）。
【００２９】
ここで、自動音楽選択モードとなっている場合には、上述した本発明の実施形態の図３において説明したように、画像データに係る撮影情報を解析して音楽を自動選択する（ステップＳ１３）。
【００３０】
一方、手動音楽選択モードとなっている場合には、ユーザがキーマトリクス２０を操作することにより、例えば記録媒体８に記録されている音楽のリストをＴＦＴパネル１３に表示させ、そのリストからユーザが所望の音楽の選択を行う（ステップＳ１４）。
【００３１】
こうして選択された音楽を画像データに関連付けるためのリンク情報を作成し、それを記録して（ステップＳ１５）終了する。
【００３２】
次に、このようにして音楽との関連付けが行われた画像を再生するときの動作を、図５を参照して説明する。
【００３３】
この動作が開始されると、まず、音楽データと画像データを関連付けているリンク情報の読み込みを行う（ステップＳ２１）。
【００３４】
そして、このリンク情報に基づき、画像データが音楽データとリンクされているか否かを判断して（ステップＳ２２）、リンクされている場合には、その音楽の再生を行い（ステップＳ２３）、リンクされていない場合にはこのステップＳ２３をスキップする。
【００３５】
そして、音楽の再生とともに画像データを再生して（ステップＳ２４）、これらの再生が終わったところで終了する。
【００３６】
このような第１の関連技術によれば、上述した本発明の実施形態とほぼ同様の効果を奏するとともに、音楽の選択を手動と自動の何れにおいても行うことができるために、必要に応じてユーザが好みのものを選択することができる。また、音楽と画像データとのリンク情報が作成されるために、このリンク情報を保存しておけば、再びその画像を再生する際に、音楽を選択する処理を繰り返さなくても済むという利点がある。
【００３７】
図６は本発明の第２の関連技術を示したものであり、電子アルバムにおいて音楽の選択を行うときの処理を示すフローチャートである。この第２の関連技術において、上述の本発明の実施形態、第１の関連技術と同様である部分については説明を省略し、主として異なる点についてのみ説明する。
【００３８】
この第２の関連技術の電子アルバムの構成も、上述した本発明の実施形態の図１に示したものとほぼ同様である。
【００３９】
このような電子アルバムにおいて、音楽の選択を行う際には、図６に示すような動作を行う。
【００４０】
すなわち、まず、伴奏を付加する対象となる画像データを選択して（ステップＳ３１）、音楽を自動的に選択するかあるいは手動によりユーザが選択するかを判断する（ステップＳ３２）。
【００４１】
ここで、自動音楽選択モードとなっている場合には、上述した本発明の実施形態の図３において説明したように、画像データに係る撮影情報を解析して、その解析結果に基づいて適切と考えられる音楽を１つ以上選別し、さらにその選別した音楽群に含まれる音楽を適切な順番に並び替える（ステップＳ３３）。
【００４２】
そして、これらの選別された音楽のタイトル名を、並び替えられた順に上記ＴＦＴパネル１３等に表示する（ステップＳ３５）。
【００４３】
この表示を見たユーザは、表示された音楽の中から所望のものを手動で選択する（ステップＳ３６）。なお、このとき、所定時間だけ待機して、所定時間内に何ら選択が行われない場合には、最も適切と推定される音楽を自動的に選択するようにしても良い。
【００４４】
一方、上記ステップＳ３２において手動音楽選択モードとなっている場合には、上述と同様に、ユーザがキーマトリクス２０を操作することにより、例えば記録媒体８に記録されている音楽のリストをＴＦＴパネル１３に表示させ、そのリストからユーザが所望の音楽の選択を行う（ステップＳ３４）。
【００４５】
こうして選択された音楽を画像データに関連付けるためのリンク情報を作成し、それを記録して（ステップＳ３７）終了する。
【００４６】
また、この第２の関連技術における画像再生の動作は上述した第１の関連技術の図５に示したものとほぼ同様である。
【００４７】
このような第２の関連技術によれば、上述した本発明の実施形態，第１の関連技術とほぼ同様の効果を奏するとともに、多数の音楽データがある場合でも、撮影情報に基づいて適切と考えられる音楽群が選択されるために、適切な音楽の中から、ユーザが所望のものを簡単に選択することができる。
【００４８】
図７は本発明の第３の関連技術を示したものであり、電子アルバムにおいて音楽の選択を行うときの処理を示すフローチャートである。この第３の関連技術において、上述の本発明の実施形態、第１の関連技術および第２の関連技術と同様である部分については説明を省略し、主として異なる点についてのみ説明する。
【００４９】
この第３の関連技術の電子アルバムの構成も、上述した本発明の実施形態の図１に示したものとほぼ同様である。
【００５０】
このような電子アルバムにおいて、音楽の選択を行う際には、図７に示すような動作を行う。
【００５１】
すなわち、まず、伴奏を付加する対象となる画像データを選択して（ステップＳ４１）、音楽を自動的に選択するかあるいは手動によりユーザが選択するかを判断する（ステップＳ４２）。
【００５２】
ここで、自動音楽選択モードとなっている場合には、上述したように画像データに係る撮影情報を解析して、その解析結果に基づいて適切と考えられる音楽を選別し、その選別した音楽を適切な順番に並び替える（ステップＳ４３）。
【００５３】
そして、これらの選別されて並べ換えられた音楽の内で、最も適切と推定された一番目の音楽の少なくとも一部分を上記スピーカ６により再生する（ステップＳ４５）。
【００５４】
なお、このときに再生する音楽の部分としては、音楽の冒頭部分であっても良いし、音楽のいわゆる「さび」といわれる特徴的な部分であっても良いし、これらに限らず、ユーザが音楽を確認するに適した部分であれば良い。
【００５５】
また、音楽のみを再生しても良いが、このとき同時に、対象となる画像をＴＦＴパネル１３に表示させるようにすれば、より的確に、実際の再生時の様子を再現することができて良い。
【００５６】
こうしてユーザは、再生された音楽を実際に聴いてその音楽で良いかどうかを上記キーマトリクス２０等を用いて選択する（ステップＳ４６）。
【００５７】
このキー入力に基づき、再生した音楽が選択されたか否かを判断して（ステップＳ４７）、選択されていない場合には上記並べ換えられた順の次の音楽を再生して（ステップＳ４８）、上記ステップＳ４６に行き、ユーザによる選択を待つ。
【００５８】
一方、上記ステップＳ４２において手動音楽選択モードとなっている場合には、上述と同様に、ユーザがキーマトリクス２０を操作することにより、記録媒体８等に記録されている音楽のリストをＴＦＴパネル１３に表示させ、そのリストからユーザが所望の音楽の選択を行う（ステップＳ４４）。
【００５９】
こうして、上記ステップＳ４７において再生した音楽の何れかが選択されるか、あるいはこのステップＳ４４において所望の音楽が選択された後は、選択された音楽を画像データに関連付けるためのリンク情報を作成し、それを記録して（ステップＳ４９）終了する。
【００６０】
なお、この図７のステップＳ４５においては、音楽を判別するための情報として、音楽の一部分を再生するようにしたが、これに限らず、音楽のタイトル名を音声としてスピーカ６により発声させるようにしても構わない。
【００６１】
また、この第３の関連技術における画像再生の動作は上述した第１の関連技術の図５に示したものとほぼ同様である。
【００６２】
このような第３の関連技術によれば、上述した本発明の実施形態、第１の関連技術および第２の関連技術とほぼ同様の効果を奏するとともに、音楽の少なくとも一部を実際に聴いて所望のものを選択することができるために、より実際の再生状況に即した選択を行うことができる。また、音楽のタイトル名を発声させる場合には、視覚によることなく音楽名を確認することができる。
【００６３】
なお、本発明は上述した実施形態に限定されるものではなく、発明の主旨を逸脱しない範囲内において種々の変形や応用が可能であることは勿論である。
【００６４】
【発明の効果】
以上説明したように本発明の画像再生装置によれば、撮影条件情報に基づいて画像に適合する音楽を推定するために、面倒な操作を行うことなく画像の場面に合った音楽の再生を行うことが可能となる。
【図面の簡単な説明】
【図１】  本発明の一実施形態の電子アルバムの主として電気的な構成を示すブロック図。
【図２】  本発明の一実施形態の電子アルバムにより画像の再生を行うときの処理を示すフローチャート。
【図３】  本発明の一実施形態の電子アルバムにおいて行われる撮影情報の解析の例を示す図表。
【図４】  本発明の第１の関連技術の電子アルバムにおいて音楽の選択を行うときの処理を示すフローチャート。
【図５】  上記第１の関連技術の電子アルバムにより画像の再生を行うときの処理を示すフローチャート。
【図６】  本発明の第２の関連技術の電子アルバムにおいて音楽の選択を行うときの処理を示すフローチャート。
【図７】  本発明の第３の関連技術の電子アルバムにおいて音楽の選択を行うときの処理を示すフローチャート。
【符号の説明】
１…音楽入力端子
６…スピーカ（音楽再生手段、音情報再生手段）
８…記録媒体
１３…ＴＦＴパネル（画像再生手段、表示手段）
１６…ビデオ出力端子
２０…キーマトリクス（選択手段、選択決定手段）
２１…第１ＣＰＵ（適合性推定手段、状況推定手段、音楽群選別手段）
２２…第２ＣＰＵ（読出手段）
【図１】
0004190073.tif 000002
【図２】
0004190073.tif 000003
【図３】
0004190073.tif 000004
【図４】
0004190073.tif 000005
【図５】
0004190073.tif 000006
【図６】
0004190073.tif 000007
【図７】
0004190073.tif 000008