(57)【要約】【課題】複眼撮像装置の視差を視覚だけでなく聴覚も用いて適切に判別させる。【解決手段】複眼カメラ１は、複数の視点から同一の被写体を撮像することで複数の視点画像を生成する撮影部２１Ａ，２１Ｂと、複数の視点画像の視差を調整し、視差が調整された複数の視点画像に基づいて立体視画像を生成する３次元処理部３０と、生成された立体視画像を表示するモニタ７と、効果音がそれぞれ独立に出力されるステレオスピーカ３３と、調整された視差に基づいて、ステレオスピーカ３３からそれぞれ出力される効果音を制御するＣＰＵ３５と、を備えている。【選択図】図３
2011209634.tif 000002
【特許請求の範囲】
【請求項１】
複数の視点から同一の被写体を撮像することで複数の視点画像を生成する撮像手段と、
前記撮像手段により生成された複数の視点画像の視差を調整する視差調整手段と、
前記視差調整手段により視差が調整された複数の視点画像に基づいて立体視するための立体視画像を生成する立体視画像生成手段と、
前記立体視画像生成手段により生成された立体視画像を表示する表示手段と、
効果音がそれぞれ独立に出力される一対の効果音出力手段と、
前記視差調整手段により調整された視差に基づいて、前記一対の効果音出力手段からそれぞれ出力される効果音を制御する効果音制御手段と、
を備えた複眼撮像装置。
【請求項２】
視差の増加又は減少の指示操作を受け付ける受付手段を更に備え、
前記視差調整手段は、前記受付手段により受け付けられた指示操作に応じて視差を調整する
請求項１記載の複眼撮像装置。
【請求項３】
前記効果音制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記一対の効果音出力手段からそれぞれ出力される効果音の位相差を大きく又は小さくする
請求項２記載の複眼撮像装置。
【請求項４】
前記効果音制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記一対の効果音出力手段からそれぞれ出力される効果音の音量を大きく又は小さくする
請求項２記載の複眼撮像装置。
【請求項５】
前記効果音制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記一対の効果音出力手段からそれぞれ出力される効果音の音程を高く又は低くする
請求項２記載の複眼撮像装置。
【請求項６】
振動を発生する振動発生手段と、
前記視差調整手段により調整された視差に基づいて、前記振動発生手段により発生される振動の強さ、及び振動の長さの少なくとも一方を制御する振動制御手段と、
を更に備えた請求項１から請求項５のいずれか１項記載の複眼撮像装置。
【請求項７】
前記振動制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記振動発生手段により発生される振動を強く又は弱く制御する
請求項６記載の複眼撮像装置。
【請求項８】
前記振動制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記振動発生手段により発生される振動の時間を長く又は短く制御する
請求項６記載の複眼撮像装置。
【請求項９】
前記視差調整手段は、前記被写体までの距離に応じた視差になるように、前記複数の視点画像の視差を自動調整し、
前記効果音制御手段は、前記視差調整手段により自動調整されている視差に基づいて前記一対の効果音出力手段からそれぞれ出力される効果音の位相差を大きく又は小さくする
請求項１記載の複眼撮像装置。
【請求項１０】
前記効果音制御手段は、自動視差調整値が求められた場合に対応する比較効果音を前記一対の効果音出力手段に出力させる
請求項９記載の複眼撮像装置。
【請求項１１】
複数の視点から同一の被写体を撮像することで複数の視点画像を生成し、
前記生成された複数の視点画像の視差を調整し、
前記視差が調整された複数の視点画像に基づいて立体視画像を生成し、
前記生成された立体視画像を表示し、
前記調整された視差に基づいて、一対の効果音出力手段からそれぞれ出力される効果音を制御する
複眼撮像装置の効果音制御方法。
【請求項１２】
コンピュータを、
複数の視点から同一の被写体を撮像する撮像手段により生成された複数の視点画像の視差を調整する視差調整手段、
前記視差調整手段により視差が調整された複数の視点画像に基づいて立体視画像を生成する立体視画像生成手段、
前記立体視画像生成手段により生成された立体視画像を表示手段に表示させる制御を行う表示制御手段、及び、
前記視差調整手段により調整された視差に基づいて、一対の効果音出力手段からそれぞれ出力される効果音を制御する効果音制御手段と、
として機能させるための撮像装置の効果音制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複眼撮像装置、複眼撮像装置の効果音制御方法及びプログラムに関する。
【背景技術】
【０００２】
従来、複数の撮像部を備え、立体視画像を生成する複眼撮像装置が提案されている。複眼撮像装置は、複数の撮像部でそれぞれ生成された複数の視点画像に基づいて立体視画像を生成し、この立体視画像を立体視表示用モニタに表示する。
【０００３】
このような複眼撮像装置で撮像された立体視画像の立体感は、ユーザの両眼の距離や立体視表示用モニタからユーザまでの距離に左右される。このため、複眼撮像装置の立体視機能については個人差が大きいという問題がある。
【０００４】
そのため、複眼撮像装置では、ユーザの操作に従って複数の視点画像の視差が調整可能になっており、これにより立体視画像の立体感が調整される。しかし、ユーザは、立体視表示用モニタだけでは、視差調整量を感覚的に把握することが困難である。
【０００５】
ここで、ファインダを覗いた状態でも、モードダイヤルによってモードが選択された際に、そのモードに応じた音色の音を発生させることで、撮影モードを確認できるカメラが開示されている（特許文献１参照）。これにより、ユーザは、ファインダを覗いた状態であっても、音を聞くことにより、モードダイヤルで選択したモードを確認することができる。
【０００６】
また、設定されているモードを簡単に判別することができ、また、簡単にモードを変更できるデジタルカメラが開示されている（特許文献２）。特許文献２のデジタルカメラは、電源投入時やモードの設定が変更されると、モードを特定する情報を一定時間、見やすい形態で表示手段に表示する。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００６−１５４０５１号公報
【特許文献２】特開２００５−１１７５１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかし、特許文献１及び２に記載された技術を使用したとしても、ユーザは、各モードを聴覚又は視覚により確認することができるが、複眼撮像装置の視差がどの程度であるか（増加、減少、不変か）を把握することができない問題がある。また、ユーザは、複眼撮像装置のモニタにより視差を確認することができるが、視覚以外では視差を確認できないため、視差が適切であるか判別できない問題がある。
【０００９】
本発明は、このような実情を鑑みて提案されたものであり、複眼撮像装置の視差を視覚だけでなく聴覚を用いて適切に判別させることができる複眼撮像装置、複眼撮像装置の効果音制御方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
請求項１記載の発明である複眼撮像装置は、複数の視点から同一の被写体を撮像することで複数の視点画像を生成する撮像手段と、前記撮像手段により生成された複数の視点画像の視差を調整する視差調整手段と、前記視差調整手段により視差が調整された複数の視点画像に基づいて立体視するための立体視画像を生成する立体視画像生成手段と、前記立体視画像生成手段により生成された立体視画像を表示する表示手段と、効果音がそれぞれ独立に出力される一対の効果音出力手段と、前記視差調整手段により調整された視差に基づいて、前記一対の効果音出力手段からそれぞれ出力される効果音を制御する効果音制御手段と、を備えている。
【００１１】
請求項２記載の発明は、請求項１記載の複眼撮像装置において、視差の増加又は減少の指示操作を受け付ける受付手段を更に備え、前記視差調整手段は、前記受付手段により受け付けられた指示操作に応じて視差を調整する。
【００１２】
請求項３記載の発明は、請求項２記載の複眼撮像装置において、前記効果音制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記一対の効果音出力手段からそれぞれ出力される効果音の位相差を大きく又は小さくする。
【００１３】
請求項４記載の発明は、請求項２記載の複眼撮像装置において、前記効果音制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記一対の効果音出力手段からそれぞれ出力される効果音の音量を大きく又は小さくする。
【００１４】
請求項５記載の発明は、請求項２記載の複眼撮像装置において、前記効果音制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記一対の効果音出力手段からそれぞれ出力される効果音の音程を高く又は低くする。
【００１５】
請求項６記載の発明は、請求項１から請求項５のいずれか１項記載の複眼撮像装置において、振動を発生する振動発生手段と、前記視差調整手段により調整された視差に基づいて、前記振動発生手段により発生される振動の強さ、及び振動の長さの少なくとも一方を制御する振動制御手段と、を更に備える。
【００１６】
請求項７記載の発明は、請求項６記載の複眼撮像装置において、前記振動制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記振動発生手段により発生される振動を強く又は弱く制御する。
【００１７】
請求項８記載の発明は、請求項６記載の複眼撮像装置において、前記振動制御手段は、前記視差調整手段により調整された視差が大きくなるに従って、前記振動発生手段により発生される振動の時間を長く又は短く制御する。
【００１８】
請求項９記載の発明は、請求項１記載の複眼撮像装置において、前記視差調整手段は、前記被写体までの距離に応じた視差になるように、前記複数の視点画像の視差を自動調整し、前記効果音制御手段は、前記視差調整手段により自動調整されている視差に基づいて前記一対の効果音出力手段からそれぞれ出力される効果音の位相差を大きく又は小さくする。
【００１９】
請求項１０記載の発明は、請求項９記載の複眼撮像装置において、前記効果音制御手段は、自動視差調整値が求められた場合に対応する比較効果音を前記一対の効果音出力手段に出力させる。
【００２０】
なお、本発明は、複眼撮像装置の効果音制御方法及びプログラムとして実現可能である。
【発明の効果】
【００２１】
本発明によれば、複数の視点から同一の被写体を撮像することで複数の視点画像を生成し、生成された複数の視点画像の視差を調整し、視差が調整された複数の視点画像に基づいて立体視画像を生成し、生成された立体視画像を表示し、調整された視差に基づいて、一対の効果音出力手段からそれぞれ出力される効果音を制御することによって、立体視画像による視覚効果だけでなく、聴覚効果を用いて調整中の視差をユーザに知らせることができる。
【図面の簡単な説明】
【００２２】
【図１】本発明の実施形態に係る複眼カメラの正面側斜視図である。
【図２】複眼カメラの背面側斜視図である。
【図３】複眼カメラの内部構成を示す概略ブロック図である。
【図４】撮影部の構成を示す図である。
【図５】立体視用の画像ファイルのファイルフォーマットを示す図である。
【図６】モニタの構成を示す図である。
【図７】レンチキュラーシートの構成を示す図である。
【図８】第１及び第２の画像に対する３次元処理を説明するための図である。
【図９】視差調整ルーチンを示すフローチャートである。
【図１０】視差調整量に対するステレオスピーカの位相差の変化パターンを示す図である。
【図１１】視差調整量に対するステレオスピーカの音程の変化パターンを示す図である。
【図１２】視差調整量に対する振動の強度の変化パターンを示す図である。
【図１３】視差調整量に対する振動の長さの変化パターンを示す図である。
【図１４】自動視差調整ルーチンを示すフローチャートである。
【図１５】自動視差調整時の視差に対する疑似サラウンドの位相の変化パターンを示す図である。
【発明を実施するための形態】
【００２３】
以下、図面を参照して本発明の実施形態について説明する。図１は本発明の実施形態に係る複眼カメラ１の正面側斜視図、図２は背面側斜視図である。
【００２４】
複眼カメラ１の上部には、レリーズボタン２、電源ボタン３及びズームレバー４が備えられている。複眼カメラ１の正面には、フラッシュ５及び２つの撮影部２１Ａ、２１Ｂのレンズが配設されている。また、複眼カメラ１の背面には、各種表示を行う液晶モニタ（以下単に「モニタ」いう。）７及び各種操作ボタン８が配設されている。更に、図２に示すように、複眼カメラ１の背面には、ユーザの好みに応じて視差を調整するための視差調整ボタン９が設けられている。
【００２５】
図３は、複眼カメラ１の内部構成を示す概略ブロック図である。複眼カメラ１は、２つの撮影部２１Ａ、２１Ｂ、撮影制御部２２、画像処理部２３、圧縮／伸長処理部２４、フレームメモリ２５、メディア制御部２６、内部メモリ２７、及び表示制御部２８を備える。なお、撮影部２１Ａ、２１Ｂは、被写体を見込む輻輳角を持って、あらかじめ定められた基線長となるように配置されている。また、輻輳角及び基線長の情報は内部メモリ２７に記憶されている。
【００２６】
図４は、撮影部２１Ａ、２１Ｂの構成を示す図である。図４に示すように撮影部２１Ａ、２１Ｂは、レンズ１０Ａ、１０Ｂ、絞り１１Ａ、１１Ｂ、シャッタ１２Ａ、１２Ｂ、撮像素子１３Ａ、１３Ｂ、アナログフロントエンド（ＡＦＥ）１４Ａ、１４Ｂ及びＡ／Ｄ変換部１５Ａ，１５Ｂをそれぞれ備える。
【００２７】
レンズ１０Ａ，１０Ｂは、被写体に焦点を合わせるためのフォーカスレンズ、ズーム機能を実現するためのズームレンズ等の複数の機能別レンズを有している。レンズ１０Ａ，１０Ｂの位置は、撮影制御部２２のＡＦ処理部２２ａにより得られる合焦データ及び図１及び図２に示したズームレバー４が操作された場合に得られるズームデータに基づいて、不図示のレンズ駆動部により調整される。
【００２８】
絞り１１Ａ，１１Ｂは、撮影制御部２２のＡＥ処理部２２ｂにより得られる絞り値データに基づいて、不図示の絞り駆動部により絞り径の調整が行われる。
【００２９】
シャッタ１２Ａ，１２Ｂはメカニカルシャッタであり、不図示のシャッタ駆動部により、ＡＥ処理部２２ｂにより得られるシャッタスピードに応じて駆動される。
【００３０】
撮像素子１３Ａ，１３Ｂは、多数の受光素子を２次元状に配列した光電面を有しており、被写体光がこの光電面に結像して光電変換されてアナログ撮影信号が取得される。また、撮像素子１３Ａ，１３Ｂの前面にはＲ，Ｇ，Ｂ各色のフィルタが規則的に配列されたカラーフィルタが配設されている。
【００３１】
ＡＦＥ１４Ａ，１４Ｂは、撮像素子１３Ａ，１３Ｂから出力されるアナログ撮影信号に対して、アナログ撮影信号のノイズを除去する処理、及びアナログ撮影信号のゲインを調節する処理（以下「アナログ処理」という。）を施す。
【００３２】
Ａ／Ｄ変換部１５Ａ，１５Ｂは、ＡＦＥ１４Ａ，１４Ｂによりアナログ処理が施されたアナログ撮影信号をデジタル信号に変換する。なお、撮影部２１Ａにより取得されるデジタルの画像データにより表される画像を第１の画像Ｇ１、撮影部２１Ｂにより取得される画像データにより表される画像を第２の画像Ｇ２とする。
【００３３】
撮影制御部２２は、上述のようにＡＦ処理部２２ａ及びＡＥ処理部２２ｂを有している。ＡＦ処理部２２ａは、レリーズボタン２が半押し操作されると、測距センサから測距情報を取得し、レンズ１０Ａ，１０Ｂの焦点位置を決定し、撮影部２１Ａ，２ｌＢに出力する。ＡＥ処理部２２ｂは、プレ画像に基づいて絞り値とシャッタ速度とを決定し、撮影部２１Ａ，２１Ｂに出力する。
【００３４】
なお、ＡＦ処理部２２ａによる焦点位置の検出方式としては、測距情報を用いたアクティブ方式に限らず、画像のコントラストを利用して合焦位置を検出するパッシブ方式を用いてもよい。
【００３５】
撮影制御部２２は、レリーズボタン２が操作されない状態では、撮影範囲を確認させるための、第１及び第２の画像Ｇ１，Ｇ２の本画像よりも画素数が少ないスルー画像を、所定時間間隔（例えば１／３０秒間隔）にて順次生成させるように撮影部２１Ａ，２１Ｂを制御する。そして、撮影制御部２２は、レリーズボタン２が全押し操作されると、本撮影を開始すべく、第１及び第２の画像Ｇ１，Ｇ２の本画像を生成するように撮影部２１Ａ，２１Ｂを制御する。
【００３６】
画像処理部２３は、撮影部２１Ａ，２１Ｂが取得した第１及び第２の画像Ｇ１，Ｇ２のデジタルの画像データに対して、ホワイトバランス調整、階調補正、シャープネス補正、及び色補正等の画像処理を施す。
【００３７】
圧縮／伸長処理部２４は、画像処理部２３によって処理が施された第１及び第２の画像Ｇ１，Ｇ２の本画像を表す画像データに対して、例えば、ＪＰＥＧ等の圧縮形式で圧縮処理を行い、立体視用の画像ファイルＦ０を生成する。この立体視用の画像ファイルＦ０は、第１及び第２の画像Ｇ１，Ｇ２の画像データを有しており、更に、Ｅｘｉｆフォーマット等に基づく、基線長、輻輳角及び撮影日時等の付帯情報、及び視点位置を表す視点情報を含んでいる。
【００３８】
図５は、立体視用の画像ファイルのファイルフォーマットを示す図である。立体視用の画像ファイルＦ０は、第１の画像Ｇ１の付帯情報Ｈ１、第１の画像Ｇ１の視点情報Ｓ１、第１の画像Ｇ１の画像データ、第２の画像Ｇ２の付帯情報Ｈ２、第２の画像Ｇ２の視点情報Ｓ２，及び第２の画像Ｇ２の画像データが格納されてなる。また、図示はしないが、第１及び第２の画像Ｇ１，Ｇ２についての付帯情報、視点情報及び画像データの前後には、データの開始位置及び終了位置を表す情報が含まれる。
【００３９】
付帯情報Ｈ１，Ｈ２には、第１及び第２の画像Ｇ１，Ｇ２の撮影日、基線長、及び輻輳角の情報が含まれる。付帯情報Ｈ１，Ｈ２には、第１及び第２の画像Ｇ１，Ｇ２のサムネイル画像も含まれる。なお、視点情報としては、例えば左側の撮影部から順に付与した視点位置の番号を用いることができる。
【００４０】
フレームメモリ２５は、撮影部２１Ａ，２１Ｂが取得した第１及び第２の画像Ｇ１，Ｇ２を表す画像データに対して、前述の画像処理部２３が行う処理を含む各種処理を行う際に使用する作業用メモリである。
【００４１】
メディア制御部２６は、記録メディア２９にアクセスして画像ファイル等の書き込みと読み込みの制御を行う。
【００４２】
内部メモリ２７は、複眼カメラ１において設定される各種定数、及びＣＰＵ３５が実行するプログラム等を記憶する。
【００４３】
表示制御部２８は、立体視する場合に、フレームメモリ２５または記録メディア２９に記録されている立体視画像ＧＲをモニタ７に表示させる。
【００４４】
図６は、モニタ７の構成を示す分解斜視図である。図６に示すように、モニタ７は、ＬＥＤにより発光するバックライトユニツト４０及び各種表示を行うための液晶パネル４１を積層し、液晶パネル４１の表面にレンチキュラーシート４２を取り付けることにより構成されている。
【００４５】
図７は、レンチキュラーシートの構成を示す図である。図７に示すようにレンチキュラーシート４２は、複数のシリンドリカルレンズ４３を基線に沿った方向に並列に並べることにより構成されている。
【００４６】
また、複眼カメラ１は、３次元処理部３０、ワイドステレオ回路３１、音声処理回路３２、一対のステレオスピーカ３３、モータドライバ回路３６、及びモータ３７を備える。
【００４７】
３次元処理部３０は、第１及び第２の画像Ｇ１，Ｇ２をモニタ７に立体視表示させるために、第１及び第２の画像Ｇ１，Ｇ２に対して３次元処理を行って立体視画像ＧＲを生成する。
【００４８】
図８は、第１及び第２の画像Ｇ１，Ｇ２に対する３次元処理を説明するための図である。図８に示すように３次元処理部３０は、第１及び第２の画像Ｇ１，Ｇ２の各々を基線に対して垂直方向に短冊状に切り取り、レンチキュラーシート４２におけるシリンドリカルレンズ４３のそれぞれに、位置が対応する短冊状に切り取った第１及び第２の画像Ｇ１，Ｇ２が交互に配置されるように３次元処理を行って、立体視画像ＧＲを生成する。立体視画像ＧＲを構成する第１及び第２の画像Ｇ１，Ｇ２の画像対は、各々１つのシリンドリカルレンズに対応して配置される。
【００４９】
また、３次元処理部３０は、ＡＦ処理部２２ａで用いられる測距情報（被写体までの距離）に基づいて、第１及び第２の画像Ｇ１，Ｇ２の視差を自動的に調整する（自動視差調整）。以下、自動視差調整で得られた視差を「自動視差調整値」という。
【００５０】
ここで、視差とは、第１及び第２の画像Ｇ１，Ｇ２の双方に含まれる被写体の、第１及び第２の画像Ｇ１，Ｇ２の横方向、すなわち基線に沿った方向における画素位置のずれ量をいう。自動視差調整値は被写体までの距離に応じて決定されるが、視差を調整することにより、立体視画像ＧＲに含まれる被写体の立体感をユーザ毎に適切なものとすることができる。
【００５１】
例えば、３次元処理部３０は、自動視差調整後、ＣＰＵ３５を介して、視差調整ボタン９により指示される視差調整量に応じて、第１及び第２の画像Ｇ１，Ｇ２の視差を調整することもできる。なお、視差調整量とは、自動視差調整値を基準にした場合の視差の増加量又は減少量をいう。
【００５２】
また、３次元処理部３０は、リアルタイムで撮影部２１Ａ、２１Ｂで得られた第１及び第２の画像Ｇ１，Ｇ２の視差を調整してもよいし、記録メディア２９に予め記録されている第１及び第２の画像Ｇ１，Ｇ２の視差を調整してもよい。
【００５３】
ワイドステレオ回路３１は、ステレオスピーカ３３から疑似サラウンド（ワイドステレオ）を発生させるための信号を生成する。音声処理回路３２は、ワイドステレオ回路３１からの信号に所定の処理を施し、ステレオスピーカ３３から疑似サラウンドを発生させる。ステレオスピーカ３３は一対のスピーカで構成され、一方のスピーカは複眼カメラ１本体の右側、他方は複眼カメラ１本体の左側に設置されている。
【００５４】
モータドライバ回路３６は、ＣＰＵ３５の制御に従って、モータ３７を駆動させる。ここで、モータ３７のシャフト先端部には分銅が偏って取り付けられ、モータ３７が回転すると振動が発生する。なお、振動の強さ（モータ３７の回転速度）、振動の長さ（モータ３７の回転時間）は、モータドライバ回路３６を介して、ＣＰＵ３５により制御される。
【００５５】
［疑似サラウンドの位相差制御］
以上のように構成された複眼カメラ１では、第１及び第２の画像Ｇ１，Ｇ２の視差が自動的に調整され、モニタ７に立体視画像ＧＲが表示される。しかし、個々のユーザが立体視画像ＧＲから感じられる立体感は大きく異なる。そこで、ユーザが視差調整ボタン９を操作すると、次の視差調整ルーチンが実行される。視差調整ルーチンのプログラムは、予め内部メモリ２７に記憶されている。図９は、視差調整ルーチンを示すフローチャートである。
【００５６】
ステップ１００では、ＣＰＵ３５は、視差調整ボタン９が操作されたかを判定し、視差調整ボタン９が操作されたと判定すると、ステップ１０２へ進む。
【００５７】
ステップ１０２では、ＣＰＵ３５は、立体感強調か否かを判定し、立体感強調の場合はステップ１０４へ進み、立体感強調でない場合はステップ１０６へ進む。ここでは、視差調整ボタン９の操作により視差調整量の増加が指示された場合は立体感強調と判定され、視差調整量の減少が指示された場合は立体感強調ではないと判定される。
【００５８】
ステップ１０４では、ＣＰＵ３５は、疑似サラウンドの位相差を１ステップ広げた効果音の信号を生成するようにワイドステレオ回路３１を制御する。このため、ワイドステレオ回路３１で生成された効果音の信号は音声処理回路３２へ供給され、位相差の広がった疑似サラウンドの効果音がステレオスピーカ３３を介して出力される。そして、ステップ１０８へ進む。
【００５９】
一方、ステップ１０６では、ＣＰＵ３５は、疑似サラウンドの位相差を１ステップ狭めた効果音の信号を生成するようにワイドステレオ回路３１を制御する。このため、ワイドステレオ回路３１で生成された効果音信号は音声処理回路３２へ供給され、位相差の狭まった疑似サラウンドの効果音がステレオスピーカ３３を介して出力される。そして、ステップ１０８進む。
【００６０】
ステップ１０８では、ＣＰＵ３５は、視差調整ボタン９による視差調整が終了したかを判定し、終了した場合は本ルーチンを終了し、終了していない場合はステップ１０２へ戻る。
【００６１】
図１０は、視差調整量に対するステレオスピーカ３３から出力される効果音の位相差の変化パターンを示す図である。この変化パターンは、視差調整量の絶対値が小さい場合は位相差の変化も小さいが、視差調整量の絶対値が大きくなると位相差の変化も大きくなるような指数曲線となっている。なお、同図の横軸の中心付近になる軸は、自動視差調整値である。
【００６２】
この結果、視差調整ボタン９により視差調整量の増加が指示されている間は、ステップ１０２、１０４、１０８が繰り返し実行され、疑似サラウンドの位相差が広がっていく。また、視差調整ボタン９により視差調整量の減少が指示されている間は、ステップ１０２、１０６、１０８が繰り返し実行され、疑似サラウンドの位相差が狭まっていく。
【００６３】
これにより、ユーザは、効果音のステレオ音響効果を用いることで、モニタ７を見ながら疑似サラウンドの位相差の変化を認識できるので、視差調整量がどの程度になっているかを適切に判別することができる。また、視差調整量に対する位相差は直線的に変化するのでなく指数的に変化するので、視差調整量を大きくしすぎた場合でも、ユーザはそのことを容易に把握して、視差の強め過ぎ、または弱め過ぎを知覚することができる。
【００６４】
なお、上述した例に限らず、例えば、立体感を強調する場合は疑似サラウンドの位相差を小さくする一方で、立体感を強調しない場合は疑似サラウンドの位相差を大きくしてもよい。また、視差調整量に対する位相差は直線的に変化してもよい。
【００６５】
［疑似サラウンドの音量制御］
また、ＣＰＵ３５は、ワイドステレオ回路３１を制御して、上述のように疑似サラウンドの位相差を変化させる代わりに、効果音の音量を変化させてもよい。
【００６６】
例えば、図９に示すステップ１０４において、ＣＰＵ３５は、疑似サラウンドの音量を１ステップ大きくした効果音の信号を生成するようにワイドステレオ回路３１を制御すればよい。また、ステップ１０６において、ＣＰＵ３５は、疑似サラウンドの音量を１ステップ小さくした効果音の信号を生成するようにワイドステレオ回路３１を制御すればよい。この場合、視差調整量に対する音量の変化パターンは、図１０と同様の曲線を用いてもよく、この場合は位相差に代えて音量を用いればよい。なお、自動視差調整値の位置では、中間音量となる。
【００６７】
これにより、ユーザは、モニタ７を見ながら疑似サラウンドの音量の変化を認識できるので、視差調整量がどの程度になっているかを適切に判別することができる。また、自動視差調整値以外では左右の効果音の音程がずれるので、ユーザは視差の強め過ぎ、又は弱め過ぎを知覚することができる。
【００６８】
なお、上述した例に限らず、例えば、立体感を強調する場合は疑似サラウンドの音量を小さくする一方で、立体感を強調しない場合は疑似サラウンドの音量を大きくしてもよい。また、視差調整量に対する音量は直線的に変化してもよい。
【００６９】
［疑似サラウンドの音程調整］
また、ＣＰＵ３５は、ワイドステレオ回路３１を制御して、上述のように疑似サラウンドの位相差又は音量を変化させる代わりに、効果音の音程を変化させてもよい。
【００７０】
例えば、図９に示すステップ１０４において、ＣＰＵ３５は、疑似サラウンドの音程を１ステップ高くした効果音の信号を生成するようにワイドステレオ回路３１を制御すればよい。また、ステップ１０６において、ＣＰＵ３５は、疑似サラウンドの音程を１ステップ低くした効果音の信号を生成するようにワイドステレオ回路３１を制御すればよい。
【００７１】
図１１は、視差調整量に対する音程の変化パターンを示す図である。同図に示すように、視差調整量が大きくなるに従って、ステレオスピーカ３３の右側（Ｒ）及び左側（Ｌ）の音程は共に高くなり（右上がり）、自動視差調整値で音程が一致する。但し、自動視差調整値より視差が小さい場合は右側（Ｒ）の音程の方が高く、自動視差調整値より視差が大きい場合は左側（Ｌ）の音程の方が高い。
【００７２】
これにより、ユーザは、モニタ７を見ながら疑似サラウンドの音程の変化を認識できるので、視差調整量がどの程度になっているかを適切に判別することができる。但し、音程の変化パターンは、図１１のようなパターンに限定されるものではない。例えば、視差が大きくなるに従って、ステレオスピーカ３３の右側（Ｒ）及び左側（Ｌ）の音程は共に低くなってもよいし（右下がり）、右側（Ｒ）及び左側（Ｌ）の傾きを入れ替えてもよい。
【００７３】
［振動の強さ・長さ調整］
また、ＣＰＵ３５は、疑似サラウンドの効果音を制御すると同時に、モータ３７を制御することにより、視差操作量に対して次のように振動を制御してもよい。図１２は、視差操作量に対する振動の強度を示す図である。同図によれば、視差調整量が大きくなるに従って、振動の強度も直線的に大きくなっている。図１３は、視差操作量に対する振動の長さを示す図である。同図によれば、視差調整量が大きくなるに従って、振動の長さは直線的に小さくなっている。
【００７４】
そして、ＣＰＵ３５は、立体感強調の場合（視差操作量が増加する場合）、モータドライバ回路３６を介して、モータ３７の回転数を上げ、モータ３７の回転時間を長くする。これにより、複眼カメラ１に生じる振動が強くなり、また、振動時間が長くなる。
【００７５】
また、ＣＰＵ３５は、立体感強調でない場合（視差操作量が減少する場合）、モータドライバ回路３６を介して、モータ３７の回転数を下げ、モータ３７の回転時間を短くする。これにより、複眼カメラ１に生じる振動が弱くなり、また、振動時間が短くなる。なお、ＣＰＵ３５の制御対象は、振動の強度、長さのいずれか一方でもよい。
【００７６】
この結果、ユーザは、視差調整量を振動の強さ・長さで認識することができる。また、手に伝わる振動の強度と長さが変化するので、視差の強め過ぎ、または弱め過ぎをユーザに知覚させることができる。
【００７７】
［自動視差調整］
自動視差調整では半押しの状態でオートフォーカスを行う時の測距情報が用いられるが、その測距情報を用いて次の自動視差調整ルーチンを実行してもよい。図１４は、自動視差調整ルーチンを示すフローチャートである。
【００７８】
ステップ１１０では、ＣＰＵ３５は、疑似サラウンドで比較用長音を鳴動するための信号を生成するようにワイドステレオ回路３１を制御する。比較用長音とは、疑似サラウンドが所定の位相差であって、音色及び音程が同一の長音であり、例えば「ピー」という長音である。なお、比較用長音の疑似サラウンドの位相差は、合焦位置検出時（自動調整視差値の検出時）の効果音の位相差と同じである。そして、ステレオスピーカ３３から「ピー」という比較用長音が鳴動すると、ステップ１１２へ進む。
【００７９】
ステップ１１２では、ＣＰＵ３５は、ＡＦ処理部２２ａにオートフォーカス処理を実行させると共に、測距情報に基づいて第１及び第２の画像Ｇ１，Ｇ２の視差を自動的に調整する自動視差調整を３次元処理部３０に実行させて、ステップ１１４へ進む。
【００８０】
ステップ１１４では、ＣＰＵ３５は、疑似サラウンドによる合焦効果音の信号を生成するようにワイドステレオ回路３１を制御する。具体的には、ＣＰＵ３５は、自動視差調整中の視差の変化に応じて、疑似サラウンドの位相差を制御する。ここでは、ピピピ・・・という短音の合焦効果音が発生し、合焦位置が検出されると、合焦効果音は比較用長音と共に「ピー」と鳴動する。そして、本ルーチンが終了する。
【００８１】
図１５は、自動視差調整時の視差に対する疑似サラウンドの位相差を示す図である。このように、自動視差調整時（ＡＦ処理時）では、視差が増加するに従って、疑似サラウンドの位相差も直線的に増加し、合焦位置が見つかると、ピーと鳴動する。したがって、ユーザは、音響効果により、自動視差調整時の自動調整量を知覚することができる。なお、疑似サラウンドの位相制御については、自動視差調整時だけでなくマニュアルによる視差調整時でも、同様に適用することができる。
【００８２】
なお、本発明は、上述した実施形態に限定されるものではなく、特許請求の範囲に記載された事項の範囲内で設計変更されたものについても適用可能である。
【００８３】
例えば、上記各実施形態では、３次元処理部３０が第１及び第２の画像Ｇ１，Ｇ２の視差を調整したが、不図示の駆動機構が撮影部２１Ａ、２１Ｂの距離（基線長）または輻輳角の少なくとも１つを調整することで視差を調整してもよい。
【符号の説明】
【００８４】
７  モニタ
９  視差調整ボタン
２１Ａ、２１Ｂ  撮影部
２２  撮影制御部
２２ａ  ＡＦ処理部
２２ｂ  ＡＥ処理部
３０  ３次元処理部
３１  ワイドステレオ回路
３２  音声処理回路
３３  ステレオスピーカ
３５  ＣＰＵ
３６  モータドライバ回路
３７  モータ
【図１】
2011209634.tif 000003
【図２】
2011209634.tif 000004
【図３】
2011209634.tif 000005
【図４】
2011209634.tif 000006
【図５】
2011209634.tif 000007
【図６】
2011209634.tif 000008
【図７】
2011209634.tif 000009
【図８】
2011209634.tif 000010
【図９】
2011209634.tif 000011
【図１０】
2011209634.tif 000012
【図１１】
2011209634.tif 000013
【図１２】
2011209634.tif 000014
【図１３】
2011209634.tif 000015
【図１４】
2011209634.tif 000016
【図１５】
2011209634.tif 000017