(57)【要約】【課題】撮像装置本体の向きや、撮像装置の動作モードの情報を用いて録音手段の左右のチャンネル割り当てを切り換え、適切なステレオ感を有した音声記録を行う。【解決手段】  被写体を撮影する第１の撮像手段と、撮影者を撮影する第２の撮像手段と、撮像装置の方向を検知する方向検知手段と、音声を録音する録音手段とを具備する撮像装置であって、前記方向検知手段で検知した撮像装置の向きと、設定されている撮影モードに応じて前記録音手段の左右のチャンネル割り当てを切り換える。【選択図】図１
2017199986.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影する第１の撮像手段と、撮影者を撮影する第２の撮像手段と、撮像装置の方向を検知する方向検知手段と、音声を録音する録音手段とを具備する撮像装置であって、前記方向検知手段で検知した撮像装置の向きと、設定されている撮影モードに応じて前記録音手段の左右のチャンネル割り当てを切り換えることを特徴とする撮像装置。
【請求項２】
前記撮像装置の撮影モードの一つである再生中閲覧者撮影モードは、撮像装置で画像を再生すると同時に閲覧者が画像を閲覧する様子を動画として記録することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記撮像装置の撮影モードの一つである再生中閲覧者撮影モードで記録された動画は、前記動画を撮影する時に撮像装置で再生していた画像と関連付けされ、同時に再生可能であることを特徴とする請求項１又は請求項２に記載の撮像装置。
【請求項４】
前記撮像装置の撮影モードは、再生中閲覧者撮影モードと自分撮りモードであり、前記撮像装置の撮影モード情報を前記録音手段の左右のチャンネル割り当ての切り替えに用いることを特徴とする、請求項１乃至請求項３の何れか一項に記載の撮像装置。
【請求項５】
前記撮像装置の向きは、方向検知手段によって検知され、撮像装置が上方向、下方向、右方向、左方向のいずれかの状態であることを検知し、前記撮像装置の向き情報を前記録音手段の左右のチャンネル割り当ての切り替えに用いることを特徴とする請求項１乃至請求項４の何れか一項に記載の撮像装置。
【請求項６】
前記録音手段の左右のチャンネル割り当ては、撮影される動画が再生される時に正しいステレオ感で再生されるように、前記撮像装置の向き情報と、前記撮影モード情報から決定されることを特徴とする請求項１乃至請求項５の何れか一項に記載の撮像装置。
【請求項７】
前記撮像装置の向きは、方向検知手段によって検知され、撮像装置が右方向、左方向のいずれかの状態であることを検知した場合、前記録音手段で録音されるステレオ音声をモノラル音声に変換して録音することを特徴とする請求項１乃至請求項６の何れか一項に記載の撮像装置。
【請求項８】
被写体を撮影する第１の撮像手段と、撮影者を撮影する第２の撮像手段と、撮像装置の方向を検知する方向検知手段と、音声を録音する録音手段とを具備する撮像装置であって、前記方向検知手段で検知した撮像装置の向きと、設定されている撮影モードに応じて前記録音手段の左右のチャンネル割り当てを切り換えることを特徴とする撮像装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置に関する。
【背景技術】
【０００２】
撮像部が回転可能な撮像装置において、撮像部で撮影した映像に相関の取れた音声が得られる撮像装置が提案されている。
【０００３】
特許文献１は、撮像部が回転可能な撮像装置であり、本体部に複数個のマイクロホンを設置し、撮像部の回転角度の検出手段を設け、検出結果に応じて複数個のマイクロホンのうち２つを選択する。前記構成によって、カメラ部で撮影した映像に相関の取れた音声を得ることができる撮像装置を開示している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平８−８４２８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１において開示される撮像装置は、撮像部が回転可能な撮像装置であり、本体部に複数個のマイクロホンを設置しており、撮像部の回転方向を検知し、撮像装置の回転方向に応じて本体部に備えられている複数個のマイクロホンのうちの２つを選択する。例えば、撮像部が向いている方向のマイクロホン２つを選択すると、撮像部が撮影している動画と録音される音声の相関を取ることができる。
【０００６】
しかしながら、複数個のマイクロホンのうちの２つのマイクロホンを選択するにあたる情報は、撮像装置の回転方向についての情報のみであり、他の情報を利用してマイクロホンを選択する方法については言及されていない。
【０００７】
このような状況を鑑みて、本発明においては、撮像装置本体の向きや、撮像装置の動作モードといった情報を用いてマイクロホンの制御を切り換えることができる撮像装置を提供すること目的とする。
【課題を解決するための手段】
【０００８】
上記の目的を達成するために、本発明に係る撮像装置は、
被写体を撮影する第１の撮像手段と、撮影者を撮影する第２の撮像手段と、撮像装置の方向を検知する方向検知手段と、音声を録音する録音手段とを具備する撮像装置であって、前記方向検知手段で検知した撮像装置の向きと、設定されている撮影モードに応じて前記録音手段の左右のチャンネル割り当てを切り換えることを特徴とする。
【発明の効果】
【０００９】
本発明に係る撮像装置によれば、再生画像の閲覧者を撮影し、再生画像と、再生画像の閲覧者の画像をひもづけして表示可能な撮像装置において、撮像装置の向きに関わらず、撮影画像に相関の取れた音声を録音することができる。
【図面の簡単な説明】
【００１０】
【図１】撮像装置の動作処理フローの例を示す図である。
【図２】撮像装置の構成例を示す図である。
【図３】撮像装置の外観の一例を示す図である。
【図４】再生中閲覧者撮影モードにおいて撮影を行う処理を示す図である。
【図５】再生中閲覧者撮影モードにおいて再生画像を表示する処理を示す図である。
【図６】撮影される動画と音声の左右チャンネルとの関係を示す図である。
【図７】再生画像と撮影した動画を同時に再生する処理を示す図である。
【図８】再生中閲覧者撮影モードにおいて撮影を行う処理を示す図である。
【図９】再生中閲覧者撮影モードにおいて再生画像を表示する処理を示す図である。
【図１０】撮影される動画と音声のチャンネルとの関係を示す図である。
【図１１】再生画像と撮影した動画を同時に再生する処理を示す図である。
【発明を実施するための形態】
【００１１】
以下、本発明を実施するための形態を図面に基づいて説明する。
【００１２】
［実施例１］
図２は本実施形態の撮像装置の構成例を示す図である。
【００１３】
以下に、図２に示す撮像装置としてデジタルカメラを適用した例について説明する。
【００１４】
この撮像装置は、被写体を撮像する撮像部を２組具備する。撮像装置が具備する撮像部は２組に限らず、複数個の撮像部を有しても良い。第１の撮像部であるアウトカメラ２０１Ａと第２の撮像部であるインカメラ２０１Ｂは、お互いに反対方向を向いて配置されている。アウトカメラ２０１Ａは主にユーザに対して正対する被写体を撮影する時に用いられ、インカメラ２０１Ｂは主にユーザ自身を撮影する自分撮りを行う場合に用いられる。
【００１５】
この撮像装置は、モータドライバ（Ａ）２０７Ａ、モータドライバ（Ｂ）２０７Ｂ、ＡＦＥ（Analog Front End）（Ａ）２０８Ａ、ＡＦＥ（Ｂ）２０８Ｂ、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）２０９、フラッシュメモリ２１０を備える。また、この撮像装置は、不揮発性メモリ２１１を挿入し、データの読み書きが可能なカードコネクタ２１２、バス信号ライン２１３、ＣＰＵ（Central Processing Unit ）２１４、左マイクロホン２１５Ａ、右マイクロホン２１５Ｂ、左スピーカ２１６Ａ、右スピーカ２１６Ｂを備える。ＣＰＵ２１４は、撮像装置全体を制御する。また、この撮像装置は、ビデオエンコーダ２１７、ビデオアンプ２１８、外部表示装置接続端子２１９、液晶パネルドライバ２２０、液晶パネル２２１、操作スイッチ２２２、外部接続端子２２３を備える。
【００１６】
アウトカメラ２０１Ａは、フォーカッシングモータ（Ａ）２０２Ａ、レンズ群（Ａ）２０３Ａ、アイリスモータ（Ａ）２０４Ａ、絞り（Ａ）２０５Ａ、ＣＣＤ（Ａ）（Charge Coupled Device）２０６Ａを備える。レンズ群（Ａ）２０３Ａは、複数枚のレンズを含んでいる。被写体からの光はレンズ群（Ａ）２０３Ａから入射し、絞り（Ａ）２０５Ａを通してＣＣＤ（Ａ）２０６Ａに到達する。フォーカッシングモータ（Ａ）２０２Ａが、ＣＣＤ（Ａ）２０６Ａの受光面と平行に配置されたレンズ群（Ａ）２０３Ａを光軸方向に移動させる。これにより、レンズ群（Ａ）２０３ＡとＣＣＤ（Ａ）２０６Ａ間の距離が調節され、被写体像がＣＣＤ（Ａ）２０６Ａ上に結像する。インカメラ２０１Ｂは、アウトカメラ２０１Ａと同様の構成のため、説明を省略する。
【００１７】
フォーカッシングモータ（Ａ）２０２Ａが、第１の撮像部（Ａ）２０１Ａに設けられたそれぞれのレンズ間の距離を変化させることによって、ＣＣＤ（Ａ）２０６Ａに結像する被写体の焦点距離を調節することができる。フォーカッシングモータ（Ａ）２０２Ａは、フォトインタラプタ（図示を省略）によってその回転数が読み取られる。これにより、レンズ群（Ａ）２０３Ａの存在する位置を認識することができる。フォーカッシングモータ（Ａ）２０２Ａは、モータドライバ（Ａ）２０７Ａによって回転数を制御することができ、レンズ群（Ａ）２０３Ａを所望の位置に移動することが可能である。撮像装置と被写体との距離や角度によって、レンズ群（Ａ）２０３Ａに入射する光線の入光量や角度が変化するので、撮影の都度、レンズ群（Ａ）２０３ＡとＣＣＤ（Ａ）２０６Ａとの間の距離を調整する焦点検出動作が必要になる。
【００１８】
アイリスモータ（Ａ）２０４Ａは、絞り（Ａ）２０５Ａを制御するモータである。アイリスモータ（Ａ）２０４Ａが、被写体の明るさに応じて絞り（Ａ）２０５Ａの開口径を制御することによって、ＣＣＤ（Ａ）２０６Ａに入射する光量が制御され、最適な露出が得られる撮影を行うことができる。
【００１９】
ＣＣＤ（Ａ）２０６Ａに結像した被写体像に対して光電変換が行われ、ＣＣＤ（Ａ）２０６Ａの画素一つ一つが得た光量に比例した電荷量が得られる。被写体像の明るい部分については大きな電荷量が得られ、被写体像の暗い部分の電荷量は小さくなる。すなわち、被写体像の濃淡を電荷量の差として得ることができる。ＣＣＤ（Ａ）２０６Ａは、数百万画素〜数千万画素で構成されており、それぞれの画素にマイクロレンズ、カラーフィルタが配置されている。赤、緑、青のカラーフィルタを配置することで、３原色の入光量を得ることができ、その結果、フルカラー画像を得ることができる。ＣＣＤ（Ａ）２０６Ａからの電荷は、プリント基板上の配線パターン（図示を省略）を通してＡＦＥ（Ａ）２０８Ａに入力される。
【００２０】
ＡＦＥ（Ａ）２０８Ａには、ＣＣＤ（Ａ）２０６Ａで発生する固定パターンノイズを除去するＣＤＳ回路、ＣＣＤ（Ａ）２０６Ａからの信号をアナログ−デジタル変換するＡ／Ｄ（Analog to Digital）変換回路等のアナログ信号処理回路が組み込まれている。また、ＡＦＥ（Ａ）２０８Ａには、ＣＣＤ（Ａ）２０６Ａからの電気信号を読み出すためのタイミング信号を作り出すＴＧ回路が組み込まれている。このＴＧ回路は、ＣＣＤ（Ａ）２０６Ａを制御するタイミング信号を生成する。生成されたタイミング信号に従って、ＣＣＤ（Ａ）２０６ＡからＡＦＥ（Ａ）２０８Ａに電荷が転送される。
【００２１】
ＣＤＳ回路が、読み出された電荷について、ノイズ成分の低減処理を行う。そして、Ａ／Ｄ変換回路が、アナログ信号である電荷量をデジタル信号に変換する。上記変換されたデジタル信号は、バス信号ライン２１３を介して高速送受信が可能なデバイスであるＳＤＲＡＭ２０９に一時蓄積される。そして、一時蓄積されたデジタル信号が、ＳＤＲＡＭ２０９から逐次ＣＰＵ２１４へ読み出され、エッジ強調やノイズ除去、ホワイトバランス等の各種画像処理が行われる。各種画像処理が終了した画像データは、数メガバイト程度の大容量のデータである。この画像データは、ＪＰＥＧ方式等による画像圧縮処理が施された後に、フラッシュメモリ２１０やカードコネクタ２１２に挿入可能な不揮発性メモリ２１１等に保存される。
【００２２】
持ち運び可能な不揮発性メモリ２１１に画像データを記憶することで、撮像装置で撮影した画像を他のデバイス、例えば、パーソナルコンピュータやプリンタで読み出すことが可能である。これにより、大画面のディスプレイ上で画像を閲覧したり、写真紙にプリントアウトして写真として閲覧したりすることが可能になる。このように、不揮発性メモリ２１１を介した画像出力の他に、液晶表示手段である液晶パネル２２１を備える撮像装置であれば、撮影した画像を、液晶パネルドライバ２２０を介して、撮影後すぐに液晶パネル２２１の画面上で確認することができる。液晶パネル２２１は、撮像装置に内蔵されているため、小型で解像度が低い場合が多く、複数人で同時に画像を閲覧することが困難な場合がある。
【００２３】
このため、図２に示す撮像装置は、内部にビデオエンコーダ２１７、ビデオアンプ２１８、外部表示装置接続端子２１９を搭載している。撮像装置が、外部表示装置接続端子２１９を介して外部のＴＶ（Television）モニタ（図示を省略）に映像を出力するようにすることもできる。ＴＶモニタは、液晶パネル２２１と比較して大画面での出力が可能であり、ユーザが多くの人と一緒に画像の閲覧を楽しむことも可能である。
【００２４】
ＣＰＵ２１４は、撮像装置全体を制御する。なお、ＣＰＵ２１４には、音声ＣＯＤＥＣ（COmpression／DECompression）２２５、操作スイッチ２２２、外部接続端子２２３、方向検知センサ２２４も接続されている。本実施形態の撮像装置の制御方法は、図２に示す撮像装置が備える処理部の機能によって実現される。
【００２５】
音声ＣＯＤＥＣ２２５には左マイクロホン２１５Ａ、右マイクロホン２１５Ｂ、左スピーカ２１６Ａ、右スピーカ２１６Ｂが接続されている。また、音声ＣＯＤＥＣ２２５には、マイクアンプ、Ａ／Ｄ変換器、Ｄ／Ａ（Digital to Analog）変換器、スピーカアンプ（いずれも図示を省略）が内蔵されている。
【００２６】
被写体からの音声は左マイクロホン２１５Ａ、右マイクロホン２１５Ｂに入力される。マイクロホンとしては、エレクトレット・コンデンサ型のマイクが多く使われており、マイクロホンユニットの内部にコンデンサが設けられている。前記被写体からの音声による振動を前記コンデンサが受け、コンデンサの容量が変化するが、この変化量を電圧変化として取り出すのがエレクトレット・コンデンサ型のマイクロホンである。エレクトレット・コンデンサ型マイクロホンからは微弱な信号しか得られないため、音声ＣＯＤＥＣ２２５に内蔵されているマイクアンプによって入力された音声信号を増幅する。
【００２７】
増幅された音声信号は、音声ＣＯＤＥＣ２２５に内蔵のＡ／Ｄ変換器によってアナログ信号からデジタル信号に変換される。デジタル化された音声信号はＣＰＵ２１４に送信され、ＣＣＤ（Ａ）２０６Ａ、もしくはＣＣＤ（Ｂ）２０６Ｂで撮影された動画像と共に不揮発性メモリ２１１に保存される。
【００２８】
一方、動画を再生する時には不揮発性メモリ２１１からＣＰＵ２１４にデータが読み出され、音声データはＣＰＵ２１４から音声ＣＯＤＥＣ２２５に読み出され、音声ＣＯＤＥＣ２２５に内蔵のＤ／Ａ変換器によってデジタル信号からアナログ信号に変換される。アナログ化された音声信号は音声ＣＯＤＥＣ２２５に内蔵のスピーカアンプで増幅されてから、左スピーカ２１６Ａもしくは右スピーカ２１６Ｂに送信され、振動板が振動することで音声を発する。
【００２９】
図３は本実施形態の撮像装置の外観の一例を示す図である。図３（Ａ）は図２に示す撮像装置の正面斜視図を示す。図３（Ｂ）は図２に示す撮像装置の背面斜視図を示す。
【００３０】
図３（Ａ）に示すように、撮像装置は、アウトカメラ２０１Ａ、レリーズスイッチ３０１の他、電源スイッチ３０２、ストロボ３０３、左マイクロホン２１５Ａ、右マイクロホン２１５Ｂを備える。また、図３（Ｂ）に示すように、撮像装置は、インカメラ２０１Ｂ、左スピーカ２１６Ａ、右スピーカ２１６Ｂ、液晶パネル２２１を備える。
【００３１】
液晶パネル２２１上には撮像装置の撮影モードが表示される。撮影者は、液晶パネル２２１上に表示される撮影モードを確認しながら、操作スイッチ（図示を省略）を押して、撮像装置の撮影モードを所望の撮影モードに移行させることができる。本実施形態の撮像装置には、静止画撮影モード、動画撮影モード等の撮影モードと、撮影した画像を確認するための再生モードが用意されている。本実施形態の撮像装置が、様々な撮影条件をユーザが設定することができるマニュアルモードや、撮影シーンに合わせて最適な撮影が可能な各種撮影シーンモードを備えるようにしてもよい。
【００３２】
以下、図１を参照して、本発明の撮像装置の実施形態について説明する。
【００３３】
図１は本実施形態の撮像装置の動作処理フローの例を示す図である。図１に示す動作処理フローは、図２に示す撮像装置のＣＰＵ２１４の制御のもとに実行される。
【００３４】
まず、ＣＰＵ２１４が、撮像装置がインカメラ２０１Ｂを起動しているかどうかの判断を行う（ステップ１０１）。インカメラ２０１Ｂは通常撮影者側に向いている。ＣＰＵ２１４が、撮像装置がインカメラ２０１Ｂを起動していると判断した場合にはステップＳ１０２に移行する。ＣＰＵ２１４が、撮像装置がインカメラ２０１Ｂを起動していないと判断した場合には、ステップＳ１０１に戻る。
【００３５】
次に、ＣＰＵ２１４が、撮像装置が再生中閲覧者撮影モードに設定されているかを判断する（ステップＳ１０２）。再生中閲覧者撮影モードでは、不揮発性メモリ２１１上に保存された画像を液晶パネル２２１上に再生しながら、インカメラ２０１Ｂで前記再生画像を閲覧する閲覧者の動画撮影を行う。ＣＰＵ２１４が、撮影モードが再生中閲覧者撮影モードに設定されていると判断した場合は、ステップＳ１０３に進む。ＣＰＵ２１４が、撮影モードが再生中閲覧者撮影モード以外に設定されていると判断した場合は、ステップＳ１１１に移行する。
【００３６】
次に、ステップＳ１０３において、ＣＰＵ２１４が、ユーザが再生画像を選択したかどうかの確認を行う。ＣＰＵ２１４が、ユーザが再生画像を選択したと判断した場合はステップＳ１０４に移行する。ＣＰＵ２１４が、ユーザが再生画像を選択していないと判断した場合はステップＳ１０３に戻る。
【００３７】
次に、ステップＳ１０４において、ＣＰＵ２１４が、ステップＳ１０３でユーザに選択された再生画像を液晶パネル２２１上に表示して、ステップＳ１０５に移行する。
【００３８】
次に、ステップＳ１０５において、ＣＰＵ２１４が、撮像装置の向きの検知を行う。撮像装置の向きの検知は撮像装置が具備する方向検知センサ２２４の出力情報をＣＰＵ２１４が読みだすことで行う。方向検知センサ２２４は、４方向を検知することが可能なセンサであり、撮像装置の４方向（上向き、右向き、下向き、左向き）を検知することができる。
【００３９】
方向検知センサ２２４は、部品内部に四角形の空間を持ち、それぞれの頂点に１つのＬＥＤ（Light Emitting Diode）と２つのフォトトランジスタが配置されている。空間の中には光を遮るボールが配置されており、方向検知センサ２２４が上下左右に位置を変えるとボールが動き、方向検知センサ２２４の方向によりボールがさえぎる光の位置が変化する。この光の変化を２つのフォトトランジスタが検知し、ＣＰＵ２１４が受信する２つのフォトトランジスタ出力のＯＮ／ＯＦＦの組み合わせで方向検知センサ２２４の向きをＣＰＵ２１４が判断する。
【００４０】
方向検知センサ２２４は、方向検知センサ２２４の方向検知方向と、撮像装置で検知したい方向が一致するように、あらかじめ撮像装置内に配置されている。方向検知センサ２２４の出力をＣＰＵ２１４が読み取り、ＣＰＵ２１４が、撮像装置が上向きであると判断した場合はステップＳ１０６に移行する。ＣＰＵ２１４が、撮像装置が上向き以外であると判断した場合はステップＳ１０９に移行する。
【００４１】
図４は本実施形態の撮像装置が上向き状態で、再生中閲覧者撮影モードにおいて撮影を行う処理を示す図である。また、図５は本実施形態の撮像装置が上向き状態で、再生中閲覧者撮影モードにおいて再生画像を表示する処理を示す図である。また、図６は、本実施形態の撮像装置が上向き状態で、再生中閲覧者撮影モードにおいて撮影を行った時に、インカメラで撮影される動画と音声の左右チャンネルとの関係を示す図である。
【００４２】
再生中閲覧者撮影モードにおいては、図５に示す再生画像５０１を閲覧している図４に示す閲覧者４０１をインカメラ２０１Ｂで撮影するため、通常撮影時とはマイクの左右が逆になる。
【００４３】
通常撮影時には、アウトカメラ２０１Ａを使用して、閲覧者４０１と正対する被写体の撮影を行うため、左マイクロホン２１５Ａの音声を左チャンネル音声として、右マイクロホン２１５Ｂの音声を右チャンネル音声として録音する。一方で、再生中閲覧者撮影モードでは、インカメラ２０１Ｂを使用して、再生画像５０１を閲覧している閲覧者４０１の撮影を行う。このため、図６に示すインカメラ撮影動画Ａ６０１のように、左マイクロホン２１５Ａの音声を右チャンネル音声として、右マイクロホン２１５Ｂの音声を左チャンネル音声として録音する必要がある。
【００４４】
ステップＳ１０６においては、図４乃至図６で説明した理由から、ＣＰＵ２１４が左マイクロホン２１５Ａと右マイクロホン２１５Ｂの左右のチャンネルを入れ替える。通常、左マイクロホン２１５Ａに入力された音声信号は、左チャンネル音声として録音されるが、ステップＳ１０６では左マイクロホン２１５Ａに入力された音声を右チャンネル音声として録音を行う。
【００４５】
具体的には、音声ＣＯＤＥＣ２２５に入力された左マイクロホン２１５Ａからの音声を、音声ＣＯＤＥＣ２２５内で右チャンネル音声として録音することで実現する。また、右マイクロホン２１５Ｂに入力された音声も同様にして、ステップＳ１０６においては、右マイクロホン２１５Ｂに入力された音声を左チャンネル音声として録音を行う。このようにして、マイクロホン左２１５Ａとマイクロホン右２１５Ｂの左右チャンネルを入れ替えて動画撮影を行うことで、動画を再生したときに画像の左右と音声の左右が一致し、正しいステレオ感を得ることができる。マイクロホン２１５Ａとマイクロンホン２１５Ｂのチャンネル入れ替えが完了したら、ステップＳ１０７に移行する。
【００４６】
ステップＳ１０７では、ステップＳ１０６で設定されたマイクロホンのチャンネル設定に従って、インカメラ２０１Ｂでの動画の撮影を行う。動画の撮影が完了したら、ステップＳ１０８に移行する。
【００４７】
図７は本実施形態の撮像装置が上向き状態で、再生中閲覧者撮影モードにおいて撮影を行った後に、再生画像と撮影した動画を同時に再生する処理を示す図である。
【００４８】
再生中撮影モードでの再生画像５０１と、再生画像５０１を閲覧する閲覧者４０１を撮影した動画であるインカメラ撮影動画Ａ６０１を同時に再生する処理を行っている。また、インカメラ撮影動画Ａ６０１の他にも、インカメラ撮影動画Ａ６０１と同様に撮影された、過去のインカメラ撮影動画Ａ７０１も同時に表示させてもよい。
【００４９】
ステップＳ１０８において、ステップＳ１０７で撮影されたインカメラ撮影動画Ａ５０１はステップＳ１０４で表示された画像、すなわち再生画像５０１にひもづけて保存される。ステップＳ１０７で撮影されるインカメラ撮影動画Ａ６０１は、ステップＳ１０４で表示される再生画像５０１を閲覧者４０１が閲覧している動画である。両者をひもづけて保存しておくことで、ステップＳ１０４で表示された再生画像５０１を再度表示したときに、ステップＳ１０７で撮影されたインカメラ撮影動画Ａ６０１も同時に再生することができる。
【００５０】
以上の処理を行うことで、閲覧者４０１が見ている再生画像５０１と、再生画像５０１を見ている閲覧者の動画Ａ６０１を同時に見ることができる。こうすることで、単に撮影画像を閲覧するのみでなく、撮影画像を見たときの閲覧者の感情をも動画から読み取ることができ、両者を単独で閲覧する場合よりも臨場感のあふれる映像をユーザが閲覧することができる。
【００５１】
一方で、ステップＳ１０５で実施した撮像装置の向きの検知結果から、ＣＰＵ２１４が、撮像装置が上向き以外であると判断した場合はステップＳ１０９に移行する。
【００５２】
図８は本実施形態の撮像装置が下向き状態で、再生中閲覧者撮影モードにおいて撮影を行う処理を示す図である。また、図９は、本実施形態の撮像装置が下向き状態で、再生中閲覧者撮影モードにおいて再生画像を表示する処理を示す図である。また、図１０は、本実施形態の撮像装置が下向き状態で、再生中閲覧者撮影モードにおいて撮影を行った時に、インカメラで撮影される動画と音声のチャンネルとの関係を示す図である。
【００５３】
図４乃至図６において説明を行ったように、再生中閲覧者撮影モードにおいては、再生画像５０１を閲覧している閲覧者４０１をインカメラ２０１Ｂで撮影するため、通常撮影時とはマイクロホンの左右が逆になる。また更に、図７においては撮像装置が下向き状態となっているため、閲覧者４０１に対してマイクロホンの左右が更に逆となる。よって、結果的に通常撮影時と同様にして、左マイクロホン２１５Ａの音声を左チャンネル音声として、右マイクロホン２１５Ｂの音声を右チャンネル音声として録音を行う。このようにして、マイクロホン左２１５Ａとマイクロホン右２１５Ｂのチャンネルは入れ替えずに動画撮影を行うことで、動画を再生したときに画像の左右と音声の左右が一致し、正しいステレオ感を得ることができる。
【００５４】
次に、ステップＳ１０９において、ＣＰＵ２１４が、撮像装置が上向き、下向き以外であると判断した場合は、撮像装置が横向きであると判断し、ステップＳ１１０に移行する。
【００５５】
図１１は本実施形態の撮像装置が下向き状態で、再生中閲覧者撮影モードにおいて撮影を行った後に、再生画像と撮影した動画を同時に再生する処理を示す図である。
【００５６】
再生中撮影モードでの再生画像５０１と、再生画像５０１を閲覧する閲覧者４０１を撮影した動画であるインカメラ撮影動画Ｂ１００１を同時に再生する処理を行っている。また、インカメラ撮影動画Ｂ１００１の他にも、インカメラ撮影動画Ｂ１００１と同様に撮影された、過去のインカメラ撮影動画Ｂ１１０１も同時に表示させてもよい。再生画像５０１を閲覧する他のユーザの動画７０１も同時に表示させてもよい。
【００５７】
ステップＳ１０８において、ステップＳ１０７で撮影されたインカメラ撮影動画Ｂ１００１はステップＳ１０４で表示された画像、すなわち再生画像４０１にひもづけて保存される。ステップＳ１１０において、ステップＳ１０５、ステップＳ１０９での判断結果から、撮像装置は上向きでも下向きでもない状態にあるため、右向きか左向きの横向きの状態であることが分かる。撮像装置が斜め向きであることも考えられるが、本実施例においては４方向のみ検知可能な方向検知センサ２２４を使用しており、撮像装置が斜めの場合には、撮像装置の角度により、上向き、下向き、右向き、左向きのいずれかと判断される。ステップＳ１１０において、ＣＰＵ２１４はマイクロホン左２１５Ａとマイクロホン右２１５Ｂの左右差が目立たないように、音声を疑似的にモノラル化して録音を行う。
【００５８】
撮像装置が横向きの状態の場合、マイクロホン左２１５Ａとマイクロホン右２１５Ｂは縦並びとなり、マイクロホン左２１５Ａとマイクロホン右２１５Ｂに入り込む音の左右差がほとんど見えなくなってしまう。このような場合には、マイクロホン左２１５Ａとマイクロホン右２１５Ｂの録音感度の差が目立って見えてきてしまい、録音感度が高いマイクロホンのチャンネル側から音が大きく聞こえると感じられる。即ち、実際の音声には左右差が無いものであっても、マイクロホンの感度が大きい方のチャンネルが音が大きく聞こえるため、音声に左右差が発生してしまうことがある。
【００５９】
このような場合を回避するために、マイクロホン左２１５Ａとマイクロホン右２１５Ｂの左右差が目立たないように、例えばマイクロホン左２１５Ａの録音データとマイクロホン右２１５Ｂの録音データを足し合わせてから半分にすることで音声をモノラル化し左右差を無くす処理を行う。ステップＳ１１０において、音声をモノラル化する処理を完了したら、ステップＳ１０７に移行する。
【００６０】
ステップＳ１０７以降の処理は前述の通りである。
【００６１】
次に、ステップＳ１１１についての説明を行う。
【００６２】
ステップＳ１０２において、ＣＰＵ２１４が、撮影モードが再生中閲覧者撮影モードに設定されていないと判断した場合は、撮像装置が自分撮りモードであると判断して、ステップＳ１１１に移行する。本実施例においては、インカメラ２０１Ｂを起動する撮影モードは、再生中閲覧者撮影モードと自分撮りモードの２つの撮影モードのみを説明するが、本発明は２つの撮影モードに限定されるものではなく、２つ以上の複数の撮像モードを有する撮像装置においても本発明を適用可能である。
【００６３】
次に、ステップＳ１１１において、ＣＰＵ２１４が、撮像装置の向きの検知を行う。撮像装置の向きの検知は撮像装置が具備する方向検知センサ２２４の出力情報をＣＰＵ２１４が読みだすことで行う。方向検知センサ２２４の出力をＣＰＵ２１４が読み取り、ＣＰＵ２１４が、撮像装置が上向き、もしくは下向きであると判断した場合はステップＳ１１２に移行する。ＣＰＵ２１４が、撮像装置が上向き、下向き以外であると判断した場合はステップＳ１１４に移行する。
【００６４】
ステップＳ１１２において、ステップＳ１１１での撮像装置の向き検出結果から、撮像装置が上向き、もしくは下向きであることがわかっている。ここで、ステップＳ１０２での判定結果から、撮像装置が再生中閲覧者撮影モードではない、すなわち自分撮りモードであることがわかっている。自分撮りの場合には、撮像装置が上向きであっても、下向きであっても、撮影者が意図的に撮像装置の向きを変えて撮影を行っていると考えられる。よって、自分撮りの場合には、図４乃至図６で説明した理由から、ＣＰＵ２１４が左マイクロホン２１５Ａと右マイクロホン２１５Ｂの左右のチャンネルを入れ替える。
【００６５】
通常、左マイクロホン２１５Ａに入力された音声信号は、左チャンネル音声として録音されるが、ステップＳ１０６では左マイクロホン２１５Ａに入力された音声を右チャンネル音声として録音を行う。左右のチャンネルの入れ替え方法は、ステップＳ１０６で説明した方法と同様であるため説明を省略する。
【００６６】
このようにして、マイクロホン左２１５Ａとマイクロホン右２１５Ｂの左右チャンネルを入れ替えて動画撮影を行うことで、動画を再生したときに画像の左右と音声の左右が一致し、正しいステレオ感を得ることができる。マイクロホン２１５Ａとマイクロンホン２１５Ｂの左右チャンネル入れ替えが完了したら、ステップＳ１１３に移行する。
【００６７】
ステップＳ１１４において、ステップＳ１１１での判断結果から、撮像装置は上向きでも下向きでもない状態にあるため、右向きか左向きの横向きの状態であることが分かる。
ステップＳ１１４において、ＣＰＵ２１４はマイクロホン左２１５Ａとマイクロホン右２１５Ｂの左右差が目立たないように、音声を疑似的にモノラル化して録音を行う。音声を擬似的にモノラル化して録音を行う方法は、ステップＳ１１０で説明した方法と同様であるため説明を省略する。ステップＳ１１４において、音声をモノラル化する処理を完了したら、ステップＳ１１３に移行する。
【００６８】
次に、ステップＳ１１３に移行して、動画の録画を行う。ステップＳ１１３では、撮像装置が自分撮りモードであるため、前述のステップＳ１０８で行うような再生画像と動画をひも付けして録音する動作は行わない。
【００６９】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００７０】
２０１Ａ  アウトカメラ、２０１Ｂ  インカメラ、２０７Ａ  モータドライバ（Ａ）、
２０７Ｂ  モータドライバ（Ｂ）、２０８Ａ  ＡＦＥ（Analog Front End）（Ａ）、
２０８Ｂ  ＡＦＥ（Ｂ）、
２０９  ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）
２１０  フラッシュメモリ、２１１  不揮発性メモリ、２１２  カードコネクタ、
２１３  バス信号ライン、２１４  ＣＰＵ（Central Processing Unit ）、
２１５Ａ  左マイクロホン、２１５Ｂ  右マイクロホン、２１６Ａ  左スピーカ、
２１６Ｂ  右スピーカ、２１７  ビデオエンコーダ、２１８  ビデオアンプ、
２１９  外部表示装置接続端子、２２０  液晶パネルドライバ、２２１  液晶パネル、
２２２  操作スイッチ、２２３  外部接続端子
【図１】
2017199986.tif 000003
【図２】
2017199986.tif 000004
【図３】
2017199986.tif 000005
【図４】
2017199986.tif 000006
【図５】
2017199986.tif 000007
【図６】
2017199986.tif 000008
【図７】
2017199986.tif 000009
【図８】
2017199986.tif 000010
【図９】
2017199986.tif 000011
【図１０】
2017199986.tif 000012
【図１１】
2017199986.tif 000013