(57)【要約】【課題】聴取者が携帯型端末の正面側（表示画面側）又は背面側のいずれの側にいても、聴取者の位置に対応して適切にスピーカのチャンネルを切り替えることができる技術を提供する。【解決手段】人物判別部１５３は、正面撮像部１１で撮像された正面側撮像データと背面撮像部１２で撮像された背面側撮像データのそれぞれについて人物がいるか否かを判別する。Ｃｈ割当部１７は、正面側又は背面側の人物がいると判別された側に対応させて、第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とに対してチャンネルを割り当てる。【選択図】図１
2013243575.tif 000002
【特許請求の範囲】
【請求項１】
正面に配置された正面撮像手段と、
背面に配置された背面撮像手段と、
前記正面撮像手段又は前記背面撮像手段の撮像データから人物を判別する人物判別手段と、
前記人物判別手段で判別された人物の方向に対応させて、複数のスピーカに対してチャンネルを割り当てるチャンネル割当手段と
を備えたことを特徴とする携帯型端末。
【請求項２】
姿勢を判別する姿勢判別手段と、
前記正面撮像手段の撮像データから人物が判別されなかった場合で、前記姿勢がうつ伏せ状態であるときに、表示部を省電力モードに移行させる表示制御手段と
を備えたことを特徴とする請求項１に記載の携帯型端末。
【請求項３】
前記人物判別手段は、最初の処理で、前記正面撮像手段の撮像データ及び前記背面撮像手段の撮像データのいずれもから人物が判別されなかった場合で、前記姿勢がうつ伏せ状態であるときに、背面側に人物がいるものとして処理する
ことを特徴とする請求項２に記載の携帯型端末。
【請求項４】
前回の前記姿勢及び前記撮像データと今回の前記姿勢及び前記撮像データとに変化があるか否かを検出する変化検出手段を備え、
前記変化検出手段により前記変化がないと検出された場合、前回割り当てられたチャンネルが維持される
ことを特徴とする請求項２又は３に記載の携帯型端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、装置の使用状態に合わせてスピーカにチャンネルを割り当てることができる携帯型端末に関する。
【背景技術】
【０００２】
従来、携帯端末の姿勢方向を検出して、縦向き又は横向きのいずれの状態で使用されているのか判別し、使用状態に合わせてスピーカのチャンネルを切り替えることが行われている（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−０７８６０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の技術では、動画を見る場合に重きが置かれているため、携帯端末に対する視聴方向が表示画面側に固定されている。そのため、例えば、聴取者が携帯端末を伏せて置いた場合、聴取者は携帯端末の背面側に位置することになるが、特許文献１の技術では、携帯端末の背面側の聴取者に対応して適切にスピーカのチャンネルを切り替えることができなかった。
【０００５】
本発明は上記課題に鑑みてなされたものであり、聴取者が携帯型端末の正面側（表示画面側）又は背面側のいずれの側にいても、聴取者のいる方向に対応して適切にスピーカのチャンネルを切り替えることができる技術を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の携帯型端末は、正面に配置された正面撮像手段と、背面に配置された背面撮像手段と、前記正面撮像手段又は前記背面撮像手段の撮像データから人物を判別する人物判別手段と、前記人物判別手段で判別された人物の方向に対応させて、複数のスピーカに対してチャンネルを割り当てるチャンネル割当手段とを備えたことを特徴とする。
また、姿勢を判別する姿勢判別手段と、前記正面撮像手段の撮像データから人物が判別されなかった場合で、前記姿勢がうつ伏せ状態であるときに、表示部を省電力モードに移行させる表示制御手段とを備えてもよい。
また、前記人物判別手段は、最初の処理で、前記正面撮像手段の撮像データ及び前記背面撮像手段の撮像データのいずれもから人物が判別されなかった場合で、前記姿勢がうつ伏せ状態であるときに、背面側に人物がいるものとして処理してもよい。
また、前回の前記姿勢及び前記撮像データと今回の前記姿勢及び前記撮像データとに変化があるか否かを検出する変化検出手段を備え、前記変化検出手段により前記変化がないと検出された場合、前回割り当てられたチャンネルが維持されてもよい。
【発明の効果】
【０００７】
本発明によれば、聴取者が携帯型端末の正面側又は背面側のいずれの側にいても、聴取者のいる方向に対応して適切にスピーカのチャンネルを切り替えることができる。
【図面の簡単な説明】
【０００８】
【図１】本発明に係る実施形態の携帯型端末の構成を示す機能ブロック図である。
【図２】図１に示す携帯型端末の外観図である。
【図３】聴取者から見た携帯型端末の状態に対するチャンネル割り当て例を示すイメージ図である。
【図４】図１に示す携帯型端末の処理の流れを示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、図を参照して本発明の実施形態を詳細に説明する。
【００１０】
図１は、本実施形態の携帯型端末１の構成を示す機能ブロック図である。また、図２は、携帯型端末１の外観図であり、図２（ａ）は携帯型端末１の正面図であり、図２（ｂ）は携帯型端末１の背面図であり、図２（ｃ）は携帯型端末１の底面図である。ここでは、携帯型端末１の一例として、スマートフォンを例に示している。
【００１１】
携帯型端末１は、正面撮像部１１と背面撮像部１２と姿勢検出部１３と特徴量抽出部１４と切替制御部１５と表示制御部１６とＣｈ（チャンネル）割当部１７と表示部１８と第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とを備えている。
【００１２】
図２（ａ）に示すように、正面撮像部１１と表示部１８と第３スピーカ２１とは、携帯型端末１の正面（表示部１８側）に配置されている。第３スピーカ２１は、表示部１８の上方に配置されている。第３スピーカ２１は、受話部スピーカであってもよい。また、図２（ｂ）に示すように、背面撮像部１２は、携帯型端末１の背面に配置されている。また、図２（ｃ）に示すように、携帯型端末１の底面左側には第１スピーカ１９が配置され、底面右側には第２スピーカ２０が配置されている。
【００１３】
正面撮像部１１は、所定時間毎に携帯型端末１の正面（表示部１８側）を撮像する。また、背面撮像部１２は、所定時間毎に携帯型端末１の背面を撮像する。正面撮像部１１と背面撮像部１２とにおける撮像処理は、常時継続して行われてもよいし、省電力化のために、例えば再生する曲の切り替わりのタイミングで行われるようにしてもよい。正面撮像部１１による正面側撮像データと背面撮像部１２による背面側撮像データとは、それぞれ特徴量抽出部１４に出力される。
【００１４】
特徴量抽出部１４は、正面側撮像データと背面側撮像データのそれぞれについて、特徴量を抽出して切替制御部１５に出力する。
【００１５】
姿勢検出部１３は、３軸センサ及び加速度センサ等により構成され、携帯型端末１の姿勢を検出する。姿勢検出部１３は、例えば、携帯型端末１が鉛直に立っている状態等を所定の基準軸としたときに、この所定の基準軸に対する携帯型端末１の姿勢を所定時間毎に検出する。姿勢検出部１３は、姿勢を検出すると、姿勢を示すセンサ値を切替制御部１５に出力する。
【００１６】
切替制御部１５は、メモリ１５１と変化検出部１５２と人物判別部１５３と姿勢判別部１５４とを有する。
【００１７】
メモリ１５１には、変化検出部１５２が前回取得した正面側撮像データの特徴量及び背面側撮像データの特徴量と、前回の姿勢を示すセンサ値とが、前回の検出データとして格納されている。
【００１８】
変化検出部１５２は、姿勢検出部１３及び特徴量抽出部１４から取得した今回の検出データと、メモリに記憶された前回の検出データとを比較して変化があるか否かを検出する。具体的には、前回の正面側（又は背面側）撮像データの特徴量と今回の正面側（又は背面側）撮像データの特徴量とに違いがある場合、変化があったと判定し、違いがない場合、変化がないと判定する。また、変化検出部１５２は、前回の姿勢を示すセンサ値と今回の姿勢を示すセンサ値とに違いがある場合、変化があったと判定し、違いがない場合、変化がないと判定する。
【００１９】
変化検出部１５２は、特徴量の変化又は姿勢の変化の少なくともいずれか一つが変化していると判定した場合、変化有りと検出し、特徴量及び姿勢のいずれも変化していないと判定した場合、変化無しと検出する。
【００２０】
変化検出部１５２で変化有りと検出された場合、人物判別部１５３及び姿勢判別部１５４により、人物が携帯型端末１の正面側又は背面側にいるか否かと、携帯型端末１の姿勢とを判定する処理が行われる。また、変化検出部１５２は、変化の有無の検出処理を終えると、今回取得した検出データ、即ち正面側撮像データの特徴量、背面側撮像データの特徴量、及び姿勢を示すセンサ値を前回の検出データに上書きして、メモリ１５１に記憶する。
【００２１】
人物判別部１５３は、今回の正面側撮像データの特徴量と背面側撮像データの特徴量とに基づいて、人物が撮像されているか否かを検出する。人物検出技術については、種々の公知技術を用いればよい。例えば、撮像データの特徴量が、予め不図示のメモリ等に記憶された人物の形状の特徴量に適合するか否かにより人物を検出してもよい。これにより、人物判別部１５３は、今回の正面側撮像データに人物がいるか否か、及び今回の背面側撮像データに人物がいるか否かを判別し、表示制御部１６とＣｈ割当部１７とに出力する。
【００２２】
姿勢判別部１５４は、姿勢検出部１３から取得した姿勢を示すセンサ値に基づいて、携帯型端末１の姿勢として、仰向け（表示部１８が天を向いた状態）、うつ伏せ（表示部１８が地を向いた状態）、正若しくは逆の縦向き、又は左若しくは右の横向きを判別する。
【００２３】
例えば、姿勢判別部１５４は、図２（ａ）に示す携帯型端末１の状態において、図示右方向に略９０°（又は左方向に略２７０°）傾いた状態を右横向きと判別し、図示右（又は左）方向に略１８０°傾いた状態を逆縦向きと判別し、図示右方向に略２７０°（又は左方向に略９０°）傾いた状態を左横向きと判別し、図示の状態（略０°又は略３６０°）を正縦向きと判別すればよい。また、姿勢判別部１５４は、図２（ａ）に示す携帯型端末１の状態において、図示正面方向に略９０°（又は図示背面方向に略２７０°）傾いた状態をうつ伏せと判別し、図示背面方向に略９０°（又は図示正面方向に略２７０°）傾いた状態を仰向けと判別すればよい。
【００２４】
表示制御部１６は、姿勢判別部１５４により携帯型端末１の姿勢が正又は逆縦向きであると判別された場合、表示画像を正又は逆縦向きに調整して表示部１８に表示させる。一方、表示制御部１６は、姿勢判別部１５４により携帯型端末１の姿勢が左又は右横向きであると判別された場合、表示画像を左又は右横向きに調整して表示部１８に表示させる。
【００２５】
なお、表示制御部１６は、人物判別部１５３により正面側撮像データに人物がいないと判別された場合であって、姿勢判別部１５４により携帯型端末１の姿勢がうつ伏せであると判別された場合に、表示部１８を省電力モードに移行させ、画像表示を行わせないように制御してもよい。
【００２６】
Ｃｈ割当部１７は、人物判別部１５３と姿勢判別部１５４とによる判別結果に応じて、第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とに対するチャンネルの割り当てを行う。例えば、Ｃｈ割当部１７は、図３に示すようにチャンネルを割り当ててもよい。
【００２７】
図３は、聴取者（視聴者）から見た携帯型端末１の状態に対する第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とのチャンネル割り当て例を示すイメージ図である。図示では、聴取者から携帯型端末１を見た状態の一例として、（ａ）〜（ｈ）を示している。
【００２８】
図３に示すように、Ｃｈ割当部１７は、（ａ）正面側撮像データから人物が検出され、かつ、姿勢が正縦向き（略０°）である場合と、（ｂ）背面側撮像データのみから人物が検出され、かつ、姿勢が逆縦向き（略１８０°）である場合とには、第１スピーカ１９からＬｃｈを出力させ、第２スピーカ２０からＲｃｈを出力させ、第３スピーカ２１からチャンネル出力を行わせない。
【００２９】
また、Ｃｈ割当部１７は、（ｃ）正面側撮像データから人物が検出され、かつ、姿勢が逆縦向き（略１８０°）である場合と、（ｄ）背面側撮像データのみから人物が検出され、かつ、姿勢が正縦向き（略０°）である場合とには、第１スピーカ１９からＲｃｈを出力させ、第２スピーカ２０からＬｃｈを出力させ、第３スピーカ２１からチャンネル出力を行わせない。
【００３０】
また、Ｃｈ割当部１７は、（ｅ）正面側撮像データから人物が検出され、かつ、姿勢が左横向き（略２７０°）である場合と、（ｆ）背面側撮像データのみから人物が検出され、かつ、姿勢が左横向き（略２７０°）である場合とには、第１スピーカ１９からＲｃｈを出力させ、第２スピーカ２０からのチャンネル出力を行わず、第３スピーカ２１からＬｃｈを出力させる。
【００３１】
また、Ｃｈ割当部１７は、（ｇ）正面側撮像データから人物が検出され、かつ、姿勢が右横向き（略９０°）である場合と、（ｈ）背面側撮像データのみから人物が検出され、かつ、姿勢が右横向き（略９０°）である場合とには、第１スピーカ１９からのチャンネル出力を行わず、第２スピーカ２０からＬｃｈを出力させ、第３スピーカ２１からＲｃｈを出力させる。
【００３２】
これにより、聴取者が携帯型端末１の正面側ではなく背面側にいる場合でも、Ｃｈ割当部１７は、携帯型端末１に対する聴取者の位置に適したチャンネル割り当てを行って、第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とから音声を出力させることができる。
【００３３】
次に、図４を参照して、携帯型端末１の切替処理の流れを説明する。
【００３４】
ここでは、説明を簡単にするために、聴取者が１人だけである場合を例に説明する。なお、仮に、聴取者が複数であり、正面側撮像データ及び背面側撮像データの両方で人物が検出された場合、正面側撮像データで検出された人物を優先して切替処理を行ってもよい。
【００３５】
まず、ステップＳ１１で、正面撮像部１１が携帯型端末１の正面側を撮影し、背面撮像部１２が携帯型端末１の背面側を撮影し、姿勢検出部１３が携帯型端末１の姿勢を検出する。
【００３６】
ステップＳ１３で、特徴量抽出部１４は、正面側撮像データの特徴量と背面側撮像データの特徴量とを抽出する。
【００３７】
ステップＳ１５で、変化検出部１５２は、メモリ１５１に記憶された前回の検出データ（正面側撮像データの特徴量、背面側撮像データの特徴量、姿勢を示すセンサ値）と今回取得した検出データ（正面側撮像データの特徴量、背面側撮像データの特徴量、姿勢を示すセンサ値）とを比較して、状態変化があるか否かを検出する。
【００３８】
ステップＳ１７で、変化検出部１５２は、正面側撮像データの特徴量、背面側撮像データの特徴量、又は姿勢を示すセンサ値のいずれにも変化がないことを検出した場合（ステップＳ１７でＮｏ）、本処理を終了する。つまり、この場合、前回の画像表示方向及びチャンネル割り当てが維持される。
【００３９】
一方、ステップＳ１７で、変化検出部１５２は、正面側撮像データの特徴量、背面側撮像データの特徴量、又は姿勢を示すセンサ値の少なくともいずれか一つに変化があることを検出した場合（ステップＳ１７でＹｅｓ）、ステップＳ１９に進む。
【００４０】
ステップＳ１９で、姿勢判別部１５４は、今回の姿勢を示すセンサ値に基づいて、携帯型端末１の姿勢として、仰向け、うつ伏せ、正縦向き、逆縦向き、右横向き、又は左横向きのいずれであるか判別する。
【００４１】
次に、ステップＳ２１で、人物判別部１５３は、今回の正面側撮像データの特徴量と今回の背面側撮像データの特徴量とに基づいて、正面側撮像データに人物がいたか否か、及び背面側撮像データに人物がいたか否かを判別する。
【００４２】
ステップＳ２３で、正面側撮像データに人物がいると判別された場合（ステップＳ２３でＹｅｓ）、ステップＳ２５で、表示制御部１６は、姿勢判別部１５４の判別結果に基づいて、姿勢が縦向きであれば表示画像を縦向きに調整し、姿勢が横向きであれば表示画像を横向きに調整して、表示部１８に表示させる。
【００４３】
そして、ステップＳ２７で、Ｃｈ割当部１７は、人物判別部１５３と姿勢判別部１５４とによる判別結果に基づいて、図３で示したように聴取者のいる方向に対応させて第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とに対するチャンネル割り当てを行い、本処理を終了する。
【００４４】
一方、ステップＳ２３で、表示制御部１６は、人物判別部１５３の判別結果により、正面側撮像データに人物がいないと判別された場合（ステップＳ２３でＮｏ）、ステップＳ２９で、姿勢判別部１５４の判別結果により姿勢がうつ伏せと判別されたか判定する。
【００４５】
ステップＳ２９でＮｏの場合、ステップＳ２７の処理が行われた後、本処理が終了する。
【００４６】
一方、ステップＳ２９でＹｅｓの場合、ステップＳ３１で、表示制御部１６により表示部１８が省電力モードに移行して映像表示が行われないまま、ステップＳ２７でチャンネル割り当て処理が行われ、本処理が終了する。この場合、携帯型端末１は机等に伏せて置かれており、聴取者が動画等の音声のみを聞いていると考えられ、映像表示の必要がないからである。
【００４７】
このように、本実施形態によれば、正面撮像部１１及び背面撮像部１２によって聴取者と携帯型端末１との相対的位置関係を把握して、聴取者が携帯型端末１の背面側に位置していても、聴取者にとって適切なチャンネル配置となるように第１スピーカ１９と第２スピーカ２０と第３スピーカ２１とにチャンネルを割り当てることができる。
【００４８】
なお、上記実施形態で、人物判別部１５３は、暗所等のため、正面側撮像データ及び背面側撮像データの両方で人物を判別できなかった場合、それが初めての処理でなければ、前回と同一として判定してもよい。一方、人物判別部１５３は、それが初めての処理であって、携帯型端末１の姿勢がうつ伏せであるときは、背面側に人物がいるものとして判定し、携帯型端末１の姿勢がうつ伏せ以外であるときは、正面側に人物がいるものとして判定してもよい。また、表示制御部１６とＣｈ割当部１７は、暗所等のため、人物判別部１５３により正面側撮像データ及び背面側撮像データの両方で人物を判別できなかった場合、姿勢判別部１５４で判別された姿勢に応じて、画像表示方向又はチャンネル割り当ての処理を行うようにしてもよい。
【００４９】
また、人物判別部１５３が、一度判別した聴取者が撮像範囲から外れた等により検出できなくなった場合、前回のチャンネル配置を継続するようにしてもよい。
【００５０】
また、上記実施形態では、携帯型端末１の姿勢を姿勢検出部１３により検出して、表示方向及びチャンネル割り当ての判別に用いたが、姿勢検出の替わりに、撮像された人物の状態だけで判別するようにしてもよい。つまり、人物判別部１５３が撮像時の携帯型端末１に対する人物の向き（姿勢）を撮像データから判別して、携帯型端末１に対する人物の状態（方向）を判別してもよい。これによれば、携帯型端末１に対する人物の向きに対応させて画像表示方向やチャンネル割り当てを行うことができる。
【００５１】
本発明は上述した実施の形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で種々様々に変更が可能であることは言うまでもない。例えば、本発明の携帯型端末１は、スマートフォンに限らず、携帯電話機や携帯音楽プレーヤー、タブレット型端末、バッテリーが内蔵され持ち運び可能な薄型表示装置等であってもよい。また、上記では、ステレオ再生の場合を例に２ｃｈのチャンネル割り当てを説明したが、２．１ｃｈ以上の場合も同様に割り当てることができる。上記実施形態において、同様の機能を示す構成には、同一の符号を付してある。
【符号の説明】
【００５２】
１：携帯型端末
１１：正面撮像部
１２：背面撮像部
１３：姿勢検出部
１４：特徴量抽出部
１５：切替制御部
１６：表示制御部
１７：Ｃｈ割当部
１８：表示部
１９：第１スピーカ
２０：第２スピーカ
２１：第３スピーカ
１５１：メモリ
１５２：変化検出部
１５３：人物判別部
１５４：姿勢判別部
【図１】
2013243575.tif 000003
【図２】
2013243575.tif 000004
【図３】
2013243575.tif 000005
【図４】
2013243575.tif 000006