(57)【要約】【課題】  携帯電話機等の携帯通信端末が、鞄や衣服のポケット等の閉塞空間に収納されているか、暗闇の開放空間にあるかの識別が可能で、しかも専用の部品を追加することなく、カメラと着信ランプを用いて周囲環境を判定できるようにする。【解決手段】  カメラの画像データから着信用ランプの点灯時の輝度情報を抽出する輝度情報抽出手段と、その抽出された輝度情報を予め設定されている閾値と比較することにより周囲環境を判定する周囲環境判定手段とを備える。輝度情報抽出手段は、着信用ランプの点滅動作における点灯時の輝度情報と消灯時の輝度情報との差分値を抽出し、周囲環境判定手段は、その差分値を予め設定されている閾値と比較することにより周囲環境を判定する。【選択図】  図２
2006005802.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像するためのカメラ及び着信用ランプを有するカメラ付き携帯通信端末において、
前記カメラの画像データから前記着信用ランプの点灯時の輝度情報を抽出する輝度情報抽出手段と、その抽出された輝度情報を予め設定されている閾値と比較することにより周囲環境を判定する周囲環境判定手段とを備えたことを特徴とするカメラ付き携帯通信端末。
【請求項２】
輝度情報抽出手段は、着信信号の受信後にカメラを起動させて、着信用ランプの点灯時に輝度情報を抽出することを特徴とする請求項１に記載のカメラ付き携帯通信端末。
【請求項３】
輝度情報抽出手段は、着信用ランプの点滅動作における点灯時の輝度情報と消灯時の輝度情報との差分値を抽出し、周囲環境判定手段は、その差分値を予め設定されている閾値と比較することにより周囲環境を判定することを特徴とする請求項１又は２に記載のカメラ付き携帯通信端末。
【請求項４】
輝度情報抽出手段は、着信用ランプの点灯時の輝度情報及び消灯時の輝度情報の抽出タイミングとカメラの画像取得周期のタイミングとを同期させることを特徴とする請求項３に記載のカメラ付き携帯通信端末。
【請求項５】
輝度情報抽出手段は、着信用ランプの点灯時の輝度情報と消灯時の輝度情報の抽出を、それぞれ点灯開始時点及び消灯開始時点より遅延した時点に行うことを特徴とする請求項３に記載のカメラ付き携帯通信端末。
【請求項６】
複数段階の閾値を保存する閾値テーブルを有し、周囲環境判定手段は、輝度情報を複数段階の閾値と比較して周囲環境を判定することを特徴とする請求項１、２、３、４又は５に記載のカメラ付き携帯通信端末。
【請求項７】
着信用ランプの発光色に応じた閾値を保存する閾値テーブルを有し、周囲環境判定手段は、この閾値テーブルのなかから着信用ランプの発光色に応じた閾値を選択することを特徴とする請求項１、２、３、４又は５に記載のカメラ付き携帯通信端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮像するためのカメラ及び着信用ランプを有する携帯電話機等のカメラ付き携帯通信端末に関する。
【背景技術】
【０００２】
通常、携帯電話機を携行する場合には、鞄や衣服のポケットなどの閉塞空間に収納している場合が多く、このような収納状態では、その状況に応じた制御を実施することが求められる。
【０００３】
近年、カメラ付き携帯電話機が普及していることから、特許文献１（特開２０００−１８４０１３号公報）には、カメラ部からの撮像信号に基づいて周囲の明るさを判定し、この判定信号に基づいて呼出音レベルを制御し、周囲が明るい場合には呼出音レベルを小さくし、周囲が暗い場合、例えば鞄や衣服のポケット等の中では呼出音レベルを大きくする技術が開示されている。
【０００４】
すなわち、この従来技術では、着信時に、サウンダによる着信呼出が選択されている場合には、カメラ部の固体撮像素子によって得られた撮像信号を制御部の制御によって輝度検出部に入力し、この信号に基づいて周囲輝度のレベルを検出する。次に、この輝度検出部で検出されたレベルと、制御部内に予め設定されている基準レベルとを比較器により比較する。そして、この比較器によって周囲輝度が基準以上と判定された場合には、制御部よりサウンダに出力する着信信号のレベルを小さく制御し、また周囲輝度が基準未満と判定された場合には、制御部よりサウンダへ出力される着信信号を当初設定してあったレベルで伝達するように制御する。
【０００５】
しかし、これによると、カメラ部で単に撮像し、その撮像信号の輝度が基準以上であるか基準未満であるかで周囲の明暗を判定しているため、携帯電話機が鞄や衣服のポケット等の閉塞空間に収納されているか、暗闇の開放空間にあるかの識別ができなく、暗闇の開放空間にある場合にも、呼出音レベルが意図しないのに大きくなり、周囲に迷惑をかけることがある。
【特許文献１】特開２０００−１８４０１３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明の課題は、携帯電話機等の携帯通信端末が、鞄や衣服のポケット等の閉塞空間に収納されているか、暗闇の開放空間にあるかの識別が可能で、しかも専用の部品を追加することなく、カメラと着信ランプを用いて周囲環境を判定できるようにすることにある。
【課題を解決するための手段】
【０００７】
本発明は、被写体を撮像するためのカメラ及び着信用ランプを有するカメラ付き携帯通信端末において、カメラの画像データから着信用ランプの点灯時の輝度情報を抽出する輝度情報抽出手段と、その抽出された輝度情報を予め設定されている閾値と比較することにより周囲環境を判定する周囲環境判定手段とを備えたことを特徴とする。
【０００８】
その好ましい形態は次のとおりである。
輝度情報抽出手段は、着信信号の受信後にカメラを起動させて、着信用ランプの点灯時に輝度情報を抽出する。
【０００９】
輝度情報抽出手段は、着信用ランプの点滅動作における点灯時の輝度情報と消灯時の輝度情報との差分値を抽出し、周囲環境判定手段は、その差分値を予め設定されている閾値と比較することにより周囲環境を判定する。
【００１０】
輝度情報抽出手段は、着信用ランプの点灯時の輝度情報及び消灯時の輝度情報の抽出タイミングとカメラの画像取得周期のタイミングとを同期させる。
【００１１】
輝度情報抽出手段は、着信用ランプの点灯時の輝度情報と消灯時の輝度情報の抽出を、それぞれ点灯開始時点及び消灯開始時点より遅延した時点に行う。
【００１２】
複数段階の閾値を保存する閾値テーブルを有し、周囲環境判定手段は、輝度情報を複数段階の閾値と比較して周囲環境を判定する。
【００１３】
着信用ランプの発光色に応じた閾値を保存する閾値テーブルを有し、周囲環境判定手段は、この閾値テーブルのなかから着信用ランプの発光色に応じた閾値を選択する。
【発明の効果】
【００１４】
本発明では、カメラの画像データから着信用ランプの点灯時の輝度情報を抽出し、その抽出された輝度情報を予め設定されている閾値と比較することにより周囲環境を判定するので、着信用ランプの反射光がカメラに入光する光量により輝度が異なるため、携帯通信端末が、鞄や衣服のポケット等の閉塞空間に収納されているか、暗闇の開放空間にあるかの識別が可能である。この判定結果を用いて、着信音制御やバックライト制御など、環境に適した着信時の動作制御を実現できる。
【００１５】
着信信号の受信後にカメラを起動させて、着信用ランプの点灯時に輝度情報を抽出すると、着信信号の受信に伴いカメラを自動的に起動させ、その撮像した画像データから着信用ランプの点灯時に輝度情報を自動的に抽出できる。
【００１６】
着信用ランプの点滅動作における点灯時の輝度情報と消灯時の輝度情報との差分値を抽出し、その差分値を予め設定されている閾値と比較すると、周囲環境の判定を正確かつ子細に行える。
【００１７】
着信用ランプの点灯時の輝度情報及び消灯時の輝度情報の抽出タイミングとカメラの画像取得周期のタイミングとを同期させると、着信用ランプの動作特性とカメラの動作特性とに適応した輝度情報の抽出が行える。
【００１８】
着信用ランプの点灯時の輝度情報と消灯時の輝度情報の抽出を、それぞれ点灯開始時点及び消灯開始時点より遅延した時点に行うと、カメラの露光時間に見合った輝度情報の抽出が行える。
【００１９】
複数段階の閾値を閾値テーブルに保存し、輝度情報を複数段階の閾値と比較して周囲環境の判定を行うと、周囲環境の判定を一層子細に行える。
【００２０】
着信用ランプの発光色に応じた閾値を閾値テーブルに保存し、そのなかから着信用ランプの発光色に応じた閾値を選択すると、着信用ランプの発光色が異なっても周囲環境の判定を同様に行える。
【発明を実施するための最良の形態】
【００２１】
次に、本発明の実施例を図面に基づいて詳細に説明する。
【実施例１】
【００２２】
図１は、携帯電話機に適用した本発明の実施例１の概要を示している。
携帯電話機は、アンテナ１０２と無線部１０１と制御部１１０とメモリ部１１１と操作部１１２と表示部１１３と操作部用バックライト１１４とカメラ１１５と着信用ランプである着信ＬＥＤ１１６と音声コーデック部１１７と表示部用バックライト１１８とスピーカ１２０とマイクユニット１２１とを有する。
【００２３】
このカメラ付き携帯電話機は、制御部１１０の制御により無線部１０１、アンテナ１０２を介して図示しない基地局と通信を行う。無線部１０１は、アンテナ１０２にて受信した信号から、受信したい信号周波数を選択し周波数変換を行い増幅し、復調して、受信データを制御部１１０に出力する。制御部１１０は、受信データを処理して音声信号を音声コーデック部１１７に出力し、音声コーデック部１１７は、音声信号をアナログ信号に変えてスピーカ１２０より音声を出力する。また、マイクユニット１２１より入力された音声は、音声コーデック部１１７にてＰＣＭ信号にＡ／Ｄ変換され、制御部１１０は、その信号を送信データに処理し、無線部１０１にて変調し、規定の周波数の搬送波として増幅し、アンテナ１０２より送信を行う。
【００２４】
制御部１１０は、操作部用バックライト１１４及び表示部用バックライト１１８及び着信ＬＥＤ１１６の点灯制御、カメラ１１５にて撮像した画像データのメモリ部１１１への登録及び画像情報からの輝度情報の抽出、メモリ１１１への情報の書込みと読出し、表示部１１３の表示制御、操作部１１２の操作検出処理などを行う。また、制御部１１０は、カメラ１１５より取得した撮像画像データに対し、通常のカメラ撮影において画像処理を行い、メモリ１１１に画像データを保存し、周囲環境検出動作において画像データから輝度情報を抽出し、メモリ１１１に予め登録する検出輝度閾値テーブル及び検出輝度差判定閾値と比較判断することで周囲環境の判定を行う。
【００２５】
操作部用バックライト１１４及び表示部用バックライト１１８は、制御部１１０の制御により、操作者に対し操作部１１２及び表示部１１３の視認性を向上するために点灯する。着信ＬＥＤ１１６は、周囲環境検出動作時にカメラ撮像に同期して制御部１１０により点灯と消灯の制御が後述のように行われる。
カメラ１１５は、被写体を撮像した画像を画像データとして制御部１１０に対して出力する。
【００２６】
次に、この携帯電話機の動作について、図２のフローチャートを用いて説明する。
制御部１１０は、図示しない基地局より無線部１０１が着信信号を受信したか否かを監視し（ステップＳ２００）、着信信号を受信すると、制御部１１０は、カメラ１１５を起動し（Ｓ２０１）、着信ＬＥＤ１１６の点滅を開始する（Ｓ２０２）。ここで、制御部１１０は、カメラ１１５から出力される画像データ受信を確認後、着信ＬＥＤ１１６の点滅をカメラの取得タイミングに同期して行う。図５は、着信ＬＥＤ１１６の点滅周期とカメラ画像取得タイミングを示す一例であり、カメラ画像取得周期４フレーム毎に、着信ＬＥＤ１１６を点灯／消灯する場合である。この点滅周期を、カメラ１１５の画像取り込み周期から生成する。もしくは、着信ＬＥＤ１１６の点滅周期にカメラ１１５の画像取り込み周期を合わせる。
【００２７】
図５の例では、カメラ１１５の露光時間を考慮し、着信ＬＥＤ１１６の点灯時の画像取り込みは、点灯開始時点から遅延させるため、カメラ画像取得周期にして例えば４フレーム目、また着信ＬＥＤ１１６の消灯時の画像取り込みは、消灯開始時点から遅延させるため、カメラ画像取得周期にして同じく４フレーム目としてある。なお、着信ＬＥＤ１１６の点滅周期は、画像データ取得後は任意とする。
【００２８】
制御部１１０は、着信ＬＥＤ１１６の点灯タイミングを確認し、着信ＬＥＤ１１６の消灯時の画像データを取得し（Ｓ２０３）、取得画像から輝度情報を抽出して記憶する（Ｓ２０４）。輝度情報の抽出方法としては、一画像の平均値や全画素中の最大輝度値を用いる方法などが考えられるが、カメラ・着信ＬＥＤの配置等の条件から最適な方法を採用する。
【００２９】
次に、抽出した輝度情報の輝度値判定を行うため、抽出した輝度情報を予めメモリ１１１に格納した着信ＬＥＤ消灯時検出輝度閾値テーブル（以下、単に閾値テーブル）の各閾値と比較する。
【００３０】
図３に閾値テーブルの一例を示す。図示するように閾値を数段階設定しておき、このうち最も輝度の高い閾値には、例えば周囲環境検出上限となる輝度値を設定しておく。
【００３１】
抽出した輝度情報は、まず閾値テーブルに設定したうち最も輝度値の高い閾値Ａとの比較を行う（Ｓ２０５）。抽出輝度値がＡより大きい場合には輝度値の判定を中止し、カメラ１１５を動作停止して（Ｓ２１３）、周囲環境は閉塞空間ではないと判断して周囲環境検出処理を完了する（Ｓ２１４）。
【００３２】
抽出輝度値がＡ以下であれば輝度値の判定を継続し、閾値テーブルの各閾値との比較を順次実施し、輝度範囲を求める（Ｓ２０６）。ここで求めた輝度範囲により、輝度差判定閾値が決定される（Ｓ２０７）。
【００３３】
輝度差判定閾値とは、予めメモリ１１１に格納し、周囲環境を判断するために使用する判定閾値であり、先に取得した着信ＬＥＤ消灯条件での輝度情報と、これから取得する着信ＬＥＤ点灯条件での輝度情報との差分値を比較判定するための閾値である。
【００３４】
図４は、輝度差判定閾値の一例である。閉塞空間において、着信ＬＥＤ消灯条件での輝度情報すなわち周囲照度の大小によって、着信ＬＥＤ点灯条件での反射光の輝度情報との差分量は大きく変化し、周囲照度が大きいほど差分量は小さくなることは自明である。従って、輝度差判定閾値は、図４に示すように数段階の値を持つことが望ましく、また、周囲環境の判定にどの値を用いるかは、着信ＬＥＤ消灯条件にて取得した輝度情報の大きさにより決定するものである。
【００３５】
次に、制御部１１０は、着信ＬＥＤ１１６点灯時の輝度情報を取得するため、着信ＬＥＤ１１６の点灯タイミングを確認し、画像データを取得し（Ｓ２０８）、カメラ１１５を停止する（Ｓ２０９）。画像データから輝度情報を抽出する（Ｓ２１０）。抽出方法は上述の通りである。なお、カメラ１１５は不要となるため停止する（Ｓ２０９）が、停止タイミングは任意である。
【００３６】
続いて、制御部１１０は、取得した輝度情報から周囲環境の解析を行う。取得した輝度情報と輝度差判定閾値を用いて周囲環境の判定を行う。着信ＬＥＤ消灯条件で取得した輝度値と着信ＬＥＤ点灯条件で取得した輝度値との差分を算出し、予め決定した輝度差判定閾値との比較を行う（Ｓ２１１）。算出した輝度差が閾値より小さい場合、周囲環境は閉塞空間ではないと判断して周囲環境検出処理を完了し（Ｓ２１４）、閾値以上であれば周囲環境は閉塞空間であると判断して周囲環境検出処理を完了する（Ｓ２１２）。
【００３７】
なお、携帯電話機で使用するカメラは一般的に、受光量に応じて輝度値を一定に保つよう自動ゲインコントロールや自動露出制御を有していて、通常カメラ撮影時にはこれら機能を有効として使っているが、本発明における用途の場合、これら機能により期待する情報が得られないことになるため、例えば機能を無効とするなどの調整を行うことが望ましい。
【実施例２】
【００３８】
次に、本発明の実施例２について説明する。
実施例２は、着信ＬＥＤ１１６が複数の発光色を有する場合について示すものである。
構成については、実施例１と同等である。複数の発光色を有する場合、実施例１の図３及び図４に示す閾値テーブル及び検出輝度差判定閾値テーブルを、図６及び図７の閾値テーブル及び検出輝度差判定閾値テーブルに置き換える。図６及び図７は、３色の発光色を有する場合の閾値テーブル及び検出輝度差判定閾値のテーブルであり、３色の発光色に応じたテーブルとし、予めメモリ１１１に格納しておく。４色以上の発光色を有する場合のそれに応じたテーブルを有するものとする。
【００３９】
動作については、実施例１と基本的に同様であるが、実施例１との差異としては、図６及び図７に示す閾値テーブル及び検出輝度差判定閾値テーブルを着信ＬＥＤ１１６の発光色数及びそれぞれの発光輝度に応じて、予めメモリ１１１に格納しておき、着呼動作時に点灯する着信ＬＥＤの点灯色に応じ、参照する閾値テーブル及び検出輝度差判定閾値テーブルを切り替える点である。
これにより、複数の発光可能な着信ＬＥＤを有する携帯電話機においても、実施例１と同様の効果を得ることができる。
【産業上の利用可能性】
【００４０】
以上、本発明をカメラ付き携帯電話機に適用した実施例について説明したが、本発明は、通信機能を有するカメラ付き携帯情報端末等の他の携帯通信端末にも適用可能である。
【図面の簡単な説明】
【００４１】
【図１】本発明を適用した携帯電話機のブロック図である。
【図２】実施例１の動作を示すフローチャートである。
【図３】実施例１における閾値テーブルの一例の表図である。
【図４】同じく輝度差判定閾値の一例の表図である。
【図５】着信ＬＥＤの点滅周期とカメラ画像の取得周期との関係を示すタイミングチャートである。
【図６】実施例２における閾値テーブルの一例の表図である。
【図７】同じく輝度差判定閾値の一例の表図である。
【符号の説明】
【００４２】
１０１  無線部
１０２  アンテナ
１１０  制御部
１１１  メモリ部
１１２  操作部
１１３  表示部
１１４  操作部用バックライト
１１５  カメラ
１１６  着信ＬＥＤ
１１７  音声コーデック部
１１８  表示部用バックライト
１２０  スピーカ
１２１  マイクユニット
【図１】
2006005802.tif 000003
【図２】
2006005802.tif 000004
【図３】
2006005802.tif 000005
【図４】
2006005802.tif 000006
【図５】
2006005802.tif 000007
【図６】
2006005802.tif 000008
【図７】
2006005802.tif 000009