(57)【要約】【課題】使用者が必要とする可能性が高い画像を記録することを目的とする。【解決手段】画像処理装置は、使用者の視界の少なくとも一部を撮影可能な撮影手段と、前記使用者の位置情報を取得する取得手段と、前記取得手段により取得された位置情報が予め定められた位置情報の場合であって、かつ、前記位置情報を取得した位置における前記使用者の行動が前記予め定められた位置情報に関連付けられた行動である場合に、前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録するように制御する制御手段と、を有する。【選択図】図５
2018182432.tif 000002
【特許請求の範囲】
【請求項１】
使用者の視界の少なくとも一部を撮影可能な撮影手段と、
前記使用者の位置情報を取得する取得手段と、
前記取得手段により取得された位置情報が予め定められた位置情報の場合であって、かつ、前記位置情報を取得した位置における前記使用者の行動が前記予め定められた位置情報に関連付けられた行動である場合に、前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録するように制御する制御手段と、を有することを特徴とする画像処理装置。
【請求項２】
前記予め定められた位置情報に関連付けられた行動は、前記使用者の行動を特定するための特定条件によって定められ、
前記制御手段は、
前記位置情報を取得した位置において前記使用者の行動が前記特定条件を満たす場合に、前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録するように制御することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記使用者の行動を特定するための特定条件は、複数の異なる種類の特定条件を含むことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記制御手段は、
今回、過去と同一の位置情報および同一の特定条件を満たすことで、前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録する場合には、
過去に記録した画像、および、該画像の記録位置を示す情報を削除するように制御することを特徴とする請求項２または３に記載の画像処理装置。
【請求項５】
前記制御手段は、
前記取得手段により取得された位置情報が予め定められた位置情報の場合であって、かつ、前記位置情報を取得した位置における前記使用者の行動が前記予め定められた位置情報に関連付けられた特定条件を満たす場合であっても、
過去に今回と同一の位置情報および同一の特定条件を満たすことによって撮影または記録されてから、予め定められた時間が経過していない場合には、
前記撮影手段により撮影された画像および該画像の記録位置を示す情報を記録しないように制御することを特徴とする請求項２ないし４の何れか１項に記載の画像処理装置。
【請求項６】
前記取得手段は、
予め設置された送信装置から送信される情報に基づいて前記使用者の位置情報を取得することを特徴とする請求項１ないし５の何れか１項に記載の画像処理装置。
【請求項７】
前記取得手段は、
前記予め設置された送信装置から送信される電波の強度に基づいて、前記送信装置との間の距離情報を取得し、
前記予め定められた位置情報には、前記送信装置との間の距離情報が含まれることを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記制御手段は、
被写体の照度、画像のデフォーカス量、画像の動きベクトル、および、画像に写った被写体の認識結果、使用者の脈拍、使用者の発汗量、使用者の脳波、使用者の血圧、使用者の体温および使用者の呼吸数の少なくとも何れかに基づいて前記使用者の行動を特定するように制御することを特徴とする請求項１ないし７の何れか１項に記載の画像処理装置。
【請求項９】
音声が入力される音声入力手段を有し、
前記制御手段は、
前記音声入力手段により検出される、音声レベル、および、入力された音声の解析結果の少なくとも何れかに基づいて前記使用者の行動を特定するように制御することを特徴とする請求項１ないし８の何れか１項に記載の画像処理装置。
【請求項１０】
前記制御手段は、
前記使用者の頭部、手、指、腕、足、視線、まぶた、身体それぞれの状態およびそれぞれの動きの少なくとも何れかに基づいて前記使用者の行動を特定するように制御することを特徴とする請求項１ないし９の何れか１項に記載の画像処理装置。
【請求項１１】
前記制御手段は、
前記記録された画像のうち、前記取得手段により取得された前記使用者の位置情報に関連する画像を優先して再生するように制御することを特徴とする請求項１ないし１０の何れか１項に記載の画像処理装置。
【請求項１２】
前記制御手段は、
前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録する場合に、前記画像に付加情報を付加して記録するように制御すると共に、
前記記録された画像を再生する場合に前記使用者のいる施設情報を取得して、前記施設情報に予め関連付けられた付加情報が記録されている画像を優先して再生するように制御することを特徴とする請求項１１に記載の画像処理装置。
【請求項１３】
前記施設情報と前記付加情報との関連度合いを示す情報が登録され、
前記制御手段は、
前記記録された画像を再生する場合に、前記関連度合いを示す情報に基づいて、前記施設情報に予め関連付けられた付加情報のうち関連度合いが高い付加情報が付加されている画像を優先して再生するように制御することを特徴とする請求項１２に記載の画像処理装置。
【請求項１４】
前記制御手段は、
使用者の指示に応じて位置情報と前記使用者の行動とを関連付けて登録するように制御することを特徴とする請求項１ないし１３の何れか１項に記載の画像処理装置。
【請求項１５】
使用者の視界の少なくとも一部を撮影可能な撮影手段を有する画像処理装置の制御方法であって、
前記使用者の位置情報を取得する取得ステップと、
前記取得ステップにより取得された位置情報が予め定められた位置情報の場合であって、かつ、前記位置情報を取得した位置における前記使用者の行動が前記予め定められた位置情報に関連付けられた行動である場合に、前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録するように制御する制御ステップと、を有することを特徴とする制御方法。
【請求項１６】
コンピュータを請求項１ないし１４の何れか１項に記載の制御手段として機能させるためのプログラム。
【請求項１７】
コンピュータを請求項１ないし１４の何れか１項に記載の制御手段として機能させるためのプログラムを記録したコンピュータ読取可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、その制御方法、プログラムおよび記録媒体に関する。
【背景技術】
【０００２】
メガネ型や腕時計型等のウェアラブル情報端末が知られている。ウェアラブル情報端末にはカメラを備え、使用者の目前で起きる出来事や目にした被写体を気軽に画像として記録できるものがある。
【０００３】
このようなウェアラブル情報端末のうち、使用者の指示に応じて画像を撮影して記録するものは、使用者が記録を指示しなかった画像を後から確認することはできない。また、目前の被写体を常時、撮影して記録し続けるものは記録容量の大きい記録媒体が必要となり、ウェアラブル情報端末が大型化してしまう。また、ネットワーク上のサーバに常時、転送して記録すると画像の転送やサーバの保守にコストが掛かってしまう。
【０００４】
一方、特許文献１には、使用者がボタンを押す等の操作を行わなくても、使用者の身体の動作または身体の状況に関する情報に基づいて撮像開始トリガが発生して被写体を撮像する眼鏡型ディスプレイカメラが開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−６７２１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に開示された眼鏡型ディスプレイカメラでは、撮像開始トリガが発生する使用者の身体の動作等が生じた場合には、場所や状況に関わらず被写体を撮像してしまうために使用者が必要としない画像が記録されてしまう虞がある。
【０００７】
本発明は、上述したような問題点に鑑みてなされたものであり、使用者が必要とする可能性が高い画像を記録できるようにすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明の画像処理装置は、使用者の視界の少なくとも一部を撮影可能な撮影手段と、前記使用者の位置情報を取得する取得手段と、前記取得手段により取得された位置情報が予め定められた位置情報の場合であって、かつ、前記位置情報を取得した位置における前記使用者の行動が前記予め定められた位置情報に関連付けられた行動である場合に、前記撮影手段により撮影された画像、および、該画像の記録位置を示す情報の少なくとも何れかを記録するように制御する制御手段と、を有することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、使用者が必要とする可能性が高い画像を記録することができる。
【図面の簡単な説明】
【００１０】
【図１】情報端末およびビーコン装置の内部構成の一例を示す図である。
【図２】情報端末およびビーコン装置の外観構成の一例を示す図である。
【図３】ビーコン装置を取り付ける位置の一例を示す図である。
【図４】自動的に画像を撮影して記録する状況を説明するための図である。
【図５】情報端末により記録される画像群の例を示す図である。
【図６】撮影条件のテーブルの一例を示す図である。
【図７】検出値の変化の一例を示す図である。
【図８】自動的に画像を撮影して記録する処理を示すフローチャートである。
【図９】画像を再生する状況を説明するための図である。
【図１０】再生場所の施設と、キーワードとの関連性の一例を示す図である。
【図１１】画像を再生する処理を示すフローチャートである。
【図１２】撮影条件を登録する処理を示すフローチャートである。
【発明を実施するための形態】
【００１１】
以下、本発明に係る実施形態について図面を参照して説明する。本実施形態では、画像処理装置として、メガネ型のウェアラブル情報端末（情報端末）を用いる場合を例にして説明する。
【００１２】
図１（ａ）は、情報端末１００の内部構成の一例を示す図である。
情報端末１００は、制御マイコン１０１、内部バス１０２、ＦＬＡＳＨメモリコントローラ１０３、ＦＬＡＳＨメモリ１０４、ＤＲＡＭコントローラ１０５、ＤＲＡＭ１０６、無線ＬＡＮコントローラ１０７、近距離無線通信部１０８、ＧＰＳ１０９を有する。また、情報端末１００は、操作部１１０、加速度センサ１１１、カメラ信号処理部１１２、カメラ１１３、音声信号処理部１１４、マイク１１５、画像コーデック１１６、音声コーデック１１７を有する。また、情報端末１００は、グラフィック描画部１１８、ＬＣＤコントローラ１１９、透過型ＬＣＤ１２０、音声合成部１２１、スピーカ１２２等を有する。
【００１３】
制御マイコン１０１は、内部バス１０２で接続された各ブロックの制御を行う。制御マイコン１０１は、制御手段の一例に対応する。
ＦＬＡＳＨメモリコントローラ１０３は、制御マイコン１０１からの要求に基づいてＦＬＡＳＨメモリ１０４に対する不揮発性データの読み書きを行う。制御マイコン１０１はＦＬＡＳＨメモリ１０４に格納されたプログラムに基づいて動作し、符号化された画像や音声等の不揮発性データをＦＬＡＳＨメモリ１０４に記録する。
ＤＲＡＭコントローラ１０５は、各ブロックからの要求に基づいてＤＲＡＭ１０６に対するデータの読み書きを行う。制御マイコン１０１や各ブロックは、動作中の一時データ等をＤＲＡＭ１０６に格納して用いる。
【００１４】
無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）コントローラ１０７は、制御マイコン１０１からの要求に基づいて、画像や音声、現在地周辺の地図情報、与えられたキーワードに関連性の高い単語等を、無線ＬＡＮルータを介してサーバと送受信する。
近距離無線通信部１０８は、例えば数ｍ程度の距離にある通信相手と、電波を用いた通信を行う。通信相手がビーコン装置の場合、制御マイコン１０１はビーコン装置から送信される電波の強度から、情報端末１００と当該ビーコン装置がどの程度の距離にあるかを判定できる。当該ビーコン装置の予め設置された位置を不揮発データに登録されているものであれば、制御マイコン１０１は情報端末１００の位置を取得することができる。
ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）１０９は、情報端末１００の現在地と現在時刻を検出することができる。
【００１５】
操作部１１０は、情報端末１００の外装に設けられたボタン等で構成される。使用者は操作部１１０を操作することで、制御マイコン１０１に対して指示することができる。
加速度センサ１１１は、ｘ、ｙ、ｚの３軸方向の加速度を検出する。制御マイコン１０１は加速度センサ１１１により検出された３軸方向の加速度から重力加速度の方向を取得でき、情報端末１００と情報端末１００を身に付けた使用者の頭部の姿勢を検出することができる。
【００１６】
カメラ信号処理部１１２は、制御マイコン１０１の指示に基づいてカメラ１１３を制御して、使用者の目前の被写体を撮影して、得られた画像データをＤＲＡＭ１０６に記録する。
音声信号処理部１１４は、制御マイコン１０１の指示に基づいてマイク１１５から入力された音声を処理して、処理した音声データをＤＲＡＭ１０６に記録する。
画像コーデック１１６は、画像の撮影時にカメラ信号処理部１１２がＤＲＡＭ１０６に記録した画像データを符号化する。また、画像コーデック１１６は、画像の再生時にＦＬＡＳＨメモリ１０４から読み出された符号化データを復号化して、ＤＲＡＭ１０６に画像データを記録する。
音声コーデック１１７は、音声の収録時に音声信号処理部１１４がＤＲＡＭ１０６に記録した音声データを符号化する。また、音声コーデック１１７は、音声の再生時にＦＬＡＳＨメモリ１０４から読み出された符号化データを復号化して、ＤＲＡＭ１０６に音声データを記録する。
【００１７】
グラフィック描画部１１８は、制御マイコン１０１の指示に基づいて、使用者に通知する情報等を、ＤＲＡＭ１０６に確保した表示用フレームメモリに文字や図形として描画する。
ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）コントローラ１１９は、ＤＲＡＭ１０６に記録された表示用フレームメモリの内容を読み出して、透過型ＬＣＤ１２０で表示する。
音声合成部１２１で、ＤＲＡＭ１０６に記録された音声データを読み出して、音声合成を行い、スピーカ１２２から音声として出力する。
【００１８】
図１（ｂ）は、ビーコン装置１５０の内部構成の一例を示す図である。ビーコン装置１５０は、情報端末１００が自らの位置を検出するために用いられる。ビーコン装置１５０は、送信装置の一例に対応する。
ビーコン装置１５０は、制御マイコン１５１、内部バス１５２、ＦＬＡＳＨメモリコントローラ１５３、ＦＬＡＳＨメモリ１５４、ＤＲＡＭコントローラ１５５、ＤＲＡＭ１５６、近距離無線通信部１５７、ＬＥＤ１５８等を有する。
【００１９】
制御マイコン１５１は、内部バス１５２で接続された各ブロックの制御を行う。
ＦＬＡＳＨメモリコントローラ１５３は、制御マイコン１５１からの要求に基づいてＦＬＡＳＨメモリ１５４に対する不揮発性データの読み書きを行う。制御マイコン１５１はＦＬＡＳＨメモリ１５４に格納されたプログラムに基づいて動作する。
ＤＲＡＭコントローラ１５５は、各ブロックからの要求に基づいてＤＲＡＭ１５６に対するデータの読み書きを行う。制御マイコン１５１や各ブロックは、動作中の一時データ等をＤＲＡＭ１５６に記録して用いる。
近距離無線通信部１５７は、例えば数ｍ程度の距離にある情報端末１００との間で、電波を用いた通信を行う。
ＬＥＤ（Ｌｉｇｈｔ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）１５８は、制御マイコン１０１の指示に基づいて点灯または消灯する。
【００２０】
次に、情報端末１００とビーコン装置１５０の外観構成について説明する。
図２（ａ）は、情報端末１００の外観構成の一例を示す図である。図２（ａ）に示すｘ、ｙ、ｚ軸は加速度センサ１１１が検出する加速度の方向を示している。
情報端末１００は、メガネのフレーム２０１、左右のレンズ２０２、２０３、ケース２０４等を有する。
ケース２０４は、フレーム２０１に取り付けられ、図１に示す各ブロックの電子回路が収容される。
操作部１１０は、ボタン等で構成され、ケース２０４に設けられる。
カメラ１１３は、メガネを身に付けた使用者の目前の被写体を撮影する。ここでは、カメラ１１３は使用者の視線方向の被写体を撮影できるようにメガネに取り付けられる。したがって、カメラ１１３は使用者の視界の少なくとも一部を撮影可能である。カメラ１１３は、撮影手段の一例に対応する。
透過型ＬＣＤ１２０は、メガネのレンズ２０３に覆い被さるように取り付けられる。使用者はレンズ２０３を介して目前の被写体を見ると同時に、透過型ＬＣＤ１２０に表示された内容を見ることができる。透過型ＬＣＤ１２０は、表示手段の一例に対応する。
【００２１】
図２（ｂ）は、ビーコン装置１５０の正面図および側面図である。
ビーコン装置１５０は、球を半分に割ったような形状であって、平面部分を壁や床に接着させることで所望の位置に設置される。
ビーコン装置１５０は、ＬＥＤ１５８を有する。ＬＥＤ１５８は、点灯または消灯してビーコン装置の状態を表す。
【００２２】
次に、ビーコン装置１５０を設置する位置の一例について説明する。
図３は、住居の見取り図である。ビーコン装置１５０は自動的に撮影したい被写体を使用者が見たときに、使用者がその位置にいることを検出できるように、被写体の周辺に取り付けられている。
ビーコン装置１５０ａは、キッチンに備えられた冷蔵庫３０１の側の壁に取り付けられている。
ビーコン装置１５０ｂは、トイレに備えられた収納棚３０２の側の壁に取り付けられている。
ビーコン装置１５０ｃは、玄関に備えられた靴箱３０３の側の壁に取り付けられている。
ビーコン装置１５０ｄは、洗面所に備えられた引き出し収納３０４の側の壁に取り付けられている。
ビーコン装置１５０ｅは、第１の寝室に備えられたクローゼット３０５の側の壁に取り付けられている。
ビーコン装置１５０ｆは、第２の寝室に備えられたクローゼット３０６の側の壁に取り付けられている。
ビーコン装置１５０ｇは、リビングに備えられた本棚３０７の側の壁に取り付けられている。
【００２３】
次に、情報端末１００が自動的に画像を撮影して記録する場合の状況について説明する。
図４（ａ）は、キッチンに備えられた冷蔵庫３０１の外観の一例を示す図である。図４（ａ）では、情報端末１００を身に付けた使用者４００が冷蔵庫３０１のドアを開け、庫内を確認している。情報端末１００は後述する処理によって、自動的に使用者４００の目前にある冷蔵庫３０１の庫内を撮影して記録する。
図４（ｂ）は、洗面所に備えられた引き出し収納３０４の外観の一例を示す図である。図４（ｂ）では、情報端末１００を身に付けた使用者４００は屈んで引き出し収納３０４の中を上からのぞき込んでいる。情報端末１００は後述する処理によって、自動的に使用者４００の目前にある引き出し収納３０４の中を撮影して記録する。
なお、図３に示す、トイレの収納棚、玄関の靴箱、第１および第２の寝室のクローゼット、リビングの本棚でも、情報端末１００は使用者が中を見る動作を検出して、目前にある被写体を撮影して記録する。
【００２４】
次に、情報端末１００に記録される画像群の例について説明する。
図５（ａ）は、キッチンの冷蔵庫３０１の庫内を撮影した画像５０１である。画像５０１は、図４（ａ）に示す状況で、情報端末１００が自動的に撮影した画像である。
図５（ｂ）は、洗面所の引き出し収納３０４の中を撮影した画像５０２である。画像５０２は、図４（ｂ）に示す状況で、情報端末１００が自動的に撮影した画像である。
図５（ｃ）は、第１の寝室のクローゼット３０５の中を撮影した画像５０３である。撮影時の状況の図示は省略しているが、画像５０３は、情報端末１００を身に付けた使用者４００がクローゼット３０５の扉を開けて中を確認した際に、情報端末１００が自動的にクローゼット３０５の中を撮影して記録した画像である。
図５（ｄ）に示す画像５０４は、画像５０１〜５０３と異なり、使用者４００による自分の撮影したい被写体を自らの指示に応じて、情報端末１００が撮影して記録した画像である。情報端末１００には、画像５０４のように使用者による指示に応じて撮影された画像も多数記録されているものとする。
【００２５】
次に、情報端末１００が自動的に画像を撮影して記録する撮影条件について説明する。
図６は、撮影条件のテーブルの一例を示す図である。
撮影条件６０１は、それぞれの撮影条件に対して通し番号が付されている。
撮影位置６０２は、自動的に撮影して記録する撮影位置を示す位置情報である。撮影位置６０２の位置情報には、周辺に取り付けられたビーコン装置の識別情報と、当該ビーコン装置までの距離情報とが登録されている。
照度６０３、音声レベル６０４および加速度６０５は、撮影位置６０２に関連付けられた使用者の行動を特定するための特定条件の情報である。照度６０３には、カメラ１１３が撮影した画像からカメラ信号処理部１１２が検出した照度の検出値に対応する特定条件が登録されている。音声レベル６０４には、マイク１１５から入力された音声から音声信号処理部１１４が検出した音声レベルの検出値に対応する特定条件が登録されている。加速度６０５には、加速度センサ１１１がｘ、ｙ、ｚの３軸方向に対して検出した加速度の検出値に対応する特定条件が登録されている。
キーワード６０６には、各撮影条件を満たすことで自動的に撮影して記録された画像に付加される付加情報としてのキーワードが登録されている。キーワード６０６は、画像を再生するときに優先順位を付けるときに用いられる。また、キーワード６０６は、撮影条件に関連付けて登録されている。
図６の撮影条件のテーブルは、例えばＦＬＡＳＨメモリ１０４に予め登録されている。
【００２６】
撮影条件１は、図４（ａ）に示す状況であって、キッチンの冷蔵庫３０１の庫内を撮影して記録するときに対応した撮影条件である。情報端末１００はビーコン装置１５０ａから距離５０〜６０ｃｍの範囲において、照度と音声レベルの検出値に所定の変化があった場合に自動的に撮影して記録する。撮影条件１には、撮影位置に対して、照度と音声レベルとの異なる種類の特定条件が関連付けられている。一方、撮影条件１には、加速度の検出値の変化は加味されない。撮影条件１を満たすことによって記録された画像にはキーワード“冷蔵庫”の付加情報が関連付けるように付加される。
撮影条件２は、図４（ｂ）に示す状況であって、洗面所の引き出し収納３０４の中を撮影して記録するときに対応した撮影条件である。情報端末１００はビーコン装置１５０ｄから距離４０〜５０ｃｍの範囲において、音声レベルの検出値と、ｙ方向およびｚ方向の加速度の検出値に所定の変化があった場合に自動的に撮影して記録する。撮影条件２には、撮影位置に対して、音声レベルと加速度との異なる種類の特定条件が関連付けられている。一方、撮影条件２には、照度の検出値とｘ方向の加速度の検出値の変化は加味されない。また、撮影条件２を満たすことによって記録された画像にはキーワード“洗面所”の付加情報が関連付けるように付加される。
【００２７】
次に、情報端末１００が自動的に画像を撮影して記録する場合の検出値の変化について説明する。
図７は、図４（ａ）に示す状況および図６の撮影条件１によってキッチンの冷蔵庫３０１の庫内が撮影され記録される場合の照度および音声レベルの変化を示すグラフである。
図７（ａ）は、照度７１０の変化を示している。画像を撮影して記録される時刻をｔ＝０として、所定時間過去に遡ったｔ＝Ｔ１１からｔ＝０までの範囲が検出対象である。
図７（ａ）に示すように、照度７１０はｔ＝Ｔ１２の近傍で照度が低いレベルから高いレベルに変化している。このように変化するのは、ｔ＝Ｔ１２の近傍で使用者が冷蔵庫３０１のドアを開け、庫内を見たときに、庫内の照明によって庫内が照らされることで使用者の視界が明るくなったためである。
図６に示した撮影条件１では、この照度の変化を捉えるように設定されている。具体的には、まずＴ１１：Ｅ１として、時刻Ｔ１１から照度がＥ１の近傍（Ｅ１±Ｅ’≧０の範囲内）で推移したことを定めている。続いて、Ｔ１２：Ｅ２として、時刻Ｔ１２の近傍（Ｔ１２±Ｔ’の範囲内）から照度がＥ２の近傍（Ｅ２±Ｅ’≧０の範囲内）で推移したことを定めている。
【００２８】
図７（ｂ）は、音声レベル７２０の変化を示している。照度と同様に、画像を撮影して記録される時刻をｔ＝０として、所定時間過去に遡ったｔ＝Ｔ１１からｔ＝０までの範囲が検出対象である。図７（ｂ）に示すように、音声レベル７２０はｔ＝Ｔ２２の近傍で音声レベルが低いレベルから高いレベルに、ｔ＝Ｔ２３の近傍で高いレベルから低いレベルに変化している。このように変化するのは、ｔ＝Ｔ２２からＴ２３の近傍で使用者が冷蔵庫３０１のドアを開け、その音をマイク１１５が捉えたためである。
図６に示した撮影条件１では、この音声レベルの変化を捉えるように設定されている。具体的には、まずＴ１１：Ｖ１として、時刻Ｔ１１から音声レベルがＶ１の近傍（Ｖ１±Ｖ’≧０の範囲内）で推移したことを定めている。続いて、Ｔ２２：Ｖ２として、ｔ＝Ｔ２２の近傍（Ｔ２２±Ｔ’の範囲内）から音声レベルがＶ２の近傍（Ｖ２±Ｖ’≧０の範囲内）で推移したことを定めている。更に、Ｔ２３：Ｖ３として、ｔ＝Ｔ２３の近傍（Ｔ２３±Ｔ’の範囲内）から音声レベルがＶ３の近傍（Ｖ３±Ｖ’≧０の範囲内）で推移したことを定めている。
【００２９】
図７（ｃ）は、ｘ方向の加速度７３１、ｙ方向の加速度７３２、ｚ方向の加速度７３３のそれぞれの加速度の変化を示している。画像を撮影して記録される時刻ｔ＝０から所定時間過去に遡ったｔ＝Ｔ１１から、ｘ、ｚ方向の加速度は一貫して０の近傍で推移し、ｙ方向の加速度は一貫してＡ２の近傍で推移している。このように変化するのは、情報端末１００を図４（ａ）に示すように使用者４００が立った状態で頭部に掛けていて、ｙ方向に重力加速度が作用しているためである。
図６に示す撮影条件１では、これらの加速度の変化を特定条件にしていない。一方、図示を省略するが、図６に示す撮影条件２では、洗面所の引き出し収納３０４の中を撮影して記録するために、使用者が屈んで中をのぞき込む動作に対応する加速度の変化を特定条件としている。図４（ｂ）に示すように使用者が真下を向いた状態では、ｘ、ｙ方向の加速度は０の近傍となり、ｚ方向に重力加速度が掛かる。図６の撮影条件２における加速度の特定条件には、このような変化に対応させて設定されている。
【００３０】
次に、情報端末１００の制御マイコン１０１が自動的に画像を撮影して記録する処理について図８のフローチャートを参照して説明する。図８のフローチャートは、制御マイコン１０１がＦＬＡＳＨメモリ１０４に格納されたプログラムをＤＲＡＭ１０６に展開して実行することで実現する。
Ｓ８０１では、制御マイコン１０１は情報端末１００の位置が予め登録された撮影条件のうち何れかの撮影位置であるか否かを判定する。ここでは、まず、制御マイコン１０１は情報端末１００の位置情報を取得する。この処理は、取得手段による処理の一例に対応する。情報端末１００の位置情報は、情報端末１００を身に付けた使用者の位置情報に相当する。具体的に、制御マイコン１０１は、近距離無線通信部１０８を介して何れかのビーコン装置１５０の電波を受信し、電波に含まれるビーコン装置１５０の識別情報を取得する。また、制御マイコン１０１は、電波の強度に基づいて電波を受信したビーコン装置１５０からの距離を算出する。制御マイコン１０１は、取得した識別情報および算出した距離情報が、撮影条件のうち何れかの撮影位置であるか否かを、図６のテーブルを参照して判定する。情報端末１００の位置が撮影条件の何れかの撮影位置ではない場合にはＳ８０２に進む。
【００３１】
Ｓ８０２では、制御マイコン１０１は各種検出値のロギング中であればロギングを終了してＳ８０１に戻る。一方、Ｓ８０１において、情報端末１００の位置が撮影条件の何れかの撮影位置である場合にはＳ８０３に進む。
Ｓ８０３では、制御マイコン１０１は前回、同一の撮影条件を満たすことで画像を撮影している場合には、前回の画像を撮影してから予め定められた時間（所定時間）が経過しているか否かを判定する。このように判定するのは、同じ内容の画像を連続して記録することを防止するためである。なお、前回に限られず、過去に同一の撮影条件を満たすことで画像を撮影している場合には、過去の画像を撮影してから所定時間が経過しているか否かを判定してもよい。所定時間が経過していない場合にはＳ８０１に戻り、所定時間が経過している場合にはＳ８０４に進む。
Ｓ８０４では、制御マイコン１０１は各種検出値のロギング中でなければロギングを開始し、ロギング中であればＳ８０５に進む。
【００３２】
Ｓ８０５では、制御マイコン１０１はＳ８０１において判定された撮影位置における使用者の行動が、当該撮影条件の撮影位置に関連付けられた特定条件を満たすか否かを判定する。ここでは、まず、制御マイコン１０１は、所定時間遡った時刻から現在までの照度、音声レベル、加速度といった検出値の変化を取得する。次に、制御マイコン１０１は取得した検出値の変化が、当該撮影条件の撮影位置に関連付けられた特定条件を満たすか否かを判定する。すなわち、制御マイコン１０１は、取得した検出値の変化が、図６のテーブルの撮影条件において撮影位置に関連付けられた照度、音声レベル、加速度それぞれの特定条件を満たすか否かを判定する。検出値の変化が特定条件を満たしていない場合にはＳ８０１に戻り、特定条件を満たしている場合にはＳ８０６に進む。
【００３３】
Ｓ８０６では、制御マイコン１０１はカメラ１１３で画像を撮影して記録する。また、制御マイコン１０１は、画像を記録するときに、当該撮影条件に応じたキーワードの情報を図６のテーブルを参照して読み出し、読み出したキーワードを画像に付加して記録する。なお、制御マイコン１０１は、同一の撮影条件で過去に記録された画像が既に記録されているか否かを判定し、記録されている場合には過去に記録された画像を削除して今回、撮影された画像のみを記録してもよい。すなわち、制御マイコン１０１は既に記録されている画像に上書きして記録してもよい。このように記録することで、記録容量を節約することができる。その後、Ｓ８０１に戻る。
【００３４】
次に、情報端末１００に記録された画像を再生する状況について説明する。
図９（ａ）は、情報端末１００を身に付けた使用者４００がスーパーマーケットで購入する食料品を集めている状況を示す図である。ここで、使用者４００が情報端末１００に記録された画像の再生を指示することで、図５に示すような画像や他の画像から、キッチンの冷蔵庫３０１の庫内を撮影した画像５０１が優先的に再生される。このように使用者が再生しようとする再生場所に関連した画像を優先的に再生させるには、使用者のいる位置情報と、画像に付加されたキーワードとの関連性を用いることができる。
【００３５】
図９（ｂ）は、図９（ａ）に示した画像の再生が行われている現在地周辺の地図情報を示している。情報端末１００はＧＰＳ１０９で検出された現在地の位置情報に基づいて、無線ＬＡＮコントローラ１０７を介してサーバから現在地９０１周辺の地図情報９００を取得する。地図情報９００には周辺施設として、スーパーマーケット９１１、衣料品店９１２、ドラッグストア９１３等の施設情報が含まれる。制御マイコン１０１は現在地の位置情報と地図情報とから、使用者のいる施設をスーパーマーケット９１１であると特定することができる。
【００３６】
次に、使用者のいる施設と、画像に付加して記録されるキーワードとの関連性について説明する。
図１０は、施設とキーワードとの関連性の一例を示す図である。
図１０には、左側に施設の種別が並べられ、右側に画像に付加して記録されるキーワードが並べられている。ここでは、関連のある施設とキーワードとの組み合せが線で結ばれ、結ばれた線には関連度合いが１から１００までの値域で示されている。例えば、スーパーマーケットの施設情報に対し、冷蔵庫、洗面所、トイレの３つのキーワードの情報が関連付けられている。また、冷蔵庫、洗面所およびトイレの３つのキーワードの情報には、それぞれ関連度合いとして１００、１５、１０の数値が付加されている。なお、数値が大きいほど関連度合いが高いことを示している。
図１０の関連性を示す情報は、例えばＦＬＡＳＨメモリ１０４に予め登録されている。
【００３７】
ここで、図９に示す状況では、使用者がいる施設がスーパーマーケットとして特定されている。図１０の関連性を示す情報から、スーパーマーケットに関連付けられたキーワードとして冷蔵庫、洗面所、トイレの３つが抽出される。そして、最も関連度合いの大きい冷蔵庫がキーワードとして付加されている画像が、情報端末１００に記録されている画像のなかから優先的に再生される。具体的には、まず、最も関連度合いの大きい画像が優先順位の最も高い画像として１枚再生され、使用者が別の画像を検索するために画像送りを指示した場合に次に優先順位の高い画像が再生される。
なお、図１０では、施設とキーワードとの関連性のみを基準として、優先的に再生する画像が選択される場合について説明したが、この場合に限られず、実際に撮影されてからの経過時間等も加味して、優先的に再生する画像を決めてもよい。例えば、撮影されてから経過時間が経過している画像ほど優先順位を低くすることができる。
【００３８】
次に、使用者の指示に応じて情報端末１００の制御マイコン１０１が画像を再生する処理について図１１のフローチャートを参照して説明する。図１１のフローチャートは、制御マイコン１０１がＦＬＡＳＨメモリ１０４に格納されたプログラムをＤＲＡＭ１０６に展開して実行することで実現する。
Ｓ１１０１では、制御マイコン１０１は使用者から画像を再生する指示があったか否かを判定する。画像を再生する指示は、操作部１１０のボタン等のインターフェイス、マイク１１５からの音声入力、カメラ１１３で撮影している使用者の視界での手を使ったジェスチャー等により行うことができる。例えば音声入力やジェスチャーによる指示は、制御マイコン１０１がＤＲＡＭ１０６に記録された音声データまたは画像データを解析することで、使用者の指示の内容を認識することができる。再生する指示があった場合にはＳ１１０２に進み、再生する指示がなかった場合にはＳ１１０１に戻る。
【００３９】
Ｓ１１０２では、制御マイコン１０１は使用者のいる施設を特定できたか否かを判定する。具体的には、制御マイコン１０１は、ＧＰＳ１０９で検出した現在地の位置情報に基づいて無線ＬＡＮコントローラ１０７を介してサーバから現在地周辺の地図情報を取得することで、使用者のいる施設を特定することができる。使用者のいる施設を特定できた場合にはＳ１１０３に進む。
Ｓ１１０３では、制御マイコン１０１は当該施設に最も関連性の高い画像、すなわち最も大きい関連度合いのキーワードが付加された画像を優先的に再生する。
一方、Ｓ１１０２において使用者のいる施設を特定できない場合にはＳ１１０４に進む。
Ｓ１１０４では、制御マイコン１０１は情報端末１００に記録されている画像のなかから最近、記録した画像を優先的に再生する。
【００４０】
Ｓ１１０５では、制御マイコン１０１は使用者から画像の再生を終了する指示があったか否かを判定する。終了する指示がない場合にはＳ１１０５に戻り、終了する指示があった場合にはＳ１１０１に戻る。
なお、ここでは画像を再生する指示に応じて画像を再生する場合について説明したが、この場合に限られない。例えば、使用者の指示がなくても、施設情報、施設内の位置、使用者の行動、または、目前の被写体に応じて、制御マイコン１０１は自動的に画像の再生を行ってもよい。例えばＦＬＡＳＨメモリ１０４に、予め自動的に画像の再生を行う施設情報、施設内の位置情報を登録する。制御マイコン１０１はＳ１１０２と同様の方法で使用者のいる施設を常に特定し、特定した施設が予め登録された施設情報と一致する場合に、自動的に画像を再生することができる。また、制御マイコン１０１は例えば被写体として陳列された商品をパターンマッチングすることで商品を特定し、特定した商品が予め登録された商品の情報と一致する場合に自動的に画像を再生することができる。
【００４１】
また、制御マイコン１０１は使用者の音声を解析して取得した単語が、撮影条件に関連付けられたキーワードであったり、キーワードと関連性の高い単語であったりする場合に、当該キーワードが付加された画像を優先的に再生するようにしてもよい。なお、制御マイコン１０１はキーワードと関連性の高い単語の情報を無線ＬＡＮコントローラ１０７を介してサーバから取得することができる。
【００４２】
次に、使用者の指示に応じて情報端末１００の制御マイコン１０１が撮影条件を登録する処理について図１２のフローチャートを参照して説明する。図１２のフローチャートは、制御マイコン１０１がＦＬＡＳＨメモリ１０４に格納されたプログラムをＤＲＡＭ１０６に展開して実行することで実現する。
Ｓ１２０１では、制御マイコン１０１は使用者から撮影条件を登録する指示があったか否かを判定する。撮影条件を登録する指示は、操作部１１０のボタン等のインターフェイス、マイク１１５からの音声入力、カメラ１１３で撮影している使用者の視界での手を使ったジェスチャー等により行うことができる。登録する指示があった場合にはＳ１２０２に進み、登録する指示がなかった場合にＳ１２０１に戻る。
【００４３】
Ｓ１２０２では、制御マイコン１０１はビーコン装置１５０が周囲に存在するか否かを判定する。制御マイコン１０１は、近距離無線通信部１０８を介して、識別情報が登録された何れかのビーコン装置１５０の電波を受信している場合にビーコン装置１５０が周囲に存在すると判定する。ビーコン装置１５０が周囲に存在しない場合にはＳ１２０３に進む。
Ｓ１２０３では、制御マイコン１０１は透過型ＬＣＤ１２０を介して登録が失敗した旨を表示することで使用者に通知する。その後、Ｓ１２０１に戻る。
一方、Ｓ１２０２においてビーコン装置１５０が周囲に存在する場合にはＳ１２０４に進む。
Ｓ１２０４では、制御マイコン１０１は照度、音声レベル、加速度といった各種検出値のロギングを行う。
【００４４】
Ｓ１２０５では、制御マイコン１０１は使用者から撮影条件の登録を終了する指示があったか否かを判定する。終了する指示がない場合には、Ｓ１２０４に戻って制御マイコン１０１はロギングを継続する。一方、終了する指示があった場合にはＳ１２０６に進む。
Ｓ１２０６では、制御マイコン１０１は各種検出値のログに目立った変化があるか否かを判定する。ここでの判定は、図７で説明したグラフと同様に、所定時間遡った時刻Ｔ１１から終了時点０までの期間の検出値の変化に対して行う。制御マイコン１０１は、目立った変化の抽出として、例えば時間軸に対する検出値の変化に対してローパスフィルタをかけ、変化の傾きが所定値より大きい点を抽出する等の方法で実現できる。何れかの検出値に目立った変化がある場合にはＳ１２０７に進む。
【００４５】
Ｓ１２０７では、制御マイコン１０１は撮影条件を登録する。なお、制御マイコン１０１は検出の精度を高めるために各種検出値に目立った変化がある場合のみ、撮影条件を登録するようにしてもよい。制御マイコン１０１は、特定条件として登録する各種検出値の変化は、制御マイコン１０１がＳ１２０６で抽出した変化点の時刻Ｔｘｘを境界として、境界で刻まれた各期間の信号レベルの平均値を算出する。また、制御マイコン１０１は、それらの期間の開始時刻と、算出した信号レベルの平均値とを関連付けて、図６に示すテーブルに登録する。また、制御マイコン１０１は登録した撮影条件で撮影された画像に付加するキーワードを使用者に入力させる。キーワードの入力は、マイク１１５からの音声入力、予め用意された候補の中から操作部１１０のボタン等のインターフェイス、カメラ１１３で撮影している使用者の視界での手を使ったジェスチャーで選択する等の方法で行うことができる。撮影条件の登録が終了した場合にはＳ１２０１に戻る。
【００４６】
Ｓ１２０６において何れの検出値にも目立った変化がない場合にはＳ１２０３に進む。Ｓ１２０３では、制御マイコン１０１は透過型ＬＣＤ１２０を介して登録が失敗したこと旨を表示することで使用者に通知し、再登録の指示を促してＳ１２０１に戻る。
【００４７】
以上、本実施形態の情報端末１００によれば、取得した位置情報が予め定められた位置情報の場合であって、かつ、使用者の行動が当該予め定められた位置情報に関連付けられた行動である場合に、画像を撮影して記録する。このように、使用者の行動が当該位置情報に関連付けられた行動である場合に撮影して記録することで、不必要な画像を記録することを抑制でき、使用者が必要とする可能性が高い画像を効率よく記録することができる。
例えば、上述したように、使用者が冷蔵庫３０１に近接した位置で、冷蔵庫３０１のドアを開ける行動をした場合に、画像が撮影されて記録される。一方、使用者が冷蔵庫３０１のドアを開ける行動と同じような行動を行った場合であっても、冷蔵庫３０１に近接した位置ではない場合には画像が記録されない。したがって、不必要な画像が記録されず、必要とする可能性が高い画像を記録することができる。
なお、少ない変化を定めた特定条件であっても位置情報と関連付けることで、自宅や職場等のような使用者の行動の変化は少ない日常的な環境下であっても、使用者の行動を特定することができ、使用者の必要とする可能性が高い画像を記録することができる。
【００４８】
また、本実施形態では、撮影条件には、予め定められた位置情報に使用者の行動を特定するための複数の異なる種類の特定条件が関連付けられている。ここで、複数の異なる種類の特定条件とは、上述したように、照度と音声レベルとの組み合わせ、あるいは、音声レベルと加速度との組み合わせ等である。このように位置情報に使用者の行動を特定するために複数の異なる種類の特定条件を関連付けることで、使用者のいる位置における使用者の行動をより精度よく特定することができる。したがって、不必要な画像を記録することを抑制でき、使用者が必要とする可能性が高い画像を効率よく記録することができる。
【００４９】
なお、上述した実施形態では、使用者の行動を特定するために照度、音声レベル、加速度を用いる場合について説明したがこの場合に限られない。例えば、角速度、撮影画像のデフォーカス量、画像の動きベクトル、および、画像に写った被写体の認識結果等を検出する検出手段としての検出部を情報端末１００に設けたり、情報端末１００とは別途で設けたりしてもよい。情報端末１００に検出部を設ける場合には、カメラ１１３を検出部として用いることができる。
また、上述した実施形態では、加速度センサ１１１が情報端末１００を身に付けた使用者の頭部の姿勢を検出する場合について説明したがこの場合に限られない。例えば、使用者の手、指、腕、足、視線、まぶた、身体それぞれの状態およびそれぞれの動きを検出する検出手段としての各種センサを情報端末１００に設けたり、情報端末１００とは別途で設けたりしてもよい。また、例えば、使用者の脈拍、発汗量、脳波、血圧、体温、呼吸数等の生体情報の変化を検出する検出手段としての生体センサを情報端末１００に設けたり、情報端末１００とは別途で設けたりしてもよい。
このように検出手段を設けることで、検出手段により検出された検出値を用いて使用者の行動を特定することができる。なお、情報端末１００とは別途に検出手段を設ける場合には、情報端末１００は例えば近距離無線通信部１０８を介して検出手段から検出値を受け取ることができる。
また、上述した実施形態では、マイク１１５から入力された音声から音声レベルを検出する場合について説明したがこの場合に限られない。例えば、制御マイコン１０１はマイク１１５から入力された音声を解析し、解析結果を用いて使用者の行動を特定することができる。具体的には、制御マイコン１０１は、例えば撮影条件１に登録された冷蔵庫というキーワードに対して、関連性の高い肉、魚、野菜、チーズ、水、牛乳、ビールといった単語を無線ＬＡＮコントローラ１０７を介してサーバから収集する。制御マイコン１０１は収集した単語を撮影条件１の特定条件に登録する。したがって、制御マイコン１０１は、音声を解析した解析結果から、特定条件に登録された単語であると判定した場合には、カメラ１１３で撮影した画像を記録する。
【００５０】
また、上述した実施形態では、制御マイコン１０１は近距離無線通信部１０８を介してビーコン装置１５０から受信した電波に基づいて情報端末１００の位置を取得する場合について説明したが、この場合に限られない。例えば、制御マイコン１０１はＧＰＳ１０９や、電磁誘導を用いた近接無線通信等の方法で情報端末１００の位置を取得してもよい。なお、近接無線通信の場合は、通信相手との通信距離が数ｃｍ程度となるので、通信相手の位置情報のみで情報端末１００の位置を取得することができる。
【００５１】
また、上述した実施形態の情報端末１００のカメラ１１３は、メガネに取り付ける場合について説明したが、この場合に限られない。例えば、カメラ１１３は、使用者の首から掛けるネックレス型のものであってもよく、使用者の服の胸ポケットに入れたり、取り付けたりすることができるものであってもよい。また、カメラ１１３は、使用者のキャップ（帽子）の鍔に取り付けることができたり、使用者の耳の上に取り付けることができたり、頭頂部に取り付けることができるものであってもよい。すなわち、カメラ１１３は使用者の視界の少なくとも一部を撮影できるもの、あるいは、使用者の視界の少なくとも一部を撮影できるように取り付けられるものを用いることができる。
【００５２】
また、上述した実施形態の情報端末１００は、使用者の指示に応じて撮影条件を登録する場合について説明したが、この場合に限られない。情報端末１００は、再生履歴や使用者の生活習慣に基づいて、使用者に適した画像を撮影して記録できるように学習してもよい。
例えば、制御マイコン１０１は再生履歴を記録して、再生履歴から再生された画像ごとに付加されたキーワードの情報を抽出して、キーワードごとに抽出した数を算出する。制御マイコン１０１は抽出した数が相対的あるいは絶対的に大きいキーワードが関連付けられた撮影条件を図６に示すテーブルから読み出す。制御マイコン１０１は、読み出した撮影条件に類似する新たな撮影条件を生成して登録する。例えば、冷蔵庫のキーワードが付加された画像の再生が多い場合、制御マイコン１０１は図６に示すテーブルからキーワードとして冷蔵庫が関連付けられた撮影条件１を読み出す。制御マイコン１０１は、撮影条件１のうち例えば照度、および、音声レベルについてｔ＝０の位置が異なるように変更した撮影条件３を生成して登録する。
また、例えば、制御マイコン１０１は立ち寄った施設情報を記録して、施設情報ごとに立ち寄った回数を算出する。制御マイコン１０１は回数が相対的あるいは絶対的に多い施設情報に関連付けられたキーワードを図１０の関連性から読み出す。制御マイコン１０１は、読み出したキーワードが関連付けられた撮影条件を図６に示すテーブルから読み出す。制御マイコン１０１は、読み出した撮影条件に類似する新たな撮影条件を生成して登録する。例えば、スーパーマーケットに立ち寄る回数が多い場合、制御マイコン１０１は図１０に示す関連性からスーパーマーケットに関連付けられた冷蔵庫等のキーワードを読み出す。制御マイコン１０１は図６に示すテーブルからキーワードとして冷蔵庫が関連付けられた撮影条件１を読み出し、上述した処理と同様に、撮影条件１に類似する撮影条件３を生成して登録する。
したがって、例えば、使用者が冷蔵庫に近接した位置で、冷蔵庫のドアを開ける行動をした場合に、複数の異なるタイミングで画像が撮影されて記録されることから、これらの画像を再生することで使用者は冷蔵庫の庫内の状態を過不足なく確認することができる。このように、再生履歴や使用者の生活習慣に基づいて撮影条件を生成する等して学習することで、使用者に適した画像を撮影して記録することができる。
【００５３】
＜第２の実施形態＞
次に、第２の実施形態に係る情報端末について説明する。本実施形態は使用者が携帯したり所持したりできる携帯型、具体的にはスマートフォン型の情報端末である。スマートフォン型の情報端末は、図１に示した第１の実施形態の情報端末の内部構成と同様である。なお、スマートフォン型の情報端末の外観構成は、一般的なスマートフォンと同様なので説明を省略する。ここでは、第１の実施形態との差異を中心に説明する。
【００５４】
本実施形態の情報端末は使用者が手に持って扱うためにカメラ１１３が常に使用者の目前の被写体を撮影できる状態ではない。したがって、制御マイコン１０１は、図８のＳ８０５において使用者の行動が、当該撮影条件の撮影位置に関連付けられた特定条件を満たすと判定した場合には、目前の被写体を撮影するように使用者に対して通知する。具体的には、制御マイコン１０１は、例えばスピーカ１２２を介して音声にて通知することができる。制御マイコン１０１は、使用者の操作に応じてカメラ１１３で撮影して、撮影した画像を記録する。
【００５５】
なお、制御マイコン１０１は、照度、音声レベル、加速度といった検出値の変化を情報端末１００に設けられた各種センサや、画像や音声により取得することができる。また、制御マイコン１０１は、使用者の手や足等に取り付けた動きを検出する装置と通信を行うことで、使用者の行動としての検出値の変化を取得することができる。
このように、本実施形態の情報端末のように、カメラ１１３が常に使用者の目前の被写体を撮影できる状態ではない場合であっても、不必要な画像を記録することを抑制でき、使用者が必要とする可能性が高い画像を効率よく記録することができる。
【００５６】
＜第３の実施形態＞
次に、第３の実施形態に係る情報端末について説明する。本実施形態の情報端末は、第１の実施形態の情報端末１００の内部構成および外観構成と同様であり、その説明を省略する。ここでは、第１の実施形態との差異を中心に説明する。
【００５７】
本実施形態の情報端末は、使用者の目前の被写体を２４時間３６５日、カメラ１１３で撮影し続けて符号化し、同時に収録した音声を符号化して、撮影した画像と多重化して、無線ＬＡＮコントローラ１０７を介して、サーバに転送することで記録し続ける。
したがって、制御マイコン１０１は、使用者の行動が当該撮影条件の撮影位置に関連付けられた特定条件を満たすと判定した場合には、このときの画像が記録されている記録位置を示す情報を生成して、サーバに転送して記録する。また、制御マイコン１０１は、キーワードの情報もサーバに転送して記録する。例えば、記録位置を示す情報は、後から制御マイコン１０１が画像を迅速に検索するための情報であって、画像の格納場所、ファイル名、ファイル上の位置および記録日時（日付や時分）の情報等の少なくとも何れかの情報が含まれる。
【００５８】
使用者から再生を指示された場合、制御マイコン１０１は無線ＬＡＮコントローラ１０７を介して、サーバに記録された画像のうちから使用者のいる施設と最も関連度の大きいキーワードが付加された画像の記録位置を参照して検索し、検索した画像を再生する。
このように、本実施形態によれば、使用者の目前の被写体を記録し続けるような情報端末であっても、大量に記録された画像から、使用者が必要な画像を効率よく再生することができる。
【００５９】
以上、本発明を種々の実施形態と共に説明したが、本発明はこれらの実施形態にのみ限定されるものではなく、本発明の範囲内で変更等が可能であり、上述した実施形態を適時組み合わせてもよい。
【００６０】
＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記録媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。また、本発明には、上述したプログラムおよび該プログラムを記録したコンピュータ読取可能な記録媒体が含まれる。
【符号の説明】
【００６１】
１００：情報端末  １０１：制御マイコン  １０４：ＦＬＡＳＨメモリ  １０６：ＤＲＡＭ  １１１：加速度センサ  １１３：カメラ  １１５：マイク  １５０：ビーコン装置
【図１】
2018182432.tif 000003
【図２】
2018182432.tif 000004
【図３】
2018182432.tif 000005
【図４】
2018182432.tif 000006
【図５】
2018182432.tif 000007
【図６】
2018182432.tif 000008
【図７】
2018182432.tif 000009
【図８】
2018182432.tif 000010
【図９】
2018182432.tif 000011
【図１０】
2018182432.tif 000012
【図１１】
2018182432.tif 000013
【図１２】
2018182432.tif 000014