(57)【特許請求の範囲】
【請求項１】
生体情報取得部から生体情報を受信する通信部と、
顔画像及び前記生体情報取得部の機器情報を対応付けた登録情報を人物毎に記憶する記憶部と、
撮影部が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と前記記憶部に記憶された顔画像に基づいて人物を特定する認識部と、
前記記憶部に記憶された機器情報に基づいて前記認識部が特定した人物の生体情報取得部を特定し、前記撮影部が撮像した画像を、特定した生体情報取得部から受信した生体情報を前記認識部が判定した顔認識範囲と対応付けて前記記憶部に記憶する記録制御部と、
を備える画像記録装置。
【請求項２】
前記通信部は、前記生体情報取得部から当該生体情報取得部の機器情報を受信し、
前記認識部が判定した顔認識範囲内の顔画像と、前記通信部が受信した機器情報の少なくとも一部とを人物毎に対応付けた登録情報を生成する登録情報生成部と、
を備える請求項１に記載の画像記録装置。
【請求項３】
表示部が表示する情報を指示する入力部と、
前記記憶部に記憶した画像を表示部に表示させ、表示させた画像の顔認識範囲内の位置を前記入力部が指示したとき、当該顔認識範囲に対応づけて記憶された生体情報を表示部に表示させる表示制御部と、
を備える請求項１または請求項２に記載の画像記録装置。
【請求項４】
前記記憶部は、身体の状態を示す身体情報と当該身体の状態において表れる表情を示す表情画像とを対応付けて記憶し、
前記生体情報取得部が受信した生体情報の少なくとも一部から身体の状態を判定し、判定した身体の状態に対応する表情画像を前記記憶部から読み取り、読み取った表情画像を、前記生体情報取得部を装着した人物の顔認識範囲に重畳して表示部に表示させる表示制御部と、
を備える請求項１から３のいずれかに記載の画像記録装置。
【請求項５】
前記生体情報取得部から受信した生体情報の少なくとも一部について人物間の順位を判定し、判定した順位を示す文字を、前記生体情報取得部を装着した人物の顔認識範囲に重畳して表示部に表示させる表示制御部と、
を備える請求項１から４のいずれかに記載の画像記録装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像記録装置に関する。
【背景技術】
【０００２】
従来から、撮影した画像に各種の情報を関連付けて記録する技術が提案されている。例えば、特許文献１には、カメラの周囲の環境情報を取得する環境情報センサを備えるカメラが記載されている。環境情報センサがシャッターボタンの半押し操作に連動して環境情報をＣＰＵに出力し、ＣＰＵがシャッターボタンの全押し操作の解除に連動してヘッダ部分に環境情報を記録する画像記録装置について記載されている。かかる構成により、撮影者に対して、記録された環境情報に対応する内容を参照して、撮影時の状況を想起させることを目的としている。また、特許文献１には、環境情報センサに代えて、撮影者の生体情報を取得する撮影者情報センサを備えるカメラも記載されている。撮影者情報センサとして、体温センサ、脈拍センサ、血圧センサ等、が例示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−８６８２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、カメラを把持する撮影者が撮影を行う場合でも、撮影者のみが撮影した画像との関連性があるとは限らない。むしろ被写体として撮影された画像に表された人物の方がその画像と関連性が強い場合もありうる。また、カメラを所持する所持者が、常に撮影者になるとは限られない。例えば、所持者がその場で居合わせた人に撮影を依頼する場合には、所持者が撮影された画像に表れる場合もある。そのような場合には、特許文献１に記載のカメラで取得された生体情報に関連する撮影者が、画像に表された人物や所有者本人とは一致しない。そのため、撮影時の状況を想起できないことがある。
【０００５】
本発明は、以上のような課題を解決するためになされたものであって、撮影者によらず撮影時の状況を想起させることができる画像記録装置を提供する。
【課題を解決するための手段】
【０００６】
本発明は、上記の課題を解決するためになされたものであり、本発明の一態様は生体情報取得部から生体情報を受信する通信部と、顔画像及び前記生体情報取得部の機器情報を対応付けた登録情報を人物毎に記憶する記憶部と、撮影部が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と前記記憶部に記憶された顔画像に基づいて人物を特定する認識部と、前記記憶部に記憶された機器情報に基づいて前記認識部が特定した人物の生体情報取得部を特定し、前記撮影部が撮像した画像を、特定した生体情報取得部から受信した生体情報を前記認識部が判定した顔認識範囲と対応付けて前記記憶部に記憶する記録制御部と、を備える画像記録装置である。
【発明の効果】
【０００７】
本発明によれば、撮影者によらず撮影時の状況を想起させることができる。
【図面の簡単な説明】
【０００８】
【図１】第１の実施形態に係る画像記録システムを示す概念図である。
【図２】第１の実施形態に係る画像記録装置の構成を示すブロック図である。
【図３】第１の実施形態に係る画像記録処理を示すシーケンス図である。
【図４】画像データに基づいて生成された撮影情報の例を示す図である。
【図５】第１の実施形態において表示される画像の例を示す図である。
【図６】第２の実施形態に係る画像記録装置の構成を示すブロック図である。
【図７】第２の実施形態に係る登録情報生成処理の一例を示すフローチャートである。
【図８】第２の実施形態に係る登録画面の一例を示す図である。
【図９】第２の実施形態に係る登録情報生成処理の他の例を示すフローチャートである。
【図１０】第２の実施形態に係る画像データ記録処理を示すフローチャートである。
【図１１】生体情報の例を示す表である。
【図１２】第２の実施形態において表示される画像の例を示す図である。
【図１３】第３の実施形態に係る画像記録装置の構成を示すブロック図である。
【図１４】第３の実施形態に係る表示制御処理を示すフローチャートである。
【図１５】第３の実施形態において表示される画像の例を示す図である。
【図１６】第４の実施形態に係る画像記録装置の構成を示すブロック図である。
【図１７】順位が付加された生体情報の例を示す表である。
【図１８】第４の実施形態において表示される画像の例を示す図である。
【発明を実施するための形態】
【０００９】
（第１の実施形態）
本発明の第１の実施形態について、図面を参照しながら説明する。図１は、本実施形態に係る画像記録システム１を示す概念図である。
画像記録システム１は、画像記録装置１０と、生体情報取得部２０−１、２０−２を含んで構成される。
【００１０】
画像記録装置１０は、周囲の所定の視野内における被写体の画像を示す画像データを取得する。また、画像記録装置１０は、その周囲の環境の状態を示す環境情報を取得する。画像記録装置１０は、生体情報取得部２０−１、２０−２から、人物の生体情報を受信する。画像記録装置１０は、画像を取得及び記録する機能を有する電子機器であればよい。画像記録装置１０は、例えば、カメラを有する多機能携帯電話機（いわゆるスマートフォンを含む）、タブレット端末、静止画を撮像するディジタルカメラである。
【００１１】
生体情報取得部２０−１、２０−２は、測定対象の人物毎に物理的に測定可能な生体情報を計測し、計測した生体情報を画像記録装置１０に送信する。生体情報取得部２０−１、２０−２は、当該人物に装着可能なウェアラブルデバイスであってもよい。生体情報取得部２０−１は、例えば、活動量計２１−１、心拍計２２−１、及び歩数計２３−１を含む。生体情報取得部２０−２は、例えば、活動量計２１−２、心拍計２２−２、及び歩数計２３−２を含む。
【００１２】
活動量計２１−１、２１−２は、例えば、人物の上肢部に装着可能であり、装着されている人物の１日内の消費カロリーを計測する。心拍計２２−１、２２−２は、例えば、人物の胸部に装着可能であり、装着されている人物の１分当たりの心拍数を計測する。歩数計２３−１、２３−２は、例えば、人物の下肢部に装着可能であり、装着されている人物の１日内の歩数と、歩行距離とを計測する。活動量計２１−１、２１−２、心拍計２２−１、２２−２、及び歩数計２３−１、２３−２は、それぞれ計測した生体情報を無線で送信する通信部を備える。通信部は、画像記録装置１０と生体情報取得部２０−１、２０−２との間のデータの送受信を、所定の無線通信規格、例えば、ＩＥＥＥ（Ｉｎｓｔｉｔｕｔｅ  ｏｆ  Ｅｌｅｃｔｒｉｃａｌ  ａｎｄ  Ｅｌｅｃｔｒｏｎｉｃｓ  Ｅｎｇｉｎｅｅｒｓ）８０２．１５．１、ＩＥＥＥ８０２．１１、等を用いて行う。
なお、以下の説明では、生体情報取得部２０−１、２０−２、活動量計２１−１、２１−２、心拍計２２−１、２２−２、及び歩数計２３−１、２３−２を、「デバイス２０」と総称することがある。また、デバイス２０が取得した情報を、単に「生体情報」と呼ぶことがある。
【００１３】
（画像記録装置の構成）
次に、本実施形態に係る画像記録装置１０の構成について説明する。図２は、本実施形態に係る画像記録装置１０の構成を示すブロック図である。
画像記録装置１０は、制御部１００、記憶部１１０、表示部１２０、入力部１３０、カメラ機能部１４０、環境情報センサ１５０、ＧＰＳセンサ１６０、ネットワーク通信部１７０、カメラ１４、及びアンテナ１７を含んで構成される。
【００１４】
制御部１００は、記憶部１１０に記憶されているプログラムを実行することにより、画像記録装置１０の各部の動作を制御する。制御部１００は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）含んで構成される。制御部１００は、ＣＰＵがプログラムを実行することで、記録制御部１０１と表示制御部１０２の機能を実現する。
【００１５】
記録制御部１０１は、記憶部１１０に予め記憶された登録情報１１２のうち、カメラ機能部１４０の顔認識部１４２が認識した人物に係る登録情報１１２を特定し、特定した登録情報１１２に含まれる機器情報が示すデバイス２０を特定する。登録情報１１２は、人物毎に生成された情報であって、その人物の顔情報、機器情報、及び名前情報を含む情報である。顔情報は、その人物の顔を示す顔画像データを特定する情報、例えば、ファイル名である。名前情報は、その人物を特定する情報、例えば、氏名、愛称、等である。記録制御部１０１は、特定したデバイス２０から受信した生体情報１１３を、カメラ機能部１４０の顔認識部１４２から入力された撮影情報１１４が示す顔認識範囲に対応付ける。記録制御部１０１は、カメラ機能部１４０から入力された画像データ１１１を記憶部１１０に記憶し、撮影情報１１４が示す顔認識範囲に対応付けた生体情報１１３を対応付けて記憶部１１０に記録する。
【００１６】
表示制御部１０２は、入力部１３０から操作信号が入力されたとき、記憶部１１０に記憶した画像データ１１１、生体情報１１３から表示部１２０に表示させるための表示画像データを生成する。表示制御部１０２が行う処理については、後述する。
記憶部１１０は、制御部１００で実行される各種のプログラム、画像記録装置１０の各部の動作に要するデータ、画像記録装置１０の各部が取得したデータを記憶する。記憶部１１０は、例えば、画像データ１１１、登録情報１１２、生体情報１１３、及び撮影情報１１４を記憶する。記憶部１１０は、例えば、ＨＤＤ（Ｈａｒｄ−ｄｉｓｋ  Ｄｒｉｖｅ）、フラッシュメモリ、ＲＯＭ（Ｒｅａｄ−ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）のいずれか、又はそれらの任意の組み合わせである。
【００１７】
表示部１２０は、制御部１００から入力された各種のデータに基づく画像を表示する。表示部１２０は、例えば、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイである。
入力部１３０は、ユーザによる操作入力を受け付け、受け付けた操作入力に基づいて画像記録装置１０の動作を制御するための操作信号を制御部１００に出力する。入力部１３０は、例えば、タッチセンサである。入力部１３０は、表示部１２０と一体化したタッチパネルとして構成されてもよい。
【００１８】
カメラ１４は、周囲の所定の視野内における被写体の画像を撮影し、撮影した画像を示す画像データを生成する。カメラ１４は、生成した画像データをカメラ機能部１４０に出力する。カメラ１４は、例えば、ディジタルスティルカメラである。
カメラ機能部１４０は、ユーザによる操作入力もしくは制御部１００から入力された制御信号に基づいてカメラ１４の機能を制御する。例えば、カメラ機能部１４０は、カメラ１４を起動し、カメラ１４に画像を撮影させ、カメラ１４の動作を終了する。カメラ機能部１４０は、カメラ１４が撮影した画像を示す画像データ１１１を記憶部１１０に記憶する。カメラ機能部１４０は、シャッター検知部１４１及び顔認識部１４２を含んで構成される。
【００１９】
シャッター検知部１４１は、シャッターボタン（図示せず）の押下を検知する。シャッターボタンは、押下されることによりカメラ１４に撮影を指示するためのボタンである。
顔認識部１４２は、カメラ１４から入力された画像データ１１１について、登録情報１１２に含まれる顔情報を参照して画像認識処理を行うことにより画像データが示す顔の領域（顔認識範囲）を特定する。これにより、特定された顔の人物が認識される。顔認識範囲の特定、人物の認識において、顔認識部１４２は、例えば、Ｖｉｏｌａ  Ｊｏｎｅｓ法、等の画像認識技術を用いてもよい。顔認識部１４２は、１個の画像データから認識された人物の人数、各人物の顔認識範囲、当該顔認識範囲の中心座標、当該顔認識範囲の大きさを示す撮影情報を生成する。顔認識部１４２は、生成した撮影情報１１４と画像データ１１１を対応付けて記録制御部１０１に出力する。
【００２０】
環境情報センサ１５０は、画像記録装置１０の周囲の環境を示す環境情報を取得する。環境情報センサ１５０は、例えば、気温を計測する温度計、湿度を計測する湿度センサ、風向及び風速を計測する風向風速センサ、天気を判定する天気計、等のいずれか、それらの一部の組み合わせ、又は全ての組み合わせである。環境情報センサ１５０は、取得した環境情報を記憶部１１０に記憶する。
ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）センサ１６０は、複数のＧＰＳ衛星から受信した受信信号の到達時間差に基づいて自己の緯度及び経度を算出する。ＧＰＳセンサ１６０は、予め記憶部１１０に記憶した地図情報を参照して、算出した緯度及び経度に対応する施設名又は地名を特定してもよい。地図情報は、緯度及び経度毎に施設名又は地名を示す情報である。ＧＰＳセンサ１６０は、自己の位置として算出した緯度及び経度、施設名又は地名を示す位置情報を記憶部１１０に記憶する。位置情報は、環境情報に含まれてもよい。
【００２１】
ネットワーク通信部１７０は、アンテナ１７を介して無線で他の機器との間でデータを送受信する。ネットワーク通信部１７０は、生体情報取得部２０−１、２０−２からそれぞれ生体情報１１３を受信する。ネットワーク通信部１７０は、受信した生体情報を記録制御部１０１に出力する。
【００２２】
（画像記録処理）
次に、本実施形態に係る画像記録処理について説明する。図３は、本実施形態に係る画像記録処理を示すシーケンス図である。
図３に示す例では、ユーザである撮影者ａｃ１が画像記録装置１０を操作し、撮影者ａｃ１とは別の人物である１名の被写体ａｃ２を含む画像を撮影する場合を例にして、画像記録装置１０、デバイス２０が行う処理を示す。被写体ａｃ２の身体には、デバイス２０が装着されている。なお、撮影者ａｃ１の身体にもデバイス２０が装着されていてもよい。なお、画像記録装置１０とデバイス２０との間における通信を、所定の無線通信規格ＩＥＥＥ８０２．１５．１に従って実行する場合を例にする。
【００２３】
（ステップＳ０）画像記録装置１０の入力部１３０は、撮影者ａｃ１による操作入力に基づいてデバイス検索を指示する操作信号を生成し、生成した操作信号を制御部１００に出力する。制御部１００は、入力部１３０から操作信号が入力されたことに応じて、画像記録装置１０と接続可能なデバイスの検索を開始する。
（ステップＳ１）デバイス２０は、アドバータイズモードでの動作を開始する。アドバータイズモードとは、自機が接続可能な機器であることを示す報知情報（ａｄｖｅｒｔｉｓｅ）を所定間隔（例えば、３０秒間隔）で送信する動作モードである。
（ステップＳ２）デバイス２０は、報知情報を所定間隔で送信する。報知情報には、個々のデバイス２０を識別するための機器情報（アドレス）が含まれる。
【００２４】
（ステップＳ３）画像記録装置１０のネットワーク通信部１７０は、デバイス２０から報知情報を受信し、受信した報知情報に含まれるアドレスが示すデバイス２０を、通信可能なデバイスとして発見したと判定する。ネットワーク通信部１７０は、受信した報知情報を制御部１００に出力する。制御部１００は、報知情報に含まれる機器情報が示すデバイスの一覧を表すデバイス一覧画面データを生成する。制御部１００は、生成したデバイス一覧画面データを表示部１２０に出力する。表示部１２０は、制御部１００から入力されたデバイス一覧画面データに基づいてデバイス一覧画面を表示する。
【００２５】
（ステップＳ４）画像記録装置１０の入力部１３０は、撮影者ａｃ１による操作入力に基づいて、表示部１２０に表示されたデバイス一覧から接続を許可するデバイスを指示する操作信号を生成する。ネットワーク通信部１７０は、入力部１３０が生成した操作信号が指示するデバイスを接続可能な機器として設定することを示す接続設定信号を生成する（ペアリング設定指示）。
（ステップＳ５）画像記録装置１０のネットワーク通信部１７０は、制御部１００が生成した接続設定信号を当該接続設定信号で指示されるデバイス２０に送信する（ペアリング）。
（ステップＳ６）デバイス２０は、画像記録装置１０から接続設定信号を受信するとき、送信元である画像記録装置１０に確認応答信号（ＯＫ）を送信する。画像記録装置１０のネットワーク通信部１７０は、受信した確認応答信号（ＯＫ）の送信元であるデバイス２０を接続可能な機器として設定する。従って、ユーザは、所望の人物が装着しているデバイス２０を選択することができる。
【００２６】
（ステップＳ７）画像記録装置１０のカメラ機能部１４０が、撮影者ａｃ１による操作入力に基づいてカメラ１４の起動が指示された場合、カメラ１４を起動させる。
（ステップＳ８）画像記録装置１０のネットワーク通信部１７０は、デバイス２０への接続要求を示す接続要求信号（Ｃｏｎｎｅｃｔ  Ｒｅｑｕｅｓｔ）をデバイス２０に送信する。
【００２７】
（ステップＳ９）デバイス２０は、画像記録装置１０から接続要求信号を受信するとき、送信元である画像記録装置１０に確認応答信号（ＯＫ）を送信する。
（ステップＳ１０）画像記録装置１０のネットワーク通信部１７０は、デバイス２０から確認応答信号（ＯＫ）を受信するとき、デバイス２０への接続開始を示す接続開始信号をデバイス２０に送信する。
（ステップＳ１１）デバイス２０は、画像記録装置１０から接続開始信号を受信するとき、送信元である画像記録装置１０に確認応答信号（ＯＫ）を送信する。これにより、画像記録装置１０は、デバイス２０との間でデータの送受信が可能な接続状態となる。
（ステップＳ１２）デバイス２０は、生体情報を所定時間（例えば、１分）毎に計測する。
【００２８】
（ステップＳ１３）画像記録装置１０の顔認識部１４２は、カメラ１４から入力された画像データ１１１について画像認識処理を行い、画像データ１１１が示す顔認識範囲を特定する。顔認識部１４２は、特定した顔認識範囲に表された人物を認識する。ここで、人物が認識できた時点で、シャッター検知部１４１は、シャッターボタンへの操作の待ち受けを開始してもよい。そのため、人物が認識されていない場合において、撮影情報１１４の生成に係る処理を回避することができる。  
（ステップＳ１４）画像記録装置１０のシャッター検知部１４１が、撮影者ａｃ１によるシャッターボタンの押下を検知するとき、カメラ１４から入力された画像データ１１１を記憶部１１０に記憶する。顔認識部１４２は、特定した各人物の顔認識範囲、当該顔認識範囲の中心座標、当該顔認識範囲の大きさを示す画像データを含んだ撮影情報１１４を生成する。顔認識部１４２は、生成した撮影情報１１４と画像データ１１１とを対応付けて記憶部１１０に記憶する。
【００２９】
（ステップＳ１５）画像記録装置１０のネットワーク通信部１７０は、生体情報を要求することを示す生体情報要求信号をデバイス２０に送信する。
（ステップＳ１６）デバイス２０は、画像記録装置１０から生体情報要求信号を受信するとき、送信元である画像記録装置１０に、計測した生体情報を送信する。画像記録装置１０のネットワーク通信部１７０は、デバイス２０から生体情報を受信する。
【００３０】
（ステップＳ１７）ネットワーク通信部１７０は、生体情報取得部２０−１、２０−２からそれぞれ生体情報１１３を受信する。
顔認識部１４２は、画像データ１１１から認識された人物である被写体ａｃ２の顔認識範囲の数、当該顔認識範囲の中心座標、当該顔認識範囲の大きさ、及び当該顔認識範囲が示す顔画像データを示す撮影情報１１４を生成する。
記録制御部１０１は、顔認識部１４２が認識した登録情報１１２に含まれる機器情報が示すデバイス２０から受信した生体情報１１３を、撮影情報１１４が示す顔認識範囲に対応付ける。記録制御部１０１は、画像データ１１１、撮影情報１１４及び撮影情報１１４が示す顔認識範囲に対応付けた生体情報１１３を対応付けて記憶部１１０に記録する（撮影した画像を書込）。
【００３１】
（ステップＳ１８）表示制御部１０２は、記憶部１１０に記憶した画像データ１１１を表示部１２０に出力し、表示部１２０に画像データ１１１に基づく画像を表示させる。表示制御部１０２は入力部１３０から被写体ａｃ２の顔認識範囲内の位置が指示された場合、当該顔認識範囲に対応付けた生体情報１１３を記憶部１１０から読み取る。表示制御部１０２は、読み取った生体情報１１３を表示部１２０に表示させる（撮影した画像を表示）。その後、図３に示す処理を終了する。
【００３２】
なお、デバイス２０が生体情報の計測（ステップＳ１２）を開始した後では、ステップＳ１５及びステップＳ１６の処理が、所定周期（例えば、３分）で繰り返されてもよいし、ステップＳ１３、ステップＳ１４が、繰り返し実行可能であってもよい。この所定周期は、デバイス２０における生体情報の計測周期と等しいか、より長ければよい。よって、撮影者ａｃ１は、生体情報の時間経過を参照して、任意の時点でシャッターボタンを押下することにより画像記録装置１１に画像データ１１１と撮影情報１１４を記録させることができる。
なお、撮影者ａｃ１の身体にもデバイス２０が装着されることがある。画像記録装置１０は、撮影者ａｃ１の身体に装着されたデバイス２０との間の処理を、被写体ａｃ２の身体に装着したデバイス２０との間の処理と同様に行ってもよい。
【００３３】
（撮影情報の例）
図４は、画像データ１１１に基づいて生成された撮影情報１１４の例を示す図である。撮影情報は、画像データ内に顔認識の有無、認識された人物の人数、顔認識範囲の中心座標、顔認識範囲の大きさを示す情報である。図４に示す例では、撮影情報１１４は、顔認識あり、認識された人物の人数が１名であり、顔認識範囲の中心座標が３００（水平座標）、２００（垂直座標）であり、顔認識範囲の大きさが１００（幅）、１００（高さ）であることを示す。これらの座標値の単位は、画素数である。
【００３４】
（表示例）
次に、ステップＳ１８において表示部１２０に表示される画像の例について説明する。
図５は、本実施形態において表示される画像の例を示す図である。
図５（Ａ）は、画像データ１１１に基づく画像の例である。図５（Ａ）に示す画像の右下には、人物の顔ｆｃ１が表されている。顔ｆｃ１に外接する破線の四角形は、顔認識範囲ｂｘ０１を示す。
図５（Ｂ）は、図５（Ａ）に示す画像に対し、さらにポインタｐｔ０１及び生体情報ｂｉ０１が表示されている。ポインタｐｔ０１は、入力部１３０から入力された操作信号で指示される位置を示す画像である。生体情報ｂｉ０１は、顔ｆｃ１に係る人物について測定された生体情報である。図５（Ｂ）に示す例では、生体情報ｂｉ０１は、「心拍数９０回／分、ストレスなし、活動量２０００ｋｃａｌ、歩数４０００歩、距離２０００ｍ」を示す。生体情報ｂｉ０１は、操作信号が示す位置が顔認識範囲ｂｘ０１の範囲内である場合に表示される。この表示により、認識された人物と表示された生体情報との関連性が表現されるので、表示された画像を見たユーザは撮影時の状況を想起することができる。なお、以下の説明では、表示された画像や情報の表示範囲内の位置を指示する操作信号が入力部１３０から入力されることを、その表示範囲に係る画像や情報を「押下する」と呼ぶことがある。
【００３５】
ここで、表示制御部１０２は、所定のポインタ画像を操作信号が指示する位置に表すポインタ画像データを生成する。表示制御部１０２は、記憶部１１０に記憶され画像データ１１１に対応付けられた撮影情報１１４を参照して、顔認識範囲ｂｘ０１を読み取る。表示制御部１０２は、操作信号が示す位置が読み取った顔認識範囲ｂｘ０１内に含まれると判定するため、顔認識範囲ｂｘ０１に対応する生体情報とポインタ画像データを画像データ１１１に重畳して表示画像データを生成する。表示制御部１０２は、生成した表示画像データに基づいて図５（Ｂ）に示す画像を表示することができる。なお、表示制御部１０２は、撮影情報１１４の表示位置を、その表示領域が顔認識範囲ｂｘ０１に重ならない位置に定める。これにより、ユーザは、指示した人物の顔ｆｃ０１の画像と、当該人物の生体情報ｂｉ０１の両方を同時に見ることができるので、当該人物に対する関心を満たすことができる。
【００３６】
なお、表示制御部１０２は、顔認識範囲ｂｘ０１又は顔認識範囲ｂｘ０１から予め定めた範囲内に操作可能であることを示す所定の表示を重畳して、表示部１２０に表示させてもよい。表示制御部１０２は、例えば、撮影情報１１４を参照して読み取った顔認識範囲ｂｘ０１の外枠線を示す顔認識範囲画像データを生成する。表示制御部１０２は、生成した顔認識範囲画像データと、画像データ１１１とを重畳し、重畳した画像データに基づく画像を表示部１２０に表示させる。
これにより、ユーザは、顔認識範囲ｂｘ０１が操作可能であることに気付くことができるので、認識された人物ｆｃ１に係る生体情報ｂｉ０１に容易にアクセスすることができる。なお、操作可能であることを示す所定の表示は、外枠線に限らず、他の表示領域と異なる態様、例えば、色彩、彩度、等、であればよい。
【００３７】
以上に説明したように、本実施形態に係る画像記録装置１０は、デバイス２０から生体情報を受信するネットワーク通信部１７０と、顔画像及びデバイス２０の機器情報を対応付けた登録情報を人物毎に記憶する記憶部１１０とを備える。また、画像記録装置１０は、カメラ１４が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と記憶部１１０に記憶された顔画像に基づいて人物を特定する顔認識部１４２を備える。また、画像記録装置１０は、記憶部１１０に記憶された機器情報に基づいて顔認識部１４２が特定した人物のデバイス２０を特定し、カメラ１４が撮像した画像を、特定したデバイス２０から受信した生体情報を顔認識部１４２が判定した顔認識範囲と対応付けて記憶部１１０に記憶する記録制御部１０１を備える。
この構成により、記憶部１１０には撮影された画像が表す人物の顔を示す顔認識範囲と、その人物の生体情報とを対応付けて記録される。ユーザは、その人物の顔に基づいてその人物の生体情報に容易に接することができるので、撮影者によらず撮影時の状況を想起することができる。
【００３８】
本実施形態に係る画像記録装置１０は、表示部１２０が表示する情報を指示する入力部１３０を備える。また、画像記録装置１０は、記憶部１１０に記憶した画像を表示部１２０に表示させ、表示させた画像の顔認識範囲内の位置を入力部１３０が指示したとき、当該顔認識範囲に対応づけて記憶された生体情報を表示部１２０に表示させる表示制御部１０２を備える。
この構成により、ユーザは操作により人物の顔を表す顔認識範囲を指示することで、その人物の生体情報を見ることができる。そのため、ユーザは、撮影時の状況を想起するとともに、顔認識範囲を指示した人物への関心を満たすことができる。
【００３９】
（第２の実施形態）
次に、本発明の第２実施形態について説明する。上述した実施形態と同一の構成については、同一の符号を付して説明を援用する。
本実施形態に係る画像記録システム１ａ（図示せず）は、画像記録装置１０ａと、生体情報取得部２０−１、２０−２を含んで構成される。次に、画像記録装置１０ａの構成について説明する。
図６は、本実施形態に係る画像記録装置１０ａの構成を示すブロック図である。
画像記録装置１０ａは、図６に示すように制御部１００において記録制御部１０１（図２）に代えて記録制御部１０１ａを備え、さらに登録情報生成部１０３ａを備える。
【００４０】
記録制御部１０１ａは、顔認識部１４２が特定した人物に係る登録情報に含まれる機器情報が示すデバイス２０からネットワーク通信部１７０を介して受信した生体情報を、顔認識部１４２から入力された撮影情報が示す顔認識範囲と対応付ける。記録制御部１０１ａは、顔認識部１４２から入力された画像データ、撮影情報、及び当該撮影情報が示す顔認識範囲に対応付けた生体情報を、対応付けて記憶部１１０に記録する。
顔認識部１４２は、上述したようにカメラ１４が撮影した画像内の顔画像、つまり自部が認識した顔認識範囲内の顔画像と記憶部１１０に記憶された登録情報１１２に含まれる顔画像データが示す顔画像とを、人物毎に比較する。顔認識部１４２は、顔認識範囲内の顔画像と一致もしくは最も類似性が高いと判定される顔画像を示す登録情報１１２に係る人物を特定する。
【００４１】
登録情報生成部１０３ａは、上述したペアリング処理（ステップＳ４、図３）において、指示されたデバイスについて入力部１３０から入力された操作信号に基づいて登録情報１１２を新たに生成し、生成した登録情報１１２を記憶部１１０に記憶する。そして、ネットワーク通信部１７０は、指示されたデバイスを接続可能な機器として設定することを示す接続設定信号を生成し、生成した接続設定信号を当該デバイスに送信する。
【００４２】
（登録情報生成処理）
次に、登録情報生成部１０３ａが行う登録情報生成処理について説明する。
図７は、本実施形態に係る登録情報生成処理の一例を示すフローチャートである。
（ステップＦ１）登録情報生成部１０３ａは、登録情報の手動による登録の可否を判定するための登録可否確認画面を表示部１２０に表示させる。登録情報生成部１０３ａは、入力部１３０から入力された操作信号が手動による登録が可能であることを示しているか否かを判定する。登録情報生成部１０３ａが、登録が可能であることを示していると判定した場合（ステップＦ１  ＹＥＳ）、ステップＦ２に進む。登録情報生成部１０３ａが登録できないことを示していると判定した場合（ステップＦ１  ＮＯ）、ステップＦ３に進む。
【００４３】
（ステップＦ２）登録情報生成部１０３ａは、ユーザに登録情報の入力を促すための登録画面（図示せず）を表示部１２０に表示させる。登録情報生成部１０３ａは、登録画面に顔認識部１４２で特定された顔画像範囲内の顔画像と、デバイス２０から受信した機器情報を含める。
登録情報生成部１０３ａは、入力部１３０から入力された操作信号が示す顔情報、名前情報を待ち受ける。入力部１３０から登録情報の登録を指示する操作信号が入力されるとき、登録情報生成部１０３ａは、待ち受けた機器情報と顔画像データと統合して登録情報を人物毎に生成する。登録情報生成部１０３ａは、生成した登録情報を記憶部１１０に記憶する。
（ステップＦ３）登録情報生成部１０３ａは、ユーザに登録情報の登録を完了するか否かを確認するための登録完了確認画面（図示せず）を表示部１２０に表示させる。登録情報生成部１０３ａは、入力部１３０から登録の完了を示す操作信号が入力されたか否かを判定する。登録の完了を示す操作信号が入力されたと判定した場合（ステップＦ３  ＹＥＳ）、ステップＳ５（図３）に進む。登録の継続を示す操作信号が入力された場合（ステップＦ３  ＮＯ）、ステップＦ１に進む。
【００４４】
次に、登録画面の例について説明する。図８は、本実施形態に係る登録画面の一例を示す図である。図８に示す登録画面は、タイトルｒｉ０１、名前情報入力欄ｒｉ０２、顔情報入力欄ｒｉ０３、機器情報一覧ｒｉ０４、顔画像ｒｉ０５、登録ボタンｒｉ０６を含んで構成される。
タイトルｒｉ０１は、「登録画面」との文字列からなるタイトルを示す。名前情報入力欄ｒｉ０２は、当該項目を示す文字「名前：」と、入力部１３０から入力された操作信号に基づいて名前情報を示す文字列が入力可能な領域を含む。顔情報入力欄ｒｉ０３は、当該項目を示す文字「顔情報：」と、入力部１３０から入力された操作信号に基づいて顔情報を示す文字列が入力可能な領域を含む。
【００４５】
機器情報一覧ｒｉ０４は、デバイス２０のそれぞれから受信した機器情報を表示する。機器情報一覧ｒｉ０４は、機器毎の機器情報は、その種別（デバイス）、デバイス名、取得可能値を各行に示す。各行に付された「＋」印は、登録すべき機器情報であることを示す記号である。登録情報生成部１０３ａは、操作信号により「＋」印の位置が指示される度に、その「＋」印の表示、消去を繰り返す。登録情報生成部１０３ａは、「＋」印が表示された行の機器情報を登録すべき機器情報として選択し、「＋」印が消去された行の機器情報を登録すべき機器情報から除外する。
顔画像ｒｉ０５は、顔認識部１４２において認識された顔画像を示す。なお、カメラ１４から入力された画像データに複数の顔認識範囲が含まれる場合には、登録情報生成部１０３ａは、入力部１３０から入力された操作信号に基づいて、複数の顔認識範囲のうち１つの顔認識範囲を選択してもよい。
【００４６】
登録ボタンｒｉ０６は、「登録」との文字列を表し、入力部１３０から入力された操作信号が指示する位置が、登録ボタンｒｉ０６の表示領域に含まれる場合、登録情報生成部１０３ａは、入力された名前情報、顔情報、選択された機器情報、及び顔画像データを含む登録情報を生成する。なお、登録情報において機器情報と顔画像データが含まれていれば、名前情報と顔情報は省略可能である。
【００４７】
図７に示す登録情報生成処理によって登録情報を生成するには、ユーザは、どの人物がどのデバイス２０を装着しているかを確認し、手動で人物毎のデバイス２０を指示する必要がある。そこで、登録情報生成部１０３ａは、図９に示すように、デバイス２０から現在受信した生体情報の一部と過去に受信した生体情報の一部とを比較して、一致又は近似しているか否かを判定する。登録情報生成部１０３ａは、一致又は近似していると判定した生体情報の一部を送信したデバイス２０を特定してもよい。但し、記録制御部１０１ａは、受信した生体情報を記憶部１１０に記憶する際、当該生体情報を送信したデバイス２０の機器情報を対応付けて記憶しておく。
【００４８】
図９は、本実施形態に係る登録情報生成処理の他の例を示すフローチャートである。
図９に示す登録情報生成処理は、図７に示す登録情報生成処理において、さらにステップＨ１〜Ｈ３を有する。
（ステップＨ１）登録情報生成部１０３ａは、画像記録装置１０ａが生体情報を取得したことがあるか否かを判定する。ここで、登録情報生成部１０３ａは、記憶部１１０に生体情報と機器情報とを対応付けて記憶されているか否かを判定する。生体情報を取得したことがあると判定した場合には（ステップＨ１  ＹＥＳ）、ステップＨ２に進む。生体情報を取得したことがないと判定した場合には（ステップＨ１  ＮＯ）、ステップＳ５（図３）に進む。
【００４９】
（ステップＨ２）登録情報生成部１０３ａは、ステップＳ３（図３）において直近に取得した生体情報の一部と、前回受信し記憶部１１０に記憶された生体情報の一部と、を比較する。ここで、登録情報生成部１０３ａは、画像記録装置１０ａの接続開始から終了までの期間を１回と計数する。従って、前回とは、現時点でなされている画像記録装置１０ａとデバイス２０との間の接続が開始される前に、接続していた期間を意味する。比較の際に、登録情報生成部１０３ａは、例えば、直近に取得した生体情報の一部と、記憶部１１０に記憶された生体情報の一部との差分値を算出する。比較に用いる生体情報の一部は、人物間における差異があり時間変動が少ない情報が好ましい。かかる生体情報の一部は、例えば、デバイス２０を人体の上肢部又は下肢部に巻き付け固定するための固定部（バンド等）の長さ、歩幅、足の大きさ、体重、等のいずれか又はそれらの組み合わせであってもよい。デバイス２０は、かかる生体情報の要素を計測し、生体情報の一部として画像記録装置１０に送信する。
【００５０】
（ステップＨ３）登録情報生成部１０３ａは、直近に取得した生体情報の一部と一致又は近似している記憶部１１０に記憶された生体情報の一部があるか否かを判定する。判定の際に、登録情報生成部１０３ａは、例えば、算出した差分値の絶対値が、所定の差分値の閾値よりも小さい場合、一致又は近似していると判定する。生体情報の一部があると判定した場合（ステップＨ３  ＹＥＳ）、一致又は近似していると判定された生体情報の一部と対応付けた機器情報を記憶部１１０から読み取り、ステップＦ２に進む。ステップＦ２では、登録情報生成部１０３ａは、表示部１２０に対して読み取った機器情報を、デバイス２０から受信した機器情報と対応付けて登録画面に表示させる。ないと判定した場合（ステップＨ３  ＮＯ）、ステップＳ５（図３）に進む。
【００５１】
この処理により、登録情報に含まれる機器情報の候補として、直近に生体情報を送信したデバイス２０の機器情報と、前回生体情報を送信したデバイス２０の機器情報とが対応付けて表示される。そのため、人物が装着するデバイス２０が変更された場合において、ユーザは、前回使用していたデバイス２０の存在に気付き、そのデバイス２０に係る登録情報の更新が促される。
また、ステップＦ２では、登録情報生成部１０３ａは、読み取った機器情報を含む登録情報を記憶部１１０から読み取り、読み取った登録情報に含まれる名前情報、顔情報、及び顔画像データを含む登録画面を表示部１２０に表示させてもよい。登録情報生成部１０３ａは、前回使用していたデバイス２０と対応付けた名前情報、顔情報、及び顔画像データを、更新後の登録情報に含めることで、これらの情報を入力又は選択するための作業が軽減される。
【００５２】
なお、一致又は近似しているか否かの判定対象の生体情報の一部は、前回受信した生体情報の一部に限られず、例えば、前々回に受信した生体情報、所定時間前までに受信した生体情報の一部であってもよい。また、登録情報生成部１０３ａが読み取る機器情報は、一致又は近似していると判定された生体情報の一部を受信した時刻から所定時間（例えば、１０秒）内に受信した生体情報に対応付けた機器情報であってもよい。これにより、デバイス２０間で生体情報の種類が異なっても、同一人物が装着を開始もしくは再開することにより同時期に生体情報を送信しているデバイス２０を漏れなく特定することができる。
【００５３】
また、デバイス２０は、周囲の画像を撮影する撮影部と、撮影した画像を示す画像データについて画像認識処理を行って被写体である装着者の顔画像を認識し、認識された装着者が所定の装着者であることを特定する顔認識部を備えてもよい。顔認識部は、撮影した画像を示す画像データから認識された顔画像を示す顔画像データを抽出する。そして、デバイス２０は、所定の装着者であることを特定する場合に、生体情報を計測する。その場合には、登録情報生成部１０３ａは、デバイス２０から生体情報と対応付けて顔画像データを受信し、受信した顔画像データを含む登録情報を生成してもよい。また、登録情報生成部１０３ａは、デバイス２０から生体情報と対応付けて特定した装着者の名前情報を受信し、受信した名前情報を含めて登録情報を生成してもよい。これにより、登録情報の操作に係るユーザの作業が軽減される。
【００５４】
（画像データ記憶処理）
次に、画像データ記録処理について説明する。
図１０は、本実施形態に係る画像データ記録処理を示すフローチャートである。
（ステップＧ１）顔認識部１４２は、カメラ１４から入力された画像データが示す画像が人物の顔を表す顔認識範囲を有するか否かを判定する。顔認識範囲を有すると判定した場合（ステップＧ１  ＹＥＳ）、ステップＧ２に進む。顔認識範囲を有しないと判定した場合（ステップＧ１  ＮＯ）、図１０に示す処理を終了し、ステップＳ１８（図３）に進む。
（ステップＧ２）顔認識部１４２は、記憶部１１０に記憶された登録情報の有無を判定する。登録情報があると判定された場合には（ステップＧ２  ＹＥＳ）、ステップＧ３に進む。登録情報がないと判定された場合には（ステップＧ２  ＮＯ）、顔認識部１４２は、人物の特定に失敗したと判定し、図１０に示す処理を終了し、ステップＳ１８（図３）に進む。
【００５５】
（ステップＧ３）顔認識部１４２は、カメラ１４が撮影した画像内の顔画像と、ある人物に係る登録情報に含まれる顔画像データが示す顔画像とを比較する。ここで、顔認識部１４２は、２つの顔画像間の類似性を示すスコアを算出する。その後、ステップＧ４に進む。
（ステップＧ４）顔認識部１４２は、カメラ１４が撮影した画像内の顔画像と、ある人物に係る登録情報に含まれる顔画像データが示す顔画像とが一致するか否かを判定する。ここで、顔認識部１４２は、算出したスコアが所定のスコアの閾値よりも高いとき、２つの顔画像が一致すると判定し、算出したスコアが所定のスコアの閾値以下であるとき、２つの顔画像が一致しないと判定する。２つの顔画像が一致すると判定された場合には（ステップＧ４  ＹＥＳ）、顔認識部１４２は、比較に用いた登録情報に係る人物を特定し、ステップＧ６に進む。２つの顔画像が一致しないと判定された場合には（ステップＧ４  ＮＯ）、ステップＧ５に進む。
【００５６】
（ステップＧ５）顔認識部１４２は、カメラ１４が撮影した画像内の顔画像と、登録情報に含まれる顔画像データが示す顔画像との比較が完了したか否かを判定する。即ち、顔認識部１４２は、未処理の人物に係る登録情報の有無を判定する。比較が完了したと判定した場合には（ステップＧ５  ＹＥＳ）、人物の特定に失敗したと判定し、図８に示す処理を終了し、ステップＳ１８（図３）に進む。比較が完了していないと判定した場合には（ステップＧ５  ＮＯ）、処理対象の登録情報を別の未処理の人物に係る登録情報に変更し、ステップＧ３に戻る。
【００５７】
（ステップＧ６）記録制御部１０１ａは、特定した人物に係る登録情報に含まれる機器情報が示すデバイス２０を特定する。記録制御部１０１ａは、特定したデバイス２０から取得した生体情報を、顔認識部１４２から入力された撮影情報が示す当該人物の顔認識範囲と対応付ける。
（ステップＧ７）記録制御部１０１ａは、当該人物の顔認識範囲と対応付けた生体情報を、顔認識部１４２から入力された画像データに対応付けて記憶部１１０に記憶する。その後、図８に示す処理を終了し、ステップＳ１８（図３）に進む。
【００５８】
なお、１個の画像データが示す画像に複数の顔認識範囲が含まれる場合には、顔認識部１４２及び記録制御部１０１ａは、個々の顔認識範囲についてステップＧ３−Ｇ７の処理を行う。
また、顔認識部１４２が人物の特定に失敗したと判定した場合には（ステップＧ５  ＹＥＳ）、記録制御部１０１ａは、表示部１２０に対してユーザに登録情報の登録を促すための表示をさせてもよい。また、その場合には、記録制御部１０１ａは、表示部１２０に対してユーザに再度の撮影を促すための表示をさせてもよい。
また、顔認識部１４２が人物の特定に失敗したと判定した場合でも、記録制御部１０１ａは、受信した生体情報を、画像データと対応付けて記憶部１１０に記憶してもよい。受信した生体情報が、画像に表れていない視野範囲外に所在する人物、例えば、撮影者の生体情報である可能性がある。表示制御部１０２は、その生体情報を入力部１３０から入力された操作信号の指示に基づいて、当該生体情報を表示部１２０に表示させてもよい。
【００５９】
なお、上述では、記録制御部１０１ａは、デバイス２０から受信した生体情報を記憶部１１０に記憶する場合を例にしたが、これには限られない。記録制御部１０１ａは、受信した生体情報にその人物の名前情報と画像記録装置１０ａのユーザを識別するユーザ情報とを対応付けてネットワークを介して接続可能なサーバ装置（例えば、ウェブサーバ）に記憶してもよい。当該サーバ装置は、生体情報を、ユーザ情報と名前情報に対応付けて記憶する。その場合、登録情報生成部１０３ａは、サーバ装置に対して、直近に取得した生体情報の一部に対応する生体情報を要求するための要求信号を送信する。サーバ装置は、予め記憶した生体情報から、画像記録装置１０ａから受信した要求信号の一部と一致又は近似する生体情報を選択する。サーバ装置は、選択された生体情報に対応付けられたユーザ情報と名前情報を画像記録装置１０ａに送信する。そして、登録情報生成部１０３ａは、サーバ装置から受信したユーザ情報ならびに名前情報と、直近に取得した生体情報とを含む登録情報を生成してもよい。従って、記憶部１１０が生体情報を保持していない場合であっても、当該サーバ装置で記憶された生体情報が登録情報の生成に用いられる。
【００６０】
（生体情報の例）
次に、画像記録装置１０ａが取得した生体情報の例について説明する。
図１１は、生体情報の例を示す表である。図１１は、人物毎の顔認識範囲に対応付けられた生体情報を各行に示す。各行の生体情報は、それぞれの顔認識範囲内に表された顔の人物と対応付けられておる。例えば、図１１の第２行には、「父親」と、心拍数「９０」、ストレス「なし」、活動量「ＡＡＡ」、歩数「４０００」、及び距離「２０００」と対応付けられている。図１１の第４行には、「子供Ｂ」と、心拍数「８０」、ストレス「なし」、及び活動量「ＤＤＤ」が対応付けられている。「子供Ｂ」について歩数及び距離が空欄であるのは、「子供Ｂ」にデバイス２０として歩数計が装着されていないためである。
表示制御部１０２は、入力部１３０から入力された操作信号が指示する位置を含んだ顔認識範囲に対応する生体情報を記憶部１１０から読み取り、読み取った生体情報を画像データが示す画像に重畳して表示部１２０に表示させる。
【００６１】
（表示例）
次に、本実施形態において表示部１２０に表示される画像の例について説明する。
図１２は、本実施形態において表示される画像の例を示す図である。
図１２（Ａ）に示す画像には、４名の人物の顔ｆｃ２１、ｆｃ２２、ｆｃ２３、ｆｃ２４が表されている。それぞれの人物の顔に外接する破線の四角形は、顔認識範囲ｂｘ２１、ｂｘ２２、ｂｘ２３、ｂｘ２４を示す。また、図１２（Ａ）に示す画像には、環境情報ｐｉ０２が表されている。環境情報ｐｉ０２は、「気温：２６°Ｃ、湿度：６０％、風速：１０ｍ、天気：曇りのち晴れ、東京  ○○山  頂上付近」を示す。そのうち、「東京  ○○山  頂上付近」は、位置情報である。表示制御部１０２は、画像データに対応する環境情報を示す文字列を撮影された画像データに重畳して表示画像データを生成する。表示制御部１０２は、生成した表示画像データに基づく画像を表示部１２０に表示させる。なお、環境情報の表示は、省略されてもよい。
【００６２】
図１２（Ｂ）は、図１２（Ａ）に示す画像に対し、さらにポインタｐｔ２１、ｐｔ２４及び生体情報ｂｉ２１、ｂｉ２４が表示されている。ポインタｐｔ２１、ｐｔ２４は、それぞれ入力部１３０から入力された操作信号が示す位置を示す画像である。生体情報ｂｉ２１は、顔ｆｃ２１に係る人物について測定された生体情報である。生体情報ｂｉ２４は、顔ｆｃ２４に係る人物について測定された生体情報である。図１２（Ｂ）に示す例では、生体情報ｂｉ２１は、心拍数６０回／分、ストレスあり、活動量ＣＣＣ、歩数８０００歩、距離２０００ｍを示す。生体情報ｂｉ２１は、操作信号が示す位置が顔認識範囲ｂｘ２１の範囲内である場合に表示される。生体情報ｂｉ２４は、心拍数９０回／分、ストレスなし、活動量ＡＡＡ、歩数４０００歩、距離２０００ｍを示す。生体情報ｂｉ２４は、操作信号が示す位置が顔認識範囲ｂｘ２４の範囲内である場合に表示される。
【００６３】
図１２（Ｂ）に示す例では、表示制御部１０２は、同時に複数の生体情報を表示部１２０に表示させる場合を例にしているが、一度に１個の生体情報を表示させ、他の生体情報を表示しなくてもよい。その場合、表示制御部１０２は、最も直近に操作信号が示す位置が含まれる顔認識範囲に対応した生体情報を表示部１２０に表示させる。一度に１個の生体情報を表示させることにより、表示部１２０の限られた表示領域を有効に利用することができる。
【００６４】
以上に説明したように、本実施形態に係る画像記録装置１０ａにおいて、ネットワーク通信部１７０は、デバイス２０から当該デバイス２０の機器情報を受信する。また、画像記録装置１０ａは、顔認識部１４２が判定した顔認識範囲内の顔画像と、ネットワーク通信部１７０が受信した機器情報の少なくとも一部とを人物毎に対応付けた登録情報を生成する登録情報生成部１０３ａを備える。
この構成により、人物毎の顔画像とデバイス２０の機器情報を対応した登録情報が生成されるので、記憶部１１０に顔認識範囲と生体情報とを対応付けて記録可能な人物を増やすことができる。そのため、撮影者によらず撮影時の状況を想起させることができる被写体である人物の範囲を拡張することができる。
【００６５】
（第３の実施形態）
次に、本発明の第３実施形態について説明する。上述した実施形態と同一の構成については、同一の符号を付して説明を援用する。
本実施形態に係る画像記録システム１ｂ（図示せず）は、画像記録装置１０ｂと、生体情報取得部２０−１、２０−２を含んで構成される。次に、画像記録装置１０ｂの構成について説明する。
図１３は、本実施形態に係る画像記録装置１０ｂの構成を示すブロック図である。
画像記録装置１０ｂは、制御部１００において表示制御部１０２（図２）に代えて表示制御部１０２ｂを備える。
【００６６】
表示制御部１０２ｂは、表示制御部１０２（図２）と同様に表示画像データを生成する。
表示制御部１０２ｂは、画像データ１１１が表す画像に含まれる顔認識領域に対応付けられた生体情報１１３に、その一部である表情関連生体情報が含まれる場合には、表情関連生体情報が示す身体の状態を判定する。表情関連生体情報は、人物の表情に関連する生体情報である。表示制御部１０２ｂは、判定した身体の状態に対応付けた表情画像データを記憶部１１０から読み取る。表示制御部１０２ｂは、撮影情報１１４を参照して当該表情関連生体情報に対応する人物の顔認識範囲を特定する。表示制御部１０２ｂは、読み取った表情画像データが示す表情画像を、表示画像において特定した顔認識範囲に重畳し、重畳した表示画像を示す表示画像データを新たに生成する。表示制御部１０２ｂは、新たに生成した表示画像データを表示部１２０に出力し、当該表示画像データが示す表示画像を表示させる。
【００６７】
記憶部１１０には、身体の状態を示す身体情報と対応付けて表情画像データを予め記憶しておく。表情画像データは、当該身体の状態において典型的に表れる表情を示す表情画像を示すデータである。例えば、身体の状態として「ストレスあり」を示す身体情報と対応付けて、「怒り」を表す表情画像データを記憶させておく。身体の状態として所定の閾値よりも多い歩数を示す身体情報と対応付けて、「汗」を表す表情画像データを記憶させておく。なお、表情関連生体情報が示す身体の状態の度合いによって異なる表情画像データを対応付けて記憶させておいてもよい。例えば、歩数が多いほど、著しく発汗した「汗」を表す表示画像データが対応付けられてもよい。
【００６８】
次に、表示制御部１０２ｂが行う表示制御処理について説明する。
図１４は、本実施形態に係る表示制御処理を示すフローチャートである。
表示制御部１０２ｂは、図１４に示す処理は、撮像した画像を表示させる際に（ステップＳ１８、図３）行う。また、図１４に示す処理は、生体情報としてストレスの有無、及び歩数に応じた表情画像の重畳の要否や、重畳すべき表情画像を選択する場合を例にする。
【００６９】
（ステップＩ１）表示制御部１０２ｂは、画像データ１１１が表す画像に含まれる顔認識範囲に対応付けられた生体情報１１３がストレス「あり」を示す情報を含むか否かを判定する。含むと判定した場合（ステップＩ１  ＹＥＳ）、ステップＩ２に進む。含まないと判定した場合（ステップＩ１  ＮＯ）、ステップＩ３に進む。
（ステップＩ２）表示制御部１０２ｂは、ストレス「あり」に対応付けられた「怒り」を示す表情画像データを記憶部１１０から読み取る。表示制御部１０２ｂは、読み取った表情画像データが示す表情画像（怒りマーク）を該当する顔認識範囲に重畳して表示部１２０に表示させる。
【００７０】
（ステップＩ３）表示制御部１０２ｂは、当該顔認識範囲に対応付けられた生体情報１１３が歩数情報を含むか否かを判定する。含むと判定した場合であって、歩数が所定の歩数の閾値ＮＡ（例えば、７０００歩）よりも多い場合には（ステップＩ３  ＹＥＳ、歩数＞ＮＡ）、ステップＩ４に進む。含むと判定した場合であって、歩数が所定の歩数の閾値ＮＢ（例えば、４０００歩）よりも多く、閾値ＮＡ以下である場合には（ステップＩ３  ＹＥＳ、歩数＞ＮＢ）、ステップＩ５に進む。それ以外の場合には（ステップＩ３  ＮＯ）、ステップＩ６に進む。
【００７１】
（ステップＩ４）表示制御部１０２ｂは、閾値ＮＡよりも多い歩数に対応付けられた「汗」を示す表情画像データを記憶部１１０から読み取る。表示制御部１０２ｂは、読み取った表情画像データが示す表情画像（汗マークＡ）を該当する顔認識範囲に重畳して表示部１２０に表示させる。
（ステップＩ５）表示制御部１０２ｂは、閾値ＮＢよりも多く閾値ＮＡ以下の歩数に対応付けられた「汗」を示す表情画像データを記憶部１１０から読み取る。表示制御部１０２ｂは、読み取った表情画像データが示す表情画像（汗マークＢ）を該当する顔認識範囲に重畳して表示部１２０に表示させる。
【００７２】
（ステップＩ６）表示制御部１０２ｂは、画像データ１１１が表す画像に含まれる全ての顔認識範囲について処理を完了したか否かを判定する。完了したと判定した場合には、図１４に示す処理を終了する。完了していないと判定していない場合には、処理対象の顔認識範囲を変更して、ステップＩ１に戻る。
【００７３】
（表示例）
次に、本実施形態において表示部１２０に表示される画像の例について説明する。
図１５は、本実施形態において表示される画像の例を示す図である。
図１５に示す画像は、図１２（Ａ）に示す画像に、３つの表情画像ｍｋ２１ａ、ｍｋ２１ｂ、ｍｋ２４が重畳されている。表情画像ｍｋ２１ａは、顔ｆｃ２１に係る人物（子供Ａ）の生体情報が示す歩数（８０００歩）が、歩数ＮＡ（７０００歩）よりも大きいことに応じて重畳された表情画像（汗マークＡ）である。表情画像ｍｋ２１ｂは、顔ｆｃ２１に係る人物（子供Ａ）の生体情報が示すストレス情報（ストレスあり）に応じて重畳された表情画像（怒りマーク）である。表情画像ｍｋ２４は、顔ｆｃ２４に係る人物（父親）の生体情報が示す歩数（５０００歩）が、歩数ＮＢ（４０００歩）より多く、ＮＡ以下であることに応じて重畳された表情画像（汗マークＢ）である。なお、図１５に示す例では、図５に示す例とは異なり顔認識範囲ｂｘ０１の外枠線が省略されている。
【００７４】
なお、表示制御部１０２ｂは、表情画像の押下を検知したとき、検知した表情画像が重畳されている顔認識範囲に対応付けられた生体情報を重畳して表示部１２０に表示させてもよい。ユーザは詳細な生体情報を把握することができるので、ユーザの関心を満足させることができる。
また、身体の状態の判定に用いる生体情報は、人物の表情と関連がある生体情報であればよく、例えば、血圧、体温、であってもよい。表示制御部１０２ｂは、入力部１３０から入力された操作信号の指示により、身体の状態の判定に用いる生体情報が設定可能であってもよい。
【００７５】
以上に説明したように、本実施形態に係る画像記録装置１０ｂにおいて、記憶部１１０は、身体の状態を示す身体情報と当該身体の状態において表れる表情を示す表情画像とを対応付けて記憶する。また、画像記録装置１０ｂは、デバイス２０が受信した生体情報の少なくとも一部（例えば、ストレスの有無、歩数）から身体の状態を判定し、判定した身体の状態に対応する表情画像（例えば、怒りマーク、汗マーク）を記憶部１１０から読み取り、読み取った表情画像を、デバイス２０を装着した人物の顔認識範囲に重畳して表示部１２０に表示させる表示制御部１０２ｂを備える。
この構成により、ユーザは、人物毎に表わされた表情画像を見て、その表情を把握することができるので、各人物の撮影時の身体の状態、等、その表情に関連した状況を容易に想起することができる。
【００７６】
（第４の実施形態）
次に、本発明の第４実施形態について説明する。上述した実施形態と同一の構成については、同一の符号を付して説明を援用する。
本実施形態に係る画像記録システム１ｃ（図示せず）は、画像記録装置１０ｃと、生体情報取得部２０−１、２０−２を含んで構成される。次に、画像記録装置１０ｃの構成について説明する。
図１６は、本実施形態に係る画像記録装置１０ｃの構成を示すブロック図である。
画像記録装置１０ｃは、制御部１００において表示制御部１０２（図２）に代えて表示制御部１０２ｃを備える。
【００７７】
表示制御部１０２ｃは、表示制御部１０２（図２）と同様に表示画像データを生成する。
画像データ１１１に対応付けて記憶部１１０に記憶された撮影情報１１４が示す顔認識領域に対応付けられた生体情報１１３には、定量的な生体情報が含まれる場合がある。その場合には、表示制御部１０２ｃは、顔認識領域（人物）間で当該生体情報の順位を判定する。表示制御部１０２ｃは、判定した順位を示す順位情報を、それぞれの顔認識領域（人物）に対応付けた生体情報に付加して記憶部１１０に記憶する。また、表示制御部１０２ｃは、判定した順位を示す文字（順位表示文字）をそれぞれ該当する顔認識範囲に重畳し、順位表示文字を重畳した表示画像を示す表示画像データを新たに生成する。表示制御部１０２ｃは、新たに生成した表示画像データを表示部１２０に出力し、当該表示画像データが示す表示画像を表示させる。
【００７８】
（生体情報の例）
次に、画像記録装置１０ｃにより順位が付加された生体情報の例について説明する。
図１７は、順位が付加された生体情報の例を示す表である。図１７に示す表は、図１１に示す歩数の順位が人物毎に付加されている。例えば、図１７の第２列において、「父親」と順位「３」、「母親」と順位「２」、「子供Ａ」と順位「３」がそれぞれ対応付けられている。順位「３」、「２」、「１」は、それぞれ「父親」の歩数「４０００」が３番目に多く、「母親」の歩数「５０００」が２番目に多く、「子供Ａ」の歩数が「８０００」が１番目に多いことを示す。「子供Ｂ」について順位が空欄であるのは、「子供Ｂ」について歩数が得られていないので、順位が判定されなかったためである。
【００７９】
（表示例）
次に、本実施形態において表示部１２０に表示される画像の例について説明する。
図１８は、本実施形態において表示される画像の例を示す図である。図１８に示す画像は、図１２（Ａ）に示す画像に、３つの順位表示文字ｒｋ２１、ｒｋ２２、ｒｋ２４が重畳されている。歩数に関する順位であることを示す表題ｔｌ０３「歩数ランキング」が表示画像の上方に重畳して表示されている。順位表示文字ｒｋ２１「１位」は、顔ｆｃ２１に係る人物（子供Ａ）の生体情報が示す歩数（８０００歩）が１番目に多いことを示す。順位表示文字ｒｋ２２「２位」は、顔ｆｃ２２に係る人物（母親）の生体情報が示す歩数（５０００歩）が２番目に多いことを示す。順位表示文字ｒｋ２４「３位」は、顔ｆｃ２４に係る人物（父親）の生体情報が示す歩数（４０００歩）が３番目に多いことを示す。
【００８０】
なお、図１８に示す例では、図５に示す例とは異なり、顔認識範囲の外枠線が省略されている。また、図１２に示す例とは異なり、環境情報の表示が省略されている。表示制御部１０２ｃは、これには限らず、表示部１２０に対して顔認識範囲の外枠線を付加して表示させてもよいし、環境情報を付加して表示させてもよい。
また、表示制御部１０２ｃは、順位表示文字の押下を検知したとき、検知した順位表示文字が重畳された顔認識範囲に対応付けられた生体情報を、表示画像に重畳して表示部１２０に表示させてもよい。ユーザは詳細な生体情報を把握することができるので、ユーザの関心を満足させることができる。
【００８１】
なお、順位を判定すべき生体情報は、定量的に比較可能な生体情報であればよく、例えば、歩数の他、心拍数、活動量、等であってもよい。表示制御部１０２ｃは、入力部１３０から入力された操作信号に応じて、順位を判定させるべき生体情報の種類が設定可能であってもよい。
【００８２】
以上に説明したように、本実施形態に係る画像記録装置１０ｃは、デバイス２０から受信した生体情報の少なくとも一部（例えば、歩数）について人物間の順位を判定し、判定した順位を示す文字を、デバイス２０を装着した人物の顔認識範囲に重畳して表示部１２０に表示させる表示制御部１０２ｃを備える。
この構成により、ユーザは、人物毎に表わされた順位を示す文字を見て、撮影時の環境による生体情報の度合いを人物間で比較することができる。この比較により、ユーザは、撮影時の状況を想起することができる。例えば、表示制御部１０２ｃは、お化け屋敷や遊園地等の娯楽施設において撮影した人物の画像に測定された心拍数の順位を表示させることで、ユーザは、娯楽施設における演出に動揺した度合いを人物間で比較することができる。また、表示制御部１０２ｃは、サッカーをはじめとする競技の終了後に撮影した人物の画像に測定した活動量の順位を表示させることで、ユーザは、競技による動きの量を人物間で比較することができる。
【００８３】
なお、本発明は上述した各実施形態に限定されるものではなく、種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的構成を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。例えば、画像記録装置１０ｂ、１０ｃは、登録情報生成部１０３ａを備えてもよい。また、画像記録装置１０ｃは、表示制御部１０２ｃの他に、表示制御部１０２ｂを備えてもよい。
【００８４】
また、本発明の各構成要素は、任意に取捨選択することができ、取捨選択した構成を具備する発明も本発明に含まれるものである。
例えば、表示部１２０、入力部１３０、及びカメラ１４の一部又は全部は、画像記録装置１０、１０ａ、１０ｂ、１０ｃとの間で各種のデータを送受信できれば、画像記録装置１０、１０ａ、１０ｂ、１０ｃとは別体であってもよい。
【００８５】
また、上述した実施形態における画像記録装置１０、１０ａ、１０ｂ、１０ｃの一部、例えば、制御部１００、をコンピュータで実現するようにしてもよい。その場合、制御プログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。なお、ここでいう「コンピュータシステム」とは、認識データ伝送装置に内蔵されたコンピュータシステムであって、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
また、上述した実施形態における認識データ伝送装置の一部、または全部を、ＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ）等の集積回路として実現してもよい。認識データ伝送装置の各機能ブロックは個別にプロセッサ化してもよいし、一部、または全部を集積してプロセッサ化してもよい。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。
【００８６】
なお、本発明は次の態様でも実施することができる。
（１）生体情報取得部から生体情報を受信する通信部と、顔画像及び前記生体情報取得部の機器情報を対応付けた登録情報を人物毎に記憶する記憶部と、撮影部が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と前記記憶部に記憶された顔画像に基づいて人物を特定する認識部と、前記記憶部に記憶された機器情報に基づいて前記認識部が特定した人物の生体情報取得部を特定し、前記撮影部が撮像した画像を、特定した生体情報取得部から受信した生体情報を前記認識部が判定した顔認識範囲と対応付けて前記記憶部に記憶する記録制御部と、を備える画像記録装置。
【００８７】
（２）前記通信部は、前記生体情報取得部から当該生体情報取得部の機器情報を受信し、前記認識部が判定した顔認識範囲内の顔画像と、前記通信部が受信した機器情報の少なくとも一部とを人物毎に対応付けた登録情報を生成する登録情報生成部と、を備える（１）の画像記録装置。
【００８８】
（３）表示部が表示する情報を指示する入力部と、前記記憶部に記憶した画像を表示部に表示させ、表示させた画像の顔認識範囲内の位置を前記入力部が指示したとき、当該顔認識範囲に対応づけて記憶された生体情報を表示部に表示させる表示制御部と、を備える（１）または（２）の画像記録装置。
【００８９】
（４）前記記憶部は、身体の状態を示す身体情報と当該身体の状態において表れる表情を示す表情画像とを対応付けて記憶し、前記生体情報取得部が受信した生体情報の少なくとも一部から身体の状態を判定し、判定した身体の状態に対応する表情画像を前記記憶部から読み取り、読み取った表情画像を、前記生体情報取得部を装着した人物の顔認識範囲に重畳して表示部に表示させる表示制御部と、を備える（１）から（３）のいずれかに記載の画像記録装置。
【００９０】
（５）前記生体情報取得部から受信した生体情報の少なくとも一部について人物間の順位を判定し、判定した順位を示す文字を、前記生体情報取得部を装着した人物の顔認識範囲に重畳して表示部に表示させる表示制御部と、を備える（１）から（４）のいずれかに記載の画像記録装置。
【００９１】
（６）人物の生体情報を計測する生体情報取得部と画像記録装置とを備える画像記録システムであって、前記生体情報取得部は、前記生体情報を前記画像記録装置に送信し、前記画像記録装置は、前記生体情報取得部から生体情報を受信する通信部と、顔画像及び前記生体情報取得部の機器情報を対応付けた登録情報を人物毎に記憶する記憶部と、撮影部が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と前記記憶部に記憶された顔画像に基づいて人物を特定する認識部と、前記記憶部に記憶された機器情報に基づいて前記認識部が特定した人物の生体情報取得部を特定し、前記撮影部が撮像した画像を、特定した生体情報取得部から受信した生体情報を前記認識部が判定した顔認識範囲と対応付けて前記記憶部に記憶する記録制御部と、を備える画像記録システム。
【００９２】
（７）生体情報取得部から生体情報を受信する通信過程と、撮影部が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と、顔画像及び前記生体情報取得部の機器情報を対応付けた登録情報を人物毎に記憶する記憶部に記憶された顔画像に基づいて人物を特定する認識過程と、前記記憶部に記憶された機器情報に基づいて前記認識過程で特定された人物の生体情報取得部を特定し、前記撮影部が撮像した画像を、特定した生体情報取得部から受信した生体情報を前記認識過程で判定された顔認識範囲と対応付けて前記記憶部に記憶する記録制御過程と、を有する画像記録方法。
【００９３】
（８）コンピュータに、生体情報取得部から生体情報を受信する通信手順、撮影部が撮影した画像から人物の顔を表す顔認識範囲を判定し、判定した顔認識範囲内の画像と、顔画像及び前記生体情報取得部の機器情報を対応付けた登録情報を人物毎に記憶する記憶部に記憶された顔画像に基づいて人物を特定する認識手順、前記記憶部に記憶された機器情報に基づいて前記認識手順で特定された人物の生体情報取得部を特定し、前記撮影部が撮像した画像を、特定した生体情報取得部から受信した生体情報を前記認識手順で判定された顔認識範囲と対応付けて前記記憶部に記憶する記録制御手順、を実行させるための画像記録プログラム。
【符号の説明】
【００９４】
１、１ａ、１ｂ、１ｃ…画像記録システム、１０、１０ａ、１０ｂ、１０ｃ…画像記録装置、１００…制御部、１０１、１０１ａ…記録制御部、１０２、１０２ｂ、１０２ｃ…表示制御部、１０３ａ…登録情報生成部、１１０…記憶部、１２０…表示部、１３０…入力部、１４０…カメラ機能部、１４１…シャッター検知部、１４２…顔認識部、１５０…環境情報センサ、１６０…ＧＰＳセンサ、１７０…ネットワーク通信部、１４…カメラ、１７…アンテナ、２０（２０−１、２０−２）…生体情報取得部（デバイス）、２１−１、２１−２…活動量計、２２−１、２２−２…心拍計、２３−１、２３−２…歩数計
【図１】
0006379424.tif 000002
【図２】
0006379424.tif 000003
【図３】
0006379424.tif 000004
【図４】
0006379424.tif 000005
【図５】
0006379424.tif 000006
【図６】
0006379424.tif 000007
【図７】
0006379424.tif 000008
【図８】
0006379424.tif 000009
【図９】
0006379424.tif 000010
【図１０】
0006379424.tif 000011
【図１１】
0006379424.tif 000012
【図１２】
0006379424.tif 000013
【図１３】
0006379424.tif 000014
【図１４】
0006379424.tif 000015
【図１５】
0006379424.tif 000016
【図１６】
0006379424.tif 000017
【図１７】
0006379424.tif 000018
【図１８】
0006379424.tif 000019