(57)【要約】【課題】料理レシピや組み立て手順などの情報を使い勝手よく提供すること。【解決手段】電子機器１は、被写体を撮像する撮像部２８と、撮像した被写体に関連した情報を出力する出力部４６と、出力部４６が出力した情報への応答である音声を認識する音声認識部３４と、音声認識部３４による認識に応じて撮像とは異なる操作を制御する制御部２０とを備える。【選択図】図３
2012108282.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像する撮像部と、
撮像した前記被写体に関連した情報を出力する出力部と、
前記出力部が出力した情報への応答である音声を認識する音声認識部と、
前記音声認識部による認識に応じて前記撮像とは異なる操作を制御する制御部と、
を備えたことを特徴とする電子機器。
【請求項２】
被写体を撮像する撮像部と、
撮像した前記被写体に関連した情報を出力する出力部と、
前記出力部が出力した情報への応答を前記撮像部で撮像された画像に基づいて判断する判断部と、
前記判断部による判断に応じて前記撮像および前記撮像とは異なる操作を制御する制御部と、
を備えたことを特徴とする電子機器。
【請求項３】
請求項２に記載の電子機器において、
前記出力部が出力した情報への応答である音声を認識する音声認識部を備え、
前記制御部は、前記音声認識部による認識に応じて前記撮像とは異なる操作を制御することを特徴とする電子機器。
【請求項４】
請求項１または３に記載の電子機器において、
前記撮像部による撮像指示を受け付ける操作部材を備え、
前記出力部は、画像を投射する投射部を有し、
前記制御部はさらに、前記投射部の投射動作に関連して、前記操作部材からの撮影指示なしに前記撮像部に撮像を行わせることを特徴とする電子機器。
【請求項５】
請求項４に記載の電子機器において、
前記制御部は、前記音声認識部による認識に応じて前記撮像部に撮像を行わせることを特徴とする電子機器。
【請求項６】
請求項５に記載の電子機器において、
前記制御部は、前記音声認識部が前記投射部の投射した画像に関連した音声を認識した際に前記撮像部に撮像を行わせることを特徴とする電子機器。
【請求項７】
請求項６に記載の電子機器において、
前記出力部は、前記被写体に関連した表示を行う表示部と、前記被写体に関連した音声を発生する音声出力部の少なくとも一方を備えることを特徴とする電子機器。
【請求項８】
請求項７に記載の電子機器において、
前記音声認識部による認識に応じて、時間を計時する計時部を備えることを特徴とする電子機器。
【請求項９】
請求項８に記載の電子機器において、
前記出力部は、前記計時部の出力に応じて、前記被写体に関連した情報を変更することを特徴とする電子機器。
【請求項１０】
請求項９に記載の電子機器において、
前記撮像部は所定の部材を撮像し、
前記出力部は、前記部材を用いた作業手順を示す情報を出力することを特徴とする電子機器。
【請求項１１】
請求項１０に記載の電子機器において、
前記部材に関する情報を取得する情報取得部を備えることを特徴とする電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器に関する。
【背景技術】
【０００２】
食材を撮影して自動的にレシピを作成し、作成したレシピを背面液晶表示部に表示するカメラ（自動レシピ作成装置）が提案されている。このカメラは、ＧＰＳおよびデートモジュールを有し、ＧＰＳにより検出した地理的位置情報や、デートモジュールにより検出した季節の情報などを考慮してレシピを作成することが開示されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−６１３８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来のカメラでは、背面の操作スイッチの操作が煩わしいなど、ユーザーインターフェースの使い勝手が十分ではないという問題があった。
【課題を解決するための手段】
【０００５】
本発明による電子機器は、被写体を撮像する撮像部と、撮像した被写体に関連した情報を出力する出力部と、出力部が出力した情報への応答である音声を認識する音声認識部と、音声認識部による認識に応じて撮像とは異なる操作を制御する制御部と、を備えたことを特徴とする。
【発明の効果】
【０００６】
本発明の電子機器によれば、たとえば料理レシピや組み立て手順などの情報を使い勝手よく提供できる。
【図面の簡単な説明】
【０００７】
【図１】本発明の一実施の形態によるデジタルカメラの正面図である。
【図２】本発明の一実施の形態によるデジタルカメラの背面図である。
【図３】デジタルカメラの構成を例示するブロック図である。
【図４】ＣＰＵが実行するレシピ情報提供処理の流れを説明するフローチャートである。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明を実施するための形態について説明する。図１は、本発明の一実施の形態によるデジタルカメラ１の外観を例示する正面図である。図２は、デジタルカメラ１の外観を例示する背面図である。図１において、デジタルカメラ１の筐体内には撮影ユニット２８とプロジェクタユニット４６とが設けられている。プロジェクタユニット４６は撮影ユニット２８の図示左側に配置されており、デジタルカメラ１の筐体前面に設けられている投射窓４６ａからカメラ前方のスクリーンや壁などに向けて投射光が射出される。デジタルカメラ１から画像投射を行う場合には、デジタルカメラ１は不図示の机上やクレードルなどに載置される。
【０００９】
図２において、デジタルカメラ１の筐体背面には、液晶モニター３６、操作メニューボタン１１２、ロータリーマルチセレクター１１４、ズームレバー１１１および操作ボタン１１３Ａ〜１１３Ｃが配置されている。液晶モニター３６の表示面上には、不図示のタッチパネル操作部材が設けられている。操作ボタン１１３Ａは、液晶モニター３６に画像を再生表示する再生モードにおいて、メモリカードＭＣに記録されている画像データの削除指示を受け付ける操作部材として機能する。
【００１０】
操作ボタン１１３Ｂは、デジタルカメラ１が撮影ユニット２８によって撮影画像を取得する撮影モードと、上記再生モードとの切替え指示を受け付ける操作部材として機能する。また、プロジェクタユニット４６により画像の投射を行うモード（以下、ＰＪモードと呼ぶ）においては、操作ボタン１１３Ｂは色調整指示を受け付ける操作部材として機能する。
【００１１】
操作ボタン１１３Ｃは、撮影モードにおいて人物撮影に適したモード（人物を浮き立たせて立体感のある画像を取得するモードであり、以下、フェイスクリアモードと呼ぶ）にセットする指示を受け付ける操作部材として機能する。また、ＰＪモードにおいては、操作ボタン１１３Ｃは投射像の台形補正指示を受け付ける操作部材として機能する。
【００１２】
デジタルカメラ１の筐体上面には、レリーズスイッチであるシャッターボタン１１、ＰＪボタン１３、電源スイッチ１４が設けられている。シャッターボタン１１は、撮影モードにおいて撮影ユニット２８による撮影の指示を受け付ける操作部材として機能する。ＰＪボタン１３は、撮影モードまたは再生モードと、ＰＪモードとの切替え指示を受け付ける操作部材として機能する。デジタルカメラ１は、電源スイッチ１４がオン操作されると撮影モードで起動し、操作ボタン１１３Ｂが押下されると再生モードに切替わる。撮影モードまたは再生モードの状態でＰＪボタン１３が押下されるとＰＪモードに切替わる。ＰＪモードの状態で再度ＰＪボタン１３が押下されると、撮影モードまたは再生モード（ＰＪモードへ切替わる前に設定されていたモード）に戻る。
【００１３】
ロータリーマルチセレクター１１４は、外周部１１４ａ、回転部１１４ｂ、ＯＫボタン１１４ｃから構成される。外周部１１４ａの上下方向や左右方向に押下操作された場合、および回転部１１４ｂが回転操作された場合に、液晶モニター３６に表示されている操作メニュー画面の中で選択する項目や画像を切替る。ＯＫボタン１１４ｃが押下操作されると、その時点における項目や画像の選択内容を確定する。
【００１４】
図３は、デジタルカメラ１の構成を例示するブロック図である。デジタルカメラ１には、上述した撮影ユニット２８、液晶モニター３６の他に、ＣＰＵ２０、操作部材２２、顔認識部２４、カレンダ部２６、マイク３０、情報取得部３１、画像処理部３２、音声認識部３４、ＤＢ部４０、ＧＰＳ部４２、プロジェクタユニット４６、スピーカ４８などを備える。
【００１５】
撮影ユニット２８は、撮影レンズ１００（複数のレンズ群から構成される）、レンズシャッター部（不図示）、および撮像素子（不図示）を有する。撮像素子は、上記撮影レンズ１００とレンズシャッター部とを透過した光束を撮像する。画像処理部３２は、信号変換処理、圧縮・伸張処理、モニタ表示回路などを含み、撮像ユニット２８で撮像された画像を画像処理する。
【００１６】
液晶モニター３６は、画像処理部３２によって処理された画像や操作メニューなどを表示する。操作メニューを液晶モニター３６にて表示中にタッチパネル操作部材（不図示）が操作された場合、タッチパネル操作部材はタッチ位置を示す信号をＣＰＵ２０へ出力する。これにより、ＣＰＵ２０は液晶モニター３６に表示中の操作メニューのうち、タッチ位置に対応する項目を選択する。
【００１７】
操作部２２は、上述したシャッターボタン１１、ＰＪボタン１３、電源スイッチ１４、操作ボタン１１３Ａ〜１１３Ｃ、ロータリーマルチセレクター１１４を含み、各操作に応じた操作信号をＣＰＵ２０へ送出する。
【００１８】
顔認識部２４は、撮影ユニット２８によって取得された人物の顔の画像データを個人情報（名前、性別、年齢、グルーピング等）とともに記憶する不揮発性メモリ（不図示）を有する。カレンダ部２６は、たとえば計時用集積回路を有し、該計時用集積回路が生成した日時情報を取得してＣＰＵ２０へ送出する。カレンダ部２６から異なる時刻に取得した日時情報の時間差を求めることにより、カレンダ部２６をタイマーとして機能させることもできる。
【００１９】
マイク３０は、集音した音声を電気信号に変換し、変換後の音声データを音声認識部３４へ送出する。音声認識部３４は、料理メニューに関する単語の音声データを記憶する不揮発性メモリ（不図示）を有する。音声認識部３４は、マイク３０を介して集音された音声信号と不揮発性メモリ内に記憶している音声データとを比較し、両者が一致した場合に対応する単語を示す情報をＣＰＵ２０へ送出する。音声認識部３４はさらに、料理メニューに関する単語の他に、「上」、「下」、「次」、「戻る」、「タイマー＊＊分」、「タイマー開始」、「撮影」、「家族」、「友人」などの音声データも不揮発性メモリ（不図示）に記憶している。
【００２０】
ＧＰＳ部４２は、ＧＰＳ衛星からの電波を受信し、受信データに基づいて経度、緯度、高度情報を検出してＣＰＵ２０へ送出する。フラッシュＲＯＭ２９は、画像処理部３２で処理された画像を記憶する。フラッシュＲＯＭ２９には、地図情報も記憶されている。ＣＰＵ２０は、ＧＰＳ部４２で検出された情報とフラッシュＲＯＭ２９に記憶される地図情報とに基づいて現在位置の情報を取得する。
【００２１】
情報取得部３１は、無線ＬＡＮなどのネットワーク接続部と、イベント情報をネットワーク上から取得するためのプログラムとから構成される。本実施の形態においては、たとえば、キャンプ場などの外出先において料理のレシピに登場する食材がない場合に、ＧＰＳ部４２で取得された現在位置の情報と連携して当該食材を販売する最寄りの店舗の情報を取得する。なお、情報取得部３１は、ネットワークに接続する構成の代わりに、あらかじめフラッシュＲＯＭ２９に記憶させデータベースにアクセス可能に構成したものでもよい。
【００２２】
ＤＢ部４０は、食材ＤＢ４０ａ、メニュー紹介ＤＢ４０ｂ、およびレシピ紹介ＤＢ４０ｃを有するデータベースである。食材ＤＢ４０ａは、あらかじめ様々な食材のデータ（画像データおよび栄養情報を含む）が記憶された不揮発性メモリ（不図示）を有する。画像データは、加工前（たとえば切る前のトマト）、および加工後（切った後のトマト）のそれぞれの画像データを含む。
【００２３】
食材ＤＢ４０ａは、食材認識機能を備える。撮影ユニット２８によって取得された食材の画像データを食材ＤＢ４０ａ内の不揮発性メモリ内に記憶している食材のデータと比較し（公知のパターンマッチング処理）、両者が一致した場合に対応する食材に関する情報をＣＰＵ２０へ送出する。一般に、加工された食材は識別が困難な場合がある。たとえば、じゃがいもを切った状態では、男爵いもとメークインとが紛らわしい。この場合の食材ＤＢ４０ａは、男爵いもとメークインとの双方の情報をＣＰＵ２０へ送出する。ＣＰＵ２０は、男爵いもとメークインとの双方の情報を液晶モニター３６に表示させて、ユーザーによるロータリーマルチセレクター１１４またはタッチパネル操作部材（不図示）への選択操作を待つ。なお、上述した音声認識部３４を用いた音声認識を用いた選択操作を待つようにしてもよい。
【００２４】
食材ＤＢ４０ａが男爵いもとメークインとを識別する理由は、以下の通りである。メークインは煮くずれしにくいのでシチューや肉じゃがに向いている一方で、男爵いもは煮くずれしやすいのでコロッケやサラダに向いている。このため、男爵いもを認識した場合とメークインを認識した場合とで異なる料理メニューを紹介するためである。
【００２５】
メニュー紹介ＤＢ４０ｂは、あらかじめ様々なジャンルの料理メニューデータが記憶された不揮発性メモリ（不図示）を有する。メニュー紹介ＤＢ４０ｂは、食材ＤＢ４０ａによって認識された食材を用いて調理する料理メニューを抽出し、抽出した料理メニューの情報をＣＰＵ２０へ送出する。ＣＰＵ２０は、抽出した複数の料理メニュー情報を液晶モニター３６に表示させて、ユーザーによるロータリーマルチセレクター１１４またはタッチパネル操作部材（不図示）への選択操作を待つ。なお、上述した音声認識部３４を用いた音声認識を用いた選択操作を待つようにしてもよい。
【００２６】
レシピ紹介ＤＢ４０ｃは、あらかじめメニュー紹介ＤＢ４０ｂに記憶されている各料理メニューのレシピや詳細情報（カロリーや栄養を示す情報、食材等の分量を示す情報、画像データや音声ガイダンスデータ）が記憶された不揮発性メモリ（不図示）を有する。レシピ紹介ＤＢ４０ｃは、液晶モニター３６に表示させた複数の料理メニュー情報のうち、ユーザーによる選択操作で選択された料理メニューのレシピ情報を液晶モニター３６に表示させる画像と音声ガイダンスとで紹介する。なお、液晶モニター３６に表示させる代わりに、プロジェクタユニット４６から投射させてもよい。
【００２７】
スピーカ４８は、音声ガイダンスデータに基づく音声を再生したり、ビープ音を発生させたりする。ビープ音は、たとえば、料理のレシピにおける茹で時間が１０分の場合に、カレンダ部２６で１０分が計時されたことをユーザーに知らせるために発生させる。
【００２８】
メモリカードＭＣは、デジタルカメラ１に対して着脱可能に構成されるデータ記憶媒体である。デジタルカメラ１がレシピ情報を提供する場合、ＣＰＵ２０は、提供日時（開始時刻および終了時刻を含む）や提供場所（ＧＰＳ部４２で取得された現在位置の情報）、レシピを提供した料理メニュー情報をログデータとしてメモリカードＭＣに記憶させる。なお、提供したレシピ情報も含めて記憶するようにしてもよい。
【００２９】
ＣＰＵ２０は、デジタルカメラ１の全体の動作を制御する。本実施形態は、デジタルカメラ１を用いてレシピ情報を提供する点に特徴を有するので、以降の説明はレシピ情報を提供する動作を中心に行う。
【００３０】
＜事前準備＞
デジタルカメラ１には、あらかじめ人物の情報（人物の名称またはＩＤと、当該人物の「顔」を示す情報など）や、当該人物が好きな食べ物の情報がメモリカードＭＣに登録（記憶）される。登録した人物を、たとえば、家族や所属チーム等によって関連づけてグループ化しておくことにより、メニュー紹介ＤＢ４０ｂが料理メニューを抽出する際、グループのメンバーが好きな料理メニューを優先して抽出し得るように構成する。
【００３１】
ここで、人物の登録データをフラッシュＲＯＭ２９内に記憶させる（登録）処理について説明する。ＣＰＵ２０は、たとえば、液晶モニター３６に表示中の「操作メニュー画面」において「登録撮影」項目を選択した状態でロータリーマルチセレクター１１４の外周部１１４ａが右方向に押下操作される、またはタッチパネル操作部材（不図示）がタッチ操作されると、登録処理を行うためのプログラムを起動する。
【００３２】
登録プログラムを起動したＣＰＵ２０は、撮影ユニット２８によって取得されたモニタ用のライブビュー画像を液晶モニター３６に表示させるとともに、ライブビュー画像表示に重ねてアシスト枠（不図示）を表示させる。ユーザーは、登録しようとする被写体人物の顔がアシスト枠に収まるようにデジタルカメラ１を構える。
【００３３】
ＣＰＵ２０は、シャッターボタン１１が全押し操作された場合に撮影処理を行う。そして、撮影処理で取得した画像データが顔識別に使えるか否かを判定する。ＣＰＵ２０は、画像データのうちアシスト枠内に対応するデータに基づいて顔検出処理を行い、顔を検出した場合には当該顔が登録されている顔か否かを判定する。具体的には、検出した顔の領域の画像データと、フラッシュＲＯＭ２９内に登録されているサムネイル画像の「顔」に対応する参照用データとに基づいて顔識別処理を行うことにより、検出されている人物の顔と、参照用データに含まれている人物の顔とが同一人物のものであるか否かを識別する。
【００３４】
ＣＰＵ２０は、取得画像の「顔」が既に登録されている参照用データと合致する場合には液晶モニター３６に、たとえば、「既に登録されています」と表示させる。登録されている参照用データと合致しない場合には新たな人物の「顔」として参照用データをフラッシュＲＯＭ２９に記憶させる。具体的には、アシスト枠内に対応する画像データに基づいてサムネイル画像データを生成し、上記画像データに基づいて特徴量データを生成する。そして、サムネイル画像データおよび特徴量データを含む参照用データをフラッシュＲＯＭ２９に記憶させる。
【００３５】
ユーザーは、液晶モニター３６に被写体人物の「顔」が表示されている状態で、マイク３０から上記登録する人物が好きな料理メニューや食材の名称をマイク３０から音声入力する。ユーザーはさらに、グループ化（グルーピング）のための情報（たとえば、「家族」、「友人」、「親戚」、「クラス」など）をマイク３０から音声入力する。ＣＰＵ２０は、電気信号に変換後の音声データを上記参照用データに関連づけてフラッシュＲＯＭ２９に記憶させる。これにより、登録人物を「家族」または「友人」などに分けてグルーピングするとともに、登録人物ごとに、たとえば、好きな食べ物として「和食・イタリアン」などの情報を登録できる。なお、苦手な料理メニューや食材の情報を登録してもよい。
【００３６】
上述した音声入力に代えて、液晶モニター３６にグルーピングメニュー（たとえば、「家族」、「友人」、「親戚」、「学校」、「クラブ」など）を表示させて、ユーザーがロータリーマルチセレクター１１４の外周部１１４ａを押下操作、またはタッチパネル操作部材（不図示）をタッチ操作した場合に、該当するグループに被写体人物を登録するように構成してもよい。さらに、液晶モニター３６に料理メニューや食材の名称を表示させて、ユーザーがロータリーマルチセレクター１１４の外周部１１４ａを押下操作、またはタッチパネル操作部材（不図示）をタッチ操作した場合に、該当する料理メニューや食材を登録人物に関連づけて登録するように構成してもよい。以上説明したように、デジタルカメラ１に事前の準備として人物、および当該人物が好む料理メニュー等が登録される。
【００３７】
＜レシピ提供処理＞
図４は、上述した事前準備が行われたＣＰＵ２０が実行するレシピ情報提供処理の流れを説明するフローチャートである。ＣＰＵ２０は、操作メニュー画面においてユーザーがロータリーマルチセレクター１１４の外周部１１４ａ、またはタッチパネル操作部材（不図示）を操作することによってレシピ情報の提供処理を実行するように指示された場合に、図４による処理を起動する。
【００３８】
図４による処理を起動するＣＰＵ２０は、音声認識部３４による認識動作を有効にするとともに、液晶モニター３６に表示する情報をプロジェクタユニット４６によって壁などに投射するように切替え制御する。これにより、ユーザーがシャッターボタン１１を操作することなしに音声で撮影を指示したり、ユーザーがロータリーマルチセレクター１１４の外周部１１４ａやタッチパネル操作部材（不図示）を操作することなしに音声で操作メニュー選択指示が行える。
【００３９】
図４のステップＳ１において、ＣＰＵ２０は食材認識を行う。たとえば、ユーザーが１７時に夕食の料理メニューを決定する場合を例に説明する。食材として「えび」と「しめじ」と「トマト」を有するユーザーは、これらの食材をデジタルカメラ１の撮影レンズ１００の前にかざし（デジタルカメラ１の前に載置してもよい）、マイク３０に向かって「撮影」と発声する。
【００４０】
ＣＰＵ２０は、音声認識部３４から「撮影」を示す情報を受けると、撮影ユニット２８に撮影開始を指示する。なお、シャッターボタン１１が押下操作された場合にも撮影ユニット２８に撮影開始を指示する。ＣＰＵ２０は、食材ＤＢ４０ａへ指示を送り、撮影ユニット２８によって取得された画像データと食材ＤＢ４０ａ内の不揮発性メモリ内に記憶している食材のデータとを比較させ、両者が一致した場合に対応する食材に関する情報をＣＰＵ２０へ送出させる。
【００４１】
ＣＰＵ２０は、食材ＤＢ４０ａから入力された食材情報に基づいて、当該食材の画像および名称をプロジェクタユニット４６から投射させる。なお、食材画像および名称を液晶モニター３６に表示させてもよい。本例の場合は、「えび」と「しめじ」と「トマト」の画像および名称が投射（または表示）される。
【００４２】
上述したように、加工された食材の識別は困難である。ＣＰＵ２０は、識別が困難である場合は候補となる複数の食材のそれぞれの画像および名称を投射（または表示）させて、ユーザーの音声による選択指示を待つ。この場合、スピーカ４８からガイダンスを再生して選択指示を促す音声案内をしてもよい。候補となる複数の食材を投射（表示）するのは、たとえば、男爵いもとメークインとを識別できない場合や、ラム肉と豚肉とが識別できない場合などである。
【００４３】
食材認識を行ったＣＰＵ２０は、ステップＳ２において料理メニュー表示を行う。ＣＰＵ２０はメニュー紹介ＤＢ４０ｂへ指示を送り、食材ＤＢ４０ａによって認識された食材を用いた料理メニューを抽出させ、抽出した料理メニューの情報をＣＰＵ２０へ送出させる。ＣＰＵ２０は、メニュー紹介ＤＢ４０ｂから入力された複数の料理メニュー情報を投射（または表示）させて、ユーザーの音声による選択指示を待つ。この場合、スピーカ４８からガイダンスを再生して選択指示を促す音声案内をしてもよい。本例の場合は、たとえば、料理メニューとして「えびとトマトのクリームパスタ」、「えびとしめじのトマトリゾット」、および「トマトとエビのチリ炒め」の３つの料理メニューが表示される。各料理メニューは、調理時間および熱量を含めて投射（または表示）される。
【００４４】
食材の組み合わせが、たとえば「じゃがいも」、「人参」、「玉葱」、および「肉」の場合は、多数の料理メニューが存在する。ＣＰＵ２０は、料理メニューの数が所定数（たとえば１０以上）存在する場合には、スピーカ４８から「和食、中華、イタリアン、フレンチからジャンルを指定してください。」とガイダンスを再生してジャンル指定指示を促す音声案内をする。この場合のユーザーは、マイク３０に向かって、たとえば「イタリアン」と発声する。
【００４５】
ＣＰＵ２０は、音声認識部３４から「イタリアン」を示す情報を受けると、上記１０以上の料理メニューのうちイタリア料理メニューを抽出させる。そして、抽出したイタリア料理メニュー情報を投射（または表示）させて、ユーザーの音声による選択指示を待つ。なお、スピーカ４８から「和食、中華、イタリアン、フレンチからジャンルを指定して下さい。」とメッセージを再生する代わりに、スピーカ４８から「グループ名を指定して下さい。」とメッセージを再生してもよい。この場合のＣＰＵ２０は、音声認識部３４から、たとえば「家族」を示す情報を受けると、上記１０以上の料理メニューのうち、「家族」としてグルーピングおよび登録されている人物が好きな料理メニューを抽出させる。そして、抽出した料理メニュー情報を投射（または表示）させて、ユーザーの音声による選択指示を待つ。
【００４６】
料理メニュー表示（投射）を行わせたＣＰＵ２０は、ステップＳ３において、料理メニューが選択済みか否かを判定する。ＣＰＵ２０は、投射（または表示）中の料理メニューのうち、たとえば「えびとトマトのクリームパスタ」を示す情報を音声認識部３４から受けると、ステップＳ３を肯定判定してステップＳ４へ進む。ＣＰＵ２０は、投射（または表示）中の料理メニューを示す情報を音声認識部３４から受けない場合には、ステップＳ３を否定判定してステップＳ２へ戻る。ステップＳ２へ戻る動作を繰り返す場合は、ステップＳ２へ戻って前回と異なる料理メニュー情報を投射（または表示）させて、ユーザーの音声による選択指示を待つ。なお、ジャンル指定指示またはグループ名を指定する指示を受けた場合には、上述したように、指示に応じて抽出した料理メニュー情報を投射（または表示）させる。
【００４７】
ステップＳ４において、ＣＰＵ２０は、料理メニューから選択された料理を調理するのに必要な食材情報（食材名およびその分量）を投射（または表示）させてステップＳ５へ進む。食材情報は、レシピ紹介ＤＢ４０ｃから取得する。分量は、通常、大人４人分とする。なお、人数が特定されているグループ（たとえば「家族」）が指定されている場合には、当該グループに登録されている人数分の分量に換算して表示する。人数が特定できないグループの場合は、スピーカ４８から「人数を指定して下さい。」とメッセージを再生してもよい。この場合のＣＰＵ２０は、音声認識部３４から、たとえば「３人」を示す情報を受けると、３人分の分量に換算して投射（または表示）させる。
【００４８】
ステップＳ５において、ＣＰＵ２０は、不足食材があるか否かを判定する。ＣＰＵ２０は、スピーカ４８から「材料は揃っていますか？」とメッセージを再生させる。そして、ＣＰＵ２０は音声認識部３４から「はい」を示す情報を受けると、ステップＳ５を肯定判定してステップＳ７へ進む。一方、ＣＰＵ２０は音声認識部３４から「いいえ」を示す情報を受けると、ステップＳ５を否定判定してステップＳ６へ進む。
【００４９】
ステップＳ６において、ＣＰＵ２０は不足食材に関する情報を提供する。ＣＰＵ２０は、ステップＳ４で表示した食材名の中にステップＳ１で認識した食材以外の他の食材（たとえば「モッツァレラチーズ」）が含まれる場合、または音声認識部３４から食材名（たとえば「モッツァレラチーズ」）を示す情報を受けた場合には、不足食材（本例の場合は「モッツァレラチーズ」）の情報を情報取得部３１を介して取得する。上述したように、ＧＰＳ部４２で取得された現在位置の情報、フラッシュＲＯＭ２９に記憶される地図情報とに基づいて、不足食材を販売する最寄りの店舗の情報（店舗の名称や交通アクセス等）を取得する。
【００５０】
ＣＰＵ２０は、ステップＳ６の情報提供後に一旦図４による処理を中断してもよい。この場合のＣＰＵ２０は、食材が揃った旨の情報が音声認識部３４から入力されるまで中断状態を継続し、食材が揃った旨の情報が音声認識部３４から入力されると処理を再開してステップＳ７へ進む。
【００５１】
ステップＳ７において、ＣＰＵ２０は、ステップＳ３で選択されている料理のレシピ情報を投射（または表示）させてステップＳ８へ進む。レシピ情報は、レシピ紹介ＤＢ４０ｃから取得する。レシピ紹介ＤＢ４０ｃには、通常紹介する基本レシピの他、低カロリーレシピや一工夫を加えたサブレシピの情報も格納されている。ＣＰＵ２０は、音声認識部３４から「サブレシピ」を要求する情報を受けると、対応するサブレシピの情報を投射（または表示）させる。レシピ情報の提供は、たとえば、各工程ごとに投射（または表示）して一旦停止し、音声認識部３４から「次」を示す情報を受けると、次工程の情報を投射（または表示）させる。音声認識部３４から「戻る」を示す情報を受けると、前工程の情報を投射（または表示）させる。
【００５２】
ステップＳ８において、ＣＰＵ２０は調理の様子を記録させる。具体的には、ＣＰＵ２０が撮影ユニット２８に指示を送り、レシピにおける各工程を動画像として所定時間（たとえば１０秒）ずつ間欠的に記録させる。各工程における記録開始は、マイク３０で集音された音声信号（たとえば、包丁で食材を切るときの音、フライパンで食材を炒めるときに発生する音など）をトリガに開始させるとよい。記録開始トリガとして用いたい音声データをあらかじめフラッシュＲＯＭ２９に記憶させておき、記憶されている音声データと同様の周波数の音声信号が集音された場合に、記録開始トリガと判断する。なお、上記各工程における動画像の記録は、料理のレシピ情報を投射（または表示）中に行ってもよいし、一旦停止中に行ってもよい。
【００５３】
ＣＰＵ２０はさらに、各工程の所要時間をカレンダ部２６で計時させて前記動画像と関連づけて調理記録（ログデータ）としてメモリカードＭＣに記憶させる。各工程の所要時間は、ある工程の情報を投射（または表示）開始してから、次工程の情報を投射（または表示）開始するまでの経過時間とする。各工程の投射（または表示）は、１回行なって一旦停止する他に、同工程を繰り返し投射（または表示）させてもよい。ＣＰＵ２０は、音声認識部３４から「繰り返す」を示す情報を受けると、同工程の情報を再度投射（または表示）させる。
【００５４】
ステップＳ９において、ＣＰＵ２０は、次の料理を作るか否かを判定する。ＣＰＵ２０は、スピーカ４８から「他の料理を作りますか？」とメッセージを再生させる。そして、ＣＰＵ２０は音声認識部３４から「はい」、または「もう一品」を示す情報を受けると、ステップＳ９を肯定判定してステップＳ１へ戻る。一方、ＣＰＵ２０は音声認識部３４から「いいえ」、または「終了」を示す情報を受けると、ステップＳ９を否定判定して図４による処理を終了する。
【００５５】
以上説明した実施形態によれば、次の作用効果が得られる。
（１）デジタルカメラ１は、被写体を撮像する撮影ユニット２８と、撮像した被写体に関連した情報を出力するプロジェクタユニット４６（または液晶モニター３６）と、プロジェクタユニット４６（または液晶モニター３６）が出力した情報への応答である音声を認識する音声認識部３４と、音声認識部３４による認識に応じて撮像とは異なる操作を制御するＣＰＵ２０とを備える。これにより、たとえば料理レシピや組み立て手順などの情報を使い勝手よく提供できる。
【００５６】
（２）上記デジタルカメラ１において、撮影ユニット２８による撮像指示を受け付けるシャッターボタン１１を備え、プロジェクタユニット４６は画像を投射し、ＣＰＵ２０はさらに、プロジェクタユニット４６の投射動作に関連して、シャッターボタン１１からの撮影指示なしに撮影ユニット２８に撮像を行わせるようにした。これにより、たとえば、調理中で手が濡れていたり、手にパン粉などがついていたりして、手でデジタルカメラ１のシャッターボタン１１を操作できない状態でも、撮影ユニット２８に撮像を行わせることができる。
【００５７】
（３）上記デジタルカメラ１において、ＣＰＵ２０は、音声認識部３４による認識に応じて撮影ユニット２８に撮像を行わせるので、手を使わないで声によって撮影指示を行える。
【００５８】
（４）上記デジタルカメラ１において、ＣＰＵ２０は、音声認識部３４がプロジェクタユニット４６の投射した画像に関連した音声を認識した際に撮影ユニット２８で撮像を行わせるようにした。音声認識部３４の不揮発性メモリ（不図示）に記憶させる単語は、投射画像に関する単語だけでよいから、あらゆる単語を記憶させておく場合に比べて不揮発性メモリの容量を抑えることができる。
【００５９】
（５）上記デジタルカメラ１において、被写体に関連した表示を行う液晶モニター３６と、被写体に関連した音声を発生するスピーカ４８の少なくとも一方を備えるので、撮像した被写体に関連した情報の提供を表示または音声で行えるから、表示または音声の一方のみで提供する場合に比べて使い勝手が向上する。
【００６０】
（６）上記デジタルカメラ１において、音声認識部３４による認識に応じて時間を計時するカレンダ部２６をさらに備えるので、たとえば、たとえば料理レシピや組み立て手順などの提供内容に時間指定が含まれる場合において、指定した時間の計時動作に役立つ。
【００６１】
（７）上記デジタルカメラ１において、プロジェクタユニット４６（または液晶モニター３６）は、カレンダ部２６の出力に応じて被写体に関連した情報を変更するので、料理レシピや組み立て手順において所定時間が経過したら自動的に次の工程を案内したり、所定時間が経過したら工程案内を一旦停止したりするなどして、使い勝手よく提供することができる。
【００６２】
（８）上記デジタルカメラ１において、撮影ユニット２８は所定の食材を撮像し、プロジェクタユニット４６（または液晶モニター３６）は、食材を用いた料理のレシピ情報を投射（または表示）するので、操作部材から食材名の入力操作をすることなく、食材を撮像するだけで該食材を用いた料理のレシピ情報を得ることができる。
【００６３】
（９）上記デジタルカメラ１において、食材に関する情報を取得する情報取得部３１を備えるので、レシピ情報がデジタルカメラ１内に記憶されていない場合でも、該レシピ情報をデジタルカメラ１の外部から入手することができる。
【００６４】
（変形例１）
上述した説明では、メモリカードＭＣに記憶させるログデータにレシピを提供した料理メニュー情報、およびそのレシピ情報を含めるようにした。ステップＳ２のメニュー表示の際にグループ名が指定された場合には、指定されたグループ名（「家族」や所属する「チーム」等）もログデータに含めるとよい。同じメンバーが集うグループに関連づけたログを残すことで、たとえば「家族史」や「チームの合宿記録」など、過去のイベントにおける調理記録をグループごとに自動的に分類して残すことができる。なお、ログデータに含めた調理中の記録画像は、調理後の食事中にプロジェクタユニット４６で投射したり、テレビなどの再生表示装置で再生させて鑑賞することができる。
【００６５】
（変形例２）
料理のレシピ情報を提供する場合を例に説明したが、模型やプラモデル、キット（物置、犬小屋など）の組み立て手順の情報を提供するように構成してもよい。
【００６６】
（変形例３）
上述した説明では、ユーザーによる選択操作を受け付ける態様として、ロータリーマルチセレクター１１４またはタッチパネル操作部材（不図示）に指などで直接触れて行う選択操作の受け付けの他に、音声認識部３４を用いた音声認識を用いることによって非接触で行う選択操作の受け付けの例を説明した。非接触の選択操作の受け付け例として、プロジェクタユニット４６の投影領域を撮影ユニット２８によって撮像した画像に基づいて判断するように構成してもよい。
【００６７】
この場合のＣＰＵ２０は、特開２００８−２９８８１９号公報に記載されるように、撮影ユニット２８で撮像して得られたスルー画を順次読み込んで、スルー画の所定の領域（撮影画面における所定画素数以上の領域）に変化があると判断すると、変化を判断した領域に応じた選択指示が行われたものと判断する。なお、スルー画とは、撮影ユニット２８によって所定の時間間隔（たとえば３０コマ／毎秒）で繰り返し取得されるモニタ用画像（ライブビュー画像とも呼ばれる）のことをいう。
【００６８】
ＣＰＵ２０は、たとえば、まな板上にメニュー紹介ＤＢ４０ｂから入力された複数の料理メニュー情報をプロジェクタユニット４６により投射させて、ユーザーによる選択指示を待つ。料理メニューとして「えびとトマトのクリームパスタ」、「えびとしめじのトマトリゾット」、および「トマトとエビのチリ炒め」の３つの料理メニューが投射されている場合に、ユーザーは、まな板上で選択したいメニューが投射されている領域へ手をかざす。ＣＰＵ２０は、スルー画像の変化に基づいて手がかざされた領域を判断し、当該領域に対応するメニューの選択指示が行われたものと判断する。なお、上述の説明は、前述の図４のフローチャートＳ２、Ｓ３に相当し、ＣＰＵ２０は、撮影ユニット２８とプロジェクタユニット４６とを用いてメニューを選択した後に、シャッターボタン１１からの撮影指示なしに撮影ユニット２８に撮像させるようにしてもよい。
【００６９】
なお、まな板上でなく床面に投射した場合には、選択したいメニューが投射されている領域へ足を動かして選択指示を行うようにしてもよい。
【００７０】
（変形例４）
以上の説明では、コンパクトタイプのデジタルカメラ１を例に説明したが、レンズ交換式の一眼レフカメラや、ミラーレス一眼カメラ、ビデオカメラや携帯電話機などにも本発明を適用することができる。
【００７１】
以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。
【符号の説明】
【００７２】
１…デジタルカメラ
１１…シャッターボタン
２０…ＣＰＵ
２４…顔認識部
２６…カレンダ部
２８…撮影ユニット
２９…フラッシュＲＯＭ
３０…マイク
３１…情報取得部
３４…音声認識部
３６…液晶モニター
４０…ＤＢ部
４２…ＧＰＳ部
４６…プロジェクタユニット
４８…スピーカ
１１３Ａ〜Ｃ…操作ボタン
１１４…ロータリーマルチセレクター
【図１】
2012108282.tif 000003
【図２】
2012108282.tif 000004
【図３】
2012108282.tif 000005
【図４】
2012108282.tif 000006