(57)【要約】【課題】調理の実行時に、ユーザが調理に関する補助情報をリアルタイムで取得することを適切に実現し得る調理支援装置を提供する。【解決手段】調理支援装置１は、ユーザＰの頭部に着脱自在に装着し得るように構成されている表示デバイス２と、表示デバイス２での表示を制御する表示制御部１０とを備える。表示制御部１０は、表示デバイス２を装着したユーザＰによる調理の実行時に、調理に関する補助情報を、調理装置Ａ等との通信によって取得し、取得した補助情報を表す画像情報を、ユーザＰの視野域の実体物の映像に付加するように表示デバイス２を制御する。【選択図】図１
2019016322.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの頭部に着脱自在に装着し得るように構成されていると共に、該ユーザの頭部に装着された状態で、該ユーザの視野域に存在している実体物の映像に画像情報を付加してなる映像を該ユーザに視認させる機能を有する表示デバイスと、
該表示デバイスを装着した前記ユーザによる調理の実行時に、該調理に関する補助情報を、該調理に使用する調理装置と外部機器とのうちの少なくとも一方との通信によって取得し、当該取得した補助情報を表す前記画像情報を、前記実体物の映像に付加するように前記表示デバイスを制御する表示制御部とを備えることを特徴とする調理支援装置。
【請求項２】
請求項１記載の調理支援装置において、
前記表示制御部は、自動調理運転を実行する機能を有する前記調理装置と通信可能であり、該調理装置による自動調理運転の実行中に、該調理装置により実行されている調理工程の内容を表す情報と、後続の調理工程の内容を表す情報とのうちの少なくとも一方の情報を、前記補助情報として該調理装置から取得し得るように構成されていることを特徴とする調理支援装置。
【請求項３】
請求項１記載の調理支援装置において、
前記表示制御部は、自動調理運転を実行する機能を有する前記調理装置と通信可能であり、該調理装置による自動調理運転の実行中に、該調理装置により加熱されている調理加熱物の実際の温度と、該調理加熱物に対する該調理装置の発熱量と、前記自動調理運転の進捗度合いとのうちの少なくとも一つ以上の調理状態量を示す情報、又は、該調理状態量に応じて前記ユーザが所定の調理作業を実行すべきタイミングを示す情報、又は、該タイミングで前記ユーザが所定の調理作業を実行すべき前記所定の調理作業の内容を示す情報を、前記補助情報として該調理装置から取得し得るように構成されていることを特徴とする調理支援装置。
【請求項４】
請求項１記載の調理支援装置において、
前記表示制御部は、前記調理装置で異常が発生したときに、該異常の発生を示す情報、又は、該異常の発生に応じて前記ユーザが実行すべき処置を示す情報を前記補助情報として該調理装置から取得し得るように構成されていることを特徴とする調理支援装置。
【請求項５】
請求項１〜４のいずれか１項に記載の調理支援装置において、
前記表示制御部は、前記表示デバイスを装着した前記ユーザの手指の動きを検知する機能と、前記ユーザによる調理の実行時に、前記調理装置の運転操作を行うための操作部を疑似的に表す操作部画像を、前記実体物の映像に付加するように前記表示デバイスを制御する機能と、前記操作部画像により表される操作部を操作する態様での前記ユーザの手指の動きを検知したとき、当該操作に応じた操作指令を前記調理装置に送信する機能とをさらに備えるように構成されていることを特徴とする調理支援装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、調理を支援する装置に関する。
【背景技術】
【０００２】
従来、例えば特許文献１に見られるように、調理を行うユーザの近辺に、調理支援アプリがインストールされたスマートフォン、もしくはタブレット端末等の携帯端末を設置し、該携帯端末により調理場所の映像（動画像）を撮影しながら、該映像に、調理に関する情報を重畳させたものを表示画面で表示して、ユーザに視認させることで、調理の支援を行う技術が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１６−１３９３５６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に見られる技術では、情報表示を行う携帯端末をユーザの正面に設置した状態では、該ユーザが調理作業を行い難いため、多くの場合、ユーザは、該携帯端末を、ユーザの正面から側方にずらした位置に設置して、調理作業を行うこととならざるを得ない。このため、ユーザは、調理作業と並行して、携帯端末の表示画面の情報を視認することが困難となりやすい。ひいては、ユーザは調理作業の支援情報等を適切なタイミングで取得することができない状況が発生しやすい。
【０００５】
また、携帯端末を調理場所の近辺に設置する必要があるため、該携帯端末が調理作業の邪魔になりやすい。
【０００６】
また、携帯端末の画面操作等のために、ユーザは、携帯端末の表示画面に手指を接触させるべき状況が発生しやすい。この場合、調理物に触れた手指で携帯端末の表示画面に接触させることにより、該携帯端末の汚れが生じやすい。また、その携帯端末の汚れを防止するために、ユーザが極力、手指を洗うようにすると、携帯端末の操作を含めた調理作業が非常に面倒なものとなる。
【０００７】
なお、携帯端末に音声入力を行うことも可能であるが、該音声入力では、音声の誤認識によって、携帯端末の誤操作が行われやすい。
【０００８】
本発明はかかる背景に鑑みてなされたものであり、調理の実行時に、ユーザが調理に関する補助情報をリアルタイムで取得することを適切に実現し得る調理支援装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の調理支援装置は、上記の目的を達成するために、ユーザの頭部に着脱自在に装着し得るように構成されていると共に、該ユーザの頭部に装着された状態で、該ユーザの視野域に存在している実体物の映像に画像情報を付加してなる映像を該ユーザに視認させる機能を有する表示デバイスと、
該表示デバイスを装着した前記ユーザによる調理の実行時に、該調理に関する補助情報を、該調理に使用する調理装置と外部機器とのうちの少なくとも一方との通信によって取得し、当該取得した補助情報を表す前記画像情報を、前記実体物の映像に付加するように前記表示デバイスを制御する表示制御部とを備えることを特徴とする（第１発明）。
なお、前記「画像情報」は、静止画像及び動画像（映像）のいずれでもよい。
【００１０】
かかる本発明によれば、ユーザが頭部に装着した前記表示デバイスには、調理の実行時に、前記表示制御部が前記調理装置又は外部機器から取得した前記補助情報を表す画像情報が、ユーザの視野域に存在している実体物の映像に付加された形態で表示される。
【００１１】
このため、ユーザは、表示デバイスの表示部に手指を接触させることを必要とせずに、実体物の映像を視認しながら、リアルタイムで前記補助情報を表す画像情報を視認して、該補助情報を認識できる。
【００１２】
また、表示デバイスは、ユーザの頭部に装着されるので、調理場所やその周辺に表示デバイスを設置するスペースを必要しないと共に、ユーザは、該表示デバイスに妨げられることなく作業を行うことができる。
【００１３】
よって、第１発明の調理支援装置によれば、調理の実行時に、ユーザが調理に関する補助情報をリアルタイムで取得することを適切に実現することが可能となる。
【００１４】
上記第１発明では、前記表示制御部は、自動調理運転を実行する機能を有する前記調理装置と通信可能である場合には、該調理装置による自動調理運転の実行中に、該調理装置により実行されている調理工程の内容を表す情報と、後続の調理工程の内容を表す情報とのうちの少なくとも一方の情報を、前記補助情報として該調理装置から取得し得るように構成され得る（第２発明）。
【００１５】
なお、前記「自動調理運転」は、加熱対象の調理加熱物（調理物又は調理物を収容した調理容器等）の加熱量が、所定の態様で自動的に制御される調理運転を意味する。このことは、後述の第３発明でも同様である。
【００１６】
上記第２発明によれば、前記自動調理運転の実行中に、該調理装置により実行されている調理工程の内容を表す情報と、後続の調理工程の内容を表す情報とのうちの少なくとも一方の情報を表す画像情報が、前記実体物の映像に付加されて表示デバイスで表示される。
【００１７】
これにより、ユーザは、今後行うべき作業等を容易に視覚的に認識することができる。ひいては、調理作業を段取りよく遂行することが可能となる。
【００１８】
また、上記第１発明では、前記表示制御部は、自動調理運転を実行する機能を有する前記調理装置と通信可能である場合には、該調理装置による自動調理運転の実行中に、該調理装置により加熱されている加熱調理物の実際の温度と、該加熱調理物に対する該調理装置の発熱量と、前記自動調理運転の進捗度合いとのうちの少なくとも一つ以上の調理状態量を示す情報、又は、該調理状態量に応じて前記ユーザが所定の調理作業を実行すべきタイミングを示す情報、又は、該タイミングで前記ユーザが所定の調理作業を実行すべき前記所定の調理作業の内容を示す情報を、前記補助情報として該調理装置から取得し得るように構成され得る（第３発明）。
【００１９】
上記第３発明によれば、前記自動調理運転の実行中に、調理装置により加熱されている加熱調理物の実際の温度と、該加熱調理物に対する該調理装置の発熱量と、前記自動調理運転の進捗度合いとのうちの少なくとも一つ以上の調理状態量を示す情報、又は、該調理状態量に応じて前記ユーザが所定の調理作業を実行すべきタイミングを示す情報、又は、該タイミングで前記ユーザが所定の調理作業を実行すべき前記所定の調理作業の内容を示す情報を表す画像情報が、前記実体物の映像に付加されて表示デバイスで表示される。
【００２０】
これにより、ユーザは、自動調理運転による調理の進行中に、調理物の調理状態が、どのような調理状態になっているか、あるいは、該調理状態に応じてユーザが実行すべき調理作業を、リアルタイムで容易に視覚的に認識することが可能となる。ひいては、ユーザは、必要な調理作業を好適なタイミングで実行できる。従って、調理を好適な態様でスムーズに行うことが可能となる。
【００２１】
また、上記第１発明では、前記表示制御部は、前記調理装置で異常が発生したときに、該異常の発生を示す情報、又は、該異常の発生に応じて前記ユーザが実行すべき処置を示す情報を前記補助情報として該調理装置から取得し得るように構成され得る（第４発明）。
【００２２】
これによれば、前記調理装置で異常が発生したときに、該異常の発生を示す情報、又は、該異常の発生に応じて前記ユーザが実行すべき処置を示す情報を表す画像情報が、前記実体物の映像に付加されて表示デバイスで表示される。
【００２３】
これにより、ユーザは、異常の発生、あるいは、該異常の発生に対して実行すべき処置を容易かつ確実に視覚的に認識できる。
【００２４】
なお、上記第２発明〜第４発明は、相互に組み合わせてもよい。
【００２５】
また、上記第１〜第４発明では、前記表示制御部は、前記表示デバイスを装着した前記ユーザの手指の動きを検知する機能と、前記ユーザによる調理の実行時に、前記調理装置の運転操作を行うための操作部を疑似的に表す操作部画像を、前記実体物の映像に付加するように前記表示デバイスを制御する機能と、前記操作部画像により表される操作部を操作する態様での前記ユーザの手指の動きを検知したとき、当該操作に応じた操作指令を前記調理装置に送信する機能とをさらに備えるように構成され得る（第５発明）。
【００２６】
これによれば、ユーザは、調理装置、あるいは、表示デバイスの手指を接触させることなく、調理装置の運転操作を行うことができる。このため、ユーザが調理装置に近接していない状況であっても、調理加熱物の加熱量の変更操作等を素早く実行することが可能となる。
【図面の簡単な説明】
【００２７】
【図１】本発明の実施形態の調理支援装置の全体構成を示す図。
【図２】実施形態の調理支援装置の表示デバイスを装着したユーザと調理装置の例とを示す図。
【図３】実施形態の調理支援装置の作動を示すフローチャート。
【図４】図３のＳＴＥＰ１で表示デバイスに表示される画像情報の例を示す図。
【図５】図３のＳＴＥＰ６で表示デバイスに表示される画像情報の例を示す図。
【図６】図３のＳＴＥＰ８で表示デバイスに表示される画像情報の例を示す図。
【図７】図３のＳＴＥＰ８で表示デバイスに表示される画像情報の他の例を示す図。
【図８】図３のＳＴＥＰ８で表示デバイスに表示される画像情報の他の例を示す図。
【発明を実施するための形態】
【００２８】
本発明の一実施形態を図１〜図８を参照して以下に説明する。図１に示すように、本実施形態の調理支援装置１は、ユーザＰの頭部に着脱自在に装着可能な表示デバイス２と、該表示デバイス２での表示を制御する表示制御部１０とを備える。
【００２９】
図示例の表示デバイス２は、例えば眼鏡型のものであり、ユーザＰの頭部にバンドもしくは耳掛け部材等を介して着脱自在に装着可能なフレーム３と、該フレーム３を頭部に装着したユーザＰの両目のそれぞれの正面に位置するようにフレーム３に固定された左右一対の画像表示部４，４と、該ユーザＰの視野域（頭部の正面側の領域）を撮影し得るようにフレーム３に組み付けられたカメラ５とを備える。
【００３０】
画像表示部４，４は、例えば、ビデオ透過型のものである。この場合、画像表示部４，４は、ユーザＰの視野域に実際に存在してカメラ５により撮影された実体物の映像（動画映像）を、ユーザＰが実際に視認しているように表示可能であると共に、該実体物の映像に、種々の画像情報（文字、図形、記号、仮想映像（仮想的な動画像）等の画像情報）を適宜付加してなる映像（所謂、拡張現実の映像）を表示可能である。
【００３１】
なお、カメラ５は、例えば、ユーザＰの視野域に該ユーザＰの手指を移動させた状態での該手指の動きを検知するためのセンサとしても使用され得る。
【００３２】
補足すると、表示デバイス２は、眼鏡型に限らず、例えば帽子型のものであってもよい。また、左右の画像表示部４，４は、一体に構成されていてもよい。また、画像表示部４，４は、ビデオ透過型のものに限らず、例えば光学透過型のものであってもよい。この場合、カメラ５の撮影映像（実体物の映像）を画像表示部４，４に表示することは不要である。
【００３３】
表示制御部１０は、マイクロコンピュータ、メモリ、無線通信機等を含む電子回路ユニットにより構成されたものである。本実施形態では、表示制御部１０は、相互に通信可能に接続された２つの部分制御部１０ａ，１０ｂにより構成され、該部分制御部１０ａ，１０ｂが、表示デバイス２のフレーム３の左側部と右側部とに各々固定されている。
【００３４】
ただし、表示制御部１０は、単一構成のもの、あるいは、相互に通信可能な３つ以上の部分制御部により構成されたものであってもよい。また、表示制御部１０は、表示デバイス２と別体構成のもの（例えば、ユーザＰの腰部に装着し得るもの、あるいは、ユーザＰの衣服のポケットに収容し得るもの等）であってもよい。
【００３５】
上記表示制御部１０は、実装されたハードウェア構成及びプログラム（ソフトウェア構成）により実現される機能として、画像表示部４，４の表示を制御する機能を有する。
【００３６】
この場合、表示制御部１０には、画像表示部４，４に表示させる実体物の映像として、カメラ５の撮影データ（映像信号）が入力される。また、表示制御部１０は、画像表示部４，４の表示を制御するために、ユーザＰの調理作業時に、カメラ５の撮影データに基づいて、ユーザＰの手指等の動きを検知することも可能である。なお、ユーザの手指等の動きは、カメラ５の撮影データに限らず、ユーザＰに装備した加速度センサ等を用いて検知することも可能である。
【００３７】
また、表示制御部１０は、ユーザＰが利用する調理装置Ａの制御部ａ１、あるいは、ユーザＰが使用するスマートフォン、タブレット端末、パソコン、インターネットサーバ等の外部機器Ｂと無線通信を行うことも可能である。この場合、該無線通信の方式としては、例えばBluetooth（登録商標）、Wi-Fi（登録商標）等を使用し得る。なお、表示制御部１０と調理装置Ａ又は外部機器Ｂとの間の通信経路には無線ルータ等の中継器が含まれ得る。
【００３８】
そして、表示制御部１０は、ユーザＰの調理作業時に、調理装置Ａの制御部ａ１、あるいは外部機器Ｂと無線通信を適宜行うことで、調理支援等のために画像表示部４，４に表示させる情報（調理に関連した情報）を取得することが可能である。
【００３９】
なお、本実施形態では、調理装置Ａの制御部ａ１は、外部機器Ｂと通信を行うことも可能である。その通信によって、調理装置Ａの制御部ａ１は、種々の調理メニューのレシピ情報等を適宜、取得可能である。
【００４０】
次に、本実施形態の調理支援装置１の作動を説明する。なお、以降の説明では、ユーザＰが使用する調理装置Ａの一例として、例えば、図２に示す如きビルトイン型のコンロシステムを例示する。この場合、該コンロシステムのコンロ（発熱部）は、ガスコンロ等の燃焼式のコンロ、あるいは、ＩＨヒータ等の電気式のコンロのいずれであってもよい。また、該コンロシステムは、ビルトイン型に限らず、据置型のものであってもよい。
【００４１】
この調理装置Ａ（コンロシステム）は、種々の調理メニューに関する自動調理運転を実行することが可能である。該自動調理運転では、調理作業の全工程のうち、調理加熱物（具体的には、調理物又は鍋等の調理容器）を加熱する工程において、制御部ａ１による制御処理によって、調理に使用するコンロの火力（発熱量）の調整、あるいは、該コンロの運転停止があらかじめ定められた態様（シーケンス）で自動的に実行される。この場合、調理装置Ａの制御部ａ１は、各コンロで加熱する調理加熱物の温度を図示しない温度センサを介して検出可能である。
【００４２】
図３のフローチャートを参照して、ユーザＰが表示デバイス２を使用しつつ、調理装置Ａ（コンロシステム）による自動調理運転を行う場合、ユーザＰは、表示デバイス２を頭部に装着した状態で、まず、調理メニューを選択する（ＳＴＥＰ１）。
【００４３】
この場合、前記表示制御部１０は、調理装置Ａで自動調理運転を実行可能な複数の調理メニューを調理装置Ａの制御部ａ１との通信によって、該制御部ａ１から取得する。なお、調理装置Ａで自動調理運転を実行可能な複数の調理メニューが、例えば、ユーザＰのスマートフォン、タブレット端末、パソコン等に登録されている場合には、表示制御部１０は、該スマートフォン等から調理メニューを取得してもよい。
【００４４】
そして、表示制御部１０は、取得した調理メニューを示す画像情報を、例えば図４に例示する如き態様でユーザＰに視認させるように、画像表示部４，４に表示させる。なお、図４では、実体物の映像の図示を省略している。
【００４５】
図４に示す例では、画像情報Ｄ１で示す如く、調理装置Ａ（コンロシステム）で自動調理運転を実行可能な複数の調理メニューのうちの所定数の調理メニュー（図示例では５種類の調理メニュー）の名称がそれぞれ記載された所定数の枠（図示例では５個の枠）が上下に並ぶように表示される。この場合、当該所定数の枠のうち、上下方向で中央に位置する枠が最も大きなものとなるように表示される。
【００４６】
そして、このような画像情報Ｄ１が画像表示部４，４により表示された状態で、ユーザＰが、表示デバイス２の正面側で自身の手指を上下に動かすと、表示制御部１０は、当該手指の動きを検知することに応じて、画像情報Ｄ１により表示させる調理メニューの種類を変化させる。
【００４７】
さらに、ユーザＰの所望の調理メニューが、上下方向で中央に位置する枠（最も大きい枠）で表示されている状態で、ユーザＰが、自身の手指を、表示デバイス２の正面側で所定の態様（調理メニューの決定用の所定の態様）で動かすと、表示制御部１０は、当該手指の動きを検知することに応じて、最も大きい枠で表示した調理メニューを、ユーザＰにより選択決定された調理メニューとして特定し、該調理メニューを示す情報を調理装置Ａの制御部ａ１に送信する。
【００４８】
これにより、ユーザＰは、表示デバイス２等に手指を接触させることなく、所望の調理メニューを選択決定することができる。
【００４９】
なお、調理メニューの選択決定は、例えば、ユーザＰが、調理装置Ａの操作部を操作することによって、あるいは、調理装置Ａの制御部ａ１と通信可能な該ユーザＰのスマートフォンもしくはタブレット端末等の携帯端末を操作することによって行うことも可能である。あるいは、調理メニューの選択決定を、例えば、調理装置Ａの制御部ａ１又は表示制御部１０に対する音声入力によって行うことも可能である。
【００５０】
次に、ＳＴＥＰ２において、調理装置Ａの制御部ａ１は、ユーザＰにより選択決定された調理メニューに対応する調理作業の全工程の作業手順を示すレシピ工程を取得する。この場合、制御部ａ１は、例えば、前記外部機器Ｂ（ユーザＰのスマートフォンもしくはタブレット端末もしくはパソコン、あるいは、外部のインターネットサーバ等）との通信を行うことで、レシピ工程を取得する。
【００５１】
なお、選択決定された調理メニューに対応するレシピ工程が、調理装置Ａのメモリに既に記憶保持されている場合には、調理装置Ａの制御部ａ１は、該メモリからレシピ工程を読み込むことも可能である。
【００５２】
次いで、ＳＴＥＰ３において、調理装置Ａの制御部ａ１は、取得したレシピ工程を、調理装置Ａが担当すベき調理工程（調理物を焼く、煮る等、調理加熱物の加熱を要する調理工程）と、調理装置Ａの作動を必要とせずに、ユーザＰが担当すべき調理工程（調理材料を切る、混ぜる等の調理工程）とに分類する。
【００５３】
そして、調理装置Ａの制御部ａ１は、ＳＴＥＰ４において、調理作業を開始すべく、レシピ工程のうちの最初の調理工程（第１順位の調理工程）を、今現在、実行すべき調理工程（以降、単に、実行対象の調理工程という）として読み込み、さらに、当該実行対象の調理工程の担当が、調理装置ＡであるかユーザＰであるかをＳＴＥＰ５で判断する。
【００５４】
ＳＴＥＰ５で、実行対象の調理工程の担当がユーザＰである場合には、次にＳＴＥＰ６において、実行対象の調理工程の作業内容を示す画像情報が、ユーザＰが視認し得るように表示デバイス２の画像表示部４，４で表示される。
【００５５】
この場合、より詳しくは、調理装置Ａの制御部ａ１は、実行対象の調理工程でのユーザＰの作業内容を示す補助情報を、表示制御部１０に送信すると共に、該情報を画像表示部４，４で表示させるように表示制御部１０に指令する。これに応じて、表示制御部１０は、実行対象の調理工程でのユーザＰの作業内容を示す画像情報を、画像表示部４，４で表示させる。なお、実行対象の調理工程でのユーザＰの作業内容を示す補助情報は、例えば、表示制御部１０が、調理装置Ａの制御部ａ１からの指令等に応じて、前記外部機器Ｂから取得することも可能である。
【００５６】
図５はＳＴＥＰ６において、画像表示部４，４で表示させる画像情報の一例を示している。この例は、実行対象の調理工程の作業内容が、大根等の調理材料を短冊状に切るという内容である場合の例である。この例では、例えば、調理メニューの種類を示す画像情報Ｄ３と、調理材料をどのように切るべきかを文章表現する画像情報Ｄ４ａと、調理材料の切断位置もしくは切断間隔を案内するガイド線を示す破線の画像情報Ｄ４ｂとが、カメラ５により撮影される調理台、調理材料、まな板等の実体物の映像に付加（重畳）された態様で、画像表示部４，４に表示される。この場合、画像情報Ｄ４ａ，Ｄ４ｂがユーザＰの作業内容を示す情報に相当する。
【００５７】
これらの画像情報Ｄ４ａ，Ｄ４ｂをユーザＰが視認することで、ユーザＰは、調理作業の仕方を容易に認識して、該調理作業を円滑に進行させることができる。
【００５８】
なお、上記画像情報Ｄ４ａ、Ｄ４ｂの代わりに、もしくは画像情報Ｄ４ａ、Ｄ４ｂに加えて、例えば、調理作業の教師映像（動画像）を画像表示部４，４で表示させたり、あるいは、調理作業時の注意点、調理作業のこつ等を示す画像情報を画像表示部４，４で表示させるようにしてもよい。
【００５９】
また、例えば、ユーザＰが担当する実行対象の調理工程が、調理装置Ａによる調理（例えば、だし汁の加熱等）と並行して実行される工程である場合には、さらに、調理装置Ａにより進行中の調理状態を示す画像情報（例えば、後述する図６に例示する画像情報Ｄ５〜Ｄ８と同様の画像情報）を、画像表示部４，４で表示させる画像情報に付加してもよい。
【００６０】
また、例えば、次順位の調理工程の内容等を示す画像情報（例えば、後述する図６に例示する画像情報Ｄ９と同様の表示）を、画像表示部４，４で表示させる画像情報に付加してもよい。
【００６１】
ＳＴＥＰ５で、実行対象の調理工程の担当が調理装置Ａである場合には、次にＳＴＥＰ７において、調理装置Ａの制御部ａ１の制御処理によって、当該調理工程に係る調理装置Ａの作動（コンロの加熱運転）が実行される。
【００６２】
さらに、該調理装置Ａの作動と並行して、ＳＴＥＰ８において、例えば、実行対象の調理工程の作業内容を示す画像情報と、実行対象の調理工程の進行途中の調理状態がどのような状態であるかを示す画像情報と、次順位の調理工程の作業内容を示す画像情報とが、ユーザＰが視認し得るように表示デバイス２の画像表示部４，４で表示される。
【００６３】
この場合、より詳しくは、調理装置Ａの制御部ａは、実行対象の調理工程の内容及び次順位の調理工程の内容をそれぞれ示す補助情報、調理物の加熱のために調理装置Ａ（コンロシステム）のどのコンロを使用するかを示す補助情報、該コンロの運転による調理加熱物（調理物又は調理容器）の温度を示す補助情報、該コンロの火力（発熱量）を示す補助情報、実行対象の調理工程が完了するまでの残り時間を示す補助情報等を、表示制御部１０に送信すると共に、該情報を画像表示部４，４で表示させるように表示制御部１０に指令する。これに応じて、表示制御部１０は、受信した補助情報を示す画像情報を画像表示部４，４で表示させる。
【００６４】
なお、調理工程が完了するまでの残り時間を示す補助情報は、換言すれば、調理の進捗度合いを示す情報の一例である。当該進捗度合いを示す補助情報としては、例えば、調理工程の経過時間を示す情報等を使用することもできる。
【００６５】
図６はＳＴＥＰ８において、画像表示部４，４で表示させる画像情報の一例を示している。この例は、調理メニューが例えば「餃子」である場合の例である。この例では、例えば、調理メニューの種類（「餃子」）を示す画像情報Ｄ３と、調理物の加熱のために調理装置Ａ（コンロシステム）のどのコンロを使用しているかを図形パターンで示す画像情報Ｄ５と、調理物又は鍋等の調理容器の温度の検出値を示す画像情報Ｄ６と、使用しているコンロの火力（発熱量）の大きさを示す画像情報Ｄ７と、実行対象の調理工程が完了するまでの残り時間を示す画像情報Ｄ８と、実行対象の調理工程の内容及び次順位の調理工程の内容を示す画像情報Ｄ９とが、実体物の撮影画像（図示省略）に付加された態様で表示される。
【００６６】
この場合、画像情報Ｄ６〜Ｄ８が、実行対象の調理工程の進行途中の調理状態量を示す情報である。なお、図示例の画像情報Ｄ９では、実行対象の調理工程を「現在の調理工程」、次順位の調理工程を「次の調理工程」と表示している。
【００６７】
画像情報Ｄ５によって、ユーザＰは、画像情報Ｄ６〜Ｄ８が、調理装置Ａ（コンロシステム）のどのコンロに関する情報であるかを容易に認識することができる。なお、図示例の画像情報Ｄ５では、黒丸が、使用しているコンロを表し、白丸が、他のコンロを表している。
【００６８】
また、画像情報Ｄ６〜Ｄ８によって、ユーザＰは、調理の進捗状況、あるいは、具材もしくは調味料等を投入するタイミングや、調理物をひっくり返す、まぜる等を実行すべきタイミング等を容易に認識することができる。なお、これらのタイミングで、例えば、画像情報Ｄ５〜Ｄ８のいずれかの表示色を変更することで、当該タイミングをユーザＰが認識しやすくしてもよい。あるいは、当該タイミングでユーザＰが実行すべき調理作業の内容を示す画像情報を、画像表示部４，４で表示するようにしてもよい。
【００６９】
また、画像情報Ｄ９によって、ユーザＰは、今後、どのような作業を行うべきか等の段取りを容易に認識することができる。
【００７０】
なお、次順位の調理工程が存在しない場合には、画像情報Ｄ９のうち、当該次順位の調理工程の内容を示す画像情報は省略される。また、例えば「湯沸し」等のように、調理メニューに対応するレシピ工程が単一の調理工程からなる場合には、画像情報Ｄ９の全体を省略し得る。
【００７１】
また、画像情報Ｄ６〜Ｄ８のうち、どれを表示するかは、調理メニューの種類、調理工程の内容等に応じて変更し得る。
【００７２】
実行対象の調理工程の担当が調理装置Ａである場合に、ＳＴＥＰ８において、表示デバイス２の画像表示部４，４で表示させる画像情報は、上記した態様に限られない。例えば、ユーザＰが、画像表示部４，４に表示される画像中で仮想的な操作を行うことで、調理装置Ａの実際の操作（発熱量の調整等）を行い得るように、画像情報の表示を行うようにしてもよい。
【００７３】
この場合の画像情報の表示例を図７及び図８に示す。図７は、例えば、調理メニューが「湯沸し」である場合に、その「湯沸し」が終了する直前に画像表示部４，４で表示させる画像情報を例示している。この例では、図６に示したものと同様の画像情報Ｄ３、Ｄ５〜Ｄ８の他、例えば、「湯沸し」の調理工程がまもなく完了する旨の画像情報Ｄ１０ａと、調理装置Ａで使用しているコンロの火力（発熱量）の操作レバー（操作部）を図形パターンで示す画像情報Ｄ１０ｂとが、カメラ５で撮影された実体物の撮影映像（図示省略）に付加される。該画像情報Ｄ１０ｂは、本発明における操作部画像に相当する。
【００７４】
この場合、ユーザＰが、カメラ５の正面側で、自身の手指により画像情報Ｄ１０ｂの操作レバーをスライドさせるようにして、該手指を動かすことで、その動きが表示制御部１０により検知される。そして、その検知に応じて、コンロの火力（発熱量）の操作指令を示す情報が表示制御部１０から調理装置Ａの制御部ａ１に送信される。このとき、調理装置Ａの制御部ａ１は、受信した操作指令に応じて、コンロの火力（発熱量）を変化させ、あるいは、該コンロの加熱運転を停止させる。
【００７５】
また、図８は、例えば、調理メニューが「パスタ」である場合における「麺ゆで」の調理工程の途中において、吹きこぼれが発生しそうな状況で、画像表示部４，４で表示させる画像情報を例示している。この例では、図６に示したものと同様の画像情報Ｄ３、Ｄ５〜Ｄ９の他、例えば、吹きこぼれが発生しそうである旨と、コンロの火力（発熱量）の下げるか、該コンロの加熱運転を停止すべき旨とを示す画像情報Ｄ１０ｃと、調理装置Ａで使用しているコンロの火力（発熱量）の操作レバーを図形パターンで示す画像情報Ｄ１０ｂとが、カメラ５で撮影された実体物の撮影映像（図示省略）に付加される。
【００７６】
この場合、図７に示した例と同様に、ユーザＰが、カメラ５の正面側で、自身の手指により画像情報Ｄ１０ｂの操作レバーをスライドさせるようにして、該手指を動かすことで、コンロの火力（発熱量）を変化させ、あるいは、該コンロの加熱運転を停止させることができる。
【００７７】
上記の如く、画像情報Ｄ１０ｂを用いて調理装置Ａの運転操作を行い得るようにすることで、ユーザＰは、自身の手指を調理装置Ａや、表示デバイス２の接触させることなく、調理装置Ａの運転操作を行うことができる。
【００７８】
補足すると、ＳＴＥＰ８では、表示制御部１０は、調理装置Ａの制御部ａ１から取得した情報の他、実行対象の調理工程に関連する他の補助情報（例えば調理作業のこつ等を示す補助情報）を前記外部機器Ｂから取得して、当該補助情報を示す画像情報を表示デバイス２の画像表示部４，４で表示させるようにしてもよい。
【００７９】
図３の説明に戻って、ＳＴＥＰ６又はＳＴＥＰ８で、上記の如く表示デバイス２による画像情報の表示が行われるのと並行して、ＳＴＥＰ９において、調理装置Ａの制御部ａ１は、調理装置Ａの異常（例えば、コンロのバーナの失火、調理物（又は調理容器）の過熱異常等）が発生したか否を判断する。
【００８０】
そして、異常が発生した場合には、調理装置Ａの制御部ａ１は、ＳＴＥＰ１３において、当該異常の発生を示す警報報知を調理装置Ａで行うように該調理装置Ａの警報ランプもしくは警報ブザー等の報知部を作動させると共に、該警報報知を表示デバイス２で行うように表示制御部１０に指令する。
【００８１】
このとき、表示制御部１０は、異常の発生及び該異常の種類等を示す画像情報を画像表示部４，４で表示させることで、該画像情報をユーザＰに視認させる。これにより、ユーザＰは、異常の発生を確実に認識することができる。なお、この場合、例えば、当該異常の発生に対してユーザＰが実行するべき処置の内容などを示す画像情報を、画像表示部４，４で表示させるようにしてもよい。
【００８２】
ＳＴＥＰ９で異常が発生していない場合には、調理装置Ａの制御部ａ１は、ＳＴＥＰ１０において、実行対象の調理工程が完了したか否かを判断する。
【００８３】
この場合、実行対象の調理工程の担当が、調理装置Ａである場合には、調理装置Ａの制御部ａ１は、実行対象の調理工程に係る制御処理の終了時に、該調理工程の完了を認識する。
【００８４】
また、実行対象の調理工程の担当がユーザＰである場合には、例えばユーザＰが、実行対象の調理工程の作業の完了後に、自身の手指を、表示デバイス２の正面側で所定の態様で動かすことによって、実行対象の調理工程の完了を示す情報が表示制御部１０から調理装置Ａの制御部ａ１に送信される。あるいは、ユーザＰが、実行対象の調理工程の作業の完了後に、調理装置Ａの所定の操作を行う。これにより、調理装置Ａの制御部ａ１は、実行対象の調理工程の完了を認識する。
【００８５】
なお、実行対象の調理工程の担当がユーザＰである場合に、例えば、カメラ５の撮影データに基づいて、もしくは、ユーザＰの音声に基づいて、表示制御部１０あるいは調理装置Ａの制御部ａ１が、実行対象の調理工程の完了を認識するようにすることも可能である。
【００８６】
ＳＴＥＰ１０で実行対象の調理工程が完了していない場合（ＳＴＥＰ１０の判断結果が否定的である場合）には、ＳＴＥＰ９からの処理を繰り返される。
【００８７】
また、ＳＴＥＰ１０で実行対象の調理工程が完了した場合（ＳＴＥＰ１０の判断結果が肯定的である場合）には、調理装置Ａの制御部ａ１は、次順位の調理工程が有るか否かをＳＴＥＰ１１で判断する。
【００８８】
このＳＴＥＰ１１の判断結果が肯定的である場合（次順位の調理工程が有る場合）には、調理装置Ａの制御部ａ１は、ＳＴＥＰ１２において、実行対象の調理工程を、当該次順位の調理工程に更新する。その後、ＳＴＥＰ５からの処理が繰り返される。
【００８９】
そして、レシピ工程の全ての調理工程が完了して、ＳＴＥＰ１１の判断結果が否定的になると、図３のフローチャートの処理は終了する。
【００９０】
以上説明した実施形態によれば、ユーザＰは、所望の調理メニューの調理中に、表示デバイス２や、調理装置Ａに手指を接触させずとも、任意の調理作業と並行して、当該調理メニューの調理に関する種々様々な補助情報を、実体物の映像と併せてリアルタイムで視覚的に取得することができる。このため、ユーザＰは、快適且つ円滑に調理作業を遂行できる。
【００９１】
また、表示デバイス２がユーザＰの頭部に装着された状態で、ユーザＰがその視野域の実体物の映像を視認しながら、各種作業を行うことができるので、該表示デバイス２が作業の邪魔になったりすることがなく、該表示デバイス２を快適に活用することができる。
【００９２】
なお、以上説明した実施形態では、調理装置Ａがコンロシステムである場合を一例として示したが、調理装置Ａは、例えばオーブン、オーブンレンジ等の他の調理装置であってもよい。
【符号の説明】
【００９３】
１…調理支援装置、２…表示デバイス、１０…表示制御部、Ａ…調理装置、Ｂ…外部機器。
【図１】
2019016322.tif 000003
【図２】
2019016322.tif 000004
【図３】
2019016322.tif 000005
【図４】
2019016322.tif 000006
【図５】
2019016322.tif 000007
【図６】
2019016322.tif 000008
【図７】
2019016322.tif 000009
【図８】
2019016322.tif 000010