(57)【要約】      （修正有）【課題】使い勝手や安全性を向上しながら、使用者の意図に応じて自動で扉を開けることができる冷蔵庫を提供する。【解決手段】冷蔵庫１は、本体と、本体の前面開口部を閉鎖する扉と、本体に設けられて冷蔵庫１の制御を行う制御部１００と、使用者の目を検出する目検出手段６１を有し、目が目検出手段６１により検出され、目の所定の視線動作を検出した場合に、検出した目の所定の視線動作に基づいて、制御部１００の制御内容の変更、例えば開扉装置５１，５２を動作させることで扉を開く動作をさせる。【選択図】図２
2017040422.tif 000002
【特許請求の範囲】
【請求項１】
本体と、
前記本体の前面開口部を閉鎖する扉と、
前記本体に備えられ冷蔵庫の制御を行う制御部と、
使用者の目を検出する目検出手段と、を有し、
前記目を前記目検出手段により検出して、検出した前記目の所定の視線動作に基づいて、前記制御部の制御内容を変更する冷蔵庫。
【請求項２】
前記扉を動作させる開扉装置と、
前記扉の前面に配置された撮像装置と、を有し、
前記目を前記撮像装置の画像に基づいて前記目検出手段により検出して、前記目の所定の視線動作を検出した場合に、前記制御部の制御内容として前記開扉装置を動作させる請求項１に記載の冷蔵庫。
【請求項３】
前記扉は観音開き式扉である場合に、前記扉を開けるための前記目の所定の視線動作は、少なくとも２種類の動作のパターンを有し、前記目の所定の視線動作の種類に応じて、開ける前記扉を選択できる請求項２に記載の冷蔵庫。
【請求項４】
前記目を前記目検出手段により検出するか、前記目の所定の視線動作を検出した場合に、前記使用者に報知する報知部を有する請求項１ないし３のいずれかに記載の冷蔵庫。
【請求項５】
前記撮像装置の画像から前記冷蔵庫と前記使用者との距離を推定する距離推定手段を有し、前記距離が所定値以内の場合には、前記開扉装置を動作させない請求項２ないし４のいずれかに記載の冷蔵庫。
【請求項６】
前記撮像装置の画像から前記使用者の手を検出する手検出手段を有し、前記手検出手段により前記使用者の前記手があることを確認した後に、前記開扉装置を動作させる請求項５に記載の冷蔵庫。
【請求項７】
前記人感センサを有しており、前記人感センサの検出中に、前記目検出手段を動作させる請求項１ないし６のいずれかに記載の冷蔵庫。
【請求項８】
前記扉の前面に操作パネルを有しており、前記操作パネルの操作中は、前記目の所定の視線動作の検出動作、もしくは前記制御部の制御内容を変更する動作をさせない請求項１ないし７のいずれかに記載の冷蔵庫。
【請求項９】
前記目の所定の視線動作では、ある特定の方向へ視線を向ける毎に、前記制御部の制御内容の変更として、前記冷蔵庫の運転モードの強弱を変更する請求項１ないし８のいずれかに記載の冷蔵庫。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施の形態は、冷蔵庫に関する。
【背景技術】
【０００２】
従来、特許文献１に開示されている冷蔵庫の扉は、使用者（ユーザ）が開扉スイッチを押すことで、自動で扉を開けるようになっている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第３９４６４０７号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、使用者が物を持っている等で両手が塞がっている場合には、使用者は手の指ではなく肘等を使って不安定な姿勢で、冷蔵庫の制御内容の変更用のスイッチを押す必要がある。特に、このスイッチが静電スイッチである場合には、このスイッチは、静電容量を検出することでオンするために、使用者が意図しない場合でも、冷蔵庫の制御内容が変更されてしまう等のケースが想定できることから、冷蔵庫の使い勝手の向上をさらに図り、安全性を高めることが望まれている。
【０００５】
本発明は、上記に鑑みてなされたもので、その目的とするところは、使い勝手や安全性を向上しながら、使用者の意図に応じて自動で制御部の制御内容を変更することができる冷蔵庫を提供することにある。
【課題を解決するための手段】
【０００６】
本発明の実施の形態の冷蔵庫は、本体と、前記本体の前面開口部を閉鎖する扉と、前記本体に備えられ冷蔵庫の制御を行う制御部と、使用者の目を検出する目検出手段と、を有し、前記目を前記目検出手段により検出して、検出した前記目の所定の視線動作に基づいて、前記制御部の制御内容を変更する。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施形態に係わる冷蔵庫の全体を示す正面図である。
【図２】冷蔵庫の電気的な構成要素の接続例を示すブロック図である。
【図３】図２に示す画像取得部の撮像装置の好ましい例を示す図である。
【図４】使用者の「所定の視線動作」の例を示す図である。
【図５】使用者の「所定の視線動作」の別の例を示す図である。
【図６】使用者の「所定の視線動作」のさらに別の例を示す図である。
【図７】使用者Ｍが冷蔵庫の扉の至近距離にいる様子を示す側面図である。
【図８】使用者Ｍが冷蔵庫の扉からある程度の距離だけ離れた位置にいる様子を示す側面図である。
【図９】使用者Ｍが冷蔵庫の扉からの距離が遠い位置にいる様子を示す側面図である。
【図１０】使用者の目を利用して冷蔵庫と使用者Ｍ間の距離ｒを得る例を示す図である。
【図１１】図２に示す開扉装置が、扉の回転速度ｖを制御可能であり、例えばモータと歯車を用いるモータギヤ駆動方式である場合を示す図である。
【発明を実施するための形態】
【０００８】
以下、図面を用いて、本発明の実施するための形態（以下、実施形態と称する）を説明する。
【０００９】
図１は、本発明の実施形態に係わる冷蔵庫の全体を示す正面図である。
【００１０】
図１に示す冷蔵庫１は、本体１Ａを有している。この冷蔵庫１の本体１Ａは、左側面部１７と、右側面部１８と、上面部１９と、底面部１５と、背面部１６を有している。本体１Ａは、外側側板からなる外箱と、内側側板からなる内箱を有する。この外箱と内箱の間には、断熱材が配置されているので本体１Ａは断熱性を有する。この本体１Ａの内部には、複数の貯蔵室が形成されている。
【００１１】
図１に例示するように、貯蔵室としては、上から順に冷蔵室２、野菜室３が設けられ、この野菜室３の下には製氷室４と小冷凍室５が左右の並べて設けられ、最下部に主冷凍室６が設けられている。
【００１２】
冷蔵室２の前面には、冷蔵室２の前面開口部を開閉する左右の扉７，８が設けられている。左右の扉７，８は、観音開き式扉であり、左側の扉７の左端部が図示しないヒンジにより回動可能に取り付けられている。同様にして、右側の扉８の右端部が図示しないヒンジにより回動可能に取り付けられている。
【００１３】
図１に示すように、野菜室３、製氷室４、小冷凍室５、主冷凍室６の各前面には、各前面開口部を開閉する引出し式の扉９，１０，１１，１２が設けられている。左右の扉７，８と、引出し式の扉９，１０，１１，１２は、内部に断熱材を設けることで、断熱性を有している。
【００１４】
図１に示すように、左右の扉７，８，と引出し式の扉９，１０，１１，１２の各前面（外面）には、好ましくは前面板７Ａ，８Ａ，９Ａ，１０Ａ，１１Ａ，１２Ａが配置されている。前面板７Ａ，８Ａ，９Ａ，１０Ａ，１１Ａ，１２Ａは、好ましくは透光性を有するガラス板あるいは透明なガラス板である。これにより、冷蔵庫１の外観デザイン上の見栄えを良くしている。
【００１５】
本体１Ａの背面位置には、機械室が設けられており、この機械室には、図示しない圧縮器、凝縮器、三方弁等が配置されている。本体１Ａの背面位置には、例えば野菜室３の後側に、冷蔵室送風機と冷蔵室冷却器と送風ダクトが配置されている。冷蔵室冷却器は、冷蔵室２と野菜室３を冷却する。冷蔵室送風機は、冷蔵室冷却器により冷却された冷気を循環させる。
【００１６】
また、本体１Ａの背面位置には、例えば製氷室４と小冷凍室５と主冷凍室６の後側に、図示しない冷凍室送風機と冷凍室冷却器と送風ダクトが配置されている。冷凍室冷却器は、製氷室４と小冷凍室５と主冷凍室６を冷却する。冷凍室送風機は、冷凍室冷却器により冷却された冷気を循環させる。
【００１７】
圧縮機は、冷凍サイクルを構成する三相ブラシレスモータで回転する。圧縮機から吐出された冷媒は、凝縮器を通り、三方弁により、貯蔵室、冷凍室へと流路を切り替えることで、キャプラリーチューブを経由して、冷蔵室冷却器と冷凍室冷却器に送られて、冷蔵室冷却と冷凍室冷却を交互に実施する。
【００１８】
図１に示すように、開扉装置５１，５２が、例えば本体１Ａの上面部１９に設けられている。開扉装置５１，５２は、動作することで、観音式の扉７，８をそれぞれ自動的に開けることができる。
【００１９】
図１に示す観音開き式の扉７，８の内の例えば左側の扉７の前面には、一例として操作パネル２００が設けられている。この操作パネル２００は、好ましくは前面板７Ａの内側に配置され、例えば操作領域２０と、表示領域２１を有している。操作領域２０は、例えば使用者が指を接触させることで、冷蔵庫１の各種の操作機能をタッチ操作入力できる。この操作領域２０は、例えば冷蔵室の温度設定、冷凍室の温度設定、各種の機能設定等を行う。表示領域２１は、例えば冷蔵や冷凍に関する各種の表示項目を表示する。
【００２０】
図１に示すように、扉７の前面には、例えば操作パネル２００の前面の上部の位置に、撮像装置３０が配置されている。この撮像装置３０は、撮像することにより、使用者の「目」を確認する。そして、撮像装置３０から得られる画像に基づいて、目の「所定の視線動作」が確認された場合には、開扉装置５１，５２の少なくとも一方が動作して、使用者が意図した扉７，８の一方もしくは両方を、自動で開けることができる仕組みになっている。
【００２１】
これにより、使用者は、指で扉７，８に対して直接静電タッチしなくても、使用者の意図に応じた左右の扉７，８の一方もしくは両方を、自動で開くことができる。しかも、指で扉７，８に対して直接静電タッチしないので、指の接触による扉７，８の汚れを防止できる。
【００２２】
図２は、冷蔵庫１の電気的な構成要素の接続例を示すブロック図である。図３は、図２に示す画像取得部４０の撮像装置３０の好ましい例を示している。
【００２３】
図２に示すように、冷蔵庫１は、主制御部１００を有しており、主制御部１００は、画像取得部４０と、自動扉開閉装置の一例である開扉装置５１，５２と、人感センサ５０と、操作パネル２００と、報知部４８に電気的に接続されている。開扉装置５１，５２は、例えば電磁ソレノイドを使用するソレノイド方式のものである。
【００２４】
主制御部１００がこのソレノイド式の開扉装置５１を駆動すると、図１に示す左側の扉７を押して開くことができ、必要に応じて扉７を閉じる際に所定量だけ閉じることもできる。同様にして、主制御部１００がソレノイド式の開扉装置５２を駆動すると、図１に示す右側の扉８を押して開くことができ、必要に応じて扉８を閉じる際に所定量だけ閉じることもできる。
【００２５】
ただし、自動扉開閉装置としての開扉装置５１，５２としては、ソレノイド式の開扉装置ではなく、モータとギヤを用いたモータギヤ駆動方式のものであっても良い。
【００２６】
図２に示す人感センサ５０は、図１に示すように冷蔵庫１の例えば左側の扉７の前面、もしくは右側の扉８の前面に設けられている。人感センサ５０は、使用者等の人が冷蔵庫１に近づいたことを、非接触で検出するセンサである。人感センサ５０としては、例えば静電容量の変化により、冷蔵庫１に人が予め定めた距離の範囲内に近づいたことを検出する静電容量センサや、赤外線を照射して、冷蔵庫１に人が予め定めた距離の範囲内に近づいたことを検出する赤外線センサ等を用いることができる。
【００２７】
図２に示す報知部４８は、ブザー等の音発生装置や、光を発するＬＥＤランプ等の発光装置、あるいはその両方により構成されており、使用者に対して音や光の発生により、必要な報知事項を報知する。
【００２８】
図２に示すように、画像取得部４０は、撮像装置３０と、画像処理部６０を有している。撮像装置３０は、画像処理部６０に電気的に接続されている。
【００２９】
画像取得部４０は、使用者等の人体の特定の部位の画像を検出して必要な画像処理を行って、主制御部１００に通知する。この画像取得部４０の撮像装置３０としては、好ましくは図３（Ａ）に示すように、赤外線カメラ３１と赤外線ＬＥＤ（発光ダイオード）３２の組み合わせにより構成されている。
【００３０】
図１に示すように、赤外線カメラ３１と赤外線ＬＥＤ３２は、好ましくは左側の扉７の前面において操作パネル２００の上部の位置に配置されている。このように、左側の扉７の前面において操作パネル２００の上部の位置に配置されていることにより、赤外線カメラ３１と赤外線ＬＥＤ３２は、使用者等の人体の画像を取得し易い。なお、例えば赤外線カメラ３１は、赤外線ＬＥＤ３２に比べて斜め下の位置に配置されているが、赤外線カメラ３１と赤外線ＬＥＤ３２の配置位置は、これに限定されない。
【００３１】
図２に示すように、画像処理部６０は、目検出手段６１と、視線検出手段６２と、手検出手段６３と、距離推定手段６４を有している。
【００３２】
画像処理部６０の目検出手段６１は、撮像装置３０の赤外線カメラ３１で得られる画像情報Ｇから、使用者の「目」を検出することで、使用者の目の存否を確認する。画像処理部６０の視線検出手段６２は、使用者の「目」において目の「所定の視線動作」があるかどうかを検出する。目検出手段６１が使用者の「目」を確認した場合や、視線検出手段６２が目の「所定の視線動作」を検出した場合には、報知部４８は、その度に、使用者に報知するようになっている。
【００３３】
これにより、画像処理部６０が「目」を検出した時や、目の「所定の視線動作」を検出した場合には、報知部４８が使用者に対してその旨を報知するので、使用者は、それぞれの検出の有無を確認できる。このため、使用者は、冷蔵庫１側において、使用者の検出動作が行えているかどうかの疑問を、解消することができる。従って、使用者は、目の「所定の視線動作」をスムーズに実行でき、使用者による使用勝手や操作性が向上できる。
【００３４】
図３は、図２に示す画像取得部４０の撮像装置３０の好ましい実際の例を示している。図３（Ａ）は、撮像装置３０として赤外線カメラ３１と赤外線ＬＥＤ３２を組み合わせたユニットを採用した場合を示し、図３（Ｂ）は、撮像装置３０として可視光カメラ３３を採用した場合を示している。
【００３５】
図３（Ａ）に示すように、撮像装置３０が、赤外線カメラ３１と赤外線ＬＥＤ３２の組み合わせユニットである場合には、赤外線ＬＥＤ３２が扉７の前面から使用者に対して赤外線を照射することで、赤外線カメラ３１は、その反射した赤外線から直接、目の角膜反射３０１を検出する。図３では、目として、左目３００を例に挙げている。
【００３６】
この角膜反射３０１と瞳孔３０２の位置関係により推定して、もし左目３００において、角膜反射３０１よりも瞳孔３０２が目じり３０３側にあれば、左側を見ており、角膜反射３０１よりも瞳孔３０２が目頭３０４側にあれば、右側を見ていることになる。右目においては、左目の逆である。
【００３７】
赤外線カメラ３１が撮像したこの角膜反射３０１は、画像処理部６０において画像処理がし易いために、目の検出精度が良いというメリットがある。また、可視光カメラを用いる場合には、特に周囲が暗い時は可視光のＬＥＤを必要とするために、使用者にとっては眩しく不快に感じることもあるが、赤外線カメラ３１と赤外線ＬＥＤ３２を用いる場合には、可視光のＬＥＤを用いないために、眩しくないメリットがある。
【００３８】
このようにして、赤外線カメラ３１と赤外線ＬＥＤ３２から成る撮像装置３０と画像処理部６０の目検出手段６１を用いることで、目検出手段６１が、使用者の「目」が検出視野内に入ったことを検出して確認してから、視線検出手段６２が使用者の目の「所定の視線動作」を検出する。これにより、使用者が目の「所定の視線動作」をすることで、主制御部１００は、画像処理部６０からの使用者が目の「所定の視線動作」を行ったことを示す信号を受ける。従って、主制御部１００は、開扉装置５１，５２を駆動して、使用者が意図する扉７，８の少なくとも一方を、自動的に開けることができるようになっている。
【００３９】
画像処理部６０の目検出手段６１は、使用者の目が検出視野内に入ったことを検出したことや、視線検出手段６２が使用者の目の「所定の視線動作」を検出した時には、主制御部１００は、報知部４８を動作させて、音または光もしくはそれらの両方により、使用者に報知することができる。
【００４０】
これにより、使用者により操作性が向上する。報知部４８を設けることにより、画像取得部４０は、使用者の目の「所定の視線動作」を検出した際に、使用者にその旨を報知することで、次に扉が自動で開くことを認識させることができ、いつ扉が開くのかが分からないという不安や、扉が突然開いた時の驚きを無くすことができる、冷蔵庫１の使用上の安全性が向上する。
【００４１】
このため、画像取得部４０は、使用者の目の「所定の視線動作」を検出するという使用者の意図を読み取るために、扉を開く際の誤動作や不用意な姿勢で扉を開けるといったことを防止することができる。
【００４２】
画像取得部４０の撮像装置３０としては、図２と図３（Ａ）に示す赤外線カメラ３１と赤外線ＬＥＤ（発光ダイオード）３２により構成するのが好ましい。しかし、図３（Ｂ）に示すように、可視光カメラ３３を採用しても良い。可視光カメラ３３としては、例えばＣＣＤ（電荷結合素子）カメラを用いることができる。
【００４３】
この可視光カメラ３３を使用する場合には、図３（Ｂ）に示すように、目頭３０４から虹彩３０５を推定しており、もし左目の虹彩３０５が目頭３０４に近ければ、右側を見ており、左目の虹彩３０５が目頭３０４から遠ければ、左側を見ていることになる。右目においては、左目の逆である。
【００４４】
次に、上述した使用者の目の「所定の視線動作」について、具体的に説明する。
【００４５】
図４は、使用者の目の「所定の視線動作」の例を示している。
【００４６】
図４に示すように、使用者の目の「所定の視線動作」の例としては、使用者が、「所定範囲内に視線を注視」することであり、具体的には、使用者は、画像取得部４０の撮像装置３０に対して視線を注視して、次に説明する例えば第１特定動作パターンから第３特定動作パターンに従って視線を動かすことである。
【００４７】
図４に示すように、第１特定動作パターンでは、使用者は、撮像装置３０に視線を注視した後に、撮像装置３０から左側の扉７の領域ＡＲ１に視線を送って領域ＡＲ１を注視する。この場合には、図２に示す赤外線カメラ３１で得られる画像情報Ｇから、画像処理部６０の目検出手段６１が「目」の存在を検出して、視線検出手段６２が、撮像装置３０から左側の扉７の領域ＡＲ１に視線を送って領域ＡＲ１を注視したことを検出する。これにより、図３の主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５１を動作させることで、使用者が意図する左側の扉７を自動的に開けることができる。このため、使用者は、扉７が開く前に報知して事前に扉７が開く合図を送ることで、使用者の安全性を向上することができる。
【００４８】
図４に示すように、第２特定動作パターンでは、使用者は、撮像装置３０に視線を注視した後に、撮像装置３０から右側の扉８の領域ＡＲ２に視線を送って領域ＡＲ２を注視する。この場合には、図２に示す赤外線カメラ３１で得られる画像情報Ｇから、画像処理部６０の目検出手段６１が「目」の存在を検出して、視線検出手段６２が、撮像装置３０から右側の扉８の領域ＡＲ２に視線を送って領域ＡＲ２を注視したことを検出する。これにより、図３の主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５２を動作させることで、使用者が意図する右側の扉８を自動的に開けることができる。このため、使用者は、扉８が開く前に報知して事前に扉８が開く合図を送ることで、使用者の安全性を向上することができる。
【００４９】
さらに、図４に示すように、第３特定動作パターンでは、使用者は、撮像装置３０に視線を注視した後に、撮像装置３０から中央の領域ＡＲ３に視線を送って領域ＡＲ３を注視する。この場合には、図２に示す赤外線カメラ３１で得られる画像情報Ｇから、画像処理部６０の目検出手段６１が「目」の存在を検出して、視線検出手段６２が、撮像装置３０から中央の領域ＡＲ３に視線を送って領域ＡＲ３を注視したことを検出する。これにより、図３の主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５１，５２を動作させることで、使用者が意図する左右の扉７，８を自動的に開けることができる。このため、使用者は、扉７，８が開く前に報知して事前に扉７，８が開く合図を送ることで、使用者の安全性を向上することができる。
【００５０】
このようにして、使用者が撮像装置３０を注視した後に、視線を意図的に動かすことにより、使用者が意図する左側の扉７あるいは右側の扉８を自動的に開けたり、あるいは両方の扉７，８を同時に自動的に開けることができる。すなわち、使用者は、視線を動かすことで、扉７，８には非接触で、開けたい扉を意図的に選択することができる。このため、冷蔵庫１では、扉７，８に触れることなく冷蔵庫１に保存した食材の出し入れが可能であり、汚れた手で扉７，８を汚してしまう、あるいは扉７，８が汚れているために手が汚れるという事態を防止できるなど、使い勝手や安全性を向上しながら、使用者の意図に応じて自動で扉を開けることができる。
【００５１】
次に、図５を参照して、使用者の目の「所定の視線動作」の別の例を説明する。
【００５２】
図５は、使用者の目の「所定の視線動作」の別の例を示している。使用者の目の「所定の視線動作」は、使用者の目の開閉であり、使用者の２種類以上の意図的な「目の瞬き」の動作パターンである。この使用者の「目の瞬きの回数」は、図３に示す例えば画像処理部６０の目検出手段６１が計測できる。使用者は、使用者が撮像装置３０を注視した後に、「目の瞬きの回数」に応じて、開けたい扉を意図的に選択することができる。
【００５３】
図５に例示するように、使用者は、撮像装置３０に視線を注視した後、使用者が「目の瞬きの回数」を１回すると、画像処理部６０からの信号により、主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５１を動作させることで、使用者が意図する左側の扉７を、自動的に開けることができる。このため、使用者は、扉７が開く前に報知して事前に扉７が開く合図を送ることで、使用者の安全性を向上することができる。
【００５４】
また、使用者は、撮像装置３０に視線を注視した後、使用者が「目の瞬きの回数」を２回すると、画像処理部６０からの信号により、主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５２を動作させることで、意匠者が意図する右側の扉８を自動的に開けることができる。このため、使用者は、扉８が開く前に報知して事前に扉８が開く合図を送ることで、使用者の安全性を向上することができる。
【００５５】
さらに、使用者は、撮像装置３０に視線を注視した後、使用者が「目の瞬きの回数」を３回すると、画像処理部６０からの信号により、主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５１，５２を動作させることで、使用者が意図する左右両側の扉７，８を、自動的に開けることができる。このため、使用者は、扉７，８が開く前に報知して事前に扉７，８が開く合図を送ることで、使用者の安全性を向上することができる。
【００５６】
このように、使用者は、所定数の目の瞬きを行うことで、扉７，８には非接触で、開けたい扉を意図的に選択することができる。このため、冷蔵庫１では、使い勝手や安全性を向上しながら、使用者の意図に応じて自動で扉を開けることができる。
【００５７】
次に、図６を参照して、使用者の目の「所定の視線動作」の別の例を説明する。
【００５８】
図６は、使用者の目の「所定の視線動作」のさらに別の例を示している。使用者の目の「所定の視線動作」は、使用者が撮像装置３０を注視した後に、左へ、あるいは右へ、あるいは上へ視線を動かすことである。
【００５９】
図６（Ａ）では、使用者は、撮像装置３０に視線を注視した後、図６（Ｂ）に示すように、使用者は、撮像装置３０から左側へ視線を向ける。これにより、画像処理部６０からの信号により、主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５１を動作させることで、使用者が意図する左側の扉７を自動的に開けることができる。このため、使用者は、扉７が開く前に報知して事前に扉７が開く合図を送ることで、使用者の安全性を向上することができる。
【００６０】
また、図６（Ｃ）に示すように、使用者は、撮像装置３０に視線を注視した後、撮像装置３０から右側へ視線を向ける。これにより、画像処理部６０からの信号により、主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５２を動作させることで、使用者が意図する右側の扉８を自動的に開けることができる。このため、使用者は、扉８が開く前に報知して事前に扉８が開く合図を送ることで、使用者の安全性を向上することができる。
【００６１】
さらに、図６（Ｄ）に示すように、使用者は、撮像装置３０に視線を注視した後、撮像装置３０から上側へ視線を向ける。これにより、画像処理部６０からの信号により、主制御部１００は、報知部４８を動作させて使用者に報知後に、開扉装置５１，５２を動作させることで、使用者が意図する左右の扉７、８を自動的に開けることができる。このため、使用者は、扉７，８が開く前に報知して事前に扉７，８が開く合図を送ることで、使用者の安全性を向上することができる。
【００６２】
このように、使用者は、所定方向に視線を向けることで、扉７，８には非接触でありながら、開けたい扉を意図的に選択することができる。このため、冷蔵庫１では、使い勝手や安全性を向上しながら、使用者の意図に応じて自動で扉を開けることができる。
【００６３】
ところで、図４と図５と図６を参照して説明した各種の使用者の目の「所定の視線動作」を、任意に組み合わせることができる。このように各種の使用者の目の「所定の視線動作」を組み合わせることにより、上述した図４と図５と図６に示す各種の目の「所定の視線動作」による開扉操作を認知していない子供が、偶然に誤って扉７，８を開けてしまうリスクを低減できることから、安全性と使い勝手が向上できる。
【００６４】
具体的例を挙げれば、例えば、図４に示すように、使用者が、撮像装置３０に視線を注視した後、撮像装置３０から左側の扉７の領域ＡＲ１に視線を送って領域ＡＲ１に向けた後に、図５に示す使用者が「目の瞬きの回数」を１回することで、左側の扉７が開く等の組み合わせを採用することができる。このため、認知していない子供等の使用者が、偶然に誤って扉７，８を開けてしまうリスクを低減でき、使用者の安全性を向上できる。
【００６５】
上述したように、図４から図６に示す使用者の目の「所定の視線動作」の各例では、複数種類の目の「所定の視線動作」を少なくとも２パターン以上設定することにより、使用者は、開けたい扉７，８の少なくとも一方を意図的に選択して開けることができる。
【００６６】
次に、図７から図９を参照して、冷蔵庫１を使用する際の安全性をさらに向上する実施形態を説明する。
【００６７】
図７は、使用者Ｍが冷蔵庫１の扉７，８の至近距離にいる様子を示す側面図である。図８は、使用者Ｍが冷蔵庫１の扉７，８からある程度の距離だけ離れた位置にいる様子を示す側面図である。図９は、使用者Ｍが冷蔵庫１の扉７，８からの距離が遠く離れた位置にいる様子を示す側面図である。
【００６８】
図７に示すように、使用者Ｍが冷蔵庫１の扉７，８の至近距離にいる時には、扉７，８が自動的に開いるのを禁止して、衝突を避けることができる。図２に示す画像処理部６０の手検出手段６３は、撮像装置３０の赤外線カメラ３１から得られる使用者Ｍの画像情報Ｇから、使用者の手Ｈを検出する。
【００６９】
図７の例では、使用者Ｍの手Ｈが、画像情報Ｇの視野範囲Ｆ内から外れた位置にあるので、図２に示す主制御部１００は、使用者Ｍが扉７，８に接近していると判断して、主制御部１００は、開扉装置５１，５２共に動作させない。これにより、扉が使用者に衝突を防ぐことができる。
【００７０】
また、図８では、使用者Ｍは、手Ｈを挙げて、扉７，８が開くことに対応して準備しているので、使用者Ｍの手Ｈが、画像の視野範囲Ｆ内にある。このため、図２に示す主制御部１００は、使用者Ｍが扉７，８を開ける意図があるものとして、主制御部１００は開扉装置５１，５２の少なくとも一方を動作させて、使用者が意図する扉７，８の少なくとも一方を開ける。
【００７１】
このように、図２に示す画像処理部６０は、目検出手段６１に加えて、使用者Ｍの手Ｈを検出する手検出手段６３を備えていることにより、主制御部１００は、少なくとも扉７，８が開く範囲内では、扉７，８が開いた時に扉７，８を即座に手Ｈで受け止める動作が可能であるかどうかを確認することができる。
【００７２】
図７と図８の場合とは逆に、図９に示すように、使用者Ｍが冷蔵庫１の扉７，８からの距離が遠い位置にいる場合には、撮像装置３０から得られる使用者Ｍの画像の視野範囲Ｆ内には自然と使用者Ｍの手Ｈが写りこむために、扉を開くことに対する安全性の確保が確認できる。
【００７３】
実際には、使用者Ｍまでの距離を測定しているわけではないために、冷蔵庫１の扉７，８の寸法（例えば短辺寸法が４０ｃｍ）に合わせて、撮像装置３０の仕様や取付け位置等を調整することになるため、撮像装置３０の仕様や取付け位置の関係については特に限定はしない。
【００７４】
図７から図９を参照すると分かるように、図２に示す画像取得部４０の手検出手段６３は、撮像装置３０の画像情報Ｇの視野範囲Ｆ内に、使用者Ｍの手Ｈが写りこむかどうかの確認をすることで、使用者Ｍが手Ｈで扉７，８を開ける意図があるかどうかを判断して、不用意に扉７，８が開かないように、安全性の向上を図っている。
【００７５】
ところ、図７に示すように、撮像装置３０の床面からの高さＨＴの最適値は、好ましくは１．５ｍであるが、高さＨＴの取りうる好ましい範囲としては、１．４ｍ±０．２ｍである。
【００７６】
図１０は、使用者の「目」を利用して、冷蔵庫１と使用者Ｍ間の距離ｒを得る例を示している。
【００７７】
図２に示すように、画像処理部６０は、距離推定手段６４を備えている。この距離推定手段６４は、図１０（Ａ）に示すように、冷蔵庫１と扉７，８の前にいる使用者Ｍの距離ｒを推定する。この距離ｒが、所定値以内、例えば冷蔵庫１の扉７，８の寸法（例えば短辺寸法ｄが４０ｃｍ）以内の場合には、図２の主制御部１００は、開扉装置５１，５２を共に動作させずに、扉７，８のいずれも自動では開かないようにする。これにより、扉７，８が使用者Ｍと衝突するのを防止するので、安全性を向上できる。
【００７８】
図１０（Ｂ）に示すように、図１０（Ａ）に示す撮像装置３０が使用者Ｍの「目」を検出した場合には、図２の画像処理部６０が得る、例えば黒目の虹彩等に対応する画像情報Ｇにおけるピクセル（ｐｉｘｅｌ）数の値から、冷蔵庫１からの使用者Ｍの距離ｒを推定する。
【００７９】
人の黒目の大きさは、個人差が少ないので、冷蔵庫１からの使用者Ｍの距離ｒを推定するために、黒目の虹彩等を利用するのが望ましい。さらに、この黒目は瞼で隠れる部分あるので、より好ましくは黒目の水平方向寸法（横幅）に対応するピクセル数の値から、距離ｒを推定することがより好ましい。
【００８０】
なお、使用者Ｍが「目」にカラーコンタクトレンズを装着している場合には、黒目の大きさが実際の黒目の大きさよりも大きくなることがある。この場合には、図２に示す画像処理部６０の距離推定手段６４では、予めそのことを考慮して調整して距離の推定をする。
【００８１】
距離推定手段６４は、この他に人の特徴部分の検出有無に応じて、距離を推定することができ、例えば図７から図９において説明したように、使用者Ｍの手Ｈが画像情報Ｇの視野範囲Ｆにおいて有るか無いかにより、冷蔵庫１と使用者Ｍとの距離が近いか遠いかを推定することができる。
【００８２】
また、距離推定手段６４としては、上述したピクセルを用いて距離を推定する方式以外に、例えば２台のＣＣＤカメラを用いて距離ｒを推定したり、超音波センサを用いて距離ｒを推定する方式が採用できる。
【００８３】
図２に示すように、冷蔵庫１は、例えば扉７の前面に、人感センサ５０を搭載している。この人感センサ５０が、使用者の存在を検出している最中には、主制御部１００は、画像処理部６０の目検出手段６１を動作させるようにしているが、人感センサ５０が、使用者の存在を検出していない時には、主制御部１００は、目検出手段６１の動作を停止する。これにより、使用者が不在時に、目検出手段６１が不要な動作をするのを防止することで、冷蔵庫１の省電力化に寄与できる。
【００８４】
次に、図１１は、図２に示す開扉装置５１，５２が、扉７，８の回転速度ｖを制御可能な場合を示している。この場合には、開扉装置５１，５２は、例えばモータとギヤを用いるモータギヤ駆動方式である。冷蔵庫１と使用者Ｍ間の距離ｒは、例えば図２に示す目検出手段６１から推定することができる。
【００８５】
図１１に示すように、冷蔵庫１と使用者Ｍ間の距離ｒに応じて、扉７，８の回転速度ｖが可変する。例えば、距離ｒが５０ｃｍ未満であれば、回転速度ｖは、１０ｃｍ／ｓとして、距離ｒが５０ｃｍ以上で１００ｃｍ未満であれば、回転速度ｖは、高めて２０ｃｍ／ｓとし、そして距離ｒが１００ｃｍ以上離れていれば、回転速度ｖは、さらに高めて３０ｃｍ／ｓとする。
【００８６】
これにより、冷蔵庫１と使用者Ｍ間の距離ｒを把握することにより、開扉装置５１，５２により開く扉７，８の速度を変えることで、使用者が離れていれば扉を早く開けることができ、使用勝手が上がり、安全性を向上することができる。特に扉７，８の庫内側に設ける収納容器である図示しないポケットの容量を大きくする、あるいはポケットに重量物を収納するなどして、扉７，８を開放する際に必要となる力が大きい場合、また、開扉時の速度を高める場合には、使用者が開放された扉７，８と接触したときの衝撃力が大きくなるため、使用者が離れた位置に居ることを認識することがより一層重要である。
【００８７】
ところで、図１と図２に示すように、扉７の前面に操作パネル２００を備えている。この場合には、使用者が操作パネル２００の操作中には、図２に示す主制御部１００は、開扉装置５１，５２の動作を禁止して、扉７，８が自動で開くことを禁止する。これにより、使用者が操作パネル２００を操作中で不用意に扉７，８が開いてしまうのを、確実に防止することで、使用勝手を上げて、安全性を向上している。従って、使用者の突き指等を防止できる。なお、使用者が操作パネル２００の操作中とは、例えば使用者が操作パネル２００上のボタンを押してから、所定時間例えば５秒以内のことを指す。また、使用者が操作パネル２００上のボタンを押してから、所定時間例えば５秒以内に操作パネル２００上のボタンを更に押した場合には、一連のボタン操作のうち最後に行ったボタン操作から所定時間例えば５秒以内を指す。
【００８８】
また、図２に示す画像処理部６０の目検出手段６１が、使用者の「目」を検出して、視線検出手段６２が目の「所定の視線動作」を検出している間は、開扉装置５１，５２の動作を禁止して、扉７，８が開くことを禁止する。これにより、使用者が操作パネル２００を操作中で、不用意に扉７，８が自動で開くのを防止することで、使用勝手を上げて、安全性を向上している。
【００８９】
図１と図２に示すように、扉７の前面に操作パネル２００を備えている。この場合には、図２に示す主制御部１００は、使用者の目の「所定の視線動作」は、操作パネル２００の上を経由しないこととしている。これにより、使用者が、操作パネル２００を操作中に、操作パネル２００を確認している時に、不用意に扉７，８を開いてしまうことを防止して、安全性を向上している。使用者の目の「所定の視線動作」は、図４から図６に示す視線の動作である。
【００９０】
ところで、上述した本発明の実施形態の冷蔵庫１においては、例えば図６に示すように、使用者の目の「所定の視線動作」では、使用者が撮像装置３０を注視した後に、左へ視線を向けると左の扉７を開くことができ、右へ視線を向けると右の扉８を開くことができ、あるいは上へ視線を向けると左右の扉７，８を開くことができるようになっている。すなわち、この例では、制御部１００の制御内容としては、視線の向きにより、制御部１００の制御内容の変更例としては、開扉装置５１，５２を動作させて扉７，８を開ける動作を対象にしている。
【００９１】
しかし、これに限らず、制御部１００の制御内容の別の変更例としては、使用者が撮像装置３０を注視した後に、視線の向きにより、開扉装置５１，５２を動作させて扉７，８を開ける動作以外の冷蔵庫１の制御内容の動作変更を、行なわせることができる。
【００９２】
例えば、使用者の目の「所定の視線動作」において、使用者が撮像装置３０を注視した後に、特定の方向、例えば右へ視線を向ける毎に、冷蔵庫１の運転モードを「弱」から「中」、「中」から「強」、「強」から「弱」・・・という具合に、ループして冷蔵庫１の制御内容の動作を順次変更ことができる。  以上説明したように、本発明の実施形態の冷蔵庫１は、本体１Ａと、本体１Ａの前面開口部を閉鎖する扉７，８と、本体１Ａに備えられ冷蔵庫１の制御を行う制御部１００と、使用者の目を検出する目検出手段６１を有し、目を目検出手段６１により検出して、目の所定の視線動作を検出した場合に、例えば開扉装置５１，５２の動作による扉７，８を開く動作のような、制御部１００の制御内容を変更する動作をさせる。
【００９３】
これにより、目検出手段６１が、使用者の目が検出視野内に入ったことを検出して、目の所定の視線動作を検出した場合には、制御部１００は、制御部１００の制御内容を自動的に変更することができる。このため、使い勝手や安全性を向上しながら、使用者の意図に応じて、自動で制御部１００の制御内容を変更することができる。
【００９４】
このように、制御部１００の制御内容の変更の例としては、例えば撮像装置３０の画像により、使用者の目が検出視野内に入ったことを検出して、目を目検出手段６１により確認して、目の所定の視線動作を検出した場合には、冷蔵庫１の制御内容の変更である開扉装置５１，５２の動作による扉７，８の開扉動作をさせる。このため、冷蔵庫１の使い勝手や安全性を向上しながら、使用者の意図に応じて自動で扉７，８を開けることができる。しかも、使用者は、指で扉７，８に直接静電タッチしなくても、意図した左右の扉７，８を、自動的に開くことができるので、扉７，８の汚れを防止できる。
【００９５】
扉７，８は観音扉である場合に、扉を開けるための目の所定の視線動作は、少なくとも２種類の動作のパターンを有し、目の所定の視線動作の種類に応じて、開ける扉７，８を選択できる。
【００９６】
これにより、使用者は、扉７，８に触れることが無く、使用者が意図する開けたい扉７，８を選択して、自動的に開くことができる。
【００９７】
目が目検出手段６１の検出視野内に入るか、目の所定の視線動作を検出した場合に、報知部４８が使用者に報知する。
【００９８】
これにより、目が目検出手段の検出視野内に入るか、目の所定の視線動作を検出した場合に、報知部４８は、使用者に対して検出の有無を報知できるので、使用者の操作性が向上する。
【００９９】
撮像装置３０の撮像から冷蔵庫１と使用者Ｍとの距離を推定する距離推定手段６４を有し、推定した距離が所定値以内の場合には、開扉装置５１，５２を動作させない。
【０１００】
これにより、使用者Ｍが扉７，８の至近距離にいる場合に、使用者Ｍと扉との衝突を避けることで、安全性を向上する。逆に、使用者Ｍが扉７，８から遠ければ、使用者Ｍの手Ｈは、撮像装置３０の画像に自然に写りこむために、安全性が確保されている。
【０１０１】
撮像装置の画像から使用者の手を検出する手検出手段６３を有し、手検出手段６３により使用者Ｍの手Ｈがあることを確認した後に、開扉装置５１，５２を動作させる。
【０１０２】
これにより、例えば冷蔵庫１の横から使用者Ｍが入ってきた場合等、使用者Ｍと冷蔵庫１の距離が近い場合に、扉７，８を自動で開ける時に、使用者の手Ｈが扉を受け止めることができるかどうかを確認できるので、扉を開ける際の安全性を高めることができる。
【０１０３】
人感センサ５０を有しており、人感センサ５０の検出中に、目検出手段６１を動作させる。これにより、使用者が不在時に、目検出手段６１が不要な動作をするのを防止することで、冷蔵庫１の省電力化に寄与できる。
【０１０４】
扉７の前面に操作パネル２００を有しており、使用者が操作パネル２００の操作中は、目の所定の視線動作の検出動作、もしくは制御部１００の制御内容を変更する動作である例えば開扉装置５１，５２の動作をさせない。これにより、使用者が、操作パネル２００を操作中に操作パネル２００を確認している時に、不要な目の所定の視線動作の検出動作を行わないようにするか、不用意に制御部１００の制御内容の変更動作を行わせないように、例えば制御内容の変更動作である扉７，８を開けてしまう動作を防止して、安全性を向上している。
【０１０５】
以上、本発明の実施形態を説明したが、実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。新規な実施形態は、その他の様々な態様で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【０１０６】
図１に示す冷蔵庫１の構造は、一例であり、任意の構造を採用することができる。例えば、図１に示す冷蔵庫１の冷蔵室が観音開き式の左右両開きの扉構造を有しているが、冷蔵室は、片開き式の１枚の扉構造を有するようにしても良い。冷蔵庫の各貯蔵室の配置構造は、任意に選択することができる。
【符号の説明】
【０１０７】
１      冷蔵庫
１Ａ      本体
７      扉
８      扉
３０    撮像装置
３１    赤外線カメラ
３２    赤外線ＬＥＤ
４０    画像取得部
４８    報知部
５１    開扉装置
５２    開扉装置
６０    画像処理部
６１    目検出手段
６２    視線検出手段
６３    手検出手段
６４    距離推定手段
１００  制御部
２００  操作パネル
Ｍ      使用者
Ｈ      使用者の手
【図１】
2017040422.tif 000003
【図２】
2017040422.tif 000004
【図３】
2017040422.tif 000005
【図４】
2017040422.tif 000006
【図５】
2017040422.tif 000007
【図６】
2017040422.tif 000008
【図７】
2017040422.tif 000009
【図８】
2017040422.tif 000010
【図９】
2017040422.tif 000011
【図１０】
2017040422.tif 000012
【図１１】
2017040422.tif 000013