(57)【要約】【課題】冷蔵庫内に収納されている物を確認することができ、庫内の収納物を自動的に管理する。【解決手段】本実施形態の冷蔵庫は、冷蔵庫の開口部周辺に配設され、前記開口部を通過する物を撮影するカメラ１６〜２１を備え、カメラ１６〜２１により撮影された画像データの変化量に基づいて物の出し入れを検知する検知部２２を備えたものである。【選択図】図４
2019100633.tif 000002
【特許請求の範囲】
【請求項１】
冷蔵庫の開口部周辺に配設され、前記開口部を通過する物を撮影するカメラと、
前記カメラにより撮影された画像データの変化量に基づいて物の出し入れを検知する検知部とを備えた冷蔵庫。
【請求項２】
前記検知部により検知された物であって庫内に収納された物の画像データを保存する保存部を備えた請求項１記載の冷蔵庫。
【請求項３】
前記検知部は、物を収納していない冷蔵庫のドアを開けたときに、前記カメラにより撮影された画像データをテンプレート画像として保存し、このテンプレート画像と、前記カメラにより物を撮影した画像データとを比較することにより、画像データの変化量を抽出するように構成された請求項２記載の冷蔵庫。
【請求項４】
前記検知部は、庫内に手を入れてから手を出すまで、前記カメラにより連続的に撮影し、撮影された全画像データの中において、物が写っている画像データが、前半に撮影されたものであるときには、物が庫内に入ったと判断し、後半に撮影されたものであるときには、物が庫内から出たと判断するように構成された請求項１から３のいずれか一項記載の冷蔵庫。
【請求項５】
前記検知部は、画像データの中から手の画像を抽出することにより、手と物を別に検知するように構成された請求項１から４のいずれか一項記載の冷蔵庫。
【請求項６】
前記検知部は、画像データの中から手と物を検出するときに、袖部分の画像を排除するように構成された請求項１から５のいずれか一項記載の冷蔵庫。
【請求項７】
前記カメラは、冷蔵庫の開口部周辺に配設された複数のカメラを有するように構成された請求項１から６のいずれか一項記載の冷蔵庫。
【請求項８】
前記保存部に保存されている画像データと、庫内から物を取り出したときの前記物の画像データを比較し、同じ物が撮影されている画像データを前記保存部から削除するように構成された請求項２から７のいずれか一項記載の冷蔵庫。
【請求項９】
前記検知部は、画像処理のための画像データを取得開始する時点は、物や手が前記カメラにより撮影開始されたときとし、画像データが変化しなくなったときに、画像データの取得を終了するように構成された請求項１から８のいずれか一項記載の冷蔵庫。
【請求項１０】
前記検知部は、画像データを画像処理するときに、処理に使用する画素数を減らすように構成された請求項１から９のいずれか一項記載の冷蔵庫。
【請求項１１】
前記保存部に保存されている画像データを、冷蔵庫に設けられたディスプレイに表示させる表示制御部と、
前記保存部に保存されている画像データを、情報端末に送信する通信制御部とを備えた請求項２から１０のいずれか一項記載の冷蔵庫。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、冷蔵庫に関する。
【背景技術】
【０００２】
冷蔵庫内に配設されたカメラにより庫内の棚全体を撮影し、撮影した画像を画像認識することにより、庫内に収納されている物の確認を行なうように構成された冷蔵庫が提案なされている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−８９９１３公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記構成の冷蔵庫の場合、棚の奥に収納されてカメラで撮影できない物を、確認することができなかった。このため、庫内に収納されている物の管理、即ち、冷蔵庫の在庫管理を行なう場合、物例えば食材を手動で登録しなければならず、使い勝手がよくないという問題があった。
【０００５】
そこで、冷蔵庫内に収納されている物を確認することができ、庫内の収納物を自動的に管理することができる冷蔵庫を提供する。
【課題を解決するための手段】
【０００６】
本実施形態の冷蔵庫は、冷蔵庫の開口部周辺に配設され、前記開口部を通過する物を撮影するカメラと、前記カメラにより撮影された画像データの変化量に基づいて物の出し入れを検知する検知部とを備えたものである。
【図面の簡単な説明】
【０００７】
【図１】第１実施形態による冷蔵庫の各扉を開けた状態を正面から見た図
【図２】冷蔵庫の電気的構成を示すブロック図
【図３】検出制御のフローチャート
【図４】物の出し入れと撮影画像との関係を説明する図
【図５】物及び手を撮影した画像データの一例を示す図
【図６】保存されている画像データの例を示す図
【図７】袖の画像を除き、物及び手を別に検出することを説明する図
【図８】複数のカメラにより物を撮影するメリットを説明する図
【図９】第２実施形態を示すもので、画像データの処理等の計算に使用する画素数を削減することを説明する図
【図１０】第３実施形態を示すもので、保存されている画像データをパソコンに表示する例を説明する図
【図１１】保存されている画像データをスマートフォンに表示する例（その１）をを説明する図
【図１２】保存されている画像データをスマートフォンに表示する例（その２）をを説明する図
【図１３】保存されている画像データをスマートフォンに表示する例（その３）をを説明する図
【発明を実施するための形態】
【０００８】
以下、複数の実施形態による冷蔵庫を図面に基づいて説明する。尚、各実施形態において実質的に同一の構成部品には同一の符号を付し、説明を省略する。
（第１実施形態）
まず、図１に示すように、本実施形態の冷蔵庫の本体１は、断熱箱体で構成されており、この本体１の内部には、上段から順に冷蔵室２、野菜室３、冷凍室４が設けられている。尚、野菜室３と冷凍室４との間に、製氷室および小冷凍室を左右に並べて設けるように構成しても良い。
【０００９】
冷蔵室２の前面部には、ドアとして例えばヒンジ開閉式（フレンチ型）の冷蔵室用扉７、８が設けられている。尚、冷蔵室用扉７または冷蔵室用扉８の前面には、図示しない操作パネルが設けられており、この操作パネルに例えば各種の設定や選択を行なう操作部、必要な表示を行なう複数の表示部等が配設されている。
【００１０】
また、野菜室３の前側には、ドアとして例えば引出し式の野菜室用扉１１が設けられている。野菜室用扉１１の背面部には、食品たる青果物つまり野菜や果物などを収納する収納容器が取付けられている。冷凍室４の前側には、ドアとして例えば貯蔵容器が連結された引出し式の冷凍室用扉１２が設けられている。
【００１１】
尚、冷蔵室２および野菜室３は、いずれも冷蔵温度帯の貯蔵室であり、例えば、冷蔵室２の維持温度は１〜５℃に設定されており、野菜室３の維持温度はそれよりやや高い２〜６℃に設定されている。冷凍室４は、冷凍温度帯、例えば−１０〜−２０℃のマイナス温度帯の貯蔵室である。
【００１２】
また、冷蔵室２内には、例えば２枚の棚板１４、１５が出し入れ可能に配設されている。更に、冷蔵室２内の天井部の前部中央部、即ち、冷蔵庫の開口部の周辺部には、第１カメラ１６が配設されている。冷蔵室２内の上部の棚板１４の上側における側面部の前部、即ち、冷蔵庫の開口部の周辺部には、第２カメラ１７が配設されている。
【００１３】
冷蔵室２内の下部の棚板１５の上側における側面部の前部、即ち、冷蔵庫の開口部の周辺部には、第３カメラ１８が配設されている。また、冷蔵室２内の下部の棚板１５の下側における側面部の前部、即ち、冷蔵庫の開口部の周辺部には、第４カメラ１９が配設されている。
【００１４】
また、野菜室３内の天井部の前部中央部、即ち、冷蔵庫の開口部の周辺部には、第５カメラ２０が配設されている。また、冷凍室４内の天井部の前部中央部、即ち、冷蔵庫の開口部の周辺部には、第６カメラ２１が配設されている。
【００１５】
次に、上記構成の冷蔵庫の電気的構成について、図２を参照して説明する。図２に示すように、冷蔵庫の制御部２２には、周知の冷凍サイクル等で構成されている冷蔵用冷却機構２３及び冷凍用冷却機構２４と、冷蔵室２内を照明する照明部２５と、６個のカメラ１６〜２１とが接続されている。そして、制御部２２には、冷蔵室用扉７、８の開閉を検知する冷蔵室扉スイッチ２６と、野菜室用扉１１の開閉を検知する野菜室扉スイッチ２７と、冷凍室用扉１２の開閉を検知する冷凍室扉スイッチ２８と、冷蔵庫の操作パネル等に設けられたディスプレイ２９と、他の情報端末３０と無線通信する無線通信部３１とが接続されている。
【００１６】
制御部２２は、冷蔵用冷却機構２３及び冷凍用冷却機構２４を駆動制御することにより各室２、３、４の庫内温度がそれぞれ設定された温度になるように温度制御する機能を有する。制御部２２は、各カメラ１６〜２１により撮影された画像データを入力し、入力した画像データを画像認識処理する機能、即ち、画像処理部２２ａを有する。そして、制御部２２は、画像データに基づいて冷蔵室２内に出し入れされる物を検知する機能を有する。即ち、制御部２２は、検知部としての機能を有する。
【００１７】
また、制御部２２は、内部に不揮発性のメモリを有しており、上記検知された物の画像データを、検知日時の情報や、検知位置の情報や、例えば画像認識処理により認識した物の名称等の情報と共に上記メモリに記憶して保存するように構成されている。即ち、制御部２２は、保存部２２ｂとしての機能を有する。
【００１８】
また、制御部２２は、保存している画像データをディスプレイ２９に表示する機能を有する。即ち、制御部２２は、表示制御部としての機能を有する。更に、制御部２２は、保存している画像データを、無線通信部３１を介して情報端末３０へ送信する機能を有する。即ち、制御部２２は、通信制御部としての機能を有する。尚、無線通信部３１は、例えば携帯電話網等の通信網やインターネット等を介して通信する機能や、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信する機能や、赤外線通信等の機能を備えている。また、情報端末３０は、例えばパソコンやスマートフォンやタブレットや携帯情報端末等で構成されている。
【００１９】
次に、上記構成の冷蔵庫において、庫内に出し入れされる物を検出する検出制御について、図３ないし図８を参照して説明する。図３のフローチャートは、制御部２２の制御の中の検出制御の内容を示す。図３に示す検出制御は、冷蔵庫の冷蔵室用扉７、８、野菜室用扉１１、冷凍室用扉１２のうちの少なくとも１つが開放されたときに、開始される。尚、冷蔵室２、野菜室３、冷凍室４内における各検出制御は、ほぼ同じであるから、冷蔵室２内の検出制御、具体的には、冷蔵室２内の上部の棚板１４上側収納空間の検出制御について、以下説明する。
【００２０】
まず、冷蔵室用扉７または８が開放されると、冷蔵室扉スイッチ２７により開放が検知され、照明部２５により冷蔵室２内が照明され、図３のステップＳ１０に進み、第１カメラ１６によって庫内に物を入れていない状態である空の状態、即ち、テンプレート画像が撮影される。そして、制御部２２は、第１カメラ１６によって撮影されたテンプレート画像を内部の保存部２２ｂに記憶する。
【００２１】
続いて、ステップＳ２０へ進み、冷蔵室扉スイッチ２７からの信号に基づいて冷蔵室用扉７、８が閉じているか否かを判断する。ここで、冷蔵室用扉７、８が閉じているときには、「ＹＥＳ」へ進み、本制御を終了する。また、冷蔵室用扉７、８が閉じていないときには（ＮＯ）、ステップＳ３０へ進み、第１カメラ１６により現在撮影されている画像データの変化量を調べる。この場合、第１カメラ１６により現在撮影されている現在の映像と画素の変化量を比較する。
【００２２】
そして、ステップＳ４０へ進み、画素が変化したか否か、即ち、画素の変化量が予め決められた設定値よりも大きいか否かを判断する。ここで、画素が変化しないときには（ＮＯ）、ステップＳ２０へ戻り、上述した処理を繰り返し実行する。
【００２３】
また、上記ステップＳ４０において、画素が変化したときには（ＹＥＳ）、即ち、何らかの物が撮影されたときには、ステップＳ５０へ進み、この時点、即ち、連続撮影開始時点から第１カメラ１６により連続的に撮影を開始する。続いて、ステップＳ６０へ進み、第１カメラ１６により新規の画像を撮影する。そして、ステップＳ７０へ進み、記憶しているテンプレート画像と、撮影された画像データとを比較する。次いで、ステップＳ８０へ進み、画像データの中から手の画像と袖の画像を除いた部分の画像が、テンプレート画像と比べて変化量が最も多い画像データを記録する、即ち、保存部２２ｂに保存する。
【００２４】
ここで、物が庫内に入れられる動作と、第１カメラ１６により撮影される画像との関係を、図４に示す。まず、図４（ａ）に示すように、物が庫内に入れられる前の状態では、第１カメラ１６により撮影された画像データ４１には、何も撮影されていない。この後、物が庫内に少し入れられた状態では、図４（ｂ）に示すように、第１カメラ１６により撮影された画像データ４２には、物が半分程度撮影されている。続いて、物が庫内に更に入れられると、図４（ｃ）に示すように、第１カメラ１６により撮影された画像データ４３には、物の全体が手と共に撮影されている。この図４（ｃ）に示す画像データを、上記ステップＳ８０において、保存部２２ｂに保存する。尚、画像データをメモリに保存する場合、撮影日時の情報、撮影したカメラの設置位置の情報、物の収納位置の情報、物を画像認識処理した認識結果例えば物の種類や形状や色の情報等を加えて保存するように構成されている。
【００２５】
この後、図４（ｄ）に示すように、物が庫内に収納されて手が離れ、手を手前へ戻すと、第１カメラ１６により撮影された画像データ４４には、手だけが撮影されている。更に、図４（ｅ）に示すように、手を手前へ戻すと、第１カメラ１６により撮影された画像データ４５には、手の先端側の半部程度が撮影されている状態となる。次いで、図４（ｆ）に示すように、手を庫内から取り出すと、第１カメラ１６により撮影された画像データ４６には、何も撮影されない状態となる。
【００２６】
そして、上記ステップＳ８０の実行後は、ステップＳ９０へ進み、テンプレート画像と撮影された画像データとがほぼ一致したか否か、即ち、テンプレート画像と撮影された画像の変化した画素数が近似したか否かを判断する。この場合、何も撮影されない状態の画像データとなったか否かを、即ち、撮影された画像データがテンプレート画像と近似したか否かを判断するように構成されている。例えば、図４に示す例の場合、図４（ｆ）の状態になったか否かを判断する。
【００２７】
上記ステップＳ９０において、近似しなかったときには（ＮＯ）、ステップＳ６０へ戻り、第１カメラ１６による連続的な撮影を続け、前述した処理を繰り返し実行する。また、上記ステップＳ９０において、近似したときには（ＹＥＳ）、連続撮影終了時点となり、ステップＳ１００へ進み、第１カメラ１６による連続的な撮影を終了する。
【００２８】
続いて、ステップＳ１１０へ進み、庫内に物が入ったか否かを判断する。本実施形態の場合、庫内に手を入れてから手を出すまで、第１カメラ１６により連続的に撮影し、撮影された全画像データの中において、物が写っている画像データが、前半に撮影されたものであるときには、物が庫内に入ったと判断し、後半に撮影されたものであるときには、物が庫内から出たと判断するように構成されている。例えば、図４に示すように、庫内に物が入る場合には、物が写っている画像データ、即ち、図４（ｃ）の画像データ４３が、前半に撮影されたものである。反対に、物が庫内から出る場合は、物が写っている画像データが、後半に撮影されたものとなる。
【００２９】
上記ステップＳ１１０において、物が入ったときには（ＹＥＳ）、ステップＳ１２０へ進み、制御部２２は、物が写っている画像データを保存部２２ｂ内に、即ち、画像データのデータベース内に保存する。この後は、ステップＳ２０へ戻り、前述した処理を繰り返し実行する。
【００３０】
また、ステップＳ１１０において、物が入ったときでない場合には（ＮＯ）、ステップＳ１３０へ進み、庫内から物が出たか否かを判断する。ここで、物が出たときには（ＹＥＳ）、ステップＳ１４０へ進み、制御部２２は、画像データに写っている物と同じものが写っている画像データを、保存部２２ｂ内から捜し、この捜した画像データを保存部２２ｂ内から削除する。尚、画像データに写っている物が同じものであるか否かを判断するに際しては、物の形状及び色が同じであるか否かを判断するように構成されている。
【００３１】
例えば、物が出たときに、物が写っている画像データが例えば図５に示すような画像データであったとする。また、制御部２２のメモリ内に、即ち、画像データのデータベース内に、例えば図６（ａ）、（ｂ）、（ｃ）に示すような３個の画像データが保存されているとすると、図６（ａ）の画像データに写っている物は、図５に示す画像データに写っている物と、形状が異なる。また、図６（ｂ）の画像データに写っている物は、図５に示す画像データに写っている物と、色が異なる。図６（ｃ）の画像データに写っている物は、図５に示す画像データに写っている物と、形状及び色が同じであることから、同じ物であると判定する。そこで、この場合、上記ステップＳ１４０では、図６（ｃ）の画像データを保存部２２ｂ内から削除する。この後は、ステップＳ２０へ戻り、前述した処理を繰り返し実行する。
【００３２】
また、上記ステップＳ１３０において、物が出たときでない場合には（ＮＯ）、即ち、ユーザが手を出し入れしただけで、物を出し入れしなかった場合には、ステップＳ２０へ戻り、前述した処理を繰り返し実行する。
【００３３】
また、本実施形態においては、図７（ｂ）に示す画像データの中から、袖３２を排除して、物３３と手３４を別に検知するように構成することが好ましい。尚、物３３と手３４を別に検知するに際しては、色の違いで検知するように構成されている。このように構成することによって、図７（ｃ）に示すように、物３３と手３４について、それぞれ画素の変化量を示す画像データ３５を作成することができる。この画像データ３５によって、物３３と手３４それぞれで画素の変化量を見ることができる。
【００３４】
また、本実施形態においては、冷蔵室２内の上部の棚板１４の上側には、２個のカメラ１６、１７が配設されている。これら２個のカメラ１６、１７による撮影のメリットを説明する。図８（ａ）に示すように、第１カメラ１６と物３３及び手３４との位置関係がずれている場合、第１カメラ１６により撮影された画像データには、図８（ｂ）に示すように、物３３が途切れて撮影されてしまう。このような場合に、図８（ｃ）に示すように、物３３の側方にある第２カメラ１７により物３３及び手３４を撮影すると、撮影された画像データには、図８（ｄ）に示すように、物３３の全体像が撮影される。従って、いずれかのカメラ１６、１７によって物３３の全体像を捕らえて撮影することができる。そして、これら２枚の画像データについては、画素数や、写りの程度に応じて、物３３の全体像がよく写っているものを、物の画像データとして保存部２２ｂに保存するように構成されている。
【００３５】
このような構成の本実施形態においては、冷蔵庫の開口部周辺に配設され開口部を通過する物を撮影するカメラ１６〜２１を備え、カメラ１６〜２１により撮影された画像データの変化量に基づいて物の出し入れを検知する制御部２２を備えるように構成した。この構成によれば、カメラ１６〜２１により撮影された画像データの変化量に基づいて物の出し入れを検知するので、棚の奥に隠れている物を確認できることから、冷蔵室２、野菜室３、冷凍室４内に収納されている物をほとんど漏れなく確認することができる。従って、庫内に出し入れされた物の確認結果に基づいて庫内の収納物を自動的に管理することが可能となる。
【００３６】
また、本実施形態では、検知された物であって庫内に収納された物の画像データを保存部２２ｂに保存するように構成したので、保存した画像データに基づいてデータ処理することができるから、庫内の収納物をきめ細かく管理できる。
【００３７】
上記実施形態では、物を収納していない冷蔵庫のドアを開けたときに、カメラ１６〜２１により撮影された画像データをテンプレート画像として保存し、このテンプレート画像と、カメラ１６〜２１により物を撮影した画像データとを比較することにより、画像データの変化量を抽出するように構成した。この構成によれば、画像データの変化量を正確に検出することができる。
【００３８】
上記実施形態では、庫内に手を入れてから手を出すまで、カメラ１６〜２１により連続的に撮影し、撮影された全画像データの中において、物が写っている画像データが、前半に撮影されたものであるときには、物が庫内に入ったと判断し、後半に撮影されたものであるときには、物が庫内から出たと判断するように構成した。この構成によれば、庫内に物が入れられたか、庫内から物が取り出されたかを正確に判定することができる。
【００３９】
上記実施形態では、画像データの中から手の画像を抽出することにより、手と物を別に検知するように構成したので、庫内への物の出し入れ、即ち、物の移動を正確に検出することができる。
【００４０】
上記実施形態では、画像データの中から手と物を検出するときに、袖部分の画像を排除するように構成したので、不必要な画像情報を排除できることから、手と物を正確に検知できる。
【００４１】
上記実施形態では、冷蔵庫の開口部周辺に複数のカメラ１６〜２１を配設するように構成したので、複数のカメラ１６〜２１により撮影された画像データの中から物の全体像が良好に写っているものを選択して保存することができる。
【００４２】
上記実施形態では、保存部２２ｂに保存されている画像データと、庫内から物を取り出したときの物の画像データを比較し、同じ物が撮影されている画像データを保存部２２ｂから削除するように構成した。この構成によれば、庫内から取り出された物の画像データを自動的に削除することができる。
【００４３】
上記実施形態では、画像処理のための画像データを取得開始する時点は、物や手がカメラ１６〜２１により撮影開始されたときとし、画像データが変化しなくなったときに、画像データの取得を終了するように構成した。この構成によれば、画像データの撮影や取得を必要最小限とすることができ、無駄なデータ処理を無くすことができる。
【００４４】
（第２実施形態）
図９は、第２実施形態を示すものである。尚、第１実施形態と同一構成には同一符号を付している。この第２実施形態では、画像データの画像認識処理等の計算に使用する画素数を削減するように構成した。
【００４５】
具体的には、図９（ａ）に示すように、第１カメラ１６により物３３と手３４を撮影した場合、図９（ｂ）に示すような画像データが撮影される。第２実施形態では、画像データの画素を処理するときに、図９（ｃ）に示すように、画素の縦列について、１画素分ずつ画素の縦列を飛ばして計算するようにし、また、画素の変化が無いところでは、計算する画素のデータ量を大幅に削減するように構成した。これにより、画素データの計算回数を半分以下に抑えることができるため、画像処理に要する時間を大幅に削減することができる。
【００４６】
尚、上述した以外の第２実施形態の構成は、第１実施形態の構成と同じ構成となっている。従って、第２実施形態においても、第１実施形態とほぼ同じ作用効果を得ることができる。
【００４７】
（第３実施形態）
図１０ないし図１３は、第３実施形態を示すものである。尚、第１実施形態と同一構成には同一符号を付している。この第３実施形態では、制御部２２の保存部２２ｂに保存された複数の画像データを、情報端末３０のディスプレイに表示して閲覧可能なように構成した。
【００４８】
図１０に示すように、制御部２２は、保存部２２ｂに保存された複数の画像データを、無線通信部３１及びインターネット等を介して情報端末３０である例えばパソコン３６に送信するように構成され、パソコン３６においては、受信した画像データをディスプレイ３７に表示するように構成されている。制御部２２は、通信制御部としての機能を有する。尚、上記画像データには、撮影日時の情報、画像を撮影したカメラの設置位置の情報、物の収納位置の情報、物の種類や形状や色等の情報が付属されていることから、パソコン３６において、上記各情報毎に画像データを検索したりソートしたりすることができ、ユーザが知りたい画像データを選択して閲覧することが可能なようになっている。
【００４９】
図１１ないし図１３には、保存部２２ｂに保存された複数の画像データを、無線通信部３１及びインターネット等を介して情報端末３０である例えばスマートフォン３８に送信し、スマートフォン３８において受信した画像データをディスプレイ３９に表示するように構成した例を示す。
【００５０】
図１１においては、画像データを、時間・日付別にグループ分けして表示している。図１２においては、画像データを、写っている物の色別にグループ分けして表示している。図１３においては、画像データを、画像を撮影したカメラの設置場所別にグループ分けして表示している。
【００５１】
また、本実施形態においては、制御部２２は、冷蔵庫の操作パネルに設けられたディスプレイ２９に、保存部２２ｂに保存された複数の画像データを表示することが可能なように構成されている。この構成の場合も、画像データに付属する上記各情報毎に画像データを検索したりソートしたりすることができ、ユーザが知りたい画像データを選択して表示することが可能なように構成されている。制御部２２は、表示制御部としての機能を有する。
【００５２】
尚、上述した以外の第３実施形態の構成は、第１実施形態の構成と同じ構成となっている。従って、第３実施形態においても、第１実施形態とほぼ同じ作用効果を得ることができる。
【００５３】
（その他の実施形態）
以上説明した複数の実施形態に加えて以下のような構成を加えても良い。
上記各実施形態では、冷蔵室２内の下段の棚板１５の上側及び下側の収納空間においては、冷蔵室２の内側面に第３カメラ１８、第４カメラ１９を設けるように構成したが、各収納空間の天井部にもカメラを配設するように構成しても良い。
【００５４】
また、上記各実施形態では、野菜室３または冷凍室４内においては、各天井部に第５カメラ２０、第６カメラ２１を設けるように構成したが、野菜室３または冷凍室４の各内側面にもカメラを配設するように構成しても良い。
【００５５】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００５６】
図面中、１は本体、２は冷蔵室、３は野菜室、４は冷凍室、７は冷蔵室用扉、８は冷蔵室用扉、１１は野菜室用扉、１２は冷凍室用扉、１４、１５は棚板、１６は第１カメラ、１７は第２カメラ、１８は第３カメラ、１９は第４カメラ、２０は第５カメラ、２１は第６カメラ、２２は制御部（検知部、保存部）、２３は冷蔵用冷却機構、２４は冷凍用冷却機構、２５は照明部、２６は冷蔵室扉スイッチ、２７は野菜室扉スイッチ、２８は冷凍室扉スイッチ、２９はディスプレイ、３０は情報端末、３１は無線通信部、３２は袖、３３は物、３４は手である。
【図１】
2019100633.tif 000003
【図２】
2019100633.tif 000004
【図３】
2019100633.tif 000005
【図４】
2019100633.tif 000006
【図５】
2019100633.tif 000007
【図６】
2019100633.tif 000008
【図７】
2019100633.tif 000009
【図８】
2019100633.tif 000010
【図９】
2019100633.tif 000011
【図１０】
2019100633.tif 000012
【図１１】
2019100633.tif 000013
【図１２】
2019100633.tif 000014
【図１３】
2019100633.tif 000015