(57)【要約】【課題】容易に庫内等を確認することができる冷蔵庫、カメラ装置、冷蔵庫用ドアポケット、冷蔵庫用ホルダ、通信端末、家電ネットワークシステム、庫内撮像プログラムを提供する。【解決手段】冷蔵庫は１、撮像カメラ１８（撮像手段）と、当該撮像カメラ１８で撮像した画像を外部の装置に送信するための通信部５２（通信手段）と、を備える。【選択図】図４
2018173272.tif 000002
【特許請求の範囲】
【請求項１】
庫内を撮像するための撮像手段と、
前記撮像手段で撮像した庫内の画像情報を外部の装置に送信するための通信手段と、
を備えたことを特徴とする冷蔵庫。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、冷蔵庫、カメラ装置、冷蔵庫用ドアポケット、冷蔵庫用ホルダ、通信端末、家電ネットワークシステム、庫内画像表示プログラムに関する。
【背景技術】
【０００２】
従来、庫内を撮像して食材を認識することで食材を管理するシステムが提案されている（例えば、特許文献１参照）。
しかしながら、容易に冷蔵庫の庫内を確認したいと考えるユーザが存在する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−２２６７４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明が解決しようとする課題は、容易に庫内等を確認することができる冷蔵庫、カメラ装置、冷蔵庫用ドアポケット、冷蔵庫用ホルダ、通信端末、家電ネットワークシステム、庫内画像表示プログラムを提供することである。
【課題を解決するための手段】
【０００５】
実施形態による冷蔵庫は、撮像手段と、撮像手段で撮像し画像情報を外部の装置に送信するための通信手段と、を備える。
【図面の簡単な説明】
【０００６】
【図１】第１実施形態の冷蔵庫を採用した家電ネットワークシステムの構成の概略を示す図
【図２】第１実施形態の冷蔵庫を模式的に示す図
【図３】第１実施形態の撮像カメラの取り付け態様を模式的に示す図
【図４】第１実施形態の冷蔵庫の電気的構成を模式的に示す図
【図５】第１実施形態の冷蔵庫の庫内の状態を模式的に示す図
【図６】第１実施形態の冷蔵庫による撮像処理の流れを示す図
【図７】第１実施形態の撮像カメラで撮像した画像の一例を示す図
【図８】第１実施形態の撮像カメラの結露の状態の変化を模式的に示す図
【図９】第１実施形態の撮像カメラによる撮像シーケンスを示す図
【図１０】第１実施形態の通信端末による端末側処理の流れを示す図
【図１１】第１実施形態の通信端末における画像表示態様の一例を示す図その１
【図１２】第１実施形態の通信端末における画像表示態様の一例を示す図その２
【図１３】第２実施形態の冷蔵庫用ドアポケットにカメラ装置を取り付けた態様を模式的に示す図
【図１４】第２実施形態の冷蔵庫用ドアポケットを冷蔵庫に取り付けた態様を模式的に示す図
【図１５】第２実施形態のカメラ装置の外観を模式的に示す図
【図１６】第２実施形態のカメラ装置の外観および内部の部品配置を模式的に示す図
【図１７】第２実施形態のカメラ装置を冷蔵庫用ドアポケットに取り付けた態様を模式的に示す図
【図１８】第２実施形態の冷蔵庫用ホルダを取り付ける位置を模式的に示す図
【図１９】第２実施形態の冷蔵庫用ホルダを模式的に示す図
【図２０】第２実施形態の冷蔵庫用ホルダを取り付けた態様を模式的に示す図
【図２１】第２実施形態のカメラ装置の電気的構成を模式的に示す図
【図２２】第２実施形態のカメラ装置の検知部の検知態様を模式的に示す図
【図２３】第２実施形態のカメラ装置の撮像タイミングの例を示す図
【図２４】第２実施形態のカメラ装置により撮像した庫内の画像の例を示す図
【図２５】第２実施形態の家電ネットワークシステムの構成の概略を示す図
【図２６】その他の実施形態の撮像カメラの取り付け態様を模式的に示す図
【図２７】その他の実施形態の冷蔵庫の構成を模式的に示す図
【図２８】その他の実施形態の通信端末における画像表示態様の一例を示す図
【図２９】その他の実施形態の取り付け部の一例を示す図
【図３０】第３実施形態の冷蔵庫の電気的構成を示す機能ブロック図
【図３１】第３実施形態において扉を開放する過程を模式的に示す図その１
【図３２】第３実施形態において扉を開放する過程を模式的に示す図その２
【図３３】第３実施形態において扉を開放する過程を模式的に示す図その３
【図３４】第３実施形態における収納量推定の一例を示す図その１
【図３５】第３実施形態における収納量推定の一例を示す図その２
【図３６】第４実施形態において扉を開放する過程を模式的に示す図
【図３７】第４実施形態における撮像手段の設置位置の一例を示す図
【図３８】第４実施形態における冷蔵庫の構成の一例を模式的に示す図その１
【図３９】第４実施形態における冷蔵庫の構成の一例を模式的に示す図その２
【図４０】第５実施形態における冷蔵庫の構成の一例を模式的に示す図
【図４１】第５実施形態における撮像手段の設置位置の一例を示す図その１
【図４２】第５実施形態における撮像手段の設置位置の一例を示す図その２
【図４３】第５実施形態における撮像手段の設置位置の一例を示す図その３
【図４４】第６実施形態の冷蔵庫を模式的に示す図
【図４５】第６実施形態のカメラユニットの構成を模式的に示す図
【図４６】第６実施形態のレンズユニットを模式的に示す図
【図４７】第６実施形態の具体例１の取り付け態様を模式的に示す図その１
【図４８】第６実施形態の具体例２の取り付け態様を模式的に示す図その２
【図４９】第６実施形態の具体例３の取り付け態様を模式的に示す図その３
【図５０】第６実施形態の撮像結果および表示態様を模式的に示す図
【図５１】第６実施形態の具体例４の縦仕切りの回動態様を模式的に示す図
【図５２】第６実施形態の具体例４の取り付け態様を模式的に示す図その１
【図５３】第６実施形態の具体例４の取り付け態様を模式的に示す図その２
【図５４】第６実施形態の具体例５の取り付け態様を模式的に示す図
【図５５】第６実施形態の具体例６のカメラユニットの構成を模式的に示す図
【図５６】第７実施形態の冷蔵庫の構成を模式的に示す図
【図５７】第７実施形態の冷蔵庫およびカメラモジュールの電気的構成を模式的に示す図
【図５８】第７実施形態の具体例１のカメラユニットの取り付け状態を模式的に示す図その１
【図５９】第７実施形態の具体例１のカメラユニットの取り付け状態を模式的に示す図その２
【図６０】第７実施形態の具体例１のカメラユニットの取り付け状態を模式的に示す図その３
【図６１】第７実施形態の具体例２のカメラユニットの取り付け状態を模式的に示す図その１
【図６２】第７実施形態の具体例３のカメラユニットの取り付け状態を模式的に示す図
【図６３】第７実施形態の具体例４のカメラユニットの取り付け状態を模式的に示す図
【図６４】第７実施形態の具体例５のカメラユニットを模式的に示す図
【発明を実施するための形態】
【０００７】
以下、複数の実施形態により、冷蔵庫、カメラ装置、冷蔵庫用ドアポケット、通信端末、家電ネットワークシステム、庫内画像表示プログラムについて説明する。なお、各実施形態にて実質的に共通する部位には共通する符号を付して、その詳細な説明は省略する。
【０００８】
（第１実施形態）
以下、第１実施形態について、図１から図１２を参照しながら説明する。
図１に示すように、本実施形態の冷蔵庫１を採用した家電ネットワークシステム１００では、冷蔵庫１は、ルータ１０１を介して外部の通信回線１０２に通信可能に接続されている。このルータ１０１は、いわゆる無線アクセスポイントであり、無線通信方式にて冷蔵庫１と通信可能に接続されている。この冷蔵庫１は、通信回線１０２に接続されている通信端末１０３およびサーバ１０４（いずれも外部の装置に相当する）との間で各種の情報をやり取りする。なお、本実施形態の家電ネットワークシステム１００では、後述するように、冷蔵庫１の庫内を撮像した画像情報はサーバ１０４にて記憶され、通信端末１０３は、サーバ１０４から庫内の画像を取得する構成となっている。ここで、画像情報とは、庫内の画像を示す情報（データ）であり、例えばビットマップ形式やＪＰＥＧ形式或いはＭＰＥＧ形式などの周知のフォーマットの画像データ（静止画、動画）、画像データを圧縮や暗号化あるいは第２実施形態のように画像処理することにより変換したデータ等、通信手段を介した送信が可能であって最終的に庫内の様子を確認できるものであれば、どのような形式のデータであってもよい。また、本実施形態では、通信端末１０３として、住宅１０５の外部に携帯可能ないわゆるスマートフォン（高機能携帯電話）やタブレット型パソコン、家電ネットワークシステム１００に接続されているテレビ等を想定している。
【０００９】
冷蔵庫１は、図２に示すように、本体２の上部から順に、食材を貯蔵するための貯蔵庫である冷蔵室３、野菜室４、製氷室５、上部冷凍室６、および下部冷凍室７が設けられている。冷蔵室３および野菜室４と、製氷室５および上部冷凍室６との間は、図示しない断熱仕切壁により仕切られている。冷蔵室３は、いわゆる両開き式の左扉３ａおよび右扉３ｂによって開閉され、野菜室４、製氷室５、上部冷凍室６および下部冷凍室７は、引き出し式の扉４ａ、扉５ａ、扉６ａおよび扉７ａによってそれぞれ開閉されるようになっている。
【００１０】
各扉には、その開閉状態を検知するためのセンサが設けられている（図４参照。ただし、図４では、左扉３ａ用の左ドアセンサ３４、右扉３ｂ用の右ドアセンサ３５のみを図示している）。なお、図２に示す冷蔵庫１の構成は一例であり、各貯蔵庫の配置順が異なっていたり、例えば上部冷凍室６が冷蔵と冷凍とを切り替え可能な切替室であるような構成でもよい。
【００１１】
冷蔵室３の左扉３ａには、上段から順にドアポケット８ａ、ドアポケット９ａ、ドアポケット１０ａが設けられており、右扉３ｂには、上段から順にドアポケット８ｂ、ドアポケット９ｂ、ドアポケット１０ｂが設けられている。また、冷蔵室３内には、例えばガラス等の透明性材料で形成されている複数の棚板１１が設けられているとともに、最下段には、例えば卵室やチルド室のような特定目的室１２が配置されている。また、冷蔵室３の上部には、照明手段としての天井ライト１３が設けられている。なお、冷蔵室３内には、側面に設けられている側面ライト３６（図４参照）も設けられている。このうち、天井ライト１３は庫内の上部側、側面ライト３６は庫内の中央部や下部等、庫内の特定の位置を照らすために設けられている。
【００１２】
冷蔵室３の左扉３ａおよび右扉３ｂは、その前面が絶縁性のガラス材料で形成されたガラス板３ｂ１で覆われており、その内部には断熱材であるウレタンが充填剤として充填されており、その内側については、周知のように、非金属の樹脂製の内板１４および縦板１５を備えている。つまり、左扉３ａおよび右扉３ｂの前面側は、電波を透過させる非金属製材料であるガラス板３ｂ１により構成されている。上記したドアポケット８〜１０は、この内板１４に設けられている。縦板１５には、上下方向における中央付近であって左右方向における右扉３ｂの開放端部側（具体的には、後述する撮像カメラ１８が設けられている付近）に、凹部１６が形成されている。この凹部１６は、後述するように、撮像カメラ１８の視野を遮らないように設けられている。また、左扉３ａには、右扉３ｂとの隙間を埋めるための回動式の縦仕切り１７が設けられている。なお、野菜室４の扉４等も、右扉３ｂと同様にその前面がガラス板で覆われており、内部にはウレタンが断熱材として充填されている構成となっている。
【００１３】
右扉３ｂの内板１４（縦仕切りを有していない扉）には、図２に示すように、撮像カメラ１８および撮像ライト１９が設けられている。つまり、本実施形態では、内板１４が被取り付け部に相当する。撮像カメラ１８は、ＣＣＤあるいはＣＭＯＳ等の撮像素子を有しており、庫内の画像を扉側から撮像する。この撮像カメラ１８は、概ね１２０度程度の視野角を有する広角レンズを備えている。そして、撮像カメラ１８は、中段のドアポケット９ｂに隣接した位置であって、ドアポケット９ｂよりも左扉３ａ側となる位置に設けられている。すなわち、撮像カメラ１８は、冷蔵室３の上下方向の中央付近、且つ、冷蔵室３の左右方向の中央付近に設けられている。このため、右扉３ｂが閉鎖された状態において、撮像カメラ１８は、その視野が、後述する図７に示すように冷蔵室３の庫内のほぼ全域、且つ、ドアポケット８〜１０の少なくとも一部を撮像可能となっている。なお、比較例として一般的なＷｅｂカメラの場合、その視野角は概ね５５度程度である。
【００１４】
撮像カメラ１８に隣接するドアポケット９ｂは、図３に示すように、撮像カメラ１８側が斜めに形成されている。すなわち、一般的には収容部が四角形（長方形）に形成されるドアポケット９ｂには、広角レンズを採用している撮像カメラ１８の視野を確保するために、切り欠き部９ｂ１が形成されている。なお、図３等は撮像カメラ１８を模式的に示すものであり、撮像カメラ１８の実際の大きさや形状とは異なっている。なお、撮像カメラ１８は、本実施形態では冷蔵庫１に取り付けられた構造となっているが、後述する第２実施形態のように冷蔵庫１から着脱可能（例えば、冷蔵庫１の購入後に、オプション装置として取り付ける等）としてもよい。
【００１５】
撮像ライト１９は、例えば撮像カメラ１８の上部側に設けられている。つまり、撮像ライト１９は、その照射方向が撮像カメラ１８の視野と同じ向きになるように配置されており、照射される光が撮像カメラ１８に直接入ることがない位置（対向位置外の位置）、すなわち、撮像カメラ１８にとって逆光になりにくい位置或いは逆光とならない位置に配置されている。撮像カメラ１８は、特許請求の範囲に記載した撮像手段を構成し、撮像ライト１９は、特許請求の範囲に記載した照明手段を構成する。
【００１６】
この冷蔵庫１は、図４に示すように、主制御部３０により制御されている。主制御部３０は、ＣＰＵ３０ａ、ＲＯＭ３０ｂおよびＲＡＭ３０ｃなどを有するマイクロコンピュータにより構成されており、例えばＲＯＭ３０ｂなどに記憶されているコンピュータプログラムを実行することで冷蔵庫１の全体を制御する。
【００１７】
主制御部３０は、周知の冷凍サイクル等で構成されている冷蔵用冷却機構３１と冷凍用冷却機構３２、冷蔵庫１に対する設定操作等を入力するための操作パネル３３、左ドアセンサ３４、右ドアセンサ３５、天井ライト１３および側面ライト等に接続されている。なお、冷蔵庫１は、冷蔵室３や下部冷凍室７等の温度を検出する図示しない庫内センサ等も備えている。
【００１８】
操作パネル３３は、表示器３３ａ、スイッチ類３３ｂ、および庫外センサ３３ｃを有している。表示器３３ａは、冷蔵庫１の運転状態等の各種の情報を表示する。スイッチ類３３ｂは、冷蔵庫１に対するユーザの設定操作等が入力される。このスイッチ類３３ｂには、ユーザが外出する際に冷蔵庫１の運転状態を切り替えるための外出スイッチも含まれている。この外出スイッチは、例えば、「節電」、「おでかけ」等が設定されており、いずれかが選択されると、該当する省電力モードに移行する。つまり、ユーザが外出すると冷蔵庫１を使用しない状態となるため、冷蔵庫１は、省電力モードに移行して消費電力を削減する。
【００１９】
例えば、「節電」が選択されると、冷蔵庫１は、食材の貯蔵環境に影響が出ない範囲で庫内温度を調節するとともに、結露防止用のヒータの運転状態を制御することで、通常時よりも約１０％程度の消費電力を削減するモードに移行する。あるいは、「おでかけ」が選択されると、冷蔵庫１は、自動製氷の回数を削減し、通常時に比べて消費電力を削減する省電力モードに移行する。より具体的には、冷蔵庫１は、自動製氷の回数を例えば８時間に１回とすることで、通常運転時に比べて約２０％程度の消費電力を低減している。
【００２０】
なお、本実施形態では冷蔵庫１に予め設けられている「節電」や「おでかけ」用のスイッチを外出スイッチとして兼用しているが、外出する旨を設定するための専用のスイッチを設けてもよい。
【００２１】
庫外センサ３３ｃは、温度センサや湿度センサにより形成されており、庫外の環境を取得する。庫外センサ３３ｃは、特許請求の範囲に記載した庫外環境取得手段を構成する。
主制御部３０は、庫内センサにて取得した庫内の環境、および庫外センサ３３ｃにて取得した庫外の環境に基づいて、また、操作パネル３３からの設定に基づいて、冷蔵庫１の運転状態を制御する。また、主制御部３０は、左ドアセンサ３４や右ドアセンサ３５とから、扉の開閉状態を取得する。この主制御部３０は、制御部５０と通信可能に接続されており、扉の開閉状態を制御部５０に送信したり、天井ライト１３や側面ライト３６の点灯指示を制御部５０から受信したりすることができる。
【００２２】
制御部５０は、ＣＰＵ５０ａ、ＲＯＭ５０ｂ、ＲＡＭ５０ｃ、および時刻を取得するためのリアルタイムクロック（以下、ＲＴＣ５０ｄと称する）を有するマイクロコンピュータで構成されている。この制御部５０は、撮像カメラ１８、撮像ライト１９、レンズヒータ５１および通信部５２に接続されている。
【００２３】
制御部５０は、例えばＲＯＭ５０ｂなどに記憶されているコンピュータプログラムを実行することにより、撮像カメラ１８により庫内を撮像するタイミング、および撮像カメラ１８にて庫内を撮像するための撮像環境を制御する。具体的には、主制御部３０から受信した扉の開閉状態等に基づいて撮像するタイミングを制御するとともに、撮像環境すなわち撮像のために必要な光源である天井ライト１３や撮像ライト１９等の点灯状態を制御する。制御部５０は、特許請求の範囲に記載した制御手段を構成する。
【００２４】
ここで、撮像するタイミングについて説明する。
庫内を撮像する場合、撮像カメラ１８を駆動するとともに、撮像ライト１９等を点灯する必要がある。すなわち、庫内を撮像するためには、電力を消費する必要がある。このため、常に撮像可能な状態になっていると、不要な電力を消費してしまうことになる。そこで、冷蔵庫１では、庫内を撮像するタイミングを制御することで、また、そのタイミングに合わせて必要なときだけ撮像環境（つまり、撮像ライト１９等の点灯）を制御することで、消費電力の削減を図っている。
【００２５】
庫内を撮像するタイミングは例えば以下の撮像条件１〜６のような条件が予め設定されており、制御部５０は、いずれかの撮像条件が満たされると、庫内を撮像するタイミングになったと判定する。
【００２６】
・撮像条件１：冷蔵室３のいずれかの扉が一旦開放された後に閉鎖されたタイミング。すなわち、庫内の食材の貯蔵状況が変化した可能性があるタイミング。
・撮像条件２：冷蔵室３のいずれかの扉が開放されたタイミング。すなわち、庫内の食材の貯蔵状況が変化する可能性があるタイミング。
【００２７】
・撮像条件３：通信端末等の外部の装置から指令を受け付けたタイミング。
・撮像条件４：外出スイッチが操作された場合。外出スイッチが操作されたタイミングで撮像してもよいし、外出スイッチが操作されてから所定の待ち時間が経過したタイミングで撮像してもよい。また、いずれのタイミングを採用するかは予め設定しておけばよい。
【００２８】
・撮像条件５：一旦開放された扉が閉鎖された後であって、所定期間が経過したタイミング（本実施形態では、撮像カメラ１８の広角レンズの結露が除去されるまでに要すると想定される遅延撮像時間が経過したタイミングを採用している）。すなわち、広角レンズの結露が除去されたタイミング。なお、遅延撮像時間は、予め固定値を設定してもよいし、庫外センサ３３ｃで取得した庫外の湿度や温度に基づいてその都度設定してもよい。
【００２９】
・撮像条件６：一旦開放された扉が閉鎖された後であって、撮像カメラ１８の広角レンズの結露がレンズヒータ５１により除去されたタイミング。すなわち、広角レンズの結露が除去されたタイミング。
【００３０】
なお、撮像条件としては、上記したもののうちいずれか１つを採用してもよいし、相反しない条件であれば複数を組み合わせて採用してもよい。本実施形態では、判定条件１、判定条件３、判定条件４、判定条件５を採用している。
【００３１】
通信部５２は、いわゆる無線ＬＡＮやＢｌｕｅｔｏｏｔｈ（登録商標）などの無線通信方式により、ルータ１０１との間で通信を行う。具体的には、通信部５２は、撮像された庫内の画像をルータ１０１および通信回線１０２を介してサーバ１０４にアップロードされる。なお、通信部５２は、有線通信方式であってもよい。
【００３２】
レンズヒータ５１は、撮像カメラ１８の広角レンズを加熱することで、後述する図８に示すようにレンズ面の結露の除去を行う（除去手段に相当する）。このレンズヒータ５１は、電熱線等の通電により発熱する発熱部材により構成してもよいし、制御部５０を構成するマイクロコンピュータの発熱またはその発熱を伝える伝熱部材により構成してもよい。この場合、マイクロコンピュータの発熱を利用するために、マイクロコンピュータを省電力モードから復帰させるとよい。また、除去手段としてファン等を採用してもよい。具体的には、ファンを駆動してレンズ面に冷気を送風し、結露が除去されると予想される所定時間が経過した後に、撮像すればよい。いずれにしろ、レンズ面の結露を除去することができればどのような構成であってもよい。
【００３３】
通信端末１０３は、サーバ１０４にアクセスすることにより、サーバ１０４に記憶されている庫内の画像を取得して表示する。つまり、本実施形態では、通信端末１０３は、冷蔵庫１から直接画像を取得するのではなく、一旦サーバ１０４に記憶された画像を取得する。
【００３４】
サーバ１０４は、いわゆるコンピュータシステムにより構成されており、アップロードされた画像を時系列且つ複数枚記憶する。また、サーバ１０４は、通信端末と冷蔵庫１とを対応付けしておくことで、画像を取得する通信端末に対して、該当する冷蔵庫１の画像を提供する。
【００３５】
次に、上記した構成の作用について説明する。なお、以下に説明する処理は主制御部３０や制御部５０が協同して行っている処理であるが、説明の簡略化のため、冷蔵庫１を主体として説明する。
【００３６】
冷蔵庫１の冷蔵室３には、図５に示すように各種の食材が貯蔵されている。冷蔵庫１は、図６に示す撮像処理を実行しており、撮像カメラ１８にて庫内を撮像するための撮像条件が満たされたか否かを判定しており（Ａ１）、上記した判定条件のいずれかが満たされたと判定すると（Ａ１：ＹＥＳ）、すなわち、撮像するタイミングになったと判定すると、ライト（撮像ライト１９）を点灯し（Ａ２）、庫内を撮像する（Ａ３）。これにより、図７に示すような庫内の画像が撮像される。
【００３７】
この図７では、上記したように広角レンズにて庫内を撮像していることから、冷蔵室３内のほぼ全体が撮像されている。つまり、それぞれの棚板１１に載置されている各種の食材と、ドアポケットに収納されている各種の食材が視認可能に撮像されている。また、棚板１１が透明性材料で形成されていることから、例えば最上段の棚板１１に載置されている食材Ｓ１についても、棚板１１を透かして視認可能に撮像されている。
【００３８】
また、撮像ライト１９を点灯することで撮像していることから、逆光にならず、ここの食材が視認可能に撮像されている。なお、図示は省略するが、比較例として天井ライト１３を点灯した状態で庫内を撮像した場合、天井ライト１３からの光が逆光となり、食材Ｓ１や２段目の棚板１１に載置されている食材は視認が困難な状態で撮像されることになる。つまり、冷蔵庫１は、撮像カメラ１８に対して逆光とならない撮像ライト１９を点灯することにより、庫内を視認可能に撮像するための撮像環境を整備している。
【００３９】
そして、冷蔵庫１は、撮像した画像情報をサーバ１０４へ送信する（Ａ４）。このとき、撮像した時刻も同時にサーバ１０４に送信される。これにより、サーバ１０４には、庫内の画像が時系列で、且つ複数枚記憶（蓄積）される。
【００４０】
ところで、冷蔵室３の扉を開放した場合、右扉３ｂの内板１４に設けられている撮像カメラ１８は、広角レンズごと庫外の環境にさらされる。これは、右扉３ｂが開放された場合だけでなく、左扉３ａが開放された場合も同様である。このため、扉が閉鎖された直後においては、庫外の環境にもよるものの、図８（ａ）に示すようにレンズ面が結露して曇る可能性がある。なお、図８ではレンズ面に生じた結露をハッチングにて模式的に示しており、図８（ａ）は結露した状態（扉を閉鎖した直後）を示し、図８（ｂ）は徐々に結露が除去された状態（扉を閉鎖した後、しばらく時間が経過した状態）を示し、図８（ｃ）は結露が除去された状態（遅延撮像時間が経過した状態）を示している。
【００４１】
このように、扉を閉鎖した直後に庫内を撮像すると、結露により視認が困難になるおそれがある。そこで、冷蔵庫１は、上記した判定条件５を採用し、一旦開放された扉が閉鎖された後に遅延撮像時間が経過したタイミングでさらに庫内を撮像する。つまり、判定条件５が成立した場合（Ａ１：ＹＥＳ）、ライトを点灯し（Ａ２）、庫内を撮像し（Ａ３）、撮像した画像情報をサーバ１０４に送信する（Ａ４）。
【００４２】
より詳細には、図９に示すように、扉が閉扉されており、時刻ｔ１にて開扉され、時刻ｔ２で閉扉されたとすると、時刻ｔ２においてまず画像を撮像し、その後遅延撮像時間が経過した時刻ｔ３において再度画像を撮像する。この場合、時刻ｔ４で閉扉されて撮像した後、遅延撮像時間が経過する前の時刻ｔ５にて再び開扉された場合には、閉扉された時刻ｔ６で一旦撮像した後、遅延撮像時間が経過した時刻ｔ７で再度撮像されることになる。これにより、広角レンズの結露が除去された状態、つまり、庫内を視認可能な画像を撮像することが可能となる。
【００４３】
サーバ１０４に画像情報を送信すると、制御部５０は、待機状態となる。この待機状態では、制御部５０をいわゆるスリープモード等の省電力モード（例えば、製氷動作を停止する等）に移行してもよいし、撮像カメラ１８等も含む制御部５０側への通電を遮断して消費電力をゼロとしてもよい。そして、例えばドアセンサにより扉が開放された等を検知した際に主制御部３０から制御部５０に対して通常モードに移行する指令を出力したり、通電を開始したりすればよい。これにより、冷蔵庫１の総消費電力を削減することが可能となる。
【００４４】
さて、サーバ１０４に記憶されている画像は、通信端末１０３にて表示することができる。通信端末１０３は、画像を取得するためのアプリケーションが起動されると、図１０に示す端末側処理（庫内画像表示プログラムに相当する）を実行して、サーバ１０４から最新の画像（あるいは画像情報）を取得する（Ｂ１）。これにより、通信端末１０３の画面には、図１１に示すような庫内の画像が撮像時刻とともに表示される。なお、通信端末１０３には、画面に対応したタッチパネルが設けられている。
【００４５】
この画面には、現在の画像を取得するためのボタンＭ１、アプリケーションを終了するためのボタンＭ２、表示中の画像よりも過去の画像を表示するためのボタンＭ３、表示中の画像よりも新しい画像を表示するためのボタンＭ４等が設けられている。また、通信端末は、所望の領域を拡大して表示することも可能であり、図１１に示す領域Ｒを拡大して図１２に示すように表示することで、例えば卵が何個残っているのかをユーザが把握することができる。
【００４６】
また、通信端末１０３は、ユーザがボタンＭ１をタッチ操作すると、つまり、最新の画像を取得するための操作が入力されると（Ｂ２：ＹＥＳ）、冷蔵庫１に対して庫内を撮像するための指令を送信し（Ｂ３）、サーバ１０４から画像を取得して（Ｂ４）、取得した画像を表示する（Ｂ５）。なお、ステップＢ３の後、冷蔵庫１側では、図６にて撮像条件３が成立したことから庫内を撮像し、撮像した画像情報がサーバ１０４に送信されている。
【００４７】
このように、家電ネットワークシステム１００では、冷蔵庫１が庫内を撮像した画像情報をサーバ１０４に送信し、サーバ１０４がその画像を記憶し、通信端末１０３がサーバ１０４から画像を取得して表示することで、庫内の様子を外出先等の遠隔地にて確認可能としている。
【００４８】
以上説明した本実施形態によれば次のような効果を奏する。
冷蔵庫１は、食品を貯蔵する冷蔵室３等の貯蔵庫の庫内を撮像する撮像カメラ１８と、撮像カメラ１８で撮像した庫内の画像情報を外部の装置に送信するための通信部５２とを備えているので、例えば通信端末１０３のような外部の装置にて庫内の画像を取得することができる。これにより、外出先等の遠隔地で容易に冷蔵庫の庫内を確認することができる。
【００４９】
この場合、本実施形態では庫内の画像を一旦サーバ１０４に記憶させているので、冷蔵庫１側には画像を記憶するための記憶手段を設ける必要が無く、製造コストの増加を抑えることができる。なお、冷蔵庫１に記憶部を設け、冷蔵庫１側で画像を記憶する構成としてもよい。
【００５０】
また、制御部５０は、サーバ１０４に画像情報を送信した後は待機状態となる。つまり、撮像時以外では、制御部５０側（撮像カメラ１８等も含む）の消費電力は、削減された状態あるいはゼロとなる。これにより、冷蔵庫１の総消費電力を削減することが可能となる。
【００５１】
制御部５０は、撮像カメラ１８により庫内を撮像するタイミングを制御するとともに、そのタイミングに合わせて庫内を撮像するためのライトの点灯等の撮像環境を制御する。庫内を撮像するためには光源が必要であり、常に撮像可能な状態になっていると不要な電力を消費してしまうことになるが、庫内を撮像するタイミングに合わせて撮像するときだけ撮像ライト１９等を点灯するように撮像環境を制御することで、不要な電力消費を削減することができる。なお、光源が無い状態でも撮像可能な暗視カメラ（例えば、赤外線カメラ）等を採用してライトが点灯しない状態で撮像してもよい。また、ライトを常時点灯させておいてもよい。
【００５２】
冷蔵庫１は、冷蔵室３の扉が閉鎖された後のタイミングで、撮像カメラ１８により庫内を撮像する。冷蔵庫の貯蔵状況が変わっていないにもかかわらず撮像すると、不要な画像が蓄積されるだけでなく、電力消費の増加も招くことになる。そのため、本実施形態では、冷蔵庫は、扉が一旦開放され、その扉が閉鎖された後のタイミングで庫内を撮像する。これにより、庫内の食材の貯蔵状態が変化する可能性のある状態（扉が一旦開放された状態）において、貯蔵状態が確定した状態（扉が閉鎖した後の状態）で庫内を撮像するにより、不要な撮像を抑制して電力消費が増加することを抑制できる。
【００５３】
また、冷蔵庫１は、扉が閉鎖された後であって、撮像カメラ１８の広角レンズの結露が除去されるまでに要する遅延撮像時間が経過したタイミングで庫内を撮像する。例えば夏期のように気温が高い場合や湿度が高い場合、扉が開放されて庫外の環境にさらされた撮像カメラは、扉が閉鎖されると、冷蔵室３内の温度が低いことからレンズ面に結露が生じる可能性がある。そこで、その結露が除去されると想定される遅延撮像時間が経過したタイミングで再度庫内を撮像することにより、レンズ面に曇りがない明りょうな画像を撮像することができる。したがって、庫内の様子をより確実に把握することができる。
【００５４】
この場合、遅延撮像時間は、庫外センサ３３ｃにより取得した温度や湿度等の庫外の環境に基づいて設定してもよい。これにより、温度や湿度が低い場合等には結露が生じない（或いは少ない）と想定されるため、遅延撮像時間を短くすることができ、消費電力を削減することができる。具体的には、例えば遅延撮像時間が経過するまで制御部５０が待機するような構成の場合、待機時間が短くなることにより、その分の消費電力を削減することができる。
【００５５】
また、撮像カメラ１８の広角レンズの結露を除去する場合、レンズヒータ５１のような除去手段を用いてもよい。この場合、冷蔵庫１は、レンズヒータ５１によりレンズ面の結露を除去した後のタイミングで庫内を撮像することになる。このレンズヒータ５１を用いることにより、遅延撮像時間をさらに短くすることができるので、消費電力を削減することができる。この場合、レンズヒータ５１を制御部５０の自己発熱を伝える伝熱部材で構成すれば、電力を余分に消費することなくレンズ面の結露を除去することができる。また、除去手段としてファンを採用した場合も、遅延撮像時間が短くなることで消費電力を削減することができる。
【００５６】
冷蔵庫１は、例えば通信端末１０３から庫内を撮像するための指令を受け付けたタイミングで庫内を撮像する。例えば、ユーザが外出中であり、その留守中に家族が冷蔵庫１から食材を取り出した等により貯蔵状況が変化する可能性があるが、ユーザの指令によりその時点での画像を撮像することにより、最新すなわち現時点での冷蔵庫１の庫内の様子を把握することができる。
【００５７】
冷蔵庫１は、外出スイッチが操作された場合に庫内を撮像するので、外出後に冷蔵庫１の中の様子を確認したいような状況に対応することができる。この場合、例えば一人暮らしのユーザが外出する場合、冷蔵庫１の貯蔵状況は、ユーザが外出した時点から変化しないと考えられるので、外出スイッチが操作された場合に撮像した画像を最新の庫内の画像として扱うことができる。
【００５８】
なお、実施形態では採用していないが、撮像条件２を採用して庫内の食材の貯蔵状況が変化する可能性があるタイミングで撮像することにより、最新に近い庫内の画像を取得することができる。この場合、右扉３ｂの開放中には撮像カメラ１８の視野がぶれる可能性はあるものの、例えば右扉３ｂが開放される瞬間に撮像することで、そのぶれを低減することができるとともに、扉が開放されれば庫内照明が点灯するので、照度を確保することができる。
【００５９】
冷蔵庫１は、撮像カメラ１８で庫内を撮像する際、庫内を照らすための撮像ライト１９を点灯して撮像環境を制御（整備）する。これにより、扉が閉鎖された状態であっても光源を確保することができ、庫内を視認可能に撮像することができる。
【００６０】
冷蔵庫１は、天井ライト１３や撮像ライト１９あるいは側面ライト３６のように庫内に複数設けられている照明手段のうち、特定の位置（この場合は、特に撮像位置）を照らすための撮像ライト１９を点灯する。撮像カメラ１８で撮像する場合、庫内に設けられている照明手段との位置関係によっては照明が直接視野に入り込み逆光となる可能性があるが、照明手段の全てを点灯するのではなく、例えば撮像ライト１９のように撮像する際に逆光とならない位置等の特定の位置を照らすための照明手段を点灯することにより、画像をより鮮明に撮像することができる。具体的には、例えば撮像カメラ１８と対向する背面側に照明手段が設けられている場合は、少なくとも最も逆光となる照明手段を消灯し、他の照明手段（天井ライト１３等）などを利用すること等が考えられる。
【００６１】
撮像ライト１９は、撮像カメラ１８の対向位置外であって、且つ撮像カメラ１８の視野と同じ向きを照らすように設けられているので、撮像ライト１９からの光が逆光とならず、庫内の様子を詳細に把握することができる。
【００６２】
庫内を撮像する際には撮像カメラ１８の視野を確保するためにある程度の距離が必要となるが、撮像カメラ１８を冷蔵室３の扉に設けているので、撮像カメラ１８と、棚板１１等に収納されている食材との距離を確保することができ、視野を大きくすることができる。
【００６３】
撮像カメラ１８を右扉３ｂの内板１４に設けているので、扉が閉鎖された状態であっても、庫内を撮像することができる。
この場合、撮像カメラ１８を冷蔵室３の上下方向の中央付近、且つ、冷蔵室３の左右方向の中央付近に設けるとともに、広角レンズを採用しているので、撮像カメラ１８は、冷蔵室３の庫内のほぼ全域を、庫内の中央部付近から画像（つまり、ユーザが通常冷蔵庫1内を見ている状態と近似した状態での画像）として撮像することができる。このとき、棚板１１を透明性材料で形成していることから、例えば最上段の棚板１１に載置されている食材についても、棚板１１を透かして視認可能に撮像することができる。
【００６４】
撮像カメラ１８に隣接するドアポケット９ｂは、撮像カメラ１８側の部位が撮像カメラ１８を避ける方向に形成されているので、広角レンズを採用している撮像カメラ１８の左右方向の視野を確保することができる。また、ドアポケット９ｂに隣接した位置に撮像カメラ１８を設けているので、上下方向の視野がドアポケット９ｂにより遮られることも無い。
【００６５】
撮像カメラ１８をドアポケット８〜１０の少なくとも一部を撮像することが可能な位置に配置しているので、ドアポケット８〜１０に収納されている食材も撮像可能となり、庫内に貯蔵されている食材をより詳細に把握することができる。なお、撮像カメラ１８に隣接して設けられている本実施形態のドアポケット９ｂについては、視野外であっても（撮像できなくても）よい。また、撮像カメラ１８をドアポケットの間に設けてもよい。このような撮像カメラ１８の設置位置は、後述する第２実施形態で説明する着脱可能なカメラ装置を利用する場合であっても、同様の効果を得ることができる。
【００６６】
通信端末１０３は、画像を表示する表示部を有し、上記した冷蔵庫１で撮像された庫内の画像をサーバ１０４から取得して表示部に表示するので、外出先等の遠隔地から庫内の様子を把握することができる。
【００６７】
上記した冷蔵庫１と、上記した通信端末１０３と、冷蔵庫１で撮像された庫内の画像を記憶する記憶手段を有するサーバ１０４とにより構成される家電ネットワークシステム１００によれば、通信端末１０３が通信回線１０２を介してサーバ１０４に接続し、当該サーバ１０４に記憶されている庫内の画像を取得して表示するので、外出先等の遠隔地から庫内の様子を把握することができる。この場合、画像の記憶をサーバ１０４にて行っているため、冷蔵庫１側には大容量の記憶部を設ける必要が無いので、冷蔵庫１のコストが増加することを防止できる。また、通信端末１０３は、サーバ１０４から画像を取得するので、冷蔵庫１の制御部５０を通信可能なように待機させておく必要が無く、冷蔵庫１側の消費電力が増加することを抑制できる。
【００６８】
また、撮像カメラ１８で撮像した貯蔵庫の庫内の画像情報を取得する画像取得処理（図１０のステップＢ１、Ｂ４）と、画像取得処理で取得した画像情報を表示する表示処理（図１０のステップＢ５）と、庫内を撮像させるための指令を出力して撮像カメラ撮像手段に庫内を撮像させる撮像処理（ステップＢ２、Ｂ３）と、を実行させる庫内画像表示プログラムを通信端末１０３にて実行することで、遠隔地等から庫内を確認することができる。
【００６９】
（第２実施形態）
以下、第２実施形態について、図１３から図２５を参照しながら説明する。なお、冷蔵庫の構成は第１実施形態とほぼ共通するので、図２等も参照しながら説明する。
【００７０】
図１３（Ａ）および（Ｂ）に示すように、本実施形態によるドアポケット２００（冷蔵庫用ドアポケットに相当する）は、物品を収納する収納部２０１と、カメラ装置３００を保持するための保持部２０２とを備えている。つまり、このドアポケット２００は、特許請求の範囲に記載した冷蔵庫用ドアポケットと冷蔵庫用ホルダとの機能を備えている。なお、保持部２０２は、撮像手段を取り付けるための被取り付け部に相当するとも言える。また、収納部２０１に注目した場合、ドアポケット２００は、保持部２０２に保持されたカメラ装置３００（つまり、撮像手段）に隣接して設けられているとも言える。
【００７１】
収納部２０１は、保持部２０２側の壁部２０３が、保持部２０２から離間する方向に斜めに形成されている。つまり、ドアポケット２００は、保持部２０２にてカメラ装置３００を保持した（取り付けた）場合、そのカメラ装置３００の視野を妨げないように、視野の外縁に沿った形状に形成されている。
【００７２】
保持部２０２は、本実施形態では、上部側（図３（Ａ）の図示上方側）が開口した概ね箱状に形成されており、上部側の開口からカメラ装置３００が出し入れ（着脱）される。また、保持部２０２の前面側（つまり、庫内に向かう側）の壁部２０４は、カメラ装置３００を保持した状態でレンズ３０１および撮像ランプ３０２（図１５等参照。カメラ側照明手段、照明手段に相当する）に対応する位置に切り込み２０５が形成されており、カメラ装置３００の視野を妨げたり照明が反射したりすることが防止されている。
【００７３】
また、保持部２０２には、磁石２０６が設けられている。この磁石２０６は、カメラ装置３００の背面側に対向する側がＮ極またはＳ極の何れかとなるように配置されている。なお、磁石２０６の極性については、後述するカメラ装置３００の構成にて詳細に説明する。
【００７４】
このドアポケット２００は、図１４に示すように、右扉３ｂの内板１４に取り付けられる。このため、右扉３ｂが閉鎖された状態では、カメラ装置３００は、その視野が庫内（冷蔵室３）に対向する配置となる。このとき、保持部２０２に保持されるカメラ装置３００は、そのレンズ３０１の中心が、冷蔵室３の左右方向の中心線ＣＬ１と、冷蔵室３の上下方向の中心線ＣＬ２とが交差する位置に対応して保持される。つまり、この状態におけるカメラ装置３００は、冷蔵室３の中央部を中心とした視野となるように配置されている。具体的には、ドアポケット２００の場合、ドアポケット２００の取り付け位置とカメラ装置３００の形状とに基づいて、収納部２０１の底部よりも保持部２０２の底部の方が若干下方に位置する形状とすることで、中心位置が最適となるような形状となっている。
【００７５】
カメラ装置３００は、図１５および図１６に示すように、概ね直方体の形状に形成された筐体３０３の表面にレンズ３０１および撮像ランプ３０２が露出するように設けられている。なお、レンズ３０１および撮像ランプ３０２が直接露出しているのではなく、その表面をカバー等で覆っていてもよい。また、本実施形態でも、レンズ３０１は広角レンズを採用している。
【００７６】
以下、レンズ３０１および撮像ランプ３０２が設けられている側（図１６の場合、図示右側）をカメラ装置３００の正面とし、反対側を背面として説明する。また、図１３に示したように、レンズ３０１と撮像ランプ３０２とが冷蔵庫１の上下方向に配置される向きを縦向きと称し、後述する図２０のようにレンズ３０１と撮像ランプ３０２とが冷蔵庫１の左右方向に配置される向きを横向きと称する。
【００７７】
このカメラ装置３００は、図１６に示すように、筐体３０３内に、制御基板３０４、電池３０５、通信モジュール３０６、検知部３０７が収容されている。制御基板３０４には、レンズ３０１や図示しない撮像素子を有する撮像部３０８（図２１参照）、本実施形態では２個の撮像ランプ３０２、およびそれらを制御するための制御部３０９（図２１参照）等が設けられている。撮像素子は、ＣＣＤやＣＭＯＳ等の周知の撮像素子であり、その形状が長方形となっている。本実施形態の場合、撮像素子の長手方向が上下方向（つまり、筐体の縦方向）となるように配置されている。このため、一般的には縦長に形成されている冷蔵室３を撮像する際には、カメラ装置３００を縦置きすることで、撮像素子を縦長の向きに配置することができる。一方、後述するように横長に形成されている野菜室４を撮像する際には、カメラ装置３００を横置きすることで、撮像素子を横長の向きに配置することができる。また、撮像ランプ３０２として、本実施形態ではＬＥＤを採用している。なお、図示は省略するが、カメラ装置３００には電源スイッチも設けられている。
【００７８】
電池３０５は、リチウム電池で構成されており、制御部３０９や通信モジュール３０６あるいは検知部３０７等に電力を供給する。この電池３０５は、筐体３０３の最下部側であって、筐体の前後方向（図示左右方向）の概ね全域を占有する配置となっている。筐体３０３に収納されている各部材のうち比較的重量が大きい電池３０５をそのような配置とすることで、カメラ装置３００を設置した際のバランスがある程度確保されている。また、重心をカメラ装置３００の下部（縦置きの場合）にしたことにより、カメラ装置３００を右扉３ｂのドアポケット２００に配置した場合において、扉開閉時の遠心力や振動等によりカメラ装置３００がドアポケット２００から飛び出ること等が防止される。また、リチウム電池を使用することで、冷蔵庫１内のように比較的低温の場所であっても優れた放電特性を示すことになる。
【００７９】
さて、図２５に示すように、本実施形態の家電ネットワークシステム５００では、冷蔵庫１側に、カメラ装置３００の通信モジュール３０６とは異なる別の通信装置５０１が設けられており、この通信装置５０１によって、冷蔵庫１は、外部の装置からの撮像指令を受信する。なお、この通信装置５０１は冷蔵庫１に取り付けられており、カメラ装置３００は冷蔵室３内に配置されている。この通信装置５０１は、庫内を撮像するための指令（以下、撮像指令とも称する）を外部の装置から受信するための庫側通信手段を構成している。本実施形態では、通信装置５０１は無線通信用のアダプタとして形成されており、冷蔵庫１に対して着脱可能となっている。このため、冷蔵庫１を購入したユーザが、購入後にオプションとして設置することも可能となっている。この通信装置５０１は、図２１に示すように、冷蔵庫１の主制御部３０との間で無線通信方式や有線通信方式により通信可能となっている。そして、冷蔵庫１は、詳細は後述するが、撮像指令を受信すると、カメラ装置３００に対して撮像指示（図２３参照。本実施形態では光の点滅信号）を報知する。
【００８０】
カメラ装置３００の通信モジュール３０６は、ルータ１０１との間で通信可能に構成されており、通信端末１０３やサーバ１０４に画像情報を送信する。この通信モジュール３０６は、カメラ装置３００で撮像した庫内の画像情報を通信端末１０３やサーバ１０４（図１参照）等の外部の装置に送信するためのカメラ側通信手段として機能する。なお、この通信モジュール３０６は、カメラ装置３００の筐体３０３の背面側（最外縁側）の壁部に沿って設けられている。つまり、通信モジュール３０６は、内蔵する図示しないアンテナと筐体３０３との間に他の部品等が存在しないような内部配置とすることで、アンテナによる電波の送受信が阻害されること（通信障害が発生すること）が抑制されている。また、通信モジュール３０６は電池３０５に対して垂直向きに配置されており、アンテナと電池３０５とが対向しないような配置とされている。
【００８１】
そして、冷蔵庫１の右扉３ｂの前面は上記したようにガラス材料で形成されていることから、庫内に配置されたカメラ装置３００から発せられる無線通信用の電波は、金属板等を用いる場合に比べて、扉を透過し易くなっている。また、カメラ装置３００は、ドアポケット２００の保持部２０２（つまり、右扉３ｂの開放端部側）に配置されているので、特に本実施形態のように観音開きの場合には、各扉の隙間から電波を庫外に出すことができる。また、保持部２０２に配置することで、例えば扉の前面が金属材料で形成されている場合等であっても、カメラ装置３００からの電波が庫外に出易くなる。また、扉の内部はウレタンによって充填されているので、電波を遮る可能性が少ない。
【００８２】
ところで、冷蔵庫１には、断熱材として、ウレタンの代わり、あるいはウレタンとともに、真空断熱材が用いられることがある。この真空断熱材は、金属製の箔部材（例えばアルミ箔）と例えば合成樹脂製のフィルム部材とを貼り合わせた（ラミネート加工した）フィルムでガラス繊維等の芯材を包むことにより、例えば長方形の薄板状に形成されて断熱材となる。この真空断熱材は、冷蔵庫１の筐体や扉の内部部材として用いられるものの、例えばカメラ装置３００をドアポケット２００に配置する場合には保持部２０２に対応する位置を避けて真空断熱材を設ける等により、電波を外に出し易くすることができる。
【００８３】
この場合、右扉３ｂについてはカメラ装置３００の投影面（特に通信モジュール３０６の部位）を避けるように真空断熱材を配置したり、左扉３ａや下部冷凍室７の扉７ａ等、カメラ装置３００が配置されない扉についてはその全面に真空断熱材を配置したりすること等によって、冷蔵庫１の断熱性を低下させること無く電波を出し易くすることができる。また、上記したガラス板３ｂ１を補強することや後述する図２９のように磁石にてカメラ装置３００を取り付けのための金属部材を扉に設けることも考えられるが、その場合も、真空断熱材の場合と同様に配置を工夫することで、電波を出し易くすることができる。
【００８４】
このように庫内から電波を出し易くする構造は、本実施形態のように、カメラ装置３００に通信モジュール３０６を設け、そのカメラ装置３００を冷蔵庫１の庫内に配置し、撮像した画像情報をカメラ装置３００から直接的に外部の装置に伝達する構成（つまり、冷蔵庫１の通信装置５０１を介さずにカメラ装置３００が画像情報を送信する構成）において、特に有意になる。
【００８５】
ここで、上記した磁石２０６の極性について説明する。
磁石２０６は、図１７に示すように、保持部２０２において、カメラ装置３００の背面つまり検知部３０７に対応する位置に設けられている。このため、カメラ装置３００が保持されている状態では、検知部３０７が磁石２０６と対向した状態、且つ、磁石２０６と接近した状態となる。この場合、磁石２０６は、カメラ装置３００と対向する側がＮ極となるように配置されている。このため、検知部３０７は、Ｎ極からの磁界の強さを検知することになる。
【００８６】
さて、磁石２０６の極性をこのような配置にする理由は、カメラ装置３００を冷蔵室３以外の例えば野菜室４等に設置することを考慮しているためである。野菜室４は、図１８に示すように、扉４ａにレール部材４ｂが取り付けられており、そのレール部材４ｂに野菜室ボックス４ｃが取り付けられた構造となっている。このような野菜室４をカメラ装置３００で撮像するために、本実施形態では、図１９に示す冷蔵庫用ホルダ４００を採用している。この冷蔵庫用ホルダ４００は、カメラ装置３００を保持する保持部４０１と、保持部４０１を野菜室ボックス４ｃに取り付けるための係止部４０２とを備えている。この保持部４０１は、カメラ装置３００を横置きで保持可能な形状に形成されているとともに、前面側の前壁４０３は、レンズ３０１の視野を遮らない高さに形成されている。
【００８７】
そして、保持部４０１の後壁４０４には、カメラ装置３００の背面側の位置に、磁石４０５が設けられている。この磁石４０５は、カメラ装置３００側がＳ極となるように配置されている。このため、図２０に示すように冷蔵庫用ホルダ４００を野菜室４に取り付け、カメラ装置３００を保持部４０１に保持した状態では、カメラ装置３００は、横置きの状態で保持されるとともに、検知部３０７が、図１７と同様に磁石４０５に対向する。そして、検知部３０７は、Ｓ極からの磁界の強さを検知する。
【００８８】
このように、磁石２０６および磁石４０５は、カメラ装置３００に対向する側の極性が互いに逆になるように配置されている。このため、カメラ装置３００は、冷蔵室３に設置された場合と野菜室４に設置された場合とで、異なる磁界の強さを検知部３０７で検知する。換言すると、カメラ装置３００は、自身がいずれの貯蔵室に設置されたかを検知することが可能となる。また、カメラ装置３００は、磁気を検知することで、設置された冷蔵庫１が自身の動作対象であるかを識別することができる。つまり、磁石２０６および磁石４０５は、特許請求の範囲に記載した被検知手段としても機能する。
【００８９】
次に、このカメラ装置３００の電気的構成等について説明する。
図２１に示すように、カメラ装置３００は、制御部３０９を備えている。この制御部３０９は、ＣＰＵ３０９ａ、ＲＯＭ３０９ｂ、ＲＡＭ３０９ｃおよびＲＴＣ３０９ｄ等を有するマイクロコンピュータで構成されており、カメラ装置３００の全体を制御するカメラ側制御手段として機能する。具体的には、制御部３０９は、レンズ３０１や撮像素子を有する撮像部３０８による撮像タイミングの制御、撮像ランプ３０２による撮像する際の撮像環境を整える制御（点灯制御）、通信モジュール３０６による画像情報の送信および後述する指令の受信等のための制御、検知部３０７による設置状態を判断・識別するための制御を行う。また、制御部３０９は、本実施形態では、撮像した画像の補正等を行う画像処理も行っている。
【００９０】
まず、検知部３０７による設置状態の判断・識別の制御について説明する。検知部３０７は、温度センサ３１０、磁気センサ３１１、加速度センサ３１２、および照度センサ３１３を有している。制御部３０９は、温度センサ３１０により外部の温度を検知することで、カメラ装置３００がいずれ貯蔵庫に設置されているかの設置場所を判断する。以下、具体的な判断について説明する。
【００９１】
温度センサ３１０は、カメラ装置３００が設置された場所の温度を検知する。この温度センサ３１０は、図２２（Ａ）に示すように、温度に比例して出力が大きくなる。そして、一般的には冷蔵室３の温度と下部冷凍室７の温度とは十数℃程度の差があることから、基準となる基準温度を設定しておき、その基準温度より高ければ冷蔵室３に設置されていると判断する一方、基準温度よりも低ければ下部冷凍室７に設置されていると判断する。この場合、下部冷凍室７に設置されていると判断した場合、故障等の虞が懸念されるため、撮像ランプ３０２を点灯させたり、ブザー等の音声出力手段を設けておいて音声にて設置場所が想定外であることを報知したり、通信モジュール３０６を介して冷蔵庫１側にその旨を送信して冷蔵庫１の操作パネル３３等にてユーザに報知したりする。このように、カメラ装置３００は、温度センサ３１０で検知した温度に基づいて、設置場所を判断する。
【００９２】
磁気センサ３１１は、上記したように磁石２０６や磁石４０５からの磁界を検知する。この磁気センサ３１１は、図２２（Ｂ）に示すように、Ｎ極またはＳ極のいずれからの磁界であるかによって出力が正側（Ｎ極の場合）と負側（Ｓ極の場合）とに変化することから、その正負によって設置場所を判断することができる。つまり、磁気センサ３１１の出力が正側（０ではない）である場合には、本実施形態においては上記したように冷蔵室３のドアポケット２００に設けられている磁石２０６に対向する位置に設置されたこと、すなわち、カメラ装置３００が冷蔵室３に設置されたことを検知できる。
【００９３】
尚、冷蔵室３と野菜室４とに温度差がある場合には、この温度センサ３１０の出力に基づいて冷蔵室３に設置されたか野菜室４に設置されたかを判断するようにしてもよい。いずれにしろ、温度センサ３１０の出力に基づいて、カメラ装置３００が貯蔵室内に設置されたことを検知することができる。
【００９４】
一方、磁気センサ３１１の出力が負側（０ではない）である場合には、上記した磁石４０５に対向する位置に設置されたこと、すなわち、カメラ装置３００が野菜室４に設置されたことを検知できる。尚、カメラ装置３００を例えば棚板１１等に設置する場合（図２４（Ｂ）参照）を考慮して、本実施形態では、正側基準値を超えた場合に冷蔵室３であると判定し、負側基準値を下回った場合に野菜室４であると判断する構成としている。そして、０付近の出力の場合には、磁石が設置されていない棚板１１等であると判断する。尚、上記した温度センサ３１０と組み合わせて、貯蔵室内であることを判断条件に加えてもよい。
【００９５】
加速度センサ３１２は、カメラ装置３００に加わる加速度（重力加速度）を検知する。この加速度センサ３１２は、所謂三軸センサとしてＸ方向、Ｙ方向およびＺ方向（図１５、図１６参照）の三軸方向の加速度を検知する。このため、図２２（Ｃ）に示すように、縦置きした場合と、縦置き（上下逆向き）した場合と、横置きした場合と、横置き（左右逆向き）した場合とにおいて、その出力が変化する。これにより、カメラ装置３００が設置された向きを検知することができる。検知したカメラ装置３００の向きは、後述する画像処理にて利用される。なお、設置場所の判断に用いてもよい。
【００９６】
次に、撮像タイミングについて説明する。尚、撮像の流れは、第１実施形態の図６とほぼ共通するので、図６も参照しながら説明する。
カメラ装置３００は、予め定められている所定時間が経過した場合、および、外部の装置からの指令を受信した場合のいずれかを判定している。すなわち、撮像条件が満たされか否かを判定している（Ａ１）。この場合、カメラ装置３００は、ＲＴＣ３０９ｄにより計時を行うことで、所定期間が経過したかを判定するとともに、指令を受信したか否かを、照度センサ３１３で検知した照度に基づいて判定する。
【００９７】
検知部３０７を構成する照度センサ３１３は、カメラ装置３００が設置された場所の照度を検知する。本実施形態の場合、照度センサ３１３は、庫内照明が点灯された程度の照度になると、その旨を制御部３０９に通知する。また、カメラ装置３００が設置される本実施形態の冷蔵庫１は、外部の装置から撮像するための指令を受信すると、例えば天井ライト１３のような庫内照明を所定の点滅パターンで点滅させる。なお、撮像指令は、例えば通信端末１０３の場合には、第１実施形態の図１０の端末側処理のステップＢ２〜Ｂ４と同様に行われる。
【００９８】
この点滅パターンは、冷蔵庫１から着脱可能なカメラ装置３００に対して撮像タイミングを報知するために予め設定されている。つまり、冷蔵庫１は、庫内照明を点滅させることで、カメラ装置３００に対して撮像指示を報知する。これは、上記したように、冷蔵庫１が動作対象であるか（つまり、庫内照明の点滅が可能な冷蔵庫であるか）を判断可能とする構成や、カメラ装置３００に動作対象であることを識別させるための構成を設けたことにより実現されている。すなわち、庫内照明を点滅可能であることが、カメラ装置３００の動作対象である冷蔵庫１であることを示している。
【００９９】
カメラ装置３００は、図２３の期間Ｔ１に示すように、通常は所謂スリープモード等の省電力状態となっている一方、照度センサは作動している。冷蔵庫１は、外部の装置から指令を受信すると、上記したように所定の点滅パターンにて庫内照明を点滅させる。このとき、庫内照明が点灯されたことから、照度センサ３１３から制御部３０９に対して通知（例えば割り込み信号の入力等）が行われ、制御部３０９が動作状態となる。つまり、庫内照明が所定の点滅パターンで点滅した場合、撮像条件が満たされたと判断する。点滅パターンは、例えば点灯と消灯の周期、その繰り返し回数等、任意に設定することができる。
【０１００】
撮像条件が満たされたと判断すると（Ａ１：ＹＥＳ）、カメラ装置３００は、撮像ランプ３０２を点灯させ（Ａ２）、庫内を撮像し（Ａ３）、その画像情報をサーバ１０４等へ送信する（Ａ４）。
【０１０１】
ところで、冷蔵庫１は、指令を受けた場合以外にも庫内照明が点灯することがある。例えば、図２３の期間Ｔ２のように、ユーザにより扉が開放されたような場合には、点滅パターンではない態様（この場合、連続点灯）で庫内照明が点灯される。この場合、カメラ装置３００は、庫内照明が点灯したことから一旦は動作状態となるものの、所定の点滅パターンではないので、つまり、撮像条件が満たされていないので、再び待機状態になる。
【０１０２】
また、カメラ装置３００は、図２３の期間Ｔ３のように、前回（期間Ｔ１）の撮像から予め設定されている撮像間隔設定期間が経過した等、所定期間が経過すると、撮像条件が満たされたと判定して（Ａ１：ＹＥＳ）、動作状態となり、撮像ランプ３０２を点灯させ（Ａ２）、その時点での庫内の画像を撮像し（Ａ３）、画像情報を送信する（Ａ４）。
【０１０３】
このように、カメラ装置３００は、所定期間が経過したか、および、外部の装置からの指令（ユーザの意思）があったかに基づいて、庫内を撮像する。そして、ユーザは、図２４（Ａ）〜（Ｃ）に示すように、カメラ装置３００を設置した場所に応じて、庫内の様子を確認することができる。なお、カメラ装置３００を冷蔵室３と野菜室４との双方に設ける等、複数のカメラ装置３００を設けてもよい。
【０１０４】
さて、本実施形態の場合、カメラ装置３００は、単に庫内を撮像するだけでなく、画像の変換等の画像処理も行っている。
カメラ装置３００は、上記したように縦置きまたは横置きすることができるが、その場合、画像は、９０度（あるいは２７０度）回転した状態となっている。そのため、カメラ装置３００は、サーバ１０４に送信する前に、画像の変換を行っている。これにより、図２４（Ａ）と、（Ｂ）又は（Ｃ）とに示すように、カメラ装置３００の向きが異なっている場合であっても、上下方向が統一された画像、すなわち、ユーザが冷蔵庫１を直接確認するときと同様の状態の画像を通信端末１０３にて表示させることができる。
【０１０５】
また、レンズ３０１が広角レンズであることから、撮像した画像は、第１実施形態の図７に示したように中央付近が歪んだ画像となる。そのため、カメラ装置３００は、その歪みを補正する画像処理を行うことにより、具体的には、中央付近と上下の端部との比率を一致させるような画像処理を行うことにより、図２４（Ａ）に示すように、歪みの少ない画像を表示可能としている。なお、画像とカメラ装置３００の向きとを合わせて画像情報として送信し、サーバ１０４あるいは通信端末１０３にて画像処理を行う構成としてもよい。画像処理を外部の装置側で行うことにより、カメラ装置３００の消費電力を削減することができる。これは、本実施形態のように外部からの給電手段を持たないカメラ装置３００にとって有意である。
【０１０６】
以上説明した本実施形態によれば、第１実施形態で得られる効果に加えて（あるいは代わりに）、次のような効果を奏する。
外出先等の遠隔地で冷蔵庫１の庫内を確認したいと考えるユーザが存在するが、庫内を撮像するための撮像部３０８（撮像手段）と、撮像部３０８で撮像した庫内の画像情報をサーバ１０４等の外部の装置に送信するための通信モジュール３０６（通信手段）と冷蔵庫１に設けているので、外出先等において、通信端末１０３により庫内の画像を取得でき、庫内を確認することができる。
【０１０７】
庫内の画像を撮像する際、むやみに撮像を繰り返すと電力消費が増加して電池切れを引き起こしたり、サーバ１０４に不要（同一の画像）が何枚も蓄積されたりする虞があるが、カメラ装置３００の制御部３０９は、により庫内を撮像するタイミングを制御することにより、そのような虞を低減することができる。
【０１０８】
具体的には、実施形態のように、所定期間が経過した場合には例えば家族等が冷蔵庫１から食材を取り出す等の行為を行う可能性があるので、所定期間を経過したタイミング、すなわち、貯蔵状況が変化した可能性があるタイミングで庫内を撮像することで、不必要に撮像が繰り返されることを防止できる。
【０１０９】
また、ユーザからの指令を受信したタイミングで庫内を撮像することで、最新の貯蔵状況を把握することができる。この場合、上記した所定期間が経過したタイミングで撮像することを行わなければ、換言すると、ユーザの意思表示がされた際だけ撮像するようにすれば、不要な撮像が行われなくなるので、さらに消費電力を削減することができる。なお、実施形態でも説明したが、第１実施形態の各撮像条件と組み合わせることで、貯蔵状況が変化した際の画像を取得するようにしてもよい。
【０１１０】
冷蔵庫１の庫内を確認する必要が無いと考えるユーザも存在することが予想されるが、カメラ装置３００は、庫内を撮像するための撮像部３０８と、撮像部３０８で撮像した庫内の画像情報をサーバ１０４等の外部の装置に送信するための通信モジュール３０６とを備え、冷蔵庫１に着脱可能な構成となっているので、確認を不要とするユーザは、カメラ装置３００を取り外すことができる。また、購入時には不要と考えていたが、購入後に確認したいと考えるユーザも、カメラ装置３００を追加することで、庫内を確認することができるようになる。
【０１１１】
この場合、通信装置５０１も着脱可能な構成としているので、カメラ装置３００の場合と同様に、庫内の確認を不要とするユーザは取り外すことで消費電力を低減することができるとともに、後から付け足したいユーザにも対応することができる。
【０１１２】
撮像するためには光源が必要であるが、庫内を照らすための撮像ランプ３０２（カメラ側照明手段）をカメラ装置３００に設けているので、カメラ装置３００単体で庫内を撮像することができる。なお、冷蔵庫１と連携して、庫内照明を点灯する構成であってもよいことは勿論である。
【０１１３】
カメラ装置３００を設置する場合、設置位置によっては視野が遮られる等により上手く庫内を撮像できない可能性もあるが、撮像するのに有利な場所もある。そこで、冷蔵庫１にカメラ装置３００を取り付けるための被取り付け部（実施形態では、ドアポケット２００の保持部２０２や、冷蔵庫用ホルダ４００の保持部４０１等）を設けることで、例えば冷蔵室３の全域を撮像可能な場所にカメラ装置３００を設置することができる。
【０１１４】
カメラ装置３００の、上記したような庫内照明を点滅させることができないと外部の装置からの撮像指令を実行することができない虞があるが、磁石２０６や磁石４０５を設けてその磁気を検知部３０７にて検知する構成とすることにより、つまり、その冷蔵庫１がカメラ装置３００による撮像が可能な（撮像が許可された）動作対象であることを検知させるための被検知手段備えることにより、そのような虞を低減することができる。
【０１１５】
この場合、通信モジュール３０６にて冷蔵庫１側と通信することで、つまり、通信モジュール３０６を検知手段（この場合、通信装置５０１が被検知手段となる）として用いてもよい。また、通信モジュール３０６を、カメラ装置３００が該冷蔵庫１用に設計されたもの（例えば、庫内照明を点滅させることで撮像ができるもの）であるかを識別するための識別手段として用いてもよい。
【０１１６】
カメラ装置３００は、実施形態の場合には電池３０５により駆動される（つまり、冷蔵庫１に設置されている際には外部からの電源供給が無い状態で駆動される）ことから、可能な限り電力消費を低減することが望ましい。そこで、通信モジュール３０６は通信装置５０１と通信するようにすることにより、通信モジュール３０６で外部の装置と無線通信を行う場合に比べて、無線通信による電力消費を低減することができる。
【０１１７】
また、外部の装置から指令を受ける場合、通信手段が常に動作して指令を待機する必要があるが、実施形態のように通信装置５０１にて指令を受信する構成としたことで、通信モジュール３０６を常時動作させておく必要が無くなり、電池切れとなるまでの期間をより長くすることができる。この場合、通信装置５０１には例えばＵＳＢ等の有線方式により冷蔵庫１側から給電可能な構成としておけば、通信装置５０１が無い場合には不要な給電が行われなくなるとともに、通信装置５０１が有る場合には例えば常時動作させることができるようになる。
【０１１８】
カメラ装置３００を着脱可能とする場合、無線通信を採用したほうが利便性を向上させることができるものの、上記したような通信装置５０１にて指令を受信する場合、それを何らかの方法でカメラ装置３００に伝達する必要がある。そこで、カメラ装置３００に照度センサ３１３を設け、庫内照明を点滅させることで撮像指令を間接的にカメラ装置３００に伝達する構成とすることで、無線通信を採用したカメラ装置３００に、撮像タイミングを通知することができる。この場合、カメラ装置３００側は照度センサ３１３を動作状態としておけばよいので、通信モジュール３０６を動作せる場合に比べて電力消費を削減することができる。
【０１１９】
また、カメラ装置３００が設けられる右扉３ｂの前面は、非金属材料で形成されているので、右扉３ｂによって密閉された冷蔵室３内にカメラ装置３００を通信モジュール３０６ごと配置する場合であっても、電波を庫外に出し易くすることができる。野菜室４にカメラ装置３００を配置する場合も同様である。
【０１２０】
例えば冷蔵室３は一般的には縦長の形状であり、野菜室４は一般的には横長の形状であることを考慮すると、複数の貯蔵室が存在する場合、貯蔵室に応じてカメラ装置３００の視野を切り替えることが望ましい。また、画像が横向きになるとユーザが違和感を覚える可能性もあるので、ユーザが冷蔵庫１を見た場合の状態、つまり、冷蔵庫の上下方向が統一された画像とすることが望ましい。そこで、上記した磁石２０６や磁石４０５を設けることにより、さらには、カメラ装置３００に対向する側の極性が異なるような配置とすることにより、いずれの位置（この場合、メーカ等が予め設定した取り付け位置。保持部２０２または保持部４０１に対応する）に設置されているのかを把握することで、その位置におけるカメラ装置３００の向きを判断可能としている。また、冷蔵室３の場合には本実施形態で縦置き、野菜室の場合には横置きとなるように保持部２０２や保持部４０１が予め形成されていることにより、貯蔵室に応じた向きでカメラ装置３００が設置されるようにしている。これらにより、貯蔵室に応じて適切に視野を確保することができるとともに、画像処理を行う際にどの向きに回転させれば良いか等を判別できるようになる。
【０１２１】
この場合、加速度センサ３１２で検出した加速度の向きからカメラ装置３００の向きを判断することもできるし、温度センサ３１０で検出した温度に基づいて設置場所を判断することもできる。
【０１２２】
カメラ装置３００が例えば冷凍室に誤って設置されると、動作不良等を引き起こす可能性があるが、温度センサ３１０で温度を検知することで、また、実施形態のように報知可能とすることで、動作不良等を引き起こす虞を低減することができる。
【０１２３】
カメラ装置３００で庫内を撮像するためには、庫内に対して正面から、且つ、視野を確保するためにある程度の距離を確保することが望ましいが、冷蔵庫１の場合、その正面側の取り付け位置は、扉により制限される。そこで、少しでも距離を確保するために扉の内板１４に取り付けることが考えられるが、その場合、ドアポケットが視野に掛かる可能性がある。そこで、実施形態のドアポケット２００は、その壁部２０３が、保持部２０２（被取り付け部）を避ける形状に形成されているので、カメラ装置３００の視野を遮ることが無い。
【０１２４】
また、上記したように庫内を撮像するのに有利な場所が存在することから、その場所をユーザに知らせることが望ましい。そこで、ドアポケット２００のように、カメラ装置３００を保持する保持部２０２（取り付けるための被取り付け部）を設けることで、設置場所を明示することができる。また、保持部２０２に保持された状態では、カメラ装置３００の視野が冷蔵室の中心に来るように保持部２０２が形成されているので、庫内のほぼ全域を撮像することができる。なお、保持部２０２に設置することでその中心位置が規定されることから、画像の歪みを補正する画像処理において、補正する際の中心位置と画像の中心位置とが一致し、その中心位置を中心として均等に歪み補正を行えばよいので、画像処理の演算負荷の低減を図ることもできる。
【０１２５】
また、このドアポケット２００には、磁気センサ３１１の検知対象となる磁石２０６を設けているので、上記したように、設置場所をカメラ装置３００に識別させることができる。
【０１２６】
冷蔵庫１場合、野菜室４等も設けられているが、野菜室４には所謂ドアポケットが設けられておらず、また箱状に形成されていることから、単にカメラ装置３００を設置すると、収納される野菜等で覆われてしまう虞がある。そこで、冷蔵庫用ホルダ４００のように、カメラ装置３００を保持する保持部４０１を有する冷蔵庫用ホルダ４００を用いてカメラ装置３００を野菜室４に設置することができる。この場合、保持部４０１を野菜室ボックス４ｃの縁等に係止する係止部４０２を備えているので、野菜室４の上部側且つ扉４ａ側に設置することができ、野菜等に覆われることなく、野菜室を撮像可能とすることができる。また、係止部４０２にて係止しているので、不要な場合には容易に取り外すことができる。
【０１２７】
また、この冷蔵庫用ホルダ４００にも磁石４０５を設けていることで、カメラ装置３００は、自身の設置場所を上記したように判断することができる。
また、家電ネットワークシステム５００、庫内画像表示プログラムが奏する効果は、第１実施形態と共通する。
【０１２８】
（第３実施形態）
以下、第３実施形態について、図３０から図３５を参照しながら説明する。なお、上記した第１実施形態や第２実施形態と実質的に共通する構成については、同一の符号を付して説明する。
【０１２９】
まず、図３０を参照しながら、本実施形態の冷蔵庫７００が備える機能について説明する。冷蔵庫７００は、制御ブロック７０１（制御手段）、撮像ブロック７０２（撮像手段）、照明ブロック７０３（照明手段）、開検知ブロック７０４（扉開検知手段）、開度検知ブロック７０５（開度検知手段）、照度検知ブロック７０６（照度検知手段）、通信ブロック７０７（通信手段、報知手段）等を備えている。なお、各ブロックを機能名で示しているのは、以下に説明するように、その具体的な実現方法として種々の組み合わせが想定できることや、単一の構成要素を複数の機能ブロックに適用できること等によるためである。
【０１３０】
制御ブロック７０１は、ＣＰＵ７０１ａ、ＲＯＭ７０１ｂ、ＲＡＭ７０１ｃ等を有するマイクロコンピュータで構成されている。また、制御ブロック７０１は、ＣＰＵで実行するコンピュータプログラムにより、収納量推定部７０８をソフトウェア的に実現している。収納量推定部７０８は、各ブロックで検知した情報に基づいて、庫内に貯蔵される収納物の収納量（食材の貯蔵量。物品の全体的な量だけでなく、専用ケースに収納されている卵の数やペットボトルの残量等も含む）を推定する。なお、本実施形態では、制御ブロック７０１として冷蔵庫７００の主制御部３０（図４参照）を想定しているが、カメラ装置１８側の制御部５０を採用してもよいし、双方で処理を分担して作動する構成としてもよい。
【０１３１】
撮像ブロック７０２は、貯蔵庫の庫内等を撮像するものであり、本実施形態では、第１実施形態のカメラ装置１８（図４参照）と同様に冷蔵庫７００の扉に固定的に設けられたものを想定している。この場合、カメラ装置１８と同様の構成としてもよいし、カメラ装置１８側の制御部５０を省いて主制御部３０により撮像制御を直接的に行う構成としてもよい。なお、第２実施形態のカメラ装置３００（図１５参照）を採用し、撮像ブロック７０２を冷蔵庫７００から着脱式の構成としてもよい。
【０１３２】
照明ブロック７０３は、庫内を照らすものであり、本実施形態では、庫内照明である天井ライト１３（図４参照）、および撮像専用の撮像ライト１９（図４参照）と同等のものを想定している。なお、側面ライト３６（図４参照）等の他の庫内照明を備えていてもよい。
【０１３３】
開検知ブロック７０４は、扉の開放を検知するものであり、本実施形態では、扉によって押圧されることで移動する可動片と、その可動片と連動して作動する接点とを有するスイッチにより構成されている。この開検知ブロック７０４は、扉が完全に閉まっている状態および扉が僅かに開放されている状態（扉の開放量が所定量未満であるとき）にはオフとなり、扉が所定量以上に開放されるとオンとなる。開検知ブロック７０４のオン／オフ状態は庫内照明を点灯するか否かの判断基準にもなっており、開検知ブロック７０４がオンであれば庫内照明が点灯され、開検知ブロック７０４がオフであれば庫内照明が消灯される。なお、オン／オフは扉の開閉状態を示しており、必ずしも接点の状態ではない。
【０１３４】
開度検知ブロック７０５は、扉の開度を検知するものであり、例えば図２に示す冷蔵室３の扉３ａのようにヒンジを中心に回動する扉の場合には、その回転角度（閉鎖状態が０度とする）を検知する。また、野菜室４の引き出し式の扉４ａ等の場合には、その引き出し量を検知する。回転角度は角度検出器（例えばロータリエンコーダ等）により検出すればよいし、引き出し量は距離検出器（例えばレーザ距離計等）により構成することができる。また、実験により予め計測および記録した庫内の照度の変化を利用した照度ブロックにより、開度を検知してもよい。なお、開度検知ブロック７０５は、撮像ブロック７０２を設ける対象となる貯蔵庫に対して設ければよい。
【０１３５】
通信ブロック７０７は、撮像した画像情報を外部に送信するものであり、第１実施形態の通信部５２（図４参照）、第２実施形態の通信モジュール３０６や通信装置５０１（図２１参照）等、撮像ブロック７０２の構成に応じて適宜採用することができる。例えば、撮像ブロック７０２を冷蔵庫７００の主制御部３０が直接的に制御する場合、通信モジュール３０６を採用すればよい。
【０１３６】
次に、まず片開き式（回動式）の扉で開閉される貯蔵庫７０９（例えば冷蔵室）を撮像する例について説明する。
図３１（Ａ）に示すように、貯蔵庫７０９は、扉７１０によって開閉され、その扉７１０の庫内側に撮像ブロック７０２が設けられている。この撮像ブロック７０２は、貯蔵庫７０９の扉７１０の開放端側（ヒンジと反対側の端部側）に位置して設けられており、扉７１０が閉鎖状態にあるとき、貯蔵庫７０９のほぼ正面に位置している。また、貯蔵庫７０９内には、照明ブロック７０３（例えば、天井ライト１３）、開検知ブロック７０４、および照度検知ブロック７０６等が設けられている。
【０１３７】
本実施形態では、閉鎖状態にある扉７１０が開放される際、撮像ブロック７０２により撮像する。これにより、冷蔵庫７００は、扉７１０が開放されるとき、すなわち、収納量が変化する可能性のあるときの庫内を撮像することができる。なお、撮像ブロック７０２は、扉７１０が開放された状態（扉７１０が静止した状態）だけでなく、開放中（扉７１０が動いている状態）であっても撮像可能である。つまり、撮像ブロック７０２は、扉７１０が閉鎖状態から開放され（開放される直前の閉鎖状態も含む）、その後再び閉鎖状態とされるまで（閉鎖状態となった直後も含む）間において、任意のタイミングで撮像することができる。なお、「貯蔵物の収納量が変化した」ことには、「新たに貯蔵物が追加された」ことも含まれる。
【０１３８】
さて、開検知ブロック７０４は、扉７１０の開度（この場合、回転角度）が所定量未満の場合にはオフされている。このため、図３１（Ｂ）に示すように、扉７１０が若干開いた状態では、開検知ブロック７０４がオフとなっている。ただし、その状態であっても、開度検知ブロック７０５により扉７１０の回転角度を検知していることから、開度検知ブロック７０５では扉７１０の回転角度が０度ではなくなっており、実際には若干開いていることを検知している。すなわち、開度検知ブロック７０５の判定結果からは、本実施形態における冷蔵庫７００の撮像タイミングになったと判定される。
【０１３９】
その場合、庫内照明がまだ点灯されないこと、また、扉７１０の開度が低いことから外部の光もそれほど入り込んでおらず、庫内が暗い（照度が低い）ことが想定される。そして、照度が低い場合、撮像した画像も暗くなってしまうことから、庫内の様子を把握することができなくなる。
【０１４０】
そこで、冷蔵庫７００は、扉７１０が開放されるとき、その開度が所定量（図３１の回転角度θ１）未満である場合には、照明ブロック７０３を点灯し、光量を確保する。これにより、撮像した画像から庫内の様子を把握できるようになる。このとき、点灯する照明ブロックは撮像ライト１９を想定しているが、撮像ライト１９に加えて、または、撮像ライト１９の代わりに（撮像ライト１９が設けられていない場合等）、庫内照明を点灯する構成としてもよい。
【０１４１】
また、開検知ブロック７０４は、図３１（Ｃ）に示すように扉７１０の開度が所定量（回転角度θ１）以上になるとオンし、それに伴って庫内照明が点灯される。つまり、庫内が明るくなる。
【０１４２】
そこで、冷蔵庫７００は、扉７１０が開放されるとき、その開度が所定量以上になると撮像する。これにより、庫内を明るく撮像することができる。
なお、冷蔵庫７００が省エネモードに設定されている場合には、庫内照明を点灯させる際の光量を通常の点灯時よりも少なくしてもよい。この場合、開検知ブロック７０４がオンするのは扉７１０がある程度開放された状態であるため、その状態であれば外部からの光がある程度庫内に入っていると考えることができる。そのため、開検知ブロック７０４がオンの状態で撮像することで外部の光も利用して撮像することができ、省エネモードに設定されている場合でも鮮明な画像を撮像することができる。
【０１４３】
ところで、庫内を撮像する目的は庫内の様子を把握することであり、庫内の様子を把握できない不鮮明な画像を撮像すること（および、それをユーザに送信すること）は望ましくない。
【０１４４】
そこで、照度検知ブロック７０６により庫内の照度を検知し、照度が所定の基準値を超えると撮像する構成としてもよい。この場合、所定の基準値を庫内の様子を把握できる程度の照度に設定することで、撮像した画像が不鮮明になることを防止することができる。また、照度検知ブロック７０６の検知結果と、上記した開検知ブロック７０４や開度検知ブロック７０５の検知結果とを組み合わせてもよい。例えば、開度が十分であっても庫内の照度が不足する可能性をも考慮し、扉７１０が開放されたこと、および、照度が十分であることを条件として撮像するようにしてもよい。さらには、開検知ブロック７０４がオフの状態（ただし、開度検知ブロック７０５では開放と判断されている状態）において、照度が十分であれば照明ブロックを点灯しないで撮像するようにしてもよい。
【０１４５】
さて、扉７１０がさらに開放された場合、例えば図３１（Ｄ）に示すように扉７１０の開度が９０度未満である状態では撮像ブロックの視野の半分程度は庫内が写っていると考えられる。一方、図３１（Ｅ）に示すように扉７１０の開度が９０度になると、撮像ブロックの視野の多くには庫外が写っていると想定される。その場合、庫内の様子を把握したいユーザに取って、不要な情報が多い画像が撮像されてしまうことになる。
【０１４６】
そこで、冷蔵庫７００は、扉７１０の開度が９０度未満のときに撮像する構成としてもよい。これにより、庫内の情報が多く含まれた画像を撮像することができる。ただし、例えば広角レンズで撮像する場合や、撮像ブロック７０２がヒンジ（回動中心）に近い位置に設けられている等、扉７１０の開度が９０度を超えても庫内を撮像できるような場合には、扉７１０の開度が庫内を撮像可能な範囲であるときに撮像するようにしてもよい。
【０１４７】
あるいは、扉７１０はユーザにより開閉されるものであることから、図３１（Ｆ）に示すように、扉７１０の開度が９０度付近（あるいは９０度を超えている状態）では、撮像ブロック７０２の視野にユーザが写っていると想定される。そのため、扉７１０が９０度を超えるような状態でもあえて撮像する構成としてもよい。これにより、例えばユーザの様子（顔色等）や留守中の子供の様子等を把握できるようになり、遠隔地からの見守りシステム等への適用もできるようになる。すなわち、撮像手段としては、庫内だけでなく、庫外（冷蔵庫７００の周辺）の様子を撮像できるものであってもよい。なお、９０度を超えて撮像するか否かは、ユーザにより選択可能な構成にするとよく、所定角度であれば９０度に限定されることはない。
【０１４８】
なお、照度検知ブロックは、例えば扉の庫外側に設けて、外部の光を検知できるようにしてもよい。そして、庫外の様子を撮像する場合に、部屋の照明が消えていないかを照度センサで検知して、消えている場合は照明ブロックを点灯するとよい。特に、扉の前面がガラス製である場合、扉の端部を構成するフレームに穴を開け、扉内部に配置した照度検知ブロックに光が入射するように構成するとよい。
【０１４９】
＜撮像ブロックの配置例１＞
図３２（Ａ）に示すように、若干扉７１０が開放されている状態では、上記したように開度検知ブロック７０５にて開度を検知する構成であれば庫内照明や撮像ライトを点灯させる等の対策が行えるものの、開度検知ブロック７０５を備えていない場合等には、庫内照明が点灯されないことから庫内の明るさが撮像するには不足する可能性がある。
【０１５０】
そこで、撮像ブロック７０２を、上記したような扉７１０の中央付近ではなく、扉７１０の開放端側、つまり、外部の光がより早く入る側に設けてもよい。この場合、外部の光がより早く入る側とは、扉中央よりも開放端側、より好ましくは扉の左右方向において開放端から１／３の長さの範囲内、さらに好ましくは開放端から１／４の長さの範囲内に相当する。これにより、撮像ブロックの視野に外部からの光をいち早く入り込むことができ、光量を確保し易くなる。また、撮像ブロック７０２は扉７１０から庫内に向かう視野となるように配置されることから、扉７１０の隙間からの光は撮像ブロック７０２の後方側から庫内に入り込む。このため、逆光になるおそれが少なく、庫内を鮮明に撮像することができる。
【０１５１】
この場合、図３２（Ｂ）に示すように扉７１０の開放角度が９０度に近くなると画像には庫外の情報の方が多く含まれるようになるため、庫内を撮像することを主目的とするのであれば扉の開放角度が９０度未満の際に撮像するようにすればよいし、上記した見守りシステム等への適用を考慮するのであれば、９０度を超えて開放された場合にも撮像するようにしてもよい。
【０１５２】
なお、庫外を撮像するための専用のカメラを設けてもよい。その場合、扉前面がガラス板である場合、ガラス裏面の色付きの塗料の一部を透明とし、扉内部に設けたカメラでその透明部を通して外部を撮像できるようにすればよい。
【０１５３】
＜撮像ブロックの配置例２＞
撮像ブロック７０２は、図３３（Ａ）に示すように、扉７１０のヒンジ側に設けてもよい。この場合、図３３（Ｂ）、（Ｃ）に示すように、扉７１０の開放に伴って撮像ブロック７０２の視野が庫内を横断していき、ほぼ庫内の全域を撮像することができるようになる。
【０１５４】
また、扉７１０が開放される際に撮像する位置を予め設定してもよい。例えば、図３２（Ｂ）に示すように撮像ブロック７０２の視野が冷蔵庫７００のほぼ中央付近となる角度まで扉７１０が開放された際に撮像するようにしてもよい。つまり、撮像ブロック７０２をヒンジ側に設けた場合には、庫内を撮像できる範囲（例えば、画像中に庫内の情報量が庫外の情報量よりも多くなる範囲）が広くなり、撮像タイミングの自由度を向上させることができる。
【０１５５】
そのため、扉７１０の開放中に複数回、画像を撮像するようにしてもよい。つまり、視野の異なる画像を撮像するようにしてもよい。この場合、開度検知ブロック７０５にて回転角度を検知し、回転角度が所定値になった時点で撮像するようにしてもよいし、扉７１０の開放を検知してから回転角度が変化している間は所定時間毎に撮像するようにしてもよい。また、撮像ブロック７０２として動画の撮像が可能なものを採用し、扉７１０の開放中に動画を撮像し、その動画の中から複数の画像（静止画）を抽出するようにしてもよい。このように複数の画像を撮像することで、すなわち、庫内を異なった複数の視野から撮像することで、手前の物品に隠れている食材等を確認することができる。
【０１５６】
また、複数の画像を撮像することで、１つの画像では写っていない範囲を他の画像で補完することが可能となり、それらを合成して一枚の全体画像を合成することで、庫内の様子をより詳細に把握することができるようになる。また、視野の異なる画像を撮像することで、立体画像を合成することもできる。
【０１５７】
勿論、配置例１で示した開放端側と配置例２で示したヒンジ側との双方に撮像ブロック７０２を設け、互いに視野を補完する構成としてもよい。その場合、開放端側の撮像ブロック７０２は回転角度が大きくなると庫外を撮像するようになってしまうため、開放端側の撮像ブロック７０２とヒンジ側の撮像ブロック７０２とで撮像する角度範囲を異ならせるようにしてもよい。なお、扉７１０の開放中に２つの撮像ブロック７０２でそれぞれ１回ずつ撮像することも、複数回撮像することに含まれる。
【０１５８】
＜収納量を推定する例＞
次に、収納物の収納量を推定する手法について説明する。
例えば庫内を正面側から撮像した１つの画像に対して収納量推定部７０８にて画像処理等（例えば色認識や輝度差の抽出等の手法）を行うことで、庫内全体に占める収納物の割合等の収納量を推定することができる。
【０１５９】
このとき、複数の画像に基づいて収納量を推定することで、収納量（以下の例では、残量）をより正確に把握することができる。
一例として、貯蔵庫７０９内の容器（例えばペットボトル７２０等）中の飲料等の残量を推定する場合、図３４（Ａ）に示すように撮像ブロック７０２のほぼ正面にペットボトル７２０が位置していると、正面（矢印Ｙ１にて示す向き）から撮像した画像には、図３４（Ｂ）に示すようにペットボトル７２０中に飲料（ハッチングにて模式的に示す）が多く写っており、残量が多いと推定されることになる。ただし、矢印Ｙ２にて示す向きから見た図３４（Ｃ）に示すように、実際には残量が少なくなっており、ペットボトル７２０が他の物品７２１に乗って傾いたために正面からの画像からでは残量が多くなっていたと誤推定される可能性がある。
【０１６０】
そこで、図３４（Ｄ）に示すように扉７１０が開放された際に異なる視野（矢印Ｙ３にて示す向き）からも撮像し、その画像を画像処理することで、図３４（Ｅ）に示すような側方からの画像を得ることができ、その画像に基づいて残量を推定すれば、実際には残量が少なくなっていることを把握することができる。
【０１６１】
他の例として、図３５（Ａ）に示すように、卵ケース７２２をほぼ正面から撮像した場合、卵ケース７２２には卵７２３が整列されて収納されていることから、最前列の卵７２３に隠されて後列に卵７２３が残っているかを判断できない可能性がある。そこで、図３５（Ｂ）に示すように斜め方向等の異なる視野で撮像された画像をも利用することで、後列の状態つまり実際の卵７２３の残量を確認することができる。
【０１６２】
このように、複数の画像を撮像することで、全体的な収納量だけでなく、個別の残量をも推定できるようになる。また、異なる角度から撮像することで、使用者が目視で残量も確認することができる。さらには、異なる角度から撮像することで、正面からでは目視できない部位も撮像でき、他の物品に隠れた位置等、使用者が正面から庫内を見た場合にはすぐには気付かないような位置の状態も把握することができる。なお、卵ケース７２２のようにその位置が基本的に固定されているようなものの場合、撮像ブロック７０２が卵ケース７２２を後列側が写る斜め方向から撮像できる回転角度となったときに撮像するように撮像タイミングを制御してもよいし、その回転角度に対応する画像を動画から抽出してもよい。
【０１６３】
また、扉７１０の閉鎖時にも撮像するようにしてもよい。これにより、食材の収納量が変化する可能性のある扉７１０の開放時にまず撮像し、扉７１０が閉鎖された時点でさらに撮像し、それらの画像を比較することで収納量の変化を検知することができる。したがって、収納量が変化したことを精度よく検知することができる。
【０１６４】
このとき、扉７１０への振動を検知した時点や開度検知ブロック７０５にて開度が変化し始めた時点等、扉７１０が開放されるそのときに撮像する構成としてもよいし、基本的には扉７１０が開閉されなければ収納量が変化する可能性もないため、扉７１０の閉鎖中に例えば定期的に庫内を撮像しておき、扉７１０が開放される前の最新の画像と、開放された扉７１０がその後閉鎖されたときに撮像した画像とを比較することで、収納量の変化を検知したり収納量を推定したりしてもよい。
【０１６５】
また、収納量が変化した旨を通信ブロック７０７を介してユーザに報知してもよい。この場合、送信する画像情報とともに収納量が変化した旨を示す付帯情報を添付して送付すること等が考えられる。報知先は、ユーザの所謂スマートホンやタブレットＰＣ、ユーザ宅のＴＶ等が考えられる。
【０１６６】
また、左右方向あるいは上下方向の異なる位置に複数の撮像ブロック７０２を設けてもよい。さらには、庫内に設置された例えばカメラ装置３００と連携して撮像するような構成としてもよい。そして、異なる角度から撮像して収納物の残量などを確認する方法としては、異なる壁（例えば、扉と側壁）に複数のカメラ（撮像ブロック）を配置し、それぞれで撮像し、全体で複数回撮像することによっても可能である。
【０１６７】
（第４実施形態）
以下、第４実施形態について、図３６から図３９を参照しながら説明する。第４実施形態では、１つの貯蔵庫を２との扉で開閉する例について説明する。なお、機能ブロックの基本的な構成は上記した第３実施形態と共通する。
【０１６８】
＜複数扉の例１＞
図３６（Ａ）に示すように、本実施形態の冷蔵庫８００は、左右に隣り合って配置された左扉８０１と右扉８０２とにより、１つの貯蔵庫８０３（例えば冷蔵室）が開閉される構成となっている。これら左扉８０１および右扉８０２には、それぞれ開放端側に撮像ブロック７０２が設けられている。また、右扉８０２の撮像ブロック７０２は、開放端側であって、且つ、冷蔵庫８００の左右方向の中央付近に設けられている。各扉には、１または複数のドアポケット８０４がそれぞれ設けられている。
【０１６９】
まず、いずれか一方の扉に撮像ブロック７０２を設けたことによる効果は、第３実施形態と共通する。そのため、以下では、主としてそれぞれの扉に撮像ブロック７０２を設けたことにより得られる効果について説明する。
【０１７０】
図３６（Ａ）に示すように、各扉に撮像ブロック７０２を設けることにより、一方の撮像ブロック７０２の視野外を、他方の撮像ブロック７０２にて補うことが可能となる。これにより、一方の視野には入らない、あるいは、一方の視野では収納物に遮られて写らない場所を撮像することができ、より詳細に庫内の様子を把握することができる。
【０１７１】
そして、図３６（Ｂ）に示すように例えば左扉８０１を開放する際に撮像することで、閉鎖状態では視野外になっている右扉８０２のドアポケット８０４に収納されている収納物を撮像することができる。この場合、右扉８０２の縦板（図２の縦板１５参照）に第１実施形態のような凹部（図２の凹部１６参照）を設けることで、右扉８０２のドアポケット８０４をより広く撮像することができる。勿論、左扉８０１の縦板に凹部を設ければ、右扉８０２の撮像ブロック７０２にて撮像するより広く撮像することができる。
【０１７２】
また、左扉８０１の撮像ブロック７０２で撮像するときに右扉８０２の撮像ブロック７０２でも同じタイミングで撮像する構成とすれば、第３実施形態で説明したような、正面からの画像と側方（あるいは斜め方向）からの画像等、視野の異なる画像を得ることができる。このとき、それぞれの撮像ブロック７０２の設置位置が元々離間しているので、単一の撮像ブロック７０２で撮像する場合よりもその見え方の差が大きくなり、上記した図３４、３５等で示した収納量の検知をより正確に行うことができる。
【０１７３】
また、図３６（Ｃ）に示すように双方の扉が開放されている状態で撮像することで、庫内のほぼ全域を撮像することができる。
このとき、図３６（Ｄ）に示すように双方の扉がほほ９０度開放された際に撮像することで、互いのドアポケット８０４を正面からそれぞれ撮像することができる。そして、庫内の画像と、ドアポケット８０４を撮像した画像とを用いることで、後述する図２８に示すような冷蔵庫８００を正面から視た状態、つまり、ユーザが一般的に見ている状態の画像を合成することができる。
【０１７４】
このように、貯蔵庫を開閉する各扉に撮像ブロック７０２を設けることで、一方の撮像ブロック７０２では撮像できない範囲を他方の撮像ブロック７０２で補うことができる。
このとき、複数の撮像ブロック７０２にて撮像することから、それぞれの撮像ブロック７０２は必ずしもそれほど広角のレンズ系を採用する必要はなく、画像の歪みを小さくすることができる。また、画像の歪みが小さくなれば、歪み補正や画像合成あるいは収納量の推定等の処理の負荷を低減することができる。特に、画像処理を第２実施形態のようなカメラ装置３００で行う場合、電池の消耗等を抑制することができる。
【０１７５】
なお、図３７（Ａ）に示すように、それぞれの撮像ブロック７０２をヒンジ部側からの距離Ｌ１（冷蔵庫８００の側面からの距離）が同じになるように配置してもよい。つまり、扉が開放される際、開放角度が同じであれば、各撮像ブロック７０２の視野の中心が冷蔵庫８００の中央にくるような配置としてもよい。これにより、それぞれの撮像ブロック７０２で同じ回転角度で撮像された画像を合成すれば、合成画像の中心位置と冷蔵庫８００の中央とが一致するので、冷蔵庫８００の正面から見た状態の立体視画像（つまり、ユーザが理解しやすい画像）を合成することができる。また、図３７（Ｂ）に示すように、一方（例えば左扉８０１）の撮像ブロック７０２は開放端側に設け、他方（例えば右扉８０２）の撮像ブロック７０２はヒンジ側に設けてもよい。さらには、図３７（Ｃ）に示すように、撮像ブロック７０２の視野が扉に対して傾くように配置してもよい。
【０１７６】
＜複数扉の例２＞
この例２では、図３８（Ａ）に示すように、冷蔵庫８１０は、隣り合って配置された左扉８１１と右扉８１２とにより、仕切り板８１３により仕切られた独立した貯蔵庫８１４Ａ〜８１４Ｄをそれぞれ開閉する構成となっている。また、各扉は、複数の独立した貯蔵庫８１４Ａ、Ｂと、貯蔵庫８１４Ｃ、Ｄとをそれぞれ開閉する。そして、それぞれの扉には、図３８（Ｂ）にも示すように、それぞれの独立した貯蔵庫８１４を撮像するための撮像ブロック７０２が設けられている。また、貯蔵庫８１４Ｃは、その内部に棚板８１５が設けられており、この棚板８１５の上下を撮像するために、貯蔵庫８１４Ｃを開閉する右扉８１２には、対応する位置には２つの撮像ブロック７０２が設けられている。これにより、庫内をそれぞれ撮像することができる。また、庫内を撮像することにより得られる効果は第１実施形態と共通するとともに、扉の開放時に撮像することにより得られる効果は第３実施形態と共通する。
【０１７７】
また、図３９に示すように、例えば左扉８１１が複数の独立した貯蔵庫８１４Ａ、Ｂを開閉し、右扉８１２が１つの独立した貯蔵庫８１４Ｅを開閉する構成であってもよい。また、貯蔵庫８１４Ｅ内に収納容器８１６が設けられている場合には、図３９（Ｂ）にも示すように、それぞれの収納容器８１６を撮像可能なように対応した数の撮像ブロック７０２を設けてもよい。このような構成の冷蔵庫８１０においても、庫内を撮像することにより、上記した例１と同様の効果を得ることができる。また、このような冷蔵庫８１０であっても、撮像ブロック７０２をヒンジ側に設けたり、開放端側に設けたりする等、第３実施形態と同様の構成を適用することができる。
【０１７８】
（第５実施形態）
以下、第５実施形態について、図４０から図４２を参照しながら説明する。第５実施形態では、引き出し式の扉により開閉される貯蔵庫の例について説明する。なお、機能ブロックの基本的な構成は上記した第３実施形態と共通する。
【０１７９】
例えば図２に示したような冷蔵庫１には、野菜室４のような引き出し式の扉４ａにより開閉される貯蔵庫が設けられている。このような野菜室４等は、庫内照明が設けられていないものもあり、撮像する際の光量が鮮明な画像を撮像するには不足することが考えられる。そこで、扉が開放される際に撮像することにより、収納量が変化する可能性があるタイミングで撮像できるとともに、扉が引き出されることで、外部からの光を利用して撮像することができる。
【０１８０】
＜撮像ブロックの設置例１＞
図４０に示すように、冷蔵庫９００の貯蔵庫９０１には、引き出し式の扉９０２、その扉９０２と一体に引き出される収納容器９０３、基本的には位置が固定されている棚板９０３ａ、撮像ブロック７０２、照明ブロック７０３、および撮像ブロック７０２と一体に構成された照度検知ブロック７０６（図示省略）が設けられている。撮像ブロック７０２は、その視野の中心が扉９０２の引き出し方向から傾くように設置されている。また、本実施形態では、照明ブロック７０３は、撮像専用のものを想定している。
【０１８１】
このような構成において、図４０（Ｂ）に示すように扉９０２が引き出されると、外部からの光が入り込み、庫内の照度が高くなる。そのため、光が入射したことを照度検知ブロック７０６で検知し、そのタイミングで撮像することで、庫内を把握可能な画像を得ることができる。
【０１８２】
また、図４０（Ｃ）に示すように扉９０２が大きく引き出された状態では、収納容器９０３のほぼ全体が外部の光で照らされるため、より鮮明な画像を撮像することができる。そのため、照度検知ブロック７０６で検知した照度が所定の基準値を超えた際に撮像するようにしてもよい。また、照度が基準値を超えていない場合には、照明ブロック７０３を点灯するようにしてもよい。
【０１８３】
また、撮像ブロック７０２の視野が棚板９０３ａに対して変化していくので、上記したような異なる視野で収納物を撮像することもできる。なお、棚板９０３ａは、収納容器９０３が最前列まで引き出された場合にはその位置が移動するタイプのものであってもよい。また、棚板９０３ａは、下容器の上に位置していて、下容器の左右側壁部の上端部を摺動して移動する上容器であってもよい。
【０１８４】
また、扉９０２の開度（本実施形態では引き出し量）を検知する開度検知ブロック７０５を設け、開度に基づいて、扉９０２の開度が所定量を超えた際に撮像するようにしてもよい。なお、夜間等で電気を付けないまま扉９０２が開放されることも想定されるため、開度検知ブロック７０５の検知結果と照度検知ブロック７０６の検知結果とを採用してもよい。また、収納量の変化を検知するために扉９０２が閉鎖状態で撮像する場合には、照明ブロック７０３を点灯すればよい。
【０１８５】
このように、引き出し式の扉９０２にて貯蔵庫９０１を開閉する場合であっても、上記した第３実施形態等と同様の効果を得ることができる。
なお、照明ブロックは、撮像専用のもので無くてもよく、庫内灯として兼用してもよい。
【０１８６】
＜撮像ブロック７０２の設置例２＞
設置例１では撮像ブロック７０２を引き出し式の扉９０２に設けたが、図４１（Ａ）に示すように、引き出し式の扉９０２の上方に位置する扉９１０の下面側であって、図４１（Ｂ）に示すように引き出された収納容器９０３内を撮像可能な位置に、撮像ブロック７０２を設けてもよい。これにより、扉９０２が引き出された際には、外部からの光が入り込んで収納容器９０３内を照らすので撮像可能な状態となるとともに、光は撮像ブロック７０２の後方から入るので逆光になることもない。
【０１８７】
また、一般的には、引き出し式の貯蔵庫９０１に食材等を収納あるいは取り出す場合には、収納容器９０３を目的とする位置まで引き出すことが想定される。換言すると、収納容器９０３の上方に位置する扉９１０に設けられている撮像ブロック７０２の直下付近が食材等を収納あるいは取り出す位置となり、その位置で収納量が変化すると考えられる。そのため、上方の扉９１０に撮像ブロック７０２を設けることで、収納量の変化をより検知し易くなる。
【０１８８】
なお、図４１において最下段となる引き出し式の貯蔵庫９０４に対しては、図４２（Ａ）に示すように、貯蔵庫９０１と貯蔵庫９０４との間に設けられている仕切り板９０５等に撮像ブロック７０２を下向きに設けてもよい。このとき、貯蔵庫９０４の引き出し口側（つまり、扉９０６側）に撮像ブロック７０２を設ければ、図４１にて示した貯蔵庫９０１用の撮像ブロック７０２と同様に、光量を確保できるとともに、収納量の変化を検知しやすくなる。
【０１８９】
さらに、貯蔵庫９０１の扉９０２の場合、扉９０２が引き出されると扉９０２自体は冷蔵庫９００本体から離間した状態となるため、撮像ブロック７０２を有線接続することが困難になる。そのため、仕切り板９０５に撮像ブロック７０２を設ければ、冷蔵庫９００本体から離間することがないため、撮像ブロック７０２を有線接続することも可能となる。なお、上記した回動式の扉９１０の場合には、ヒンジ部を利用して操作パネル等への配線が行われているものもあるため、撮像ブロック７０２を有線接続することは比較的容易である。
【０１９０】
また、図４３に示すように、調理機能を有する貯蔵庫９３０（以下、便宜的に調理室と称する）に撮像手段を設けてもよい。この調理室は、例えばマグネトロン９３１のような加熱手段（調理手段）を有し、所謂電子レンジ等のような調理機能を有している。このような調理室は、例えば引き出し式の扉や回動式の扉９３２によって収納容器や棚板（図示省略）ごと開閉される。そのため、その上部の仕切り板９３３に撮像ブロック７０２を設けることで、扉９３２を開ける際、庫内（収納容器や棚板に載置された調理品も含む）を撮像することができる。
【０１９１】
このような貯蔵庫９３０の場合、調理機能を使用している際のノイズ放射等を抑制するために、鉄板等により覆われた構造となっている。このため、撮像ブロックが無線通信により画像情報を送信するものであれば、調理中（マグネトロンの駆動中）には無線通信を行わない、ノイズによるエラーを考慮して複数回送信する、撮像した場合には調理後に送信する等の制御を行うとよい。なお、マグネトロンの駆動中には扉９３２を開けることはないが、調理状況を観察するために調理中に撮像したり、仕上がり等を記録しておくために調理後に扉９３２を開放する際に撮像したりすることは考えられる。
【０１９２】
また、貯蔵庫内とは別の位置のカメラの画像や冷蔵庫の扉開閉回数やエラー情報などを外部に送信する無線手段（例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉＦｉ）などでは、マイクロ波と干渉して送信できない可能性があるため、マグネトロンの停止中に無線で送信するとよい。また、マグネトロン駆動中にカメラに撮像指示がある場合にも、マグネトロンの停止後に再受信したり再送信したりするとよい。また、無線手段は、鉄板等で囲われたマグネトロンのマイクロ波が照射される貯蔵庫（上記した調理室）の外側に配置することで、画像情報等を外部に容易に送信することができる。なお、重量センサの検知結果を有線または無線で外部や冷蔵庫の制御部に送信することも可能であるが、その時も同様である。
【０１９３】
（第６実施形態）
以下、第６実施形態について、図４４から図５５を参照しながら説明する。なお、第１実施形態と共通する部位には同一の符号を付し、その詳細な説明は省略する。また、撮像タイミングについては、上記した各実施形態で例示したものを適宜採用すればよい。
【０１９４】
図４４に示すように、本実施形態の冷蔵庫１は、撮像手段としてのカメラユニット１０００を備えている。この冷蔵庫１は、第１実施形態と同様に、家電ネットワークシステム１００（図１参照）に接続されている。この場合、冷蔵庫１は、第１実施形態のように無線通信方式にて家電ネットワークシステム１００に接続してもよいし、有線通信方式にて家電ネットワークシステム１００に接続してもよい。本実施形態では、有線通信方式として、冷蔵庫１への電力を供給する電力線を利用して通信を行う電力線通信（ＰＬＣ：Power Line Communication）を採用している。以下、カメラユニット１０００の取り付け位置についていくつかの具体例とともに説明する。
【０１９５】
＜具体例１＞
具体例１のカメラユニット１０００は、冷蔵庫１の扉に設けられている。このカメラユニット１０００は、例えば冷蔵室３の庫内の中央を撮像可能な位置に設けられており、具体的には、撮像対象となる冷蔵室３（貯蔵庫）を開閉する右扉３ｂにおいて、当該冷蔵室３の上下方向および左右方向における略中央の位置に対応するように設けられている。このカメラユニット１０００は、図４５（Ａ）、（Ｂ）に示すようにその外形が概ね直方体状に形成されており、カメラケース１００１（保護ケースに相当する）と底板１００２とで囲まれた空間にカメラモジュール１００３（撮像モジュールに相当する）が収容された構成となっている。
【０１９６】
また、カメラユニット１０００には、冷蔵庫１側との間を接続する接続ケーブル１００４、およびカメラユニット１０００を固定するためのフランジ部１００５が設けられている。接続ケーブル１００４は、冷蔵庫１側からの電源供給、カメラユニット１０００に対する撮像指示の伝達、および撮像された画像データ取得に用いられる。このカメラユニット１０００は、フランジ部１００５によって扉３ｂの庫内側に取り付けられている。そのため、具体例１および後述する具体例２〜４の場合、接続ケーブル１００４は、扉３ｂの内部に配線され、扉のヒンジ部を経由して冷蔵庫１の主制御部３０（図４参照）に接続されている。
【０１９７】
カメラモジュール１００３は、図４６に示すように、ＣＣＤセンサやＣＭＯＳセンサ等の撮像素子１０１０およびその周辺回路を構成する回路部品１０１１等が搭載された基板１０１２と、その基板１０１２に取り付けられているレンズユニット１０１３とから構成されている。本実施形態の撮像素子１０１０は、長方形に形成されており、その長手方向が、カメラユニット１０００の長手方向（図４５の図示上下方向）と一致している。この基板１０１２には、撮像素子１０１０に対応した位置にレンズホルダ１０１４が設けられており、そのレンズホルダ１０１４の内周面は雌ねじとなっている。一方、レンズユニット１０１３は、基板１０１２側の端部が雄ねじとなっており、レンズホルダ１０１４にねじ込まれることで、撮像素子１０１０までの距離が調整された状態で取り付けられている。
【０１９８】
このレンズユニット１０１３は、複数枚、例えば本実施形態では３枚のレンズ１０１５を備えており、各レンズ１０１５は、例えば樹脂材料等で形成された本体部内に保持されている。カメラユニット１０００は、これら３枚のレンズ１０１５によっておよそ１２０度の視野角が確保されており、庫内を広角で撮像することが可能となっている。また、レンズユニット１０１３には赤外カットフィルタ１０１６が設けられており、撮像素子１０１０で検出する光を概ね可視光の範囲に限定している。このため、カメラユニット１０００は、庫内をカラーで撮像する際、鮮明な色彩で撮像することができる。なお、レンズ１０１５の枚数等は一例であり、必要な視野角に応じて適宜選択すればよい。
【０１９９】
また、カメラユニット１０００は、図４４（Ｂ）に示すように、カメラケース１００１内が例えばウレタン樹脂やエポキシ樹脂等のポッティング材１０１７によってカメラモジュール１００３ごとポッティングされている。また、図４６に示すように、レンズユニット１０１３にはその外周側にＯリング１０１８が設けられており、そのＯリング１０１８によってレンズユニット１０１３とカメラケース１００１の内面との間が封止されている。なお、図４６では、ポッティング材１０１７の図示を省略している。
【０２００】
このため、レンズユニット１０１３の前面側から水や湿気がカメラケース１００１内に浸入することが防止されている。また、カメラケース１００１の底板１００２側も、接続ケーブル１００４が貫通している部位を含めて封止された状態となっている。つまり、カメラユニット１０００は、全体として防水構造あるいは防滴構造となっているとともに、内部のカメラモジュール１００３も結露等から保護されている。
【０２０１】
このカメラユニット１０００は、図４７（Ａ）に示すように、右扉３ｂの内板１４に取り付けられている。また、カメラユニット１０００は、扉３ｂが閉鎖された状態における視野が庫内側となるように取り付けられている。このため、カメラユニット１０００は、右扉３ｂが閉鎖された状態では、冷蔵室３を正面から、且つ、上下方向および左右方向のほぼ中央から撮像することが可能となっている。つまり、カメラユニット１０００は、ユーザが冷蔵庫１を使用するときと同様の視野にて庫内を撮像することができる。このとき、カメラユニット１０００に隣り合って配置されているドアポケット９ｂは、第一実施形態と同様に切り欠き部９ｂ１が設けられており、カメラユニット１０００の視野を大きく遮ることが無いようになっている。
【０２０２】
また、カメラユニット１０００は、図４７（Ｂ）に示すように、長手方向が上下となるように縦向きに取り付けられている。このため、カメラユニット１０００内の撮像素子１０１０も、その長手方向が縦向きとなっている。これにより、上下方向と左右方向とにおいてその大きさが異なる略直方体状に形成され、縦長の空間となっている冷蔵室３を、縦長で撮像することができる。つまり、縦長に配置された撮像素子１０１０の撮像範囲を有効に活用しつつ、庫内を撮像することができる。
【０２０３】
＜具体例２＞
具体例２の場合、カメラユニット１０００は、図４８に示すように、右扉３ｂの内板１４側に設けられている凹部１０２０に取り付けられている。なお、具体例２でも、カメラユニット１０００は縦向きに取り付けられている。この凹部１０２０は、カメラユニット１０００全体を収容できる程度の大きさに形成されており、その凹部１０２０に収容されているカメラユニット１０００は、内板１４よりも庫内側に突出しないようになっている。このため、右扉３ｂの最下段のドアポケット１０ｂ（図４４参照）にペットボトル等を出し入れする際、カメラユニット１０００に接触することが防止される。
【０２０４】
また、カメラユニット１０００全体が凹部１０２０に収容されているため、ユーザが手を触れる可能性が小さくなり、レンズ１０１５が汚れるおそれを低減することができる。
また、カメラユニット１０００は、その位置が上記した具体例１よりも庫外側、つまり、冷蔵庫１の前方側にずれている。このため、冷蔵室３内をより大きい視野で撮像することができる。
【０２０５】
この場合、凹部１０２０の開口側に、例えば内板１４と面一となる位置に、例えばアクリル等の透明なカバー部材等を設けてもよい。これにより、レンズ１０１５等へ汚れが付着することや、凹部１０２０にほこり等が溜まること等を防止することができる。
【０２０６】
＜具体例３＞
具体例３の場合、カメラユニット１０００は、図４９に示すように、右扉３ｂの内板１４内に配置されている。なお、具体例３も、カメラユニット１０００は縦向きに取り付けられている。この場合、カメラユニット１０００は、そのレンズ面だけが冷蔵室３側に露出した状態となっている。このため、具体例２と同様に、ドアポケット１０ｂにペットボトル等を出し入れする際にカメラユニット１０００が邪魔になることが防止される。
【０２０７】
これら具体例１〜３のようにカメラユニット１０００を取り付けることで、図５０（Ａ）に示すようにユーザが冷蔵庫１を使用する際の視点と同様に冷蔵庫１の正面側から庫内を撮像することができ、家電ネットワークシステム１００を介して通信端末１０３等にて撮像した画像を表示することで、遠隔地から庫内を確認することができる。
【０２０８】
＜具体例４＞
具体例４の場合、カメラユニット１０００は、左扉３ａに設けられている縦仕切り１７（図４４参照）に取り付けられている。この縦仕切りは、図５１（Ａ）、（Ｂ）に示すように、左扉３ａのヒンジ部３ｄと反対側の端部に設けられており、回動機構１７ａによって、図５１（Ａ）に示すように扉３ａが開放されている状態と図５１（Ｂ）に示すように扉３ａが閉鎖されている状態とでその向きが変化する。この縦仕切りは、観音開きの扉（いわゆるフレンチドア）の左右方向のほぼ中央、つまりは、冷蔵室３のほぼ中央部に位置している。そして、左扉３ａと右扉３ｂとが閉鎖された状態では、図５２（Ａ）に示すように、ガスケット１０３０によって庫内と庫外とが封止されている。
【０２０９】
カメラユニット１０００は、図５２（Ａ）、（Ｂ）に示すように、断熱材１０３１が充填されている縦仕切り１７の内部において、取り付け板１０３２に縦向きに取り付けられている。このカメラユニット１０００は、縦仕切り１７の上下方向の略中央に配置されている。このため、具体例４においても、カメラユニット１０００は、冷蔵室３の上下方向および左右方向のほぼ中央から庫内を撮像可能となっている。そして、上記したように縦仕切り１７が回動することから、左扉３ａが開放された状態では、図５１（Ａ）に示すように、カメラユニット１０００が左扉３ａと平行となるように、且つ、開放された側と反対側となる。これにより、左扉３ａが開放されたとき、ユーザがカメラユニット１０００のレンズ面に触れることが防止されている。
【０２１０】
そして、左扉３ａが閉鎖された状態では、図５１（Ｂ）に示すように、カメラユニット１０００が庫内側を向くので、図５３に示すように、正面側且つほぼ中央付近から庫内を撮像することができる。この場合、ドアポケット９ａがカメラユニット１０００の視野を遮るようであれば、ドアポケット９ｂと同様の切り欠き部をドアポケット９ａに設けてもよい。
【０２１１】
このような具体例４の場合でも、上記した具体例１〜３と同様に、図５０（Ａ）に示したように庫内を撮像することができる。
＜具体例５＞
具体例５の場合、図５４に示すように、カメラユニット１０００は、冷蔵室３の側壁３ｃに設けられている凹部１０４０に取り付けられている。具体例５の場合、カメラユニット１０００は、左右の側壁３ｃにそれぞれ取り付けられている。なお、一方の側壁３ｃにのみカメラユニット１０００を取り付ける構成であってもよい。
【０２１２】
凹部１０４０は、側壁３ｃにおいて前方側つまり扉側に設けられており、カメラユニット１０００を取り付けるための取り付け面１０４１が、側壁３ｃに対して傾斜した形状に形成されている。具体例５の場合、凹部１０４０は、断面視にて略三角形に形成されている。これにより、カメラユニット１０００を取り付けた際、その視野が冷蔵室３のほぼ中央を向くようになる。
【０２１３】
そして、具体例５では左右の２方向から庫内を撮像するため、一方のカメラユニット１０００では食材等により遮られた部分を、他方のカメラユニット１０００から撮像することができる。これにより、食材等に邪魔されること無く庫内全体を撮像できるようになり、庫内をより詳細に確認することができる。また、２方向から撮像した画像を合成して立体画像を生成することで、庫内を立体的に表示させることもできる。
【０２１４】
また、側壁３ｃにカメラユニット１０００を取り付けていることから、有線式のカメラユニット１０００において、側壁３ｃを利用して接続ケーブル１００４を配線することが可能となり、例えば冷蔵庫１の背面側に設けられている主制御部３０（図４参照）まで容易に配線処理することができる。
【０２１５】
＜具体例６＞
具体例６では、図５５（Ａ）に示すように、カメラユニット１０００に照明手段としてのＬＥＤライト１０５０が設けられている。このカメラユニット１０００は、前面側が、少なくともＬＥＤライト１０５０に対応する位置が透明となった保護カバー１０５１によって覆われている。また、カメラユニット１０００は、具体例１〜５のカメラユニット１０００と同様に、カメラケース１００１内がポッティング材１０１７によりポッティングされている。
【０２１６】
このカメラユニット１０００は、本実施形態ではその前面に設けられている保護カバー１０５１と取付面１０６０とが面一となるように配置されている。この取付面１０６０は、例えば扉の内板１４、縦仕切り１７、側壁３ｃ等に相当する。この状態において、レンズユニット１０１３の最前面は、取付面１０６０よりも前方に位置している。
【０２１７】
ＬＥＤライト１０５０は、図５５（Ｂ）に示すように、カメラケース１００１内において、撮像素子１０１０（図５５参照）とは前後方向に異なる位置に配置されている。具体的には、ＬＥＤライト１０５０は、撮像素子１０１０よりも前方に配置されている。本実施形態の場合、基板１０１２に撮像素子１０１０を実装し、それよりも前方に配置されたＬＥＤ基板１０５２にＬＥＤライト１０５０を実行することで、その位置を異ならせている。
【０２１８】
このＬＥＤライト１０５０は、カメラユニット１０００の前面に近い位置に配置されており、ＬＥＤライト１０５０から照射された光がカメラケース１００１内においてレンズユニット１０１３や撮像素子１０１０に直接的に入射することが防止されている。また、ＬＥＤライト１０５０は、前方に向かって拡大した開口壁１０５３に囲まれているとともに、レンズユニット１０１３の前面よりも後方に位置している。そして、レンズユニット１０１３の最前面が取付面１０６０よりも前方に位置していることから、ＬＥＤの前面を保護している保護カバー１０５１に光が反射したとしても、その光がレンズユニット１０１３に直接的に入射することがない。
【０２１９】
このような構成のカメラユニット１０００は、具体例１〜５で例示した位置に取り付けることで、庫内照明１３等を点灯しなくてもＬＥＤライト１０５０を点灯させることで庫内を撮像できる。
【０２２０】
なお、カメラユニット１０００は、保護カバー１０５１が取付面１０６０よりも内側（後方）に位置するように配置されていてもよい。その場合、レンズユニット１０１３の最前面が取付面１０６０と面一となるように配置してもよいし、取付面１０６０よりも内側に位置するように配置してもよい。また、レンズユニット１０１３の最前面が保護カバー１０５１と面一となるように、カメラユニット１０００内におけるレンズユニット１０１３の位置を調整してもよい。つまり、レンズユニット１０１３の本体部の先端が保護カバー１０５１と面一となるようにしてもよい。そのような配置にすれば、カメラユニット１０００を例えば冷蔵室３の側壁３ｃや扉の内板１４等に取り付ける際、庫内側に突出することがなく、食材の出し入れの邪魔になったりすることを防止できる。また、その場合には、取付面１０６０にカメラケース１００１と同じ大きさの開口を設けてもよいし、レンズユニット１０１３とＬＥＤライト１０５０に対応した丸穴の開口を設けてもよい。また、カメラケース１００１を取付面１０６０よりも突出させ、結露によって水滴等が取付面１０６０をしたたり落ちた際に、その水がレンズ面に流れないようにしてもよい。
【０２２１】
（第７実施形態）
以下、第７実施形態について、図５６から図６４を参照しながら説明する。第７実施形態では、撮像手段は、冷凍温度帯の庫内を撮像する。なお、第１実施形態と共通する部位には同一の符号を付し、その詳細な説明は省略する。
【０２２２】
本実施形態の場合、図５６に示すように、冷蔵庫１の基本的な構成は第一実施形態と実質的に共通しており、冷蔵庫１の背面側に設けられている主制御部３０によって制御されている。この主制御部３０は、図５７に簡略化して示すように、冷蔵室温度センサ１１００、冷凍室温度センサ１１０１、冷蔵室扉スイッチ１１０２、冷凍室扉スイッチ１１０３、周囲温度センサ１１０４、および外部と通信するための通信部１１０５を備えている。なお、図５７にはセンサおよびスイッチを１つずつ示しているが、冷蔵室３、野菜室４、製氷室５、上部冷凍室６および下部冷凍室７にそれぞれセンサおよびスイッチが設けられている。この主制御部３０は、有線または無線の通信方式にて、撮像手段としてのカメラユニット１１１０に接続されている。なお、後述する具体例１〜３では有線通信方式、具体例４では無線通信方式を採用している。
【０２２３】
カメラユニット１１１０は、カメラ制御部１１１１、および、カメラ制御部１１１１に接続されている撮像部１１１２、カメラ温度センサ１１１３およびＬＥＤライト１１１４を備えている。撮像部１１１２は、ＣＣＤセンサやＣＭＯＳセンサ等の撮像素子やレンズ等を備えており、カメラ制御部１１１１からの指示に基づいて庫内を撮像する。このとき、カメラユニット１１１０は、ＬＥＤライト１１１４を点灯することで撮像時の光量を確保する。カメラ温度センサ１１１３は、カメラユニット１１１０の温度を検知する。なお、このカメラユニット１１１０も、第６実施形態のカメラユニット１０００と同様に、防水構造あるいは防滴構造となっているとともに、広角での撮像が可能となっている。なお、第６実施形態の具体例６に示したカメラユニット１０００と同じものを採用してもよい。
【０２２４】
このような構成の冷蔵庫１は、通信部１１０５により、カメラユニット１１１０にて撮影した画像を外部のサーバ１０４等に送信する。このとき、外部から通信端末１０３などを用いてサーバ１０４にアクセスすることで、外出先等の遠隔地から冷蔵庫１内を確認することができる。なお、冷蔵庫１本体にディスプレイを設け、扉を開けることなく冷凍温度帯の貯蔵庫内を確認可能なシステム構成としてもよい。
【０２２５】
本実施形態の場合、カメラユニット１１１０は、以下に説明する各具体例のように冷凍温度帯の庫内を撮像可能な位置に取り付けられている。
＜具体例１＞
具体例１の場合、カメラユニット１１１０は、図５６に示す取り付け位置Ａに取り付けられている。より詳細には、図５８に示すように、カメラユニット１１１０は、冷凍温度帯の貯蔵庫を仕切る仕切り板１１２０の前面から突出する状態で取り付けられている。なお、図５８では、扉の図示を省略している。このカメラユニット１１１０は、その視野がやや下向きとなるように仕切り板１１２０に取り付けられている。また、カメラユニット１１１０は、上部冷凍室６の扉６ａと下部冷凍室７の扉７ａとの間に位置するように、また、製氷室５と上部冷凍室６とを仕切る垂直仕切り板１１２１の下方に取り付けられている。このため、カメラユニット１１１０が突出していたとしても、扉５ａ、扉６ａあるいは扉７ａに設けられているガスケット（図示省略）と接触することがない。
【０２２６】
仕切り板１１２０には、図５９に示すように、放熱パイプ１１２２が予め埋め込まれている、この放熱パイプ１１２２は、仕切り板１１２０の結露を防止するために設けられており、通電により放熱する。そして、カメラユニット１１１０は、この放熱パイプ１１２２に挟まれた状態で仕切り板１１２０の前面に取り付けられている。このため、放熱パイプ１１２２からの放熱によりカメラユニット１１１０の近傍、より具体的には、レンズ面の近傍の温度を上昇させることができる。つまり、放熱パイプ１１２２は、撮像手段を加熱する加熱手段として機能する。これにより、冷凍温度帯近傍に取り付けられることで霜がついたり結露したりする可能性があるカメラユニット１１１０に対して、レンズの近傍の温度を上昇させることで霜つきや結露を防止すること、および、発生した霜や結露を除去することができる。
【０２２７】
なお、放熱パイプ１１２２の代わりに通電により発熱するヒータをレンズの近傍に配置する構成としてもよい。その際、レンズ近傍にカメラ温度センサ１１１３を配置することで、温度を監視しながら必要に応じてヒータを通電し、霜取りしてから撮像するようにしてもよい。もちろん、カメラ温度センサ１１１３で検知した温度に基づいて放熱パイプ１１２２の動作状態を変更して霜取りする構成としてもよい。これらにより、鮮明な画像を撮像することができる。
【０２２８】
このような構成のカメラユニット１１１０は、下部冷凍室７の扉７ａが開放されたことが冷凍室扉センサにより検知された際、主制御部３０からの指示によって庫内を撮像する。つまり、カメラユニット１１１０は、扉が開閉されて食材等の出し入れが行われた可能性のあるとき、撮像する。このとき、カメラユニット１１１０は若干下方に向けて取り付けられているので、図６０に示すように、下部冷凍室７の扉７ａが開放されたとき、収納ケース７ｂ内を撮像することができる。また、例えば複数回撮像することにより、収納ケース７ｂが引き出されるのに応じて引き出されるスライドケース７ｃ内を撮像することもできる。
【０２２９】
また、仕切り板１１２０の前面から突出しているので、仮に垂直仕切り板１１２１が結露したとしても、水滴がカメラユニット１１１０のレンズ面に付着することが防止されている。
【０２３０】
このようなカメラユニット１１１０により、冷凍温度帯の貯蔵庫内を撮像することができる。
＜具体例２＞
具体例２の場合、カメラユニット１１１０は、図６１（Ａ）、（Ｂ）に示すように、仕切り板１１２０の前面側に設けられている凹部１１３０に収容された状態で、仕切り板１１２０の前面から突出しないように取り付けられている。このため、レンズ面の直ぐ近傍に放熱パイプ１１２２が配置された状態となり、レンズ面をより容易に加熱することができ、霜つきや結露を効果的に防止することができるとともに、仮に結露したとしても迅速に除去することができる。
【０２３１】
また、カメラユニット１１１０は、垂直仕切り板１１２１とは異なる位置に配置されているため、仮に結露した際に水滴が縦仕切りに沿って滴下したとしても、その水滴がレンズ面に付着することはない。
【０２３２】
＜具体例３＞
具体例３では、カメラユニット１１１０は、図５６に示す取り付け位置Ｂに取り付けられている。より詳細には、カメラユニット１１１０は、図６２（Ａ）に示すように、仕切り板１１２０の下面側に取り付けられている。つまり、カメラユニット１１１０は、貯蔵庫内に設置されている。また、カメラユニット１１１０は、図６２（Ｂ）に示すように、仕切り板１１２０の内部に取り付けられている。
【０２３３】
このため、扉７ａを引き出したり、食材等を出し入れしたりする際に、カメラユニット１１１０が邪魔になることがない。なお、仕切り板１１２０の内部ではなく、仕切り板１１２０に凹部１１３０を設け、その凹部１１３０にカメラユニット１１１０を収容する構成としてもよい。このカメラユニット１１１０の周囲にはヒータ１１１５が配置されており、レンズ面の近傍の温度を上昇させることができ、霜を除去した後に撮影することができる。
【０２３４】
また、具体例３でもカメラユニット１１１０は広角での撮像が可能となっており、閉扉状態ではスライドケース７ｃを撮像でき、開扉状態では収納ケース７ｂ内およびスライドケース７ｃを撮像することができる。また、収納ケース７ｂ内およびスライドケース７ｃを撮像することができる。つまり、具体例３の取り付け位置であれば、扉７ａが開放されていない状態であっても庫内を撮像することができるとともに、上記した第１実施形態等で示したような通信端末１０３側からの指示によっても庫内を撮像することができる。なお、ＬＥＤライト１１１４が設けられているため、閉扉時にも撮像することができる。
【０２３５】
また、開扉時および閉扉時の双方で収納ケース７ｂとスライドケース７ｃの両方を撮像可能なことから、食材の貯蔵状態の変化を検知することができる等、単に庫内を確認するためだけで無く、食材の管理等にも応用することができる。
【０２３６】
また、広角のレンズ系を備えていることから、比較的近い位置からであっても収納ケース７ｂやスライドケース７ｃの全体を撮像することができる。
＜具体例４＞
具体例４では、カメラユニット１１１０は、図５６に示す取り付け位置Ｃに取り付けられている。より詳細には、カメラユニット１１１０は、図６３に示すように、冷蔵温度帯との貯蔵庫と冷凍温度帯の貯蔵庫との間、つまり、冷蔵室３と上部冷凍室６との間を仕切る断熱仕切り板１１４０の下面側に設けられている。換言すると、カメラユニット１１１０は、冷凍温度帯の貯蔵庫の天面に、下向きつまり庫内を撮像可能な向きに設けられている。また、カメラユニット１１１０は、広角で撮像することで、庫内のほぼ中央を撮像可能に設けられている。
【０２３７】
このカメラユニット１１１０は、ＬＥＤライト１１１４が設けられているため閉扉時にも撮像することができるが、具体例３と同様に、上部冷凍室６の扉６ａが開放されたことが冷凍室扉スイッチ１１０３により検知されたときに庫内を撮影することもできる。また、レンズの近傍にカメラ温度センサ１１１３およびヒータを配置することで、レンズの近傍の温度を上昇させ、霜を除去した後に撮影することができる。
【０２３８】
＜具体例５＞
具体例５のカメラユニット１２００は、図６４に示すように、カメラユニット１２００内に通信部１２０１およびバッテリ１２０２を内蔵している。この通信部１２０１は、冷蔵庫１あるいはルータ１０１（図１参照）等と無線通信を行うことで、撮像した画像を外部に送信する。また、カメラユニット１２００は、ＬＥＤライト１２０３、電源ボタン１２０４、設定ボタン１２０５が設けられており、単体で庫内を撮像可能となっている。このような構成とすることにより、配線ケーブル等をすることなく、設置場所をユーザが自由に設定できる。
【０２３９】
また、カメラユニット１２００には、図示は省略するが、レンズの近傍に温度センサおよびヒータが設けられており、レンズの近傍の温度を上昇させ、霜を除去した後に撮影することができる。
【０２４０】
なお、このカメラユニット１２００により庫内を撮像するタイミングは、冷蔵庫１と通信を行うことで冷蔵庫１側から撮像指示を受けてもよいし、上記した第１実施形態のようにカメラユニット１２００内に照度センサを設け、庫内照明を点灯したことや扉が開放されて外部の光を検知したとき等に撮像するようにしてもよい。
【０２４１】
（その他の実施形態）
本発明は、上記した実施形態にて例示したものに限定されることなく、次のように変形又は拡張することができる。また、上記した実施形態で例示したものおよび以下に示す変形例および拡張例で例示するものは、その一部または全部を任意に組み合わせることができる。
【０２４２】
第１実施形態では右扉３ｂに撮像カメラを設けた構成を例示したが、図２６に示すように左扉３ａに設けられている縦仕切り１７に撮像カメラ１８を設けてもよい。この縦仕切り１７は、左扉３ａの開閉状態に応じて回動するため、図２６（ａ）に示すように左扉３ａが閉鎖された状態では撮像カメラ１８が庫内に向けられて庫内の画像を撮像することができる。一方、図２６（ｂ）に示すように左扉３ａが開放された状態では、撮像カメラ１８が内板側に向くので、ユーザが撮像カメラ１８に触れることがなく、レンズ面の汚れを防止することができる。
【０２４３】
第１実施形態では撮像カメラ１８および撮像ライト１９を１つ設けた構成を例示したが、図２７に示すように、複数の撮像手段（上部撮像カメラ６０、下部撮像カメラ６２、ドア撮像カメラ６４）や、複数の照明手段（上部撮像ライト６１、下部撮像ライト６３）を設けてもよい。この場合、上部撮像カメラ６０にて庫内の上部側を撮像し、下部撮像カメラ６２にて庫内の下部側を撮像してもよい。すなわち、庫内の特定の位置を撮像する撮像手段を複数設けてもよい。この場合、それぞれの画像を合成すれば、例えば図７に示したような１枚の庫内画像を生成することができる。
【０２４４】
また、例えば庫内の上部側や下部側等の特定の位置を撮像できればよいので、広角レンズを採用しなくても庫内の全域を撮像することができる。また、１つの撮像カメラ１８で広角に撮像する場合に比べれば上部撮像カメラ６０や下部撮像カメラ６２の視野を小さくできるので、換言すると、第１実施形態のようにドアポケット９ｂに切り欠き部９ｂ１を設けなくても視野が遮られる可能性が小さくなるので、ドアポケットの収納量を維持したまま庫内を撮像することもできる。
【０２４５】
また、上部撮像カメラ６０で撮像する場合には上部撮像ライト６１を点灯し、下部撮像カメラ６２で撮像する場合には下部撮像ライト６３を点灯する等、撮像する位置に応じて適切な照明手段を点灯することで、撮像環境を制御するようにしてもよい。なお、上部側と下部側だけでなく、例えば棚板１１ごとに撮像手段を設けてもよい。
【０２４６】
また、例えば庫内の上部側を撮像する際には天井ライト１３の照度を低く、庫内の下部側を撮像する際には天井ライト１３の照度を通常の状態となるように制御し、複数の画像を合成して１枚の庫内画像を生成してもよい。すなわち、撮像ライト１９等は、必ずしも撮像専用のものを設ける必要は無い。
【０２４７】
第１実施形態では撮像ライト１９を点灯することで撮像環境を制御したが、例えば天井ライト１３や側面ライト３６の照度を低くする等で撮像カメラ１８に対する逆光が弱くなるように撮像環境を制御してもよい。
【０２４８】
また、ドア撮像カメラ６４によりドアポケット側を撮像し、庫内画像と併せて図２８に示すように冷蔵庫１の扉を開放した様子を示す合成画像を生成し、通信端末１０３にて表示するようにしてもよい。この場合、庫内にドア撮像カメラ６４を設けてドアポケット側を撮像するようにしもてよいし、扉の内板１４にそれぞれドア撮像カメラ６４を設け、扉が開放された後のタイミングで他の扉のドアポケットをそれぞれ撮像し、扉が閉鎖された後のタイミングで画像を撮像し、複数の画像を合成して１枚の庫内画像を生成するようにしてもよい。
【０２４９】
各実施形態では、撮像した画像をサーバ１０４に記憶する構成を例示したが、通信端末１０３に直接送信する構成としてもよい。
各実施形態では撮像した画像をそのままサーバ１０４に送信したが、広角レンズを用いたことにより生じる画像の歪みを補正した画像をサーバ１０４に送信してもよい。この場合、サーバ１０４にて画像の歪みを補正するようにしてもよい。
【０２５０】
各実施形態では、通信端末１０３から庫内を撮像するための指令を受け付けたタイミングで庫内を撮像する例を示したが、遅延撮像時間が経過した後の画像を最新の画像として撮像していれば、指令を受け付けた場合であっても庫内を撮像しない構成としてもよい。つまり、遅延撮像時間が経過した後の画像は冷蔵庫１の扉が閉鎖された後の最新の画像であることから、遅延撮像時間が経過した後の画像が撮像されている状態は、撮像時以降に扉が開放されていない状態（貯蔵状態が変化していない状態）であると言える。そのため、遅延撮像時間が経過した後の画像が最新の画像であれば、撮像しないことで無用な電力の消費を防ぐことができる。この場合、通信端末１０３がサーバ１０４から画像を取得する際に、最新の画像である旨を通知する構成としてもよい。
【０２５１】
第１実施形態では主制御部３０とは別に制御部５０を設けているが、主制御部３０にて撮像カメラ１８の制御等を行う構成としてもよい。これにより、部品点数を削減でき、コストを低減することができる。この場合、実施形態のように撮像した画像をそのままサーバ１０４に送信する構成とすれば、画像処理のような負荷の掛かる処理が不要であるため、主制御部３０だけでも対応することができる。
【０２５２】
第１実施形態では撮像カメラ１８側に通信手段を設けたが、第２実施形態のように冷蔵庫１側に通信手段を設け、撮像カメラ１８側は冷蔵庫１側の通信手段との間で通信を行う構成としてもよい。この場合、冷蔵庫１側に設ける通信手段は、冷蔵庫１の主制御部３０に設ける構成としてもよいが、第２実施形態の図２５に示す通信装置５０１のように着脱可能（オプション品）な構成としてもよい。
【０２５３】
第１実施形態では貯蔵庫として冷蔵室３を例示したが、第２実施形態のように例えば野菜室４等の他の貯蔵庫を撮像するようにしてもよい。
第１実施形態では撮像カメラ１８を予め冷蔵庫１に設けた構成を示したが、撮像カメラ１８は、冷蔵庫１から着脱可能な構成としてもよい。具体的には、冷蔵庫１を購入したユーザが、購入後に撮像カメラ１８を取り付けることができる構成としてもよい。つまり、第２実施形態のカメラ装置３００のように、撮像カメラ１８を着脱可能とする構成としてもよい。
【０２５４】
この場合、撮像カメラ１８と撮像ライト１９とを一体にユニットケースに収納し、冷蔵庫１から着脱可能としてもよい。また、制御部５０や通信部５２をカメラ装置に一体に設けてもよいし、さらにレンズヒータ５１も一体に設けてもよい。あるいは、制御部５０や通信部５２は冷蔵庫１に予め設けておき、制御部５０や通信部５２等と通信するための別の通信手段をカメラ装置側に設けてもよい。すなわち、カメラ装置は、少なくとも撮像カメラ１８を備えていれば、どの様な構成としてもよい。
【０２５５】
このカメラ装置と冷蔵庫１との間は、有線方式にて接続するようにしてもよいし、無線方式にて接続するようにしてもよい。この場合、カメラ装置に対する電源も無線給電方式としてもよい。
【０２５６】
また、カメラ装置を着脱可能な構成とする場合、冷蔵庫１のドアポケット８〜１０、内板１４、縦仕切り１７あるいは棚板等に被取り付け部を設け、被取り付け部に取り付けるための取り付け部をカメラ装置に設けることで、着脱可能とすることができる。具体的には、取り付け部と被取り付け部とが係合する構成としてもよいし、カメラ装置にクリップを設け、異なる厚みのドアポケットを挟み込むような構成（つまり、任意の位置に撮像手段を取り付け可能な構成）としてもよい。
【０２５７】
また、無線方式を採用する場合には、図２９に示すように、例えば冷蔵庫１の扉の内板１４に、カメラ装置３００を取り付ける位置を示す目印となる窪み６００を設け、カメラ装置３００側に取り付け用の磁石６０１を設けてもよい。例えば右扉３ｂ等の扉はその内部に金属製の鉄板６０２が設けられた構造となっているため、磁力によってカメラ装置３００を取り付けることができるためである。この窪み６００には、磁力以外の取り付け構造（例えば保持構造や係合構造）を設けてもよい。また、第２実施形態の磁石２０６のような検知用の磁石６０３を設けてもよい。この場合、なお、扉側に磁石を設け、カメラ装置３００側に金属部を設ける構成としてもよい。
【０２５８】
また、任意の位置にカメラ装置を取り付け可能な場合には、棚板やドアポケット等によって視野が遮られる可能性が小さい部位など、庫内を適切に撮像できる位置に取り付け位置を示す目印を設けてもよい。なお、カメラ装置を取り付ける位置が予め指定されている場合であっても、取り付け時にユーザが迷わないように目印を設けておいてもよい。
【０２５９】
また、ドアポケットにカメラ装置を収納するための専用の部位を形成しておき、その部位にカメラ装置を収納するようにしてもよい。
冷蔵庫１の庫内の特定の場所に、カメラ装置の有無を検出するＩＣチップ等の検知手段を設け、カメラ装置の有無に応じて例えば通信部５２の動作を許可する構成としてもよい。この場合、特定の場所は、少なくとも冷蔵庫１の庫内を含んでいる。なお、操作パネル３３からカメラ装置を取り付けたこと入力する構成としてもよい。
【０２６０】
また、冷蔵庫１にカメラ装置を識別するための識別手段を設け、特定のカメラ装置であると認識した場合のみカメラ装置の動作（通信部５２等の動作も含む）を許可する構成としてもよい。これにより、信頼性のあるカメラ装置（例えばメーカ純正品や動作確認済みのカメラ装置）のみを作動させることができる。また、第２実施形態のように、既存の庫内照明を撮像タイミングの通知手段として用いることができ、追加部品等が不要となり、コストの低減を図ることもできる。
【０２６１】
また、カメラ装置側にその冷蔵庫１が動作対象であるか否かを検知する検知手段を設け、冷蔵庫１側に検知手段に検知させるための被検知手段を設けるとよい。これら検知手段および被検知手段は、例えばコネクタの形状が適合する等の物理的な手法により構成してもよいし、識別情報をやり取りする等の手法により構成してもよい。
【０２６２】
また、例えばカメラ装置３００と通信を行うことで、そのカメラ装置３００が冷蔵庫１用のものであるか否かを識別する構成としてもよい。この場合、冷蔵庫１の通信装置５０１が識別手段として機能し、通信モジュール３０６が、カメラ装置３００が冷蔵庫１用のものであることを当該冷蔵庫１に識別させるための被識別手段として機能することになる。
【０２６３】
また、識別手段や被識別手段を、上記した検知手段や被検知手段と兼用してもよい。すなわち、例えばカメラ装置３００が保持部２０２に収納可能であれば、そのカメラ装置３００は、当該冷蔵庫１用のものであると識別することもできる。この場合、カメラ装置３００にて保持部２０２に設けられている磁石２０６の極性を検出し、その結果を冷蔵庫１側に通知することで、カメラ装置３００が保持部２０２に収容されたかを判定したり、冷蔵庫１側で庫内照明を点滅させ、それに対してカメラ装置３００側から何らかの応答を返すようにしておくこと等により、識別することができるようになる。
【０２６４】
また冷蔵庫１の内板１４にドアポケットを取り付けるポケット取り付け部を設け、ドアポケット９ｂ（第２実施形態のドアポケット２００も同様）そのものを着脱可能としてもよい。つまり、カメラ装置を着脱可能とする場合、カメラ装置を利用しないユーザはドアポケット８のような幅広なドアポケットを取り付けて収納量を増やすことができ、カメラ装置を利用するユーザは、幅狭になるもののドアポケット９ｂ（あるはドアポケット２００）を取り付けることで、カメラ装置の視野を遮ること無く、庫内を撮像させることができる。
【０２６５】
また、ポケット取り付け部に図３にて撮像カメラ１８が取り付けられている部位を覆う幅広な（つまり、右扉３ｂの幅とほぼ等しい）ドアポケット（あるいは、ドアポケット９ｂの切り欠き部９ｂ１を補う形状のドアポケット）を取り付け可能とし、カメラ装置を利用しない場合にはカメラ装置の取り付け部がドアポケットにより覆われる構成とすることで、ユーザが誤って取り付け部に触れてしまうこと等を防止できる。
【０２６６】
第２実施形態の制御部３０９による撮像タイミングの制御は、冷蔵庫１との間で通信を行って扉の開閉状態を取得することにより、第１実施形態と同様に撮像条件１〜４等を判定する構成としてもよい。この場合、照度センサ３１３によるタイミングの検出と撮像条件１〜４との双方を採用する構成としてもよいし、いずれか一方を採用する構成としてもよい。具体的には、第２実施形態ではユーザが扉を開放した場合には撮像しない構成としたが、庫内照明が連続点灯した時点を扉が開放された時点と判定し、その後、庫内照明が消灯した時点を扉が閉鎖された時点と判定し、庫内照明が消灯した時点で撮像することで、撮像条件１を判定することが可能となる。また、通信モジュール３０６を利用して、冷蔵庫１の主制御部３０から通信により扉の開閉状態を取得する構成とすれば、撮像条件１〜４を採用することができる。
【０２６７】
第２実施形態のカメラ装置３００に、結露を除去するための除去手段を設けてもよい。
第２実施形態の所定期間を、温度や湿度に基づいて結露が除去される期間（あるいは少なくともそれ以上の期間）に設定してもよい。勿論、例えば２時間等の固定期間を設定してもよい。
【０２６８】
第２実施形態のカメラ装置３００には撮像ランプ３０２を設けない構成としてもよい。例えば、冷蔵室３であれば天井ライト１３等が設けられているので、それらの庫内照明を利用して撮像する構成としてもよい。この場合、通信モジュールを介して冷蔵庫１側に点灯命令を送信すること等が考えられる。また、撮像時に、撮像ランプ３０２と庫内照明とを利用する構成としてもよい。
【０２６９】
各実施形態では庫内を撮像する例を示したが、例えば庫内に設けられている閉鎖空間部（例えば、蓋や引き出し構造で閉鎖あるいは覆われている卵室やチルド室の特定目的室１２、密閉された状態となる低気圧保存室等が考えられる）の構造の一部に透明部材を用いて窓部を形成し、その窓部から閉鎖空間部の内部を撮像する構成としてもよい。
【０２７０】
カメラ装置３００に対して冷蔵庫１側から有線あるは無線による給電を行ってもよい。これにより、電池切れ等が無くなり、利便性を向上させることができる。この場合、冷蔵庫１は基本的に常時給電されていることから、カメラ装置３００に給電するための給電回路等を設けても、冷蔵庫１の運転に異常をきたすことは無いと考えられる。この場合、カメラ装置３００のように冷蔵庫１からの着脱が可能な構成とすることで、不要な電力供給が行われることも防止できる。
【０２７１】
第２実施形態では、２箇所の保持部においてそれぞれカメラ装置３００に対向する側の極性が異なるように磁石を配置したが、検知部３０７に対する相対的な位置関係が変化するように磁石を配置してもよい。この場合、磁石と近ければ磁気センサの出力が大きくなる一方、磁石から遠ければ出力が小さく（但し、磁界の正負は変わらない）なるので、３以上の保持部を設ける構成にも対応することができる。
【０２７２】
温度センサ３１０、磁気センサ３１１、加速度センサ３１２、照度センサ３１３は、必要なものを設ければよく、必ずしも全てのセンサを設ける必要は無い。例えば、磁気センサ３１１にてカメラの向きを検知する構成とすれば、加速度センサ３１２は必ずしも必須ではない。
【０２７３】
第３実施形態では扉が開放される際に撮像する例を示したが、勿論、第１、第２実施形態のように扉の閉鎖中に撮像するものと組み合わせてもよい。
開度検知ブロックは、第３実施形態で例示したもの以外に、照度検知ブロックで検知した庫内の照度に基づいて開度を推定する構成としてもよい。また、撮像ブロックで撮像した画像を利用して、例えば庫内照明等の位置が固定されている目標物が画像のどの位置に写っているかに基づいて開度を推定する構成としてもよい。また、扉の振動を検知する振動検知手段を設け、振動を検知したときに扉が開放されたと判定する構成としてもよいし、第２実施形態のカメラ装置３００のような加速度センサ３１２で回動状態や直線移動状態が検知されると、扉が開放されたと判定する構成としてもよい。
【０２７４】
照度検知ブロックは、開度検知ブロックで検知した開度に基づいて照度を推定する構成としてもよい。また、撮像ブロックで撮像した画像の輝度から照度を検知する構成としてもよい。
【０２７５】
第３実施形態では照明手段として庫内照明を例示したが、専用の撮像ライト１９を設けてもよい。また、扉を開放した際の外部からの光（冷蔵庫が設置されている室内照明や太陽光）も照明手段に含まれる。さらには、撮像ブロックを扉ではなく庫内に設置し、扉が開放された際に撮像するようにしてもよい。
【０２７６】
扉が開放されると、冷えていたレンズが暖かい外気に触れること曇りや結露が生じることがある。そんため、庫内を撮像できる状態を、扉の回転角度の代わりにレンズが結露しない程度の時間等で設定する構成としてもよい。この場合、庫内温度と外気温とを加味することで、その時間を推測する構成としてもよい。
【０２７７】
また、結露を除去するための除去手段を設けてもよい。例えば、収納量推定手段により推定された収納物の収納量が所定の基準収納量を超えたとき、貯蔵庫内の水分が増加していると予想されることから、空気を循環させる循環ファンを、通常時よりも循環量が高くなる状態で駆動することが考えられる。
【０２７８】
また、撮像手段の近傍に、熱を発する発熱手段を設けてもよい。この場合、発熱手段としては、ヒータ等であってもよいし、マイクロコンピュータ等の発熱部品であってもよい。
【０２７９】
第３実施形態では庫内照明を照明ブロックに採用したが、専用の撮像ライトを設け、図３１（Ｂ）のように光量が少ないと想定される場合や、省エネモードにある場合等には、光量を補うために撮像ライトを点灯させてもよい。
【０２８０】
第３実施形態では開度が所定量未満である際に庫内照明を点灯する構成としたが、しなくてもよい。その場合、扉の開度が所定量未満である場合には撮像しないという選択肢もある。
【０２８１】
第４実施形態で例示した凹部を、第３実施形態に適用してもよい。
「扉が開放されている状態」には、扉が閉鎖されるときも含まれている。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【０２８２】
図面中、１は冷蔵庫、３は冷蔵室（貯蔵庫）、３ａは左扉（扉）、３ｂは右扉（扉）、３ｄは側壁、４は野菜室（貯蔵庫）、４ａ〜７ａは扉、５は製氷室（貯蔵庫）、６は上部冷凍室（貯蔵庫）、７は下部冷凍室（貯蔵庫）、８〜１０はドアポケット、９ｂ１は切り欠き部、１３は天井ライト（照明手段）、１４は内板（被取り付け部）、１７は縦仕切り、１８は撮像カメラ（撮像手段）、１９は撮像ライト（照明手段）、３０は制御部（制御手段）、３３ｂはスイッチ類（外出スイッチ）、３３ｃは庫外センサ（庫外環境取得手段）、３６は側面ライト（照明手段）、５０は制御部（制御手段）、５１はレンズヒータ（除去手段）、５２は通信部（通信手段）、６０は上部撮像カメラ（撮像手段）、６１は上部撮像ライト（照明手段）、６２は下部撮像カメラ（撮像手段）、６３は下部撮像ライト（照明手段）、６４はドア撮像カメラ（撮像手段）、１００は家電ネットワークシステム、１０２は通信回線、１０３は通信端末（外部の装置）、１０４はサーバ（外部の装置）、２００はドアポケット（冷蔵庫用ドアポケット、冷蔵庫用ホルダ）、２０２は保持部（被取り付け部）、２０６は磁石（被検知手段）、３００はカメラ装置（撮像手段）、３０２は撮像ランプ（照明手段、カメラ側照明手段）、３０６は通信モジュール（通信手段、カメラ側通信手段、被識別手段）、３０７は検知部（検知手段）、３０８は撮像部（撮像手段）、３１０は温度センサ、３１１は磁気センサ、３１２は加速度センサ、３１３は照度センサ、４００は冷蔵庫用ホルダ、４０１は保持部、４０５は磁石（被検知手段）、５００は家電ネットワークシステム、５０１は通信装置（通信手段、庫側通信手段、識別手段）、７００は冷蔵庫、７０１は制御ブロック（制御手段）、７０２は撮像ブロック（撮像手段）、７０３は照明ブロック（照明手段）、７０４は開検知ブロック（扉開検知手段）、７０５は開度検知ブロック（開度検知手段）、７０６は照度検知ブロック（照度検知手段）、７０７は通信ブロック（通信手段）、７０８は収納量推定部（収納量推定手段）、７１０は扉（回動式の扉）、７２０はペットボトル（収納物）、７２３は卵（収納物）、８００は冷蔵庫、８０１は左扉（回動式の扉）、８０２は右扉（回動式の扉）、８１０は冷蔵庫、８１１は左扉（回動式の扉）、８１２は右扉（回動式の扉）、８１４Ａ〜Ｅは貯蔵庫（独立した貯蔵庫）、８１５は棚板、８１６は収納容器、９００は冷蔵庫、９０２は扉（引き出し式の扉）、９０４は貯蔵庫（引き出し式の貯蔵庫）、９０５は仕切り板、９０６は扉（引き出し式の扉）、９１０は扉、９３０は貯蔵庫、９３２は扉、９３３は仕切り板、１０００はカメラユニット（撮像手段）、１００１はカメラケース（保護ケース）、１００３はカメラモジュール（撮像モジュール）、１０１０は撮像素子、１０１１は回路部品、１０１２は基板、１０１３はレンズユニット、１０１７はポッティング材、１０１８はＯリング、１０５０はＬＥＤライト（照明手段）、１１０５は通信部（通信手段）、１１１０はカメラユニット（撮像手段）、１１１３はカメラ温度センサ（温度検知手段）、１１１４はＬＥＤライト（照明手段）、１１１５はヒータ（加熱手段、除去手段）、１１２０は仕切り板、１１２２は放熱パイプ（加熱手段、除去手段）、１１４０は断熱仕切り板（仕切り板）、１２００はカメラユニット（撮像手段）、１２０１は通信部（通信手段）、１２０３はＬＥＤライト（照明手段）を示す。
【図１】
2018173272.tif 000003
【図２】
2018173272.tif 000004
【図３】
2018173272.tif 000005
【図４】
2018173272.tif 000006
【図５】
2018173272.tif 000007
【図６】
2018173272.tif 000008
【図７】
2018173272.tif 000009
【図８】
2018173272.tif 000010
【図９】
2018173272.tif 000011
【図１０】
2018173272.tif 000012
【図１１】
2018173272.tif 000013
【図１２】
2018173272.tif 000014
【図１３】
2018173272.tif 000015
【図１４】
2018173272.tif 000016
【図１５】
2018173272.tif 000017
【図１６】
2018173272.tif 000018
【図１７】
2018173272.tif 000019
【図１８】
2018173272.tif 000020
【図１９】
2018173272.tif 000021
【図２０】
2018173272.tif 000022
【図２１】
2018173272.tif 000023
【図２２】
2018173272.tif 000024
【図２３】
2018173272.tif 000025
【図２４】
2018173272.tif 000026
【図２５】
2018173272.tif 000027
【図２６】
2018173272.tif 000028
【図２７】
2018173272.tif 000029
【図２８】
2018173272.tif 000030
【図２９】
2018173272.tif 000031
【図３０】
2018173272.tif 000032
【図３１】
2018173272.tif 000033
【図３２】
2018173272.tif 000034
【図３３】
2018173272.tif 000035
【図３４】
2018173272.tif 000036
【図３５】
2018173272.tif 000037
【図３６】
2018173272.tif 000038
【図３７】
2018173272.tif 000039
【図３８】
2018173272.tif 000040
【図３９】
2018173272.tif 000041
【図４０】
2018173272.tif 000042
【図４１】
2018173272.tif 000043
【図４２】
2018173272.tif 000044
【図４３】
2018173272.tif 000045
【図４４】
2018173272.tif 000046
【図４５】
2018173272.tif 000047
【図４６】
2018173272.tif 000048
【図４７】
2018173272.tif 000049
【図４８】
2018173272.tif 000050
【図４９】
2018173272.tif 000051
【図５０】
2018173272.tif 000052
【図５１】
2018173272.tif 000053
【図５２】
2018173272.tif 000054
【図５３】
2018173272.tif 000055
【図５４】
2018173272.tif 000056
【図５５】
2018173272.tif 000057
【図５６】
2018173272.tif 000058
【図５７】
2018173272.tif 000059
【図５８】
2018173272.tif 000060
【図５９】
2018173272.tif 000061
【図６０】
2018173272.tif 000062
【図６１】
2018173272.tif 000063
【図６２】
2018173272.tif 000064
【図６３】
2018173272.tif 000065
【図６４】
2018173272.tif 000066