JP6570898B2 - 食材位置提示方法及び冷蔵庫 - Google Patents

Description

本開示は、冷蔵庫内の食材の位置を提示する食材位置提示方法、及び食材の位置を提示する冷蔵庫に関するものである。

従来、冷蔵庫内の食材を適切に管理する技術が望まれている。例えば、冷蔵庫内の食材の有無がユーザに提示されることにより、ユーザが食材を買い忘れたり、買いすぎたりするのを防止することができる。また、例えば、冷蔵庫内の食材の消費期限がユーザに提示されることにより、ユーザは、消費期限が過ぎる前に食材を使用することができる。

例えば、従来、冷蔵庫内に設けられたカメラにより庫内を撮影し、撮影した画像をスマートフォンに送信する冷蔵庫が開発されている。この場合、ユーザは、スマートフォンに送られた冷蔵庫内の画像を外出先で確認することができ、食材を重複して買うのを防止することができる。

また、例えば、特許文献１では、食料品データ（例えば、食料品名、賞味期限など）を読取部で読み取り、この食料品を載置部に置いたときに、この載置部の重量増加変化を重量検知部で検出し、どの場所に載置されたかを演算部で計算し、これら食料品データ、重量データ及び位置データを記憶部で記憶し、この各データを表示部で表示している。

さらに、例えば、特許文献２では、冷蔵庫は、上下方向に並べて設けた食品を載置する複数の棚と、該棚を有する冷蔵室と、棚の前端よりも手前側で上部中央よりに設けた温度検知手段とを備え、該温度検知手段は、食品温度と使用者の体温との変曲点温度を検知して、食品の棚への載置位置及び温度を特定している。

特開２００２−３０３４７９号公報 特開２０１１−１５８２３３号公報

しかしながら、従来の技術では、冷蔵庫内の食材に関する情報は、スマートフォン又は冷蔵庫の前面に設けられた表示部に表示され、実際の食材と離れた場所でユーザに提示される。そのため、ユーザは、冷蔵庫内の食材を直ちに利用することができない。例えば、消費期限が近い食材に関する情報がスマートフォンに表示されたとしても、当該食材がユーザの目の前にあるわけではない。そのため、ユーザはその食材を利用することを忘れてしまい、消費期限が過ぎる前に食材を使用することができないおそれがある。

本開示は、上記の問題を解決するためになされたもので、ユーザは冷蔵庫内の食材に対して即座に対処することができ、食材を無駄なく利用することができる食材位置提示方法及び冷蔵庫を提供することを目的とするものである。

本開示の一局面に係る食材位置提示方法は、コンピュータを用いて、冷蔵庫内の食材の位置を提示する食材位置提示方法であって、前記冷蔵庫内の前記食材を特定するとともに、前記冷蔵庫内における前記食材の位置を特定し、特定された前記食材に関する食材情報と、特定された前記食材の位置を示す位置情報とを対応付けた在庫情報を記憶し、前記冷蔵庫の扉が開かれたことを示す扉開情報を取得し、前記扉開情報を取得した際に、前記在庫情報に基づいて、ユーザが使用すべき食材を特定し、特定した前記食材を照明するための制御コマンドを生成し、生成した前記制御コマンドを前記冷蔵庫に送信する。

本開示によれば、冷蔵庫の扉が開けられた際に、冷蔵庫内のユーザが使用すべき食材が照明されるので、ユーザは冷蔵庫内の食材に対して即座に対処することができ、食材を無駄なく利用することができる。

本開示の実施の形態１に係る食材位置提示システムの構成を示す図である。 本実施の形態１において、庫内に設けられたカメラによって庫内の食材の位置を特定する方法について説明するための模式図である。 本実施の形態１において、庫外に設けられたカメラによって庫内の食材の位置を特定する方法について説明するための模式図である。 本実施の形態１における複数の光源の配置例について説明するための模式図である。 本実施の形態１における食材位置提示システムの在庫情報を記録する動作について説明するためのフローチャートである。 本実施の形態１における食材位置提示システムの特定の食材を照明する動作について説明するためのフローチャートである。 本実施の形態１において、使用期限に応じて食材を照明する例について説明するための模式図である。 本開示の実施の形態１の変形例に係る食材位置提示システムの構成を示す図である。 本実施の形態１の変形例において、ユーザが作る料理のレシピに応じて食材を照明する例について説明するための模式図である。 本開示の実施の形態２に係る冷蔵庫の構成を示す図である。 本実施の形態２における冷蔵庫の在庫情報を記録する動作について説明するためのフローチャートである。 本実施の形態２における冷蔵庫の特定の食材を照明する動作について説明するためのフローチャートである。

上記の課題を解決すべく本開示の一局面に係る食材位置提示方法は、コンピュータを用いて、冷蔵庫内の食材の位置を提示する食材位置提示方法であって、前記冷蔵庫内の前記食材を特定するとともに、前記冷蔵庫内における前記食材の位置を特定し、特定された前記食材に関する食材情報と、特定された前記食材の位置を示す位置情報とを対応付けた在庫情報を記憶し、前記冷蔵庫の扉が開かれたことを示す扉開情報を取得し、前記扉開情報を取得した際に、前記在庫情報に基づいて、ユーザが使用すべき食材を特定し、特定した前記食材を照明するための制御コマンドを生成し、生成した前記制御コマンドを前記冷蔵庫に送信する。

この構成によれば、冷蔵庫内の食材が特定されるとともに、冷蔵庫内における食材の位置が特定される。特定された食材に関する食材情報と、特定された食材の位置を示す位置情報とを対応付けた在庫情報が記憶される。冷蔵庫の扉が開かれたことを示す扉開情報が取得される。扉開情報が取得された際に、在庫情報に基づいて、ユーザが使用すべき食材が特定され、特定された食材を照明するための制御コマンドが生成される。生成された制御コマンドは冷蔵庫に送信される。

したがって、冷蔵庫の扉が開けられた際に、冷蔵庫内のユーザが使用すべき食材が照明されるので、ユーザは冷蔵庫内の食材に対して即座に対処することができ、食材を無駄なく利用することができる。

また、上記の食材位置提示方法において、前記扉開情報を取得した際に、前記在庫情報に含まれる前記食材情報で示される食材の使用期限を取得し、前記扉開情報を取得した日付と、取得した前記使用期限の日付との差分が、所定の閾値以下である食材を特定し、特定した前記食材を照明するための制御コマンドを生成してもよい。

この構成によれば、扉開情報が取得された際に、在庫情報に含まれる食材情報で示される食材の使用期限が取得される。扉開情報を取得した日付と、取得した使用期限の日付との差分が、所定の閾値以下である食材が特定され、特定された食材を照明するための制御コマンドが生成される。

したがって、扉開情報を取得した日付と使用期限の日付との差分が、所定の閾値以下である食材が特定され、特定された食材が照明されるので、使用期限が近づいている食材をユーザに提示することができ、食材を無駄なく利用することができる。

また、上記の食材位置提示方法において、前記制御コマンドは、特定した前記食材を、前記差分に応じた異なる色の光によって照明するためのコマンドを含んでもよい。

この構成によれば、制御コマンドは、特定した食材を、差分に応じた異なる色の光によって照明するためのコマンドを含む。したがって、扉開情報を取得した日付と使用期限の日付との差分に応じた異なる色の光で食材が照明されるので、使用期限が近づいている食材をより分かり易くユーザに提示することができる。

また、上記の食材位置提示方法において、前記扉開情報を取得した際に、前記在庫情報に含まれる前記食材情報で示される食材の中から、所定の料理に使用される少なくとも１つの食材を特定し、特定した前記少なくとも１つの食材を照明するための制御コマンドを生成してもよい。

この構成によれば、扉開情報が取得された際に、在庫情報に含まれる食材情報で示される食材の中から、所定の料理に使用される少なくとも１つの食材が特定され、特定された少なくとも１つの食材を照明するための制御コマンドが生成される。

したがって、所定の料理に使用される少なくとも１つの食材が特定され、特定された少なくとも１つの食材が照明されるので、ユーザは、冷蔵庫の扉を開けた際に、所定の料理に使用される少なくとも１つの食材を容易に選択することができる。

また、上記の食材位置提示方法において、前記制御コマンドは、特定した前記食材の位置を他の食材の位置と異なる色の光で照射するように前記冷蔵庫内に備えられた光源を制御するコマンドを含んでもよい。

この構成によれば、ユーザが使用すべき食材が、他の食材とは異なる色の光で照射されるので、ユーザは冷蔵庫内の食材のうち、即座に対処すべき食材を容易に見つけることができる。

また、上記の食材位置提示方法において、前記冷蔵庫の前記食材が載置される載置部は、複数の領域に分割され、分割された前記複数の領域のそれぞれに載置された前記食材は、前記冷蔵庫内に備えられた複数の光源により照明され、前記制御コマンドは、特定した前記食材の位置に対応する前記領域上の前記食材に光を照射するように前記複数の光源を制御するコマンドを含んでもよい。

この構成によれば、冷蔵庫の食材が載置される載置部は、複数の領域に分割され、分割された複数の領域のそれぞれに載置された食材は、冷蔵庫内に備えられた複数の光源により照明される。特定された食材の位置に対応する領域上の食材に光を照射するように複数の光源が制御される。

したがって、冷蔵庫の食材が載置される載置部の分割された複数の領域のそれぞれに載置された食材は、複数の光源により照明されるので、特定の食材に光を容易に照射することができる。

また、上記の食材位置提示方法において、前記冷蔵庫内に備えられた撮像装置によって撮像された庫内の画像を取得し、取得された前記画像に基づいて前記食材の位置を推定することで、前記食材の位置を特定してもよい。

この構成によれば、冷蔵庫内に備えられた撮像装置によって撮像された庫内の画像が取得され、取得された画像に基づいて食材の位置が推定されることで、食材の位置が特定されるので、新たに載置された食材の位置を容易に特定することができる。

また、上記の食材位置提示方法において、前記冷蔵庫内に入れられる前記食材が撮像装置によって撮影され、撮影された前記冷蔵庫内に入れられる前記食材の軌道から前記冷蔵庫内における前記食材の位置を推定することで、前記食材の位置を特定してもよい。

この構成によれば、冷蔵庫内に入れられる食材が撮像装置によって撮影され、撮影された冷蔵庫内に入れられる食材の軌道から冷蔵庫内における食材の位置が推定されることで、食材の位置が特定されるので、新たに載置された食材の位置を容易に特定することができる。

また、上記の食材位置提示方法において、前記冷蔵庫内の前記食材が載置される載置部に設けられた重量センサによって検出された重量データに基づいて前記食材の位置を推定することで、前記食材の位置を特定してもよい。

この構成によれば、冷蔵庫内の食材が載置される載置部に設けられた重量センサによって検出された重量データに基づいて食材の位置が推定されることで、食材の位置が特定されるので、新たに載置された食材の位置を容易に特定することができる。

また、上記の食材位置提示方法において、前記食材に付されたバーコード、カラーコード又は二次元コードが読取装置で読み取られることによって前記食材を特定してもよい。

この構成によれば、食材に付されたバーコード、カラーコード又は二次元コードが読取装置で読み取られることによって食材が特定されるので、新たに載置された食材を容易に特定することができる。

また、上記の食材位置提示方法において、前記食材に付されたＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｅｒ）タグに記憶されている前記食材に関する情報が、前記冷蔵庫に備えられたＲＦＩＤリーダで読み取られることによって前記食材を特定してもよい。

この構成によれば、食材に付されたＲＦＩＤタグに記憶されている食材に関する情報が、冷蔵庫に備えられたＲＦＩＤリーダで読み取られることによって食材が特定されるので、新たに載置された食材を容易に特定することができる。

また、本開示の他の局面に係る冷蔵庫は、食材の位置を提示する冷蔵庫であって、前記冷蔵庫内の前記食材を特定するとともに、前記冷蔵庫内における前記食材の位置を特定する特定部と、前記特定部によって特定された前記食材に関する食材情報と、前記特定部によって特定された前記食材の位置を示す位置情報とを対応付けた在庫情報を記憶する記憶部と、前記冷蔵庫の扉が開かれたことを検知する扉開検知部と、光を照射する複数の光源と、前記扉開検知部によって前記扉が開かれたことが検知された際に、前記在庫情報に基づいて、ユーザが使用すべき食材を特定し、特定した前記食材を照明するように前記複数の光源の点灯を制御する制御部と、を備える。

この構成によれば、冷蔵庫内の食材が特定されるとともに、冷蔵庫内における食材の位置が特定される。特定された食材に関する食材情報と、特定された食材の位置を示す位置情報とを対応付けた在庫情報が記憶される。冷蔵庫の扉が開かれたことが検知される。扉が開かれたことが検知された際に、在庫情報に基づいて、ユーザが使用すべき食材が特定され、特定された食材を照明するように複数の光源の点灯が制御される。

したがって、冷蔵庫の扉が開けられた際に、冷蔵庫内のユーザが使用すべき食材が照明されるので、ユーザは冷蔵庫内の食材に対して即座に対処することができ、食材を無駄なく利用することができる。

以下添付図面を参照しながら、本開示の実施の形態について説明する。なお、以下の実施の形態は、本開示を具体化した一例であって、本開示の技術的範囲を限定するものではない。

（実施の形態１）
図１は、本開示の実施の形態１に係る食材位置提示システムの構成を示す図である。図１に示す食材位置提示システムは、サーバ１及び冷蔵庫２を備える。サーバ１と冷蔵庫２とは、ネットワーク３を介して互いに通信可能に接続されている。なお、ネットワーク３は、例えばインターネットである。

サーバ１は、通信部１０１、特定部１０２、在庫情報記憶部１０３及び制御コマンド生成部１０４を備える。

通信部１０１は、冷蔵庫２へ種々の情報を送信するとともに、冷蔵庫２から種々の情報を受信する。通信部１０１は、冷蔵庫２内に備えられたカメラ（撮像装置）によって撮像された撮像画像を取得する。すなわち、通信部１０１は、冷蔵庫２によって送信された、庫内を撮像した撮像画像を受信する。また、通信部１０１は、冷蔵庫２によって送信された、冷蔵庫２の扉が開かれたことを示す扉開情報を取得する。

特定部１０２は、冷蔵庫２に載置された食材を特定するとともに、冷蔵庫内における食材の位置を特定する。特定部１０２は、食材名特定部１０５及び格納位置特定部１０６を備える。

食材名特定部１０５は、通信部１０１によって取得された撮像画像から食材名を特定する。食材の表面には、バーコード、二次元コード又はカラーコードが付されている。二次元コードは、例えばＱＲコード（登録商標）である。カラーコードは、赤色、青色及び黄色などの複数の色の配列により表される情報である。食材名特定部１０５は、撮像画像に含まれるバーコード、二次元コード又はカラーコードを読み取り、読み取ったバーコード情報、二次元コード情報又はカラーコード情報に対応付けられている食材名を食材名データベースから取得する。

食材名データベース（不図示）は、バーコード情報、二次元コード情報又はカラーコード情報と、食材名とを対応付けたテーブルを記憶している。なお、サーバ１が食材名データベースを備えてもよいし、外部サーバが食材名データベースを備えてもよい。このように、食材名特定部１０５は、食材に付されたバーコード、カラーコード又は二次元コードが読取装置（カメラ）で読み取られることによって食材を特定する。

なお、バーコード、二次元コード又はカラーコードは、予めパッケージに印刷されていてもよい。また、野菜などの包装されていない食材、及びパッケージにバーコード、二次元コード又はカラーコードが印刷されていない食材には、ユーザにより印刷されたバーコード、二次元コード又はカラーコードが貼り付けられる。ユーザにより印刷されたバーコード、二次元コード又はカラーコードには、食材に関する情報、例えば、食材名及び食材の製造番号が埋め込まれている。

また、食材名は、食材の名称だけではなく、食材の種類、食材の製品名、又は食材の製品番号を含んでもよい。

また、食材名データベースは、カメラで撮像された食材のパッケージ画像と、食材名とを対応付けたテーブルを記憶してもよい。この場合、食材名特定部１０５は、画像認識を行い、撮像画像に含まれるパッケージ画像に対応付けられている食材名を食材名データベースから取得する。

また、食材名特定部１０５は、食材に付されたＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｅｒ）タグに記憶されている食材に関する情報が、冷蔵庫２に備えられたＲＦＩＤリーダで読み取られることによって食材を特定してもよい。すなわち、ＲＦＩＤタグが食材に付されていてもよい。ＲＦＩＤタグは、食材に関する情報、例えば、食材名及び食材の製造番号などを記憶しており、ＲＦＩＤリーダは、食材に関する情報をＲＦＩＤタグから読み取る。読み取られた食材に関する情報は、サーバ１へ送信される。

格納位置特定部１０６は、通信部１０１によって取得された撮像画像に基づいて冷蔵庫２内における食材の位置を推定することで、食材の位置を特定する。例えば、食材の表面には、タグが付されており、格納位置特定部１０６は、撮像画像からタグの位置を検出し、冷蔵庫２内の奥行き方向をｘ軸とし、幅方向をｙ軸とし、高さ方向をｚ軸とする３次元座標空間における食材の座標位置（ｘ，ｙ，ｚ）を推定する。

在庫情報記憶部１０３は、食材名特定部１０５によって特定された食材に関する食材情報と、格納位置特定部１０６によって特定された食材の位置を示す位置情報とを対応付けた在庫情報を記憶する。なお、在庫情報記憶部１０３は、在庫情報に対応付けて冷蔵庫２の機種を示す機種情報を記憶してもよい。なお、食材情報は、食材名だけでなく、食材を一意に識別するための製品番号を含んでもよい。

制御コマンド生成部１０４は、冷蔵庫２から扉開情報を取得した際に、在庫情報に基づいて、ユーザが使用すべき食材を特定し、特定した食材を照明するための制御コマンドを生成する。制御コマンド生成部１０４は、ユーザが使用すべき食材を特定し、特定した食材に対応付けられている位置情報を在庫情報記憶部１０３から取得する。制御コマンド生成部１０４は、冷蔵庫２の機種情報から冷蔵庫２の複数の光源の配置状態を取得し、在庫情報記憶部１０３から取得した位置情報に対応する光源を特定し、特定した光源を点灯させる制御コマンドを生成する。通信部１０１は、制御コマンドを冷蔵庫２に送信する。

なお、制御コマンド生成部１０４は、ユーザが使用すべき食材が複数存在する場合、複数の光源を点灯させる制御コマンドを生成する。また、制御コマンド生成部１０４は、光源から出射する光の色を特定してもよく、制御コマンドは、点灯させる光源の色を含んでもよい。

また、制御コマンド生成部１０４は、扉開情報を取得した際に、在庫情報に含まれる食材情報で示される食材の使用期限を外部サーバから取得する。なお、使用期限は、賞味期限又は消費期限であってもよい。また、外部サーバは、食材名と、食材の使用期限とを対応付けた使用期限データベースを記憶している。制御コマンド生成部１０４は、扉開情報を取得した日付と、取得した使用期限の日付との差分が、所定の閾値以下である食材を特定し、特定した食材を照明するための制御コマンドを生成する。所定の閾値は、例えば、１週間である。つまり、制御コマンド生成部１０４は、冷蔵庫２内の食材のうち、１週間以内に使用期限が切れる食材を特定する。

なお、サーバ１が使用期限データベースを記憶してもよい。また、食材が野菜又は果物などのような生鮮食品である場合、使用期限データベースは、当該生鮮食品の一般的な使用期限を、当該生鮮食品の名称に対応付けて記憶してもよい。また、食材が加工食品である場合、使用期限データベースは、当該加工食品の製造番号と、当該加工食品の使用期限とを対応付けて記憶してもよい。

制御コマンドは、特定した食材を、差分に応じた異なる色の光によって照明するためのコマンドを含んでもよい。本実施の形態では、制御コマンド生成部１０４は、扉開情報を取得した日付と、取得した使用期限の日付との差分が、所定の閾値以下である食材を特定しているが、本開示は特にこれに限定されず、制御コマンド生成部１０４は、扉開情報を取得した日付と、取得した使用期限の日付との差分が、第１の閾値以下である食材を特定し、特定した第１の閾値以下である食材のうち、差分が、第１の閾値よりも小さい第２の閾値以下である食材を特定してもよい。第１の閾値は、例えば、１週間であり、第２の閾値は、例えば、３日である。そして、制御コマンド生成部１０４は、差分が、第１の閾値以下であり、且つ第２の閾値より大きい食材を第１の色（例えば、緑色）の光で照明し、差分が、第２の閾値以下である食材を第１の色とは異なる第２の色（例えば、赤色）の光で照明する制御コマンドを生成してもよい。

また、制御コマンド生成部１０４は、冷蔵庫２から扉開情報を取得した際に、制御コマンドを生成しているが、本開示は特にこれに限定されず、冷蔵庫２は、冷蔵庫２の前に存在するユーザを検知し、検知した検知情報をサーバ１へ送信し、制御コマンド生成部１０４は、冷蔵庫２から検知情報を取得した際に、制御コマンドを生成してもよい。

冷蔵庫２は、扉開閉検知部２０１、庫内情報取得部２０２、通信部２０３、制御部２０４及び複数の光源２０５を備える。

扉開閉検知部２０１は、冷蔵庫２の前面に設けられた扉が開かれたことを検知するととともに、扉が閉じられたことを検知する。

庫内情報取得部２０２は、例えば、カメラを含み、庫内を撮像し、撮像画像を取得する。庫内情報取得部２０２は、扉開閉検知部２０１によって扉が閉じられたことが検知されると、庫内を撮像し、撮像画像を取得する。

ここで、本実施の形態１において、庫内に設けられたカメラによって庫内を撮像する方法について説明する。

図２は、本実施の形態１において、庫内に設けられたカメラによって庫内の食材の位置を特定する方法について説明するための模式図である。

図２に示すカメラ４０１及びカメラ４０２は、庫内情報取得部２０２の一例である。カメラ４０１は、庫内に設けられた棚の上方から撮像し、カメラ４０２は、棚の側方から撮像する。なお、カメラ４０１及びカメラ４０２は、棚毎に設けられてもよく、カメラ４０１及びカメラ４０２の一方のみが設けられていてもよい。

食材５０１の表面には、タグ５０２が付されている。格納位置特定部１０６は、カメラ４０１及びカメラ４０２から取得された撮像画像に含まれるタグ５０２を認識し、認識したタグ５０２の冷蔵庫内における座標位置を推定する。

図３は、本実施の形態１において、庫外に設けられたカメラによって庫内の食材の位置を特定する方法について説明するための模式図である。

図３に示すカメラ４０３及びカメラ４０４は、庫内情報取得部２０２の一例である。カメラ４０３は、扉が開けられた冷蔵庫２の前面の上辺に設けられ、冷蔵庫２内に入れられる食材を上方から撮像し、カメラ４０２は、扉が開けられた冷蔵庫２の前面の下辺に設けられ、冷蔵庫２内に入れられる食材を下方から撮像する。

食材５０１の表面には、タグ５０２が付されている。格納位置特定部１０６は、カメラ４０３及びカメラ４０４から取得された撮像画像に含まれるタグ５０２を認識し、撮影された冷蔵庫２内に入れられる食材５０１（タグ５０２）の軌道から冷蔵庫２内における食材の位置を推定することで、食材の位置を特定する。すなわち、格納位置特定部１０６は、タグ５０２がどのような軌道を描いて冷蔵庫２内に入れられたかを検知することにより、タグ５０２の冷蔵庫内における座標位置を推定する。

なお、本実施の形態１では、サーバ１が格納位置特定部１０６を備えているが、本開示は特にこれに限定されず、冷蔵庫２が格納位置特定部１０６を備えてもよく、冷蔵庫２は、特定した食材の位置をサーバ１へ送信してもよい。

また、本実施の形態１において、庫内情報取得部２０２は、食材が載置される載置部に設けられ、重量を検出する重量センサを含んでもよい。制御コマンド生成部１０４は、重量センサによって検出された重量データに基づいて食材の位置を推定することで、食材の位置を特定してもよい。つまり、食材が載置されると、当該食材が載置された位置の重量が変化するため、重量が変化した位置を検出することで、食材が載置された位置を推定することができる。

また、本実施の形態１において、庫内情報取得部２０２は、食材が載置される載置部に設けられ、温度を検出する温度センサを含んでもよい。制御コマンド生成部１０４は、温度センサによって検出された温度データに基づいて食材の位置を推定することで、食材の位置を特定してもよい。つまり、食材が載置されると、当該食材が載置された位置の温度が変化するため、温度が変化した位置を検出することで、食材が載置された位置を推定することができる。

通信部２０３は、サーバ１へ種々の情報を送信するとともに、サーバ１から種々の情報を受信する。通信部２０３は、庫内情報取得部２０２によって撮像された撮像画像をサーバ１へ送信する。また、通信部２０３は、扉開閉検知部２０１によって扉が開けられたことが検知されると、冷蔵庫２の扉が開かれたことを示す扉開情報をサーバ１へ送信する。また、通信部２０３は、サーバ１によって送信された制御コマンドを受信する。

制御部２０４は、通信部２０３によって受信された制御コマンドに基づいて、複数の光源２０５のそれぞれの点灯を制御する。

複数の光源２０５は、例えば、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）であり、光を照射する。複数の光源２０５は、冷蔵庫２内に設けられた食材を載置する載置部（棚）の上面に埋め込まれ、載置された食材に対して下方から光を照射する。また、複数の光源２０５は、冷蔵庫２の扉の内側に設けられた食材を収納する収納ポケットの前面に埋め込まれてもよい。

図４は、本実施の形態１における複数の光源の配置例について説明するための模式図である。

図４に示すように、冷蔵庫２は、庫内に食材を載置する載置部（棚）６０１を備える。また、冷蔵庫２は、扉の内側に食材を収納する収納ポケット６０３を備える。なお、冷蔵庫２は、複数の載置部６０１及び複数の収納ポケット６０３を備えてもよい。

載置部６０１の上面は、格子状に複数の領域に分割されており、各領域に光源２０５が配置されている。また、収納ポケット６０３の前面は、縞状に複数の領域に分割されており、各領域に光源２０５が配置されている。複数の光源２０５は、それぞれ独立して点灯させることが可能である。また、複数の光源２０５は、それぞれ複数の色の光を照射することが可能である。

このように、冷蔵庫２の食材が載置される棚は、複数の領域に分割され、分割された複数の領域のそれぞれに載置された食材は、複数の光源２０５のそれぞれにより照明される。制御コマンドは、特定した食材の位置に対応する領域上の食材に光を照射するように複数の光源２０５を制御するコマンドを含む。

なお、本実施の形態１では、複数の光源２０５は、下方から食材に光を照射しているが、本開示は特にこれに限定されず、複数の光源２０５は、上方から食材に光を照射してもよい。この場合、冷蔵庫２は、第１の載置部と、第１の載置部の下方に配置された第２の載置部とを備え、第１の載置部の下面は、格子状に複数の領域に分割されており、各領域に光源２０５が配置されている。第１の載置部の下面に配置された複数の光源２０５は、第２の載置部の上面に向かって光を照射する。これにより、第２の載置部の上面に載置された食材に光が照射される。このとき、制御コマンドは、特定した食材の位置に光を照射するように光源２０５を制御するコマンドを含む。また、制御コマンドは、特定した食材の位置を他の食材の位置と異なる色の光で照射するように光源２０５を制御するコマンドを含んでもよい。

また、複数の光源２０５は、収納ポケット６０３の前面に配置されるのではなく、収納ポケット６０３の内部に配置されてもよい。

また、冷蔵庫２は、第１の載置部の下面を移動可能な１つの光源を備えてもよい。この場合、制御部２０４は、光源を第２の載置部の上面に載置された食材の上方に移動させ、第２の載置部の上面に載置された食材に光を照射してもよい。

続いて、本実施の形態１における食材位置提示システムの動作について説明する。

図５は、本実施の形態１における食材位置提示システムの在庫情報を記録する動作について説明するためのフローチャートである。

まず、ステップＳ１において、冷蔵庫２の扉開閉検知部２０１は、冷蔵庫２の前面に設けられた扉が閉じられたことを検知する。

次に、ステップＳ２において、庫内情報取得部２０２は、庫内に設けられたカメラを起動する。

次に、ステップＳ３において、庫内情報取得部２０２は、庫内を撮像する。なお、棚毎に複数のカメラが設けられている場合、各カメラから庫内の画像を取得する。

次に、ステップＳ４において、庫内情報取得部２０２は、庫内に設けられたカメラによる撮像を終了する。

次にステップＳ５において、通信部２０３は、庫内情報取得部２０２によって取得された庫内を撮像した撮像画像をサーバ１へ送信する。なお、撮像画像は、静止画であっても、動画（複数の静止画）であってもよい。また、通信部２０３は、冷蔵庫２を識別するための機器識別情報、又は冷蔵庫２を使用するユーザを識別するためのユーザ識別情報を撮像画像に付加して送信してもよい。

次に、ステップＳ６において、サーバ１の通信部１０１は、冷蔵庫２によって送信された撮像画像を受信する。

次に、ステップＳ７において、食材名特定部１０５は、通信部１０１によって取得された撮像画像から、新たに載置された食材の食材名を特定する。なお、新たに載置された食材であるか否かの判断は、今回取得した撮像画像と、前回取得した撮像画像とを比較することにより判断することができる。食材の表面には、カラーコードが付されている。食材名特定部１０５は、撮像画像に含まれるカラーコードを読み取り、読み取ったカラーコード情報に対応付けられている食材名を食材名データベースから取得する。

このとき、食材名特定部１０５は、通信部１０１によって取得された撮像画像から、庫内から取り出された食材の食材名を特定してもよい。なお、庫内から取り出された食材であるか否かの判断は、今回取得した撮像画像と、前回取得した撮像画像とを比較することにより判断することができる。

次に、ステップＳ８において、格納位置特定部１０６は、通信部１０１によって取得された撮像画像に基づいて、冷蔵庫２内に新たに載置された食材の格納位置を特定する。１つの棚を少なくとも２つのカメラにより撮像することにより、冷蔵庫２内のどの位置に食材が存在するかを概ね推定することができる。

このとき、格納位置特定部１０６は、通信部１０１によって取得された撮像画像に基づいて、庫内から取り出された食材の格納位置を特定してもよい。

次に、ステップＳ９において、在庫情報記憶部１０３は、食材名特定部１０５によって特定された新たに載置された食材の食材名と、格納位置特定部１０６によって特定された新たに載置された食材の格納位置とを関連付けた在庫情報を記憶する。このとき、在庫情報記憶部１０３は、食材名特定部１０５によって特定された庫内から取り出された食材の食材名と、格納位置特定部１０６によって特定された庫内から取り出された食材の格納位置とを関連付けた在庫情報を削除してもよい。

なお、食材名特定部１０５は、庫内に新たに載置された食材の食材名、及び庫内から取り出された食材の食材名を特定するのではなく、庫内に載置されている全ての食材の食材名を特定してもよい。また、格納位置特定部１０６は、庫内に新たに載置された食材の格納位置、及び庫内から取り出された食材の格納位置を特定するのではなく、庫内に載置されている全ての食材の格納位置を特定してもよい。そして、在庫情報記憶部１０３は、食材名特定部１０５によって特定された全ての食材の食材名と、格納位置特定部１０６によって特定された全ての食材の格納位置とを関連付けた在庫情報を記憶する。これにより、在庫情報記憶部１０３に記憶されている在庫情報が更新されることになる。

図６は、本実施の形態１における食材位置提示システムの特定の食材を照明する動作について説明するためのフローチャートである。

まず、ステップＳ２１において、冷蔵庫２の扉開閉検知部２０１は、冷蔵庫２の前面に設けられた扉が開けられたことを検知する。

次に、ステップＳ２２において、通信部２０３は、冷蔵庫２の扉が開けられたことを示す扉開情報をサーバ１へ送信する。

次に、ステップＳ２３において、サーバ１の通信部１０１は、冷蔵庫２によって送信された扉開情報を受信する。

次に、ステップＳ２４において、制御コマンド生成部１０４は、冷蔵庫２内にユーザが使用すべき食材があるか否かを判断する。このとき、制御コマンド生成部１０４は、在庫情報記憶部１０３に記憶されている在庫情報に含まれる食材名で示される食材の使用期限を外部サーバから取得する。そして、制御コマンド生成部１０４は、扉開情報を取得した日付と、外部サーバから取得した使用期限の日付との差分が、所定の閾値以下であるか否かを判断する。制御コマンド生成部１０４は、差分が所定の閾値以下である場合、ユーザが使用すべき食材があると判断し、差分が所定の閾値より大きい場合、ユーザが使用すべき食材がないと判断する。ここで、ユーザが使用すべき食材がないと判断された場合（ステップＳ２４でＮＯ）、処理を終了する。

一方、ユーザが使用すべき食材があると判断された場合（ステップＳ２４でＹＥＳ）、ステップＳ２５において、制御コマンド生成部１０４は、ユーザが使用すべき食材を照明するための制御コマンドを生成する。このとき、制御コマンド生成部１０４は、ユーザが使用すべき食材に対応付けられている位置情報を在庫情報記憶部１０３から取得する。そして、制御コマンド生成部１０４は、冷蔵庫２の機種情報から冷蔵庫２の複数の光源の配置状態を取得し、在庫情報記憶部１０３から取得した位置情報に対応する光源を特定し、特定した光源を点灯させる制御コマンドを生成する。

次に、ステップＳ２６において、通信部１０１は、制御コマンド生成部１０４によって生成された制御コマンドを冷蔵庫２へ送信する。

次に、ステップＳ２７において、冷蔵庫２の通信部２０３は、サーバ１によって送信された制御コマンドを受信する。

次に、ステップＳ２８において、制御部２０４は、通信部２０３によって受信された制御コマンドに基づいて、複数の光源２０５の点灯を制御する。すなわち、制御コマンドは、複数の光源２０５のうち、どの光源を点灯させるかについての情報を含む。制御部２０４は、制御コマンドによって示される光源を点灯させる。なお、制御コマンドは、光源を点灯させる色についての情報を含んでもよい。この場合、制御部２０４は、制御コマンドによって示される光源を、制御コマンドによって示される色で点灯させる。

図７は、本実施の形態１において、使用期限に応じて食材を照明する例について説明するための模式図である。

図７に示すように、冷蔵庫２には、食材７０１と、食材７０２が載置されている。食材７０１は、使用期限まで残り１日であり、食材７０２は、使用期限まで残り６日である。

この場合、制御コマンド生成部１０４は、扉開情報を取得した日付と、取得した使用期限の日付との差分が、第１の閾値以下である食材を特定する。そして、制御コマンド生成部１０４は、特定した第１の閾値以下である食材のうち、差分が、第１の閾値よりも小さい第２の閾値以下である食材を特定する。第１の閾値は、例えば、１週間であり、第２の閾値は、例えば、３日である。そして、制御コマンド生成部１０４は、差分が、第１の閾値以下であり、且つ第２の閾値より大きい食材を第１の色（例えば、緑色）の光で照明し、差分が、第２の閾値以下である食材を第１の色とは異なる第２の色（例えば、赤色）の光で照明する制御コマンドを生成する。

したがって、食材７０１は、使用期限まで残り１日であるので、赤色の光７０３で照明され、食材７０２は、使用期限まで残り６日であるので、緑色の光７０４で照明される。

このように、ユーザは、照明される光の色を確認することで、食材の使用期限を確認することができる。

なお、本実施の形態１では、使用期限に応じて食材を照明しているが、本開示は特にこれに限定されず、優先的に使用すべき食材を照明してもよい。例えば、使用頻度に応じて食材を照明してもよく、使用頻度の少ない食材を照明することで、使用頻度の少ない食材の使用を促すことができる。この場合、食材が取り出されずに載置されている期間が在庫情報記憶部１０３に記憶され、この食材が取り出されずに載置されている期間が所定の閾値以上であるか否かが判断される。

また、例えば、食材を最もおいしく食べることができる日付に応じて食材を照明してもよい。制御コマンド生成部１０４は、扉開情報を取得した日付が、最もおいしく食べることができる日付である食材を特定し、特定した食材を青色の光で照明する制御コマンドを生成する。

また、制御コマンド生成部１０４は、使用期限を過ぎた食材が存在する場合、当該使用期限を過ぎた食材を赤色の点滅する光で照明する制御コマンドを生成してもよい。

また、在庫情報記憶部１０３は、食材が冷蔵庫内に載置された日付を記憶してもよく、制御コマンド生成部１０４は、冷蔵庫内に載置されてから所定の期間を経過した食材を特定し、特定した食材を照明する制御コマンドを生成してもよい。

さらに、本実施の形態１では、使用期限に応じて食材を照明しているが、本開示は特にこれに限定されず、ユーザが作る料理のレシピに応じて食材を照明してもよい。以下、ユーザが作る料理のレシピに応じて食材を照明する本実施の形態１の変形例について説明する。

図８は、本開示の実施の形態１の変形例に係る食材位置提示システムの構成を示す図である。図８に示す食材位置提示システムは、サーバ１、冷蔵庫２及び情報端末４を備える。なお、図８に示す食材位置提示システムにおいて、図１に示す食材位置提示システムと同じ構成については同じ符号を付し、説明を省略する。

情報端末４は、例えば、スマートフォン、タブレット型コンピュータ又はパーソナルコンピュータであり、サーバ１とネットワーク３を介して互いに通信可能に接続される。

情報端末４は、複数の料理のレシピを選択可能に表示する。なお、複数の料理のレシピに関する情報は、サーバ１又はサーバ１とは異なる外部サーバから受信される。また、情報端末４は、表示した複数のレシピに対するユーザの選択を受け付ける。情報端末４は、ユーザによって選択されたレシピを示すレシピ情報をサーバ１へ送信する。

サーバ１の通信部１０１は、情報端末４によって送信されたレシピ情報を受信する。

制御コマンド生成部１０４は、冷蔵庫２から扉開情報を取得した際に、在庫情報に基づいて、ユーザが使用すべき食材を特定し、特定した食材を照明するための制御コマンドを生成する。

ここで、制御コマンド生成部１０４は、扉開情報を取得した際に、在庫情報に含まれる食材情報（食材名）で示される食材の中から、所定の料理に使用される少なくとも１つの食材を特定し、特定した少なくとも１つの食材を照明するための制御コマンドを生成する。通信部１０１は、制御コマンド生成部１０４によって生成された制御コマンドを冷蔵庫２に送信する。

なお、レシピ情報は、当該レシピで使用する少なくとも１つの食材名を含んでもよい。この場合、制御コマンド生成部１０４は、在庫情報に含まれる食材情報（食材名）で示される食材の中から、レシピ情報に含まれる少なくとも１つの食材を特定する。

また、サーバ１は、レシピを識別するレシピ識別情報と、当該レシピに使用される食材とを対応付けて記憶してもよく、レシピ情報は、レシピを識別するレシピ識別情報を含んでもよい。この場合、制御コマンド生成部１０４は、在庫情報に含まれる食材情報（食材名）で示される食材の中から、レシピ情報に含まれるレシピ識別情報に対応付けられる少なくとも１つの食材を特定する。

図９は、本実施の形態１の変形例において、ユーザが作る料理のレシピに応じて食材を照明する例について説明するための模式図である。

図９に示すように、冷蔵庫２には、食材８０１と、食材８０２と、食材８０３とが載置されている。食材８０１〜８０３は、同一の料理のレシピに使用される食材である。

この場合、情報端末４は、ユーザによって選択されたレシピを示すレシピ情報をサーバ１へ送信する。制御コマンド生成部１０４は、レシピ情報を受信した後、扉開情報を取得した際に、在庫情報に含まれる食材情報（食材名）で示される食材の中から、レシピ情報で示されるレシピに使用される少なくとも１つの食材を特定し、特定した少なくとも１つの食材を照明するための制御コマンドを生成する。

食材８０１〜８０３は、同一の料理のレシピに使用される食材であるので、食材８０１〜８０３には、それぞれ同じ色の光８０４，８０５，８０６が照射される
このように、ユーザは、所定の料理を作る際に、照明される食材を確認することで、所定の料理で使用する食材を容易に特定することができる。

なお、本実施の形態１の変形例では、同一の料理のレシピに使用される食材に対して同一の色の光を照射しているが、本開示は特にこれに限定されず、調理手順に応じて点灯させる順番を変更させたり、調理手順に応じて異なる色の光を照射させたりしてもよい。

また、本実施の形態１の冷蔵庫２は、食材の使用期限をユーザに提示するモードと、所定の料理に応じた食材をユーザに提示するモードとのユーザによる選択を受け付け、選択されたモードに切り替えてもよい。

（実施の形態２）
続いて、本開示の実施の形態２における冷蔵庫について説明する。実施の形態２における冷蔵庫は、実施の形態１における食材位置提示システムが備える冷蔵庫２及びサーバ１の機能を有する。

図１０は、本開示の実施の形態２に係る冷蔵庫の構成を示す図である。図１０に示す冷蔵庫２１は、扉開閉検知部２１１、庫内情報取得部２１２、特定部２１３、在庫情報記憶部２１４、制御部２１５及び複数の光源２１６を備える。

扉開閉検知部２１１の構成は、図１に示す扉開閉検知部２０１の構成と同じである。庫内情報取得部２１２の構成は、図１に示す庫内情報取得部２０２の構成と同じである。

特定部２１３は、冷蔵庫２１に載置された食材を特定するとともに、冷蔵庫内における食材の位置を特定する。特定部２１３は、食材名特定部２１７及び格納位置特定部２１８を備える。

食材名特定部２１７は、庫内情報取得部２１２によって取得された撮像画像から食材名を特定する。なお、食材名特定部２１７の構成は、図１に示す食材名特定部１０５の構成と同じである。

格納位置特定部２１８は、庫内情報取得部２１２によって取得された撮像画像に基づいて冷蔵庫２１内における食材の位置を推定することで、食材の位置を特定する。なお、格納位置特定部２１８の構成は、図１に示す格納位置特定部１０６の構成と同じである。

在庫情報記憶部２１４の構成は、図１に示す在庫情報記憶部１０３の構成と同じである。

制御部２１５は、扉開閉検知部２１１によって扉が開かれたことが検知された際に、在庫情報に基づいて、ユーザが使用すべき食材を特定し、特定した食材を照明するように複数の光源２１６の点灯を制御する。

制御部２１５は、ユーザが使用すべき食材を特定し、特定した食材に対応付けられている位置情報を在庫情報記憶部２１４から取得する。制御部２１５は、予め記憶されている冷蔵庫２１の複数の光源２１６の配置状態を取得し、在庫情報記憶部２１４から取得した位置情報に対応する光源を特定し、特定した光源を点灯させる。

図１１は、本実施の形態２における冷蔵庫の在庫情報を記録する動作について説明するためのフローチャートである。

ステップＳ４１〜ステップＳ４４の処理は、図５に示すステップＳ１〜ステップＳ４の処理と同じである。

次に、ステップＳ４５において、食材名特定部２１７は、庫内情報取得部２１２によって取得された撮像画像から、新たに載置された食材の食材名を特定する。なお、新たに載置された食材であるか否かの判断は、今回取得した撮像画像と、前回取得した撮像画像とを比較することにより判断することができる。食材の表面には、カラーコードが付されている。食材名特定部２１７は、撮像画像に含まれるカラーコードを読み取り、読み取ったカラーコード情報に対応付けられている食材名を食材名データベースから取得する。

このとき、食材名特定部２１７は、庫内情報取得部２１２によって取得された撮像画像から、庫内から取り出された食材の食材名を特定してもよい。なお、庫内から取り出された食材であるか否かの判断は、今回取得した撮像画像と、前回取得した撮像画像とを比較することにより判断することができる。

次に、ステップＳ４６において、格納位置特定部２１８は、庫内情報取得部２１２によって取得された撮像画像に基づいて、冷蔵庫２１内に新たに載置された食材の格納位置を特定する。１つの棚を少なくとも２つのカメラにより撮像することにより、冷蔵庫２１内のどの位置に食材が存在するかを概ね推定することができる。

このとき、格納位置特定部２１８は、庫内情報取得部２１２によって取得された撮像画像に基づいて、庫内から取り出された食材の格納位置を推定することで、食材の位置を特定してもよい。

ステップＳ４７の処理は、図５に示すステップＳ９の処理と同じである。

なお、食材名特定部２１７は、庫内に新たに載置された食材の食材名、及び庫内から取り出された食材の食材名を特定するのではなく、庫内に載置されている全ての食材の食材名を特定してもよい。また、格納位置特定部２１８は、庫内に新たに載置された食材の格納位置、及び庫内から取り出された食材の格納位置を特定するのではなく、庫内に載置されている全ての食材の格納位置を特定してもよい。そして、在庫情報記憶部２１４は、食材名特定部２１７によって特定された全ての食材の食材名と、格納位置特定部２１８によって特定された全ての食材の格納位置とを関連付けた在庫情報を記憶する。これにより、在庫情報記憶部２１４に記憶されている在庫情報が更新されることになる。

図１２は、本実施の形態２における冷蔵庫の特定の食材を照明する動作について説明するためのフローチャートである。

ステップＳ５１の処理は、図６に示すステップＳ２１の処理と同じである。

次に、ステップＳ５２において、制御部２１５は、冷蔵庫２１内にユーザが使用すべき食材があるか否かを判断する。このとき、制御部２１５は、在庫情報記憶部２１４に記憶されている在庫情報に含まれる食材名で示される食材の使用期限を外部サーバから取得する。そして、制御部２１５は、扉開情報を取得した日付と、外部サーバから取得した使用期限の日付との差分が、所定の閾値以下であるか否かを判断する。制御部２１５は、差分が所定の閾値以下である場合、ユーザが使用すべき食材があると判断し、差分が所定の閾値より大きい場合、ユーザが使用すべき食材がないと判断する。ここで、ユーザが使用すべき食材がないと判断された場合（ステップＳ５２でＮＯ）、処理を終了する。

一方、ユーザが使用すべき食材があると判断された場合（ステップＳ５２でＹＥＳ）、ステップＳ５３において、制御部２１５は、ユーザが使用すべき食材を照明するために、複数の光源２１６の点灯を制御する。このとき、制御部２１５は、ユーザが使用すべき食材に対応付けられている位置情報を在庫情報記憶部２１４から取得する。そして、制御部２１５は、冷蔵庫２１の複数の光源２１６の配置状態を取得し、在庫情報記憶部２１４から取得した位置情報に対応する光源を特定し、特定した光源を点灯させる。

本開示に係る食材位置提示方法及び冷蔵庫は、冷蔵庫内の食材に対して即座に対処することができ、食材を無駄なく利用することができ、冷蔵庫内の食材の位置を提示する食材位置提示方法及び冷蔵庫として有用である。

１ サーバ
２，２１ 冷蔵庫
３ ネットワーク
４ 情報端末
１０１ 通信部
１０２ 特定部
１０３ 在庫情報記憶部
１０４ 制御コマンド生成部
１０５ 食材名特定部
１０６ 格納位置特定部
２０１ 扉開閉検知部
２０２ 庫内情報取得部
２０３ 通信部
２０４ 制御部
２０５ 複数の光源
２１１ 扉開閉検知部
２１２ 庫内情報取得部
２１３ 特定部
２１４ 在庫情報記憶部
２１５ 制御部
２１６ 複数の光源
２１７ 食材名特定部
２１８ 格納位置特定部

Claims (15)

1. コンピュータを用いた食材位置提示方法であって、
   冷蔵庫内に設けられた載置部に複数の食材が載置されている際に、前記複数の食材を特定し、かつ、前記複数の食材のそれぞれが前記載置部に含まれる複数の領域のうちのいずれの上に載置されているかを特定し、
   特定された前記複数の食材に関する食材情報と、前記複数の食材のそれぞれが前記複数の領域のうちのいずれの上に載置されているかを示す位置情報とを対応付けた在庫情報を記憶し、
   前記冷蔵庫の扉が開かれたことを示す扉開情報を取得し、
   前記扉開情報を取得した際に、前記在庫情報に基づいて、前記複数の食材の中からユーザが使用すべき食材を特定し、前記複数の領域のうち特定した前記ユーザが使用すべき食材が載置されている領域を前記冷蔵庫内に設けられた１以上の光源によって照明させるための制御コマンドを生成し、
   生成した前記制御コマンドを前記冷蔵庫に送信する、
   食材位置提示方法。
2. 前記扉開情報を取得した際に、前記在庫情報に含まれる前記食材情報で示される食材の使用期限を取得し、
   前記扉開情報を取得した日付と、取得した前記使用期限の日付との差分が、所定の閾値以下である食材を特定し、特定した前記食材を照明するための制御コマンドを生成する、
   請求項１記載の食材位置提示方法。
3. 前記制御コマンドは、特定した前記食材を、前記差分に応じた異なる色の光によって照明するためのコマンドを含む、
   請求項２記載の食材位置提示方法。
4. 前記扉開情報を取得した際に、前記在庫情報に含まれる前記食材情報で示される食材の中から、所定の料理に使用される少なくとも１つの食材を特定し、特定した前記少なくとも１つの食材を照明するための制御コマンドを生成する、
   請求項１記載の食材位置提示方法。
5. 前記制御コマンドは、特定した前記食材の位置を他の食材の位置と異なる色の光で照射するように前記冷蔵庫内に備えられた光源を制御するコマンドを含む、
   請求項１〜４のいずれか１項に記載の食材位置提示方法。
6. 前記冷蔵庫内に備えられた撮像装置によって撮像された庫内の画像を取得し、
   取得された前記画像に基づいて前記食材の位置を推定することで、前記食材の位置を特定する、
   請求項１〜５のいずれか１項に記載の食材位置提示方法。
7. 前記冷蔵庫内に入れられる前記食材が撮像装置によって撮影され、撮影された前記冷蔵庫内に入れられる前記食材の軌道から前記冷蔵庫内における前記食材の位置を推定することで、前記食材の位置を特定する、
   請求項１〜５のいずれか１項に記載の食材位置提示方法。
8. 前記冷蔵庫内の前記食材が載置される載置部に設けられた重量センサによって検出された重量データに基づいて前記食材の位置を推定することで、前記食材の位置を特定する、
   請求項１〜５のいずれか１項に記載の食材位置提示方法。
9. 前記食材に付されたバーコード、カラーコード又は二次元コードが読取装置で読み取られることによって前記食材を特定する、
   請求項１〜８のいずれか１項に記載の食材位置提示方法。
10. 前記食材に付されたＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｅｒ）タグに記憶されている前記食材に関する情報が、前記冷蔵庫に備えられたＲＦＩＤリーダで読み取られることによって前記食材を特定する、
    請求項１〜８のいずれか１項に記載の食材位置提示方法。
11. 前記複数の領域は、前記載置部が格子状に分割された領域である、
    請求項１〜１０のいずれか１項に記載の食材位置提示方法。
12. 前記制御コマンドは、前記複数の食材のうち前記ユーザが使用すべき食材以外の食材が載置されている領域を照明させない制御を含む、
    請求項１〜１１のいずれか１項に記載の食材位置提示方法。
13. 前記載置部は板状である、
    請求項１〜１２のいずれか１項に記載の食材位置提示方法。
14. 前記位置情報は前記冷蔵庫内における前記複数の食材の座標位置を示し、
    前記ユーザが使用すべき食材が載置されている領域は、前記座標位置に基づいて特定される、
    請求項１〜１３のいずれか１項に記載の食材位置提示方法。
15. 冷蔵庫内に設けられた載置部に複数の食材が載置されている際に、前記複数の食材を特定し、かつ、前記複数の食材のそれぞれが前記載置部に含まれる複数の領域のうちのいずれの上に載置されているかを特定する特定部と、
    前記特定部によって特定された前記複数の食材に関する食材情報と、前記複数の食材のそれぞれが前記複数の領域のうちのいずれの上に載置されているかを示す位置情報とを対応付けた在庫情報を記憶する記憶部と、
    前記冷蔵庫の扉が開かれたことを検知する扉開検知部と、
    光を照射する１以上の光源と、
    前記扉開検知部によって前記扉が開かれたことが検知された際に、前記在庫情報に基づいて、前記複数の食材の中からユーザが使用すべき食材を特定し、前記複数の領域のうち特定した前記ユーザが使用すべき食材が載置されている領域を照明するように前記１以上の光源の点灯を制御する制御部と、
    を備える冷蔵庫。

Images