Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6910113B2 - refrigerator - Google Patents
[go: Go Back, main page]

JP6910113B2 - refrigerator - Google Patents

refrigerator Download PDF

Info

Publication number
JP6910113B2
JP6910113B2 JP2016142002A JP2016142002A JP6910113B2 JP 6910113 B2 JP6910113 B2 JP 6910113B2 JP 2016142002 A JP2016142002 A JP 2016142002A JP 2016142002 A JP2016142002 A JP 2016142002A JP 6910113 B2 JP6910113 B2 JP 6910113B2
Authority
JP
Japan
Prior art keywords
refrigerator
door
temperature
controller
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016142002A
Other languages
Japanese (ja)
Other versions
JP2018013273A (en
Inventor
伊藤 敬
敬 伊藤
毅 内田
毅 内田
誠 岡部
誠 岡部
康成 大和
康成 大和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2016142002A priority Critical patent/JP6910113B2/en
Publication of JP2018013273A publication Critical patent/JP2018013273A/en
Application granted granted Critical
Publication of JP6910113B2 publication Critical patent/JP6910113B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Studio Devices (AREA)

Description

本発明は、冷蔵庫に関し、特に庫内の画像を撮像することのできる冷蔵庫に関する。 The present invention relates to a refrigerator, and more particularly to a refrigerator capable of capturing an image of the inside of the refrigerator.

従来から、撮像部で撮像された画像により庫内の収納状況を把握することのできる冷蔵庫及び冷蔵庫システムがある。このような冷蔵庫及び冷蔵庫システムでは、撮像部のレンズがくもると、鮮明な画像を取得することができなくなる。
このため、例えば、特許文献1には、庫外の温湿度を測定し、この温湿度測定結果に基づいて、露点温度を算出し、撮像部のレンズがこの露点温度以下の場合に、レンズをヒータにより暖めて、それを露点温度以上とすることで、くもりを防止する冷蔵庫が記載されている。
Conventionally, there are refrigerators and refrigerator systems that can grasp the storage status in the refrigerator from the images captured by the imaging unit. In such a refrigerator and a refrigerator system, if the lens of the imaging unit becomes cloudy, it becomes impossible to acquire a clear image.
Therefore, for example, in Patent Document 1, the temperature and humidity outside the refrigerator are measured, the dew point temperature is calculated based on the temperature and humidity measurement results, and when the lens of the imaging unit is below this dew point temperature, the lens is used. A refrigerator that prevents cloudiness by warming it with a heater and raising it above the dew point temperature is described.

また、特許文献2には、冷却運転中に撮像することで、撮像部のレンズの周辺を低温かつ低湿とし、撮像部の結露の解消を促進する冷蔵庫が記載されている。 Further, Patent Document 2 describes a refrigerator in which the periphery of the lens of the image pickup unit is kept at a low temperature and low humidity by taking an image during the cooling operation to promote the elimination of dew condensation on the image pickup unit.

特開2014−163585号公報Japanese Unexamined Patent Publication No. 2014-163585 特開2014−196844号公報Japanese Unexamined Patent Publication No. 2014-196844

特許文献2に記載された冷蔵庫では、レンズのくもり防止として、冷却運転中に撮像している。しかしながら、レンズに向けて冷気を集中させると、撮像部の周辺の食品を過度に冷却してしまい、例えば、冷蔵食品が凍結する、又は、食品が乾燥する等、保存品質を悪化させる可能性がある。また、レンズに向けて冷気を集中させることで、冷蔵庫内の他の領域に冷気が行き届かず、庫内の温度分布に極端な差が生じ、例えば、冷蔵庫内の一部空間において設定温度より保存温度が高まる等、食品の保存品質を悪化させてしまう可能性がある。 In the refrigerator described in Patent Document 2, an image is taken during the cooling operation to prevent fogging of the lens. However, if the cold air is concentrated toward the lens, the food around the imaging unit is excessively cooled, which may deteriorate the storage quality, for example, the refrigerated food freezes or the food dries. be. In addition, by concentrating the cold air toward the lens, the cold air does not reach other areas in the refrigerator, causing an extreme difference in the temperature distribution inside the refrigerator. For example, in a part of the space inside the refrigerator, the temperature exceeds the set temperature. There is a possibility that the storage quality of food may deteriorate, such as an increase in storage temperature.

本発明は、上記のような問題を解決するためのものであり、撮像部がドアの開閉によりくもった場合においても、鮮明な画像を取得できるようにすることを目的とする。 The present invention is for solving the above-mentioned problems, and an object of the present invention is to enable a clear image to be acquired even when the image pickup unit becomes cloudy due to opening and closing of a door.

本発明の一態様に係る冷蔵庫は、物を冷やす冷蔵庫であって、前記物を収納して冷やす収納室と、前記収納室に前記物を出し入れする際に開閉されるドアと、前記ドアの開閉を検知するセンサと、前記収納室内の画像を撮像する撮像部と、前記撮像部を暖めるヒータと、を備え、前記ドアが閉められたことを前記センサが検知してから、前記冷蔵庫の外の温度及び湿度により定まる露点温度よりも、前記収納室内の温度が低い場合に、前記ヒータを動作させて待機時間を計測し、前記待機時間の経過後に、前記撮像部に前記収納室内の画像を撮像させ、前記ドアが閉められたことを前記センサが検知してから、前記収納室内の温度が前記露点温度以上である場合に、前記待機時間の経過前に、前記撮像部に前記収納室内の画像を撮像させることを特徴とする。 The refrigerator according to one aspect of the present invention is a refrigerator that cools an object, and has a storage chamber for storing and cooling the object, a door that is opened and closed when the object is taken in and out of the storage chamber, and opening and closing of the door. A sensor for detecting the temperature, an image pickup unit for capturing an image in the storage room, and a heater for warming the image pickup unit are provided, and after the sensor detects that the door is closed, the outside of the refrigerator is provided. than determined dew point temperature by the temperature and humidity, if the temperature of the storage chamber is low, pre-Symbol to measure the waiting time by operating the heater, after the elapse of the waiting time, the image of the storage chamber to the imaging unit it is captured, that the door is closed after detecting said sensor, when the temperature of the storage chamber is the dew point temperature or higher, prior to the expiration of the previous SL standby time, the storage chamber to the imaging unit It is characterized in that the image of is taken.

本発明の一態様によれば、ドアを閉じてから待機時間経過後に撮像するため、撮像部がドア開閉によりくもった場合においても、鮮明な画像を取得することができる。 According to one aspect of the present invention, since the image is taken after the waiting time elapses after the door is closed, a clear image can be obtained even when the imaging unit becomes cloudy due to the opening and closing of the door.

実施の形態1〜8に係る冷蔵庫の正面図である。It is a front view of the refrigerator which concerns on Embodiments 1-8. 実施の形態1〜6及び実施の形態8に係る冷蔵庫の断面図である。It is sectional drawing of the refrigerator which concerns on Embodiment 1-6 and Embodiment 8. 実施の形態1〜8における冷蔵庫での撮像処理を制御する制御部の構成を示す概略図である。It is the schematic which shows the structure of the control part which controls the imaging process in a refrigerator in Embodiments 1-8. (A)及び(B)は、実施の形態1〜8における制御部のハードウェア構成例を示す概略図である。(A) and (B) are schematic views showing a hardware configuration example of the control unit in the first to eighth embodiments. 実施の形態1において、開閉センサを使用した撮像動作を示すフローチャートである。FIG. 5 is a flowchart showing an imaging operation using an open / close sensor in the first embodiment. 実施の形態2において、開閉センサを使用した撮像動作を示すフローチャートである。FIG. 5 is a flowchart showing an imaging operation using an open / close sensor in the second embodiment. 実施の形態3において、開閉センサを使用した撮像動作を示すフローチャートである。FIG. 3 is a flowchart showing an imaging operation using an open / close sensor in the third embodiment. 実施の形態4において、開閉センサを使用した撮像動作を示すフローチャートである。FIG. 5 is a flowchart showing an imaging operation using an open / close sensor in the fourth embodiment. 実施の形態5において、開閉センサを使用した撮像動作を示すフローチャートである。FIG. 5 is a flowchart showing an imaging operation using an open / close sensor in the fifth embodiment. 実施の形態5におけるくもり解消時間と推定結露量との関係を示す概略図である。It is the schematic which shows the relationship between the cloudiness elimination time and the estimated dew condensation amount in Embodiment 5. 実施の形態5におけるくもり解消時間と含有水蒸気量との関係を示す概略図である。It is a schematic diagram which shows the relationship between the cloudiness elimination time and the amount of water vapor contained in Embodiment 5. 実施の形態6において、開閉センサを使用した撮像動作を示すフローチャートである。6 is a flowchart showing an imaging operation using an open / close sensor in the sixth embodiment. 実施の形態7における開閉ドアを閉じた状態における庫内側の正面図である。FIG. 5 is a front view of the inside of the refrigerator in a state where the opening / closing door in the seventh embodiment is closed. 実施の形態7における冷蔵室の断面図である。It is sectional drawing of the refrigerating chamber in Embodiment 7. FIG. 実施の形態7において、開閉センサを使用した撮像動作を示すフローチャートである。FIG. 7 is a flowchart showing an imaging operation using an open / close sensor in the seventh embodiment. 実施の形態6において、開閉センサを使用した撮像動作を示すフローチャートである。6 is a flowchart showing an imaging operation using an open / close sensor in the sixth embodiment.

実施の形態1.
図1は、実施の形態1に係る冷蔵庫100の正面図である。
冷蔵庫100は、中に収納された物を冷やす。冷蔵庫100は、物を収納して冷やす収納室として、冷蔵室110と、切替室120と、製氷室130と、冷凍室140と、野菜室150とを備える。
冷蔵室110は、冷蔵庫100の最上部に配置されており、中に入れられた物を出し入れする際に開閉されるドアである開閉ドア111を備えている。開閉ドア111には、各室の温度設定等を操作することを目的とし、各室の温度等を表示する液晶表示部及び入力部等から構成される操作部112が備えられている。
切替室120は、冷蔵室110の下方に配置されており、内部の温度を冷凍温度帯(−18℃)又はソフト冷凍(−7℃)の温度帯に切り替えることができる。切替室120は、引き出しドア121を備えている。
Embodiment 1.
FIG. 1 is a front view of the refrigerator 100 according to the first embodiment.
Refrigerator 100 cools the things stored inside. The refrigerator 100 includes a refrigerating room 110, a switching room 120, an ice making room 130, a freezing room 140, and a vegetable room 150 as storage rooms for storing and cooling things.
The refrigerating chamber 110 is arranged at the uppermost part of the refrigerator 100, and includes an opening / closing door 111 which is a door that is opened / closed when putting in and taking out the things contained therein. The opening / closing door 111 is provided with an operation unit 112 composed of a liquid crystal display unit, an input unit, and the like for displaying the temperature and the like of each room for the purpose of operating the temperature setting and the like of each room.
The switching chamber 120 is arranged below the refrigerating chamber 110, and the internal temperature can be switched to a freezing temperature zone (-18 ° C.) or a soft freezing (-7 ° C.) temperature zone. The switching chamber 120 includes a drawer door 121.

製氷室130は、切替室120と並列に配置されており、引き出しドア131を備えている。
冷凍室140は、切替室120及び製氷室130の下方に配置されており、引き出しドア141を備えている。
野菜室150は、最下部に配置されており、引き出しドア151を備えている。
なお、冷蔵庫100の構成は、以上の構成に限定されない。例えば、切替室120及び製氷室130の少なくとも何れか一方がないもの等、冷蔵庫100の構成は、他の構成であってもよい。
The ice making chamber 130 is arranged in parallel with the switching chamber 120, and includes a drawer door 131.
The freezing chamber 140 is arranged below the switching chamber 120 and the ice making chamber 130, and includes a drawer door 141.
The vegetable compartment 150 is located at the bottom and includes a drawer door 151.
The configuration of the refrigerator 100 is not limited to the above configuration. For example, the configuration of the refrigerator 100 may be another configuration, such as one in which at least one of the switching chamber 120 and the ice making chamber 130 is not provided.

図2は、実施の形態1に係る冷蔵庫100の断面図である。
図2は、図1の2−2線における断面図である。
冷蔵庫100は、断熱材101により囲われている。冷却機102により冷やされた冷気が送風ファン103により送り込まれることで、冷蔵庫100の収納室内は冷却される。温度は、収納室内に設置された温度センサである庫内温度センサ104a〜104dにより検知され、予め設定された温度になるように、図示しないダンパの開度、圧縮機105の出力及び送風ファン103の送風量等が制御される。
FIG. 2 is a cross-sectional view of the refrigerator 100 according to the first embodiment.
FIG. 2 is a cross-sectional view taken along the line 2-2 of FIG.
The refrigerator 100 is surrounded by a heat insulating material 101. The storage chamber of the refrigerator 100 is cooled by sending the cold air cooled by the cooler 102 by the blower fan 103. The temperature is detected by the temperature sensors 104a to 104d inside the refrigerator, which are temperature sensors installed in the storage chamber, and the opening degree of the damper (not shown), the output of the compressor 105, and the blower fan 103 are set so as to reach a preset temperature. The amount of air blown is controlled.

冷蔵室110には、収納空間を区画するために食品棚113が設置され、下部には特定の保存温度に保たれたチルド室114に、食品収納ケース106aが設置されている。なお、食品棚113、チルド室114及び食品収納ケース106aの有無及びレイアウトは、図示の例に限定されない。 A food shelf 113 is installed in the refrigerating chamber 110 to partition the storage space, and a food storage case 106a is installed in the chilled chamber 114 kept at a specific storage temperature at the lower part. The presence / absence and layout of the food shelf 113, the chilled chamber 114, and the food storage case 106a are not limited to the illustrated examples.

製氷室130、冷凍室140及び野菜室150のそれぞれにも、食品収納ケース106b〜106dのそれぞれが設けられている。 Each of the ice making chamber 130, the freezing chamber 140, and the vegetable compartment 150 is also provided with food storage cases 106b to 106d.

各収納室110〜150のドア111、113〜151には、ドア111、113〜151の開閉を検知するセンサである開閉センサ107a〜107dが設置されている。
また、冷蔵室110には、開閉センサ107aに加え天井部に照明115が設置されている。ユーザが食品等の収納のために開閉ドア111を開くと、開閉センサ107aがドア開動作を検知し、照明115が点灯される。
Doors 111, 113 to 151 of the storage chambers 110 to 150 are provided with open / close sensors 107a to 107d, which are sensors for detecting the opening and closing of the doors 111, 113 to 151.
Further, in the refrigerator compartment 110, in addition to the open / close sensor 107a, a lighting 115 is installed on the ceiling. When the user opens the open / close door 111 for storing food or the like, the open / close sensor 107a detects the door opening operation and the light 115 is turned on.

開閉ドア111には、食品収納用にポケット116が設けられている。
また、開閉ドア111には、冷蔵室110内の画像を撮像する撮像部としての画像取得部117が、冷蔵室110の奥行き方向の画像を撮像するように設置されている。なお、実施の形態1では、庫内画像の撮像範囲を拡大するため、庫内に2つの画像取得部117が設置されているが、例えば、1つの画像取得部117が設置されていてもよく、また、3以上の画像取得部117が設置されていてもよい。
さらに、開閉ドア111には庫内の温度を検知する庫内温度センサ104aと、庫内の湿度を検知する庫内湿度センサ118とが備えられている。
また、開閉ドア111には、庫外の温度を検知する庫外温度センサ108と庫外の湿度を検知する庫外湿度センサ109とが備えられている。
The opening / closing door 111 is provided with a pocket 116 for storing food.
Further, the opening / closing door 111 is provided with an image acquisition unit 117 as an image capturing unit for capturing an image in the refrigerating chamber 110 so as to capture an image in the depth direction of the refrigerating chamber 110. In the first embodiment, two image acquisition units 117 are installed in the refrigerator in order to expand the imaging range of the image in the refrigerator. For example, one image acquisition unit 117 may be installed. In addition, three or more image acquisition units 117 may be installed.
Further, the opening / closing door 111 is provided with an internal temperature sensor 104a for detecting the temperature inside the refrigerator and an internal humidity sensor 118 for detecting the humidity inside the refrigerator.
Further, the opening / closing door 111 is provided with an outside temperature sensor 108 for detecting the temperature outside the refrigerator and an outside humidity sensor 109 for detecting the humidity outside the refrigerator.

図3は、冷蔵庫100での撮像処理を制御する制御部160の構成を示す概略図である。
制御部160は、コントローラ161と、画像保存部162と、画像加工部163とを備える。
FIG. 3 is a schematic view showing the configuration of the control unit 160 that controls the imaging process in the refrigerator 100.
The control unit 160 includes a controller 161, an image storage unit 162, and an image processing unit 163.

コントローラ161は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。この際、コントローラ161は、開閉センサ107aがドアの閉動作を検知してから待機時間が経過した後に、画像取得部117に撮像を指示する。このため、画像取得部117は、開閉ドア111が閉められたことを開閉センサ107aが検知してから待機時間が経過した後に、冷蔵室110内の画像を撮像する。実施の形態1においては、待機時間は、予め定められた一定の時間である。
なお、コントローラ161は、画像取得部117を暖めるヒータ171を制御することもできる。
When the open / close sensor 107a detects the closing operation of the door, the controller 161 instructs the image acquisition unit 117 to take an image. At this time, the controller 161 instructs the image acquisition unit 117 to take an image after the waiting time has elapsed since the opening / closing sensor 107a detects the closing operation of the door. Therefore, the image acquisition unit 117 captures an image in the refrigerating chamber 110 after a waiting time has elapsed after the opening / closing sensor 107a detects that the opening / closing door 111 has been closed. In the first embodiment, the waiting time is a predetermined fixed time.
The controller 161 can also control the heater 171 that warms the image acquisition unit 117.

画像保存部162は、画像取得部117で取得された画像データを一時的に保存する。
画像加工部163は、一度の撮像時に複数枚の画像データが生じた場合に、複数の画像データで表される複数の画像をまとめて1つの画像とした画像データを生成する。画像加工部163にて加工された1つの画像データは、操作部112で表示される他、NFC(Near Field Communication)等に対応したデータ通信部170を介して、スマートフォン及びタブレット等の画像表示端末180に送られて、表示される。また、画像データは、無線ランの規格に対応したデータ通信部170を介してルータ181から、インターネット182に送信されることで、サーバ装置183で受信される。サーバ装置183は、受信された画像データを保存することが可能な他、画像表示端末180に送り、表示させることが可能である。
The image storage unit 162 temporarily stores the image data acquired by the image acquisition unit 117.
When a plurality of image data are generated at the time of one imaging, the image processing unit 163 generates image data in which a plurality of images represented by the plurality of image data are combined into one image. One image data processed by the image processing unit 163 is displayed by the operation unit 112, and is also displayed by an image display terminal such as a smartphone or tablet via a data communication unit 170 corresponding to NFC (Near Field Communication) or the like. It is sent to 180 and displayed. Further, the image data is transmitted from the router 181 to the Internet 182 via the data communication unit 170 corresponding to the wireless LAN standard, and is received by the server device 183. The server device 183 can store the received image data, and can also send the received image data to the image display terminal 180 for display.

そのため、ユーザは、冷蔵庫100の前に立ち、開閉ドア111を開けている場合と同様の庫内画像を、操作部112及び画像表示端末180にて確認することができる。これにより、開閉ドア111を開けることなく、また冷蔵庫100から離れた場所においても冷蔵室110内の収納状況を把握することができる。 Therefore, the user can confirm the image in the refrigerator similar to the case where the user stands in front of the refrigerator 100 and opens the opening / closing door 111 on the operation unit 112 and the image display terminal 180. As a result, the storage status in the refrigerator compartment 110 can be grasped without opening the opening / closing door 111 and even at a place away from the refrigerator 100.

なお、実施の形態1に係る冷蔵庫100は、図3に記載された構成の内、庫内温度センサ104a〜104d、庫内湿度センサ118、庫外温度センサ108、庫外湿度センサ109及びヒータ171を備えていなくてもよい。 The refrigerator 100 according to the first embodiment has the internal temperature sensors 104a to 104d, the internal humidity sensor 118, the external temperature sensor 108, the external humidity sensor 109, and the heater 171 among the configurations shown in FIG. It does not have to be provided.

以上に記載された制御部160の一部又は全部は、例えば、図4(A)に示されているように、メモリ190と、メモリ190に格納されているプログラムを実行するCPU(Central Processing Unit)等のプロセッサ191とにより構成することができる。このようなプログラムは、ネットワークを通じて提供されてもよく、また、記録媒体に記録されて提供されてもよい。 A part or all of the control unit 160 described above includes, for example, a memory 190 and a CPU (Central Processing Unit) that executes a program stored in the memory 190, as shown in FIG. 4 (A). ) And other processors 191. Such a program may be provided through a network, or may be recorded and provided on a recording medium.

また、制御部160の一部又は全部は、例えば、図4(B)に示されているように、単一回路、復号回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuits)又はFPGA(Field Programmable Gate Array)等の処理回路192で構成することもできる。 Further, as shown in FIG. 4B, for example, a part or all of the control unit 160 includes a single circuit, a decoding circuit, a programmed processor, a parallel programmed processor, and an ASIC (Application Specific Integrated). It can also be configured by a processing circuit 192 such as a Circuits) or an FPGA (Field Processor Gate Array).

図5は、実施の形態1において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
まず、開閉センサ107aがドア開動作を検知した場合(S10)、コントローラ161は、庫内の照明115を点灯する(S11)。
FIG. 5 is a flowchart showing an imaging operation using the open / close sensor 107a in the first embodiment.
First, when the open / close sensor 107a detects the door opening operation (S10), the controller 161 turns on the lighting 115 in the refrigerator (S11).

その後、開閉センサ107aがドア閉動作を検知した場合(S12)、コントローラ161は、予め定められた待機時間待機して(S13)、待機時間が経過したことを合図に、画像取得部117に庫内の撮像を行わせる(S14)。 After that, when the open / close sensor 107a detects the door closing operation (S12), the controller 161 waits for a predetermined waiting time (S13), and signals that the waiting time has elapsed, and stores the image acquisition unit 117. The inside is imaged (S14).

その後、コントローラ161は、画像取得部117による撮像完了を検知した場合(S15)、庫内の照明115を消灯する(S16)。 After that, when the controller 161 detects that the image acquisition unit 117 has completed imaging (S15), the controller 161 turns off the lighting 115 in the refrigerator (S16).

実施の形態1によれば、開閉センサ107aがドア閉を検知するたびに、庫内の撮像を実施することで、ユーザは、常に最新の画像を確認することが可能となる。
また、ドア閉後から撮像終了までを照明115の点灯期間とすることで、庫内の鮮明な画像を撮像すると共に、照明点灯時間の抑制による省エネ効果を得ることができる。なお、コントローラ161は、ドア閉で一旦照明115を消灯し、待機時間経過時に、再び点灯して、撮像を行ってもよい。
加えて、実施の形態1では、開閉センサ107aにより開閉ドア111の閉動作を検知後、待機時間待機した後に撮像が行われている。このため、庫内で冷却されていた画像取得部117が、庫外空気における露点温度以下の状態において、ドア開時に庫外空気内に露出することで、画像取得部117にくもりが生じてしまった場合においても、庫内の低温かつ低湿の空気に触れて、くもりが解消されるまでの時間を確保することができる。従って、確実にくもりが解消された状態で撮像を実施することができるため、鮮明な画像を取得することができる。
According to the first embodiment, each time the open / close sensor 107a detects that the door is closed, the inside of the refrigerator is imaged, so that the user can always check the latest image.
Further, by setting the lighting period of the lighting 115 from the closing of the door to the end of the imaging, it is possible to capture a clear image of the inside of the refrigerator and obtain an energy saving effect by suppressing the lighting lighting time. The controller 161 may turn off the illumination 115 once when the door is closed, and then turn it on again when the standby time elapses to perform imaging.
In addition, in the first embodiment, the opening / closing sensor 107a detects the closing operation of the opening / closing door 111, waits for a waiting time, and then performs imaging. For this reason, the image acquisition unit 117 that has been cooled in the refrigerator is exposed to the air outside the refrigerator when the door is opened in a state of being below the dew point temperature in the air outside the refrigerator, and the image acquisition unit 117 becomes cloudy. Even in such a case, it is possible to secure a time until the cloudiness is cleared by touching the low-temperature and low-humidity air in the refrigerator. Therefore, since the imaging can be performed in a state where the cloudiness is surely eliminated, a clear image can be acquired.

実施の形態2
図1及び図2に示されているように、実施の形態2に係る冷蔵庫200は、実施の形態1に係る冷蔵庫100とほぼ同様に構成されている。
図3に示されているように、実施の形態2に係る冷蔵庫200における制御部260は、コントローラ261と、画像保存部162と、画像加工部163とを備える。
実施の形態2における制御部260の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
Embodiment 2
As shown in FIGS. 1 and 2, the refrigerator 200 according to the second embodiment is configured in substantially the same manner as the refrigerator 100 according to the first embodiment.
As shown in FIG. 3, the control unit 260 in the refrigerator 200 according to the second embodiment includes a controller 261, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 260 in the second embodiment are the same as the control unit 160 in the first embodiment.

コントローラ261は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。この際、コントローラ261は、開閉センサ107aを用いて計測された、開閉ドア111が開かれてから閉じられるまでの間の時間である開時間に応じて、待機時間を変更する。例えば、コントローラ261は、開時間が長いほど、待機時間が長くなるように、待機時間を決定する。但し、コントローラ261には、待機時間の最大値が予め定められており、開時間が予め定められた閾値以上となった場合には、待機時間としてその最大値が用いられる。一例として、コントローラ261は、開時間の範囲毎に、対応する待機時間を定めたテーブル情報を用いることにより、開時間に対応する待機時間を決定することができる。 When the open / close sensor 107a detects the closing operation of the door, the controller 261 instructs the image acquisition unit 117 to take an image. At this time, the controller 261 changes the standby time according to the opening time, which is the time between the opening and closing of the opening / closing door 111, which is measured by using the opening / closing sensor 107a. For example, the controller 261 determines the waiting time so that the longer the opening time, the longer the waiting time. However, the controller 261 has a predetermined maximum value of the waiting time, and when the opening time exceeds a predetermined threshold value, the maximum value is used as the waiting time. As an example, the controller 261 can determine the waiting time corresponding to the opening time by using the table information in which the corresponding waiting time is determined for each range of the opening time.

なお、実施の形態2に係る冷蔵庫200は、図3に記載された構成の内、庫内温度センサ104a〜104d、庫内湿度センサ118、庫外温度センサ108、庫外湿度センサ109及びヒータ171を備えていなくてもよい。 The refrigerator 200 according to the second embodiment has the internal temperature sensors 104a to 104d, the internal humidity sensor 118, the external temperature sensor 108, the external humidity sensor 109, and the heater 171 among the configurations shown in FIG. It does not have to be provided.

図6は、実施の形態2において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態1と同様だが、ドアの閉動作を検知してから撮像が行われるまでの待機時間が、ドアの開時間に応じて変更される点が異なる。
FIG. 6 is a flowchart showing an imaging operation using the open / close sensor 107a in the second embodiment.
The basic processing flow is the same as that of the first embodiment, except that the waiting time from detecting the closing operation of the door to performing the imaging is changed according to the opening time of the door.

まず、開閉センサ107aがドア開動作を検知した場合(S20)、コントローラ261は、庫内の照明115を点灯するとともに(S21)、開時間の計時を開始する。
その後、開閉センサ107aがドア閉動作を検知した場合(S22)、コントローラ261は、開時間の計時を終了して、ドア開動作からドア閉動作までの開閉ドア111の開時間を特定する(S23)。
First, when the open / close sensor 107a detects the door opening operation (S20), the controller 261 turns on the lighting 115 in the refrigerator (S21) and starts timing the opening time.
After that, when the open / close sensor 107a detects the door closing operation (S22), the controller 261 ends the time counting of the opening time and specifies the opening time of the opening / closing door 111 from the door opening operation to the door closing operation (S23). ).

そして、コントローラ261は、開閉ドア111の開時間に基づいて、待機時間を決定し(S24)、決定された待機時間待機する(S25)。そして、待機時間が経過したことを合図に、コントローラ261は、画像取得部117に庫内の撮像を行わせる(S26)。
その後、コントローラ261は、画像取得部117による撮像完了を検知した場合(S27)、庫内の照明115を消灯する(S28)。
Then, the controller 261 determines the waiting time based on the opening time of the opening / closing door 111 (S24), and waits for the determined waiting time (S25). Then, on the signal that the waiting time has elapsed, the controller 261 causes the image acquisition unit 117 to take an image of the inside of the refrigerator (S26).
After that, when the controller 261 detects that the image acquisition unit 117 has completed imaging (S27), the controller 261 turns off the lighting 115 in the refrigerator (S28).

開閉ドア111の開時間からドア閉動作後の画像取得部117の周辺空気の含有水蒸気量は予測可能である。例えば、ドアの開放時間が長い場合は、庫内に庫外の高温かつ高湿な空気が入り込み、ドア閉後の画像取得部117の周辺空気の含有水蒸気量が多くなる。このため、画像取得部117についた結露が乾きにくくなり、くもりが解消されるまでの時間も長くなることが予想できる。また、開閉ドア111の開時間が短ければ含有水蒸気量が少なくなるため、画像取得部117についた結露が乾きやすく、くもりが解消されるまでの時間が短くなることが予想される。
このため、実施の形態2では、コントローラ261は、ドアの開時間が長い場合は、待機時間を長く設定することで、より正確にくもりを解消することができ、撮像品質を高めることができる。また、ドアの開時間が短い場合は、コントローラ261は、待機時間を短く設定することで、ユーザがドア閉後から最新の画像を確認可能となるまでの時間を短縮することができる。
From the opening time of the opening / closing door 111, the amount of water vapor contained in the ambient air of the image acquisition unit 117 after the door closing operation can be predicted. For example, when the door opening time is long, high-temperature and high-humidity air outside the refrigerator enters the refrigerator, and the amount of water vapor contained in the ambient air of the image acquisition unit 117 after the door is closed increases. For this reason, it can be expected that the dew condensation on the image acquisition unit 117 will not dry easily, and the time until the cloudiness will disappear will be long. Further, if the opening time of the opening / closing door 111 is short, the amount of water vapor contained is small, so that the dew condensation on the image acquisition unit 117 is likely to dry, and it is expected that the time until the cloudiness is cleared is shortened.
Therefore, in the second embodiment, when the door opening time is long, the controller 261 can more accurately eliminate the cloudiness by setting the waiting time longer, and can improve the imaging quality. Further, when the door opening time is short, the controller 261 can shorten the time from when the door is closed until the user can check the latest image by setting the waiting time to be short.

また、待機時間を開閉センサ107から得られるドアの開時間を基に設定することで、撮像動作自体に関連しない部品を追加することなく、撮像品質を高めることができる。 Further, by setting the standby time based on the opening time of the door obtained from the open / close sensor 107, the imaging quality can be improved without adding parts not related to the imaging operation itself.

実施の形態3
図1及び図2に示されているように、実施の形態3に係る冷蔵庫300は、実施の形態1に係る冷蔵庫100とほぼ同様に構成されている。
図3に示されているように、実施の形態3に係る冷蔵庫300における制御部360は、コントローラ361と、画像保存部162と、画像加工部163とを備える。
実施の形態3における制御部360の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
Embodiment 3
As shown in FIGS. 1 and 2, the refrigerator 300 according to the third embodiment is configured in substantially the same manner as the refrigerator 100 according to the first embodiment.
As shown in FIG. 3, the control unit 360 in the refrigerator 300 according to the third embodiment includes a controller 361, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 360 in the third embodiment are the same as the control unit 160 in the first embodiment.

コントローラ361は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。この際、コントローラ361は、庫外温度センサ108から、冷蔵庫300の外の温度である庫外温度を取得して、この庫外温度に応じて、待機時間を変更する。例えば、コントローラ361は、庫外温度が高いほど、待機時間が長くなるように待機時間を決定する。但し、コントローラ361には、待機時間の最大値が予め定められており、庫外温度が予め定められた閾値以上となった場合には、待機時間としてその最大値が用いられる。一例として、コントローラ361は、庫外温度の範囲毎に、対応する待機時間を定めたテーブル情報を用いることにより、庫外温度に対応する待機時間を決定することができる。 When the open / close sensor 107a detects the closing operation of the door, the controller 361 instructs the image acquisition unit 117 to take an image. At this time, the controller 361 acquires the outside temperature, which is the temperature outside the refrigerator 300, from the outside temperature sensor 108, and changes the standby time according to the outside temperature. For example, the controller 361 determines the standby time so that the higher the outside temperature, the longer the standby time. However, the controller 361 has a predetermined maximum value of the standby time, and when the outside temperature exceeds a predetermined threshold value, the maximum value is used as the standby time. As an example, the controller 361 can determine the standby time corresponding to the outside temperature by using the table information that defines the corresponding standby time for each range of the outside temperature.

なお、実施の形態3に係る冷蔵庫300は、図3に記載された構成の内、庫内温度センサ104a〜104d、庫内湿度センサ118、庫外湿度センサ109及びヒータ171を備えていなくてもよい。 The refrigerator 300 according to the third embodiment does not have the internal temperature sensors 104a to 104d, the internal humidity sensor 118, the external humidity sensor 109, and the heater 171 in the configuration shown in FIG. good.

図7は、実施の形態3において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態1と同様だが、ドアの閉動作を検知してから撮像が行われるまでの待機時間が、庫外温度に応じて変更される点が異なる。
FIG. 7 is a flowchart showing an imaging operation using the open / close sensor 107a in the third embodiment.
The basic processing flow is the same as that of the first embodiment, except that the waiting time from the detection of the door closing operation to the imaging is changed according to the outside temperature.

まず、開閉センサ107aがドア開動作を検知した場合(S30)、コントローラ361は、庫内の照明115を点灯する(S31)。
その後、開閉センサ107aがドア閉動作を検知した場合(S32)、コントローラ361は、庫外温度センサ108から冷蔵庫300の外の温度である庫外温度を取得する(S33)。
First, when the open / close sensor 107a detects the door opening operation (S30), the controller 361 turns on the lighting 115 in the refrigerator (S31).
After that, when the open / close sensor 107a detects the door closing operation (S32), the controller 361 acquires the outside temperature, which is the temperature outside the refrigerator 300, from the outside temperature sensor 108 (S33).

そして、コントローラ361は、庫外温度に基づいて、待機時間を決定し(S34)、決定された待機時間待機する(S35)。そして、待機時間が経過したことを合図に、コントローラ361は、画像取得部117に庫内の撮像を行わせる(S36)。
その後、コントローラ361は、画像取得部117による撮像完了を検知した場合(S37)、庫内の照明115を消灯する(S38)。
Then, the controller 361 determines the standby time based on the outside temperature (S34), and waits for the determined standby time (S35). Then, on the signal that the waiting time has elapsed, the controller 361 causes the image acquisition unit 117 to take an image of the inside of the refrigerator (S36).
After that, when the controller 361 detects that the image acquisition unit 117 has completed imaging (S37), the controller 361 turns off the lighting 115 in the refrigerator (S38).

庫外温度からドア閉動作後の画像取得部117に付着する結露量は予測可能となる。例えば、庫外温度が高い場合は、庫外空気の含有水蒸気量が多くなる。それに対し、冷蔵庫300内の空気の温度は、操作部112によって設定された温度に保たれるように制御されているとともに、密閉空間のため湿度の変動は小さい。そのため、庫内の飽和水蒸気圧は、運転状況による微小な変動しかないと考えられる。つまり、庫外温度が高い場合は、庫外空気の含有水蒸気量と、庫内に設置された画像取得部117周辺空気の飽和水蒸気量との差が大きく、くもりの原因である画像取得部117の結露量が多くなることが予想できる。このため、庫外温度が高い場合には、待機時間を長く設定することで、より正確にくもりを解消することができ、撮像品質を高めることができる。また、庫外温度が低い場合には、待機時間を短く設定することで、ユーザがドア閉後から最新の画像を確認可能となるまでの時間を短縮することができる。 The amount of dew condensation adhering to the image acquisition unit 117 after the door closing operation can be predicted from the outside temperature. For example, when the outside temperature is high, the amount of water vapor contained in the outside air increases. On the other hand, the temperature of the air in the refrigerator 300 is controlled so as to be maintained at the temperature set by the operation unit 112, and the fluctuation of humidity is small because of the closed space. Therefore, it is considered that the saturated water vapor pressure in the refrigerator has only a slight fluctuation depending on the operating conditions. That is, when the outside temperature is high, the difference between the amount of water vapor contained in the outside air and the amount of saturated water vapor in the air around the image acquisition unit 117 installed inside the refrigerator is large, which is the cause of cloudiness. It can be expected that the amount of dew condensation will increase. Therefore, when the outside temperature is high, the cloudiness can be eliminated more accurately and the imaging quality can be improved by setting a long standby time. Further, when the outside temperature is low, the waiting time can be set short to shorten the time from when the user closes the door until the latest image can be confirmed.

実施の形態4
図1及び図2に示されているように、実施の形態4に係る冷蔵庫400は、実施の形態1に係る冷蔵庫100とほぼ同様に構成されている。
図3に示されているように、実施の形態4に係る冷蔵庫400における制御部460は、コントローラ461と、画像保存部162と、画像加工部163とを備える。
実施の形態4における制御部460の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
Embodiment 4
As shown in FIGS. 1 and 2, the refrigerator 400 according to the fourth embodiment is configured in substantially the same manner as the refrigerator 100 according to the first embodiment.
As shown in FIG. 3, the control unit 460 in the refrigerator 400 according to the fourth embodiment includes a controller 461, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 460 in the fourth embodiment are the same as the control unit 160 in the first embodiment.

コントローラ461は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。この際、コントローラ461は、庫外湿度センサ109から、冷蔵庫400の外の湿度である庫外湿度を取得して、この庫外湿度に応じて、待機時間を変更する。例えば、コントローラ461は、庫外湿度が高いほど、待機時間が長くなるように待機時間を決定する。但し、コントローラ461には、待機時間の最大値が予め定められており、庫外湿度が予め定められた閾値以上となった場合には、待機時間としてその最大値が用いられる。一例として、コントローラ461は、庫外湿度の範囲毎に、対応する待機時間を定めたテーブル情報を用いることにより、庫外湿度に対応する待機時間を決定することができる。 When the open / close sensor 107a detects the closing operation of the door, the controller 461 instructs the image acquisition unit 117 to take an image. At this time, the controller 461 acquires the outside humidity, which is the humidity outside the refrigerator 400, from the outside humidity sensor 109, and changes the standby time according to the outside humidity. For example, the controller 461 determines the standby time so that the higher the humidity outside the refrigerator, the longer the standby time. However, the controller 461 has a predetermined maximum value of the standby time, and when the humidity outside the refrigerator exceeds a predetermined threshold value, the maximum value is used as the standby time. As an example, the controller 461 can determine the standby time corresponding to the outside humidity by using the table information that defines the corresponding standby time for each range of the outside humidity.

なお、実施の形態4に係る冷蔵庫400は、図3に記載された構成の内、庫内温度センサ104a〜104d、庫内湿度センサ118、庫外温度センサ108及びヒータ171を備えていなくてもよい。 The refrigerator 400 according to the fourth embodiment does not have the internal temperature sensors 104a to 104d, the internal humidity sensor 118, the external temperature sensor 108, and the heater 171 in the configuration shown in FIG. good.

図8は、実施の形態4において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態1と同様だが、ドアの閉動作を検知してから撮像が行われるまでの待機時間が、庫外湿度に応じて変更される点が異なる。
FIG. 8 is a flowchart showing an imaging operation using the open / close sensor 107a in the fourth embodiment.
The basic processing flow is the same as that of the first embodiment, except that the waiting time from detecting the closing operation of the door to performing the imaging is changed according to the humidity outside the refrigerator.

まず、開閉センサ107aがドア開動作を検知した場合(S40)、コントローラ461は、庫内の照明115を点灯する(S41)。
その後、開閉センサ107aがドア閉動作を検知した場合(S42)、コントローラ461は、庫外湿度センサ109から冷蔵庫400の外の湿度である庫外湿度を取得する(S43)。
First, when the open / close sensor 107a detects the door opening operation (S40), the controller 461 turns on the lighting 115 in the refrigerator (S41).
After that, when the open / close sensor 107a detects the door closing operation (S42), the controller 461 acquires the outside humidity, which is the humidity outside the refrigerator 400, from the outside humidity sensor 109 (S43).

そして、コントローラ461は、庫外湿度に基づいて、待機時間を決定し(S44)、決定された待機時間待機する(S45)。そして、待機時間が経過したことを合図に、コントローラ461は、画像取得部117に庫内の撮像を行わせる(S46)。
その後、コントローラ461は、画像取得部117による撮像完了を検知した場合(S47)、庫内の照明115を消灯する(S48)。
Then, the controller 461 determines the standby time based on the humidity outside the refrigerator (S44), and waits for the determined standby time (S45). Then, on the signal that the waiting time has elapsed, the controller 461 causes the image acquisition unit 117 to take an image of the inside of the refrigerator (S46).
After that, when the controller 461 detects the completion of imaging by the image acquisition unit 117 (S47), the controller 461 turns off the lighting 115 in the refrigerator (S48).

庫外湿度からドア閉動作後の画像取得部117に付着する結露量は予測可能である。前記したように、庫内の飽和水蒸気圧は運転状況による微小な変動しかないと考えられるため、庫外湿度が高い場合は、庫外空気の含有水蒸気量と、庫内に設置された画像取得部117周辺空気の飽和水蒸気圧との差が大きく、くもりの原因である画像取得部117の結露量が多くなることが予想できる。このため庫外湿度が高い場合は、待機時間を長く設定することで、より正確にくもりを解消することができ、撮像品質を高めることができる。また、庫外湿度が低い場合は、待機時間を短く設定することで、ユーザはドア閉動作後に待つことなく最新の画像を確認することができる。 The amount of dew condensation adhering to the image acquisition unit 117 after the door closing operation can be predicted from the humidity outside the refrigerator. As mentioned above, it is considered that the saturated water vapor pressure inside the refrigerator has only a slight fluctuation depending on the operating conditions. Therefore, when the humidity outside the refrigerator is high, the amount of water vapor contained in the air outside the refrigerator and the image acquired inside the refrigerator are acquired. It can be expected that the difference from the saturated water vapor pressure of the air around the part 117 is large, and the amount of dew condensation on the image acquisition part 117, which is the cause of cloudiness, increases. Therefore, when the humidity outside the refrigerator is high, the cloudiness can be eliminated more accurately and the imaging quality can be improved by setting a long standby time. In addition, when the humidity outside the refrigerator is low, the user can check the latest image without waiting after the door is closed by setting the waiting time short.

なお、以上に記載された実施の形態2〜4において、コントローラ261、361、461は、以下の実施の形態6に記載されているように、冷蔵室110内の含有水蒸気量が多いほど長くなるように、待機時間を決定してもよい。 In the above-described embodiments 2 to 4, the controllers 261, 361, and 461 become longer as the amount of water vapor contained in the refrigerating chamber 110 increases, as described in the following embodiment 6. As such, the waiting time may be determined.

実施の形態5
図1及び図2に示されているように、実施の形態5に係る冷蔵庫500は、実施の形態1に係る冷蔵庫100とほぼ同様に構成されている。
図3に示されているように、実施の形態5に係る冷蔵庫500における制御部560は、コントローラ561と、画像保存部162と、画像加工部163とを備える。
実施の形態5における制御部560の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
Embodiment 5
As shown in FIGS. 1 and 2, the refrigerator 500 according to the fifth embodiment is configured in substantially the same manner as the refrigerator 100 according to the first embodiment.
As shown in FIG. 3, the control unit 560 in the refrigerator 500 according to the fifth embodiment includes a controller 561, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 560 in the fifth embodiment are the same as the control unit 160 in the first embodiment.

コントローラ561は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。
この際、まず、コントローラ561は、画像取得部117にくもりが発生するか否かを判断する。例えば、コントローラ561は、庫外温度センサ108で検知される庫外温度及び庫外湿度センサ109で検知される庫外湿度から、露点温度を特定する。そして、コントローラ561は、庫内温度センサ104aで検知される庫内温度が特定された露点温度よりも低い場合には、くもりが発生し、庫内温度が露点温度以上である場合には、くもりが発生しないと判断する。
なお、コントローラ561は、公知の方法で露点温度を算出すればよい。例えば、コントローラ561は、庫外温度及び庫外湿度から水蒸気圧を求め、その水蒸気圧を飽和水蒸気圧とする温度を求めることにより、露点温度を得てもよい。また、コントローラ561は、JIS(Japanese Industrial Standards)等で定められている飽和水蒸気圧表等を用いて近似的に露点温度を算出してもよい。
また、コントローラ561は、庫内の温度設定状況から庫内温度を推定してもよい。
When the open / close sensor 107a detects the closing operation of the door, the controller 561 instructs the image acquisition unit 117 to take an image.
At this time, first, the controller 561 determines whether or not cloudiness occurs in the image acquisition unit 117. For example, the controller 561 identifies the dew point temperature from the outside temperature detected by the outside temperature sensor 108 and the outside humidity detected by the outside humidity sensor 109. Then, the controller 561 causes cloudiness when the temperature inside the refrigerator detected by the temperature sensor 104a is lower than the specified dew point temperature, and cloudiness occurs when the temperature inside the refrigerator is equal to or higher than the dew point temperature. Is determined not to occur.
The controller 561 may calculate the dew point temperature by a known method. For example, the controller 561 may obtain the dew point temperature by obtaining the water vapor pressure from the outside temperature and the outside humidity, and obtaining the temperature at which the water vapor pressure is the saturated water vapor pressure. Further, the controller 561 may approximately calculate the dew point temperature using a saturated water vapor pressure table or the like defined by JIS (Japanese Industrial Standards) or the like.
Further, the controller 561 may estimate the temperature inside the refrigerator from the temperature setting status inside the refrigerator.

そして、コントローラ561は、くもりが発生すると判断した場合に、開閉センサ107aを用いて計時された、開閉ドア111が開いていた開時間と、庫外温度センサ108で検知される庫外温度と、庫外湿度センサ109で検知される庫外湿度とに応じて、待機時間を変更する。例えば、コントローラ561は、開時間が長いほど、庫外温度が高ければ高いほど、庫外湿度が高ければ高いほど、待機時間が長くなるように待機時間を決定する。但し、コントローラ561には、待機時間の最大値が予め定められており、開時間、庫外温度及び庫外湿度の少なくとも何れか一つが予め定められた閾値以上となった場合には、待機時間としてその最大値が用いられる。一例として、コントローラ561は、開時間の範囲、庫外温度の範囲及び庫外湿度の範囲の組み合わせ毎に、対応する待機時間を定めたテーブル情報を用いることにより、対応する待機時間を決定することができる。
なお、コントローラ561は、くもりが発生しないと判断した場合には、開閉ドア111が閉じられたことを開閉センサ107aが検知した際に、言い換えると、待機時間経過前に、画像取得部117に撮像を指示する。
Then, when the controller 561 determines that cloudiness occurs, the opening time when the opening / closing door 111 is open and the outside temperature detected by the outside temperature sensor 108, which are timed by the opening / closing sensor 107a, are determined. The standby time is changed according to the outside humidity detected by the outside humidity sensor 109. For example, the controller 561 determines the standby time so that the longer the opening time, the higher the outside temperature, and the higher the outside humidity, the longer the waiting time. However, the maximum value of the standby time is predetermined in the controller 561, and when at least one of the opening time, the outside temperature and the outside humidity is equal to or more than a predetermined threshold value, the waiting time is set. The maximum value is used as. As an example, the controller 561 determines the corresponding standby time by using the table information that defines the corresponding standby time for each combination of the open time range, the outside temperature range, and the outside humidity range. Can be done.
When the controller 561 determines that cloudiness does not occur, the open / close sensor 107a detects that the open / close door 111 has been closed, in other words, the image acquisition unit 117 takes an image before the waiting time elapses. To instruct.

なお、実施の形態5に係る冷蔵庫500は、図3に記載された構成の内、庫内湿度センサ118及びヒータ171を備えていなくてもよい。 The refrigerator 500 according to the fifth embodiment does not have to include the internal humidity sensor 118 and the heater 171 in the configuration shown in FIG.

図9は、実施の形態5において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態1と同様だが、庫外温度及び庫外湿度により撮像待機の必要性を判断するほか、ドアの閉動作を検知してから撮像が行われるまでの待機時間が、ドアの開時間、庫外温度及び庫外湿度に応じて変更される点が異なる。
FIG. 9 is a flowchart showing an imaging operation using the open / close sensor 107a in the fifth embodiment.
The basic processing flow is the same as that of the first embodiment, but in addition to determining the necessity of waiting for imaging based on the temperature outside the refrigerator and the humidity outside the refrigerator, waiting until the image is taken after the door closing operation is detected. The difference is that the time is changed according to the opening time of the door, the outside temperature and the outside humidity.

まず、開閉センサ107aがドア開動作を検知した場合(S50)、コントローラ561は、庫内の照明115を点灯するとともに(S51)、開時間の計時を開始する。
その後、開閉センサ107aがドア閉動作を検知した場合(S52)、コントローラ561は、開時間の計時を終了して、ドア開動作からドア閉動作までの開閉ドア111の開時間を特定する(S53)。
First, when the open / close sensor 107a detects the door opening operation (S50), the controller 561 turns on the lighting 115 in the refrigerator (S51) and starts timing the opening time.
After that, when the open / close sensor 107a detects the door closing operation (S52), the controller 561 ends the time counting of the opening time and specifies the opening time of the opening / closing door 111 from the door opening operation to the door closing operation (S53). ).

また、コントローラ561は、庫外温度センサ108から庫外温度を取得するとともに、庫外湿度センサ109から庫外湿度を取得する。
そして、コントローラ561は、取得された庫外温度及び庫外湿度により、くもりの発生の有無、言い換えると、撮像待機の要否を判断する(S55)。くもりが発生していると判断した場合(S55でYes)には、処理はステップS56に進み、くもりが発生していないと判断した場合(S55でNo)には、処理はステップS58に進む。
Further, the controller 561 acquires the outside temperature from the outside temperature sensor 108 and the outside humidity from the outside humidity sensor 109.
Then, the controller 561 determines whether or not cloudiness has occurred, in other words, whether or not it is necessary to wait for imaging, based on the acquired outside temperature and outside humidity (S55). If it is determined that cloudiness has occurred (Yes in S55), the process proceeds to step S56, and if it is determined that cloudiness has not occurred (No in S55), the process proceeds to step S58.

ステップS56では、コントローラ561は、開閉ドア111の開時間、庫外温度及び庫外湿度に基づいて、待機時間を決定する。そして、コントローラ561は、決定された待機時間待機する(S57)。そして、処理はステップS58に進む。 In step S56, the controller 561 determines the standby time based on the opening time of the open / close door 111, the outside temperature, and the outside humidity. Then, the controller 561 waits for the determined standby time (S57). Then, the process proceeds to step S58.

ステップS58では、コントローラ561は、画像取得部117に庫内の撮像を行わせる。
その後、コントローラ561は、画像取得部117による撮像完了を検知した場合(S59)、庫内の照明115を消灯する(S60)。
In step S58, the controller 561 causes the image acquisition unit 117 to take an image of the inside of the refrigerator.
After that, when the controller 561 detects the completion of imaging by the image acquisition unit 117 (S59), the controller 561 turns off the lighting 115 in the refrigerator (S60).

実施の形態5によれば、くもりの有無を推定して、撮像待機の必要性を判断するため、例えば、撮像待機が必要ないと判断された場合は、ドア閉直後に撮像が可能となり、ユーザはドア閉動作後に待つことなく最新の画像を確認することができる。 According to the fifth embodiment, the presence or absence of cloudiness is estimated to determine the necessity of waiting for imaging. Therefore, for example, when it is determined that waiting for imaging is not necessary, imaging is possible immediately after the door is closed, and the user Can check the latest image without waiting after the door is closed.

図10は、実施の形態5におけるくもり解消時間と推定結露量との関係を示す概略図である。また、図11は、実施の形態5におけるくもり解消時間と含有水蒸気量との関係を示す概略図である。
推定結露量は、ドア開動作前の庫外空気の含有水蒸気量と、画像取得部117周辺の庫内空気の飽和水蒸気量との差により求められる。
図11に示されている推定結露量は、庫外空気の温湿度、及び、庫内空気の温度から算出された値である。推定結露量が高くなるにつれ、ドア閉動作から画像取得部117のくもりが晴れるまでの時間も長くなる傾向にあり、庫外温湿度と庫内の温度からくもり解消までの時間が予測可能ということが分かる。
なお、庫内の温度は、庫内温度センサ104aで検知された温度でもよく、また、冷蔵庫500の温度設定から推定された温度でもよい。
FIG. 10 is a schematic view showing the relationship between the cloudiness elimination time and the estimated amount of dew condensation in the fifth embodiment. Further, FIG. 11 is a schematic view showing the relationship between the cloudiness elimination time and the amount of water vapor contained in the fifth embodiment.
The estimated amount of dew condensation is obtained by the difference between the amount of water vapor contained in the outside air before the door is opened and the amount of saturated water vapor in the inside air around the image acquisition unit 117.
The estimated amount of dew condensation shown in FIG. 11 is a value calculated from the temperature and humidity of the outside air and the temperature of the inside air. As the estimated amount of dew condensation increases, the time from the door closing operation to the clearing of the cloudiness of the image acquisition unit 117 tends to increase, and the time from the temperature inside the refrigerator and the temperature inside the refrigerator to clear the cloudiness can be predicted. I understand.
The temperature inside the refrigerator may be the temperature detected by the temperature sensor 104a inside the refrigerator, or may be the temperature estimated from the temperature setting of the refrigerator 500.

含有水蒸気量は、空気の温湿度から算出が可能であり、図11に示されている含有水蒸気量は、ドア閉直後の画像取得部117周辺の空気の温湿度から算出された値である。含有水蒸気量が高くなるにつれ、ドア閉動作から画像取得部117のくもりが晴れるまでの時間も長くなる傾向にあることに加え、くもり解消時間と推定結露量の関係図と比較した場合、1次近似した結果の相対的な残差が小さい結果となった。このことから庫外温湿度に加え、ドア開時間からドア閉後の画像取得部117周辺空気の含有水蒸気を推定し、含有水蒸気量を基に待機時間を設定することでドア閉動作からくもりが晴れるまでの時間をより正確に算出することができる。これにより鮮明な画像が取得でき、撮像品質を高めることができる。 The amount of water vapor contained can be calculated from the temperature and humidity of the air, and the amount of water vapor contained is a value calculated from the temperature and humidity of the air around the image acquisition unit 117 immediately after the door is closed. As the amount of water vapor contained increases, the time from the door closing operation to the clearing of the cloudiness of the image acquisition unit 117 tends to increase, and when compared with the relationship diagram between the cloudiness elimination time and the estimated dew condensation amount, it is primary. The relative residuals of the approximated results were small. From this, in addition to the temperature and humidity outside the refrigerator, the water vapor contained in the air around the image acquisition unit 117 after the door is closed is estimated from the door opening time, and the standby time is set based on the amount of water vapor contained, thereby causing cloudiness from the door closing operation. The time until it clears up can be calculated more accurately. As a result, a clear image can be acquired and the imaging quality can be improved.

図2の断面図に示されているように、庫外温度センサ108、庫外湿度センサ109及び画像取得部117が開閉ドア111内に設置されることで、開閉ドア111周辺の温湿度が検知可能となり待機時間の算出をより正確に行うことができる。また、操作部112の基板上に庫外温度センサ108及び庫外湿度センサ109を設け一体化することで生産性を高めることが可能となる。 As shown in the cross-sectional view of FIG. 2, the temperature / humidity around the opening / closing door 111 is detected by installing the outside temperature sensor 108, the outside humidity sensor 109, and the image acquisition unit 117 inside the opening / closing door 111. This makes it possible to calculate the waiting time more accurately. Further, the productivity can be improved by providing the outside temperature sensor 108 and the outside humidity sensor 109 on the substrate of the operation unit 112 and integrating them.

以上に記載した実施の形態5では、コントローラ561は、開時間、庫外温度及び庫外湿度に基づいて、待機時間を決定しているが、このような例に限定されない。例えば、コントローラ561は、実施の形態2と同様に、開時間に基づいて待機時間を決定してもよく、実施の形態3と同様に、庫外温度に基づいて待機時間を決定してもよく、実施の形態4と同様に、庫外湿度に基づいて待機時間を決定してもよい。また、待機時間は、予め定められた一定の時間であってもよい。 In the fifth embodiment described above, the controller 561 determines the standby time based on the opening time, the outside temperature, and the outside humidity, but the present invention is not limited to such an example. For example, the controller 561 may determine the standby time based on the open time as in the second embodiment, or may determine the standby time based on the outside temperature as in the third embodiment. , The standby time may be determined based on the humidity outside the refrigerator as in the fourth embodiment. Further, the waiting time may be a predetermined fixed time.

実施の形態6
図1及び図2に示されているように、実施の形態6に係る冷蔵庫600は、実施の形態1に係る冷蔵庫100とほぼ同様に構成されている。
図3に示されているように、実施の形態6に係る冷蔵庫600における制御部660は、コントローラ661と、画像保存部162と、画像加工部163とを備える。
実施の形態6における制御部660の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
Embodiment 6
As shown in FIGS. 1 and 2, the refrigerator 600 according to the sixth embodiment is configured in substantially the same manner as the refrigerator 100 according to the first embodiment.
As shown in FIG. 3, the control unit 660 in the refrigerator 600 according to the sixth embodiment includes a controller 661, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 660 in the sixth embodiment are the same as the control unit 160 in the first embodiment.

コントローラ661は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。
この際、まず、コントローラ661は、画像取得部117にくもりが発生するか否かを判断する。ここでの判断は、実施の形態5と同様である。
そして、コントローラ661は、くもりが発生すると判断した場合に、庫内温度センサ104aで検知される冷蔵庫600内の温度である庫内温度と、庫内湿度センサ118で検知される冷蔵庫600内の湿度である庫内湿度とに応じて、待機時間を変更する。例えば、コントローラ661は、庫内温度及び庫内湿度により、庫内、言い換えると、冷蔵室110における画像取得部117周辺の含有水蒸気量を算出することができる。そして、コントローラ661は、算出された含有水蒸気量が多いほど、待機時間が長くなるように待機時間を決定する。但し、コントローラ661には、待機時間の最大値が予め定められており、含有水蒸気量が予め定められた閾値以上となった場合には、待機時間としてその最大値が用いられる。一例として、コントローラ661は、含有水蒸気量の範囲毎に、対応する待機時間を定めたテーブル情報を用いることにより、対応する待機時間を決定することができる。
なお、庫内の温度は、庫内温度センサ104aで検知された温度でもよく、また、冷蔵庫600の温度設定から推定された温度でもよい。
When the open / close sensor 107a detects the closing operation of the door, the controller 661 instructs the image acquisition unit 117 to take an image.
At this time, first, the controller 661 determines whether or not cloudiness occurs in the image acquisition unit 117. The determination here is the same as in the fifth embodiment.
Then, when the controller 661 determines that cloudiness occurs, the temperature inside the refrigerator 600, which is the temperature inside the refrigerator 600 detected by the temperature sensor 104a inside the refrigerator, and the humidity inside the refrigerator 600 detected by the humidity sensor 118 inside the refrigerator. The standby time is changed according to the humidity inside the refrigerator. For example, the controller 661 can calculate the amount of water vapor contained in the refrigerator, in other words, around the image acquisition unit 117 in the refrigerator chamber 110, based on the temperature inside the refrigerator and the humidity inside the refrigerator. Then, the controller 661 determines the standby time so that the larger the calculated amount of water vapor contained, the longer the standby time. However, the controller 661 has a predetermined maximum value of the standby time, and when the amount of water vapor contained exceeds the predetermined threshold value, the maximum value is used as the standby time. As an example, the controller 661 can determine the corresponding standby time by using the table information that defines the corresponding standby time for each range of the contained water vapor content.
The temperature inside the refrigerator may be the temperature detected by the temperature sensor 104a inside the refrigerator, or may be the temperature estimated from the temperature setting of the refrigerator 600.

なお、実施の形態6に係る冷蔵庫500は、図3に記載された構成の内、ヒータ171を備えていなくてもよい。 The refrigerator 500 according to the sixth embodiment does not have to include the heater 171 in the configuration shown in FIG.

図12は、実施の形態6において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態1と同様だが、庫外温度及び庫外湿度により撮像待機の必要性を判断するほか、ドアの閉動作を検知してから撮像が行われるまでの待機時間が、庫内温度及び庫内湿度に応じて変更される点が異なる。
FIG. 12 is a flowchart showing an imaging operation using the open / close sensor 107a in the sixth embodiment.
The basic processing flow is the same as that of the first embodiment, but in addition to determining the necessity of waiting for imaging based on the temperature outside the refrigerator and the humidity outside the refrigerator, waiting until the image is taken after the door closing operation is detected. The difference is that the time is changed according to the temperature inside the refrigerator and the humidity inside the refrigerator.

まず、開閉センサ107aがドア開動作を検知した場合(S70)、コントローラ661は、庫内の照明115を点灯する(S71)。
その後、開閉センサ107aがドア閉動作を検知した場合(S72)、コントローラ661は、庫外温度センサ108から庫外温度を取得するとともに、庫外湿度センサ109から庫外湿度を取得する(S73)。
First, when the open / close sensor 107a detects the door opening operation (S70), the controller 661 turns on the lighting 115 in the refrigerator (S71).
After that, when the open / close sensor 107a detects the door closing operation (S72), the controller 661 acquires the outside temperature from the outside temperature sensor 108 and the outside humidity from the outside humidity sensor 109 (S73). ..

そして、コントローラ661は、取得された庫外温度及び庫外湿度により、くもりの発生の有無、言い換えると、撮像待機の要否を判断する(S74)。くもりが発生していると判断した場合(S74でYes)には、処理はステップS75に進み、くもりが発生していないと判断した場合(S74でNo)には、処理はステップS78に進む。 Then, the controller 661 determines whether or not cloudiness has occurred, in other words, whether or not it is necessary to wait for imaging, based on the acquired outside temperature and outside humidity (S74). If it is determined that cloudiness has occurred (Yes in S74), the process proceeds to step S75, and if it is determined that cloudiness has not occurred (No in S74), the process proceeds to step S78.

ステップS75では、コントローラ661は、庫内温度センサ104aから庫内温度、及び、庫内湿度センサ118から庫内湿度を取得する。
そして、コントローラ661は、庫内温度及び庫内湿度に基づいて、待機時間を決定し(S76)、決定された待機時間待機する(S77)。そして、処理はステップS78に進む。
In step S75, the controller 661 acquires the internal temperature from the internal temperature sensor 104a and the internal humidity from the internal humidity sensor 118.
Then, the controller 661 determines the standby time based on the temperature inside the refrigerator and the humidity inside the refrigerator (S76), and waits for the determined standby time (S77). Then, the process proceeds to step S78.

ステップS78では、コントローラ661は、画像取得部117に庫内の撮像を行わせる。
その後、コントローラ661は、画像取得部117による撮像完了を検知した場合(S79)、庫内の照明115を消灯する(S80)。
In step S78, the controller 661 causes the image acquisition unit 117 to take an image of the inside of the refrigerator.
After that, when the controller 661 detects that the image acquisition unit 117 has completed imaging (S79), the controller 661 turns off the lighting 115 in the refrigerator (S80).

検知された庫内温湿度からドア閉後の画像取得部117の周辺の空気の含有水蒸気量を推定することにより、くもりが解消されるまでの時間をより正確に算出することができる。これにより鮮明な画像が取得でき、撮像品質を高めることができる。 By estimating the amount of water vapor contained in the air around the image acquisition unit 117 after the door is closed from the detected temperature and humidity inside the refrigerator, the time until the cloudiness is cleared can be calculated more accurately. As a result, a clear image can be acquired and the imaging quality can be improved.

図2の断面図に示されているように、庫外温度センサ108、庫外湿度センサ109及び画像取得部117が開閉ドア111内に設置されることで、開閉ドア111周辺の温湿度が検知可能となり待機時間の算出がより正確に行うことができる。 As shown in the cross-sectional view of FIG. 2, the temperature / humidity around the opening / closing door 111 is detected by installing the outside temperature sensor 108, the outside humidity sensor 109, and the image acquisition unit 117 inside the opening / closing door 111. This makes it possible to calculate the waiting time more accurately.

実施の形態7
図1に示されているように、実施の形態7に係る冷蔵庫700の正面図である。
冷蔵庫700は、冷蔵室710と、切替室120と、製氷室130と、冷凍室140と、野菜室150とを備える。実施の形態7に係る冷蔵庫700は、冷蔵室710を除いて、実施の形態1と同様に構成されている。
冷蔵室710は、開閉ドア711を備えており、開閉ドア711において、実施の形態1における冷蔵室110と異なっている。
Embodiment 7
As shown in FIG. 1, it is a front view of the refrigerator 700 according to the seventh embodiment.
The refrigerator 700 includes a refrigerating room 710, a switching room 120, an ice making room 130, a freezing room 140, and a vegetable room 150. The refrigerator 700 according to the seventh embodiment is configured in the same manner as the first embodiment except for the refrigerating chamber 710.
The refrigerating chamber 710 includes an opening / closing door 711, which is different from the refrigerating chamber 110 in the first embodiment in the opening / closing door 711.

図13は、実施の形態7における開閉ドア711を閉じた状態における庫内側の正面図である。
図13に示されているように、開閉ドア711は、ポケット116と、画像取得部117と、センターピラー790と、カバー791とを備える。ポケット116及び画像取得部117は、実施の形態1と同様に構成されている。
FIG. 13 is a front view of the inside of the refrigerator in a state where the opening / closing door 711 according to the seventh embodiment is closed.
As shown in FIG. 13, the opening / closing door 711 includes a pocket 116, an image acquisition unit 117, a center pillar 790, and a cover 791. The pocket 116 and the image acquisition unit 117 are configured in the same manner as in the first embodiment.

センターピラー790は、開閉ドア711の内、左側ドア711Aと、右側ドア711Bとを仕切る境界を覆うように設けられている。
また、センターピラー790には、画像取得部117がカバー791に収納された状態で設置されている。
The center pillar 790 is provided so as to cover the boundary partitioning the left side door 711A and the right side door 711B in the opening / closing door 711.
Further, in the center pillar 790, the image acquisition unit 117 is installed in a state of being housed in the cover 791.

図14は、実施の形態7における冷蔵室710の断面図である。
図14は、図13の14−14線における断面図である。
図14に示されているように、センターピラー790には、左側ドア711A及び右側ドア711Bの間からの冷気漏れによる露付き防止のため、ヒータ171が搭載されている。
FIG. 14 is a cross-sectional view of the refrigerating chamber 710 according to the seventh embodiment.
FIG. 14 is a cross-sectional view taken along the line 14-14 of FIG.
As shown in FIG. 14, the center pillar 790 is equipped with a heater 171 to prevent dew due to cold air leakage from between the left door 711A and the right door 711B.

図3に示されているように、実施の形態7に係る冷蔵庫700における制御部760は、コントローラ761と、画像保存部162と、画像加工部163とを備える。
実施の形態6における制御部760の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
As shown in FIG. 3, the control unit 760 in the refrigerator 700 according to the seventh embodiment includes a controller 761, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 760 in the sixth embodiment are the same as the control unit 160 in the first embodiment.

コントローラ761は、ヒータ171を通電する必要があるか否かを判断する。例えば、コントローラ761は、庫外温度センサ108で検知される庫外温度及び庫外湿度センサ109で検知される庫外湿度から、露点温度を特定する。そして、コントローラ761は、庫内温度センサ104aで検知される庫内温度が特定された露点温度よりも低い場合には、ヒータ171を通電する必要があると判断し、庫内温度が露点温度以上である場合には、ヒータ171を通電する必要がないと判断する。
なお、コントローラ761は、庫内の温度設定状況から庫内温度を推定してもよい。
The controller 761 determines whether or not the heater 171 needs to be energized. For example, the controller 761 identifies the dew point temperature from the outside temperature detected by the outside temperature sensor 108 and the outside humidity detected by the outside humidity sensor 109. Then, the controller 761 determines that it is necessary to energize the heater 171 when the internal temperature detected by the internal temperature sensor 104a is lower than the specified dew point temperature, and the internal temperature is equal to or higher than the dew point temperature. If, it is determined that it is not necessary to energize the heater 171.
The controller 761 may estimate the temperature inside the refrigerator from the temperature setting status inside the refrigerator.

そして、コントローラ761は、ヒータ171を通電する必要があると判断した場合には、センターピラー790に内蔵されたヒータ171を発熱させる。これにより、カバー791を介して画像取得部117が加熱され、画像取得部117の温度が露点温度より高くなることで、撮像時に生じるくもりを防止することができる。 Then, when the controller 761 determines that it is necessary to energize the heater 171, the controller 761 heats the heater 171 built in the center pillar 790. As a result, the image acquisition unit 117 is heated via the cover 791, and the temperature of the image acquisition unit 117 becomes higher than the dew point temperature, so that cloudiness that occurs during imaging can be prevented.

また、コントローラ761は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。
この際、まず、コントローラ761は、画像取得部117にくもりが発生するか否かを判断する。ここでの判断は、実施の形態5と同様である。
そして、コントローラ761は、くもりが発生すると判断した場合に、開閉センサ107aを用いて計測された、開閉ドア711が開いていた開時間に応じて、待機時間を変更する。例えば、コントローラ761は、開時間が長いほど、待機時間が長くなるように待機時間を決定する。但し、コントローラ761には、待機時間の最大値が予め定められており、開時間が予め定められた閾値以上となった場合には、待機時間としてその最大値が用いられる。
Further, when the open / close sensor 107a detects the closing operation of the door, the controller 761 instructs the image acquisition unit 117 to take an image.
At this time, first, the controller 761 determines whether or not cloudiness occurs in the image acquisition unit 117. The determination here is the same as in the fifth embodiment.
Then, when it is determined that cloudiness occurs, the controller 761 changes the standby time according to the opening time when the opening / closing door 711 is open, which is measured by using the opening / closing sensor 107a. For example, the controller 761 determines the waiting time so that the longer the opening time, the longer the waiting time. However, the controller 761 has a predetermined maximum value of the waiting time, and when the opening time exceeds a predetermined threshold value, the maximum value is used as the waiting time.

図15は、実施の形態7において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態2と同様だが、画像取得部117のくもりを解消するためにヒータ171の発熱を用いている点、及び、くもりが発生すると判断された場合に、待機時間待機が行われる点が異なっている。
FIG. 15 is a flowchart showing an imaging operation using the open / close sensor 107a in the seventh embodiment.
The basic processing flow is the same as that of the second embodiment, but the heat generated by the heater 171 is used to eliminate the cloudiness of the image acquisition unit 117, and when it is determined that the cloudiness occurs, the device waits. The difference is that time waiting is performed.

まず、コントローラ761は、庫外温度センサ108から庫外温度を取得するとともに、庫外湿度センサ109から庫外湿度を取得する(S90)。 First, the controller 761 acquires the outside temperature from the outside temperature sensor 108 and the outside humidity from the outside humidity sensor 109 (S90).

そして、コントローラ761は、取得された庫外温度及び庫外湿度により、ヒータ171を通電する必要があるか否かを判断する(S91)。ヒータ171を通電する必要があると判断した場合(S91でYes)には、処理はステップS92に進み、ヒータ171を通電する必要がないと判断した場合(S91でNo)には、処理はステップS94に進む。 Then, the controller 761 determines whether or not it is necessary to energize the heater 171 based on the acquired outside temperature and outside humidity (S91). If it is determined that the heater 171 needs to be energized (Yes in S91), the process proceeds to step S92, and if it is determined that the heater 171 does not need to be energized (No in S91), the process proceeds to step S92. Proceed to S94.

ステップS92では、コントローラ761は、ヒータ171に通電を開始する。そして、コントローラ761は、予め定められた期間通電を行った場合には、ヒータ171への通電を終了する(S93)。
ここで、ステップS90〜S93の処理については、定期的に行われることで、常に画像取得部117を露点温度以上に保つことができるので、庫内外の環境によらず、くもりのない鮮明な画像を取得することができる。
In step S92, the controller 761 starts energizing the heater 171. Then, when the controller 761 is energized for a predetermined period of time, the controller 761 ends the energization of the heater 171 (S93).
Here, since the processing of steps S90 to S93 is performed regularly, the image acquisition unit 117 can always be maintained at the dew point temperature or higher, so that a clear image without cloudiness can be obtained regardless of the environment inside and outside the refrigerator. Can be obtained.

ステップS94では、開閉センサ107aがドア開動作を検知する。そして、コントローラ761は、庫内の照明115を点灯するとともに(S95)、開時間の計時を開始する。
その後、開閉センサ107aがドア閉動作を検知した場合(S96)、コントローラ761は、開時間の計時を終了して、ドア開動作からドア閉動作までの開閉ドア711の開時間を特定する(S97)。
In step S94, the open / close sensor 107a detects the door opening operation. Then, the controller 761 turns on the lighting 115 in the refrigerator (S95) and starts timing the opening time.
After that, when the open / close sensor 107a detects the door closing operation (S96), the controller 761 ends the time counting of the opening time and specifies the opening time of the opening / closing door 711 from the door opening operation to the door closing operation (S97). ).

次に、コントローラ761は、庫外温度センサ108から庫外温度を取得するとともに、庫外湿度センサ109から庫外湿度を取得する(S98)。 Next, the controller 761 acquires the outside temperature from the outside temperature sensor 108 and the outside humidity from the outside humidity sensor 109 (S98).

そして、コントローラ761は、取得された庫外温度及び庫外湿度により、くもりの発生の有無、言い換えると、撮像待機の要否を判断する(S99)。くもりが発生していると判断した場合(S99でYes)には、処理はステップS100に進み、くもりが発生していないと判断した場合(S99でNo)には、処理はステップS102に進む。 Then, the controller 761 determines the presence / absence of cloudiness, in other words, the necessity of waiting for imaging, based on the acquired outside temperature and outside humidity (S99). If it is determined that cloudiness has occurred (Yes in S99), the process proceeds to step S100, and if it is determined that cloudiness has not occurred (No in S99), the process proceeds to step S102.

ステップS100では、コントローラ761は、開閉ドア711の開時間に基づいて、待機時間を決定する。そして、コントローラ761は、決定された待機時間待機する(S101)。そして、処理はステップS102に進む。 In step S100, the controller 761 determines the waiting time based on the opening time of the open / close door 711. Then, the controller 761 waits for the determined waiting time (S101). Then, the process proceeds to step S102.

ステップS102では、コントローラ761は、画像取得部117に庫内の撮像を行わせる。
その後、コントローラ761は、画像取得部117による撮像完了を検知した場合(S103)、庫内の照明115を消灯する(S104)。
In step S102, the controller 761 causes the image acquisition unit 117 to take an image of the inside of the refrigerator.
After that, when the controller 761 detects the completion of imaging by the image acquisition unit 117 (S103), the controller 761 turns off the lighting 115 in the refrigerator (S104).

なお、頻繁にヒータ171を通電することは消費電力の悪化につながるため、コントローラ761は、ステップS91において、庫外温湿度検知結果によって、ヒータ171を通電する必要があると判断した場合でも、推定結露量が少ない場合には、ステップS92に処理を進めなくてもよい。このような場合には、コントローラ761は、ドア開放時間の特定結果(S97)に基づいて、待機時間を設ける(S100、S101)ことでヒータ171の通電による消費電力悪化を抑制しながらも撮像品質を保つことができる。 Since frequent energization of the heater 171 leads to deterioration of power consumption, the controller 761 estimates even if it is determined in step S91 that it is necessary to energize the heater 171 based on the outside temperature / humidity detection result. If the amount of dew condensation is small, it is not necessary to proceed to step S92. In such a case, the controller 761 provides a standby time (S100, S101) based on the specific result (S97) of the door opening time, thereby suppressing deterioration of power consumption due to energization of the heater 171 while suppressing image quality. Can be kept.

実施の形態8
図1及び図2に示されているように、実施の形態8に係る冷蔵庫800は、実施の形態1に係る冷蔵庫100とほぼ同様に構成されている。
図3に示されているように、実施の形態8に係る冷蔵庫800における制御部860は、コントローラ861と、画像保存部162と、画像加工部163とを備える。
実施の形態8における制御部860の画像保存部162及び画像加工部163は、実施の形態1における制御部160と同様である。
Embodiment 8
As shown in FIGS. 1 and 2, the refrigerator 800 according to the eighth embodiment is configured in substantially the same manner as the refrigerator 100 according to the first embodiment.
As shown in FIG. 3, the control unit 860 in the refrigerator 800 according to the eighth embodiment includes a controller 861, an image storage unit 162, and an image processing unit 163.
The image storage unit 162 and the image processing unit 163 of the control unit 860 in the eighth embodiment are the same as the control unit 160 in the first embodiment.

コントローラ861は、開閉センサ107aがドアの閉動作を検知した場合、画像取得部117に撮像を指示する。
この際、まず、コントローラ861は、画像取得部117にくもりが発生するか否かを判断する。ここでの判断は、実施の形態5と同様である。
そして、コントローラ861は、くもりが発生すると判断した場合に、開閉センサ107aを用いて計時された、開閉ドア111が開いていた開時間と、庫外温度センサ108で検知される庫外温度と、庫外湿度センサ109で検知される庫外湿度とに応じて、送風ファン103による送風時間を変更する。例えば、コントローラ861は、開時間が長いほど、庫外温度が高ければ高いほど、庫外湿度が高ければ高いほど、送風時間が長くなるようにする。但し、コントローラ861には、送風時間の最大値が予め定められており、開時間、庫外温度及び庫外湿度の少なくとも何れか一つが予め定められた閾値以上となった場合には、送風時間としてその最大値が用いられる。一例として、コントローラ861は、開時間の範囲、庫外温度の範囲及び庫外湿度の範囲の組み合わせ毎に、対応する送風時間を定めたテーブル情報を用いることにより、対応する送風時間を決定することができる。
なお、実施の形態8に係る冷蔵庫800は、図3に記載された構成の内、庫内温度センサ104a〜104d、庫内湿度センサ118及びヒータ171を備えていなくてもよい。
When the open / close sensor 107a detects the closing operation of the door, the controller 861 instructs the image acquisition unit 117 to take an image.
At this time, first, the controller 861 determines whether or not cloudiness occurs in the image acquisition unit 117. The determination here is the same as in the fifth embodiment.
Then, when the controller 861 determines that cloudiness occurs, the opening time when the opening / closing door 111 is open and the outside temperature detected by the outside temperature sensor 108, which are timed by the opening / closing sensor 107a, are determined. The ventilation time by the blower fan 103 is changed according to the outside humidity detected by the outside humidity sensor 109. For example, the controller 861 makes the blowing time longer as the opening time is longer, the outside temperature is higher, and the outside humidity is higher. However, the maximum value of the ventilation time is predetermined in the controller 861, and when at least one of the opening time, the outside temperature and the outside humidity is equal to or more than the predetermined threshold value, the ventilation time is set. The maximum value is used as. As an example, the controller 861 determines the corresponding ventilation time by using the table information that defines the corresponding ventilation time for each combination of the opening time range, the outside temperature range, and the outside humidity range. Can be done.
The refrigerator 800 according to the eighth embodiment may not include the internal temperature sensors 104a to 104d, the internal humidity sensor 118, and the heater 171 in the configuration shown in FIG.

図16は、実施の形態6において、開閉センサ107aを使用した撮像動作を示すフローチャートである。
基本的な処理の流れは、実施の形態5と同様だが、画像取得部117のくもりを解消するために送風制御を用いる点が異なる。
FIG. 16 is a flowchart showing an imaging operation using the open / close sensor 107a in the sixth embodiment.
The basic processing flow is the same as that of the fifth embodiment, except that the ventilation control is used to eliminate the cloudiness of the image acquisition unit 117.

まず、開閉センサ107aがドア開動作を検知した場合(S110)、コントローラ861は、庫内の照明115を点灯するとともに(S111)、開時間の計時を開始する。
その後、開閉センサ107aがドア閉動作を検知した場合(S112)、コントローラ861は、開時間の計時を終了して、ドア開動作からドア閉動作までの開閉ドア111の開時間を特定する(S113)。
First, when the open / close sensor 107a detects the door opening operation (S110), the controller 861 turns on the lighting 115 in the refrigerator (S111) and starts timing the opening time.
After that, when the open / close sensor 107a detects the door closing operation (S112), the controller 861 ends the time counting of the opening time and specifies the opening time of the opening / closing door 111 from the door opening operation to the door closing operation (S113). ).

次に、コントローラ861は、庫外温度センサ108から庫外温度を取得するとともに、庫外湿度センサ109から庫外湿度を取得する(S114)。 Next, the controller 861 acquires the outside temperature from the outside temperature sensor 108 and the outside humidity from the outside humidity sensor 109 (S114).

そして、コントローラ861は、取得された庫外温度及び庫外湿度により、くもりの発生の有無、言い換えると、撮像待機の要否を判断する(S115)。くもりが発生していると判断した場合(S115でYes)には、処理はステップS116に進み、くもりが発生していないと判断した場合(S115でNo)には、処理はステップS119に進む。 Then, the controller 861 determines whether or not cloudiness is generated, in other words, whether or not it is necessary to wait for imaging, based on the acquired outside temperature and outside humidity (S115). If it is determined that cloudiness has occurred (Yes in S115), the process proceeds to step S116, and if it is determined that cloudiness has not occurred (No in S115), the process proceeds to step S119.

ステップS116では、コントローラ861は、開閉ドア111の開時間、庫外温度及び庫外湿度に基づいて、送風時間を決定する。コントローラ861は、送風ファン103の動作を開始する(S117)。そして、コントローラ861は、ステップS116で決定された送風時間、送風ファン103を動作させると、送風ファン103の動作を停止する(S118)。そして、処理はステップS119に進む。 In step S116, the controller 861 determines the ventilation time based on the opening time of the opening / closing door 111, the outside temperature, and the outside humidity. The controller 861 starts the operation of the blower fan 103 (S117). Then, when the controller 861 operates the blower fan 103 for the blower time determined in step S116, the controller 861 stops the operation of the blower fan 103 (S118). Then, the process proceeds to step S119.

ステップS119では、コントローラ861は、画像取得部117に庫内の撮像を行わせる。
その後、コントローラ861は、画像取得部117による撮像完了を検知した場合(S120)、庫内の照明115を消灯する(S121)。
In step S119, the controller 861 causes the image acquisition unit 117 to take an image of the inside of the refrigerator.
After that, when the controller 861 detects the completion of imaging by the image acquisition unit 117 (S120), the controller 861 turns off the lighting 115 in the refrigerator (S121).

実施の形態8によれば、ドア閉動作から撮像するまでのタイムラグを短縮し、ユーザが最新の画像を確認可能となるまでの時間を短縮することができる。 According to the eighth embodiment, the time lag from the door closing operation to the image capture can be shortened, and the time until the user can confirm the latest image can be shortened.

実施の形態8では、コントローラ861は、開時間、庫外温度及び庫外湿度に基づいて、待機時間を決定しているが、このような例に限定されない。例えば、コントローラ861は、実施の形態2と同様に、開時間に基づいて待機時間を決定してもよく、実施の形態3と同様に、庫外温度に基づいて待機時間を決定してもよく、実施の形態4と同様に、庫外湿度に基づいて待機時間を決定してもよい。また、待機時間は、予め定められた一定の時間であってもよい。さらに、待機時間は、実施の形態6のように、含有水蒸気量に基づいて、決定されてもよい。 In the eighth embodiment, the controller 861 determines the standby time based on the opening time, the outside temperature, and the outside humidity, but the present invention is not limited to such an example. For example, the controller 861 may determine the standby time based on the open time as in the second embodiment, or may determine the standby time based on the outside temperature as in the third embodiment. , The standby time may be determined based on the humidity outside the refrigerator as in the fourth embodiment. Further, the waiting time may be a predetermined fixed time. Further, the waiting time may be determined based on the amount of water vapor contained as in the sixth embodiment.

100,200,300,400,500,600,700,800 冷蔵庫、 101 断熱材、 102 冷却機、 103 送風ファン、 104 温度センサ、 105 圧縮機、 106 食品収納ケース、 107 開閉センサ、 108 庫外温度センサ、 109 庫外湿度センサ、 110,710 冷蔵室、 111,711 開閉ドア、 112 操作部、 113 食品棚、 114 チルド室、 115 照明、 116 ポケット、 117 画像取得部、 118 庫内湿度センサ、 120 切替室、 121 引き出しドア、 130 製氷室、 131 引き出しドア、 140 冷凍室、 141 引き出しドア、 150 野菜室、 151 引き出しドア、 160,260,360,460,560,660,760,860 制御部、 161,261,361,461,561,661,761,861 コントローラ、 162 画像保存部、 163 画像加工部、 171 ヒータ、 190 メモリ、 191 プロセッサ、 192 処理回路。 100,200,300,400,500,600,700,800 Refrigerator, 101 Insulation material, 102 Cooler, 103 Blower fan, 104 Temperature sensor, 105 Compressor, 106 Food storage case, 107 Open / close sensor, 108 Outside temperature Sensor, 109 Outdoor humidity sensor, 110,710 Refrigerator room, 111,711 Open / close door, 112 Operation unit, 113 Food shelf, 114 Chilled room, 115 Lighting, 116 pockets, 117 Image acquisition unit, 118 Internal humidity sensor, 120 Switching room, 121 drawer door, 130 ice making room, 131 drawer door, 140 freezer room, 141 drawer door, 150 vegetable room, 151 drawer door, 160, 260, 360, 460, 560, 660, 760, 860 control unit, 161 , 261, 361, 461, 561, 661, 761, 861 controller, 162 image storage unit, 163 image processing unit, 171 heater, 190 memory, 191 processor, 192 processing circuit.

Claims (7)

物を冷やす冷蔵庫であって、
前記物を収納して冷やす収納室と、
前記収納室に前記物を出し入れする際に開閉されるドアと、
前記ドアの開閉を検知するセンサと、
前記収納室内の画像を撮像する撮像部と、
前記撮像部を暖めるヒータと、を備え、
前記ドアが閉められたことを前記センサが検知してから、前記冷蔵庫の外の温度及び湿度により定まる露点温度よりも、前記収納室内の温度が低い場合に、前記ヒータを動作させて待機時間を計測し、前記待機時間の経過後に、前記撮像部に前記収納室内の画像を撮像させ、
前記ドアが閉められたことを前記センサが検知してから、前記収納室内の温度が前記露点温度以上である場合に、前記待機時間の経過前に、前記撮像部に前記収納室内の画像を撮像させること
を特徴とする冷蔵庫。
A refrigerator that cools things
A storage room for storing and cooling the above items,
A door that opens and closes when the item is taken in and out of the storage room,
A sensor that detects the opening and closing of the door and
An imaging unit that captures images in the storage room,
A heater for warming the imaging unit is provided.
Said door is closed from the sensor detects, than determined dew point temperature by the temperature and humidity of the outside of the refrigerator, wherein when the temperature of the storage chamber is low, the waiting time by operating the pre-Symbol heater After the elapse of the waiting time, the image pickup unit is made to take an image of the storage chamber.
Said door is closed after detecting said sensor, when the temperature of the storage chamber is the dew point temperature or higher, prior to the expiration of the previous SL waiting time, an image of the storage chamber to the imaging unit A refrigerator characterized by having an image taken.
前記待機時間は、予め定められた一定の時間であること
を特徴とする請求項1に記載の冷蔵庫。
The refrigerator according to claim 1, wherein the waiting time is a predetermined fixed time.
物を冷やす冷蔵庫であって、
前記物を収納して冷やす収納室と、
前記収納室に前記物を出し入れする際に開閉されるドアと、
前記ドアの開閉を検知するセンサと、
前記収納室内の画像を撮像する撮像部と、
前記撮像部を暖めるヒータと、を備え、
前記ドアが閉められたことを前記センサが検知してから、前記冷蔵庫の外の温度及び湿度により定まる露点温度よりも、前記収納室内の温度が低い場合に、待機時間を決定し、前記ヒータを動作させて前記待機時間を計測し、前記待機時間の経過後に、前記撮像部に前記収納室内の画像を撮像させ、
前記ドアが閉められたことを前記センサが検知してから、前記収納室内の温度が前記露点温度以上である場合に、前記撮像部に前記収納室内の画像を撮像させること
を特徴とする冷蔵庫。
A refrigerator that cools things
A storage room for storing and cooling the above items,
A door that opens and closes when the item is taken in and out of the storage room,
A sensor that detects the opening and closing of the door and
An imaging unit that captures images in the storage room,
A heater for warming the imaging unit is provided.
Said door is closed after detecting said sensor, said than outside temperature and dew point temperature determined by the humidity of the refrigerator, wherein when the temperature of the storage chamber is low, determines the waiting time, before Symbol heater To measure the waiting time, and after the waiting time elapses, the imaging unit is made to take an image of the storage chamber.
Refrigerators that the door is closed after detecting said sensor, when the temperature of the storage chamber is the dew point temperature or more, characterized in that to capture an image of the storage chamber prior SL imaging unit ..
前記待機時間は、前記ドアが開かれてから前記ドアが閉じられるまでの間の時間が長ければ長いほど長いこと
を特徴とする請求項1に記載の冷蔵庫。
The refrigerator according to claim 1, wherein the waiting time is longer as the time between the opening of the door and the closing of the door is longer.
前記待機時間は、前記冷蔵庫の外の温度が高いほど長いこと
を特徴とする請求項1に記載の冷蔵庫。
The refrigerator according to claim 1, wherein the waiting time is longer as the temperature outside the refrigerator is higher.
前記待機時間は、前記冷蔵庫の外の湿度が高いほど長いこと
を特徴とする請求項1に記載の冷蔵庫。
The refrigerator according to claim 1, wherein the waiting time is longer as the humidity outside the refrigerator is higher.
前記待機時間は、前記収納室内の含有水蒸気量が多いほど長いこと
を特徴とする請求項1に記載の冷蔵庫。
The refrigerator according to claim 1, wherein the waiting time is longer as the amount of water vapor contained in the storage chamber is larger.
JP2016142002A 2016-07-20 2016-07-20 refrigerator Expired - Fee Related JP6910113B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016142002A JP6910113B2 (en) 2016-07-20 2016-07-20 refrigerator

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016142002A JP6910113B2 (en) 2016-07-20 2016-07-20 refrigerator

Publications (2)

Publication Number Publication Date
JP2018013273A JP2018013273A (en) 2018-01-25
JP6910113B2 true JP6910113B2 (en) 2021-07-28

Family

ID=61021327

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016142002A Expired - Fee Related JP6910113B2 (en) 2016-07-20 2016-07-20 refrigerator

Country Status (1)

Country Link
JP (1) JP6910113B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12149677B2 (en) 2022-03-28 2024-11-19 Haier Us Appliance Solutions, Inc. Refrigerator camera modules and methods for addressing persistent conditions on the camera lens

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111503992A (en) * 2020-04-29 2020-08-07 四川虹美智能科技有限公司 Refrigerator control method and device
JP7389709B2 (en) * 2020-05-08 2023-11-30 東芝ライフスタイル株式会社 refrigerator
JP2023117086A (en) * 2022-02-10 2023-08-23 東芝ライフスタイル株式会社 refrigerator

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003207258A (en) * 2002-01-16 2003-07-25 Toshiba Corp refrigerator
JP6117565B2 (en) * 2013-02-25 2017-04-19 三菱電機株式会社 Operation method of monitoring system in refrigerator
JP6411753B2 (en) * 2013-03-12 2018-10-24 東芝ライフスタイル株式会社 Refrigerator and camera device
JP6485678B2 (en) * 2013-03-29 2019-03-20 パナソニックIpマネジメント株式会社 Refrigerator and refrigerator system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12149677B2 (en) 2022-03-28 2024-11-19 Haier Us Appliance Solutions, Inc. Refrigerator camera modules and methods for addressing persistent conditions on the camera lens

Also Published As

Publication number Publication date
JP2018013273A (en) 2018-01-25

Similar Documents

Publication Publication Date Title
US9961928B2 (en) Refrigerator defrost compartment
JP6305122B2 (en) Refrigerator and network system equipped with refrigerator
JP6305207B2 (en) Refrigerator and network system
JP6910113B2 (en) refrigerator
JP7575936B2 (en) Refrigeration System
US9328953B2 (en) Refrigerator and controlling method thereof
JP6117565B2 (en) Operation method of monitoring system in refrigerator
KR20170087705A (en) Storage apparatus and control method thereof
KR101659937B1 (en) Refrigerator and method for controlling the same
JP5985029B2 (en) refrigerator
JP5827292B2 (en) refrigerator
CN102918342A (en) Cold insulation box
CN106225414A (en) Controlling method for refrigerator and electric refrigerator
JP2020085407A (en) Refrigerated storage
JP6799958B2 (en) refrigerator
JP2016223735A (en) refrigerator
TWI675174B (en) refrigerator
JP7289084B2 (en) refrigerator
JP6292174B2 (en) refrigerator
US10429863B2 (en) Systems and methods for refrigerator control
JP2015158295A (en) Cold temperature and hot temperature storage device
KR20160136914A (en) Refrigerator
JP6641109B2 (en) refrigerator
JP4759406B2 (en) Cooling storage
CN109751830B (en) Refrigeration equipment and its state detection method and device

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20160720

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190521

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200310

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200421

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20200526

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200701

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20200701

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20200710

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20200714

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20200807

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20200818

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20201006

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20201013

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20201215

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20210302

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210415

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210511

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20210601

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20210706

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20210706

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210706

R150 Certificate of patent or registration of utility model

Ref document number: 6910113

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees