本发明涉及一种冰箱及其控制方法,尤其涉及一种冰箱及其控制方法,即使冰箱的门没有被用户打开,该冰箱也能够提供关于储存在冰箱中的食品的信息。
背景技术:
一般而言,冰箱是用于通过制冷循环的驱动提供冷空气并用于在低温下储存食物的装置。传统的冰箱的功能仅为在低温下储存食物。然而,近来,越来越需要除了储存食物的功能以外的附加功能。为了检查冰箱的内部以收纳和储存特定物品,需要打开冰箱的门。此外,在用户希望在市场或超市购物却未确定储存在冰箱中的食物的数量和种类的情况下,可能会购买多余的食物,或者未购买必需的食物。
在现有技术中,第3450907号日本专利和公开号为2004-183987的日本专利申请公开了在门上安装摄像机以拍摄冰箱的内部。此外,公开号为2001-294308的日本专利申请公开了在冰箱中、在抽屉里及在门上安装摄像机。
然而,根据上述现有的文献,安装在冰箱中的摄像机的拍摄范围是有限的。因此,需要使用多个摄像机来拍摄各种储存区域。
因此,需要通过减少安装在冰箱中的摄像机数量并增加由摄像机拍摄的区域的范围来提高摄像机的拍摄效率。
此外,根据现有技术,在获取抽屉内部的照片时会出现各种问题。例如,一种获取在期望的时间拍摄的图片的特定方法,存在关于在摄像机上发生结露的问题,并且并未具体阐述对摄像机的功耗的改进。
更具体地,在冰箱中存在包括抽屉的储存区域的情况下,考虑到多个储存区域的独特性和位置关系,现有技术在为用户提供最佳信息时缺乏具体性(concreteness)。
技术实现要素:
技术问题
本发明基本上为了解决上述问题而构思。
为了解决问题,本发明的一个目的在于,一种冰箱的储藏室显示设备及其控制方法,被配置为提供关于储存在冰箱中的食物的信息,而无需用户打开冰箱的门
为了解决问题,本发明的另一目的在于,一种冰箱及其控制方法,允许用户直观地识别关于储存在储藏室中多个储存区里的食物的信息
为了解决问题,本发明的另一目的在于,一种冰箱及其控制方法,允许用户直观地识别多个储存区域之间的位置关系并且能够大致与用户的视点相符地提供关于储存食物的信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,能够可操作地将驱动摄像机的时间、实施拍摄操作的时间与门的打开和/或门的旋转角度相联系,以降低摄像机的功耗,并在最佳时间通过摄像机获取关于储存的食物的信息。
为了解决问题,本发明的另一目在于,一种冰箱,能够防止由于结露而使图片质量下降。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,能够向用户提供关于储存在冰箱中的食物的最新信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,允许管理员或用户校正用于为用户显示的图片的区域,以用最佳状态向用户提供关于储存的食物的信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,通过将摄像机固定到机壳来防止摄像机晃动,能够向用户提供关于储存的食物的最佳信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,通过经由软件识别关于抽屉的状态的信息,能够简化构造,并有效地识别和提供关于储存在抽屉中的食物的信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,通过经由一台摄像机连续实施拍摄,能够提供关于储存在包括抽屉的多个储存区域当中的每一个中的食物的最新信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,能够使用一台摄像机提供关于储存在抽屉的内部空间和在竖直方向上至少部分地与抽屉的内部空间重叠的另一储存区域中的食物,或者储存在抽屉的内部空间和在竖直方向上至少部分地与抽屉的内部空间重叠的另一抽屉的内部空间中的食物的信息。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,可以防止由于结露而使通过摄像机拍摄的图片的质量下降。
为了解决问题,本发明的另一目在于,一种冰箱,通过将安装在冰箱中的摄像机的数量限制为一台,能够减少冰箱的必要费用。
为了解决问题,本发明的另一目在于,一种冰箱及其控制方法,能够有效地防止由于摄像机而增加功耗。
为了解决问题,本发明的另一目在于,一种冰箱,能够使控制器和存储器单元(memory unit)的负荷最小化,并有效地连续处理拍摄到的图片。
问题的解决方案
本发明的目的可通过提供一种冰箱来实现,包括:储藏室,由固定的隔热壁形成在所述冰箱的机壳中,所述储藏室设置有存取开口;门,可旋转地设置至所述机壳,以打开和关闭所述存取开口;抽屉,设置在所述储藏室中;摄像机,固定到所述储藏室的顶板,以拍摄布置在所述储藏室中所述抽屉的外部空间中用于储存食物的区域(第一区域)和布置在所述储藏室中所述抽屉的内部空间中用于储存食物的区域(第二区域)这两者;以及控制器,通过包含所述第一区域和所述第二区域这两者的图片的拍摄时间,从图片中分开第一区域的部分(第一区域图片)和第二区域的部分(第二区域图片),以独立地划分和存储第一区域图片和第二区域图片。
在本发明的另一个方面中,本文提供一种冰箱,包括:储藏室,由固定的隔热壁形成在所述冰箱的机壳中,所述储藏室设置有存取开口;门,可旋转地设置于所述机壳,以打开和关闭所述存取开口;至少一个抽屉,设置在所述储藏室中;摄像机,固定到所述储藏室的顶板,以拍摄布置在所述储藏室中所述抽屉的外部空间中用于储存食物的区域(第一区域)和布置在所述储藏室中所述抽屉的内部空间中用于储存食物的区域(第二区域)这两者;控制器,通过包含所述第一区域和所述第二区域两者的图片的拍摄时间,从图片中分开第一区域的部分(第一区域图片)和第二区域的部分(第二区域图片),以独立地划分和存储第一区域图片和第二区域图片;以及显示器,显示所述第一区域图片和第二区域图片,使得第一区域图片和第二区域图片彼此被划分开。
在本发明的另一个方面中,本文提供一种冰箱,包括:储藏室,由固定的隔热壁形成在所述冰箱的机壳中,所述储藏室设置有存取开口;门,可旋转地设置于所述机壳,以打开和关闭所述存取开口;至少一个抽屉,设置在所述储藏室中;摄像机,固定到所述储藏室的顶板,以拍摄布置在所述储藏室中所述抽屉的外部空间中用于储存食物的区域(第一区域)和布置在所述储藏室中所述抽屉的内部空间中用于储存食物的区域(第二区域)这两者;以及控制器,从在门在被打开后又被关闭的特定时间拍取的图片中分开第一区域的部分(第一区域图片),并从在抽屉被抽出之后又被送入的特定时间拍取的图片中分开第二区域的部分(第二区域图片),以独立地分开、划分、储存和更新所述第一区域图片和第二区域图片。
在本发明的另一个方面中,本文提供一种冰箱,包括:储藏室;抽屉,可移动地设置在所述储藏室中,所述抽屉包括标记;摄像机,固定地设置于所述储藏室的顶板,以从所述抽屉的外部拍摄所述抽屉;以及控制器,在通过所述摄像机连续拍取的图片中感测所述标记的位置,以确定关于所述抽屉的状态信息,所述状态信息包括以下中的至少一个:所述抽屉被抽出的程度,所述抽屉是否被抽出,所述抽屉的移动方向,以及所述抽屉的停止状态或移动状态。
在本发明的另一个方面中,本文提供一种冰箱,包括:储藏室,由固定的隔热壁形成在所述冰箱的机壳中,所述储藏室设置有存取开口;门,可旋转地设置至所述机壳,以打开和关闭所述存取开口;至少一个抽屉,设置在所述储藏室中;至少一个搁架,设置在所述储藏室中,所述至少一个搁架位于所述抽屉的上侧;以及摄像机,固定到所述储藏室的顶板且位于所述搁架的前边缘与所述存取开口之间,以拍摄设置在允许所述搁架储存食物的外部上方空间中的区域(第一区域)和设置在待储存的所述抽屉的内部空间中的区域(第二区域)这两者。
在本发明的另一个方面中,本文提供一种冰箱,包括:储藏室,配置有在其前表面中的存取开口、以及上壁、下壁、两个侧壁和后壁,并且在其中设置有被多个搁架划分的搁架区和具有至少一个抽屉的抽屉区,所述上壁、下壁、两个侧壁和后壁由隔热材料形成;机壳,在所述机壳中设置有所述储藏室;至少一个门,紧密地接触所述储藏室的所述前表面,以打开和关闭所述储藏室;以及摄像机设备,安装在所述储藏室的所述上壁处,位于所述储藏室的所述存取开口与安装在所述冰箱中的所述搁架的前边缘之间,其中所述摄像机设备包括:摄像机模块,被配置为容置摄像机镜头和驱动摄像机所需的电气元件,并设置有以特定距离与摄像机镜头间隔开的透明窗;以及摄像机壳体部,被配置为在摄像机壳体部中预定位置处定位并固定摄像机模块部,其中摄像机壳体包括与储藏室的上壁相邻的固定面、被形成为面对储藏室的存取开口的前表面、将前表面连接到后表面的两个侧表面、以及设置有允许摄像机模块的摄像机窗口穿过其中暴露的开口的顶表面,其中摄像机壳体的前表面被形成在低于形成于摄像机壳体的顶表面中的开口的位置处。
在本发明的另一个方面中,本文提供一种冰箱,包括:一台摄像机,拍取用于储存食物的储藏室的内部的图片;控制器,将由所述摄像机拍取的一张图片划分为多个图像,以管理该图片;以及显示器,独立地显示所述多个图像,其中所述储藏室包括:具有置于搁架上的食物的第一区域、由送入或抽出所述搁架的下方空间的抽屉的内部空间限定的第二区域、以及形成在所述抽屉的前方的底部的第三区域,当所述抽屉从所述下方空间抽出时所述第三区域与所述第二区域重叠,其中所述一台摄像机拍摄所述第一区域、第二区域和第三区域。
在本发明的另一个方面中,本文提供一种冰箱的控制方法,包括:感测门是否旋转大于或等于特定角度的角度以打开储藏室;用一台摄像机拍取一张图片,包括具有置于搁架上的食物的第一区域、由送入或抽出所述搁架的下方空间的抽屉的内部空间限定的第二区域、以及形成在所述抽屉的前方的底部以在所述抽屉从所述下方空间抽出时与所述第二区域重叠的第三区域;将所述一张图片划分为第一区域的第一图像、第二区域的第二图像以及第三区域的第三图像;独立地更新所述第一图像、第二图像和第三图像中的至少一个;以及显示更新后的图像。
在本发明的另一个方面中,本文提供另一种冰箱的控制方法,所述冰箱设置有抽屉和摄像机,所述方法包括:识别所述抽屉的关闭;在所述抽屉开始关闭的时刻使用所述摄像机获取所述抽屉的内部的最终图像;以及显示所述最终图像。
在本发明的另一个方面中,本文提供一种冰箱,包括:可抽出的抽屉;抽屉感测单元,以感测所述抽屉的关闭或打开;摄像机,获取所述抽屉的内部的图像;以及控制器,当识别出所述抽屉的关闭时,控制所述摄像机在所述抽屉开始关闭的时刻获取所述抽屉的内部的最终图像。
发明的有益效果
根据本发明的实施例,用户不需要打开冰箱的门,即可获得关于储存在冰箱中的食物的信息。由此,可以防止从储藏室泄漏冷空气。因此,可以防止不必要地损失冷空气并且可以提高冰箱的能效。
此外,根据本发明的实施例,可以将关于储存在冰箱中的食物的最新信息提供给用户。因此,可以提高向用户提供关于储存的食物的信息的可靠性。
此外,根据本发明的实施例,可以通过单台摄像机提供关于储存在不同位置中的食品的信息。因此,添加允许安装仅一台摄像机的结构,并且因此可以有利于冰箱的设计。特别是,可以降低使用摄像机导致的成本。
根据本发明的实施例,可以防止安装在冰箱中的摄像机上的结露。因此,可以将由摄像机拍摄的图像稳定地提供给用户。
根据本发明的实施例,用户可以远程了解冰箱的当前内部状况,并且从外部供应商接收关于食物的必要信息。
根据本发明的实施例,冰箱可以提供由摄像机拍摄的抽屉内部的照片的屏幕,其与用户在用户使用冰箱时实际看到的类似。
根据本发明的实施例,冰箱可以在一个屏幕上向用户提供在空间上重叠而不可见的位置的平面图像。
附图说明
附图被包括进来以提供对本发明的进一步理解,附图示出本发明的实施例,并且与说明书一起用于解释本发明的原理。
在附图中:
图1是示出根据本发明的示例性实施例的冰箱的正视图;
图2是示出图1的门的视图,其处于打开位置;
图3是示出设置在储藏室的底部的第三区域的视图;
图4是示出本发明的一个实施例的控制框图;
图5是示出摄像机的视角的视图;
图6是图5的横剖视图;
图7示出具有如图6所示定位的构件的摄像机拍摄的图像;
图8是示出摄像机的位置的选择的视图;
图9是示出冰箱的主要部分的剖视图;
图10是示出门传感器的操作的视图;
图11是具体示出左铰链单元和右铰链单元的视图;
图12示出提供给用户的屏幕;
图13是调整由摄像机拍摄的照片的视图;
图14是示出摄像机的透视图;
图15是示出摄像机的主要部件的视图;
图16是图14的剖视图;
图17是示出加热器的设置的视图;
图18是示出竖直倾斜地安装至冰箱的摄像机拍摄的照片的视图;
图19是示出水平倾斜地安装至冰箱的摄像机拍摄的照片的视图;
图20是示出在组装状态下的摄像机壳体的视图;
图21是示出第一壳体的正视图;
图22是示出第二壳体的正视图;
图23是示出安装有摄像机的第一壳体的正视图;
图24是图23的横剖视图;
图25是示出安装在内壳中的摄像机壳体的剖视图;
图26示出根据一个实施例的摄像机与对照例进行功耗比较的表格;
图27是比较所提供的待机电流与驱动电流的视图;
图28和图29是示出摄像机拍摄的开始时间和摄像机的连续拍摄的视图;
图30是示出根据一个实施例的抽屉传感器的视图;
图31是示出图30的抽屉传感器感测抽屉的移动的方法的视图;
图32是示出抽屉上显示的标记的视图;
图33(a)是示出显示处于抽出位置的左、右抽屉的照片的视图;
图33(b)是示出显示处于送入位置的左抽屉和处于抽出位置的右抽屉的照片的视图;
图34是描述根据本发明的一个实施例的冰箱的操作的流程图;
图35是描述根据本发明的一个实施例的识别和跟踪标记的方法的流程图;
图36是示出根据本发明的一个实施例,用于在抽屉被送入或抽出时感测时间的标记的视图;
图37是示出根据本发明的一个实施例的标记的形状的视图;
图38是示出根据本发明的一个实施例感测抽屉的关闭的方法的流程图;
图39是示出根据本发明的一个实施例,当感测到抽屉的关闭终止时实施的冰箱的操作的流程图;
图40是示出根据本发明的另一实施例,控制在特定时间拍摄冰箱中的特定区域的图像的方法的流程图;
图41是示出各种形式的标记的视图;
图42是示出识别标记的位置的方法的视图;
图43是示出抽屉的存取开度的视图;
图44是示出标记的移动的视图;
图45是根据本发明的一个实施例的控制流程图;
图46是示出图45中所示的实施例的变型的控制流程图;
图47是示出图46的实施例的变型的控制流程图;
图48是图45的实施例的另一变型的控制流程图;
图49是示出图45的实施例的另一变型的视图;
图50是根据本发明的另一实施例的控制流程图;
图51是示出在设置有用于存取打开和关闭储藏室的两个门和两个抽屉的情况下更新图像的过程的视图;
图52是示出根据另一实施例的操作冰箱的方法的梯形图;
图53是示出根据另一实施例的操作冰箱的方法的梯形图;
图54是示出根据另一实施例的操作冰箱的方法的梯形图;
图55是示出根据另一实施例的操作冰箱的方法的梯形图;
图56是示出摄像机的加热器的操作的视图;
图57是示出在摄像机的透明窗上基于温度而发生结露的实验结果的视图;
图58是示出透明窗的剖视图;
图59和图60是示意性地示出将摄像机安装在内壳处的视图;
图61是示出根据本发明的另一实施例的冰箱的视图;
图62是示出从图61的冰箱向用户提供的屏幕的视图;以及
图63是示出调整用图61的冰箱的摄像机拍摄的图片的方法的视图。
具体实施方式
现在将详细参考本发明的优选实施例,其示例示于附图中。
图1是示出根据本发明的示例性实施例的冰箱的正视图,并且图2是示出图1的门的视图,其处于打开位置。下面将参照图1和图2进行描述。
根据实施例的冰箱适用于具有水平划分的冷藏室和冷冻室并且冷冻室设置在冷藏室之上的顶部安装式(top mount-type)冰箱,以及具有竖直划分的冷冻室和冷藏室的横排(side by side-type)式冰箱。
在下面公开的实施例中,将对具有水平划分的冷藏室和冷冻室并且冷冻室设置在冷藏室下方的底部冷冻式(bottom freezer-type)冰箱进行描述。
冰箱的本体包括形成用户看到的冰箱的整个外部的外壳10,和形成储存食物的储藏室22的内壳12。外壳10与内壳12之间可以形成一预定的空间,以形成允许冷空气从中循环的通路。此外,隔热材料可以填充外壳10与内壳12之间的空间,以保持储藏室22的内部处于相对于储藏室22外部的低温。
此外,被配置为循环制冷剂以产生冷空气的制冷循环系统安装在形成于外壳10与内壳12之间的空间中的机室(machine chamber)(未示出)中。制冷循环系统可以用来保持冰箱的内部处于低温,以保持储存在冰箱中的食物的新鲜度。制冷循环系统包括被配置为压缩制冷剂的压缩机,以及被配置为将制冷剂从液态改变成气态使得制冷剂与外部进行热交换的蒸发器(未示出)。
冰箱设置有用以打开储藏室的门。这里,门可以包括冷冻室门30和冷藏室门20。每个门的一端枢转地安装至冰箱的本体处。可以设置多个冷冻室门30和多个冷藏室门20。即,如图2所示,冷冻室门30和冷藏室门20可以被安装为通过围绕冰箱的两个边缘旋转而向前打开。
外壳10与内壳12之间的空间可以填充有发泡剂以对储藏室22进行隔热。
通过内壳12和门20在储藏室22中形成隔热空间。一旦由门20关闭储藏室22,可以在其中形成隔离且隔热的空间。换句话说,通过门200的隔热壁和壳体10和12的隔热壁,储藏室22与外部环境隔离。
从机室提供的冷空气可以流到储藏室22中的任何地方。因此,储存在储藏室22中的食物可以保持低温。
内壳12可以设置有形成在储藏室22底部处的阻隔层60。阻隔层60可以安装在储藏室22的下端,以将储藏室划分为冷冻室和冷藏室。阻隔层60可以具有预定的厚度并形成于内壳12处。阻隔层60可以水平延伸。
储藏室22可以包括放置食物的搁架40。这里,储藏室22可以包括多个搁架40,并且食品可以置于每一个搁架40上。搁架40可以水平定位以对储藏室内部进行分区。
抽屉50安装在储藏室22中,使得抽屉50可被送入储藏室22或从储藏室22抽出。诸如食品等物品可以容纳并储存在抽屉50中。可以在储藏室22中并排设置两个抽屉50。用户可以打开储藏室22的左门以触及设置在左侧的抽屉。另一方面,用户可以打开储藏室22的右门以触及设置在右侧的抽屉。
用以储存食物的空间可以形成在阻隔层60中。由于阻隔层60设置在内壳12上而不是在门上,所以在门旋转时阻隔层60保持静止。这使用户可以稳定地储存或拿取食物。
储藏室22的内部可以被分区为位于搁架40上方的空间、由抽屉50形成的空间以及由阻隔层60形成的空间。由此,可以设置用以储存食物的多个分区空间。
这里,提供给储藏室22的冷空气可以流动到布置在一个储藏室22中的每个空间。即,分区空间允许冷空气流动至其中,并且在这里,所述空间具有与上述储藏室不同的含义。
具体而言,在空间之间可以存在温度差,但与形成隔热空间的储藏室不同,所述空间不阻止它们之间的热传递。
提供到一个储藏室的冷空气可能不会被允许自由流动到另一储藏室,但可以被允许自由地流动到设在一个储藏室中的分区空间。即,位于搁架40上方的冷空气被允许流动到由抽屉50形成的空间中。
根据本发明的实施例的冰箱还可以包括摄像机70,其被配置为拍摄储藏室22内部的图像。这里,摄像机70可以保持在固定的位置,以拍摄同一部分的图像。
具体而言,摄像机70可以安装于内壳12的上壁以面朝下。由此,可以拍摄储存在储藏室22中的食品的图像。所拍摄的图像可以具有当用户向下看内部时用户看到的食物的视图,即,当用户实际使用冰箱时用户将看到的视图。
具体而言,摄像机70可以安装于对应于完全打开的抽屉的内部的位置。由此,所拍摄的图像可以提供类似于当用户向下看抽屉的内部时用户看到的视图的图形。
这里,储藏室22可以包括食物置于搁架40上的第一区域42和由抽屉50的内部空间限定的第二区域52。储藏室22还可以包括除第一区域42和第二区域52之外的第三区域62。当抽屉50被抽出时第三区域62可以与第二区域52重叠,稍后将更详细地描述。第一区域42和第二区域52在储藏室22中可以具有不同的高度。即,第一区域42的高度可以大于第二区域52的高度。
由摄像机70拍摄的图像和关于冰箱的各种信息可以通过布置在冰箱的前表面上的显示器14提供给用户。此外,用户可以通过显示器14控制冰箱。
提供到储藏室22的冷空气可以流动到第一区域42和第二区域52。位于一个区域中的冷空气可以流动到其它区域中。
图3是示出设置在储藏室的底部的第三区域的视图。下面将参照图3进行描述。
阻隔层60可以设置有可以储存食物的凹部。此部分可以被限定为第三区域62。第三区域62是形成在阻隔层60中的空间。
第三区域,作为设置在不同于第一区域和第二区域的位置处的储存空间,可以向用户提供用于储存食物的另一个空间。
诸如鸡蛋等经常使用的食品可以储存在第三区域62中。为此,可以设置用以打开第三区域62的盖68。在这种情况下,盖68优选地由透明材料形成,以允许位于上侧的摄像机70拍摄储存在第三区域62中的食物的图像,尽管盖68位于摄像机70与食物之间。
抽屉50设置在阻隔层60的上侧。因此,由于抽屉50位于搁架下方的空间中,所以用户可以触及第三区域62。
另一方面,由于抽屉50从搁架下方的空间抽出,如果第三区域62被设置在抽屉50的上侧,则用户无法触及第三区域62。
即,由于抽屉50朝向用户抽出,所以抽屉50与第三区域62彼此重叠。在这种情况下,当用户向下看抽屉50时,抽屉50的内部可以被用户看到,而第三区域62可能不可见。
另一方面,当抽屉50被定位为不朝向用户抽出时,抽屉50与第三区域62被设置为彼此不重叠。当用户向下看第三区域62时,仅第三区域62可以被看到,而抽屉50的内部可能对用户不可见。
第一区域42、第二区域52和第三区域62可以在储藏室22中具有不同的高度。即,第一区域42的高度可以大于第二区域52和第三区域62的高度,并且第二区域52的高度可以大于第三区域62的高度。
提供到储藏室22的冷空气可以流动到第一区域42、第二区域52和第三区域62。位于每个区域中的冷空气可以流动到另一个区域。
即,被摄像机70拍摄图像的区域可以是储藏室22中的多个储存空间。摄像机70拍摄一个储藏室22内部的图像,但一个图像可以包含关于多个分区的储存空间的信息。
摄像机70可以拍摄照片,使得多个储存空间被暴露在照片上。尤其是,可以基于拍摄时间拍摄不同的储存空间。
例如,设置在固定位置中的摄像机可以根据门或抽屉的位置关系以及拍摄照片的时间,选择性地拍摄第一区域和第二区域,或选择性地拍摄第二区域和第三区域。稍后将详细描述。
图4(a)是示出本发明的一个实施例的控制框图。下面将参照图4(a)进行描述。
所示的实施例可以包括控制器100,控制器100将由摄像机70拍摄的照片划分成多个图像来管理照片。多个图像可以表示拍摄到的照片由控制器100处理或校正的多个部分。
控制器100可以命令摄像机70拍摄照片,并接收从摄像机70传送的拍摄到的照片。
此外,控制器100可以将经划分的图像中的一些图像提供给显示器14,以向用户提供关于储存在储藏室22中的食物的最新信息。显示器14可以安装在冰箱的前表面上,或者可以构建与冰箱分开的设备。即,用户可以通过诸如移动电话等外部通信终端接收与储藏室22相关的图像并获取信息。
控制器100可以将由像头70拍摄到的照片划分成独立图像的多个区域,并且将其提供给显示器14。此时,由控制器100选择的照片可以包括在用户最近一次存取储藏室22以从储藏室22拿取食物或将食物置于储藏室22中之后关于储藏室22的最新状态的信息。
根据本实施例,冰箱可以包括门开关110,门开关110能够感测门20打开储藏室22还是关闭储藏室22。这里,门开关110可以设置至外壳10。由此,当门20接触外壳10时其可以感测门20关闭储藏室22。此外,如果门20不与外壳10接触,则门开关110可以感测门20打开储藏室22。
根据本实施例,冰箱还可以包括门传感器120,以感测门20的旋转角度。这里,门传感器120可以感测门20的旋转方向和旋转角度。例如,当门20旋转大于或等于特定值的角度时,在门传感器120中发生改变。由此,门传感器120可以感测到门20已经旋转大于或等于特定值的角度。此外,当门20沿特定方向旋转时,门传感器120可以感测根据旋转方向产生的脉冲的改变,以感测门20的旋转方向。门传感器120可以被配置为不同于上述配置。
门传感器120还可以设置有发光部和光接收部。由此,门传感器120可以确定从发光部发出的光是否传递到光接收部,以感测门20的旋转角度。
尤其是,可以仅当门开关110确定门20已经打开储藏室22时才驱动门传感器120。
一旦门传感器120确定门20已经旋转特定的角度,摄像机70即可以拍摄照片。在这种情况下,摄像机70不在门开关110感测到门20打开时立即开始拍摄照片,而是仅当门传感器120达到特定角度时拍摄照片。
一旦摄像机70开始拍摄的操作,可以以预定的时间间隔不断拍摄照片。当门传感器120确定门20被打开特定角度时,摄像机70可以连续地拍摄照片,直到提供停止拍摄照片的命令,而不是仅拍摄一张照片。
控制器100可以包括抽屉感测单元130,以感测抽屉50的抽出或送入。这里,抽屉感测单元130可以表示为控制器100中的构件,其解读由摄像机70拍摄的照片。抽屉感测单元130不仅可以感测抽屉50的移动,还可以感测抽屉50移动的方向。
具体而言,抽屉感测单元130可以通过软件来实现。抽屉感测单元130可以使用由摄像机70拍摄的照片中拍摄到的信息来感测抽屉50的位置。
抽屉50可以设置有被称为标记的指示物,以通过拍摄到的标记的照片提供以下信息:抽屉50是否已经进入特定部分,如果抽屉50已进入特定部分,抽屉50是已否停止,以及在停止之后抽屉50的移动方向是否改变。稍后将更具体地描述标记。
由于标记被置于抽屉上,所以标记与抽屉50作同样的移动。因此,无需提供单独的传感器来感测抽屉的移动,使用关于由摄像机70拍摄到的照片的信息可以获取关于抽屉50的移动的各种信息。
由摄像机70拍摄到的照片可以被存储在存储器单元18中。这里,存储器单元18可以设置到冰箱或与冰箱分开设置的设备。存储器单元18和显示器14可以一同设置在冰箱处或者设置在不同于冰箱的装置中,例如连接至冰箱和网络的服务器,或连接至冰箱和网络的终端。
并非所有由摄像机70拍摄的照片可以被存储在存储器单元18中。例如,在控制器100不发出命令以选择特定的照片的情况下,可以删除存储在存储器单元18中的旧照片,并且当前拍摄的照片可以被存储在存储器单元18中(先入先出)。存储器单元18可以仅存储由摄像机70拍摄的照片的一部分,以减少存储量。
图4(b)是示出本发明的实施例的变型的控制框图。下面将参照图4(b)进行描述。
在图4(b)中示出与图4(a)所示的实施例不同的实施例,抽屉感测单元130可以不依赖于从由摄像机70拍摄的照片获得的信息来感测抽屉50的移动。
例如,抽屉感测单元130可以设置有多个霍尔传感器。霍尔传感器可以安装在抽屉50的移动路径上。由此,当抽屉50移动时,可以感测到相应的霍尔传感器的改变以确定抽屉50的位置和移动方向。
通过感测抽屉50的移动,在由摄像机70进行照片拍摄的同时,抽屉感测单元130可以估计抽屉50的内部视图出现在由摄像机70拍摄的照片中的时间。即,抽屉感测单元130可以感测关于存储在抽屉50中的物品的信息呈现在由摄像机70拍摄的照片中的时间。
通过感测抽屉50的移动,抽屉感测单元130可以感测在用户使用抽屉50之后确定抽屉50的最新状态的时间。即,抽屉感测单元130可以感测在用户完成使用抽屉之后在由摄像机70拍摄的照片中包括最新的信息的时间。即,可以直接识别送入或拿取物品的终止或更新物品的终止的时间
图5是示出摄像机的视角的视图。下面将参照图5进行描述。
在图5中,抽屉50被抽出,从而允许摄像机70拍摄第二区域52。为简化说明将省略搁架。
摄像机70可以设置于内壳12的上壁处,使得摄像机70朝向内壳12的后壁倾斜。
由摄像机70拍摄的照片可以具有沿储藏室22宽度方向的水平视角和沿储藏室22前后方向的竖直视角。
优选地,设定根据摄像机70的水平角度,使得当抽屉50被抽出时,两个抽屉50的内部空间(即储存在第二区域52中的食物)是可见的。
此外,根据摄像机70的水平角度范围可以包括搁架40的两端的至少一部分。为了获取关于置于搁架40上侧的食物的信息,摄像机70优选拍摄包括搁架40两端的视图的照片。
当摄像机70的视角改变时,在照片中看到的储藏室内部的范围也改变。
图6是图5的横剖视图,并且图7示出具有如图6所示定位的构件的摄像机拍摄的图像。下面将参照图6和图7进行描述。
内壳12设置有开口14,以允许用户存取储藏室22。用户可以通过开口14将食物置于储藏室22中或从储藏室22拿取食物。门20可以打开并关闭开口14。
摄像机70可以安装在抽屉50的外部以在抽屉50移动或停止时拍摄照片。由此,摄像机70可以拍摄处于打开位置、关闭位置和移动状态的抽屉50的照片。即,由于摄像机70连续拍摄照片,所以由摄像机70拍摄的照片可以根据照片被拍摄的时间呈现不同位置处的抽屉50的视图。
此外,摄像机70可以提供包括储藏室22中存取物品的最新状态的屏幕。
优选地,摄像机70安装在开口14与搁架40的一端之间的范围l内。在设置多个搁架40的情况下,摄像机优选安装在位于最前方位置处的搁架40的一个前边缘与开口14之间的区域l中(见图8)。即,摄像机优选安装在储藏室的顶板对应于该区域处。由于摄像机70需要拍摄第一区域和第二区域52的照片或第一区域和第三区域62的照片,所以摄像机70不能朝向内壳12的后壁移动得比搁架40的前边缘更多。
图6示出摄像机70的竖直视角。优选地,竖直视角的一端被设置为使得当抽屉50打开时即使抽屉50的前端也可以被拍摄到。此外,竖直视角的另一端(后边缘)优选地被设置为使得即使最上方的搁架的后边缘也可以被拍摄到。
由于由抽屉50形成的第二区域52也包括在摄像机70的竖直视角的范围内,所以摄像机70可以允许用户获取关于第二区域52的信息。
如图7所示,摄像机70可以拍摄包括第一区域42和第二区域52的照片。此时,摄像机70拍摄横向设置的两个抽屉50的照片。此外,在设置多个搁架的情况下,可以一同拍摄被搁架分隔的第一区域42和第二区域52。
摄像机70可以安装在储藏室22中。由此,可以拍摄包括关于储藏室22的内部的信息的照片。由于摄像机70安装在储藏室22中,所以摄像机70不移动。即,摄像机70被固定地安装在通常一直为固定的本体的储藏室中。因此,无论何时拍摄照片,摄像机70均处于静止状态。
由摄像机70拍摄的照片可以包括第一区域42和第二个区域52或第一区域42和第三区域62。
在摄像机70拍摄包括第一区域42和第二个区域52的照片的情况下,用户可以通过照片获取关于储存在搁架40的上侧的食物和储存在抽屉50中的食物的信息。
另一方面,在摄像机70拍摄包括第一区域42和第三区域62的照片的情况下,用户可以通过照片获取关于储存在搁架40的上侧的食物和储存在阻隔层60中的食物的信息。
摄像机70可以拍摄一个储藏室22内部的照片,并且传送拍摄到的照片,同时控制器100可以获取关于多个储存空间的信息。
摄像机70设置于第一区域42、第二区域52和第三区域62的上侧,并且从而在向下看的时拍摄照片。
图8是示出摄像机的位置的选择的视图。下面将参照图8进行描述。
如图8所示,可以将摄像机安装在位置L1、L2、L3和L4处。
位置L1位于储藏室22的外部,是由外壳10分隔的外部空间。在摄像机被安装在位置L1的情况下,当用户通过对打开门的储藏室22进行存取而使用冰箱时,摄像机前方的视野可能被用户阻挡。
如在上述日本专利文献中公开的那样,在储藏室的内部被安装在冰箱外部的摄像机拍摄到的情况下,用户可以严重地干扰摄像机的视野。尤其是,也可能从摄像机隔开了抽屉,并且从而无法跟踪抽屉的移动。由此,无法如本发明的一个实施例意图做到的那样识别抽屉内部的图像以及抽屉的移动。此外,位置L1可以表示摄像机位于门处。在这种情况下,由于门是可移动的构件,所以摄像机在拍摄过程中会移动。因此,可能很难获得稳定和清晰的照片。
位置L2位于储藏室22中,表示储藏室22的上壁,即顶板。本实施例的摄像机安装于位置L2。由于摄像机布置在这个位置上,所以摄像机的前方视野不被用户阻挡。此外,由于储藏室22的上壁对应于内壳12,所以可以方便地设置向摄像机供应电能的导线。由于内壳12通常是一直固定的构件,所以可以稳定地安装固定摄像机的构件。
位置L3位于储藏室22中,表示储藏室22的侧壁。在这种情况下,摄像机倾斜地安装在储藏室22的一侧,以拍摄储藏室22对侧的照片。如果摄像机被设置在储藏室22整个高度的中间而不设置在储藏室22的最上端,则摄像机应安装于内壳12的侧壁。
在摄像机安装在一个侧壁处的情况下,摄像机需要被安装为使得其镜头面对对侧壁。因此,由于至内部左侧和右侧的距离之差而可能会获得示出储藏室22的内部的非对称视图的图像。
位置L4位于储藏室22中,表示搁架40的一端。为了基于储藏室22的高度设置摄像机,摄像机需要由特定的结构支撑。在这种情况下,摄像机可以被固定到搁架40的一端。
在这种情况下,抽屉50与摄像机之间的距离小于抽屉50与位置L2之间的距离。因此,可能需要使用比设置在位置L2处时更大视角的摄像机。此外,所获得的照片可能严重失真。此外,造成用户不便的各种问题,例如,可能产生连接到搁架40上的摄像机的导线的安装问题。此外,搁架40是通常可移动的构件。因此当食物置于搁架上时,摄像机本身可能会晃动。
在本发明的一个实施例中采用的摄像机可以是具有120度视角并提供20fps性能的VGA摄像机。
图9是示出冰箱的主要部分的剖视图。下面将参照图9进行描述。
能够储存食物的篮筐21可以布置在门20的内侧。篮筐21可以安装在门20面对储藏室22的表面上。
在这种情况下,篮筐21可能会意外地出现在由摄像机70拍摄的照片中。因此,在本实施例中,当通过门传感器120感测到门20已旋转大于特定角度θ的角度时,摄像机70可以拍摄照片。为了允许选择在通过门传感器120实施感测的时间点的下一个时间点拍摄的照片,关于时间点的信息可以从门传感器120传递到控制器100。
例如,特定角度θ可以在60度到80度之间。该角度可以在很宽的范围内改变。该角度可以根据冰箱的容量、门的尺寸或篮筐21的前后长度而改变。
特定角度θ可以是篮筐21不出现在由摄像机70拍摄的照片中的角度。特定角度θ可以取决于篮筐21的横向宽度和前后长度而变化。
用以感测门20是否打开的门开关110可以安装至冰箱的上侧。在这种情况下,当门开关110被门20按压时,门开关110可以感测门20关闭储藏室。当门开关110不被门20按压时,门开关110可以感测储藏室被打开。
可以设置将左门20可枢转地安装在冰箱上的左铰链300和将右门20可枢转地安装在冰箱上的右铰链320。左铰链300和右铰链320中的每个可以被划分成设置有耦接到门20使得门20围绕旋转轴旋转的旋转轴部分、安装于外壳10的部分以及用以连接前述两个部分的连接部分。即,左铰链300和右铰链320中的每个可以被划分成门耦接部300c、320c,外壳耦接部300a、320a以及连接部300b、320b。
用以感测左门20的旋转的左门传感器120L可以安装于左铰链300处。
用以感测右门20的旋转的右门传感器120R可以安装于右铰链320处。
左门传感器120L和右门传感器120R中的每个可以独立地感测对应的门的旋转角度。
图10是示出门传感器的操作的视图。下面将参照图10进行描述。
门传感器120可以包括用以照射光的发光单元122和用以接收从发光单元122照射的光的光接收单元124。
从发光单元122照射的光可以在门20的上表面上反射,然后传递到光接收单元124。在这种情况下,为确保光的稳定的反射,该上表面可以由具有高反射率的材料形成。
在从发光单元122照射的光被传递到光接收单元124的情况下,门20可以被感测为已旋转小于门传感器120被安装的角度的角度。即,这可能意味着门20已经旋转小于特定角度θ的角度或者门20未旋转离开门20关闭储藏室22的位置。
另一方面,在从发光单元122照射的光未被传递到光接收单元124的情况下,门20可以被感测为已旋转大于门传感器120被安装的角度的角度。即,这可能意味着门20已经旋转大于特定角度θ的角度,从而允许用户存取储藏室22。
为此,如图9所示,左铰链300和右铰链320可以从本体的外壳10的最上表面安装到门20的最低表面。因此,当门20围绕旋转中心302、322旋转时,门最上面的部分(例如,台阶部)或者门的顶面可以用作光接收部。左门传感器120L和右门传感器120R也可以安装于连接部300b和320b以用作发光部。由于传感器120L、120R与门之间的位置关系,传感器120L和120R可以识别门被打开了大于或等于特定角度θ的角度的时间和门被关闭到达到特定角度θ的时间。
图11是具体示出左铰链单元和右铰链单元的视图。为了简化说明,未示出冰箱的其它构件。下面将参照图11进行描述。
门传感器可以设置在内壳的前表面的前方,即开口的位置(用户站立的地方)处。
用以感测左门20的旋转的左门传感器120L可以安装在左铰链300处。
用以感测右门20的旋转的右门传感器120R可以安装在右铰链320处。
左门传感器或右门传感器可以设置在开口与每个铰接单元的旋转中心之间的区域中。即,左门传感器或右门传感器可以设置在每个铰接的连接部300b、320b处。
门传感器120可以通过连接器c和用以接收电力或用以向外传递信号的导线连接到其它构件上。此时,门传感器120可以连接到控制器100,以提供获取到的信号信息。
左铰链300可以设置有旋转中心302,左门20围绕该旋转中心302旋转。在这种情况下,左门传感器120L可以设置在旋转中心302的右侧。旋转中心302的右侧的空间是左门20(具体而言,是左门20的顶面)根据左门20的旋转角度而可能会或可能不会位于左门传感器120L的下方的空间。因此,左门传感器120L优选地位于铰链300的连接部300b处。由此,当门的尺寸或篮筐的尺寸改变时,特定角度θ可以灵活地改变。即,连接部300b右侧的空间可以很容易地改变,并且因此,左门传感器120L的位置在连接部300b处可以很容易地改变。
导线w可以通过旋转中心302连接到左门传感器120L。此外,导线w也可以通过外壳10连接到冰箱的本体。
右铰链320可以设置有旋转中心322,右门20围绕旋转中心322旋转。在这种情况下,右门传感器120R可以设置在旋转中心322的左侧。旋转中心322左侧的空间是根据右门20的旋转角度而右门20可能会或可能不会位于右门传感器120R下方的空间。出于类似的原因,右门传感器120R优选地安装在铰链320的连接部320b处。
时间感测由门传感器120进行,并且可以为拍摄储藏室22中每个区域(具体为第一区域42或第三区域62)的照片的时间。即,时间感测由门传感器120进行并且可以为拍摄抽屉50外部的储存空间的照片的时间。
同时,由于门传感器120照射并接收光,所以门传感器120向下发射光。向下照射的光被门20向上反射。
门传感器120和门20可以彼此保持较短的距离,以允许门传感器120接收足够的光量。此时,门传感器120与门20之间的最大竖直距离可以是20mm。
图12示出提供给用户的屏幕。下面将参照图12进行描述。
在图12a的例子中,第一区域42、第二区域52和第三区域62都被提供给用户。在图12b的例子中,第二区域52和第三区域62被提供给用户。在图12c的例子中,第一区域42和第二区域52被提供给用户。
下面将参照图12a进行描述。
由摄像机70拍摄的一张照片可以被划分为示出第一区域42的第一图像、示出第二区域52的第二图像和示出第三区域62的第三图像。即,可以基于各个区域划分一张照片或多个照片。这里,第一图像、第二图像和第三图像可以是根据图像中所示的相应区域的范围从拍摄到的照片中剪裁的图像。
经划分的照片可以单独提供给用户,如图12a所示。即,每个区域的照片可以被单独提供给用户,使得用户很容易地获取关于储存在每个区域中的食物的信息。
显示器14可以设置为使得在一个画面(frame)中示出多个储存区域。
即,示出第二区域52的第二图像被设置在一个矩形画面的左上侧和右上侧,并且示出第三区域62的第三图像被设置在矩形画面的左下侧和右下侧
多个区域的多个图像可以被设置在显示器14的一帧画面上,使得这些图像具有相同的宽度。为此,控制器可以剪裁拍摄到的照片,并且校正照片的尺寸以将照片提供给显示器14。此时,校正后的图像示出在对应于该画面的位置处。
提供给显示器的图像的至少一个部分可以被校正为具有相同的宽度以产生二维布置,使用户感觉其在查看当用户实际打开冰箱的门时由用户看到的储藏室的配置。
显示器14可以通过一个屏幕提供两个重叠的区域,由此向用户提供关于被定位为无法一眼看到的食品的信息。
具体而言,第二图像和第三图像示出在抽屉抽出时以重叠方式布置的空间。因此,在抽屉抽出时用户可能无法同时获取关于两个储存空间的信息。然而,显示器14可以同时提供关于两个储存空间的信息。
控制器100可以将单独提供给用户的各个图像更新(替换)为关于容纳在各个区域中的食物的种类的信息。
例如,在对应于第二图像的部分需要通过由摄像机拍摄的照片更新,并且对应于第三图像的部分不需要更新的情况下,仅第二图像被替换为新的图像。
另一方面,在对应于第三图像的部分需要通过由摄像机拍摄的照片更新,并且对应于第二图像的部分不需要更新的情况下,仅第三图像被替换为新的图像。
一帧画面中的第二图像和第三图像可以独立于其它图像被更新。
设置在左侧和右侧的两个第二图像当中,可以单独更新设置在左侧的第二图像,或者可以单独更新设置在右侧的第二图像。在这种情况下,可以单独更新每个第三图像。
即,显示器14可以提供一帧画面,其允许在其中设置多个图像,以提供储存在储藏室中的物品的信息,并且多个图像可以独立于其它图像而被单独更新。尤其是,由于第二图像和第三图像来自不同的照片,所以控制器可以确定由照片表示的不同区域并且更新这些图像。
这里,第二图像的宽度可以等于或基本相似于第三图像的宽度。即,对应于第二图像和第三图像的部分可以由控制器进行校正,以具有相同的宽度,然后提供给显示器。
在第二图像的尺寸与第三图像的尺寸不同的情况下,可以从照片中选择第二图像和第三图像,使得第二图像和第三图像具有不同数量的像素,即,相对于像素的不同尺寸。可替代地,第二图像和第三图像可以被选择为具有相同数量的像素,但可以由控制器校正以在呈现于显示器14上时具有不同的尺寸。
第二图像和第三图像可以竖直设置,以在一个平面上提供竖直布置的视图。在第二图像中示出的区域实际上设置在第三图像中示出的区域上。因此,用户可以直观地识别通过显示器提供的图像,从而容易理解通过图像提供的信息。
显示器14可以向用户提供具有替换后的第一图像和第三图像这两者的屏幕。可替代地,显示器14可以向用户提供示出现有的第一图像和第三图像和替换后的第二图像。
在图12a中,食物储藏室搁架可以表示第一区域42,蔬菜室可以表示第二区域52,并且多容纳角部可以表示第三区域62。取决于用户偏好和图像提供者的意愿,该配置可以采取各种形式。
图12a所示的屏幕不仅可以提供给安装在冰箱中的显示器14,还可以提供给除了冰箱以外的分开的外部终端设备,例如智能手机。因此,当用户离家在外时,用户可以获得关于储存在冰箱中的食物的信息,并在购物中使用该信息。因此,用户无需打开门就可以了解储存在冰箱中的食品的种类。提供给用户的屏幕可以显示被划分成多个储存区域的一个储藏室。因此,用户可以很容易地获取关于储存在基于储藏室中的食品的位置分类的一个储藏室中的食品的信息。
在抽屉50被抽出时,布置在蔬菜室的位置中的图像示出从抽屉50的前边缘竖直延伸到搁架40的前边缘的区域。在门20被定位为不阻挡视野时,布置在多容纳角部的位置中的图像示出与布置在送入位置的抽屉50重叠的区域。位于搁架40上侧的区域被示出在上述搁架的区域中。
根据本发明的一个实施例,提供给用户的屏幕未按原样示出一个储藏室,而是示出为设置在经划分的区域中的分开的图像。因此,用户可以很容易地获取信息。换句话说,不是使用图7中所示的图片,可以从一个图片中分开各个区域并独立地使用这些区域。
可以提供如图12b所示的具有与图12a不同的配置的屏幕。在这种情况下,摄像机70可以拍摄包含第二区域52和第三区域62的照片。可替代地,摄像机70可以拍摄包含第一区域42、第二区域52和第三区域62的照片,不过也可以向用户提供对应于这些区域中的两个区域的图像。
可以提供如图12c所示的不同配置的另一个屏幕。在这种情况下,摄像机70可以拍摄包含第一区域42和第二区域52的照片。可替代地,摄像机70可以拍摄包含第一区域42、第二区域52和第三区域62的照片,但还可以向用户提供对应于这些区域中的两个区域的图像。
即,根据本发明的一个实施例,可以拍摄包含三个区域的照片,然后仅向用户提供相关的图像。然而,可以向用户提供对应于至少抽屉的内部储存区域的图像,即第二区域连同对应于另一区域的图像。
图13是调整摄像机拍摄的照片的视图。下面将参照图13进行描述。
图13所示的屏幕图像可以是显示在显示器14上的屏幕的一个例子。在冰箱上未设置显示器的情况下,图13的屏幕可以是显示在制造冰箱时操作者的单独的显示设备上的屏幕。此外,图13的屏幕可以表示显示在用户的手机上的屏幕。
在设置摄像机70的情况下,摄像机70可能由于装配公差而未被准确地安装在期望的位置处。
因此,在本发明的一个实施例中,操作者或用户可以通过由摄像机70示出的照片或图像来改变划分区域的调整线15。
调整线15可以包括竖直调整线和水平调整线。竖直调整线可以设置在图像的中心和对侧端。用户可以使用在屏幕上示出的按钮来竖直移动竖直调整线并水平移动水平调整线。由此,用户可以选择图像的一部分剪裁并提供给显示器14。
同时,还可以示出限制调整线15的移动范围的限制线16。在这种情况下,限制线16可以水平设置并且彼此以预定距离间隔开,并将竖直调整线置于各个限制线16之间。此外,限制线16可以竖直设置并且彼此以预定距离间隔开,并将水平调整线置于各个限制线16之间。
由于限制线16,在即使移动调整线15也获取不到所期望的图像的情况下,摄像机70的安装可以被确定为较差,并且可以调整安装摄像机70的位置。
在如图13所示在储藏室中设置两个抽屉的情况下,竖直调整线可以设置在两个抽屉之间。
此外,水平调整线可以设置在搁架的前边缘处。
在完成对水平调整线和竖直调整线的移动时,示出第二区域或第三区域的左部的图像可以被配置在水平调整线与竖直调整线之间的交点的左下侧。在这种情况下,该图像可以水平地覆盖基于水平调整线的特定数量的像素,并且竖直覆盖基于竖直调整线的特定数量的像素。
示出第二区域或第三区域的右部的图像可以被配置在水平调整线与竖直调整线之间的交点的右下侧。在这种情况下,该图像可以水平地覆盖基于水平调整线的特定数量的像素,并且竖直覆盖基于竖直调整线的特定数量的像素。
第一区域可以被配置在水平调整线的上侧。在这种情况下,该图像可以竖直地覆盖基于水平调整线的特定数量的像素。
通过分别显示对应于如图13所示的蔬菜室的第三区域的左部和右部的图像,可以查看是否已获取到对应于抽屉的照片。
一旦完成由用户或操作者进行的调整,可以点击输入完成按钮以输入调整线15的移动已经完成的指示。因此,当摄像机的安装误差较小时,可以在拍摄到的图片中调整划分区域的竖直线和/或水平线的位置。由此可以清楚地显示呈现特定区域的部分。当存在竖直或水平划分的多个区域时,可以设置多个水平调整线和竖直调整线。
图14是示出摄像机的透视图,图15是示出摄像机的主要部件的视图,并且图16是图14的剖视图。下面将参照图14至图16进行描述。
摄像机70可以包括:包括摄像机镜头71a的摄像机模块71、本体71b、以及容纳摄像机模块71的壳体73和74。
摄像机模块71可以包括图像传感器,以将通过摄像机镜头71a传送的图像信息转换成数字信号。
壳体可以包括第一壳体73和耦接到第一壳体73的第二壳体74,以在内部形成预定空间。本体71b和摄像机镜头71a可以容纳在第一壳体73与第二壳体74之间。可以用置于第一壳体73与第二壳体74之间的单独的密封件保持第一壳体73与第二壳体74之间的耦接,以防止湿气或灰尘进入第一壳体73和第二壳体74。
由于本体71b和摄像机镜头71a被插入由第一壳体73和第二壳体74所形成的空间中,所以防止本体71b和摄像机镜头71a接触填充内壳12与外壳10之间的空间的发泡剂。此外,可以通过防止其直接接触容纳在储藏室22中的冷空气而保护摄像机模块71。
第一壳体73可以包括安装在摄像机镜头71a的前边缘处的透明窗80和向透明窗80提供热量的加热器84。优选地,透明窗80可以由透明材料形成。
由加热器84提供的热量可以防止透明窗80结露。
在这种加热器84被安装在摄像机镜头71a处以防止结露的情况下,摄像机镜头71a可能会变形。在这种情况下,可能增加由变形导致的发生变形(aberration)和永久损坏的可能性。因此,在本实施例中,透明窗80被布置为不直接接触摄像机镜头71a。
透明窗80可以由任何塑料和玻璃形成以从摄像机获取图像。然而,塑料的热导率较低。因此,在使用塑料形成透明窗80的情况下,可能会相对于使用玻璃形成透明窗80的情况增加功耗。因此,透明窗80优选由玻璃形成,以降低功耗。
如果导热率增加,则从加热器84提供的热量可以很容易地传导到透明窗80的不直接接触加热器84的部分。例如,如果导热率降低。在透明窗80邻近于加热器84的部分的温度可能较高,并且在远离加热器84的部分的温度可能较低。在这种情况下,可能难以防止结露。此外,需要通过加热器84提供更多的热能,并且因此,可能降低能效。
同时,由于加热器84与透明窗80进行直接的表面接触,所以可以提高传热效率。
加热器84可以布置在透明窗80的暴露至储藏室22的表面的对侧。因此,可以防止由加热器84产生的热量提供给储藏室22而不通过透明窗80传送。
尤其是,加热器84可以包括热线式(hotwire)线圈以产生热量。该热线式线圈可以与透明窗80进行表面接触。
此外,考虑到由供应到此处的热量和装配公差导致的透明窗80的变形,透明窗80与摄像机镜头71a优选地以预定间隙g彼此间隔开。
此外,摄像机70可以包括电缆79,以接收外部提供的电力并且传送与获取到的照片相关的信号。电缆79可以将摄像机模块71电连接到外部构件。
同时,壳体设置有能够将摄像机70固定到另一构件的第一基座段75。第一基座段75可以设置到第一壳体73和第二壳体74中的任何一个。
第一基座段75可以包括具有预定区域的表面,并且可以被设置在期望的位置处并且以期望的角度倾斜。
第一基座段75可以设置于摄像机70的两侧。由此,摄像机70的两侧可以通过外部构件来固定。
第二壳体74可以设置有具有预定区域并形成为台阶式的第二基座段76或第二基座面76。第二基座段76设置在与第一基座段75不同的位置处,以使摄像机70能够以预定角度稳定地耦接到另一个构件的特定位置处。因此,摄像机70可以以预定角度被第一基座段75和第二基座段76相对于其它构件固定在至少三个支撑点处。稍后将详细描述摄像机70的支撑结构。
VGA分辨率可以适用于摄像机70。摄像机70可以采用0.3百万像素的VGA分辨率(640×480)。
摄像机70的接口可以是USB型并且使用5V和500mA的USB电源驱动。
供应给摄像机70中的电流值可以为待机模式下的87mA和工作模式下的187mA(67mA用于加热器)。功耗可以与所提供的电流成正比。摄像机70的操作可以被划分为待机模式和工作模式,并且可以一直向加热器84提供电力以防止透明窗80的表面结露。
当向摄像机70施加额定电压时,摄像机70在待机模式下操作。当门开关110感测到门20被打开时,摄像机70被从待机模式切换到工作模式以拍摄照片。即,当电能施加到冰箱上时,摄像机可以操作在待机模式下。当门开关110感测到门20被打开时,摄像机70可以被切换到工作模式以拍摄照片。
图17是示出加热器的设置的视图。下面将参照图17进行描述。
摄像机70可以具有115°的水平视角和95°的竖直视角,以及145°的对角线视角。即,摄像机70可以被设置为使得水平视角大于竖直视角。通过这个设置,在储藏室22的宽度方向(图17中的水平方向)上储藏室22的长度大于在前后方向(图17中的竖直方向)上储藏室22的长度的情况下,可以获取提供关于储藏室22的食物信息的照片。
同时,加热器84可以沿着透明窗80的轮廓形成。在这种情况下,加热器84可以被设置为四边形形状以便不被放置到摄像机70的视角内。
在加热器84具有四边形形状的情况下,热量可以被提供到透明窗80的相对较宽的区域。因此,可以提高加热器84的能效。
尤其是,在如图16所示摄像机镜头71a与透明窗80之间形成间隙g的情况下,透明窗80的视角形成如图17所示的矩形形状。在透明窗80与摄像机镜头71a之间不存在间隙g的情况下,加热器84可以形成为正方形形状,由于加热器84接触透明窗80的一个表面,所以该正方形的每条边的长度均大于或等于摄像机镜头71a的直径。
然而,在本实施例中,如上所述,存在间隙g并且竖直视角与水平视角不同。因此,加热器84优选地形成为一条边长于另一条边的矩形形状。
图18是示出竖直倾斜地安装至冰箱的摄像机拍摄的照片的视图,并且图19是示出水平倾斜地安装至冰箱的摄像机拍摄的照片的视图。下面将参照图18和图19进行描述。
图18(a)示出用向上翻转5度的摄像机拍摄的照片,图18(b)示出用安装在期望位置处的摄像机拍摄的照片,并且图18(c)示出用向下翻转5度的摄像机拍摄的照片。图18所示的照片可以向用户提供关于储存在储藏室中的食物的信息。然而,在摄像机被翻转超过图18所示的角度的情况下,可能无法向用户提供期望的信息。
图19(a)示出用向左翻转4度的摄像机拍摄的照片,图19(b)示出用向左翻转2度的摄像机拍摄的照片,并且图19(c)示出用安装在期望位置处的摄像机拍摄的照片。
与图18中用被安装为在竖直方向(前后方向)上翻转的摄像机拍摄的照片相比,用未以期望的水平(横向)角度安装的摄像机拍摄的照片提供的图像为相对严重失真的图像。
从图18和图19可以看到,即使摄像机的安装角度的微小差异也可以导致所拍摄的照片的严重失真。因此,需要控制摄像机的安装角度,使得所产生的装配公差尽可能小。通过图13中描述的调整线可以调整微小的误差,并且从而可以提供优化的图片。
图20是示出在组装状态下的摄像机壳体的视图,图21是示出第一壳体的正视图,图22是示出第二壳体的正视图,图23是示出安装有摄像机的第一壳体的正视图,图24是图23的横剖视图,并且图25是示出安装在内壳中的摄像机壳体的剖视图。下面将参照图20至图25进行描述。
可以设置摄像机壳体以将摄像机70安装在内壳12中。即,可以设置用以容纳图14所示摄像机的摄像机壳体并且将摄像机固定到储藏室的顶板。
摄像机壳体可以包括:耦接到内壳12的顶板的下表面的第一壳体400,耦接到内壳12的顶板的上表面的第二壳体410,以及耦接到第一壳体400的第三壳体420和第四壳体430。这里,第一壳体400可以耦接到储藏室的顶板的顶面。
第三壳体420可以闭合摄像机的前面70,使得摄像机70的除透明窗80以外的所有部件不直接暴露到门20。即,第三壳体420可以用作覆盖摄像机70的前表面的盖体。在这种情况下,第三壳体420和第四壳体430可以构成一个构件。第四壳体430可以是插在第三壳体420与第一壳体400之间的装饰壳体。
摄像机70可以安装在第一壳体400处,使得对摄像机70的横向倾斜(水平倾斜)和前后倾斜(竖直倾斜)的程度进行管理。
如图21所示,第一壳体400可以设置有基座部402,摄像机70的第一基座段75坐落在基座部402上。这里,可以设置两个第一基座部402以允许第一基座段75的左侧和右侧紧固到每个第一基座部402。
第一基座段75可以被设置到摄像机70的左右两侧,使得第一座段75倾斜一预定角度。因此,当将摄像机70安装在内壳12处时,摄像机70可以被设置为以期望的角度倾斜。
第一基座部402可以设置有孔404。由此,第一基座段75和第一基座部402可以通过螺钉固定。第一基座部402被布置在水平方向上,使得它们被设置于不同的高度。因此,可以稳定地固定摄像机70。
第一壳体400可以设置有第二基座部408,允许摄像机70的第二基座段76坐落在第二基座部408上。这里,第二基座部408可以被形成为具有预定的面积。由此,第二基座部408可以固定摄像机70的倾斜程度,同时与第二基座段76表面接触。
即,摄像机70可以耦接到第一壳体400,其多个表面与第一壳体400接触。由此,摄像机70可以用于将摄像机70固定到以期望的角度倾斜的位置处。换句话说,摄像机70可以被固定为具有至少三个支撑点并且相对于第一壳体400以预定角度支撑。摄像机70可以以水平角度固定以与第一壳体400平行,并且竖直角度可以被设定为预定的角度。
第一壳体400可以设置有紧固孔406,以通过螺钉耦接到第二壳体410。
如图22所示,第二壳体410设置有接触面416,其能够与内壳12的顶板的上表面进行表面接触。这里,接触面416被分布在很宽的区域上,通常形成为四边形形状。因此,可以允许第二壳体410稳定地坐落在内壳12的顶板的上表面上。因此,接触面416可以具有与内壳12的顶板平行的表面。由此,用于摄像机的安装角度的基准线或基准面可以等同于内壳12的顶板。
第二壳体410可以设置有容纳空间412,以容纳摄像机70的电缆79。通孔418可以形成在容纳空间412的一侧,以允许连接到冰箱的另一构件的导线暴露于容纳空间412。此时,连接到冰箱的另一构件的导线可以连接到容纳空间412中的电缆79。因此,电力可以通过电缆79提供给摄像机70,并且由摄像机70拍摄的照片的信号可以被传递到所连接的构件。
第二壳体410可以设置有耦接至第一壳体400的紧固部414。紧固部414可以通过螺钉耦接到紧固孔406。优选地,当紧固部414耦接至紧固孔406时不产生装配公差。因此,紧固部414可以被形成为突出预定高度,以便于与紧固孔406表面接触。
如图23和图24所示,当摄像机70安装在第一壳体400处时,摄像机70被设置为倾斜预定的角度。如图24所示,第一壳体400的一侧表面400a可以形成为平坦表面以接触内壳12。摄像机70以相对于第一壳体400的一个表面预定角度倾斜。此外,一侧表面400a耦接到内壳的顶板的下表面,以与第二壳体410的接触面416平行。因此,由于摄像机被耦接到第一壳体400,并且第一壳体400被耦接到第二壳体420,所以摄像机70相对于储藏室的顶板表面的安装角度的误差可以得到显著降低。
参照图25,第二壳体410被设置成暴露于内壳12上方的空间,即,内壳12与外壳10之间填充有发泡剂的空间。第二壳体410被设置在储藏室22外部,但被设置在由外壳10限定的空间中。通过将第二壳体410粘连附接到内壳12,可以临时固定第二壳体410的位置。此后,通过发泡剂填充内壳12与外壳10之间的空间,可以最终固定第二壳体410的位置。
第一壳体400和第二壳体410可以彼此耦接,将内壳12置于其间。由于第一壳体400被耦接到第二壳体410,而第二壳体410被固定在内壳12的特定位置处,所以可以固定摄像机70的位置。
由于摄像机70相对于第一壳体400倾斜一特定的角度,所以第三壳体420和第四壳体430可以耦接到第二壳体410。如上所述,第三壳体420和第四壳体430可以构成一个构件,从而仅用作第四壳体430的一个构件可以耦接到第一壳体400。
第四壳体430可以仅允许摄像机70的透明窗80暴露至储藏室22,并且可以不允许摄像机70的其它部分暴露。因此,可以防止存在于储藏室22中的湿气、灰尘和冷空气影响摄像机70。
在技术方案中,摄像机的壳体的结构和壳体在内壳上的安装方向和位置具有减少在透明窗80上结露的目的。稍后进行相关的详细描述。
图26示出根据一个实施例的摄像机与对照例进行功耗比较的表格,并且图27是比较所提供的待机电流与驱动电流的视图。图27(a)示出提供给对照例的摄像机的电流。图27(b)示出提供给根据本发明的一个实施例的摄像机的电流。下面将参照图26和图27进行描述。
在对照例中,向摄像机70提供70mA的待机电流。当门被打开时,额外提供50mA,从而向摄像机70提供120mA的驱动电流。在对照例中,如果一天打开门二十五分钟,则摄像机70一个月消耗253Wh。如果一天打开门五十分钟,则摄像机70一个月消耗254Wh。
另一方面,根据本发明的一个实施例,向摄像机70提供20mA的待机电流。当门被打开时,额外提供100mA,从而向摄像机70提供120mA的驱动电流。如果一天打开门二十五分钟,则摄像机70一个月消耗74Wh。如果一天打开门五十分钟,则摄像机70一个月消耗76Wh。
根据这两个实验的结果可以看出,通过减少待机电流,由摄像机70消耗的功率可以减少约70%。因此,已经发现,在提供相同的驱动电流的条件下,通过减少待机电流,可以显著减少由摄像机70消耗的功率。当冰箱整天不停地运转时,门被打开的时间相对较短。因此,如果工作模式的电流值是恒定的,则在减少施加到处于待机模式的摄像机的电流时可以减少功耗。
在如图27所示减小待机电流的情况下,向摄像机70提供驱动电流的时间被延迟。这是因为待机电流与驱动电流之间的差增加了延迟的时间。换句话说,当待机模式被切换到工作模式时,不立即实施拍摄,直到经过预定的延迟时间。
因此,摄像机70实际拍摄照片的时间被延迟。如果拍摄照片的命令传递到摄像机70时至摄像机70拍摄照片时之间的迟延比较长,则由摄像机70实际拍摄的照片可能无法向用户提供关于食物的期望的信息。
换句话说,由于降低待机电流,可以减少由摄像机70消耗的功率,但用以增加驱动摄像机70的驱动电流所花费的延迟时间可能变长。因此,通过计算在期望的时间点拍摄照片所花费的通常时间,待机电流值优选地被选择为使延迟时间缩短到上述时间以下。为此,在本实施例中,优选地从待机电流值起将电流逐步增加到驱动电流值。即,当电流从相对较低的待机电流值增加到驱动电流值时提供足够的延迟时间。即,可以防止电流的迅速增加。因此,可以减少功耗并且可以保证摄像机的稳定性。
因此,在本实施例中,摄像机70被控制为在门20被打开的时间处被驱动。即,当门开关确定门被打开时,待机模式被切换到驱动模式。然而,在门被打开后经过预定时间之后,由摄像机拍摄的图片的有效图片才得以拍摄。这是因为,用户可能花费几秒钟来更新食品。即,即使延迟时间变长,也可以在期望的时间点可靠地拍摄照片。因此,当摄像机从待机模式切换到驱动模式时,可以通过由门开关感测的结果来实施拍摄。此外,在选择有效图片的基准时间处,可以通过由门传感器感测的结果来实施拍摄。
图28是示出摄像机拍摄的开始时间和摄像机的连续拍摄的视图。下面将参照图28进行描述。
在本实施例中,可以如图4所示设置门开关。
当门开关110感测到储藏室22被打开时,控制器100可以命令摄像机70开始拍摄照片。即,当储藏室22通过门20的移动或旋转被打开时,摄像机70可以开始拍摄照片。
另一方面,当门开关110感测到储藏室22被关闭时,控制器100可以命令摄像机70停止拍摄照片。即,当储藏室22通过门20的移动或旋转被关闭时,摄像机70可以终止拍摄操作。
如图28所示,当从外部电源向冰箱提供电力时,向摄像机70提供待机电流(S1)。此时,摄像机70可以待机模式而被驱动。在待机模式中,摄像机70不拍摄照片。
门开关110可以感测门20的打开(S10)。
在确定门20打开储藏室22时,摄像机70可以开始拍摄照片(S14)。尤其是,摄像机70可以以预定的时间间隔连续地拍摄照片。
此时,向摄像机70提供大于待机模式下所提供电流的电流,并且因此摄像机70可以操作在驱动模式下。为了提供大于待机电流的电流(即驱动电流)以驱动摄像机70,可能难免产生预定的时间,即延迟时间。即,为了增加向摄像机70提供的电流的幅值,实际需要特定量的时间。当在向摄像机70提供用于实现驱动模式的电流之后经过预定时间(即延迟时间)时,摄像机70可以用提供给它的驱动电流来拍摄照片。
由于摄像机70被切换到驱动模式以便从门20被打开的时间起拍摄,所以几乎不存在过早拍摄照片和在特定时间无法拍摄照片的风险。这是因为,在期望的拍摄时间之前,由于提供待机电流时产生的延迟时间而延迟了拍摄时间,并且在期望的时间增加了电流值。
此外,可以减少每秒拍摄照片的数量。如果摄像机70每秒拍摄三十张照片,不太可能在1/30秒内,即拍摄照片的时间间隔内在储藏室22里发生变化。储藏室22的内部可以通过用户实施的动作而改变,但是普通人不太可能在1/30秒内终止针对储藏室22的动作。即,由摄像机70拍摄照片的时间间隔可以相对延长。因此,可以使用相对低价格的摄像机70,并且因此,可以降低冰箱的生产成本。
由摄像机70拍摄的照片可以存储在存储器单元18中(S16)。此外,在减少摄像机70每秒拍摄的照片的数量的情况下,还可以减少存储在存储器单元18中的照片的数量,并且因此可以更有效地管理存储器单元18。
同时,门传感器120可以感测门20是否已旋转特定角度(S18)。
在门传感器120没有感测到门20的旋转的情况下,可以删除在预定时间之前存储在存储器单元18中的照片(S90)。即,可以删除不经处理并且不提供给用户的照片,以防止存储对象的数量增加。
另一方面,在门传感器120确定门20已经旋转特定角度的情况下,门传感器120选择在对应的时间拍摄的照片(S92)。此时,所选择的图片作为有效图片可以被控制器100处理,并且提供给用户。例如,由控制器100处理的照片可以被传递到显示器14。
用户需要特定的时间量以旋转门20来存取储藏室22。延迟时间经过该特定的时间量,并且因此可以在门20已经旋转特定的角度时拍摄照片。因此,控制器100可以在期望的时间选择照片。
在门传感器120感测到旋转的时间点处,在将摄像机70从待机模式切换到工作模式以拍摄照片的情况下,摄像机70可能仅在该时间点之后经过延迟时间时违愿地拍摄储藏室的照片。
由于摄像机70在门20被打开的时间处开始拍摄照片,所以可以向摄像机70提供相对较低值的待机电流。在提供相对较低值的待机电流的情况下,可以增加提供驱动电流所花费的延迟时间,但是,在控制流程中摄像机70会更早开始拍摄。因此,可以防止在期望的时间处无法拍摄照片。
图29是示出摄像机拍摄的开始时间和摄像机的连续拍摄的视图。下面将参照图29进行描述。
在图29中,与图28所示的实施例不同,选择照片的时间不取决于门20的旋转。相反,是根据抽屉50的位置选择照片的时间。其它细节与图28所示的实施例相同,并且因此,为了说明的简洁不再讨论这些细节。然而,操纵抽屉50可以假设打开门20。可以由门传感器确定选择特定图片的基准时间。特定图片中的特定区域的特定图片的基准时间可以根据门传感器的确定和抽屉感测单元130的确定来确定。因此,在任何情况下,为了给有效图片确定基准时间,需要门传感器的确定。
用户可以抽出抽屉50以在抽屉50中储存食物或从抽屉50拿取所储存的食物。此时,用户可以将抽屉50抽出到足够的距离以使用抽屉50。
在完成对抽屉50的使用时,用户可以推回抽屉50。发生此事件的时间可以表示S19中公开的特定状态。
从门开关110感测到门20打开的时间起摄像机70开始拍摄照片。因此,当抽屉50被置于特定状态时,可以选择在对应的时间拍摄的照片并且提供给用户(S92)。
当门20被打开时,摄像机70拍摄照片,并且可以从拍摄照片的时间,即门20被打开的时间起感测抽屉50的移动。
图30是示出根据一个实施例的抽屉传感器的视图,并且图31是示出图30的抽屉传感器感测抽屉的移动的方法的视图。下面将参照图30和图31进行描述。
参照图30,可以将抽屉感测单元130配置为单独的构件,而不是将抽屉感测单元130设置到控制器100。
抽屉感测单元130可以设置有一个发光部和两个光接收部。即,通过分析从发光部照射的光入射到两个光接收部的时间,可以检测抽屉50的移动方向。
多个狭缝134可以连续设置在抽屉上,使得出从抽屉感测单元130的发光部照射并入射到狭缝134的光被反射。由此,光可以顺序入射到两个光接收部上。
在图31中,x轴表示时间,并且y轴表示当两个光接收部接收光时产生的信号,照片TR1和照片TR2。即,在图31(a)中,照片TR1接收光早于照片TR2。在图31(b)中,照片TR2接收光早于照片TR1。
图31(a)的视图可以表示用户抽出抽屉50以使用抽屉50的抽屉50的移动状态,并且图31(b)的视图可以表示用户在完成对抽屉50的使用之后将抽屉50送入原始位置的抽屉50的状态。
因此,当抽屉感测单元130感测到如图31(a)的信号时,控制器100可以确定此时为获取由摄像机70拍摄的照片的时间,并且选择该照片作为抽屉50内部的照片,即对应时间处的第三区域。即,根据抽屉感测单元130的感测或确定结果,可以获取对应于第三区域的图片的时间可以被确定。可以独立并单独选择、分开和更新对应于第三区域的部分以及获取的图片中的其它部分。
图32是示出抽屉上显示的标记的视图。下面将参照图32进行描述。
与图30和图31不同的是,可以使用作为抽屉50的具体指示物的标记来感测抽屉50的移动,而不采用单独的机器或电子设备。
抽屉50可以设置有具有各种图案(例如,黑白色图案)的标记。摄像机70可以通过摄像机70拍摄的照片来分析标记的移动,然后解读抽屉50的移动及移动的方向。此时,可以由抽屉感测单元130进行对标记的分析。即,通过分析连续拍摄的图片中标记的移动,抽屉感测单元130可以确定抽屉50的状态。因此,取决于抽屉感测单元130感测或确定结果,可以确定对应于第三区域的图片的时间。对应于第三区域的部分和获取到的图片中的其它部分可以被独立并单独地选择、分开和更新。
图32示出摄像机的简化图像和读作“智能传感器”的文字。标记可以包括各种形状的图案。图案可以由白色和黑色交替排列形成,使得该图案由摄像机70可识别。
标记可以被指示在抽屉50的前表面的上侧。
图33(a)是示出显示处于抽出位置的左、右抽屉的照片的视图,并且图33(b)是示出显示处于送入位置的左抽屉和处于抽出位置的右抽屉的照片的视图。下面将参照图33(a)和图33(b)进行描述。
图33示出布置在抽屉50的上侧的中心处并且设置为波浪图案的标记的示例。
第一区域42可以示出在由摄像机70拍摄的一张照片中。此外,一张照片可以示出第二区域52和第三区域62之一。
即,如图33(a)所示的在左抽屉和右抽屉被抽出时拍摄的照片,示出设置在左侧和右侧的第一区域42以及设置在左侧和右侧的第二区域52。
另一方面,如图33(b)所示的仅右抽屉被抽出时拍摄的照片,可以示出设置在左侧和右侧的第一区域42、设置在左侧的第三区域62以及设置在右侧的第二区域52。
即,当抽屉50被抽出时,照片示出第二区域但未示出第三区域62。另一方面,当抽屉50被送入时,照片示出第三区域62但未示出第二区域52。
摄像机70在相同的位置处拍摄照片。抽屉50是可移动的,并且因此摄像机70可以根据抽屉50的位置拍摄各种区域的照片。
当如图33(b)所示布置在左侧的抽屉50被完全送入搁架40下方的空间中时,标记无法被摄像机70识别。即,由摄像机70拍摄的照片中未示出标记。
下面将参照图34至图40描述使用标记感测抽屉的移动的方法。
图34是描述根据本发明的一个实施例的冰箱的操作的流程图。
参照图34,当开关门110感测门20的打开时,摄像机70开始拍摄照片(S2101),并且控制器100开始识别并跟踪跟踪标记(S2103)。
下面将参照图35更详细地描述步骤S2101和S2103。
图35是描述根据本发明的一个实施例的识别和跟踪标记的方法的流程图。
参照图35,当门20被打开时,摄像机70开始拍摄照片(S2301)。
控制器100控制摄像机70以获取抽屉50内部的照片(S2303)。
随后,控制器100处理获取到的照片(S2305),并且确定获取到的照片中是否识别到预定的标记(S2307)。
为了确定是否识别到预定的标记,控制器100可以比较在获取到的照片中识别出的标记是否与预先储存的标记相同。
预定的标记可以由供应商或用户确定,并且可以预先储存在存储器单元18中。
标记可以形成在由摄像机拍摄的照片的可搜索的区域中。下面将参照图36和图37对可以由控制器100识别和跟踪的标记进行详细描述。
图36是示出根据本发明的一个实施例,用于在抽屉被送入或抽出时感测时间的标记的视图。
参照图36(a),标记可以被形成在从通过抽屉50开始被打开的时间起由摄像机70可搜索的区域中。例如,在xx070位于冰箱的上端并且允许拍摄抽屉50的平面图时,标记可以位于抽屉50的上端的前边缘部。此外,摄像机70可以被安装为从抽屉50被完全关闭的位置至抽屉50被完全打开的位置拍摄抽屉50的照片。
在标记位于抽屉50的上端处的情况下,假定在将储存在抽屉50中的物品按序摆放之后关闭抽屉50时抽屉50的上端没有障碍物。然而,实施例不限于此。
参照图36(a),当xx54容纳抽屉50并且从摄像机70的视点查看抽屉50时,摄像机70可以拍摄抽屉50内部的照片,抽屉50在从抽屉50开始被打开的位置到抽屉50完全被打开的位置的范围内包括标记。
图37是示出根据本发明的一个实施例的标记的形状的视图。
参照图37,可以通过交替排列带有两种不同颜色的相同形状来形成标记。
参照图37(a),可以通过排列多个具有被交替排列的白色方块和黑色方块的条带,使得这些条带错开(misalighed)。
在标记具有如上重复图案的情况下,即使标记的一部分不在摄像机的拍摄范围中,控制器100也可以识别并跟踪标记。
标记不限于重复图案。也不仅限于多种颜色。标记可以具有任何图案,只要其允许识别诸如抽屉50等冰箱的可移动的内部构件。
参照图35,当识别出预定的标记时,控制器100感测经识别的标记的移动(X2311)。控制器100可以分析和处理持续或定期拍摄的照片,由此确定经识别的标记在移动或是停止。例如,在继续或完成抽屉50的打开的情况下,或者在开始、继续或完成抽屉50的关闭的情况下,控制器100可以确定经识别的标记在移动或是停止。
可替代地,在未识别出预定的标记情况下,控制器100通知用户对标记的识别失败(S2309)。
例如,在障碍物位于标记处的情况下,摄像机可能无法拍摄包括标记的照片,或者控制器100在获取到的照片中无法识别出标记。在这种情况下,控制器100可以通过显示器14向用户提供信息,指示对标记的识别失败或者提供用以成功识别标记的方法(诸如移除障碍物)的信息。
随后,在对标记的识别失败的情况下,控制器100可以处理通过摄像机获取的新的照片,并重复识别预定标记的步骤。
回看图34,当在识别出标记之后感测到抽屉的关闭时(S2105),控制器100通过在对应的时间拍摄的照片获取包括抽屉的内部(第三区域62)的最终照片(S2107)。此时,由控制器100获取的抽屉的内部的最终照片可以包括刚好在感测到抽屉的关闭之前抽屉内部的视图,或包括刚好在感测到抽屉的关闭之后抽屉内部的视图。然而,本发明的实施例并不限于此。
将参照图38描述对抽屉的关闭的感测。
图38是示出根据本发明的一个实施例感测抽屉的关闭的方法的流程图。
参照图38,控制器100确定是否感测到抽屉50的打开终止(S2501)。例如,在控制器100在先前获取的抽屉50的照片中识别出标记,并且通过跟踪该标记的移动感测到该标记停止移动的情况下,可以感测到抽屉50的打开终止。
随后,控制器100确定抽屉50的关闭是否开始(S2503)。例如,在标记停止移动并且再次沿相反方向移动的情况下,控制器100可以感测到抽屉50的关闭已开始。
下面将参照图39描述根据本发明的另一实施例,已经感测到抽屉的关闭的控制器100的操作。
图39是示出根据本发明的一个实施例,当感测到抽屉的关闭终止时实施的冰箱的操作的流程图。
当感测到抽屉的关闭终止时(S2701),控制器100确定是否通过识别标记成功获取最终照片(S2703)。
控制器100可以通过由抽屉感测单元130处理的图像来感测抽屉50的关闭终止。
在例如由于障碍物而未正常识别标记并且因此对最终照片的获取失败的情况下,控制器100通知用户对标记的识别失败(S2705)。
控制器100可以例如通过显示器14向用户提供信息,指示对标记的识别失败。由此,其可以引导用户移除障碍物,并且送入或抽出抽屉使得标记被正常识别并获取最终照片。
参照图34,控制器100例如使用显示器14显示最终图像。此时,提供给用户的图像可以是从获取到的最终照片中提取的对应于第三区域62的部分的图像。下面将参照图40描述根据本发明的另一实施例对最终图像的控制。
图40是示出根据本发明的另一实施例,控制在特定时间拍摄的冰箱中的特定区域的图像的方法的流程图。
参照图40,控制器100获取最终照片(S2901),然后可以从照片剪裁期望的区域的图像。然后,将获取到的最终图像存储在存储器单元18中(S2903)。
随后,控制器100通过用户输入确定是否接收到用于显示最终照片的用户输入(S2905)。
例如,当获取到最终照片时,控制器100可以向由触摸屏构成的显示器14提供信息指示成功获取最终照片,并且在显示器14上形成图标型用户输入部分。是否接收到用户输入可以取决于对应的图标是否被选择来确定。用户输入部不仅可以包括形成在触摸屏上的图标,而且可以包括上述物理键。然而,本发明的实施例并不限于此。
随后,当接收到用于显示通过处理最终照片获得的最终图像的用户输入时,控制器100显示最终图像(S2907)。控制器100可以使用显示器14显示最终图像。此时,被显示的现有图像可以被替换为最终图像。因此,显示最终图像可以被看作是对最终图像的更新。
更新最终图像可以无需用户输入而自动实施。
根据本发明的一个实施例,冰箱可以通过识别预先形成在例如抽屉上的标记来感测抽屉的移动。冰箱可以使用安装在冰箱中的摄像机获取储存在抽屉中物品的最终状态的图像。此时,冰箱可以使用形成在抽屉上的标记确定例如抽屉的最终储存状态的最佳时间。
下面将描述摄像机的安装位置以及根据该位置获取照片。
根据的本发明的一个实施例,摄像机70可以安装在抽屉50的外部,即在储藏室22中,并且拍摄包括抽屉50的内部和形成抽屉50的抽屉本体(包括抽屉50的前壁和后壁和抽屉50形成在的两个侧壁的上部)的移动路径的照片。由此,不仅识别储存在抽屉50中的物品的状态,而且可以同时识别抽屉的移动。由摄像机70拍摄的照片还包含抽屉50的上方的空间(即对应于第一区域42的部分)的图像。
基本上,由摄像机拍摄的照片需要包括打开抽屉和关闭抽屉两个操作以及抽屉移动的路径。因此,摄像机需要安装在抽屉外部的位置处,并允许摄像机拍摄抽屉打开/关闭和抽屉的移动路径的照片。即,摄像机优选地安装在其可以拍摄包括抽屉的关闭位置和完全打开位置图像的照片的位置。
此外,摄像机70可以被配置为覆盖包括抽屉区的储存区域,即,多个储存区域,使得通过一次拍摄拍摄的照片不仅包含抽屉区,而且还包含储藏室或其它储存区域,例如,诸如食物或物品被搁架分开存放的搁架区。
为此,抽屉50被优选形成在冰箱的储藏室的底面上。抽屉50可以包括前壁、两个侧壁、后壁、底壁以及形成在抽屉50上部的开口。摄像机70需要被布置在抽屉的上方,使得当抽屉50完全打开时抽屉50的内部的至少一个部分和抽屉50的前壁的一部分暴露于摄像机70
此外,具有特定图案的印记部(标记)形成或附接在暴露于摄像机的抽屉的前壁或侧壁的上表面的位置处。
此时,摄像机70被固定在预定位置,并且因此,抽屉50的印记部的位置需要相对改变。即,当摄像机70从控制器100接收驱动命令时,摄像机70以恒定的拍摄速度连续拍摄图像,并且拍摄到的冰箱内部的图像被顺序地传送到控制器100。基于从摄像机70接收的储存在冰箱中的物品的照片,控制器100跟踪印记部。由此,控制器100确定例如关于抽屉的开度和抽屉的移动的信息。
摄像机拍摄的范围可以由摄像机的视角来确定。视角包括表示竖直拍摄范围的竖直视角和确定水平拍摄范围的水平视角。
摄像机70的竖直视角的一端需要被确定为使得至少当抽屉50完全打开时抽屉50的前壁在竖直角度内。竖直视角的另一端需要被确定为使得当抽屉50被关闭时,一部分(例如抽屉50的上侧的前表面的一部分)覆盖抽屉50的上部处的开口,允许查看位于抽屉前壁上或侧壁的上表面上的印记部是否没有暴露在竖直角度内。
此时,一台摄像机可以同时识别抽屉的内部区域和另一储存空间。根据本发明的另一实施例,可以在储藏室的底面上设置单独的容纳空间(下文称为储藏室的底部容纳区),其被布置在处于完全关闭位置的抽屉的前壁与储藏室的前表面中的开口之间,并且当抽屉打开时与抽屉的至少一部分重叠。在这种情况下,摄像机70可以被配置为在摄像机70的竖直视角覆盖抽屉的完全打开位置和抽屉的完全关闭位置的拍摄的范围内一同识别抽屉50的内部区域和和另一储存空间(底部容纳区)。
同时,在本发明的另一实施例中,对于摄像机70的竖直视角,可以拍摄抽屉的内部区域和搁架区这两者的照片。因此,竖直视角的另一端的范围可以被确定为使得竖直视角覆盖彼此竖直间隔特定距离的多个搁架的至少一部分。优选地,在将摄像机配置为使得其竖直视角覆盖搁架区时,该竖直视角甚至可以覆盖多个搁架的最上层搁架的一部分。更优选地,竖直视角甚至可以覆盖设置在储藏室的最上端的最上层搁架的后边缘。
根据所示实施例,可以通过一台摄像机拍摄到的一张照片来查看包括抽屉的内部区域的至少两个储存空间中的物品的储存状况。
为此,摄像机需要被安装在相对于形成于储藏室的底部的抽屉的期望位置处。本发明的发明人研究了在提交本申请时已公布的文献中所公开或已知的摄像机的安装位置。首先,研究通过将摄像机安装在冰箱的储藏室外部门的上端处是否能够拍摄到储藏室的内部的照片。
在摄像机被安装在储藏室外部(门)的位置处的情况下,摄像机被保持暴露于外部温度下,并且因此在摄像机周围不会发生结露。因此,不需要单独的防止结露的结构。然而,由于用户总是打开门将物品置于储藏室中抽屉和储存空间的内部,所以摄像机安装到门处很难拍摄到储藏室的内部。尤其是,本发明的一个目的是从抽屉外部获得储存在抽屉中的物品的状况以及抽屉的移动。由于用户的操作总是通过打开门实施的,并且当门关闭时抽屉被关闭,所有这种情况不利于实现上述一个目的。
因此,为了至少拍摄到抽屉的内部和抽屉的移动,优选将摄像机设置在待拍摄的抽屉所在的冰箱的储藏室的本体中,而不是将摄像机设置在冰箱的外部,使得能够拍摄储藏室。
在根据所述一个目的而将摄像机安装在位于抽屉上方且朝向本体的储藏室的开口定位的一个搁架的下方的情况下,无法拍摄到搁架区,并且难以在搁架上安装用于驱动摄像机的驱动单元和导线。此外,为了覆盖抽屉的整个移动路径。需要使用广角摄像机。因此,拍摄到的图像可能会严重失真。
在摄像机被安装在储藏室的侧壁而位于抽屉能够暴露于摄像机的范围内的情况下,已发现由于摄像机与冰箱的储藏室的左侧和右侧的距离不同而产生非对称图像,并且因此示出储存在抽屉中的物品的状况的图像严重失真。因此,用户对图像的满意度大大降低。
最重要的是,本发明的一个目的是不使用单独的传感器,通过跟踪抽屉的移动来感测抽屉的打开/关闭及其开度。可以看出,上述非对称图像可以示出位于抽屉的前壁上或抽屉的两个侧壁的上表面上的印记部(标记)相对被放大的图像(图像失真)。因此,由标记占据的部分的尺寸(像素大小)可能相对于图像的整个尺寸增加,并且因此可以很容易识别标记的位置的改变。此外,用以确定标记的位置的改变的待处理范围可能增大,并且因此被连续传送的图像可能会丢失或无法处理。
因此,已经发现,如在提交本申请时已知的情形,将摄像机安装在储藏室的侧壁或角落处,不利于实现本发明的此目的。
在本发明的一个实施例中,摄像机被安装在储藏室的上壁对应于抽屉的打开的上表面处,并位于处于关闭位置的抽屉和处于打开位置的抽屉所投射的上表面的范围内。此外,摄像机朝向储藏室的后壁以面对储藏室的内部,并且以特定角度倾斜,使得摄像机的焦点被引导到储藏室后壁表面上的一个点。由此,在所述的实施例中,可以获得相对于摄像机的竖直视角使失真最小化的图像。
根据另一实施例,在确定摄像机的位置时,将摄像机安装在储藏室的上壁的位置处,位于储藏室的前表面中的开口与竖直设置在储藏室中的多个搁架当中最上层搁架的前边缘部的上壁上的投影位置之间。此外,摄像机朝向储藏室的后壁定位以面对储藏室的内部,并且倾斜特定角度,使得摄像机的焦点被引导到储藏室的后壁表面上的一个点。
摄像机优选地位于储藏室的上部的中部处,并且对应地位于抽屉的前壁的上表面或两个侧壁上的印记部优选地装设在抽屉的前壁的上表面上。更优选地,摄像机安装在储藏室的上表面的位置位于储藏室的上表面下方的抽屉的前壁的上表面附近。
在设置有用以打开和关闭储藏室的至少一个门(即左门和右门)的冰箱中,摄像机被安装在储藏室的的上表面(顶板)的一部分上,位于左门与右门之间的边界上,并且当设置左抽屉和右抽屉时,印记部位于左抽屉与右抽屉之间的边界附近。即,当观看者面对储藏室的内部时,左抽屉优选地位于右侧壁的上表面的端部处或前壁的右上表面处,并且右抽屉优选地位于左侧壁的上表面的端部处或前壁的左上表面处。换句话说,印记部优选形成在摄像机正下方的位置附近。这是因为如果印记部位于至远离摄像机正下方的位置的左右两侧,则可能会发生印记部的失真。此示例如图41b所示。
在印记部安装在左抽屉和右抽屉中的每个抽屉的上表面的一侧处,或者左抽屉和右抽屉的两个侧壁中的每个侧部的上表面的端部处的情况下,则当为了通过左门和右门打开和关闭的冰箱而使用左抽屉和右抽屉时,可以正常使用左抽屉和右抽屉而与它们的左、右位置无关。因此,可以提高抽屉的使用效率。
根据本发明的实施例,根据上述摄像机和印记部的位置,摄像机的固定拍摄范围覆盖抽屉从关闭位置到打开位置的移动路径。因此,使用一台摄像机,不仅可以感测到抽屉的打开/关闭,而且可以感测到打开/关闭的开度以及抽屉的停止或移动,并且甚至同时可以感测或查看储存在抽屉中的物品的状况。
此外,抽屉关闭时,还可以查看储存在安装在储藏室的底面上的底部容纳区中的物品的状况。因此,摄像机可以识别多个储存区域。
在摄像机的视角向上延伸到搁架区的情况下,摄像机可以选择性地识别三个储存区域,包括抽屉内部的区域、储藏室的底部容纳区以及搁架区。
由于安装在储藏室的上表面上的摄像机和形成或附接到抽屉的上部的印记部大致竖直对齐,所以摄像机拍摄并传送的冰箱内部的整个图像中的印记部的图像较少失真。此外,由印记部占据的空间可以相对最小化,并且因此,通过图像处理跟踪和确定印记部的位置所用的时间可以最小化。
下面将描述跟踪和识别形成在抽屉上的标记的方法。
通过图像解读可识别的印记部(标记或印纸)可以装设在抽屉的本体的暴露至摄像机的特定部位。通过跟踪标记的位置,可以感测抽屉打开/关闭的开度和关闭或打开的状态。通过使标记在抽屉从关闭位置到完全打开位置的移动路径上暴露于摄像机,可以基于标记的位置确定抽屉的打开或关闭状态。即,可以基于已连续拍摄的照片中标记位置的变化确定关于抽屉的各种状态的信息。
印记部可以设置有特定图案以跟踪和识别抽屉的移动或抽屉的打开或关闭状态。在这种情况下,印记部可以设置在抽屉的上表面上的暴露于摄像机的各种位置处。
优选地,在抽屉的前壁或两个侧壁的上端,印记部被大致装设在抽屉的最大存取开口的边界上。
印记部的图案可以以具有特定形状和对比色的图形交替排列的方式形成。所述特定形状可以包括四边形、三角形、圆形和波浪形。
印记部可能会破坏冰箱的整体美观并且引起一些用户的反感。因此,重复图形的图案需要被最小化,以便不引起对冰箱美观的反感,并且应该考虑具有对用户有吸引力的形状的印记部。
然而,并非仅仅地基于设计方面提出这种设计相关的问题,还可以在未准确识别抽屉的位置的情况下提出该问题。即,设计事项可能影响对抽屉的印记部的识别率,由此导致无法准确地感测抽屉的位置。
即,出于对在设计方面需要大大减小印记部的尺寸的考虑,所以可以选择图案中具有特定形状的图形和对比色被重复二至四次而不是被重复更多次的图案。在这种情况下,被配置为处理拍摄到的冰箱内部的图像的控制器可能无法准确识别整个图像中的印记部(标记)。
根据解决此问题的本发明的一个实施例,可以选择与抽屉的颜色成对比的颜色,通常为亮色、透明或半透明的颜色。此外,参照图41a,印记部沿垂直于抽屉的(前后移动)移动方向的方向的长度L1可以被设定为长于印记部的沿抽屉的移动方向的长度L2。在印记部中,在竖直方向上形成具有特定长度的第一颜色部,并且具有与第一颜色部的颜色成对比或与抽屉的颜色相同的颜色并且宽度大致等于第一颜色部的宽度的第二颜色部,形成在第一颜色部相对于抽屉的移动方向的前后。随后,重复第一颜色部。即,可以顺序设置第一颜色部和第二颜色部。至于以此顺序包括第一颜色部、第二颜色部以及另一第一颜色部的标记的整体尺寸,标记的沿垂直于抽屉的移动方向的方向的长度L1优选大于标记的沿抽屉的移动方向的长度L2。
根据本发明的另一实施例,布置在标记的前边缘处的第一颜色部的两端连接到布置在标记的后边缘处的第一颜色部的两端,使得第二颜色部被第一颜色部包围。先前在第三实施例中公开的标记可以是具有此结构的示例。
即,在本发明提出的标记的优选实施例中,标记被配置为使得垂直于抽屉的移动方向的方向上的长度L1大于抽屉的移动方向上的长度L2,并且标记邻近抽屉(相对于抽屉的移动方向)的部分具有与抽屉的颜色成对比的颜色(深色),标记的中部具有与深色成对比的亮色。
当印记部被如上配置时,印记部可以具有较小尺寸。因此,可以满足用户对于美观的需求,并且用摄像机拍摄的整个图像中印记部的图像部分可以相对于整个图像的尺寸具有较小尺寸。因此,可以减小经由图像处理以感测印记部的位置改变的区域的尺寸,并且因此可以提高图像处理速度。这有利地使得控制器的图像处理速度支持连续拍摄待传送的照片的速度。由此,可以进一步提高在精确的时间获取照片的准确度。例如,如果连续拍摄的照片中的一部分很大,则控制器可能会承受沉重的工作负荷。这可能导致较为昂贵的控制器的使用。另一方面,如果待处理部分很小,则可以减轻控制器的负荷。因此,用廉价的控制器也可以有效地处理图像。
优选地,如图41b所示,标记设置有字母、符号或图案,以允许用户直观地理解标记的使用。
下面将描述识别标记的坐标和处理来自摄像机的照片的方法。
图42是示出识别标记的位置的方法的视图。下面将参照图42描述识别识别抽屉的标记的位置的方法。
当用户新近期望送入(存放)抽屉或从抽屉拿取物品时,用户首先打开门。一旦门从储藏室的前表面分开,门开关即感测到分开,而且控制器从门开关接收信号并且驱动安装在冰箱中且被设定为待机模式的摄像机。当摄像机从控制器接收到驱动命令时,驱动电压代替待机电压被施加到摄像机。然后,摄像机结束驱动的准备并开始持续拍摄。
随后,用户将握住安装在冰箱的储藏室中的抽屉的前壁上的手柄,并且向外拉抽屉以打开抽屉。由于摄像机连续拍摄抽屉,所以摄像机以特定的时间间隔拍摄抽屉被打开的照片,并将拍摄到的照片发送到控制器。
同时,具有特定形状的标记形成在抽屉的暴露于摄像机的部分之处。在接收到从摄像机传送的照片时,控制器以特定的像素组划分整个图像,并以特定间隔将坐标值分配给图像。然后,控制器在图像的坐标上分析标记的坐标。
因此,当在抽屉处于关闭位置时拍摄的照片被传送到控制器时,标记不会暴露于对应的图像中。此时,标记的坐标值为0。
当用户打开关闭的抽屉时,摄像机拍摄带有暴露的标记的抽屉。因此,摄像机拍摄包括标记的照片。当该照片被传送到控制器时,控制器识别对应图像中的标记的坐标值,并且比较该坐标值与该标记的前一个位置的坐标值。例如,参照图42,当标记的坐标值从0改变到例如位置A处的50时,基于坐标值的改变,控制器可以确定该抽屉在移动。尤其是,当坐标值刚从0开始变化时,控制器可以确定抽屉刚开始被打开。
当用户继续打开抽屉时,通过上述一系列处理,基于标记的坐标变化到更大的值,控制器可以确定,抽屉正在移动以被打开。
当用户完全打开抽屉时,控制器识别出坐标值不再变化,并且确定抽屉已完全打开或抽屉在打开状态中停止打开。例如,在图42中,位置B是标记的坐标值为90并且不再改变的点,并且因此可以识别出抽屉停止或确定抽屉被完全打开。
通常,当抽屉被打开(无论完全打开或部分打开)然后停止时,可以确定用户在对抽屉实施特定的操作。即使当抽屉停止时,摄像机也继续拍摄冰箱的内部的照片,并将拍摄到的照片发送到控制器。并且控制器监测标记的坐标的变化。
一旦用户的向抽屉中存放或从抽屉拿取物品的操作完成,用户关闭抽屉。此时,基于拍摄到的照片,控制器识别出整个图像中标记的坐标改变了,并且确定抽屉被再次移动。例如,在图42中,位置C是标记的坐标值从90变化到70的点。基于坐标值变化到较低的值,控制器可以确定紧接在用户完成对抽屉的操作之后抽屉正开始被关闭。
类似地,在标记的坐标值为0,即在图像中未识别到标记的情况下,也会确定抽屉被完全关闭。
上文已经描述了一种方法,用于控制器通过标记的坐标来识别标记在由摄像机拍摄的整个照片上的位置并跟踪该标记,并且确定抽屉是在移动或是停止、抽屉的开度以及抽屉是否开始被打开或被关闭。
下面将描述处理来自摄像机的照片并且基于抽屉的标记的位置获取期望的照片的方法。基于抽屉的移动状态,将详细描述处理并获取抽屉内部的照片的方法,尤其是获得被确定为刚好在用户完成对抽屉的操作之后拍摄的照片的方法。
当抽屉的标记的坐标从0改变到更大的值,并且因此抽屉被确定为沿打开的方向移动时,基于由摄像机拍摄并传送到控制器的冰箱内部的照片,控制器仅感测坐标的变化,并且将整个照片缓存在临时缓存区中而不处理在照片中单独示出的储存区域。
当抽屉继续被打开而设定在被完全打开的状态,或被部分打开并停止时,用户对抽屉实施操作。当标记的坐标不改变时控制器确定发生了此情况。然后,在被传送的照片的整个图像中经划分的多个区域当中,对应于抽屉区的子图像被移动并存储在临时的抽屉缓存区中。即,参照图42,在对应于位置D的区段中,控制器从冰箱的整个内部的照片的抽屉区的一部分剪裁下必要的部分,并且将此部分移动到用于抽屉区的临时缓存区。此区段被定义为“刷新抽屉的内部区域的照片的区段”。
换句话说,在抽屉正在被打开的区段与抽屉停止的区段之间对图像的处理不同。这是因为考虑到用户对抽屉的操作是在抽屉停止时实施的事实来进行图像处理。由此,在抽屉移动的区段中,可以提高用于跟踪坐标的变化的图像处理的速度,确保高效的数据处理。
当处于停止状态的抽屉开始被关闭时,基于坐标变化到较低的值,控制器确定用户的操作已完成。此时,控制器选择并存储在临时缓存区中临时缓存的图像的最新的图像。即,拍摄刚好在用户的操作完成之后提供的抽屉的内部区域的图像。
用被储存在抽屉区中的物品的被拍摄(存储)的最新的图像替换显示器的区域上的图像,显示器的区域上的图像连接到网上或直接连接到控制器,或被传送到网络服务器。被传送到网络服务器并储存在网络服务器中的最新的图像可以提供给用户,使得每当用户期望查看时,用户可通过安装在冰箱处或者连接到网络服务器的移动终端处的显示器查看图像。
接着将描述选择和搜索特定区段而不搜索拍摄到的示出抽屉的整个照片来寻找标记的位置的方法。
即,可以设定抽屉区的搜索范围。根据抽屉的开度,抽屉的移动路径可以被划分为若干区段,并且在各个区段中可以用不同的方法跟踪标记。由此,处理(分析)由摄像机拍摄并传送的照片所花费的时间可以被缩短,使得照片处理速度与摄像机的拍摄速度相匹配。
一般而言,当在冰箱中使用的抽屉处于完全打开位置时,其不被抽出以从储藏室分开。即,抽屉的正常抽出距离,通常被称为打开距离,通常是抽屉的整个深度的大约50%(相对于抽屉移动方向的抽屉的前后长度)
抽屉的抽出距离可以被确定为一个区域,在该区域中坐标被分配给待由控制器处理的示出图像中抽屉的标记。在这种情况下,控制器可以从抽屉开始被抽出的时间起识别抽屉的位置。尤其是,抽出的距离对应于待由控制器处理以感测抽屉的坐标变化的数据的大小。此外,为了感测并确定的坐标的变化,控制器需要比较两张照片,并且实施此处理的速度应对应于摄像机的拍摄速度。优选地,摄像机的拍摄速度(拍摄照片的时间间隔)被确定为使得其与控制器基于被传送的照片进行确定变化并处理这些照片的速度大致匹配。
根据该方法,立即在由摄像机拍摄的照片中定位标记,并且因此确定抽屉的位置。此外,控制器可以很容易地从由摄像机连续传送的新照片中获得图像,同时处理冰箱内部的整个照片中储存区域的经划分的区域图像。即,取决于门是否打开以及抽屉是否打开,可以从整个图像中剪裁各个区域的图像,并且存储在对应的临时缓存器中,而不会漏掉任何摄像机拍摄的照片未处理。
然而,需要处理具有如上所述尺寸的两个图像(前一个图像和当前图像)的数据,并且因此,可能需要相对较高的控制器的处理容量。在提高控制器的处理容量以满足此要求的情况下,处理器的价格可能显著上涨。此外,为了处理不打开抽屉时的图像,可能需要过高的处理容量,并且因此可能无法实现对组件的有效选择。
为了解决这个问题,根据本发明的一个实施例,考虑到在抽屉打开特定距离时非常难以充分识别抽屉的内部,逐步分开识别抽屉的图像和识别抽屉区域的图像,并且根据抽出距离用不同的方法处理图像数据。
图43是示出抽屉的开度的视图。图43(a)示出抽屉被完全打开,即被打开抽屉总长度的大约50%,图43(b)示出抽屉被打开抽屉总长度的大约30%,图43(c)示出抽屉被打开抽屉总长度的大约10%。
例如,当如图43(c)所示用户打开抽屉为抽屉前后总长度的大约10%时,储存在抽屉中的物品可能不足以被识别。仅当抽屉被打开前后总长度的大约30%时,储存在抽屉中的物品才可以在特定程度上被识别,并且因此抽屉可以被识别为是打开的。
当如图43(a)所示抽屉完全打开时,抽屉被抽出抽屉总长度的大约50%,并且储存在抽屉中的物品可以被充分识别。换句话说,仅当抽屉被打开总长度的大约30%至大约50%时,用户才可以在抽屉中储存物品或从抽屉拿取物品。当抽屉在此移动区段中时可以被视为是打开的。
在这种情况下,当抽屉的抽出距离小于总长度的30%时,可以被确定为“抽屉未被打开”。当抽屉的抽出距离等于或大于总长度的30%时,可以被确定为“抽屉是打开的”。由此,根据抽出距离可以不同地处理照片,以减少控制器需要处理的数据的负荷。
控制器从由摄像机拍摄的照片获得图像,并且确定对应于抽屉的移动轨迹的图像尺寸。然后,控制器确定到达抽屉被抽出总长度的大约30%的点或距离的像素的数量,并且设定图像区段。
即,当抽屉从图43(a)所示的位置抽出到图43(b)所示的位置时,控制器可以确定标记的坐标的变化。在这种情况下,相对于当抽屉从图43(a)所示的位置抽出到图43(c)所示的位置时确定坐标的变化的情况可以减少控制器的负荷。
在从抽屉的关闭位置到抽屉被抽出总长度的30%的位置的移动区段中,仅确定标记是否到达对应于总长度的30%的像素的位置。换句话说,不将前一个照片中标记的坐标与当前照片中的标记的坐标进行比较(以确定标记的坐标的变化)。相反,仅确定标记的位置是否在特定像素范围内,并且临时缓存整个图像。
由于在此移动区段中仅处理一张照片的数据,而不比较两张照片的数据,不需要提高控制器处理数据的容量,所以可以根据摄像机的拍摄速度顺利地实施处理。
同时,在抽屉被打开到超出对应于总长度的30%的位置的情况下,即从标记到达超出由控制器处理的照片中特定像素的位置的时间起,通过比较两张照片(刚好在此时间之前拍摄的最后一张照片和在此时间之后拍摄的照片)以确定抽屉是否停止,可以确定标记的坐标值。
如果如上述限制搜索范围,则照片的尺寸减小到当不限制搜索范围时获得的照片尺寸的大约2/5。此外,对应于待处理的两张照片的照片尺寸被减小到当不限制搜索范围时获得的照片尺寸的大约4/5。因此,控制器处理的数据的大小可以大致上小于或等于一整张照片的大小。
因此,用于跟踪两张照片之间的坐标值的变化的数据处理速度可以对应于摄像机的拍摄速度,并且因此数据处理(跟踪或监测坐标)不会漏掉任何由摄像机拍摄的照片未处理。即使不提高控制器的容量时,也可以防止关于处理时间的时间延迟。因此,可以在精确的时间获取期望的照片。
总而言之,可以在由摄像机拍摄的照片中将抽屉可被抽出的距离部分划分为第一区段和第二区段。
可以基于第一区段中拍摄的照片的像素来确定标记的位置。此时,在第一区段中,无需比较标记的坐标值,也可以确定标记在照片中的像素位置。
在第一区段中,即使抽屉实际是打开的,用户也很难从抽屉中拿取物品或将物品储存到抽屉中。因此,抽屉可以被看作基本上是关闭的。
第二区段可以被设定为坐标搜索范围,在该坐标搜索范围中比较两张连续拍摄的照片中标记的坐标值。由于在第二区段中会比较两张照片,所以可以感测到标记的坐标的变化。例如,如果在两张照片中标记被示出在相同的位置处,则可以确定在拍摄这两张照片时抽屉保持停止。如果在两张连续照片之间标记的位置改变了,则可以确定在拍摄这两张照片时抽屉移动了。此时,取决于标记的位置被改变的方向,可以确定抽屉是移动至被关闭还是移动至被打开。
在第二区段中,允许用户将物品储存在抽屉中或从抽屉拿取物品的开口是暴露的,并且因此,抽屉可以被看作是大致上打开的。
图45是根据本发明的一个实施例的控制流程图。下面将参照图45进行描述。
确定门20打开储藏室22(S10)。此时,可以由门开关110来感测门20的打开/关闭。
当门20被打开时,可以驱动门传感器120。即,门传感器120可以感测门20是否已旋转大于或等于特定角度的角度θ。即,当门20未被打开时门传感器120可以不工作,并且可以在门20被打开时开始工作。
此外,当门20被打开时,摄像机70可以开始拍摄照片(S14)。此时,摄像机70可以以预定的时间间隔拍摄照片。例如,其可以每秒拍摄10张照片。
由摄像机70拍摄的照片被存储在存储器单元18中。在由摄像机70拍摄多张照片的情况下,由于存储器单元18的容量限制,可以存储最近拍摄的照片并且可以删除前一张拍摄的照片。
同时,抽屉感测单元130可以感测抽屉50是否打开(S20)。抽屉感测单元130可以感测抽屉50从搁架40下方的空间被抽出。
此外,当由抽屉感测单元130感测都抽屉50的关闭时,此时或与此时最近的时间处拍摄到的照片被选择作为最终照片(抽屉在打开状态下)。
由于摄像机70每秒拍摄确定数量的照片,所以当抽屉50开始被关闭时可能未正确拍摄照片。当经由抽屉感测单元130通过分析在由摄像机70拍摄的照片上呈现的照片的移动确定抽屉50的移动时,可以选择在抽屉50被确定为开始被关闭的时间处的照片。
控制器100将最终照片划分为第一区域42、第二区域52和第三区域62(S42)。此时,通过指定调整线15的像素数量,控制器100可以将照片划分为多个区域,并且获取各个区域的最终图像。
如上所述,当抽屉50被抽出时,第二区域52与第三区域62重叠。
由于已在S20中获得指示抽屉50已被抽出的信息,所以控制器100可以确定已获得第二图像。
然后,可以更新关于第二区域52的信息(S46)。控制器100可以将示出第二区域52的第二图像传送到显示器14,以基于最终照片来改变显示器14上的对应部分。
另一方面,当在S30中确定抽屉50未开始被关闭时,可以如在S14中那样拍摄照片。
当在S30中确定抽屉50未被关闭时,这可能意味着用户未终止对第二区域52的存取。即,在抽屉50停止的情况下,用户可以在第二区域52中储存新的食品,或者从第二区域52拿取所储存的物品。
另一方面,当确定抽屉50开始关闭时,可以表明用户终止对第二区域52的存取,并且将抽屉50送入搁架40下方的空间中。
同时,在于S20中确定抽屉50未被打开的情况下,可以确定门20是否即将被关闭(S60)。
此时,可以由门传感器120感测门20是否即将被关闭。
在终止对储藏室22的存取时,用户关闭门20,从而紧紧关上储藏室22。即,在由门20打开显示器14的情况下,用户可以将新的食品储存在xx2中或从储藏室22拿取所储存的食品。
在门20被用户关闭的情况下,可以确定用户终止对储藏室22的存取,并且储藏室22中的食物被保持在原位直到门20被再次打开。
当在S60中确定门20即将被关闭时,控制器100可以选择在此时间处或在最接近此时间的时间处拍摄的照片作为最终照片(抽屉处于关闭状态)(S70)。即,控制器100可以选择在终止用摄像机70拍摄照片的时间处或在最接近此时间的时间处拍摄的照片作为最终照片。
控制器100将最终图像划分为第一区域42、第二区域52和第三区域62(S72)。此时,最终照片包括示出第一区域42的第一图像。储存在第一区域42中的食物的最新状态是在用户终止对储藏室22存取的时间处的食物的状况。因此,用户可以从此时获取的第一图像获取关于第一区域42中食物的正确的信息
由于在S60中已获得指示抽屉50已被送入的信息,所以可以确定控制器已经获得第一图像和第三图像。如上所述,当抽屉50被抽出时,第二区域52和第三区域62彼此重叠。但第一区域和第三区域被定位为不相互重叠,但被一起拍摄到。
此外,可以更新关于第一区域42和第三区域62的信息(S76)。控制器100将示出第一区域42的第一图像和示出第三区域62的第三图像传送到显示器14,使得基于最终照片改变显示器14上对应的部分。
虽然在图45中未示出,当门20旋转到关上储藏室22,并且储藏室22因此被关闭时,可以停止对摄像机70的驱动。此时,门开关110可以感测门20是否关上储藏室22。
即,在本实施例中,处理在用户终止对储藏室22的使用的时间处获取的照片以向用户提供关于储存在区域中的食品的信息。因此,用户可以获得关于储存在储藏室22中的食物的准确信息。
同时,两个门传感器120、两个门开关110和两个抽屉感测单元130被分别安装在左侧和右侧。在这种情况下,可以获取关于左门和右门以及左抽屉和右抽屉各自的信息。在抽屉感测单元130通过分析拍摄到的照片中示出的标记来感测抽屉的移动的情况下,标记可以被装设在两个抽屉中的每一个处,同时设置一个抽屉感测单元130。
因此,在仅左门被打开的情况下,可以基于上述信息仅更新照片的左部分。另一方面,在仅右门被打开的情况下,可以仅更新照片的右部分。
在上述条件下左门和右门均被打开的情况下,可以更新照片的左部分和右部分这两者,并且将它们提供到显示器14。
图46是示出图45中所示的实施例的变型的控制流程图。
参照图46,图45的S60被分为S62和S64。仅描述不同于图45的细节。
即,通过确定门20是否在关闭方向上旋转(S62),并且确定门20是否旋转大于或等于特定角度θ来确定门20是否即将被关闭。
换句话说,当门20沿关闭方向旋转(S60)并且门20旋转的角度小于或等于特定角度(S64)时,可以终止用摄像机70拍摄照片。
为了从由摄像机70拍摄的照片获得与储存在储藏室22中的食物有关的信息,不应出现由门20和安装在门20处的篮筐的干扰。因此,在门20即将被关闭的情况下,可以建议由摄像机70拍摄的照片中不示出门20和其它有关构件。
图47是示出图46的实施例的变型的控制流程图。下面将参照图47描述不同于图46的一些细节
参照图47,与图46的实施例不同,不确定门20的旋转方向。
当在S12中确定门已旋转大于或等于特定角度的角度时,这表明门20此时沿打开方向旋转。因此,当用户再次旋转门20,并且因此门20到达特定角度位置时,这可能意味着用户正在关闭门20。
因此,在本实施例中,不执行图46的步骤S62。一旦在S20中确定抽屉未被打开,就立即执行确定门是否已经旋转了小于或等于特定角度的步骤S64
图48是图45的实施例的另一变型的控制流程图。下面将参照图48进行描述。
图48描述通过标记感测抽屉50的移动的控制流程。为了描述的简化,将不描述与上述相同的细节,而是将仅描述与图45的实施例不同的特征。
先前实施例的S20和S30可以被划分为S22、S24和S26。
在如S16中那样将照片存储在存储器单元18中之后,摄像机70确定是否识别出标记(S22)。
由于摄像机70从内壳12的上侧面朝下拍摄照片,所以标记可能不会暴露于摄像机70。即,在搁架40的前边缘处未示出抽屉50的手柄的情况下,即抽屉50未被抽出的的情况下,可能不会识别出标记。
在由摄像机70拍摄的照片中识别出标记的情况下,可以确定标记是否停止(S24)。此时,可以在一张照片中识别出标记的移动路径。然后,该路径可以被划分为第一区段和第二区段,并且可以仅在第二区段中确定标记的移动
由于摄像机70以预定的时间间隔拍摄多张照片,所以可以通过比较多张照片来确定标记是否移动。由于标记被标记在抽屉50上,所以当标记移动时,可以确定抽屉50是否移动。
此外,可以确定标记是否从抽屉50被关闭的位置移动大于或等于特定距离的距离(S26)。
在标记未移动大于或等于特定距离的距离的情况下,抽屉50未充分打开,并且因此无法获取第二区域52的正确的图像。例如,在抽屉50仅被抽出总长度的30%时拍摄照片的情况下,抽屉50的内部空间无法在照片中充分示出,并且用户无法从由这张照片获取的图像获取关于第二区域52的信息。这里,可以基于标记是否已经进入用于确定标记的移动的搜索范围来确定该特定距离。
当确定标记已移动大于或等于该特定距离的距离时,该确定可以意味着用户终止对第二区域52的存取并且结束对第二区域52的使用。
因此,在满足上述三个条件的时间处或在接近此时间的时间处获取的照片可以包括关于储存在第二区域52中的食物的信息。
图49是示出图45的实施例的另一变型的视图。下面将参照图49进行描述。
与图45不同,在门开关110确定门20被打开的时间处不立即驱动图49的实施例的摄像机。
当门开关110确定门20被打开时,驱动门传感器120。
此外,门传感器120确定门20是否已旋转大于或等于特定角度的角度(S12)。在门20未旋转大于或等于特定角度的角度的情况下,摄像机70不拍摄照片。
当门20旋转大于或等于特定角度的角度的情况下,摄像机70拍摄照片(S14)。此时,摄像机70以预定的时间间隔拍摄照片。例如,摄像机70每秒拍摄10张照片。
拍摄到的照片包括第一区域42的第一图像。由于门20已旋转大于或等于特定角度θ的角度,所以安装在门20处的篮筐可以不干扰拍摄照片。安装在门20处的篮筐不会出现在照片中。
在S60中,门传感器120可以感测门20即将被关闭。当认为门20即将被关闭时,这可能意味着门20沿关闭方向旋转,并且因此门20形成小于或等于特定角度的角度。
摄像机70拍摄照片并当门20即将被关闭时停止拍摄操作(S69)。在图45中,摄像机70拍摄照片直到门开关110通过关闭门20而受到按压。相比之下,在图49的实施例中,当门传感器120确定门20已经旋转特定角度时,摄像机70停止拍摄照片。该特定角度可以是门20阻挡了视野而安装在门20处的篮筐没有出现在照片中的角度。
图50是根据本发明的另一实施例的控制流程图。下面将参照图50进行描述。在图50的控制流程中,当通过门开关110确定门20被打开时,可以在预定的时间间隔连续实施拍摄操作。
首先,由门开关110确定门20是否被打开大于或等于特定角度θ的角度(S100)。
当门20被打开大于或等于特定角度的角度时,确定拍摄操作不被抽屉50干扰,并且摄像机70拍摄照片(S110)。此时,摄像机70可以拍摄一张照片。
然后,确定抽屉是否已被抽出大于或等于第一设定距离的距离(S120)。这里,该设定距离可以是从由摄像机70拍摄的照片中可充分获取关于第二区域52的食品信息的距离。例如,第一设定距离可以是抽屉50的总长度的2/3或1/3。
可以由抽屉感测单元130感测抽屉50的抽出距离。
当确定抽屉50已被抽出大于或等于第一设定距离的距离时,控制器100根据各个区域将照片划分为多个图像(S122)。
由于照片是在抽屉50被抽出时获取的,所以可以从照片获取第一图像和第二图像。
控制器100可以更新第一图像和第二图像(S124)。
另一方面,当在S120中确定抽屉50已被抽出大于或等于第一设定距离的距离时,可以确定抽屉50是否已被抽出大于或等于第二设定距离的距离(S130)。
此时,第二设定距离可以是从由摄像机70拍摄的照片中可充分获取关于第三区域62的食品信息的距离。例如,第二设定距离可以是抽屉50的总长度的1/3。第二设定距离可以被设定为0以选择抽屉50被完全送入搁架下方的空间的位置作为第二设定距离。
当确定抽屉50已被抽出第二设定距离时,控制器100可以根据各个区域将照片划分为多个图像(S132)。
由于照片是在抽屉50被抽出时获取的,所以可以从照片获取第一图像和第三图像。
控制器100可以更新第一图像和第三图像(S134)。
根据图50的实施例,当门20被打开时重复控制操作,并且当门20关上储藏室22时控制操作完全终止。当控制操作终止时,不再实施图像更新,并且因此可以获取储存在储藏室22中的食物的最终图像。
图51是示出在设置用于存取打开和关闭储藏室的两个门和两个抽屉的情况下更新图像的过程的视图。下面将参照图51进行描述。
在描述本实施例时,将简略描述与先前实施例相同的一些细节。
当向冰箱提供电力时,安装在冰箱的左右两侧处的门开关110可以独立地确定左门或右门是否被打开(S302和S303)。
当门开关110之一确定左门或右门被打开时(S303),摄像机70开始拍摄照片(S304)。
当左门和右门之一被打开或左门和右门同时或在不同时间被打开时,摄像机70可以拍摄照片。这是因为当通过门开关之一确定门被打开时冰箱中的灯被打开。
当布置在左侧的抽屉被抽出大于130mm的距离(S310)时,拍摄与左抽屉相关的图像(S312)。与左抽屉相关的图像可以表示左抽屉被示出在拍摄到的照片中或可以呈现在拍摄到的整个照片中。
此时,长度130mm(可以由冰箱的制造商或用户改变)可以表示抽屉被用户抽出的距离使得抽屉中的储存空间可被存取。
当左抽屉被抽出小于或等于130mm的距离(S310)时,由摄像机70拍摄的最终图像被保持(S310)。
此外,左门传感器感测左门的打开角度。此时,在左门被打开小于80度的角度的情况下,提供/拍摄设置在处于被抽出位置的左抽屉下方空间中的左方多重容纳(multi-accommodation)空间的图像(S332)。
此时,80度可以表示当摄像机70拍摄该容纳空间时,左门和安装在左门处的若干结构的角度不干扰摄像机70。取决于冰箱的结构或尺寸,该角度可以改变。
当左门被打开大于80度的角度时,由摄像机70拍摄的最终照片可被保持(S336)。
此外,门开关110可以感测左门被关闭(S334)。
对于右抽屉和右门,可以实现如上文相对于左抽屉和左门所描述的相同的控制流程。即,上文给出的描述同样适用于步骤S320到S324以及步骤S340到S346,因此这些步骤将不作详细描述。
当右门或左门被关闭时,可以由控制器100处理拍摄到的图像,并且经处理的图像可以被显示在显示器14上(S350)。这里,显示器可以是安装在冰箱的构件。
然后,摄像机可以停止拍摄操作(S352)。
同时,确定冰箱是否连接有Wi-Fi以用于通信(S354)。如果可以通信,则图像可以被传送到外部服务器(S356)。
服务器确定用户使用的终端的应用是否是同步的(S358)。如果应用是同步的,则图像可以被显示在终端的显示器14上。
因此,用户可以通过用户的终端接收关于储存在冰箱中的时间的信息。
在冰箱未连接有Wi-Fi以实施外部通信或冰箱未与终端的应用同步的情况下,最终图像优选被保持在用户终端的显示器14上并被提供给用户。
下面将描述被设置为拍摄照片并在期望时间获取照片的构件。
当门开关感测到使用者开始打开门时,控制器驱动摄像机拍摄冰箱的内部。摄像机每秒连续拍摄特定数量的画面。用户打开门的动作表示用户意图从冰箱拿取期望的物品或将新物品储存在冰箱中。因此,通过连续地拍摄冰箱的内部,可以监测冰箱的储藏室中的储存空间的状况的变化。
储藏室被划分为搁架、抽屉或篮筐,以形成储存空间。物品根据物品或容器的形状或内容而被储存在各个储存空间中。
摄像机可以监测被搁架划分为搁架区、抽屉区和其它储存区的储存空间。由此,在用户完成储存或拿取操作之后,摄像机立即允许用户查看各个区域中的物品的储存状态。在设置两个抽屉并且并列设置其它两个储存区的情况下,可以通过摄像机提供允许用户查看两个抽屉和两个储存区域的信息。
根据本发明的一个实施例,其它储存区域形成于储藏室的底部,并且位于抽屉的储存区域前方并且在抽屉被打开时至少部分与抽屉重叠的空间被设定为待监测的容纳空间。
当门开关感测到门被打开时,控制器开启设置至冰箱的铰链组件的门传感器,以根据门的旋转感测移动。门传感器可以保持开启,或者可以仅当门开关感测到门被打开时开启。
当门被打开大于或等于特定角度的角度时,控制器确定门基本上被打开为允许用户存取储藏室以储存或拿取物品,并且将搁架区的储存状况确定为待更新的对象。
此外,抽屉感测单元感测抽屉的开度。在抽屉被打开的情况下,将抽屉的储存条件确定为待更新的对象。在抽屉未被打开的情况下,将容纳区确定为待更新的对象。
根据本发明的一个实施例,在门被打开或关闭时门传感器感测到门经过了特定角度,然后将有关信息发送给控制器。这里,门传感器还可以感测门的旋转方向,即关闭方向或打开方向。
根据本发明的一个实施例,当门开关感测到接通信号时,控制器开启门传感器。门传感器进而感测门经过特定角度的时间,并将该时间发送到控制器。然后,控制器确定此时门被打开。具体而言,门已经旋转了特定角度,并处于被打开的状态。
当在门打开的情况下用户结束拿取或储存物品时,用户关闭门。当门经过门传感器时,门传感器向控制器发送信号。然后,控制器基于此信号确定用户完成储存或拿取操作,并且门即将被关闭。具体而言,门在此时打开特定角度并且旋转以关闭。
下面将描述根据本发明的一个实施例,在门打开或关闭期间拍摄冰箱内部的照片、以及在用户完成对物品的储存或拿取之后立即更新照片的过程。
当在门关闭的情况下开启门开关时,控制器开启摄像机和门传感器。这意味着摄像机被从待机模式切换到驱动模式,并且门传感器被切换到门传感器能够确定门的开度的模式。
摄像机可以以每单位时间预定数量的画面连续拍摄冰箱内部。拍摄到的照片被传送到控制器,并且控制器临时缓存所传送的照片作为包括冰箱的整个内部的图像。
在本说明书中,术语“图片(或照片)”可以与“图像”不同。
具体而言,术语“图片(或照片)”可以表示在被拍摄之后立即传送的原始数据,而术语“图像”可以表示经由控制器通过缓存、校正或传送图片(或照片)(作为原始数据)而获得的数据。
当门开关开启,控制器根据门的打开角度确定门被打开时,控制器根据抽屉的打开确定整个图像示出哪个区域储存有物品。
例如,在抽屉被打开的情况下,控制器确定所存储的整个图像示出物品储存在冰箱的搁架上方的区域(搁架区)和抽屉的抽屉储存区域(抽屉区)中。另一方面,当确定抽屉被关闭时,控制器确定所存储的整个图像示出物品储存在冰箱的搁架区和形成在抽屉的前边缘处并且在抽屉打开时与抽屉重叠的容纳空间的内部区域中。
在由摄像机拍摄和传送的整个储藏室的照片中,储藏室被划分为三个不同的储存空间,同时根据抽屉的打开/关闭状态,在照片中选择性地包含搁架区和容纳区。抽屉区和容纳区不共存在照片中。
因此,从摄像机传送的整个照片包含至少两个区域。两个区域中的一个是搁架区,其它储存区域由抽屉的打开/关闭状态决定。
本发明旨在通过用摄像机拍摄至少包括抽屉的内部空间的两个不同储存空间来向用户提供关于物品的最近储存状况的信息。因此,仅拍摄抽屉区和搁架区,并更新对应的照片可以是本发明的一个实施例,而仅拍摄抽屉区和容纳区,并更新对应的照片可以是本发明的另一实施例。
同时,可以通过打开和关闭储藏室的门的数量来确定将构成冰箱中一个独立的隔热空间的储藏室的一整张照片划分成储藏室中的多个储存区域。例如,在冰箱具有由一个门打开和关闭的储藏室的情况下,拍摄到的照片可以被划分为两个或三个储存区域。在储藏室由左门和右门打开和关闭的情况下,拍摄到的照片被划分为四个或六个储存区域。
在这种情况下,每个抽屉区和容纳区可以竖直划分,使得每个区域被示出为整张照片中两个划分后的区域,并且搁架区可以被示出在一个区域中。在这种情况下,整张照片可以包括五个划分区域。
面对左门和右门的搁架区的储存空间彼此连接。在搁架区中,物品、食品或蔬菜可以沿横向从搁架区的左侧布置到右侧。在这种情况下,仅通过左门和右门之一的存取开口,可以将物品储存在搁架区中或从搁架区拿取物品。因此,当两个门中的至少一个被打开时,拍摄到的整个图像中的整个搁架区需要被替换为最新数据。在这种情况下,当两个门中的至少一个被打开时可以更新整个搁架区。
更具体而言,当在门被打开的情况下确定抽屉被打开时,控制器从传送的照片中分开搁架区与抽屉区,并且将其临时缓存。此外,当用户在抽屉区和/或搁架区完成对物品的储存或拿取之后即将关闭抽屉时,即,当已经停止的被打开的抽屉开始移动时,在临时缓存的照片当中,最近拍摄的照片中的抽屉区的必要部件被拍摄或剪裁并存储在存储器单元中,以作为示出抽屉区的最近储存状况的图像。同时,在显示器上显示的冰箱内部的照片中,通过将图像替换为最新的照片,来更新拍摄到的抽屉区的图像。此外,控制器将拍摄到的抽屉区的图像通过网络传送到连接到冰箱的服务器系统。
同时,当门被打开的情况下未感测到抽屉的存取开口、并且因此确定抽屉关闭时,控制器确定所传送的照片的整个图像包含搁架区和容纳区。因此,从整个图像中分开搁架区和容纳区并临时缓存。
当用户在抽屉区和/或搁架区完成储存或拿取物品后关闭抽屉时,当门经过预定的角度时,门传感器感测门并且将信号传送到控制器。基于从门传感器传送的信号,控制器进而确定门即将被关闭(这意味着拍摄即将被诸如门等障碍物阻挡),然后在临时缓存的照片当中最近拍摄的照片中的容纳区中拍摄必要的部分,并将其与存储在存储器中作为示出抽屉区的最近储存状况的图像。同时,在显示在显示器上的冰箱内部的照片中,通过替换图像来更新拍摄到的容纳区的图像。
这里,更新可以指将现有的图像替换为最新的图像。控制器将拍摄到的抽屉区的图像通过网络传送到连接到冰箱的服务器系统。
当抽屉打开或关闭时,在确定门即将被关闭的时间处在缓存的图像当中拍摄搁架区的最新的图像,然后将其存储在存储器中作为示出搁架区中的物品的最近储存状况的图像。
将冰箱的显示器上显示的图像替换为拍摄到的图像(搁架区的最新的图像和抽屉区或容纳区的最新的图像中的一个或全部),以及通过无线通信将拍摄到的图像传送到连接到冰箱的服务器系统或用户的移动设备,这两者可以在将拍摄到的图像储存在冰箱的存储器中时同时进行。当存在来自用户的请求时这些操作可以一同进行,或者可以根据来自用户的请求信号针对单独的区域进行。
从摄像机传送的一张照片可以被控制器缓存作为一个图像。当确定在门打开时拍摄该图像,则可以取决于抽屉是打开还是关闭来确定该图像包含抽屉区还是容纳区。根据该确定,提取相应的图像并且将其缓存在临时缓存器中。
当确定是在抽屉开始被关闭时拍摄的一个图像时,将被临时缓存的图像当中的最新的图像存储在存储器中。用户完成新的储存或拿取动作,将现有的图像替换为最新的图像。此外,当确定门即将被关闭时,将临时缓存的容纳区的图像当中的最新的图像存储在存储器中。
同时,在门即将被关闭之前,在临时缓存的容纳区的图像当中,可以从最新的图像中提取最新的图像的示出搁架区的一部分,并且将其存储在存储器中。可以设置用于搁架区的单独的临时缓存器,并且在单独的缓存器中提取和缓存示出搁架区的部分。
下面参照图52至图55描述利用根据各实施例所示的各种利用图像的方法将冰箱内部的图像传送到个人移动终端或服务供应商的服务器。
图52是示出根据另一实施例的操作冰箱的方法的梯形图。
参照图52,当确定已经通过参照图34描述的步骤获取冰箱中特定区域的最终照片时(S1101),控制器100传送通过针对终端2的校正获得的最终图像以作为一个事件(S1103)。终端2可以包括智能手机、个人数字助理(PDA)以及平板PC。然而,实施例不限于此。控制器100不仅可以传送冰箱内部的最终图像,而且可以传送与最终图像相关的各种信息至终端2。
此时,在通过最终照片获取最终图像时,控制器100将最终图像传送至终端2,或者可以将获取的最终图像存储在存储器单元18中,然后在预定的周期上将存储的图像传送至终端2以作为一事件。然而,本发明的实施例不限于此。
随后,终端2显示根据用户的选择所接收的最终图像(S1105)。例如,终端2执行能够根据用户的选择接收和显示冰箱内部的图像的应用。或者,终端2可以实施多媒体服务以显示所接收到的冰箱内部的图像。
根据本实施例,用户可以使用移动终端查看冰箱内部的图像,无需到冰箱中去查看。因此,用户可以远程了解冰箱内部的当前状况。
图53是示出根据另一实施例的操作冰箱的方法的梯形图。
参照图53,当确定已经如上所述获取冰箱中特定区域的最终照片时(S1101),控制器100通过根据各个区域划分最终照片以产生多个图像,然后控制存储器单元18存储所获取的最终图像(S1303)。
随后,当终端2接收用于显示冰箱的特定区域的图像的用户输入时(S1305),终端2将对最终图像的请求传送到冰箱(S1307)。
响应于对最终图像的请求,控制器100控制通信单元270将被存储于存储器单元18中的图像当中的最后拍摄并存储的冰箱内部的图像传送到终端2(S1309)。
根据本实施例,仅当用户期望时才进行移动终端与冰箱之间的通信。由此,通信可以变得更加高效和经济。下面将仅描述响应于该请求传送图像的例子。传送图像包括如上参照图35所述作为事件传送图像。然而,实施例不限于此。
图54是示出根据另一实施例的操作冰箱的方法的梯形图。
参照图54,当确定已经如上述获取冰箱中特定区域的最终照片(S5011)时,控制器100控制存储器单元18,使得从最终照片获取的最终图像存储在存储器单元18中(S1503)。
随后,当诸如市场服务器3的服务供应商的服务器接收显示冰箱内部的当前图像的用户输入(S1505)时,市场服务器3将针对最终图像的请求传送到冰箱(S1507)。此时,市场服务器3可以在预定的周期传送对最终图像的请求而无需用户输入。
然后,控制器100响应于该图像请求执行控制操作,使得在被存储于存储器单元18中的图像当中的最近拍摄并存储的冰箱内部的最终图像被传送至市场服务器3(S1509)。
在接收冰箱内部的最终图像时,市场服务器3分析最终图像(S1511)。通过分析最终图像,市场服务器3可以识别当前储存在冰箱中的物品和当前冰箱中没有的物品,并且分析先前储存在冰箱中但当前冰箱中没有的物品,以提取提供服务所需的信息。
市场服务器3将通过分析最终照片提取的不足物品的列表传送给冰箱(S1513)。
图55是示出根据另一实施例的操作冰箱的方法的梯形图。
参照图55,根据另一实施例,当确定已经如上所述获取冰箱中特定区域的最终照片(S1701)时,控制器100控制存储器单元18,使得通过校正最终照片获取的最终图像存储在存储器单元18中(S1703)。
随后,当诸如广播站服务器4等服务供应商的服务器接收用于显示冰箱内部的最终图像的用户输入(S1705)时,广播站服务器4将对最终图像的请求传送到冰箱(S1707)。此时,广播站服务器4可以以预定周期传送对最终图像的请求而无需用户输入。
然后,控制器100响应于对最终图像的请求而实施操作,使得存储于存储器单元18中的图像当中的最近拍摄并存储的冰箱内部的最终图像被传送到广播站服务器4(S1709)。
在接收到冰箱内部的最终图像时,广播站服务器4分析最终图像(S1711)。通过分析最终图像,例如通过分析使用当前储存的物品可以准备的菜肴,广播站服务器4可以识别当前储存在冰箱中的物品并提取提供服务所需的信息。
通过对最终图像的分析,广播站服务器4将关于使用当前储存的物品可以准备的菜肴的食谱的信息传送到冰箱(S1713)。
控制器100在安装在冰箱处的显示器14上显示从广播站服务器4接收到的关于菜肴的食谱的信息。
根据本实施例,所提供的有关方法可以准确地识别位于家中或公司的冰箱内部的状况,并且为家庭或公司提供与冰箱相关的适当服务。
图56是示出摄像机的加热器的操作的视图,并且图57是示出在摄像机的透明窗上基于温度而发生结露的实验结果的视图。下面将参照图56进行描述。图56描绘基于参照图14至图17所述的类型的加热器的实验结果。
图56(a)是描绘用间断提供给加热器84的电力对其进行间断驱动的图表,并且图56(b)是描绘用连续提供给加热器84的电能赌气进行连续驱动的图表。
在图56(a)中,在通常时间段不控制透明窗80的温度,而是与储藏室22的温度保持平衡。在需要用摄像机拍摄冰箱的时间处,瞬时提供较高的电力。尤其是,加热器84可以被这样驱动,从而刚好在实施拍摄之前从透明窗8上去除露水。
当门20被打开时,透明窗80可以接触包含在通过门20送入的外部暖空气中的湿气。此时,透明窗80处于相对于外部空气而言的低温下,并且因此,包含在外部空气中的湿气可能会凝结在透明窗80上,由此引起结露。
在加热器84被瞬时驱动以去除通过凝结形成的露水的情况下,可能会花费时间直到透明窗80上的露水被消除。因此,在拍摄照片的时间早于露水被去除的时间的情况下,当实施拍摄时透明窗80上可能存在露水。
另一方面,在图56(b)中,加热器84被连续地驱动,以将热量提供给透明窗80。由于透明窗80一直被保持在大于发生结露的温度的温度处,所以在透明窗80上不会发生结露。因此,即使门20被打开,并且因此透明窗80接触外部空气,外部空气中包含的湿气也不会凝结在透明窗80上。因此,当摄像机70瞬时拍摄照片时,可以防止透明窗80上存在露水。
在驱动器84时,可以防止结露影响照片质量。而且,也应该防止加热器84的功耗快速增加。此外,应优选防止由加热器84提供的热量影响冰箱的内部温度。
已经发现,需要增加加热器被关闭的时间量,以使加热器的功耗最小化,并且防止热量影响冰箱的内部。然而,考虑到增加加热器被关闭的时间量可能导致结露,通过在冰箱外部空气的温度为32℃、相对湿度为85%的条件下(即,结露点温度在大约29℃到大约30℃之间)设定摄像机的透明窗的目标温度,进行了实验(参见图57)。在图57(a)中,y轴表示结露量。在图57(b)中,y轴表示在对应的温度处的实际结露量,其被标识为相对于当前蒸发量的百分数。
在特殊温度条件下,从重复实验得出的加热器的开/关周期可能会使由摄像机拍摄的照片的质量下降。
即使找到了开/关加热器的适当的周期,在加热器被关闭时,用户使用冰箱的模式可能会违愿而变化。
例如,在用户使门长时间开启的情况下,大量的露水可能形成在摄像机的端盖玻璃(透明窗或布置在摄像机镜头的前边缘处的其它类型的窗体)的表面上。在这种情况下,即使通过驱动加热器加热端盖玻璃,也会花费大量的时间进行蒸发。因此,此时拍摄的照片质量可能较差。此外,蒸发形成在端盖玻璃上的露水需要大量电能以及大量时间。
此外,在储藏室为冷藏室的情况下,储藏室内部的温度通常保持在0℃到7℃,并且储藏室的内部容积大于端盖玻璃的表面面积。由加热器提供的热量的很大一部分可能暴露至储藏室中的冷空气。因此,需要短时间施加大量的热以蒸发形成在端盖玻璃上的露水。为了在短时间内集中供应热量,可能需要具有大容量的加热器。然而,在这种情况下,可能会大大增加瞬时使用的电能,并且因此当电源供应不稳定时可能导致各种问题。
因此,从最早阶段起,端盖玻璃上凝结的露水的量优选地被始终控制在不大于或等于特定量。在本发明的实施例中,向加热器施加电能,从而持续驱动加热器而无开/关周期。
在对加热器施加恒定电能时,摄像机的加热器被配置为在施加电能时接收电能。可替代地,通过冰箱的控制器,电力可以被控制为使得在储藏室正常工作时将恒定的电能施加到加热器。
接下来将描述加热器端盖玻璃的温度。当评估在不同温度范围内获得的样本照片的质量时,发现只有在端盖玻璃的中部分的温度达到结露点的一半时才在样本照片的质量上产生严重的问题。照片质量没有问题可以指能够识别出储存在储藏室中的物品的种类和数量。
尤其是,在图57(b)中,在示出为13.5℃的第三点处获得的照片样本具有可允许的质量。可以向加热器提供电能,使得可以被保持在大于或等于结露点的加热器端盖玻璃的温度保持在大约13℃到大约30℃。
在实验结果中,已经发现,在提供相同的电能的条件下,端盖玻璃的加热温度随端盖玻璃的外部尺寸而变化,但端盖玻璃的厚度较少变化。由于当端盖玻璃的尺寸恒定时,在结露点的一半的温度处照片质量令人满意,所以此温度可以被设定为下限。并且可以优选在加热器的功耗(或施加的电能)方面设定上限。
在加热端盖玻璃时,在接近于结露点(29.2℃)的温度处施加的电能为0.45W,并且在结露点的0.58倍的温度(17.7℃)处施加的电能为0.27W。当加热温度为约0.5至0.7倍于结露点时,功耗也为在结露点处的功耗的大约0.5倍。因此,在此温度范围内有效地降低了功耗。
在通常是可变的外部空气的条件下,大约为结露点一半的温度的范围可以被确定为在大约12℃到大约17℃之间。因此,优选地将允许透明窗部的中部被保持在大约12℃到大约17℃之间的电流施加到加热器。
即,在本实施例中,通过将端盖玻璃保持在非结露点而是在低于结露点的温度处可以降低加热器的功耗。
图58是示出透明窗的剖视图。下面将参照图58进行描述。
亲水性涂层可以被施加到透明窗80。透明窗80可以是如上所述的端盖90。
即使在透明窗80上瞬时形成露水,水的接触角度也可以通过亲水性涂层被形成在15度之内,如图58所示。当将亲水性涂层施加到表面时,水在表面上的表面张力变弱。因此,水可以在透明窗80的表面扩散得较开。由此,摄像机可以被固定到储藏室的顶板的表面,使得透明窗与储藏室的顶板的表面之间的角度在大约10度到大约20度之间。
因此,可以使由形成在透明窗80上的水分导致的拍摄到的照片的失真最小化。此外,一旦施加亲水性涂层,此后则无需诸如供电等额外控制。因此,可以具有能效方面的优势。
图59和图60是示意性地示出将摄像机安装在内壳处的视图。图59(a)和图60(a)示出从一个横侧看到的储藏室的视图,并且图59(b)和图60(b)示出从内壳下方的位置看到的内壳的视图。下面将参照图59和图60进行描述。在图59和图60的实施例中,可以以迂回(detouring)方式设置外部空气到达端盖90的路径,以使发生在端盖90上的凝结最小化。
摄像机70可以安装在从内壳12的顶板向下突出的突起处。这里,突起500可以是相对于内壳12的另一部分向下突出的内壳12的一部分。这样的突起500可以由如上所述的摄像机壳体形成。
如图59所示,摄像机70安装在突起500内,使得摄像机70面对储藏室22的内侧壁。摄像机70可以通过端盖90拍摄储藏室22的内部的照片。因此,端盖90被设置在突起500面对储藏室22的后壁的位置上。
当端盖90接触包含在外部空气中的湿气时,湿气被冷却,从而在端盖90上形成露水。
然而,端盖90被设置成面对储藏室22的后壁,因此外部空气可能需要经过很长的路径到达端盖90。
即,为了使经过门20的外部空气穿过储藏室22并接触端盖90,外部空气需要经过图59(b)和图60(b)所示的路径。此时,随着外部空气接触储藏室22中的冷空气,包含在外部空气中的一些湿气可以凝结在储藏室22的一部分上。因此,外部空气可以到达端盖90而那里的湿气量逐渐减小。
即,当门20被打开时,储藏室22的内部可以保持在比储藏室22的外部更低的温度,并且其温度不会立即改变到外部空气的温度。因此与外部空气的热交换发生在外部空气进入储藏室22时。
换句话说,在端盖90被设置在端盖90相对较难接触外部空气的部位处的情况下,可以减少形成在端盖90上的露水的量,并且可以更晚形成露水。
首先,随着外部空气进入冰箱,其接触突起500的前表面501。此时,接触前表面501的外部空气沿向突起500的左侧和右侧弯曲的路径被进一步送入冰箱。这样的外部空气可以在接触突起500的侧表面时到达端盖90。因此,可以在外部空气到达端盖90之前凝结大量湿气。
此外,端盖90被安装在被前表面501、侧表面502和下表面503包围的位置处,使得端盖90倾斜。由此,端盖90未被布置在垂直于外部空气的路径上。因此,可以防止外部空气在到达端盖90时迅速凝结。
尤其是,突起500的宽度,具体为前表面501的横向宽度可以大于摄像机70的宽度。
在图60示出的实施例中,摄像机被安装为竖直朝下,该实施例与图59的实施例非常类似。因此,图60的实施例可以具有与图59的实施例相同的效果。
此外,突起500可以包括背面504。优选地,前表面501的竖直长度大于背面504的竖直长度。即,前表面501可以比后表面504向内壳12的下方突出得更多。
因此,外部空气到达端盖90的路径在水平方向上被突起500的宽度延长,并且在竖直方向上被突起500的突出高度延长。
通过突起500这种结构或摄像机的安装结构防止在端盖90上结露与摄像机的安装位置密切相关。即,摄像机可以被安装为向后倾斜预定角度,该预定角度位于相对于从储藏室的顶板竖直向下延伸的竖直线的特定范围内。因此,可以有效地迂回外部空气的导入路径,同时可以有效地拍摄储藏室的整个区域。
在现有技术中,摄像机被安装在机壳的储藏室的侧壁、机柜的外上端、门或门的上部处。
根据现有技术,在摄像机被安装到储藏室的侧壁的情况下,能够容纳摄像机的凹部被设置至侧壁,并且摄像机被安装到该凹部。即,摄像机不突出到储藏室中。这种结构不会在从储藏室拿取储藏室的搁架或物品时造成用户不便。
与此相反,在本发明的实施例中,摄像机安装在内壳12的顶板处。由此,当用户使用储藏室22时用户不会被摄像机阻挡。这是因为摄像机未置于搁架的移动路径上,并且因此当用户期望从储藏室拿取物品时避免了与摄像机碰撞。
此外,在本发明的实施例中,摄像机70的端盖90被设置为面对向后的方向。由此,外部空气达到端盖90的路径可以被延长。
在图59(a)中,端盖90被设置为面对向后的方向,并且突起500向下突出。因此,为了使外部空气到达端盖90,外部空气需要沿着三维的移动路径流动,并且因此外部空气的移动路径被延长。
在图60(a)中,端盖90被设置为面朝下,并且突起500设置有与存取开口平行设置的前表面504,以及与前表面504垂直设置的侧表面508。这里,前表面504和侧表面508被安装为进一步向下突出,使得外部空气到达透明窗80的路径可以被延长。
即,从储藏室的存取开口的外部引入的高温空气不会径直地到达并接触端盖90,而是通过沿突起500向左、向右和向下迂回来到达突起500。因此,随着外部空气与冰箱中的冷空气热交换,外部空气被冷却,并且因此减少了饱和水蒸汽的量。由此,包含在外部空气中的水蒸汽被凝结,从而与冰箱中的冷空气混合。当外部空气最终到达端盖90时,由于外部空气包含较少的水蒸汽量,因而可以被加热端盖90的加热器充分蒸发。
因此,可以降低提供给加热器84的电能,并且因此可以改进冰箱的整体功耗。
在图59和图60所示的实施例中,冰箱可以包括:机壳,机壳中设置有储藏室,储藏室配置有形成在储藏室的前表面中的存取开口,并且由隔热材料制成的上壁、下壁、两个侧壁和后壁形成,储藏室包括被多个搁架划分的搁架区和具有至少一个抽屉的抽屉区;至少一个门,紧密地接触储藏室的前表面以打开和关闭储藏室;以及摄像机设备,安装在储藏室的上壁处位于储藏室的存取开口与安装在冰箱中的搁架的前边缘之间。
摄像机设备可以包括:摄像机模块部,被配置为容纳摄像机镜头和驱动摄像机所需的电气元件,并且设置有以特定距离与摄像机镜头间隔开的透明窗;以及摄像机壳体部,被配置为在摄像机壳体部中预定位置处定位并固定摄像机模块部。
摄像机壳体部可以包括与储藏室的上壁相邻的固定面、被形成为面对储藏室的存取开口的前表面、将前表面连接到后表面的两个侧表面、以及设置有允许摄像机模块的摄像机窗口穿过其中暴露的开口的顶表面。摄像机壳体部的前表面被形成在高于形成于摄像机壳体部的顶表面中的开口的位置处。
摄像机壳体的顶表面可以以相对于储藏室的上壁的表面的特定角度倾斜,以不用面对储藏室的开口。
摄像机壳体部还可以包括后表面,位于与前表面相对的位置处,并且面对储藏室的后壁。前表面的高度可以大于后表面的高度。
摄像机壳体部的顶表面中的开口可以被形成为低于摄像机壳体部的侧表面。
冰箱还可以包括壳体安装部,其具有对应于向储藏室的上壁凹进的凹进空间的凹部。
当冰箱填充有隔热材料时,壳体安装部安装在储藏室的上壁处,并且摄像机壳体部可以被固定到壳体安装部。
固定到摄像机壳体部的摄像机模块部可以被容纳在形成在壳体安装部处的凹部中。
容纳在壳体安装部的凹部中的摄像机模块部可以被固定到摄像机壳体部,使得在摄像机模块部与壳体安装部的内表面之间形成间隙。
摄像机壳体部的前表面和侧表面可以被形成为高于摄像机壳体部的顶表面中的开口。
摄像机壳体部的顶表面靠近储藏室的开口的部分可以比顶表面靠近储藏室的后壁的其它部分更远离储藏室的上壁。
摄像机模块可以包括设置有摄像机窗口的前部和与该前部相对的后部。前部和后部中的至少一个可以设置有至少一个平坦表面。
用于容纳摄像机模块部的容纳部可以形成在摄像机壳体部的内侧。该容纳部可以包括基座部,该基座部以相对于储藏室的上壁的表面的特定角度倾斜,以允许形成于摄像机模块部的平坦表面被设置在该基座部上。
壳体安装部的凹部可以包括基座部,该基座部以相对于储藏室的上壁表面的特定角度倾斜,以允许形成于摄像机模块部的平坦表面被设置在该基座基座部上。
可以围绕摄像机模块部前部的摄像机窗口形成平坦表面。该平坦表面可以形成为与摄像机镜头的中部大约相同的高度处。
图61是示出根据本发明的另一实施例的冰箱的视图。下面,将参照图61进行描述。
图61中所示的冰箱是具有横向布置的不同储藏室的横排式冰箱。即,左储藏室可以是冷冻室,而右储藏室可以是冷藏室。
摄像机70可以安装在储藏室22的顶板处,使得摄像机70面对储藏室22的下部。
此外,被配置为储存食物并且适于抽出和送入的抽屉50可以被安装在储藏室22中。
其它细节与先前实施例中描述的相同,并且因此将不对其描述。
图62是示出从图61的冰箱向用户提供的屏幕的视图。下面将参照图62进行描述。
可以将储存在抽屉50和51中的物品的图像和储存在搁架40处的物品的图像提供给用户。冰箱可以设置有一个抽屉50。因此,在图62的实施例中可以提供一个抽屉的图像。或者,如图61所示,可以在竖直方向上设置两个抽屉50和51。在这种情况下,可以提供各个抽屉内部的图像。
在图2所示的实施例中,抽屉横向排列。与此相反,在图62中,抽屉可以竖直排列。因此,可以设置两个抽屉区,并且下抽屉50可以比上抽屉51更向前突出。在这种情况下,抽屉50和51中的每一个可以设置有标记。
由此,通过一台摄像机可以很容易地了解关于储存在多个搁架区、多个抽屉区中的食品的信息
更新提供在用户屏幕上的图像的方法与如上所述的更新提供在冰箱上的图像的方法相同,并且因此不对其进行描述。
图63是示出调整用图61的冰箱的摄像机拍摄的图片的方法的视图。下面将参照图63进行描述。
通常,只设置一个抽屉,或竖直设置两个抽屉。因此,在图61所示类型的冰箱中,可以设置一个调整线15。可以设置两个水平调整线以划分两个抽屉。此外,可以平行设置两个竖直调整线,并且可以调整它们的位置。与图63的实施例不同,可以仅使用水平调整线来选择期望的图像,而不使用竖直调整线。
可以向用户提供表示调整线15的移动限制范围的限制线16。在这种情况下,限制线16可以平行设置并且彼此间隔开预定距离。
通过调整线15校正误差可以与先前的实施例中的校正相同或类似。
在本发明的具体实施方式中已经描述了各种实施例。
工业实用性
本发明提供了一种冰箱,允许用户获得关于储存在冰箱中的食物的信息,而无需打开冰箱的门。由此,可以防止从储藏室泄漏冷空气。因此,可以防止不必要地损失冷空气并且可以提高冰箱的能效
此外,可以将关于储存在冰箱中的食物的最新信息提供给用户。因此,可以提高向用户提供关于所储存的食物的信息的可靠性。
此外,可以通过单台摄像机提供关于储存在不同位置中的食品的信息。因此,添加允许安装仅一台摄像机的结构,并且因此可以有利于冰箱的设计。特别是,可以降低使用摄像机导致的成本。
可以防止在安装在冰箱中的摄像机上结露。因此,可以将由摄像机拍摄的图像稳定地提供给用户。
用户可以远程了解冰箱的当前内部状况,并且从外部供应商接收关于食物的必要信息。
冰箱可以提供显示由摄像机拍摄的抽屉内部的照片的屏幕,其与用户在用户使用冰箱时实际看到的类似。
冰箱可以在一个屏幕上向用户提供在空间上重叠而不可见的位置的平面图像。
对本领域技术人员显而易见的是,对本发明可以进行各种修改和变型,而不脱离本发明的精神或范围。因此,旨在使本发明覆盖本发明的这些修改和变型,只要它们落入所附权利要求书和它们的等同方案的范围内。