智能冰箱控制方法及其控制系统的制作方法

文档序号:10650628阅读:419来源:国知局
智能冰箱控制方法及其控制系统的制作方法
【专利摘要】本发明揭示了一种智能冰箱控制方法及控制系统,所述方法包括:通过网络接收冰箱发送的待识别物品的第一标识信息;通过网络接收冰箱发送的待识别物品的图像信息;以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息;若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一通过网络发送至冰箱,以通过冰箱的显示界面显示;若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。本发明借助用户端冰箱反馈的数据,增大所述网络数据库中存储的数据,保证后台食物识别的准确性,并进一步提升用户体验感。
【专利说明】
智能冰箱控制方法及其控制系统
技术领域
[0001]本发明涉及家用电器领域,尤其涉及一种智能冰箱控制方法及其控制系统。
【背景技术】
[0002]物联网是继计算机、互联网与移动通信之后又一次全球信息化浪潮,是全球信息化发展的新阶段,随着物联网概念的兴起,家电行业产品加速智能化,推出一系列智能冰箱。
[0003]现有的智能冰箱,通常采用摄像头采集其内的物品图片,根据物品图片对应的物品标识,对物品进行分类,进而控制冰箱的温度对物品进行保鲜等操作。
[0004]通过摄像头对物品进行识别过程中,需要预先设置一数据库对物品的图片以及相应标识进行保持。
[0005]现有冰箱识别系统中,数据库的建立通常采用下述方法:
在冰箱出厂之前,测试人员对大量食材进行数次拍照、定义、标记,之后将获得的数据上传到数据库,并进一步将该数据库植入到客户端的冰箱内,为了保证后期识别的准确性,该数据库中需要存储的物品信息十分庞大,如此,需要大量的人力、物力建设该数据库,进一步的,当冰箱出厂之后,该数据库即始终保持不变,如此,随着科技的进步,当越来越多的异类物品出现时,摄像头对物品识别的准确率也会大大降低。

【发明内容】

[0006]本发明的目的在于提供一种智能冰箱控制方法及其控制系统及方法。
[0007]为实现上述发明目的之一,本发明一实施方式提供了一种智能冰箱控制方法,所述方法包括:通过网络接收冰箱发送的待识别物品的第一标识信息;
通过网络接收冰箱发送的待识别物品的图像信息;
以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息;
若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一通过网络发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。
[0008]作为本发明一实施方式的进一步改进,以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息后,所述方法还包括:
若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示。
[0009]作为本发明一实施方式的进一步改进,所述方法还包括:
将冰箱显示界面显示的信息对应更新至所述网络数据库。
[0010]作为本发明一实施方式的进一步改进,所述方法还包括:
若所述第一标识信息和第二标识信息不同,则直接确认所述第一标识信息和所述第二标识信息的匹配结果为第一标识信息,并将所述第一标识信息与所述图像信息进行匹配,通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。
[0011]作为本发明一实施方式的进一步改进,所述方法还包括:
若所述第一标识信息和第二标识信息不同,
则以接收的第一标识信息查询所述网络数据库,获取与其匹配的图像信息集;
将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,当所述相似度比值大于系统预设相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,
并将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。
[0012]为实现上述发明目的之一,本发明一实施方式提供了一种智能冰箱控制系统,数据获取模块,用于通过网络接收冰箱发送的待识别物品的第一标识信息;
通过网络接收冰箱发送的待识别物品的图像信息;
查询处理模块,以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息;
若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一通过网络发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。
[0013]作为本发明一实施方式的进一步改进,所述查询处理模块还用于:
若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示。
[0014]作为本发明一实施方式的进一步改进,所述系统还包括:数据库更新模块,所述数据库更新模块用于:将冰箱显示界面显示的信息对应更新至所述网络数据库。
[0015]作为本发明一实施方式的进一步改进,所述查询处理模块还用于:
若所述第一标识信息和第二标识信息不同,则直接确认所述第一标识信息和所述第二标识信息的匹配结果为第一标识信息,并将所述第一标识信息与所述图像信息进行匹配,通过冰箱的显示界面显示,同时,通过所述数据库更新模块将所述第一标识信息与所述图像信息对应更新至所述网络数据库。
[0016]作为本发明一实施方式的进一步改进,所述查询处理模块还用于:
若所述第一标识信息和第二标识信息不同, 则以接收的第一标识信息查询所述网络数据库,获取与其匹配的图像信息集;
将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,当所述相似度比值大于系统预设相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,
并将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,通过所述数据库更新模块将所述第一标识信息与所述图像信息对应更新至所述网络数据库。
[0017]相对于现有技术,本发明的技术效果在于:本发明的智能冰箱控制方法及控制系统,基于网络识别待识别物品的图像信息,并对其进行匹配;进一步的,通过冰箱中的条码识别装置验证以图像信息为查询条件获得的匹配结果的准确度,并进一步的采用使用过程中产生的数据更新网络数据库,当再次产生新的图像信息时,即可以依据更新后的网络数据库对其进行处理,如此,借助用户端冰箱反馈的数据,增大所述网络数据库中存储的数据,保证后台食物识别的准确性,并进一步提升用户体验感。
【附图说明】
[0018]图1是本发明一实施方式中智能冰箱控制方法的流程示意图;
图2是本发明一实施方式中智能冰箱控制系统的模块示意图。
【具体实施方式】
[0019]以下将结合附图所示的【具体实施方式】对本发明进行详细描述。但这些实施方式并不限制本发明,本领域的普通技术人员根据这些实施方式所做出的结构、方法、或功能上的变换均包含在本发明的保护范围内。
[0020]结合图1所示,本发明提供一种智能冰箱控制方法,所述方法包括:
S1、通过网络接收冰箱发送的待识别物品的第一标识信息;通过网络接收冰箱发送的待识别物品的图像信息;
所述待识别物品的图像信息,为冰箱中存储物品的图像信息,其通常由冰箱中设置的图像采集装置进行获取,例如:摄像头。
[0021]所述第一标识信息通常为待识别物品的物品名称,其通常由冰箱中设置的条码识别装置进行获取,例如:二维码、多维码等识别转置、RFID采集装置等。
[0022]当然,获得第一标识信息的前提条件为:待识别物品上预先设置多维码标签或者RFID标签等,在此不做详细赘述。
[0023]本发明优选实施方式中,所述条码识别装置为RFID采集装置,RFID,其英文全称为:Rad1 Frequency Identif icat1n,中文名称无线射频识别,其为一种通信技术,可通过无线电讯号识别特定目标并读写相关数据,无需与特定目标之间建立机械或光学接触。
[0024]射频识别系统最重要的优点是非接触识别,它能穿透雪、雾、冰、涂料、尘垢和条形码无法使用的恶劣环境阅读标签,并且阅读速度极快,大多数情况下不到100毫秒,如此,该RFID采集技术更适用于冰箱内部,以采集所需的第一标识信息。
[0025]为了防止冰箱误操作,所述冰箱外侧通常还设置若干控制按钮,相应控制按钮启动时,视为发出识别信号,开始启动摄像头和RFID采集装置,以识别并获得冰箱中保存物品的图像信息和表示信息I。当然,在本发明的其他实施方式中,还可以在冰箱上设置传感器等设备,用于发出识别信号。在本发明一优选实施方式中,当打开冰箱门后,即视为发出识别信号,在此不做详细赘述。
[0026]可以理解的是,每次图像采集装置工作时,根据其安装位置以及光线的明暗度的变化,其获取物品的数量及颜色均可能不同,例如:其获取的物品图片上可能存在一种物品,也可能存在多种不同的物品,在此不做详细赘述。
[0027]所述网络的连接方式不做具体限定,例如:RFID、蓝牙、WIF1、Internet、局域网等连接方式。
[0028]进一步的,本发明一实施方式中,所述方法还包括:
52、以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息; 所述网络数据库包括:物品的属性信息以及对应的第二标识信息。
[0029]所述网络数据库可存储于云端或单独的服务器上,用户端的冰箱通过网络与该网络数据库进行连接以及进行数据交换。
[0030]所述网络数据库存储的数据可根据用户对其客户端冰箱的操作进行更新,如此,所述网络数据库存储的初始数据并不要求十分庞大,进而节约建库的人力、物力成本,以下将会详细介绍。
[0031]所述第二标识信息同样为物品名称。
[0032]本发明一优选实施方式中,所述步骤S2具体包括:
采用轮廓检测技术及背景分割技术对图像信息进行预处理,以获取图像信息的特征向量组,所述特征向量组包括:物品的形状、颜色、纹理等。
[0033]查找所述网络数据库,从分别对应不同物品的多个特征向量类中,选择与所述待识别物品的图像信息所对应的特征向量之间具有最大相关度的特征向量类;
将所述具有最大相关度的特征向量类所对应的第二标识信息赋予所述待测物品对应的图像信息。
[0034]通常情况下,每个特征向量类包括多组特征向量。
[0035]所述相似度可以用数值表示;其可为特征向量组中的各个特征向量的相似度的平均值,中值、加权平均值等。
[0036]例如:以相似度采用特征向量组中的各个特征向量的相似度的平均值表示, 假设将待识别物品的图像信息的特征向量组与所述网络数据库中的特征向量类进行比对搜索后,与所述网络数据库中的特征向量类I的比对结果为:颜色的相似度为90%、形状相似度为96%、纹理相似度为93%,那么所述相似度的值为(90%+96%+93%)/3=93%;与所述网络数据库中的特征向量类2的比对结果为:颜色的相似度为50%、形状相似度为40%、纹理相似度为60%,那么所述相似度的值为(50%+40%+60%)/3=50%,进一步的,将所述具有最大相关度,相似度为93%的特征向量类I所对应的第二标识信息赋予所述待测物品对应的图像信息,在此不做详细赘述。
[0037]进一步的,本发明一实施方式中,所述方法还包括:
53、若第一标识信息和第二标识信息相同,则直接将第一标识信息通过网络发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。
[0038]本实施方式中,为了避免冰箱与网络数据库交互过程中产生较多的数据,当识别到物品的图像信息后,将所述图像信息直接发送给网络数据库进行解析,同时,发送到冰箱的显示界面进行显示;进一步的,仅将经过网络数据库解析后,所述第一标识信息和所述第二标识信息的匹配结果返回给冰箱,并进一步的在冰箱的显示界面进行显示。
[0039]本发明另一实施方式中,若第一标识信息和第二标识信息相同,则直接将第一标识信息和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示。相应的,冰箱的显示界面上,在图像信息的显示区域内,同步显示所述第一标识信息和所述第二标识信息的匹配结果;或是以列表的形式,一一进行匹配显示所述图像信息以及其对应的所述第一标识信息和所述第二标识信息的匹配结果,如此,当接收的图像信息为多个物品的图像信息时,用户可以更易观察图像信息与所述第一标识信息和所述第二标识信息的匹配结果的匹配关系,在此不做详细赘述。
[0040]当然,显示方式有多种,例如:分区域显示、列表显示等,在此不做详细赘述。
[0041]进一步的,本发明一实施方式中,所述方法还包括:
S4、将冰箱显示界面显示的信息对应更新至所述网络数据库。
[0042]当再次通过网络接收到图像信息后,即可以依据更新后的网络数据库对其进行处理,如此,借助用户端反馈的数据,增大所述网络数据库中存储的数据,保证后台食物识别的准确性。
[0043]本发明一实施方式中,若所述第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一以及图像信息更新至所述网络数据库。
[0044]本发明一实施方式中,若所述第一标识信息和第二标识信息不同,则直接确认所述第一标识信息和所述第二标识信息的匹配结果为第一标识信息,并将所述第一标识信息与所述图像信息进行匹配,通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。
[0045]本发明一实施方式中,若所述第一标识信息和第二标识信息不同,
则以接收的第一标识信息查询所述网络数据库,获取与其匹配的图像信息集;
将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,当所述相似度比值大于系统预设相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,并将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。
[0046]该实施方式中,以所述第一标识信息查询所述网络数据库,获取所述网络数据库中与所述第一标识信息对应的唯一特征向量类;将所述待识别物品的图像信息与所述特征向量类进行比对,并通过比对结果确定所述第一标识信息和所述第二标识信息的匹配结果O
[0047]本发明具体示例中,结合步骤S2所述内容,可以同样采用轮廓检测技术及背景分割技术对所述待识别物品的图像信息进行预处理,以获取所述待识别物品的图像信息的特征向量组,所述特征向量组包括:物品的形状、颜色、纹理等。
[0048]设置一相似度阈值,当所述待识别物品的图像信息的特征向量组与所述网络数据库中已知的特征向量类的相似度大于所述相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,进一步,将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。
[0049]所述相似度阈值为一固定数值,其取值范围通常在50%至100%之间。
[0050]为了方便理解,以下将描述一具体示例用于理解本发明。
[0051]假设相似度阈值为70%,以所述待识别物品的第一标识信息查询所述网络数据库后,获得唯一特征向量类,将所述待识别物品的图像信息的特征向量组与所述网络数据库中已知的特征向量类进行比对后,其相似度为90%,其大于相似度阈值70%,那么,则确认第一标识信息和第二标识信息匹配结果为第一标识信息,并进一步,将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。如此,通过用户端的冰箱操作,主动扩充所述网络数据库中存储的数据,进而节约建库的人力、物力成本。
[0052]为了便于理解,以下内容中列举一本智能冰箱控制方法的具体应用实例。
[0053]场景I下:
例如:待识别物品为“橘子”,通过网络接收到的第一标识信息为“橘子”,通过网络接收至Γ橘子”的图像信息时,经过查询网络数据库后,识别出该物品对应的第二标识信息为“橘子”,如此,将“橘子”的图像信息和匹配的第一标识信息或第二标识信息其中之一发送至冰箱,以通过冰箱的显示界面显示;同时,将当次获取的待识别物品的第一标识信息或第二标识信息其中之一以及图像信息更新至网络数据库。
[0054]场景2下:
例如:待识别物品为“橘子”,通过网络接收到的第一标识信息为“橘子”,通过网络接收至Γ橘子”的图像信息时,经过查询网络数据库后,由于光线的明暗变化等因素,采集出的图像信息经过查询数据库后,识别出该物品对应的第二标识信息被误认为“橙子”,,该场景下,第一标识信息和第二标识信息不同,则确认第一标识信息“橘子”和第二标识信息“橙子”的匹配结果为第一标识信息,进一步的,将“橘子”的图像信息和第一标识信息发送至冰箱,以通过冰箱的显示界面显示;同时,将当次获取的待识别物品的图像信息和第一标识信息更新至网络数据库。
[0055]场景3下:
例如:待识别物品为“橘子”,通过网络接收到的第一标识信息为“橘子”,通过网络接收至Γ橘子”的图像信息时,经过查询网络数据库后,由于光线的明暗变化等因素,采集出的图像信息经过查询数据库后,识别出该物品对应的第二标识信息被误认为“橙子”,该场景下,第一标识信息和第二标识信息不同,则以接收的第一标识信息“橘子”查询所述网络数据库,获取与其匹配的图像信息集;将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,大于系统预设相似度阈值,此时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,进一步的,将“橘子”的图像信息和第一标识信息发送至冰箱,以通过冰箱的显示界面显示;同时,将当次获取的待识别物品的图像信息和第一标识信息更新至网络数据库。
[0056]上述场景3下,当相似度比值小于系统预设相似度阈值时,不对所述网络数据库进行更新,在此不做详细赘述。
[0057]在本发明的其他实施方式中,还可以进一步通过人工辅助的方式,通过用户将正确的图像信息和标识信息更新至所述网络数据库,当然,所述网络数据库也可以通过人工辅助的方式排查更新的数据,在此不做详细赘述。
[0058]另外,在本发明的技术领域中,通过图像比对,判断数据的准确性还具有多种方式,在此不在一一列举。在本发明的其他优选实施方式中,为了缩减计算量,还可以设置网络数据库的更新周期,例如:I小时、I天、一周等,也可以有网络数据库的管理者按照需求定期更新,当网络数据库接收到相应的更新信息后,先对相应的更新信息进行存储,之后在设定的更新周期下,统一对数据进行更新,如此,缩减计算量,在此不做详细赘述。
[0059]进一步的,本发明一实施方式中,当所述网络数据库接收到用户端上传的数据后,也可以由所述网络数据库的管理者辅助检测上传数据的有效性,之后再进行相应的更新操作,在此不做详细赘述。
[0060]可以理解的是,本发明的网络数据库,通过网络统一进行管理,如此,可以根据客户的需求,给与更好的服务,同时,还可以通过网络数据库为用户端的冰箱增加推送内容,
便于统一管理。
[0061]结合图2所示,本发明一实施方式中,智能冰箱控制系统包括:用户端以及与之进行网络连接的服务器端;所述用户端包括:图像采集模块100,用于采集物品的图像信息,标识米集模块200、用于米集物品的第一标识?目息;
所述服务器端包括:数据获取模块300,查询处理模块400,网络数据库500,数据库更新模块600。
[0062]数据获取模块300通过网络接收图像采集模块100发送的待识别物品的第一标识信息;通过网络接收标识采集模块200发送的待识别物品的图像信息;
所述待识别物品的图像信息,为冰箱中存储物品的图像信息,图像采集模块100例如:设置于所述冰箱中的摄像头。
[0063]所述第一标识信息通常为待识别物品的物品名称,标识采集模块200例如:冰箱中设置的二维码、多维码等识别转置、RFID采集装置等。
[0064]当然,获得第一标识信息的前提条件为:待识别物品上预先设置多维码标签或者RFID标签等,在此不做详细赘述。
[0065]本发明优选实施方式中,标识采集模块200为RFID采集装置。
[0066]为了防止冰箱误操作,所述冰箱外侧通常还设置若干控制按钮,相应控制按钮启动时,视为发出识别信号,开始启动图像采集模块100和标识采集模块200,以识别并获得冰箱中保存物品的图像信息和表示信息I。当然,在本发明的其他实施方式中,还可以在冰箱上设置传感器等设备,用于发出识别信号。在本发明一优选实施方式中,当打开冰箱门后,即视为发出识别信号,在此不做详细赘述。
[0067]可以理解的是,每次图像采集装置工作时,根据其安装位置以及光线的明暗度的变化,其获取物品的数量及颜色均可能不同,例如:其获取的物品图片上可能存在一种物品,也可能存在多种不同的物品,在此不做详细赘述。
[0068]所述网络的连接方式不做具体限定,例如:RFID、蓝牙、WIF1、Internet、局域网等连接方式。
[0069]进一步的,本发明一实施方式中,查询处理模块300用于:以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息;
网络数据库500包括:物品的属性信息以及对应的第二标识信息。
[0070]网络数据库500可存储于云端或单独的服务器上,用户端的冰箱通过网络与该网络数据库进行连接以及进行数据交换。
[0071]网络数据库500存储的数据可根据用户对其客户端冰箱的操作进行更新,如此,网络数据库500存储的初始数据并不要求十分庞大,进而节约建库的人力、物力成本,以下将会详细介绍。
[0072]所述第二标识信息同样为物品名称。
[0073]本发明一优选实施方式中,查询处理模块400具体用于:采用轮廓检测技术及背景分割技术对图像信息进行预处理,以获取图像信息的特征向量组,所述特征向量组包括:物品的形状、颜色、纹理等。
[0074]查找网络数据库500,从分别对应不同物品的多个特征向量类中,选择与所述待识别物品的图像信息所对应的特征向量之间具有最大相关度的特征向量类;
将所述具有最大相关度的特征向量类所对应的第二标识信息赋予所述待测物品对应的图像信息。
[0075]通常情况下,每个特征向量类包括多组特征向量。
[0076]所述相似度可以用数值表示;其可为特征向量组中的各个特征向量的相似度的平均值,中值、加权平均值等。
[0077]例如:以相似度采用特征向量组中的各个特征向量的相似度的平均值表示,
假设将待识别物品的图像信息的特征向量组与网络数据库500中的特征向量类进行比对搜索后,与网络数据库500中的特征向量类I的比对结果为:颜色的相似度为90%、形状相似度为96%、纹理相似度为93%,那么所述相似度的值为(90%+96%+93%)/3=93%;与网络数据库500中的特征向量类2的比对结果为:颜色的相似度为50%、形状相似度为40%、纹理相似度为60%,那么所述相似度的值为(50%+40%+60%)/3=50%,进一步的,将所述具有最大相关度,相似度为93%的特征向量类I所对应的第二标识信息赋予所述待测物品对应的图像信息,在此不做详细赘述。
[0078]进一步的,本发明一实施方式中,查询处理模块400还用于:
若第一标识信息和第二标识信息相同,则直接将第一标识信息通过网络发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。
[0079]本实施方式中,为了避免冰箱与网络数据库交互过程中产生较多的数据,当识别到物品的图像信息后,查询处理模块400将所述图像信息直接发送给网络数据库进行解析,同时,发送到冰箱的显示界面进行显示;进一步的,仅将经过网络数据库解析后,所述第一标识信息和所述第二标识信息的匹配结果返回给冰箱,并进一步的在冰箱的显示界面进行显不O
[0080]本发明另一实施方式中,查询处理模块400还用于:若第一标识信息和第二标识信息相同,则直接将第一标识信息和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示;
若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示。
[0081]相应的,冰箱的显示界面上,在图像信息的显示区域内,同步显示所述第一标识信息和所述第二标识信息的匹配结果;或是以列表的形式,一一进行匹配显示所述图像信息以及其对应的所述第一标识信息和所述第二标识信息的匹配结果,如此,当接收的图像信息为多个物品的图像信息时,用户可以更易观察图像信息与所述第一标识信息和所述第二标识信息的匹配结果的匹配关系,在此不做详细赘述。
[0082]当然,显示方式有多种,例如:分区域显示、列表显示等,在此不做详细赘述。
[0083]进一步的,本发明一实施方式中,数据库更新模块600用于:
将冰箱显示界面显示的信息对应更新至网络数据库500。
[0084]当再次通过网络接收到图像信息后,即可以依据更新后的网络数据库对其进行处理,如此,借助用户端反馈的数据,增大网络数据库500中存储的数据,保证后台食物识别的准确性。
[0085]本发明一实施方式中,若所述第一标识信息和第二标识信息相同,数据库更新模块600则直接将第一标识信息或第二标识信息其中之一以及图像信息更新至网络数据库500。
[0086]本发明一实施方式中,若所述第一标识信息和第二标识信息不同,查询处理模块400则直接确认所述第一标识信息和所述第二标识信息的匹配结果为第一标识信息,并将所述第一标识信息与所述图像信息进行匹配,通过冰箱的显示界面显示,同时,数据库更新模块600将其对应更新至网络数据库500。
[0087]本发明一实施方式中,若所述第一标识信息和第二标识信息不同,查询处理模块400,则以接收的第一标识信息查询网络数据库500,获取与其匹配的图像信息集;
将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,当所述相似度比值大于系统预设相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,并将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,数据库更新模块600将其对应更新至网络数据库500。
[0088]该实施方式中,查询处理模块400以所述第一标识信息查询网络数据库500,获取网络数据库500中与所述第一标识信息对应的唯一特征向量类;将所述待识别物品的图像信息与所述特征向量类进行比对,并通过比对结果确定所述第一标识信息和所述第二标识信息的匹配结果。
[0089]本发明具体示例中,查询处理模块400可以同样采用轮廓检测技术及背景分割技术对所述待识别物品的图像信息进行预处理,以获取所述待识别物品的图像信息的特征向量组,所述特征向量组包括:物品的形状、颜色、纹理等。
[0090]设置一相似度阈值,当所述待识别物品的图像信息的特征向量组与网络数据库500中已知的特征向量类的相似度大于所述相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,进一步,将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,将其对应更新至网络数据库500。[0091 ]所述相似度阈值为一固定数值,其取值范围通常在50%至100%之间。
[0092]为了方便理解,以下将描述一具体示例用于理解本发明。
[0093]假设相似度阈值为70%,查询处理模块400以所述待识别物品的第一标识信息查询网络数据库500后,获得唯一特征向量类,将所述待识别物品的图像信息的特征向量组与网络数据库500中已知的特征向量类进行比对后,其相似度为90%,其大于相似度阈值70%,那么,则确认第一标识信息和第二标识信息匹配结果为第一标识信息,并进一步,将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,数据库更新模块600将其对应更新至网络数据库500。如此,通过用户端的冰箱操作,主动扩充网络数据库500中存储的数据,进而节约建库的人力、物力成本。
[0094]在本发明的其他实施方式中,还可以进一步通过人工辅助的方式,通过用户将正确的图像信息和标识信息更新至网络数据库500,当然,网络数据库500也可以通过人工辅助的方式排查更新的数据,在此不做详细赘述。
[0095]另外,在本发明的技术领域中,通过图像比对,判断数据的准确性还具有多种方式,在此不在一一列举。在本发明的其他优选实施方式中,为了缩减计算量,还可以设置网络数据库的更新周期,例如:I小时、I天、一周等,也可以有网络数据库的管理者按照需求定期更新,当网络数据库接收到相应的更新信息后,先对相应的更新信息进行存储,之后在设定的更新周期下,统一对数据进行更新,如此,缩减计算量,在此不做详细赘述。
[0096]进一步的,本发明一实施方式中,当网络数据库500接收到用户端上传的数据后,也可以由网络数据库500的管理者辅助检测上传数据的有效性,之后再进行相应的更新操作,在此不做详细赘述。
[0097]可以理解的是,本发明的网络数据库,通过网络统一进行管理,如此,可以根据客户的需求,给与更好的服务,同时,还可以通过网络数据库为用户端的冰箱增加推送内容,
便于统一管理。
[0098]所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的模块的具体工作过程,可以参考前述方法实施方式中的对应过程,在此不再赘述。
[0099]综上所述,本发明的智能冰箱控制方法及控制系统,基于网络识别待识别物品的图像信息,并对其进行匹配;进一步的,通过冰箱中的条码识别装置验证以图像信息为查询条件获得的匹配结果的准确度,并进一步的采用使用过程中产生的数据更新网络数据库,当再次产生新的图像信息时,即可以依据更新后的网络数据库对其进行处理,如此,借助用户端冰箱反馈的数据,增大所述网络数据库中存储的数据,保证后台食物识别的准确性,并进一步提升用户体验感。
[0100]在本发明所提供的几个实施方式中,应该理解到,以上所描述的结构、系统以及方法的实施方式仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其他的形式。
[0101]所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施方式方案的目的。
[0102]另外,在本发明各个实施方式中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以2个或2个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
[0103]最后应说明的是:以上实施方式仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施方式对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施方式所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施方式技术方案的精神和范围。
【主权项】
1.一种智能冰箱控制方法,其特征在于,所述方法包括: 通过网络接收冰箱发送的待识别物品的第一标识信息; 通过网络接收冰箱发送的待识别物品的图像信息; 以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息; 若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一通过网络发送至冰箱,以通过冰箱的显示界面显示; 若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。2.根据权利要求1所述的智能冰箱控制方法,其特征在于, 以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息后,所述方法还包括: 若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示; 若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示。3.根据权利要求1或2所述的智能冰箱控制方法,其特征在于,所述方法还包括: 将冰箱显示界面显示的信息对应更新至所述网络数据库。4.根据权利要求3所述的智能冰箱控制方法,其特征在于,所述方法还包括: 若所述第一标识信息和第二标识信息不同,则直接确认所述第一标识信息和所述第二标识信息的匹配结果为第一标识信息,并将所述第一标识信息与所述图像信息进行匹配,通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。5.根据权利要求3所述的智能冰箱控制方法,其特征在于,所述方法还包括: 若所述第一标识信息和第二标识信息不同, 则以接收的第一标识信息查询所述网络数据库,获取与其匹配的图像信息集; 将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,当所述相似度比值大于系统预设相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息, 并将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,将其对应更新至所述网络数据库。6.一种智能冰箱控制系统,其特征在于,包括: 数据获取模块,用于通过网络接收冰箱发送的待识别物品的第一标识信息; 通过网络接收冰箱发送的待识别物品的图像信息; 查询处理模块,以接收的待识别物品的图像信息查询网络数据库,获取与其匹配的第二标识信息; 若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一通过网络发送至冰箱,以通过冰箱的显示界面显示; 若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果通过网络发送至冰箱,以通过冰箱的显示界面显示。7.根据权利要求6所述的智能冰箱控制系统,其特征在于,所述查询处理模块还用于: 若第一标识信息和第二标识信息相同,则直接将第一标识信息或第二标识信息其中之一和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示; 若第一标识信息和第二标识信息不同,则将第一标识信息和第二标识信息进行匹配,并将匹配结果和所述待识别物品的图像信息一一进行配对,并通过网络同步发送至冰箱,以通过冰箱的显示界面显示。8.根据权利要求6或7所述的智能冰箱控制系统,其特征在于,所述系统还包括:数据库更新t吴块,所述数据库更新模块用于:将冰箱显示界面显示的信息对应更新至所述网络数据库。9.根据权利要求8所述的智能冰箱控制系统,其特征在于,所述查询处理模块还用于:若所述第一标识信息和第二标识信息不同,则直接确认所述第一标识信息和所述第二标识信息的匹配结果为第一标识信息,并将所述第一标识信息与所述图像信息进行匹配,通过冰箱的显示界面显示,同时,通过所述数据库更新模块将所述第一标识信息与所述图像信息对应更新至所述网络数据库。10.根据权利要求8所述的智能冰箱控制系统,其特征在于,所述查询处理模块还用于: 若所述第一标识信息和第二标识信息不同, 则以接收的第一标识信息查询所述网络数据库,获取与其匹配的图像信息集; 将当前获得的图像信息与所述图像信息集进行相似度对比,获取相似度比值,当所述相似度比值大于系统预设相似度阈值时,确认第一标识信息和第二标识信息匹配结果为第一标识信息,并将所述待识别物品的图像信息及第一标识信息通过冰箱的显示界面显示,同时,通过所述数据库更新模块将所述第一标识信息与所述图像信息对应更新至所述网络数据库。
【文档编号】F25D29/00GK106016892SQ201610352737
【公开日】2016年10月12日
【申请日】2016年5月24日
【发明人】唐骏, 吴勇, 寻明锋, 徐同, 方红波, 孙加龙
【申请人】青岛海尔股份有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1