一种智能冰箱、食材管理方法、设备及介质与流程

本申请涉及智能家居，尤其涉及一种智能冰箱、食材管理方法、设备及介质。

背景技术：

1、伴随着智能冰箱的成熟，以及计算机视觉技术不断取得的突破性进展，图像识别技术逐渐应用到冰箱领域，帮助用户方便快捷的管理智能冰箱中的食材，实现对智能冰箱中的食材的智能化管理。

2、相关技术中，在对智能冰箱中的食材进行智能化管理时，一般是采用静态检测的方式，即在智能冰箱中安装图像采集设备，通过图像采集设备拍摄包含智能冰箱内部食材的图像，并将该图像与预设时间长度之前拍摄的包含智能冰箱内部食材的图像进行对比，识别两张图像中食材是否发生了变化，以及发生变化的食材的位置信息，进而识别用户是否对智能冰箱中的食材进行了存取操作、并识别存入或者取出的食材的位置信息等等。

3、由于图像采集设备的采集范围有限，一般只能采集到冰箱冷餐区隔板位置的食材，而不能采集到抽屉区域和门体区域中存放的食材，此外，放置于冰箱内侧的食材会受到外侧食材的遮挡也无法采集到，也就是说采集到的包含智能冰箱内部食材的图像不准确，尤其是被遮挡位置的食材被存取时，导致在识别存入或者取出食材的操作也不准确，进而影响后续对智能冰箱中的食材进行智能化管理。

技术实现思路

1、本申请提供了一种智能冰箱、食材管理方法、设备及介质，用以解决现有技术中对食材的存、取操作的识别结果不准确，影响后续对智能冰箱中的食材进行智能化管理的问题。

2、第一方面，本申请提供了一种智能冰箱，所述智能冰箱包括：

3、第一采集单元，用于采集食材存取操作区域的预设数量的图像；

4、控制器，所述控制器被配置为：

5、接收所述第一采集单元发送的所述预设数量的图像并记录每张图像的接收时间，获取所述每张图像中包含手部及食材的目标图像，根据每张目标图像的接收时间，及所述每张目标图像中包含的食材的位置信息，确定所述食材被移动的位移；根据所述位移，确定对所述食材的目标存取操作以及所述食材对应的目标位置信息。

6、第二方面，本申请提供了一种食材管理方法，所述方法应用于智能冰箱，所述方法包括：

7、接收预设数量的图像并记录每张图像的接收时间；其中，所述图像为食材存取操作区域处采集的图像；

8、获取所述每张图像中包含手部及食材的目标图像，根据每张目标图像的接收时间，及所述每张目标图像中包含的食材的位置信息，确定所述食材被移动的位移；

9、根据所述位移，确定对所述食材的目标存取操作以及所述食材对应的目标位置信息。

10、第三方面，本申请提供了一种电子设备，所述电子设备包括处理器和存储器，所述存储器用于存储程序指令，所述处理器用于执行存储器中存储的计算机程序时实现上述食材管理方法的步骤。

11、第四方面，本申请提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现上述食材管理方法的步骤。

12、在本申请中，接收食材存取操作区域的预设数量的图像并记录每张图像的接收时间，获取每张图像中包含手部及食材的目标图像，根据每张目标图像的接收时间，及每张目标图像中包含的食材的位置信息，确定该食材被移动的位移，根据该位移，确定对该食材的目标存取操作以及该食材对应的目标位置信息。由于在本申请中，可以基于接收的预设数量的每张图像，确定食材被移动的位移，即使食材位于被遮挡的区域或者采集范围无法涉及的区域，也能基于该食材被移动的位移，精准的确定对该食材的目标存取操作以及该食材对应的目标位置信息，便于后续对智能冰箱食材的智能化管理。

技术特征：

1.一种智能冰箱，其特征在于，所述智能冰箱包括：

2.根据权利要求1所述的智能冰箱，其特征在于，所述控制器，具体用于：

3.根据权利要求2所述的智能冰箱，其特征在于，所述控制器，还用于：

4.根据权利要求2所述的智能冰箱，其特征在于，所述控制器，具体用于：

5.根据权利要求1所述的智能冰箱，其特征在于，所述控制器，具体用于：

6.根据权利要求1所述的智能冰箱，其特征在于，所述控制器，具体用于：

7.根据权利要求1所述的智能冰箱，其特征在于，所述智能冰箱，还包括：

8.一种食材管理方法，其特征在于，所述方法包括：

9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器用于存储程序指令，所述处理器用于执行存储器中存储的计算机程序时实现上述权利要求7中所述食材管理方法的步骤。

10.一种计算机可读存储介质，其特征在于，其存储有计算机程序，所述计算机程序被处理器执行时实现上述权利要求7中所述食材管理方法的步骤。

技术总结
本申请公开了一种智能冰箱、食材管理方法、设备及介质，由于在本申请中，可以基于接收的预设数量的每张图像，确定食材被移动的位移，即使食材位于被遮挡的区域或者采集范围无法涉及的区域，也能基于该食材被移动的位移，精准的确定对该食材的目标存取操作以及该食材对应的目标位置信息，便于后续对智能冰箱食材的智能化管理。

技术研发人员：陆书轩,曲磊,谢飞学,高语函,赵启东,王亚杰,陈红欣
受保护的技术使用者：海信集团控股股份有限公司
技术研发日：
技术公布日：2024/1/13