商品信息识别方法和系统与流程

本发明涉及无人售货技术领域，尤其是涉及一种商品信息识别方法和系统。

背景技术

无人售货是商业自动化的一种，它不受时间、地点的限制，能节省人力、方便交易，是一种全新的商业零售形式，又被称为24小时无人智能超市。

现有的无人售货超市对售货商品信息的识别方法较为繁琐，且识别结果存在较大误差，并不准确。

技术实现要素：

有鉴于此，本发明的目的在于提供商品信息识别方法和系统，从多角度的商品图像中识别商品信息，提高识别结果的准确性。

第一方面，本发明实施例提供了一种商品信息识别方法，包括：

获取商品的图像；

识别所述图像，获得所述商品的商品信息和与图像特征；

将所述商品信息和所述图像特征进行合成，得到商品识别信息。

结合第一方面，本发明实施例提供了第一方面的第一种可能的实施方式，其中，所述识别所述图像，获得所述商品的商品信息和与图像特征包括：

识别出所述图像中包含文字的图像区块；

识别出所述图像区块中包含的所述文字，根据所述文字生成商品信息；

根据预先训练的商品图像识别模型确定所述图像中所述商品的图像特征。

结合第一方面，本发明实施例提供了第一方面的第二种可能的实施方式，其中，所述根据所述文字生成商品信息包括：

根据预设模板从所述图像区块包含的所述文字中，提取相应的文字填写到所述预设模板中，生成所述商品信息。

结合第一方面，本发明实施例提供了第一方面的第三种可能的实施方式，其中，所述获取商品的图像包括：

获取所述商品360度全方位的多张图像，其中，同一种类的所述商品的多张图像携带有相同的商品标识；

将携带有相同的所述商品标识的图像进行整合，得到所述商品的图像。

结合第一方面，本发明实施例提供了第一方面的第四种可能的实施方式，其中，所述识别出所述图像中包含文字的图像区块包括：

将所述图像中文字和图像进行分离操作；

将所述文字所在的图像区块从所述图像中识别分离出。

结合第一方面，本发明实施例提供了第一方面的第五种可能的实施方式，其中，所述方法还包括：

将所述商品识别信息更新到多个商品识别中心及多个商品信息分发中心，以使所述商品识别中心和所述商品信息分发中心根据所述商品识别信息对所述商品进行识别。

结合第一方面，本发明实施例提供了第一方面的第六种可能的实施方式，其中，所述方法还包括：

根据所述商品的图像训练出所述商品图像识别模型。

第二方面，本发明实施例还提供一种商品信息识别系统，包括：

图像获取模块，用于获取商品的图像；

图像识别模块，用于识别所述图像，获得所述商品的商品信息和与图像特征；

合成模块，用于将所述商品信息和所述图像特征进行合成，得到商品识别信息。

结合第二方面，本发明实施例提供了第二方面的第一种可能的实施方式，其中，所述图像获取模块包括有腔体、托盘、电机和所述腔体的腔体壁上设置有摄像装置；

所述摄像装置用于拍摄放置于所述托盘，由所述电机驱动旋转的所述商品。

结合第二方面，本发明实施例提供了第二方面的第二种可能的实施方式，其中，所述图像获取模块包括有腔体和在所述腔体的腔体壁上呈圆周分布设置的多个摄像装置；

所述摄像装置用于拍摄各个角度的所述商品。

本发明实施例提供了一种商品信息识别方法和系统，通过识别商品图像中的商品信息和图像特征，并将上述两种商品信息和图像特征进行合成，得到商品识别信息，与单纯从商品图像中提取商品识别信息相比，从多角度的商品图像中识别商品信息，提高识别结果的准确性；

本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的商品信息识别方法流程图；

图2为本发明实施例提供的商品信息识别系统的功能模块图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

现有的无人售货超市对售货商品信息的识别方法较为繁琐，且识别结果存在较大误差，并不准确。

基于此，本发明实施例提供的一种商品信息识别方法和系统，从多角度的商品图像中识别商品信息，提高识别结果的准确性。

为便于对本实施例进行理解，首先对本发明实施例所公开的一种商品信息识别方法进行详细介绍；

图1为本发明实施例提供的一种商品信息识别方法流程图。

参照图1，商品信息识别方法包括以下步骤：

步骤s110，获取商品的图像；

步骤s120，识别图像，获得商品的商品信息和与图像特征；

步骤s130，将商品信息和图像特征进行合成，得到商品识别信息。

具体地，通过识别商品图像中的商品信息和图像特征，并将上述两种商品信息和图像特征进行合成，得到商品识别信息，与单纯从商品图像中提取商品识别信息相比，提高识别结果的可靠性；

进一步的，上述实施例中提供的步骤s120包括：

步骤s210，识别出图像中包含文字的图像区块；

步骤s220，识别出图像区块中包含的文字，根据文字生成商品信息；

步骤s230，根据预先训练的商品图像识别模型确定图像中商品的图像特征。

这里，从商品图像中识别出包含有文字的图像区块，再从图像区块中识别文字，将文字生成商品信息，与此同时，根据预先训练的商品图像识别模型确定商品图像中的图像特征；

进一步的，步骤s220中根据文字生成商品信息，还可用以下步骤实现，包括：

步骤s310，根据预设模板从图像区块包含的文字中，提取相应的文字填写到预设模板中，生成商品信息。

其中，预设模板中包括商品名称、商品类型、生产日期、产地、配料表等项目，按照预设模板中的项目将识别的文字填写到模板的相应项目中，生成商品信息；

进一步的，步骤s110还可用以下步骤实现，包括：

步骤s410，获取商品360度全方位的多张图像，其中，同一种类的商品的多张图像携带有相同的商品标识；

步骤s420，将携带有相同的商品标识的图像进行整合，得到商品的图像。

这里，为了进一步增加商品识别信息结果的精确度，获取商品全方位的多张图像，并将各个方位的多张图像合并得到商品图像，再从合并后的商品图像中识别图像特征和商品信息；

进一步的，上述实施例中提供的步骤s210还可用以下步骤实现：

步骤s510，将图像中文字和图像进行分离操作；

步骤s520，将文字所在的图像区块从图像中识别分离出。

这里，为了更加准确地识别图像区块，先将文字和图像进行分离，再分离出包含有文字的图像区块；

进一步的，上述方法还包括：

步骤s140，将商品识别信息更新到多个商品识别中心及多个商品信息分发中心，以使商品识别中心和商品信息分发中心根据商品识别信息对商品进行识别。

进一步的，方法还包括：

步骤s150，根据商品的图像训练出商品图像识别模型。

这里，根据多张全方位合并的商品图像作为样本，训练出商品图像识别模型；

进一步的，如图2所示，本发明实施例还提供一种商品信息识别系统，包括：

图像获取模块，用于获取商品的图像；

图像识别模块，用于识别图像，获得商品的商品信息和与图像特征；

合成模块，用于将商品信息和图像特征进行合成，得到商品识别信息。

进一步的，为了获取商品全方位的图像，图像获取模块包括有腔体、托盘、电机和腔体的腔体壁上设置有摄像装置；

摄像装置用于拍摄放置于托盘，由电机驱动旋转的商品。

进一步的，作为一种可选的实施例，图像获取模块包括有腔体和在腔体的腔体壁上呈圆周分布设置的多个摄像装置；摄像装置用于拍摄各个角度的商品，无需将商品进行旋转也可获取商品各个角度全方位的图像；

本发明实施例提供的商品信息识别系统，与上述实施例提供的商品信息识别方法具有相同的技术特征，所以也能解决相同的技术问题，达到相同的技术效果。

本发明实施例所提供的商品信息识别方法以及系统的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见方法实施例，在此不再赘述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

另外，在本发明实施例的描述中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

本发明实施例还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述实施例提供的商品信息识别方法的步骤。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器运行时执行上述实施例的商品信息识别方法的步骤。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。