一种商品实体识别方法及装置与流程

文档序号:33732777发布日期:2023-04-06 04:49阅读:35来源:国知局
一种商品实体识别方法及装置与流程

本说明书一个或多个实施例涉及信息处理,尤其涉及一种商品实体识别方法及装置。


背景技术:

1、在商品搜索的应用场景下,通常,用户可以通过客户端向服务平台发送与商品相关的用户需求,使得服务平台可以根据该用户需求,在所对接的商品库中搜索与该用户需求相匹配的商品,并将搜索到的商品作为商品搜索结果返回至客户端,由客户端将该商品搜索结果展示给用户,以供用户查看、选择所需的商品。

2、例如,用户可以在客户端上的商品搜索界面中,输入用于表示用户需求的搜索关键词“山楂”,并将该搜索关键词发送给服务平台,使得服务平台可以根据该搜索关键词,在商品库中搜索与该搜索关键词相匹配的商品,搜索到的商品可以包括“山楂果”、“山楂条”、“山楂片”、“山楂气泡水”、“山楂味汤圆”等,并将搜索到的商品的相关信息作为商品搜索结果返回至客户端,由客户端将该商品搜索结果展示在商品搜索结果界面中;但通常,认为“山楂果”、“山楂条”、“山楂片”这类商品搜索结果匹配实际的用户需求,而“山楂气泡水”、“山楂味汤圆”这类商品搜索结果则不匹配实际的用户需求。

3、因此,在实际应用中,如何提高商品搜索结果与用户需求的匹配度,使商品搜索结果更加符合用户的实际期望,以提升用户体验,也就成为了亟待解决的问题。


技术实现思路

1、本说明书提供一种商品实体识别方法,所述方法包括:

2、获取包含商品实体的待识别字符串;

3、基于预设的第一ner模型,针对所述待识别字符串进行第一阶段的命名实体识别,以识别出所述待识别字符串包含的至少一个第一级商品实体和与所述第一级商品实体相关的至少一个第一级属性实体;

4、响应于识别出的所述第一级商品实体和所述第一级属性实体,基于预设的分类模型对所述第一级商品实体和所述第一级属性实体分别进行第二阶段的命名实体分类,得到与所述第一级商品实体对应的商品类别和所述第一级属性实体对应的属性类别。

5、本说明书还提供一种商品实体识别装置,所述装置包括:

6、获取模块,用于获取包含商品实体的待识别字符串;

7、第一级实体识别模块,用于基于预设的第一ner模型,针对所述待识别字符串进行第一阶段的命名实体识别,以识别出所述待识别字符串包含的至少一个第一级商品实体和与所述第一级商品实体相关的至少一个第一级属性实体;

8、第一级实体分类模块,用于响应于识别出的所述第一级商品实体和所述第一级属性实体,基于预设的分类模型对所述第一级商品实体和所述第一级属性实体分别进行第二阶段的命名实体分类,得到与所述第一级商品实体对应的商品类别和所述第一级属性实体对应的属性类别。

9、本说明书还提供一种电子设备,包括通信接口、处理器、存储器和总线,所述通信接口、所述处理器和所述存储器之间通过总线相互连接;

10、所述存储器中存储机器可读指令,所述处理器通过调用所述机器可读指令,执行上述方法。

11、本说明书还提供一种机器可读存储介质,所述机器可读存储介质存储有机器可读指令,所述机器可读指令在被处理器调用和执行时,实现上述方法。

12、在以上实施例中,通过将待识别字符串的实体识别过程分为第一阶段的实体识别和第二阶段为上述实体确定对应的实体类别,极大的减少了在商品实体识别过程中产生的计算量;进一步的,通过对上述待识别字符串先识别为第一级实体,再对上述第一级实体进行第二次实体识别,通过两次由粗粒度到细粒度的实体识别和实体分类,保证了ner标签的数量的固定,进而在需要新增商品类目时,不需要对原有商品实体识别模型进行重新训练,只需要为原有识别模型提供含有新增商品类目的样本数据进行学习即可,极大的减少了因新增而导致重新训练模型的计算量;并且,因为ner标签的数量固定,对商品的类目等具有极大的可扩展性,也便于管理人员新增商品,从而可以更加快速的完成新类目的增加和根据新增加的类目实现对商品的分类。



技术特征:

1.一种商品实体识别方法,所述方法包括:

2.根据权利要求1所述的方法,所述第一级商品实体包括至少一个第二级商品实体和与所述第二级商品实体相关的至少一个第二级属性实体;

3.根据权利要求2所述的方法,所述方法还包括:

4.根据权利要求3所述的方法,所述基于预设的关系识别模型,进一步识别由所述第一ner模型识别出的实体之间的关系,包括:

5.根据权利要求3所述的方法,所述待识别字符串还包括除所述第一级商品实体和所述第一级属性实体以外的第三属性实体;

6.根据权利要求5所述的方法,所述待识别字符串包括与商品对应的商品详情描述文本。

7.根据权利要求6所述的方法,所述方法还包括:

8.一种商品实体识别装置,所述装置包括:

9.一种电子设备,包括通信接口、处理器、存储器和总线,所述通信接口、所述处理器和所述存储器之间通过总线相互连接;

10.一种机器可读存储介质,所述机器可读存储介质存储有机器可读指令,所述机器可读指令在被处理器调用和执行时,实现权利要求1至7任一项所述的方法。


技术总结
本说明书一个或多个实施例提供一种商品实体识别方法及装置,所述方法包括:获取包含商品实体的待识别字符串;基于预设的第一NER模型,针对所述待识别字符串进行第一阶段的命名实体识别,以识别出所述待识别字符串包含的至少一个第一级商品实体和与所述第一级商品实体相关的至少一个第一级属性实体;响应于识别出的所述第一级商品实体和所述第一级属性实体,基于预设的分类模型对所述第一级商品实体和所述第一级属性实体分别进行第二阶段的命名实体分类,得到与所述第一级商品实体对应的商品类别和所述第一级属性实体对应的属性类别。

技术研发人员:承怡菁
受保护的技术使用者:拉扎斯网络科技(上海)有限公司
技术研发日:
技术公布日:2024/1/12
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1