对话内容的处理方法、装置及相关设备与流程

文档序号:26050672发布日期:2021-07-27 15:25阅读:来源:国知局

技术特征:

1.一种对话内容的处理方法,其特征在于,包括:

对第一对话内容进行检索得到由m个目标文本向量与n个目标图片向量组合得到的第一答案,其中,所述m个目标文本向量与所述第一对话内容中的文本对应,所述n个目标图片向量与所述第一对话内容中的图片对应;所述第一对话内容包括提问型内容;

对所述第一对话内容进行编码得到由l个文本编码向量与y个图片编码向量组合得到的第二答案;其中,所述l个文本编码向量由所述第一对话内容中的文本编码得到,所述y个图片编码向量由所述第一对话内容中的图片编码得到;

将所述第一对话内容、所述第一答案和所述第二答案输入目标网络模型,输出与所述第一对话内容匹配的目标答案,其中,所述目标答案为所述第一答案和所述第二答案中的答案,m、n、l、y均为正整数。

2.根据权利要求1所述的方法,其特征在于,所述对第一对话内容进行检索得到由m个目标文本向量与n个目标图片向量组合得到的第一答案,包括:

从所述第一对话内容中识别m个文本向量和n个图片向量;

确定所述m个文本向量对应的第一业务类型,并确定所述n个图片向量对应的第二业务类型;

根据所述第一业务类型与第一映射关系确定第一索引,并根据所述第二业务类型与第二映射关系确定第二索引,其中,所述第一映射关系用于指示文本向量的业务类型与索引之间的关系,所述第二映射关系用于指示图片向量的业务类型与索引之间的关系;

根据所述第一索引从文本向量库中确定m个目标文本向量,并根据所述第二索引从图片向量库中确定n个目标图片向量,其中,所述文本向量与每一个所述目标文本向量的相似度低于第一阈值,所述图片向量与每一个所述目标图片向量的相似度低于第二阈值;

基于所述m个目标文本向量与所述n个目标图片向量的组合得到所述第一答案。

3.根据权利要求1所述的方法,其特征在于,所述对所述第一对话内容进行编码得到由l个文本编码向量与y个图片编码向量组合得到的第二答案,包括:

对所述第一对话内容中的文本进行编码得到所述l个文本编码向量;

对所述第一对话内容中的图片进行编码得到所述y个图片编码向量;

对所述l个文本编码向量和所述y个图片编码向量进行融合得到所述第二答案。

4.根据权利要求1所述的方法,其特征在于,在对第一对话内容进行检索得到由m个目标文本向量与n个目标图片向量组合得到的第一答案之前,所述方法还包括:

获取历史问答内容,其中,所述历史问答内容包括提问型内容;

将所述历史问答内容划分为文本内容和图片;

确定所述文本内容和所述图片的业务类型;

根据所述业务类型将所述文本内容存储在对应的文本知识库中,以及将所述图片存储在对应的图片知识库中。

5.根据权利要求4所述的方法,其特征在于,所述方法还包括:

将所述文本知识库中的文本内容生成为对应的文本向量,以及将所述图片知识库中的图片生成对应的图片向量;

创建所述文本向量的索引,以及创建所述图片向量的索引;

将创建索引后的文本向量存储入文本向量库,并将创建索引后的图片向量存储入图片向量库。

6.根据权利要求5所述的方法,其特征在于,在所述将所述第一对话内容、所述第一答案和所述第二答案输入目标网络模型,输出与所述第一对话内容匹配的目标答案之前,所述方法包括:

对所述文本向量库和所述图片向量库中的应答内容对应的答案进行编码得到标识符,其中,所述标识符用于指示所述答案的答案类型,所述答案类型包括基于编码向量得到的答案和基于向量得到的答案;

通过目标训练集对初始网络模型进行训练得到所述目标网络模型,其中,所述目标训练集包括所述文本向量库中的文本、所述图片向量库中的图片和所述标识符。

7.根据权利要求6所述的方法,其特征在于,所述方法还包括:

将所述第一对话内容、所述第一答案和所述第二答案输入目标网络模型,输出与所述目标答案对应的标识符。

8.一种对话内容的处理装置,其特征在于,包括:

第一处理模块,用于对第一对话内容进行检索得到由m个目标文本向量与n个目标图片向量组合得到的第一答案,其中,所述m个目标文本向量与所述第一对话内容中的文本对应,所述n个目标图片向量与所述第一对话内容中的图片对应;所述第一对话内容包括提问型内容;

第二处理模块,用于对所述第一对话内容进行编码得到由l个文本编码向量与y个图片编码向量组合得到的第二答案;其中,所述l个文本编码向量由所述第一对话内容中的文本编码得到,所述y个图片编码向量由所述第一对话内容中的图片编码得到;

第三处理模块,用于将所述第一对话内容、所述第一答案和所述第二答案输入目标网络模型,输出与所述第一对话内容匹配的目标答案,其中,所述目标答案为所述第一答案和所述第二答案中的答案,m、n、l、y均为正整数。

9.一种电子设备,其特征在于,包括:处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序,所述程序被所述处理器执行时实现如权利要求1至7中任一项所述的方法步骤。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法步骤。


技术总结
本申请提供一种对话内容的处理方法、装置及相关设备,涉及神经网络模型领域,其中,方法包括:对第一对话内容进行检索得到由M个目标文本向量与N个目标图片向量组合得到的第一答案,其中,M个目标文本向量与第一对话内容中的文本对应,N个目标图片向量与第一对话内容中的图片对应;第一对话内容包括提问型内容;对第一对话内容进行编码得到由L个文本编码向量与Y个图片编码向量组合得到的第二答案;将第一对话内容、第一答案和第二答案输入目标网络模型,输出与第一对话内容匹配的目标答案,其中,目标答案为第一答案和第二答案中的答案。通过本申请,解决了现有技术中基于人工模板的方式得到的答案准确率较低的问题。

技术研发人员:王一秋;曾志贤
受保护的技术使用者:中移(上海)信息通信科技有限公司;中移智行网络科技有限公司;中国移动通信集团有限公司
技术研发日:2021.06.30
技术公布日:2021.07.27
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1