文本处理方法、装置、计算机可读存储介质及电子设备与流程

文档序号:25049068发布日期:2021-05-14 12:54阅读:来源:国知局

技术特征:
1.一种文本处理方法,包括:获取待处理文本;对所述待处理文本进行意图分类,得到意图信息序列,其中,所述意图信息序列中的意图信息与所述待处理文本中的句子相对应;基于预设的统计语言模型,确定所述意图信息序列对应的权重集合,其中,所述权重集合中的权重对应于所述意图信息序列中的意图信息组合,用于表征对应的意图信息组合包括的意图信息的共现概率;基于所述意图信息序列对应的权重集合,确定所述待处理文本对应的描述评分并输出所述描述评分。2.根据权利要求1所述的方法,其中,所述基于所述意图信息序列对应的权重集合,确定所述待处理文本对应的描述评分,包括:确定所述意图信息序列对应的权重集合的综合权重;基于所述综合权重,确定所述待处理文本对应的描述评分。3.根据权利要求2所述的方法,其中,所述基于所述综合权重,确定所述待处理文本对应的描述评分,包括:基于所述综合权重和预先对预设文本集合中的文本的综合权重进行统计的统计数据,确定所述待处理文本的排名;基于所述排名,确定所述待处理文本的描述评分。4.根据权利要求1所述的方法,其中,所述基于预设的统计语言模型,确定所述意图信息序列对应的权重集合,包括:提取预设的至少一个统计语言模型;将所述意图信息序列输入所述至少一个统计语言模型,得到所述至少一个统计语言模型分别输出的权重集合,其中,所述权重集合中的权重分别对应于所述意图信息序列中的意图信息组合,用于表征对应的意图信息组合包括的意图信息的共现概率;获取得到的至少一个权重集合分别对应的综合权重;基于得到的至少一个综合权重的大小,从所述至少一个综合权重中确定目标综合权重,并将所述目标综合权重对应的权重集合确定为所述意图信息序列对应的权重集合。5.根据权利要求4所述的方法,其中,所述至少一个统计语言模型分别对应于预设的文本类别信息;所述方法还包括:将所述目标综合权重对应的文本类别信息确定为所述待处理文本的文本类别信息并输出所述待处理文本的文本类别信息。6.根据权利要求1所述的方法,其中,在所述基于预设的统计语言模型,确定所述意图信息序列对应的权重集合之后,所述方法还包括:从所述意图信息序列对应的权重集合中,确定符合预设条件的权重;基于所述符合预设条件的权重对应的意图信息组合,从所述待处理文本中提取目标句子;基于提取的目标句子,生成所述待处理文本的摘要。7.根据权利要求6所述的方法,其中,所述预设条件包括以下至少一项:大于或等于预
设的权重阈值,按照权重的大小进行排序后所在的排位处于预设排位范围内。8.一种文本处理装置,包括:获取模块,用于获取待处理文本;分类模块,用于对所述待处理文本进行意图分类,得到意图信息序列,其中,所述意图信息序列中的意图信息与所述待处理文本中的句子相对应;第一确定模块,用于基于预设的统计语言模型,确定所述意图信息序列对应的权重集合,其中,所述权重集合中的权重对应于所述意图信息序列中的意图信息组合,用于表征对应的意图信息组合包括的意图信息的共现概率;第二确定模块,用于基于所述意图信息序列对应的权重集合,确定所述待处理文本对应的描述评分并输出所述描述评分。9.一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1

7任一所述的方法。10.一种电子设备,所述电子设备包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述权利要求1

7任一所述的方法。
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1