基于对抗学习的域自适应命名实体识别方法

文档序号:37542839发布日期:2024-04-08 13:43阅读:来源:国知局

技术特征:

1.基于对抗学习的域自适应命名实体识别方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于对抗学习的域自适应命名实体识别方法,其特征在于,所述的收集多类型文本的命名实体识别数据集,包括以下步骤:

3.根据权利要求2所述的基于对抗学习的域自适应命名实体识别方法,其特征在于,所述的使用基于预训练语言模型的文档编码器对命名实体识别数据集中的文档进行特征编码,获得文档特征,包括以下步骤:

4.根据权利要求3所述的基于对抗学习的域自适应命名实体识别方法,其特征在于,所述的把文档特征输入命名实体识别模块,预测实体,计算命名实体识别损失函数,包括以下步骤:

5.根据权利要求4所述的基于对抗学习的域自适应命名实体识别方法,其特征在于,所述的把文档特征输入文本类型分类器,判断文本类型,计算文本类型分类损失函数,包括以下步骤:

6.根据权利要求5所述的基于对抗学习的域自适应命名实体识别方法,其特征在于,所述的对文档编码器和文本类型分类器进行对抗学习,使文档编码器提取出域无关的文本特征,包括以下步骤:


技术总结
本发明公开了基于对抗学习的域自适应命名实体识别方法,所述方法包括:收集多类型文本的命名实体识别数据集;使用基于预训练语言模型的文档编码器对命名实体识别数据集中的文档进行特征编码,获得文档特征;把文档特征输入命名实体识别模块,预测实体,计算命名实体识别损失函数;把文档特征输入文本类型分类器,判断文本类型,计算文本类型分类损失函数;对文档编码器和文本类型分类器进行对抗学习,使文档编码器提取出域无关的文本特征;用文档编码器和命名实体识别模块进行命名实体识别。本发明创新性使用对抗学习的方式,通过文档编码器和文本类型分类器之间的对抗训练,使文档编码器提取出域无关的文档特征,实现域自适应命名实体识别。

技术研发人员:关相承,鄢曙光,马喜双,马可盈,伍慧弘
受保护的技术使用者:武汉科技大学
技术研发日:
技术公布日:2024/4/7
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1