技术编号:30581960
提示:您尚未登录,请点 登 陆 后下载,如果您还没有账户请点 注 册 ,登陆完成后,请刷新本页查看技术详细信息。.本发明涉及一种基于多助教模型知识蒸馏训练的文本分类方法,属于自然语言文本处理技术领域。背景技术.随着自然语言处理领域预训练语言模型的发展,自然语言处理领域众多模型的性能有着巨大的飞跃,目前较为流行的预训练语言模型在众多自然语言处理领域任务,例如文本分类、命名体识别、信息抽取、词性标注,乃至问答领域、推荐领域、机器翻译领域等中都有应用,并且也已经渐渐开始在工业界中落地,例如gpt-模型api的开放、文心模型的上线等,这些无不暗示着预训练语言模型的广泛应用前景。.但与此同时,伴随模型性能巨...
注意:该技术已申请专利,请尊重研发人员的辛勤研发付出,在未取得专利权人授权前,仅供技术研究参考不得用于商业用途。
该专利适合技术人员进行技术研发参考以及查看自身技术是否侵权,增加技术思路,做技术知识储备,不适合论文引用。
请注意,此类技术没有源代码,用于学习研究技术思路。