一种混合分词方法与流程

文档序号:17478059发布日期:2019-04-20 06:15阅读:来源:国知局

技术特征:

技术总结
本发明公开的混合分词方法,涉及语义分析技术领域,利用经训练数据训练过的语言模型对语句进行标注,得到语句各个词的标签序列,初始化一个词组序列,依次对标签序列进行解码,根据解码结果,对语句进行分词,得到分词结果,实现了自动对语句内的所有语言进行分词,节省了人工成本、分词效率较高,解决了现有技术存在的不能对对语句内的所有语言进行分词,需要通过人工去分词而导致的人工成本高及分词效率低的缺陷。

技术研发人员:张文斌;刘洋
受保护的技术使用者:云孚科技(北京)有限公司
技术研发日:2018.12.05
技术公布日:2019.04.19
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1