一种中文的分词方法及装置与流程

文档序号:14195060阅读:来源:国知局

技术特征:

技术总结
本发明实施例公开了一种中文的分词方法及装置。所述方法包括:获取待分词文本的特征信息,其中,所述特征信息包括段落划分、标点符号或空格符中至少之一;根据特征信息,确定待分词文本中的所有自然区间;将自然区间划分为歧义区间和非歧义区间;确定歧义区间中的候选词,并将候选词与非歧义区间中的文本进行匹配;根据匹配结果确定候选词的分词规则,并按照分词规则对所述歧义区间的文本进行分词处理。通过采用上述技术方案,有效提高了分词结果与待分词文本语境之间的关联性,使得分词的准确度得到提升。相对于现有技术提供的分词方案,本发明实施例提供的技术方案计算量较小,在一定程度上也可以提高分词的快速性。

技术研发人员:杨良志;汪志新;丁德平;王向军
受保护的技术使用者:彩讯科技股份有限公司
技术研发日:2017.11.13
技术公布日:2018.04.17
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1