一种中文文本分词的方法、装置、存储介质及电子设备与流程

文档序号:18900827发布日期:2019-10-18 21:55阅读:来源:国知局

技术特征:

技术总结
本发明提供了一种中文文本分词的方法、装置、存储介质及电子设备,其中,该方法包括:获取中文的目标文本,并确定目标文本中的目标字;确定目标字在不同字体下的字图像,并生成目标字的字图像集合;对目标字的字图像集合进行编码处理,生成目标字的字向量;根据目标文本所有的字向量进行序列标注处理,基于序列标注处理结果确定目标文本的分词。通过本发明实施例提供的中文文本分词的方法、装置、存储介质及电子设备,通过包含多个字图像的字图像集合生成目标字的字向量,可以更加综合、全面地确定每个目标字所包含的字形特征;基于该字向量进行分词处理,可以更加有效地识别未登录词,且可以降低中文词边界的模糊性。

技术研发人员:李晓雅
受保护的技术使用者:北京香侬慧语科技有限责任公司
技术研发日:2019.07.18
技术公布日:2019.10.18
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1