技术编号:11250871
提示:您尚未登录,请点 登 陆 后下载,如果您还没有账户请点 注 册 ,登陆完成后,请刷新本页查看技术详细信息。本发明属于中文自然语言处理领域,特别涉及一种海量文本中基于词向量表征的新词发现方法及系统。背景技术新词发现是中文自然语言处理研究领域一个非常重要的研究内容。由于中文不像英文等许多西方语言,词和词之间有固定的分隔符,所以分词通常作为中文信息处理任务最开始的一个必要步骤,而新词发现又与分词紧密相关。Sproat和Emerson指出新词的出现很大程度上影响着分词工具的分词准确性,60%的分词错误是由新词引起的。在新词任务中,对于“新词”并没有一个明确界定的概念。在中文分词领域,有新词和未登录词两种概念...
注意:该技术已申请专利,请尊重研发人员的辛勤研发付出,在未取得专利权人授权前,仅供技术研究参考不得用于商业用途。
该专利适合技术人员进行技术研发参考以及查看自身技术是否侵权,增加技术思路,做技术知识储备,不适合论文引用。
请注意,此类技术没有源代码,用于学习研究技术思路。