一种为待译稿件匹配译员的方法与流程

文档序号:12464652阅读:226来源:国知局

本发明属于自然语言处理、信息检索,尤其涉及一种为待译稿件匹配译员的方法。



背景技术:

在大体量的翻译公司或者翻译平台上,不得不面对的一个问题是如何为待译稿件匹配译员,常见的做法是人工判别和机器判别,人工判别是通过语言专家或翻译专家分别对翻译文档和译员进行分析和判断,由于人的阅读和理解限制,这种方法速度较慢同时要耗费非常大的的人力成本,并且由于判别人能力的参差以及每人对文档难度的理解不同而产生很大的判别差别,判别结果无法做到统一标准,客观性很差。机器判别的方法包括一种方法:根据译稿匹配译员,实际是通过译稿匹配译稿库中已有译稿,进而确定译员。

文档相似度匹配可以通过搜索引擎实现,Lucene是一套用于全文检索和搜索的开源程序库,为互联网时代搜索引擎是常见的信息检索工具。

通常一个文档集合里会有很多文档包含某个单词,每个文档会记录文档编号,单词在这个文档中出现的次数(TF)及单词在文档中哪些位置出现过等信息,这样与一个文档相关的信息叫做倒排索引项,包含这个单词的一系列倒排索引项构成了这个单词对应的倒排索引表,成万上亿个单词的倒排索引表构成了倒排索引。

目前,对利用文档处理及匹配提高匹配译员的效率尚有许多提高空间。



技术实现要素:

本发明所要解决的技术问题是通过对已有译稿和待译稿进行预处理,对预处理后的已有译稿和待译稿进行相似度匹配,从而高效准确地匹配到合适的译员。

为解决上述技术问题,本发明提供了一种为待译稿件匹配译员的方法,其特征是包括以下步骤:

对已有译稿进行预处理;

所述已有译稿均记录着完稿译员的信息;

所述对已有译稿进行预处理的步骤是:(1.1)对已有译稿分词并建立基于词汇的倒排索引;(1.2)对分词后的已有译稿提取主题,建立基于译稿主题的倒排索引;(1.3)对基于词汇的倒排索引和基于译稿主题的倒排索引进行加权,获得预处理后的已有译稿;

对待译稿件进行预处理;

所述对待译稿件进行预处理的步骤是:对待译稿件进行分词,形成待译稿件词汇集合,提取待译稿件主题,对待译稿件分词后的待译稿件词汇集合和待译稿件主题进行加权,获得预处理后的待译稿件;

将预处理后的已有译稿和预处理后的待译稿件进行文档相似度匹配,获得候选译稿;

获取候选译稿记录的译员信息,保存为待译稿件匹配译员的信息。

进一步,所述对待译稿件进行分词是通过调用Lucene搜索引擎,所述Lucene搜索引擎包括若干种分词器。

进一步,所述Lucene搜索引擎根据语种类别采用相匹配的分词器对译稿库中已有译稿进行分词。

进一步,所述Lucene搜索引擎根据语种类别采用相匹配的分词器,所述语种类别包括拉丁语系和东亚语系,所述拉丁语系采用具有词干提取功能的分词器,所述东亚语系采用基于词典和统计的分词器。

进一步,所述对已有译稿分词后提取主题的方法是(1)如果有标题,将标题默认为主题;(2)如果没有标题,但有关键词,根据关键词提取译稿主题;(3)如果没有标题,也没有关键词,默认首句为主题句。

进一步,所述将预处理后的已有译稿和预处理后的待译稿件进行文档相似度匹配,是通过调用Lucene搜索引擎内置的BM25匹配模块进行文档相似度匹配。

采用上述技术方案,可达到以下效果:

通过译稿匹配译员,代替人工指派译员,降低人工劳动强度,提高匹配准确率;

通过对对已有译稿和待译稿进行预处理提高了匹配基础。

附图说明

此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定,在附图中:

图1示出了一种为待译稿件匹配译员的方法的流程示意图。

具体实施方式

下面结合附图和具体实施方式对本发明的技术方案作进一步具体说明。

为解决上述技术问题,本发明提供了一种为待译稿件匹配译员的方法,如图1所示,其特征是包括以下步骤:

对已有译稿进行预处理;

所述已有译稿均记录着完稿译员的信息;

所述对已有译稿进行预处理的步骤是:(1.1)对已有译稿分词并建立基于词汇的倒排索引;(1.2)对分词后的已有译稿提取主题,建立基于译稿主题的倒排索引;(1.3)对基于词汇的倒排索引和基于译稿主题的倒排索引进行加权,获得预处理后的已有译稿;

对待译稿件进行预处理;

所述对待译稿件进行预处理的步骤是:对待译稿件进行分词,形成待译稿件词汇集合,提取待译稿件主题,对待译稿件分词后的待译稿件词汇集合和待译稿件主题进行加权,获得预处理后的待译稿件;

将预处理后的已有译稿和预处理后的待译稿件进行文档相似度匹配,获得候选译稿;

获取候选译稿记录的译员信息,保存为待译稿件匹配译员的信息。

进一步,所述对待译稿件进行分词是通过调用Lucene搜索引擎,所述Lucene搜索引擎包括若干种分词器。

进一步,所述Lucene搜索引擎根据语种类别采用相匹配的分词器对译稿库中已有译稿进行分词。

进一步,所述Lucene搜索引擎根据语种类别采用相匹配的分词器,所述语种类别包括拉丁语系和东亚语系,所述拉丁语系采用具有词干提取功能的分词器,所述东亚语系采用基于词典和统计的分词器。

进一步,所述对已有译稿分词后提取主题的方法是(1)如果有标题,将标题默认为主题;(2)如果没有标题,但有关键词,根据关键词提取译稿主题;(3)如果没有标题,也没有关键词,默认首句为主题句。

进一步,所述将预处理后的已有译稿和预处理后的待译稿件进行文档相似度匹配,是通过调用Lucene搜索引擎内置的BM25匹配模块进行文档相似度匹配。

本领域技术人员还应当理解,以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1