医疗文本的检索方法、电子设备及存储介质与流程

文档序号:14871004发布日期:2018-07-06 23:48阅读:240来源:国知局

本发明涉及计算机信息处理技术领域,尤其涉及一种医疗文本的检索方法、电子设备及存储介质。



背景技术:

对于医疗文本检索中,输入的医疗数据也就是查询项的质量,很大程度影响着查询结果的好坏。而查询结果是为了辅助医生做出更好的诊断,不相关的结果并没有任何意义。

对于传统的查询处理方法来说,更多的关注查询项的扩展,而对于原有噪声数据的扩展反倒会进一步降低查询的相关度。在这个过程中,查询缩减这个步骤不可或缺。因此,需要提出一种新型的基于医疗文本的查询优化方法,不仅仅关注于查询扩展,而是在缩减的基础上再进行扩展,对查询项做出更好的处理,从而得到更相关的查询结果。



技术实现要素:

本发明为了克服上述现有技术存在的缺陷,提供一种医疗文本的检索方法、电子设备及存储介质,以优化医疗文本的查询项。

根据本发明的一个方面,提供一种医疗文本的检索方法,包括如下步骤:

s110:获取包含病症描述的文本,将所述文本作为初始查询项;

s120:利用朴素贝叶斯模型对初始查询项进行分类,分类结果包括查询项缩减和查询项扩展;

s130:保留分类结果为查询项扩展的初始查询项,并作为中间查询项;

s140:利用伪相关反馈对所述中间查询项进行查询扩展,将扩展后的中间查询项作为优化查询项;

s150:利用所述优化查询项在医疗文本数据库中进行文本检索。

可选地,所述步骤s120包括:

s121:对所述初始查询项进行向量化获得所述初始查询项的词向量;

s122:将初始查询项的词向量作为所述朴素贝叶斯模型的输入。

可选地,所述步骤s121基于共现矩阵的词向量模型对所述初始查询项进行向量化获得所述初始查询项的词向量。

可选地,所述朴素贝叶斯模型采用如下步骤进行训练:

将基于医疗文本的情感词典作为所述朴素贝叶斯模型的语料库;

获取语料库中的语料及语料标注;

对所述语料库中的语料进行向量化获得所述语料库中的语料的词向量;

将所述词向量作为所述朴素贝叶斯模型的输入;

根据将所述语料库中的语料对应的语料标注确定分类结果,并将所述分类结果作为所述朴素贝叶斯模型的输出;

训练所述朴素贝叶斯模型。

可选地,基于共现矩阵的词向量模型对所述语料库中的语料进行向量化获得所述语料库中的语料的词向量。

可选地,所述语料标注包括正面词和否定词,若所述语料标注为正面词,则所述分类结果为查询项扩展;若所述语料标注为否定词,则所述分类结果为查询项缩减。

可选地,所述s140包括:

将所述中间查询项与一扩展词库中的候选词进行相似度匹配;

将相似度最高的n个候选词作为所述中间查询项的扩展。

可选地,利用bm25算法计算所述中间查询项与一扩展词库中的候选词的相似度。

根据本发明的又一方面,还提供一种电子设备,所述电子设备包括:处理器;存储介质,其上存储有计算机程序,所述计算机程序被所述处理器运行时执行如上所述的步骤。

根据本发明的又一方面,还提供一种存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如上所述的步骤。

相比现有技术,本发明的优势在于:本发明利用朴素贝叶斯模型对初始查询项进行分类,以对初始查询项进行缩减获得中间查询项,并对中间查询项进行扩展以获得优化查询项。由此,本发明增加了对数据本身的分析,提高最终的检索效果。在检索过程中,查询词不再仅仅基于查询扩展,而有了缩减和扩展的结果优化,有效地提升了检索结果的相关性。

附图说明

通过参照附图详细描述其示例实施方式,本发明的上述和其它特征及优点将变得更加明显。

图1示出了根据本发明实施例的医疗文本的检索方法的流程图。

图2示出了根据本发明实施例的朴素贝叶斯分类的流程图。

图3示出了根据本发明实施例的训练朴素贝叶斯分类器的流程图。

图4示意性示出本公开示例性实施例中一种计算机可读存储介质示意图。

图5示意性示出本公开示例性实施例中一种电子设备示意图。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的实施方式;相反,提供这些实施方式使得本发明将全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的结构,因而将省略对它们的重复描述。

所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本发明的实施方式的充分理解。然而,本领域技术人员应意识到,没有所述特定细节中的一个或更多,或者采用其它的方法、组元、材料等,也可以实践本发明的技术方案。在其它情况下,不详细示出或描述公知结构、材料或者操作以避免模糊本发明。

附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

为了解决现有技术的缺陷,本发明提供一种医疗文本的检索方法、电子设备及存储介质,以优化医疗文本的查询项。

参见图1,本发明提供一种医疗文本的检索方法。图1共示出5个步骤:

s110:获取包含病症描述的文本,将所述文本作为初始查询项。

具体而言,步骤s110还包括对文本进行分词形成初始查询项,在英文分词中采用空格区分,在中文分词中采用结巴(jieba)分词。

s120:利用朴素贝叶斯模型对初始查询项进行分类,分类结果包括查询项缩减和查询项扩展。

具体而言,所述步骤s120的具体实现可以参见图2,图2共示出2个步骤:

s121:对所述初始查询项进行向量化获得所述初始查询项的词向量。

在一个优选例中,所述步骤s121基于共现矩阵的词向量模型对所述初始查询项进行向量化获得所述初始查询项的词向量。

具体而言,查询文本是以句子形式存在,每个句子包含n个查询词,如以下公式所示:(w1,w2,…wi…wn)∈s1,每个查询词都通过向量word2vec的方法训练把每一段落取出来,每个词都通过哈夫曼树对应的路径和编码。编码是(0和1),作为神经网络的输出,每个路径初始化一个给定维数的向量,跟自己段落中的每个词作为输入,进行反向的迭代,最终获得50维的矩阵,调用过程如下:每个词都对应哈夫曼树的一个叶节点,根据w1属于哈夫曼树的层次确定节点对应的编码,最终化为50维的矩阵。

s122:将初始查询项的词向量作为所述朴素贝叶斯模型的输入。

具体而言,朴素贝叶斯模型是监督模型,其具有训练过程和测试过程,利用语义映射工具打好标签,采用以下公式进行训练:计算特征词wi属于每个类别cj的概率其中,|d|表示类的文档数,|v|表示特征词表中的总单词数,表示特征词wi出现在类文档中的次数,表示类文档中出现的所有特征词的总次数。

训练完毕后:计算测试查询文本属于类的概率,将其分到概率最大的类别中,总共为两个概率,一个为查询扩展,一个为查询缩减,由此分类完成。

其中的,p(ci)为类ci的先验概率,m为特征项数目。而最后类c属于查询缩减和查询扩展。

进一步地,所述朴素贝叶斯模型采用如下如图3所示的步骤进行训练:

s210:将基于医疗文本的情感词典作为所述朴素贝叶斯模型的语料库。

s220:获取语料库中的语料及语料标注。

s230:对所述语料库中的语料进行向量化获得所述语料库中的语料的词向量。

在一个优选例中,所述步骤s230基于共现矩阵的词向量模型对所述语料库中的语料进行向量化获得所述语料库中的语料的词向量。

s240:将所述词向量作为所述朴素贝叶斯模型的输入。

s250:根据将所述语料库中的语料对应的语料标注确定分类结果,并将所述分类结果作为所述朴素贝叶斯模型的输出。

可选地,所述语料标注包括正面词和否定词,若所述语料标注为正面词,则所述分类结果为查询项扩展;若所述语料标注为否定词,则所述分类结果为查询项缩减。

s260:训练所述朴素贝叶斯模型。

s130:保留分类结果为查询项扩展的初始查询项,并作为中间查询项。

s140:利用伪相关反馈对所述中间查询项进行查询扩展,将扩展后的中间查询项作为优化查询项。

利用伪相关反馈执行查询扩展,将这些词语加入到查询中,然后再去匹配查询所返回的文档,最终返回最相关的文档。

具体而言,所述s140包括:将所述中间查询项与一扩展词库中的候选词进行相似度匹配;将相似度最高的n个候选词作为所述中间查询项的扩展。可选地,利用bm25算法计算所述中间查询项与一扩展词库中的候选词的相似度。

进一步地,伪相关反馈时一种自动局部分析方法,在检索过程中,使用termfrequency-inversedocumentfrequency(tf-idf)算法调用过程如下wij=tfij×idfj=tfij×log(n/nj),tj是特征项,tfij指的是tj在文档di中出现的次数;idfj表示逆文档频率,n表示总文档数,nj表示tj的文档数目。在本文中利用该算法思想来提取每个类别下每条故障描述中的关键词。根据每个词对应的特征项tj来计算在文档中出现的次数tfij和逆文档频率idfj,最后计算tf-idf值wij。从这些文档中选择wij值最高的前30名(示意性地,本发明并非以此为限)个的词语。

s150:利用所述优化查询项在医疗文本数据库中进行文本检索。

本发明在trec16数据集上,基于相对于传统查询扩展和对查询项不做处理取得非常好的技术效果,有效提升了查询的相关性,ndcg(normalizeddiscountedcumulativegain,ndcg是文档的检索累积获得,用来衡量排序质量的指标);指标取得最高为0.1628(不做任何处理,其ndcg值为0.1349;采用mesh进行查询扩展,其ndcg值为0.1518;采用knowledge进行查询缩减,其ndcg值为0.1477;采用knowledge+逻辑回归进行查询缩减,其ndcg值为0.1508)。

以上各个实施例的描述仅仅是示意性地,本领域技术人员还可以实现更多的变化例,在不背离本发明构思的前提下,步骤、模块的增加和省略都落入本发明的保护范围之内,在此不予赘述。

在本公开的示例性实施例中,还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被例如处理器执行时可以实现上述任意一个实施例中所述电子处方流转处理方法的步骤。在一些可能的实施方式中,本发明的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。

参考图4所示,描述了根据本发明的实施方式的用于实现上述方法的程序产品800,其可以采用便携式紧凑盘只读存储器(cd-rom)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。

所述计算机可读存储介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读存储介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、rf等等,或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如java、c++等,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在租户计算设备上执行、部分地在租户设备上执行、作为一个独立的软件包执行、部分在租户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(lan)或广域网(wan),连接到租户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

在本公开的示例性实施例中,还提供一种电子设备,该电子设备可以包括处理器,以及用于存储所述处理器的可执行指令的存储器。其中,所述处理器配置为经由执行所述可执行指令来执行上述任意一个实施例中所述电子处方流转处理方法的步骤。

所属技术领域的技术人员能够理解,本发明的各个方面可以实现为系统、方法或程序产品。因此,本发明的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。

下面参照图5来描述根据本发明的这种实施方式的电子设备600。图5显示的电子设备600仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。

如图5所示,电子设备600以通用计算设备的形式表现。电子设备600的组件可以包括但不限于:至少一个处理单元610、至少一个存储单元620、连接不同系统组件(包括存储单元620和处理单元610)的总线630、显示单元640等。

其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元610执行,使得所述处理单元610执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。例如,所述处理单元610可以执行如图1中所示的步骤。

所述存储单元620可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(ram)6201和/或高速缓存存储单元6202,还可以进一步包括只读存储单元(rom)6203。

所述存储单元620还可以包括具有一组(至少一个)程序模块6205的程序/实用工具6204,这样的程序模块6205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线630可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备600也可以与一个或多个外部设备700(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得租户能与该电子设备600交互的设备通信,和/或与使得该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口650进行。并且,电子设备600还可以通过网络适配器660与一个或者多个网络(例如局域网(lan),广域网(wan)和/或公共网络,例如因特网)通信。网络适配器660可以通过总线630与电子设备600的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备600使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。

通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、或者网络设备等)执行根据本公开实施方式的上述电子处方流转处理方法。

相比现有技术,本发明的优势在于:本发明利用朴素贝叶斯模型对初始查询项进行分类,以对初始查询项进行缩减获得中间查询项,并对中间查询项进行扩展以获得优化查询项。由此,本发明增加了对数据本身的分析,提高最终的检索效果。在检索过程中,查询词不再仅仅基于查询扩展,而有了缩减和扩展的结果优化,有效地提升了检索结果的相关性。

本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由所附的权利要求指出。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1