医学影像的表现生成系统、其训练方法及表现生成方法与流程

本发明涉及计算机领域，尤指一种医学影像的表现生成系统、其训练方法及表现生成方法。

背景技术：

为了提高疾病诊断的准确率，出现了各种用于表现人体影像的技术，例如核磁共振、电子计算机断层扫描(computedtomography,ct)、x光扫描和b超(b-scanultrasonography)扫描等，使得通过这些技术可以精确地获得一些关键信息，从而提高疾病确诊的准确率。然而，随着每年的医学影像数据的大幅度增加，读片医师的工作也变得异常繁重，并且由于每年的医学影像数据的增长量远远超过影像科医生的增长量，使得每名读片医师每天要读取近千张医学影像，超负荷的工作使得对疾病误诊的几率大大增加。

技术实现要素：

本发明实施例提供一种医学影像的表现生成系统、其训练方法及表现生成方法，用以提高对医学影像的读片速度和信息读取的准确率，降低误诊的几率。

本发明实施例提供了一种医学影像的表现生成系统，包括：医学影像获取单元、卷积神经网络单元、循环神经网络单元和表现输出单元；其中，

所述医学影像获取单元，用于获取二维的医学影像；

所述卷积神经网络单元，用于提取所述医学影像的图像特征，并将所述图像特征转换成图像特征向量后输出至预先建立的第一向量空间；

所述循环神经网络单元，用于根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与所述图像特征向量对应的语义特征向量并输出；

所述表现输出单元，用于将与所述图像特征向量匹配的语义特征向量转换成对应的自然语言并输出。

在一种可能的实施方式中，在本发明实施例提供的上述表现生成系统中，所述循环神经网络单元，具体用于在确定所述第一向量空间中与所述图像特征向量位置相同或相近的预先建立的图像特征向量后，根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，将确定出的与预先建立的图像特征向量对应的语义特征向量，确定为所述图像特征向量对应的语义特征向量，并根据预设的各语义特征向量的输出顺序，将确定出的各所述语义特征向量依次输出。

在一种可能的实施方式中，在本发明实施例提供的上述表现生成系统中，所述表现输出单元为解码器。

在一种可能的实施方式中，在本发明实施例提供的上述表现生成系统中，还包括：预处理单元，用于对获取到的所述医学影像进行缩放裁剪处理、颜色增强处理和/或复制处理，并输出至所述卷积神经网络单元。

本发明实施例还提供了一种如本发明实施例提供的上述表现生成系统的表现生成方法，包括：

获取二维的医学影像；

提取所述医学影像的图像特征，并将所述图像特征转换成图像特征向量后输出至预先建立的第一向量空间；

根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与所述图像特征向量对应的语义特征向量并输出；

将与所述图像特征向量匹配的语义特征向量转换成对应的自然语言并输出。

在一种可能的实施方式中，在本发明实施例提供的上述表现生成方法中，所述根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与所述图像特征向量对应的语义特征向量并输出，具体包括：

在确定所述第一向量空间中与所述图像特征向量位置相同或相近的预先建立的图像特征向量后，根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，将确定出的与预先建立的图像特征向量对应的语义特征向量，确定为所述图像特征向量对应的语义特征向量，并根据预设的各语义特征向量的输出顺序，将确定出的各所述语义特征向量依次输出。

在一种可能的实施方式中，在本发明实施例提供的上述表现生成方法中，还包括：

对获取到的所述医学影像进行缩放裁剪处理、颜色增强处理和/或复制处理。

本发明实施例还提供了一种如本发明实施例提供的上述表现生成系统的训练方法，包括：

对所述表现生成系统输入多个二维的医学影像和包含有与所述医学影像匹配的语义特征的表现文档；

所述表现生成系统对输入的所述医学影像进行预处理后，提取所述医学影像的图像特征，生成对应的图像特征向量，并输出至预先建立的第一向量空间；

所述表现生成系统对输入的所述表现文档进行预处理后，提取所述表现文档的语义特征，生成对应的语义特征向量，并输出至预先建立的第二向量空间；

所述表现生成系统根据各所述图像特征向量和匹配的各语义特征向量，调整各所述图像特征向量和匹配的各语义特征向量之间的映射参数，以确定各所述图像特征向量和匹配的各语义特征向量之间的对应关系。

在一种可能的实施方式中，在本发明实施例提供的上述训练方法中，所述表现生成系统对输入的所述医学影像进行预处理，具体包括以下处理方式中的一种或多种：

所述表现生成系统对输入的所述医学影像进行缩放裁剪处理；

所述表现生成系统对输入的所述医学影像进行颜色增强处理；

所述表现生成系统对输入的所述医学影像进行复制处理。

在一种可能的实施方式中，在本发明实施例提供的上述训练方法中，所述表现生成系统对输入的所述表现文档进行预处理，具体包括：

所述表现生成系统对输入的所述表现文档进行分词处理。

在一种可能的实施方式中，在本发明实施例提供的上述训练方法中，所述表现生成系统根据各所述图像特征向量和匹配的各语义特征向量，调整各所述图像特征向量和匹配的各语义特征向量之间的映射参数，具体包括：

所述表现生成系统根据匹配的各语义特征向量和采用上一次调整后的映射参数确定出的各语义特征向量之间的损失度，调整各所述图像特征向量和匹配的各语义特征向量之间的映射参数，直至匹配的各语义特征向量和采用本次调整后的映射参数确定出的各语义特征向量之间的损失度属于预设范围为止。

在一种可能的实施方式中，在本发明实施例提供的上述训练方法中，所述根据匹配的各语义特征向量和采用上一次调整后的映射参数确定出的各语义特征向量之间的损失度，具体包括：

根据如下公式计算出的匹配的各语义特征向量s和采用上一次调整后的映射参数确定出的各语义特征向量y之间的损失度l(s,y)：

其中，n表示所述表现生成系统中循环神经网络单元包括的子单元的数量，yt表示第t个子单元采用上一次调整后的映射参数确定出的语义特征向量，st表示所述图像特征向量匹配的第t个语义特征向量，rnn(st＝yt)表示所述图像特征向量匹配的第t个语义特征向量st和所述第t个子单元采用上一次调整后的映射参数确定出的语义特征向量yt相同，i表示各所述图像特征向量，cnn(i)表示各所述图像特征向量的集合。

本发明有益效果如下：

本发明实施例提供的一种医学影像的表现生成系统、其训练方法及表现生成方法，该表现生成系统包括：医学影像获取单元、卷积神经网络单元、循环神经网络单元和表现输出单元；其中，在医学影像获取单元获取到二维的医学影像后，卷积神经网络单元则提取医学影像的图像特征，并将图像特征转换成图像特征向量后输出至预先建立的第一向量空间；接着，循环神经网络单元会根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量并输出；最后，表现输出单元将与图像特征向量匹配的语义特征向量转换成对应的自然语言并输出，最终将医学影像转换成对应的自然语言，便于医生对疾病的诊断；因此，该表现生成系统基于深度学习技术，并结合了卷积神经网络技术和循环神经网络技术，使得对医学影像的读取和分析变得简单和容易，在提高了读片的效率的同时，还提高了读片的质量，大大地降低了误诊的几率。

附图说明

图1和图2分别为本发明实施例中提供的一种医学影像的表现生成系统的结构示意图；

图3为本发明实施例中提供的一种循环神经网络单元的结构示意图；

图4为本发明实施例中提供的一种医学影像的表现生成系统的表现生成方法的流程图；

图5为本发明实施例中提供的一种医学影像的表现生成系统的训练方法的流程图。

具体实施方式

下面将结合附图，对本发明实施例提供的一种医学影像的表现生成系统、其训练方法及表现生成方法的具体实施方式进行详细地说明。需要说明的是，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例提供的一种医学影像的表现生成系统，仅仅适用于对二维的医学影像的处理，例如x光片，而对于三维的医学影像的处理在本发明中并不适用；因此，下面就主要针对本发明实施例提供的一种医学影像的表现生成系统对二维的医学影像的处理进行详细描述。

本发明实施例提供了一种医学影像的表现生成系统，如图1所示，可以包括：医学影像获取单元101、卷积神经网络单元102、循环神经网络单元103和表现输出单元104；其中，

医学影像获取单元101，用于获取二维的医学影像；

卷积神经网络单元102，用于提取医学影像的图像特征，并将图像特征转换成图像特征向量后输出至预先建立的第一向量空间；

循环神经网络单元103，用于根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量并输出；

表现输出单元104，用于将与图像特征向量匹配的语义特征向量转换成对应的自然语言并输出。

本发明实施例提供的上述表现生成系统，是基于深度学习技术，结合了卷积神经网络技术和循环神经网络技术，使得通过该表现生成系统可以自动地将二维的医学影像转换成对应的自然语言，以便于医生对疾病的进一步诊断，使得对医学影像的读取和分析变得简单和容易，在提高了读片的效率的同时，还提高了读片的质量，大大地降低了误诊的几率。

在具体实施时，为了使不同医院设备得到的医学影像的质量统一，提高本发明实施例提供的上述表现生成系统对质量较差的医学影像的识别精度，需要对医学影像进行预处理，以便于表现生成系统的处理；因此，在本发明实施例提供的上述表现生成系统中，如图2所示，还可以包括：预处理单元105，用于对获取到的医学影像进行缩放裁剪处理、颜色增强处理和/或复制处理，并输出至卷积神经网络单元102。

具体地，对获取到的医学影像进行的预处理过程，又可以称为扩充处理，对识别性能和泛化能力都有着非常重要的作用；此外，在进行预处理时，可以对获取到的医学影像进行缩放裁剪处理、颜色增强处理和复制处理中的一种或多种，当然并不限于上述三种处理方式，还可以是其他的处理方式，只要可以使获取到的医学影像在进行处理后，满足表现生成系统对医学影像的质量要求即可，在此不作限定。

进一步地，在本发明实施例提供的上述表现生成系统中，对获取到的医学影像进行的颜色增强处理，可以包括色彩的饱和度处理、亮度和对比度的处理等，只要能够使颜色增强处理后的医学影像，满足表现生成系统对医学影像的质量要求即可，并不限于上述处理方式。

进一步地，在本发明实施例提供的上述表现生成系统中，对获取到的医学影像进行的复制处理，主要是由于医疗数据的高度不平衡，因此需要使用复制处理等方式将特殊症状的案例数量增多，以提高医学影像读取的准确性。

当然，当获取到的二维的医学影像满足表现生成系统的图像质量要求时，则无需再对获取到的医学影像进行预处理，可以将医学影像获取单元101获取到的医学影像直接输入至卷积神经网络单元102即可，在此不作限定。

一般地，在向量空间中，具有相似意义的两个向量在向量空间中的位置非常相近，相应地，在预先建立的第一向量空间中，相似的两个图像特征所对应的向量在向量空间中的位置同样会非常相近，所以，可以根据这一特点，首先在预先建立的第一向量空间中，寻找与图像特征向量位置相同或相近的预先建立的图像特征向量，然后根据预先建立的图像特征向量与第二向量空间中的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量；因此，在本发明实施例提供的上述表现生成系统中，循环神经网络单元103，具体用于在确定第一向量空间中与图像特征向量位置相同或相近的预先建立的图像特征向量后，根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，将确定出的与预先建立的图像特征向量对应的语义特征向量，确定为图像特征向量对应的语义特征向量，并根据预设的各语义特征向量的输出顺序，将确定出的各语义特征向量依次输出。

具体地，预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，是在本发明实施例提供的上述表现生成系统建立完成之后，采用大量的数据进行训练学习之后确定的(具体的训练过程会在下面的描述中作详细介绍)，因此，可以保证经过本发明实施例提供的上述表现生成系统处理得到的与医学影像对应的自然语言信息是比较准确的，可以作为医生在诊断病情时的有益参考。

具体地，在本发明实施例提供的上述表现生成系统中，在根据预设的各语义特征向量的输出顺序，将确定出的各语义特征向量依次输出时，预设的各语义特征向量的输出顺序，一般是根据读片医师在人工读取医学影像时常采用的描述顺序而确定的，但并不限于此，还可以是特定的顺序，以便于医生更好的理解，在此不作限定。

具体地，在本发明实施例提供的上述表现生成系统中，循环神经网络单元103在根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量并输出时，循环神经网络单元103内部的结构采用现有技术中的结构设置，如图3所示，循环神经网络单元103包括多个级联的子单元，因一个子单元只能输出一个语义特征向量，因此子单元的设置数量一般是在对表现生成系统训练过程中，根据用于训练的语义特征向量的个数而设定的，当然，设置的子单元数量可以大于或等于用于训练的语义特征向量的个数；同时，每个子单元不仅输入时序的各语义特征向量301(如图3中所示的虚线)，还输入各图像特征向量302(如图3中所示的实线)。

进一步地，如图3所示，第一级子单元303在接收到预设的起始符向量304后，开始工作，根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，以及预设的各语义特征向量的输出顺序，将确定出的语义特征向量中的第一个语义特征向量305输出；同时，第一级子单元303不仅将输出的第一个语义特征向量305传递至第二级子单元306，还将处理结果传递给至第二级子单元306；第二级子单元306在接收到第一级子单元303传递的信息后，将确定出的第二个语义特征向量307输出；同时，第二级子单元306将输出的第二个语义特征向量307传递至第三级子单元308，还将处理结果传递给至第三级子单元308；以此类推，直至第n-1级子单元309将确定出的第n-1个语义特征向量310输出，第n-1级子单元309同样地将第n-1个语义特征向量310和处理结果传递给至第n级子单元311，此时，第n级子单元311输出预设的终止符向量312，表示语义特征向量确定结束；当然，除第一级子单元303之外，每级子单元还可以将本级处理的结果传递至上一级子单元,在此不作限定。

在具体实施时，在本发明实施例提供的上述表现生成系统中，表现输出单元104为解码器，负责将循环神经网络单元103输出的各语义特征向量转换成对应的自然语言，而一个语义特征向量可以对应一个词，还可以对应一个短语，将转换后的自然语言组合便得到了医学影像的分析结果，可以大大提高医学影像读取和分析的效率。

基于同一发明构思，本发明实施例还提供了一种如本发明实施例提供的上述表现生成系统的表现生成方法，由于该表现生成方法解决问题的原理与前述一种医学影像的表现生成系统相似，故该方法的实施可以参见前述系统的实施，重复之处不在赘述。

具体地，本发明实施例提供的上述表现生成方法，如图4所示，可以包括：

s401、获取二维的医学影像；

s402、提取医学影像的图像特征，并将图像特征转换成图像特征向量后输出至预先建立的第一向量空间；

s403、根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量并输出；

s404、将与图像特征向量匹配的语义特征向量转换成对应的自然语言并输出。

本发明实施例提供的上述表现生成方法，是基于深度学习技术，并结合了卷积神经网络技术和循环神经网络技术，使得通过该表现生成方法可以自动地将二维的医学影像转换成对应的自然语言，以便于医生对疾病的进一步诊断，使得对医学影像的读取和分析变得简单和容易，在提高了读片的效率的同时，还提高了读片的质量，大大地降低了误诊的几率。

在具体实施时，为了确定与图像特征向量对应的语义特征向量并输出，在本发明实施例提供的上述表现生成方法中的步骤s403根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量并输出，可以具体包括：

在确定第一向量空间中与图像特征向量位置相同或相近的预先建立的图像特征向量后，根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，将确定出的与预先建立的图像特征向量对应的语义特征向量，确定为图像特征向量对应的语义特征向量，并根据预设的各语义特征向量的输出顺序，将确定出的各语义特征向量依次输出。

在具体实施时，在本发明实施例提供的上述表现生成方法中，还可以包括：对获取到的医学影像进行缩放裁剪处理、颜色增强处理和/或复制处理。

基于同一发明构思，本发明实施例还提供了一种如本发明实施例提供的上述表现生成系统的训练方法，如图5所示，可以包括：

s501、对表现生成系统输入多个二维的医学影像；

s502、表现生成系统对输入的医学影像进行预处理后，提取医学影像的图像特征，生成对应的图像特征向量，并输出至预先建立的第一向量空间；执行步骤s505；

s503、对表现生成系统输入包含有与医学影像匹配的语义特征的表现文档；

s504、表现生成系统对输入的表现文档进行预处理后，提取表现文档的语义特征，生成对应的语义特征向量，并输出至预先建立的第二向量空间；

s505、表现生成系统根据各图像特征向量和匹配的各语义特征向量，调整各图像特征向量和匹配的各语义特征向量之间的映射参数，以确定各图像特征向量和匹配的各语义特征向量之间的对应关系。

在具体实施时，为了便于表现生成系统对获取的医学影像进行处理，在本发明实施例提供的上述训练方法中的步骤s502表现生成系统对输入的医学影像进行预处理，可以具体包括以下处理方式中的一种或多种：

表现生成系统对输入的医学影像进行缩放裁剪处理；

表现生成系统对输入的医学影像进行颜色增强处理；

表现生成系统对输入的医学影像进行复制处理。

具体地，在对输入的医学影像进行预处理之后，将医学影像输出至表现生成系统中的卷积神经网络单元，以使卷积神经网络单元对预处理后的医学影像进行图像特征提取，并将提取的图像特征转换成对应的图像特征向量，并输出至预先建立的第一向量空间中，以便于循环神经网络单元确定与图像特征向量匹配的语义特征向量。

进一步地，可以采用现有的卷积神经网络(convolutionalneuralnetwork,cnn)模型对卷积神经网络单元进行训练，例如初始残差网络(inception-resnet)或谷歌网络结构(googlenetv3)等最新的cnn模型；还可以根据其工作原理自行搭建cnn网络进行训练；此外，在卷积神经网络单元的训练过程中，cnn网络的初始参数可以设置为imagenet等已标注图像数据库的训练好的参数，以使表现生成系统正常的工作。

在具体实施时，为了能够获取到输入的表现文档中的各语义特征，需要对表现文档进行预处理；因此，在本发明实施例提供的上述训练方法中的步骤s503表现生成系统对输入的表现文档进行预处理，可以具体包括：

表现生成系统对输入的表现文档进行分词处理。

具体地，因不同医生对相似的医学影像有着不同的表述和解读，为了确保最后生成的自然语言的一致性，在对表述文档进行分词处理后，提取各语义特征，并转换成对应的语义特征向量，输出至预先建立的第二向量空间；在这一步骤的训练过程中，可以采用词嵌入(wordembedding)的方式将医学术语与表述的语义特征转换成向量，使得具有相似意义的语义特征向量在第二向量空间中的位置相近。

在具体实施时，在本发明实施例提供的上述训练方法中的步骤s504表现生成系统根据各图像特征向量和匹配的各语义特征向量，调整各图像特征向量和匹配的各语义特征向量之间的映射参数，可以具体包括：

表现生成系统根据匹配的各语义特征向量和采用上一次调整后的映射参数确定出的各语义特征向量之间的损失度，调整各图像特征向量和匹配的各语义特征向量之间的映射参数，直至匹配的各语义特征向量和采用本次调整后的映射参数确定出的各语义特征向量之间的损失度属于预设范围为止。

具体地，为了确定匹配的各语义特征向量和采用上一次调整后的映射参数确定出的各语义特征向量之间的损失度，在本发明实施例提供的上述训练方法中，可以具体包括：

根据如下公式计算出的匹配的各语义特征向量s和采用上一次调整后的映射参数确定出的各语义特征向量y之间的损失度l(s,y)：

其中，n表示表现生成系统中循环神经网络单元包括的子单元的数量，yt表示第t个子单元采用上一次调整后的映射参数确定出的语义特征向量，st表示图像特征向量匹配的第t个语义特征向量，rnn(st＝yt)表示图像特征向量匹配的第t个语义特征向量st和第t个子单元采用上一次调整后的映射参数确定出的语义特征向量yt相同，i表示各图像特征向量，cnn(i)表示各图像特征向量的集合。

具体地，在计算匹配的各语义特征向量s和采用上一次调整后的映射参数确定出的各语义特征向量y之间的损失度l(s,y)时，采用的公式为损失函数公式，当然上述公式只是损失函数中的一种，且在计算时并不限于只是使用上述损失函数公式来计算损失度l(s,y)，在此不作限定；并且，上述损失函数可以作为对表现生成系统的训练结果的评判标准，当计算得到的损失度l(s,y)越小，表明对表现生成系统的训练就越好，利用该训练后的表现生成系统，在对医学影像进行处理后得到的自然语言也就越准确。

具体地，在对表现生成系统中的循环神经网络单元进行训练时，可以采用现有技术中的循环神经网络(recurrentneuralnetwork,rnn)模型中适合自然语言生成的模型进行训练，例如时间递归神经网络(longshort-termmemory,lstm)和栅循环单元(gatedrecurrentunit,gru)等；当然，还可以在现有技术上根据表现生成系统的需要进行搭建和改进，只要能够使表现生成系统完成对医学影像的读取即可，在此不作限定。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

本发明实施例提供了一种医学影像的表现生成系统、其训练方法及表现生成方法，该表现生成系统包括：医学影像获取单元、卷积神经网络单元、循环神经网络单元和表现输出单元；其中，在医学影像获取单元获取到二维的医学影像后，卷积神经网络单元则提取医学影像的图像特征，并将图像特征转换成图像特征向量后输出至预先建立的第一向量空间；接着，循环神经网络单元会根据预先建立的第一向量空间中包含的图像特征向量与第二向量空间中包含的匹配的语义特征向量之间的对应关系，确定与图像特征向量对应的语义特征向量并输出；最后，表现输出单元将与图像特征向量匹配的语义特征向量转换成对应的自然语言并输出，最终将医学影像转换成对应的自然语言，便于医生对疾病的诊断；因此，该表现生成系统基于深度学习技术，并结合了卷积神经网络技术和循环神经网络技术，使得对医学影像的读取和分析变得简单和容易，在提高了读片的效率的同时，还提高了读片的质量，大大地降低了误诊的几率。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。