CT/MR三维图像分割处理方法、装置、设备及介质与流程

本发明涉及图像技术领域，尤其涉及一种ct/mr三维图像分割处理方法、装置、设备及介质。

背景技术：

目前，常常通过图像块裁切-遍历-拼接的分割方法，才能完成对ct/mr三维图像的ct/mr区域的检测，该ct/mr三维图像指的是ct/mr扫描图像，基于图像块裁切-遍历-拼接的分割方法，每次只能裁切并处理ct/mr三维图像的一个小块图像，然后移动一段有重合的空间跨度后才能获取并进行下一个小块图像的处理，即是在一个小块图像处理完后，需要以一定重叠率滑动步长裁切并处理ct/mr三维图像的下一个小块图像，最后基于众多子小块图像的分割结果，用预测概率平均、先二值化再投票等方式得到ct/mr三维图像的分割结果。

由于现有技术中，在一个小块图像处理完后，需要以一定重叠率滑动步长裁切并处理ct/mr三维图像的下一个小块图像，因而造成很大一部分ct/mr三维图像的重复计算，上述重复计算减慢了ct/mr三维图像的处理速度，不满足大批量三维数据的快速处理需求；由于图形处理设备的存储空间限制，基于图像块的分割处理方式在训练和测试阶段无法处理体积较大的图像块，因此网络模型的深度和感受野大小不能满足分割大体积目标的需求；而且，基于图像块的处理方式不能排除在未观测到完整目标的情况下给出的预测，在这种情况下预测容易出现错误。因此，这类方法对ct/mr三维图像的处理精度也存在缺陷，难以满足市场对ct/mr三维图像的处理需求。

技术实现要素：

本发明的主要目的在于提供一种ct/mr三维图像分割处理方法、装置、设备及介质，旨在解决现有技术中对ct/mr三维图像的处理精度以及处理速度低，难以满足市场需求的技术问题。

为实现上述目的，本发明提供一种ct/mr三维图像分割处理方法，所述ct/mr三维图像分割处理方法包括：

获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；

通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。

可选地，所述通过预存的检测分割一体化的三维神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理步骤包括：

通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域；

通过预存的检测分割一体化的三维神经网络模型中的分割子网络模型，对所述一个或者多个感兴趣区域进行分割，得到分割概率图，对所述分割概率图进行二值化处理，得到分割掩模。

可选地，所述通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域步骤包括：

对所述最优临界包围盒进行裁切处理，得到裁切图像块；

将所述裁切图像块输入至所述检测子网络模型中，以根据预设层次对所述裁切图像块进行全局特征的多尺度特征编码操作，得到尺度层次不同的、且空间分辨率逐级降低的多个特征张量；

对空间分辨率最低的末端特征张量进行预设卷积处理与预设非线性激活函数处理，得到对应于末端特征张量的分割预测概率图；

对所述分割预测概率图进行二值化处理、连通性分析和碎片排除，得到所述最优临界包围盒对应的一个或者多个感兴趣区域，以及所述一个或者多个感兴趣区域的初始集合，每个感兴趣区域定义为包含分割目标的一个长方体形状空间区域，长方体形状空间区域表达为感兴趣区域的起点坐标及边长；

根据所述尺度层次不同的、且空间分辨率不同的多个特征张量，对所述起点坐标和边长进行相应不同预设倍率换算，构建各个感兴趣区域的感兴趣区域金字塔，每个金字塔包含各个尺度层次对应的感兴趣区域。

可选地，所述将所述裁切图像块输入至所述检测子网络模型中，以根据预设层次对所述裁切图像块进行多尺度特征编码操作步骤包括：

将所述裁切图像块输入至所述检测子网络模型中，对所述裁切图像块进行预设次数的的以残差处理以及预设倍数最大池化处理为单位的重复交替处理；

其中，所述残差处理包括对所述裁切图像块对应的输入张量进行批归一化处理与卷积处理交替的非线性变换处理，得到输出张量后，再连接所述输入张量与所述输出张量处理过程。

可选地，所述通过预存的检测分割一体化的三维神经网络模型中的分割子网络模型，对所述一个或者多个感兴趣区域进行分割，得到分割概率图，对所述分割概率图进行二值化处理，得到分割掩模步骤包括：

基于所检测到的感兴趣区域及所述感兴趣区域金字塔，裁切感兴趣区域金字塔中的特征张量，得到感兴趣区域张量金字塔；

通过所述分割子网络模型，对所述感兴趣区域张量金字塔中的最高层次的局部特征张量进行预设次数的上采样处理与特征融合处理，其中，每进行一次预设倍数上采样处理后，得到的上采样后特征张量与同一张量金字塔中上一层次的局部特征张量，将上采样后特征张量与同一张量金字塔中上一层次的局部特征张量作为融合前局部特征张量；

将所述融合前局部张量数据输入至残差块中进行张量融合处理，得到融合局部特征张量，再对该融合张量进行下一次的上采样与残差处理，最终得到各个感兴趣区域在初始尺度下的局部分割概率图；

根据所述感兴趣区域金字塔初始尺度层次下的起始坐标和边长，将所述各个局部分割概率图对应覆盖到预设初值为全零的预设完整分割概率图上，最后得到所述最优临界包围盒对应标记所需目标区域的分割标签；

基于所述分割标签，对各个分割概率图进行二值化处理，得到分割掩模。

可选地，所述通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理步骤包括：

通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，其中，所述检测分割一体化的三维卷积神经网络模型训练过程中中使用预设损失函数。

本发明还提供一种ct/mr三维图像分割处理装置，所述ct/mr三维图像分割处理装置包括：

第一获取模块，用于获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；

检测分割模块，用于通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。

可选地，所述检测分割模块包括：

检测单元，用于通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域；

分割单元，用于通过预存的检测分割一体化的三维神经网络模型中的分割子网络模型，对所述一个或者多个感兴趣区域进行分割，得到分割概率图，对所述分割概率图进行二值化处理，得到分割掩模。

此外，为实现上述目的，本发明还提供一种ct/mr三维图像分割处理设备，所述ct/mr三维图像分割处理设备包括：存储器、处理器，通信总线以及存储在所述存储器上的ct/mr三维图像分割处理程序，

所述通信总线用于实现处理器与存储器间的通信连接；

所述处理器用于执行所述ct/mr三维图像分割处理程序，以实现以下步骤：

获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；

通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。

此外，为实现上述目的，本发明还提供一种介质，该介质一般为可读存储介质，所述介质存储有一个或者一个以上程序，所述一个或者一个以上程序可被一个或者一个以上的处理器执行以用于：

获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；

通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。

本发明通过获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。即在本申请中，由于对ct/mr三维图像进行重采样处理，得到最优临界包围盒，并对最优临界包围盒进行检测分割处理而不需要对整个的ct/mr三维图像进行重复检测以及分割处理，因而，加快了ct/mr三维图像的处理速度，其中，最优临界包围盒尺寸小于该ct/mr三维图像，另外，在本申请中，还通过检测分割一体化的三维卷积神经网络模型对所述最优临界包围盒进行检测分割处理，该三维卷积神经网络模型包括残差块，该残差块中包括批归一化层以及卷积层交替的交替结构以及跳跃连接层，由于残差块上述交替结构以及跳跃连接层的存在，在图像处理过程中，不会丢失图像浅层特征，因而能够获得精度更高的ct/mr三维图像的处理结果，因而，在本申请中，解决现有技术中对ct/mr三维图像的处理精度以及处理速度低，难以满足市场需求的技术问题。

附图说明

图1为本发明ct/mr三维图像分割处理方法第一实施例的流程示意图；

图2为本发明通过预存的检测分割一体化的三维神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理步骤步骤的细化流程示意图；

图3是本发明实施例方法涉及的硬件运行环境的设备结构示意图；

图4是本发明实施例方法涉及的检测-分割一体化模型及残差块构造的示意图；

图5是本发明实施例方法涉及的场景示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明提供一种ct/mr三维图像分割处理方法，在本发明ct/mr三维图像分割处理方法的第一实施例中，参照图1，所述ct/mr三维图像分割处理方法包括：

步骤s10，获取电子计算机断层ctct/mr三维图像或者磁共振mrct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设尺寸的图像块，并使用大津法前景分割与最大联通块提取获取所述图像块对应的最优临界包围盒；

步骤s20，通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的第一分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层以及卷积层交替的交替结构，所述残差块中还包括跳跃连接层。

具体步骤如下：

步骤s10，获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；

需要说明的是，在本实施例中，ct/mr三维图像是通过核磁共振等方式给ct/mr检测者扫描得到的三维图像，在获取得到ct/mr三维图像后，不再是通过图像块裁切-遍历-拼接的分割方法进行ct/mr三维图像的处理，而是先对ct/mr三维图像进行重采样处理，再通过最优临界包围盒的获取，对该最优临界包围盒进行检测分割处理即可，其中，在得到最优临界包围盒后，可以一次性实现最优临界包围盒整图的处理。

具体地，在获取ct/mr三维图像后，对所述ct/mr三维图像进行重采样处理，重采样过程需要将采样间隔不同的数据的采样率统一起来，在本实施例中，通过三维线性插值法将x、y、z轴采样率统一为某一预设采样率。在对所述ct/mr三维图像进行重采样后，得到采样率固定、尺寸随采样率的修正而相应变化的图像块，如在对大尺寸(z轴上边长大于4mm，在x轴上边长大于1mm，在y轴上边长大于1mm)的ct/mr三维图像进行重采样后：可以得到长方体形状的三维图像块，该长方体形状的三维图像块在z轴上每个像素对应的z轴实际长度为4mm，x轴实际长度为1mm，在y轴上实际长度为1mm，需要说明的是，以上参数仅是常用参数的举例。该大尺寸的ct/mr三维图像根据另一预设目标采样间隔进行重采样后，也可以得到长方体形状的三维图像块，该长方体形状的三维图像块在z轴上边长为4mm，在x轴上边长为1.5mm，在y轴上边长为1.5mm，具体根据重采样的具体采样率确定，该具体采样率可以通过设置确定，在本实施例中，由于能够得到包含ct/mr三维图像的特征信息的该预设尺寸的图像块，因而能够一次性实现最优临界包围盒整图的处理。

需要说明的是，在得到图像块后，先使用大津法(自适应阈值最大类间方差法)区分图像块上对应人体图像区域和人体之外的空气区域，其中，自适应阈值最大类间方差法，是将所述图像块按照灰度特征分成图像和背景两类，以提取不同特征信息，以区分人体图像区域和人体之外的空气区域，在区分人体图像区域和人体之外的空气区域后，裁切所述空气区域，只得到所述人体图像区域，提取该人体图像区域中的连通域，并提取该人体图像区域中的最大连通域(摒除了其它小体积的连通域)，该连通域的提取属于现有技术，在此不做具体说明，在提取该人体图像区域中的最大连通域后，获取所述图像块对应的最优临界包围盒，即是获取所述最大连通域对应的最优临界包围盒，其中，最优临界包围盒指的是恰好能够包围该最大连通域的最小包围盒。

步骤s20，通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。

具体地，检测分割一体化的三维卷积神经网络模型包括检测子网络模型、以及分割子网络模型，需要说明的是，该检测分割一体化的三维卷积神经网络模型中可以包括多个检测子网络模型、以及多个分割子网络模型，以将多个不同网络的输出结果进行融合，以得到准确度更高的结果，在本实施例中，参照图2，所述通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域步骤包括：

步骤s21，通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域；

在本实施例中，先对获取得到的最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域，具体地，通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理。

其中，所述通过预存的检测分割一体化的三维神经网络模型中的检测子网络模型，对所述最优临界包围盒进行检测处理，得到一个或者多个感兴趣区域步骤包括：

步骤s211，对所述最优临界包围盒进行裁切处理，得到裁切图像块；

步骤s212，将所述裁切图像块输入至所述检测子网络模型中，以根据预设层次对所述裁切图像块进行全局特征的多尺度特征编码操作，得到尺度层次不同的、且空间分辨率逐级降低的多个特征张量；

步骤s213，对空间分辨率最低的末端特征张量进行预设卷积处理与预设非线性激活函数处理，得到对应于末端特征张量的分割预测概率图；

步骤s214，对所述分割预测概率图进行二值化处理、连通性分析和碎片排除，得到所述最优临界包围盒对应的一个或者多个感兴趣区域，以及所述一个或者多个感兴趣区域的初始集合，每个感兴趣区域定义为包含分割目标的一个长方体形状空间区域，长方体形状空间区域表达为感兴趣区域的起点坐标及边长；

步骤s215，根据所述尺度层次不同的、且空间分辨率不同的多个特征张量，对所述起点坐标和边长进行相应不同预设倍率换算，构建各个感兴趣区域的感兴趣区域金字塔，每个金字塔包含各个尺度层次对应的感兴趣区域。

对所述最优临界包围盒进行裁切处理，得到裁切图像块，将所述裁切图像块输入至所述检测子网络模型中，以根据预设层次对所述裁切图像块进行全局特征的多尺度特征编码操作，得到尺度层次不同的、且空间分辨率逐级降低的多个特征张量。

以下以预设次数的下采样处理为3次下采样处理为例进行具体说明，也即所述检测子网络模型对所述裁切图像块进行3次的下采样处理，具体地，如图4以及图5所示，将裁切图像块输入至所述检测子网络模型后，以对所述裁切图像块进行由3次下采样处理构成的多尺度特征编码操作，得到多个3个尺度层次、空间分辨率逐级降低的多个全局特征张量，多尺度特征编码操作后所得各特征张量分别称为一级全局特征张量fi、二级全局特征张量fii、三级全局特征张量fiii，并对层次最高、空间分辨率最低的三级特征张量fiii进行1×1×1卷积与非线性激活函数处理，得到对应于三级特征张量fiii的分割预测概率图。

对所述分割预测概率图进行二值化处理，以及连通性分析和碎片排除，得到所述最优临界包围盒对应的一个或者多个感兴趣区域，每个感兴趣区域可以定义为包含分割目标的一个长方体形状空间区域，长方体形状空间区域表达为感兴趣区域的起点坐标及边长，具体表达为一组或多组三级特征空间上的起始坐标和边长，获取感兴趣区域的三级矩形坐标集合和三级边长集合，根据上述多尺度特征编码的各特征张量对应的尺度层次，通过对三级矩形坐标集合和三级边长集合进行与预设下采样倍率相应的倍率换算得到对应于二级全局特征张量fii的二级起始坐标和二级边长、对应于一级特征张量fi的一级起始坐标和一级边长，构成一个或多个感兴趣区域金字塔。

步骤s22，通过预存的检测分割一体化的三维神经网络模型中的分割子网络模型，对所述一个或者多个感兴趣区域进行分割处理。

基于所述感兴趣区域金字塔的各级起始坐标和边长，对各相应尺度的特征张量进行裁切处理，得到所述感兴趣区域集合对应的一级局部特征张量集合fi、二级局部特征张量集合fii、三级局部特征张量集合fiii，构成一个或多个局部特征张量金字塔。

通过所述分割子网络模型，对所述三级局部特征张量集合fiii中各三级局部特征张量进行预设次数的上采样处理与特征融合处理。每进行一次上采样处理后，将每次上采样处理后得到的上采样特征张量与对应层次的局部特征张量进行张量加法处理，并将张量数据输入至残差块中进行张量融合处理，得到融合张量，再对该融合张量进行下一次的上采样与残差块处理，最后得到与输入图像采样率相同的局部分割概率图，并根据相应矩形坐标集合将局部分割概率图覆盖到初值为全零的完整分割概率图上，得到所述最优临界包围盒对应标记所需目标区域的精细分割标签。

通过预存的检测分割一体化的三维神经网络模型中的分割子网络模型，对所述一个或者多个感兴趣区域进行分割处理，在分割处理后，得到所述ct/mr三维图像对应标记所需目标区域的分割标签，其中，所需目标区域一般指的是所述三维神经网络模型能够识别的区域，该所需目标区域根据三维神经网络模型中训练的识别函数关联，分割标签指的是所需目标区域的识别标签。

本发明通过获取电子计算机断层ctct/mr三维图像或者磁共振mrct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设尺寸的图像块，并获取所述图像块对应的最优临界包围盒；通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层以及卷积层交替的交替结构，所述残差块中还包括跳跃连接层。即在本申请中，由于对ct/mr三维图像进行重采样处理，得到最优临界包围盒，并对最优临界包围盒进行检测分割处理而不需要对整个的ct/mr三维图像进行带来大量重复计算和不完整目标分割的滑动窗口式分块采样、预测、拼接处理，且扩大了传统网络模型受到输入图像块大小限制的感受野面积，并避免了对不完整目标的强行预测，因而，本发明不仅加快了ct/mr三维图像的处理速度，而且改善了其分割精度。其中，最优临界包围盒尺寸小于该ct/mr三维图像。另外，在本申请中，还通过检测分割一体化的三维卷积神经网络模型对所述最优临界包围盒进行检测分割处理，该三维卷积神经网络模型包括残差块，该残差块中包括批归一化层以及卷积层交替的交替结构以及跳跃连接层，由于残差块上述交替结构以及跳跃连接层的存在，在图像处理过程中，不会丢失图像浅层特征，因而能够获得精度更高的ct/mr三维图像的处理结果。因而，在本申请中，解决现有技术中对ct/mr三维图像的处理精度以及处理速度难以满足市场需求的技术问题。

进一步地，本发明提供ct/mr三维图像分割处理方法的另一实施例，在该实施例中，所述将所述裁切图像块输入至所述检测子网络模型中，以根据预设层次对所述裁切图像块进行多尺度特征编码操作步骤包括：

将所述裁切图像块输入至所述检测子网络模型中，对所述裁切图像块进行预设次数的的以残差处理以及预设倍数最大池化处理为单位的重复交替处理；

其中，所述残差处理包括对所述裁切图像块对应的输入张量进行批归一化处理与卷积处理交替的非线性变换处理，得到输出张量后，再连接所述输入张量与所述输出张量处理过程。

在本实施例中，多尺度特征编码操作包括残差处理以及预设倍数最大池化处理过程，其中，预设倍数可以为3，最大池化处理指的是获取某一图像矩阵中的最大像素值，将所述最大像素值代替所述该图像矩阵，以得到新的图像矩阵，如3*3*3维的图像矩阵中最大像素值为1，则将1代替所述3*3*3维的图像矩阵，而残差处理包括对所述裁切图像块对应的输入张量进行批归一化处理与卷积处理交替的非线性变换处理过程，其中，批归一化处理技术为现有技术，在此不做具体说明。

所述通过预存的检测分割一体化的三维神经网络模型中的分割子网络模型，对所述一个或者多个感兴趣区域进行分割，得到分割概率图，对所述分割概率图进行二值化处理，得到分割掩模步骤包括：

基于所检测到的感兴趣区域及所述感兴趣区域金字塔，裁切感兴趣区域金字塔中的特征张量，得到感兴趣区域张量金字塔；

通过所述分割子网络模型，对所述感兴趣区域张量金字塔中的最高层次的局部特征张量进行预设次数的上采样处理与特征融合处理，其中，每进行一次预设倍数上采样处理后，得到的上采样后特征张量与同一张量金字塔中上一层次的局部特征张量，将上采样后特征张量与同一张量金字塔中上一层次的局部特征张量作为融合前局部特征张量；

将所述融合前局部张量数据输入至残差块中进行张量融合处理，得到融合局部特征张量，再对该融合张量进行下一次的上采样与残差处理，最终得到各个感兴趣区域在初始尺度下的局部分割概率图；

根据所述感兴趣区域金字塔初始尺度层次下的起始坐标和边长，将所述各个局部分割概率图对应覆盖到预设初值为全零的预设完整分割概率图上，最后得到所述最优临界包围盒对应标记所需目标区域的分割标签；

基于所述分割标签，对各个分割概率图进行二值化处理，得到分割掩模。

在本实施例中，在得到感兴趣区域张量金字塔后，通过所述分割子网络模型，对所述最高层次的局部特征张量进行预设次数的上采样处理，在每次上采样后，得到上采样的特征张量，将得到的上采样的特征张量与同一张量金字塔中上一层次的局部特征张量进行逐元素的加法处理即张量加法处理，在进行张量加法处理处理后，得到融合前局部特征张量，将所述融合前局部特征张量输入至对应残差块中进行数据融合处理，得到融合局部特征张量，再对该融合张量进行下一次的上采样与残差处理，最终得到各个感兴趣区域在初始尺度下的局部分割概率图，根据所述感兴趣区域金字塔初始尺度层次下的起始坐标和边长，将所述各个局部分割概率图对应覆盖到预设初值为全零的预设完整分割概率图上，最后得到所述最优临界包围盒对应标记所需目标区域的分割标签；基于所述分割标签，对各个分割概率图进行二值化处理，得到分割掩模，需要说明的是，逐元素加法不足以融合多层信息，需要用残差块来将对应的信息混合，以最后得到与所述输入图像块采样率相同、尺度相同的目标区域分割结果。

在本实施例中，通过将所述裁切图像块输入至所述检测子网络模型中，对所述裁切图像块进行预设次数的的以残差处理以及预设倍数最大池化处理为单位的重复交替处理；其中，所述残差处理包括对所述裁切图像块对应的输入张量进行批归一化处理与卷积处理交替的非线性变换处理，得到输出张量后，再连接所述输入张量与所述输出张量处理过程。基于所检测到的感兴趣区域及所述感兴趣区域金字塔，裁切感兴趣区域金字塔中的特征张量，得到感兴趣区域张量金字塔；通过所述分割子网络模型，对所述感兴趣区域张量金字塔中的最高层次的局部特征张量进行预设次数的上采样处理与特征融合处理，其中，每进行一次预设倍数上采样处理后，得到的上采样后特征张量与同一张量金字塔中上一层次的局部特征张量，将上采样后特征张量与同一张量金字塔中上一层次的局部特征张量作为融合前局部特征张量；将所述融合前局部张量数据输入至残差块中进行张量融合处理，得到融合局部特征张量，再对该融合张量进行下一次的上采样与残差处理，最终得到各个感兴趣区域在初始尺度下的局部分割概率图；根据所述感兴趣区域金字塔初始尺度层次下的起始坐标和边长，将所述各个局部分割概率图对应覆盖到预设初值为全零的预设完整分割概率图上，最后得到所述最优临界包围盒对应标记所需目标区域的分割标签；基于所述分割标签，对各个分割概率图进行二值化处理，得到分割掩模。因而，避免了图像对应部分浅层特征的丢失，因而，可以提高对应特征图的分辨率，使得图像的分割更为精准。

进一步地，本发明提供ct/mr三维图像分割处理方法的另一实施例，在该实施例中，所述通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理步骤包括：

通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，其中，所述检测分割一体化的三维卷积神经网络模型训练过程中中使用预设损失函数。

在本实施例中，对最优临界包围盒的检测分割过程中均可使用dice损失函数。dice损失函数ld构造如下定义式所示：

其中，p，g为预测标签与实际分割标签，pi包含于p，gi包含于g，ε是一个用于防止除零运算的数值，该数值可以设为0.0001。

在本实施例中，dice损失函数用于分析第一分割标签与实际分割标签的重叠率。dice损失函数通过计算重叠率，避免了常规的逐体素损失计算，目的在于克服前景体素数量在三维空间上往往和背景体素数量存在几个数量级的差别而难以有效训练，故有效克服了正负样本类分布不均衡的问题，使产生的漏检误检大大减少，且由于计算重叠率而非逐体素计算损失，模型学习过程对不准确的边界标注更加鲁棒。

在本实施例中，通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，其中，所述检测分割一体化的三维卷积神经网络模型训练过程中使用预设损失函数。因而，能够减少漏检误检的现象、并提高分割的准确性。

参照图3，图3是本发明实施例方案涉及的硬件运行环境的设备结构示意图。

本发明实施例ct/mr三维图像分割处理设备可以是pc，也可以是智能手机、平板电脑、便携计算机等终端设备。

如图3所示，该ct/mr三维图像分割处理设备可以包括：处理器1001，例如cpu，存储器1005，通信总线1002。其中，通信总线1002用于实现处理器1001和存储器1005之间的连接通信。存储器1005可以是高速ram存储器，也可以是稳定的存储器(non-volatilememory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储设备。

可选地，该ct/mr三维图像分割处理设备还可以包括目标用户接口、网络接口、摄像头、rf(radiofrequency，射频)电路，传感器、音频电路、wifi模块等等。目标用户接口可以包括显示屏(display)、输入单元比如键盘(keyboard)，可选目标用户接口还可以包括标准的有线接口、无线接口。网络接口可选的可以包括标准的有线接口、无线接口(如wi-fi接口)。

本领域技术人员可以理解，图3中示出的ct/mr三维图像分割处理设备结构并不构成对ct/mr三维图像分割处理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图3所示，作为一种计算机介质的存储器1005中可以包括操作系统、网络通信模块以及ct/mr三维图像分割处理程序。操作系统是管理和控制ct/mr三维图像分割处理设备硬件和软件资源的程序，支持ct/mr三维图像分割处理程序以及其它软件和/或程序的运行。网络通信模块用于实现存储器1005内部各组件之间的通信，以及与ct/mr三维图像分割处理设备中其它硬件和软件之间通信。

在图3所示的ct/mr三维图像分割处理设备中，处理器1001用于执行存储器1005中存储的ct/mr三维图像分割处理程序，实现上述任一项所述的ct/mr三维图像分割处理方法的步骤。

本发明ct/mr三维图像分割处理设备具体实施方式与上述ct/mr三维图像分割处理方法各实施例基本相同，在此不再赘述。

本发明还提供一种ct/mr三维图像分割处理装置，所述ct/mr三维图像分割处理装置包括：

第一获取模块，用于获取ct/mr三维图像，对所述ct/mr三维图像进行重采样处理，得到预设采样率的图像块，并获取所述图像块对应的最优临界包围盒；

检测分割模块，用于通过预存的检测分割一体化的三维卷积神经网络模型，对所述最优临界包围盒先后进行检测以及分割处理，以得到所述ct/mr三维图像中标记所需目标区域的分割标签，其中，所述三维卷积神经网络模型包括残差块，所述残差块中包括批归一化层与卷积层多次交替的非线性变换模块，以及与所述非线性变换模块连接的跳跃连接层。

本发明ct/mr三维图像分割处理装置具体实施方式与上述ct/mr三维图像分割处理方法各实施例基本相同，在此不再赘述。

本发明提供了一种介质，所述介质存储有一个或者一个以上程序，所述一个或者一个以上程序还可被一个或者一个以上的处理器执行以用于实现上述任一项所述的ct/mr三维图像分割处理方法的步骤。

本发明介质具体实施方式与上述ct/mr三维图像分割处理方法各实施例基本相同，在此不再赘述。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利处理范围内。