医学辅助图像的处理方法、装置、电子设备及存储介质与流程

本发明涉及图像处理技术领域，具体涉及一种医学辅助图像的处理方法、装置、电子设备及存储介质。

背景技术：

对于医学解剖教学或者临床诊断时，首先需要准确地、详细地了解人体解剖结构，而后才能够进行相应的处理。其中，如何准确地确定解剖结构是能够做出适当处理的前提，例如：一名患者被刀扎伤腹部，首先需要弄清楚腹部哪些血管出血、伤及到哪些器官等。目前，医学生在临床实习时，只能参考人体解剖学图谱等进行学习，在实际应用中，很难准确地了解病变情况，对于有经验的医生来说，通常也只能根据观察凭借经验等估计伤口情况，从而可能影响对伤口做出的准确处理。

技术实现要素：

基于现有技术中存在的问题，本发明实施例公开了一种医学辅助图像的处理方法、装置、电子设备及存储介质。

第一方面，本发明实施例中提供了一种医学辅助图像的处理方法，包括：获取人体的局部图像；根据所述人体的局部图像，在预设的人体解剖学模型中匹配与所述人体的局部图像对应的目标区域；将所述人体的局部图像与所述人体解剖学模型中的目标区域进行映射，并以第一透明度在所述人体解剖学模型和人体的局部图像中的一个上显示所述人体解剖学模型和人体的局部图像中的另一个。

进一步地，所述人体解剖学模型包括人体解剖学图谱或者人体解剖学三维模型。

进一步地，所述根据所述人体的局部图像，在预设的人体解剖学模型中匹配与所述人体的局部图像对应的目标区域，包括：

识别所述人体的局部图像和所述人体解剖学模型的关键点；

匹配所述人体的局部图像中的关键点与所述人体解剖学模型中目标区域中对应的关键点。

进一步地，所述将所述人体的局部图像与所述人体解剖学模型中的目标区域进行映射，并以第一透明度在所述人体解剖学模型和人体的局部图像中的一个上显示所述人体解剖学模型和人体的局部图像中的另一个，包括：

根据匹配的关键点，将所述人体的局部图像覆盖所述人体解剖学模型的目标区域，并以第一透明度显示所述人体的局部图像；或者，

根据匹配的关键点，将所述人体解剖学模型的目标区域对应所述人体的局部图像，并将所述人体解剖学模型覆盖所述人体的局部图像，以及以第一透明度显示所述人体解剖学模型。

进一步地，还包括：

接收透明度调节指令，所述透明度调节指令包括目标透明度；

根据所述目标透明度确定所述第一透明度。

进一步地，所述人体的局部图像包括人体的局部照片、人体的实时动态影像以及人体的结构、组织的照片或影像学资料。

进一步地，还包括：获取所述人体解剖学模型。

第二方面，本发明实施例中提供了一种医学辅助图像的处理装置，包括：

获取模块，用于获取人体的局部图像；

匹配模块，用于根据所述人体的局部图像，在预设的人体解剖学模型中匹配与所述人体的局部图像对应的目标区域；

医学辅助图像显示模块，用于将所述人体的局部图像与所述人体解剖学模型中的目标区域进行映射，并以第一透明度在所述人体解剖学模型和人体的局部图像中的一个上显示所述人体解剖学模型和人体的局部图像中的另一个。

第三方面，本发明实施例中还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的医学辅助图像的处理方法。

第四方面，本发明实施例中还提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如第一方面所述的医学辅助图像的处理方法。

由上述技术方案可知，本发明实施例的医学辅助图像的处理方法、装置、电子设备及存储介质，不仅可以帮助在校医学生更好地学习解剖学，而且在临床上可以使医师等简单方便地判断出患者可能病变的结构，比如脑、肌肉、血管、神经等，从而为医师提供可靠的辅助治疗帮助。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一个实施例的医学辅助图像的处理方法的流程图；

图2是本发明一个实施例的医学辅助图像的处理方法中腹部刀扎伤的人体的局部图像的示意图；

图3是本发明一个实施例的医学辅助图像的处理方法的人体解剖学图谱的示意图；

图4是本发明一个实施例的医学辅助图像的处理方法中将人体解剖学图谱中匹配的目标区域映射到腹部刀扎伤的人体的局部图像以后，以设定的第一透明度在人体解剖学图谱中显示腹部刀扎伤的人体的局部彩色图像的示意图；

图5是本发明一个实施例的医学辅助图像的处理方法中腹部的血管dsa图像的示意图；

图6是本发明另一个实施例的医学辅助图像的处理方法的人体解剖学图谱的示意图；

图7是本发明一个实施例的医学辅助图像的处理方法中将腹部的血管dsa图像映射在人体解剖学图谱中匹配的目标区域以后，以设定的第一透明度在人体解剖学图谱中显示腹部的血管dsa图像的示意图；

图8是本发明一个实施例的医学辅助图像的处理装置的结构框图；

图9是本发明一个实施例的电子设备的结构示意图。

具体实施方式

下面结合附图，对本发明的具体实施方式作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案，而不能以此来限制本发明的保护范围。

以下结合附图描述根据本发明实施例的医学辅助图像的处理方法、装置、电子设备及存储介质。

图1示出了本发明一个实施例的医学辅助图像的处理方法的流程图，如图1所示，根据本发明一个实施例的医学辅助图像的处理方法，具体包括如下内容：

s101：获取人体的局部图像。

其中，人体的局部图像例如包括人体的局部照片、人体的实时动态影像以及人体的结构、组织的照片或影像学资料，其中，人体的结构、组织的影像学资料可以是dsa(digitalsubtractionangiography)图像，其包括但不限于脑、肝脏、心脏、血管dsa图像等。所谓的局部是人体上的某个部位，如：头部、颈部、胸部、腹部、背部、臀部、上肢、手、下肢、足部等。

人体的局部图像及人体的实时动态影像可以通过如移动终端的摄像头采集得到，人体的结构、组织的照片或影像学资料可以通过摄像头采集或临床影像学检查获得。

s102：根据人体的局部图像，在预设的人体解剖学模型中匹配与人体的局部图像对应的目标区域。

作为一个具体的示例，例如：首先识别所述人体的局部图像和所述人体解剖学模型的关键点；然后匹配所述人体的局部图像中的关键点与所述人体解剖学模型中目标区域中对应的关键点。

具体而言，可以通过图像识别技术，对人体的局部图像进行人体局部区域的识别，例如：识别的人体局部区域为一个矩形框围绕的区域。识别出人体局部区域后，确定该区域的体表解剖结构关键点，将这些关键点与人体解剖学模型的对应的目标区域的关键点进行匹配，以从人体解剖学模型中匹配出与人体局部区域对应的区域，该区域作为人体解剖学模型中的目标区域。

在以上描述中，人体解剖学模型包括但不限于：人体解剖学图谱或者人体解剖学三维模型。另外，预设的人体解剖学模型可以预先得到，例如：获取人体解剖学模型并运存上，人体解剖学模型可以是从服务器中预先下载得到。

s103：将人体的局部图像与人体解剖学模型中的目标区域进行映射，并以第一透明度在人体解剖学模型和人体的局部图像中的一个上显示所述人体解剖学模型和人体的局部图像中的另一个。

作为一个具体的示例，将人体解剖学模型的目标区域覆盖人体的局部图像，并以第一透明度显示人体的局部图像。其中，第一透明度可以预先设定，当然，也可以根据需求进行透明度的调整，例如：该方法还包括接收透明度调节指令，透明度调节指令包括目标透明度；根据目标透明度确定第一透明度。当然，也可以将人体的局部图像覆盖人体解剖学模型的目标区域。

也就是说，根据匹配的关键点，将人体的局部图像覆盖所述人体解剖学模型的目标区域，并以第一透明度显示所述人体的局部图像；或者，根据匹配的关键点，将人体解剖学模型的目标区域对应所述人体的局部图像，并将所述人体解剖学模型覆盖所述人体的局部图像，以及以第一透明度显示所述人体解剖学模型。

其中，目标透明度可以在完全透明至完全不透明之间选择，可以理解的是，目标透明度设置的越高，则在显示效果上越透明，反之，目标透明度设置的越低，则在显示效果上越不透明。

例如：人体的局部图像被设置为半透明，则在显示效果上，显示人体解剖学模型的同时，覆盖在人体解剖学模型的目标区域上可以同时显示人体的局部图像，两者之间可以进行对比参考。

根据本发明实施例的医学辅助图像的处理方法，可以在医学解剖教学、临床上进行应用。

在一个实施例中，如图2、图3和图4所示，其中，图2为腹部刀扎伤的人体的局部彩色图像，图3为一个人体解剖学图谱的示意图，图4为人体解剖学图谱中匹配的目标区域映射到腹部刀扎伤的人体的局部图像以后，以设定的第一透明度在人体解剖学图谱中显示腹部刀扎伤的人体的局部图像的示意图。从图4中可以看出，一名患者被刀扎伤腹部，腹部某根血管出血，能够清晰地看出患者可能被扎伤了哪些内脏及血管结构，从而为医学解剖教学或者临床诊断提供依据。如果一名患者被扎伤的部位是医师比较少接诊的类型，则通过本发明实施例的方法，可以简单方便地判断可能伤及的肌肉、血管、神经，从而为医师提供辅助的临床决策。

在另一个实施例中，如图5、图6和图7所示，其中，图5是腹部的血管dsa图像，图6是另一个人体解剖学图谱的示意图，图7为将腹部的血管dsa图像映射在人体解剖学图谱中匹配的目标区域以后，以设定的第一透明度在人体解剖学图谱中显示腹部的血管dsa图像的示意图。从图7中可以清晰地看出患者可能被扎伤了哪些血管结构，从而为医学解剖教学或者临床诊断提供依据。

应用本发明实施例的方法，可以直接用摄像头对准人体结构，屏幕呈现的是解剖结构，当然，可以选择呈现的组织，比如，选择呈现“肌肉”，则屏幕出现的是肌肉，即：摄像头对准人体，屏幕呈现局部的肌肉组织，或选择“血管”，则摄像头呈现血管结构。

根据本发明实施例的医学辅助图像的处理方法，不仅可以帮助在校医学生更好地学习解剖学，而且在临床上可以使医师等简单方便地判断出患者可能病变的结构，比如脑、肌肉、血管、神经等，从而为医师提供可靠的辅助治疗帮助。

图8是根据本发明一个实施例的医学辅助图像的处理装置的结构框图。如图8所示，根据本发明一个实施例的医学辅助图像的处理装置，包括：获取模块810、匹配模块820以及医学辅助图像显示模块830。

其中，获取模块810用于获取人体的局部图像。匹配模块820用于根据所述人体的局部图像，在预设的人体解剖学模型中匹配与所述人体的局部图像对应的目标区域。医学辅助图像显示模块830用于将所述人体的局部图像与所述人体解剖学模型中的目标区域进行映射，并以第一透明度在所述人体解剖学模型和人体的局部图像中的一个上显示所述人体解剖学模型和人体的局部图像中的另一个。

根据本发明实施例的医学辅助图像的处理装置，不仅可以帮助在校医学生更好地学习解剖学，而且在临床上可以使医师等简单方便地判断出患者可能病变的结构，比如脑、肌肉、血管、神经等，从而为医师提供可靠的辅助治疗帮助。

需要说明的是，本发明实施例的医学辅助图像的处理装置的具体实现方式与本发明实施例的医学辅助图像的处理方法的具体实现方式类似，具体请参见方法部分的描述，为了减少冗余，具体此处不做赘述。

基于相同的发明构思，本发明又一个实施例中提供了一种电子设备，参见图9，所述电子设备具体包括如下内容：处理器901、存储器902、通信接口903和通信总线904；

其中，所述处理器901、存储器902、通信接口903通过所述通信总线904完成相互间的通信；所述通信接口903用于实现各设备之间的信息传输；

所述处理器901用于调用所述存储器902中的计算机程序，所述处理器执行所述计算机程序时实现上述医学辅助图像的处理方法的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：获取人体的局部图像；根据所述人体的局部图像，在预设的人体解剖学模型中匹配与所述人体的局部图像中的人体局部区域对应的目标区域；将所述人体的局部图像映射在所述目标区域中，并以第一透明度在所述人体解剖学模型中显示所述人体的局部图像。

基于相同的发明构思，本发明又一实施例提供了一种非暂态计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述医学辅助图像的处理方法的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：获取人体的局部图像；根据所述人体的局部图像，在预设的人体解剖学模型中匹配与所述人体的局部图像中的人体局部区域对应的目标区域；将所述人体的局部图像映射在所述目标区域中，并以第一透明度在所述人体解剖学模型中显示所述人体的局部图像。

此外，上述的存储器中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所描述的装置实施例仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明实施例的方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例的或者实施例的某些部分所述的指标监控方法。

此外，在本发明中，诸如“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

此外，在本发明中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

此外，在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。