辅助显示方法、装置、设备和存储介质与流程

本技术涉及医学辅助显示，具体涉及一种辅助显示方法、装置、设备和存储介质。

背景技术：

1、目前，随着人工智能(artificial intelligence，ai)技术和混合现实(mixedreality，mr)技术的飞速发展，人工智能和混合现实辅助诊断和手术治疗等技术在医疗领域得到广泛的应用，能够协助医生起到病情诊断及辅助治疗的作用。例如，在手术过程中，医生可以基于人工智能技术和混合现实技术获取医疗信息，从而辅助完成手术。然而，在现有的手术辅助过程中，医生需要将注意力集中于手术对象之上，但是现有的医疗信息辅助展示方式通常是通过某些医疗仪器的至少一块显示屏现实各种医疗信息，医生需要频繁查看多个显示屏中提供的信息控制手术过程，会导致容易出现视觉疲劳，进而严重影响手术效果和安全性。

技术实现思路

1、本技术实施例提供一种辅助显示方法、装置、设备和存储介质，旨在解决现有技术中无法定位物联网配网过程中的异常配网步骤的技术问题。

2、一方面，本技术实施例提供一种辅助显示方法，所述辅助显示方法包括以下步骤：

3、响应针对目标医学影像的辅助显示请求，基于所述目标医学影像对应的对象身份信息遴选所述目标医学影像的关联医学影像；

4、将所述目标医学影像和所述关联医学影像导入预设操作空间，在预设操作空间中对所述目标医学影像和所述关联医学影像进行影像映射，得到关联影像组合；

5、对所述关联影像组合中的目标医学影像和关联医学影像进行影像渲染处理，得到目标影像信息；

6、将所目标影像信息传输到预设投影模块，基于所述预设投影模块的第一位置信息和预定显示区域的第二位置信息计算目标显示区域，向所述目标显示区域投射所述目标影像信息进行显示。

7、在本技术一种可能的实现方式中，所述在预设操作空间中对所述目标医学影像和所述关联医学影像进行影像映射，得到关联影像组合，包括：

8、获取所述预设操作空间中目标医学影像的第一特征标识，以及所述预设操作空间中关联医学影像的第二特征标识；

9、根据所述第一特征标识和所述第二特征标识将所述关联医学影像和所述目标医学影像进行影像映射，得到关联影像组合。

10、在本技术一种可能的实现方式中，所述对所述关联影像组合中的目标医学影像和关联医学影像进行影像渲染处理，得到目标影像信息，包括：

11、获取所述目标医学影像中待渲染的目标影像区域，以及所述目标影像区域的影像区域位置；

12、基于影像区域位置提取所述关联影像组合中与所述目标影像区域关联的关联影像信息；

13、基于所述关联影像信息对所述目标影像区域进行影像渲染操作，得到目标影像信息，所述影像渲染操作至少包括联动操作、叠加操作、整合操作和重建操作中任意一种或多种。

14、在本技术一种可能的实现方式中，所述基于所述关联影像信息对所述目标影像区域进行影像渲染操作，得到目标影像信息，包括：

15、若所述目标医学影像的影像类型为造影影像类型，则提取所述关联影像信息中与所述目标影像区域对应的目标血管区域的斑块病灶信息；

16、基于所述目标血管区域将所述斑块病灶信息叠加到所述目标影像区域，生成包含所述斑块病灶信息的目标影像信息。

17、在本技术一种可能的实现方式中，所述基于所述关联影像信息对所述目标影像区域进行影像渲染操作，得到目标影像信息，包括：

18、若所述目标医学影像的影像类型为二维截面影像，则提取所述关联影像信息中与所述目标医学影像中目标病变区域关联的三维截面影像；

19、将所述目标医学影像叠加到所述三维截面影像，得到初始叠加影像；

20、获取述初始叠加影像中目标医学影像的影像叠加位置，若所述影像叠加位置与所述目标病变区域的病变中心位置相同，则将所述初始叠加影像设置为目标影像信息。

21、在本技术一种可能的实现方式中，所述基于所述目标医学影像对应的对象身份信息遴选所述目标医学影像的关联医学影像，包括：

22、调用预设拍摄模块采集所述目标医学影像对应的对象身份信息；

23、获取所述身份标识信息关联的候选医学影像，基于所述目标医学影像对候选医学影像进行遴选，得到与所述目标医学影像关联的关联医学影像。

24、在本技术一种可能的实现方式中，所述将所目标影像信息传输到预设投影模块，基于所述预设投影模块的第一位置信息和预定显示区域的第二位置信息计算目标显示区域，向所述目标显示区域投射所述目标影像信息进行显示，包括：

25、获取所述预设投影模块的第一位置信息，以及所述预定显示区域的第二位置信息；

26、根据所述第一位置信息和所述第二位置信息计算所述预设投影模块和所述预定显示区域的相对位置关系；

27、基于所述相对位置关系确定所述目标影像信息的目标显示区域，向所述目标显示区域投射所述目标影像信息进行显示。

28、另一方面，本技术提供一种辅助显示装置，所述辅助显示装置包括：

29、影像遴选模块，被配置为响应针对目标医学影像的辅助显示请求，基于所述目标医学影像对应的对象身份信息遴选所述目标医学影像的关联医学影像；

30、影像关联模块，被配置为将所述目标医学影像和所述关联医学影像导入预设操作空间，在预设操作空间中对所述目标医学影像和所述关联医学影像进行影像映射，得到关联影像组合；

31、影像增强模块，被配置为对所述关联影像组合中的目标医学影像和关联医学影像进行影像渲染处理，得到目标影像信息；

32、影像投射模块，被配置为将所目标影像信息传输到预设投影模块，基于所述预设投影模块的第一位置信息和预定显示区域的第二位置信息计算目标显示区域，向所述目标显示区域投射所述目标影像信息进行显示。

33、另一方面，本技术还提供一种辅助显示设备，所述辅助显示设备包括：

34、一个或多个处理器；

35、存储器；以及

36、一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现所述的辅助显示方法的步骤。

37、另一方面，本技术还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行所述的辅助显示方法中的步骤。

38、本技术中通过响应针对目标医学影像的辅助显示请求，基于所述目标医学影像对应的对象身份信息遴选所述目标医学影像的关联医学影像；将所述目标医学影像和所述关联医学影像导入预设操作空间，在预设操作空间中对所述目标医学影像和所述关联医学影像进行影像映射，得到关联影像组合；对所述关联影像组合中的目标医学影像和关联医学影像进行影像渲染处理，得到目标影像信息；将所目标影像信息传输到预设投影模块，基于所述预设投影模块的第一位置信息和预定显示区域的第二位置信息计算目标显示区域，向所述目标显示区域投射所述目标影像信息进行显示。实现在使用超声扫描等辅助扫描设备扫描并查看医学影像时，能够基于目标影像对应的对象身份信息获取目标医学影像关联的关联医学影像，并将关联医学影像和正在显示的目标医学影像导入同一预设操作空间，从而在同一预设操作空间中对目标医学影像和关联医学影像进行影像渲染处理，得到目标影像信息，并通过该预设投影模块将该目标影像信息投射到目标显示区域进行投射，从而使得医生在通过预设投影模块观看目标显示区域时，能够看到包含丰富影像信息的渲染影像，从而在不干扰医生操作流程的前提下，为医生提供更加充实的医学影像信息，提高辅助诊断效果及诊断效率。