一种基于增强现实的远程诊疗及时交互方法及系统与流程

本发明涉及智慧医疗，特别是涉及一种基于增强现实的远程诊疗及时交互方法及系统。

背景技术：

1、随着信息技术的快速发展，远程医疗服务已经成为提高医疗资源分配效率，解决偏远地区医疗服务不足的重要手段。现有的远程诊疗系统多依赖于视频通话、电子病历共享等方式，但这些方法在提供即时交互和精确指导方面存在局限性，特别是在手术指导、疾病诊断等需要高度精确和专业交互的场景中，这些限制尤为明显。

技术实现思路

1、为了克服现有技术的不足，本发明的目的是提供一种基于增强现实的远程诊疗及时交互方法及系统。

2、为实现上述目的，本发明提供了如下方案：

3、一种基于增强现实的远程诊疗及时交互方法，包括：

4、构建增强现实远程诊疗平台；所述增强现实远程诊疗平台包括相互连接的终端设备和中央处理系统；所述终端设备配备有摄像头、显示器、增强现实眼镜和体征采集模块；

5、分别利用所述摄像头和所述体征采集模块采集目标患者的图像信息和医疗信息；

6、分别对所述图像信息和所述医疗信息进行预处理，得到预处理后的图像信息和医疗信息；

7、将所述预处理后的图像信息和医疗信息发送至所述中央处理系统，以利用所述中央处理系统对所述预处理后的图像信息和医疗信息进行格式转换，得到增强现实眼镜可读的图像数据和医疗数据；

8、基于所述增强现实眼镜，在增强现实环境中根据所述图像数据和医疗数据构建所述目标患者的三维医疗模型；所述增强现实眼镜用于将所述三维医疗模型和相关体征数据发送给远程终端的医生；所述远程终端的医生通过增强现实眼镜直接在三维模型上进行标注、提供诊断意见或手术指导；所作的标注、诊断意见和手术指导实时传送至所述显示器上。

9、优选地，所述医疗信息包括：血压、血氧饱和度、脉搏率、体温、心电图数据、呼吸频率和血糖水平。

10、优选地，所述体征采集模块包括：血压计、脉搏血氧仪、体温计、心电测量电极、呼吸率监测器和血糖仪。

11、优选地，分别对所述图像信息和所述医疗信息进行预处理，得到预处理后的图像信息和医疗信息，包括：

12、基于小波去噪方法，对所述图像信息进行滤波，得到滤波数据；

13、根据所述滤波数据的尺度大小构建移动移动图像增强窗口；

14、获取所述滤波数据中每个移动移动图像增强窗口下的占比值；

15、当所述移动图像增强窗口内的占比值大于预设阈值时，对相应移动图像增强窗口内的所述滤波数据进行中值去噪，得到去噪数据；

16、滑动所述移动图像增强窗口，直到遍历完整个所述去噪数据，得到所述预处理后的图像信息；

17、对所述医疗信息进行数据清洗、标准化和格式转换，得到所述预处理后的医疗信息。

18、优选地，获取所述滤波数据中每个移动移动图像增强窗口下的占比值，包括：

19、根据公式fij＝|xij-yij|得到每个图像增强窗口下的每个像素点的像素差值；其中，fij表示滤波数据在(i，j)位置的像素差值，xij表示原始的历史遥感图像在(i，j)位置处的像素值，yij表示滤波数据在(i，j)位置处的像素值；

20、将像素差值大于特征阈值的像素点作为特征点并记录数量；

21、将所述图像增强窗口下特征点占所有像素点的比例作为占比值。

22、优选地，当所述移动图像增强窗口内的占比值大于预设阈值时，对相应移动图像增强窗口内的所述滤波数据进行中值去噪，得到去噪数据，包括：

23、采用公式对相应图像增强窗口内的滤波数据进行中值去噪得到所述去噪数据；其中，f(a,b)表示像素点(a，b)在中值去噪后的像素值，d为可调参数，x(a,b)表示像素点(a，b)在图像增强窗口内的像素值，mean(a,b)表示图像增强窗口的像素中值，σx(a,b)表示图像增强窗口内像素值的方差。

24、优选地，利用所述中央处理系统对所述预处理后的图像信息和医疗信息进行格式转换，得到增强现实眼镜可读的图像数据和医疗数据，包括：

25、将所述图像信息和所述医疗信息按照增强现实眼镜的数据接口要求进行编码转换和标准化处理，得到所述图像数据和所述医疗数据。

26、优选地，基于所述增强现实眼镜，在增强现实环境中根据所述图像数据和医疗数据构建所述目标患者的三维医疗模型，包括：

27、使用图像处理软件将所述图像数据堆叠重建为三维模型；

28、对所述三维模型进行平滑和细化处理，得到处理后的三维模型；

29、将所述医疗数据与所述处理后的三维模型相关联，得到标注有所述医疗数据的所述三维医疗模型。

30、优选地，使用图像处理软件将所述图像数据堆叠重建为三维模型，包括：

31、根据所述图像数据构建患者模型库和医疗数据信息库；

32、基于dynamo可视化编程和revit参数化建模方法，根据所述患者模型库和所述医疗数据信息库建立可视化的所述三维模型。

33、一种基于增强现实的远程诊疗及时交互系统，包括：

34、平台构建模块，用于构建增强现实远程诊疗平台；所述增强现实远程诊疗平台包括相互连接的终端设备和中央处理系统；所述终端设备配备有摄像头、显示器、增强现实眼镜和体征采集模块；

35、信息采集模块，用于分别利用所述摄像头和所述体征采集模块采集目标患者的图像信息和医疗信息；

36、预处理模块，用于分别对所述图像信息和所述医疗信息进行预处理，得到预处理后的图像信息和医疗信息；

37、信息处理模块，用于将所述预处理后的图像信息和医疗信息发送至所述中央处理系统，以利用所述中央处理系统对所述预处理后的图像信息和医疗信息进行格式转换，得到增强现实眼镜可读的图像数据和医疗数据；

38、交互模块，用于基于所述增强现实眼镜，在增强现实环境中根据所述图像数据和医疗数据构建所述目标患者的三维医疗模型；所述增强现实眼镜用于将所述三维医疗模型和相关体征数据发送给远程终端的医生；所述远程终端的医生通过增强现实眼镜直接在三维模型上进行标注、提供诊断意见或手术指导；所作的标注、诊断意见和手术指导实时传送至所述显示器上。

39、根据本发明提供的具体实施例，本发明公开了以下技术效果：

40、本发明提供了一种基于增强现实的远程诊疗及时交互方法及系统，方法包括：构建增强现实远程诊疗平台；所述增强现实远程诊疗平台包括相互连接的终端设备和中央处理系统；所述终端设备配备有摄像头、显示器、增强现实眼镜和体征采集模块；分别利用所述摄像头和所述体征采集模块采集目标患者的图像信息和医疗信息；分别对所述图像信息和所述医疗信息进行预处理，得到预处理后的图像信息和医疗信息；将所述预处理后的图像信息和医疗信息发送至所述中央处理系统，以利用所述中央处理系统对所述预处理后的图像信息和医疗信息进行格式转换，得到增强现实眼镜可读的图像数据和医疗数据；基于所述增强现实眼镜，在增强现实环境中根据所述图像数据和医疗数据构建所述目标患者的三维医疗模型；所述增强现实眼镜用于将所述三维医疗模型和相关体征数据发送给远程终端的医生；所述远程终端的医生通过增强现实眼镜直接在三维模型上进行标注、提供诊断意见或手术指导；所作的标注、诊断意见和手术指导实时传送至所述显示器上。本发明的远程诊疗及时交互方法及系统通过增强现实技术，提高了远程医疗服务的交互精确度和效率，特别适用于需要精细操作的医疗场景，如手术指导、复杂疾病的诊断等。此外，本发明还能提高偏远地区患者获取专业医疗服务的机会，促进医疗资源的均衡分配。