一种基于多模态知识图谱的护理决策支持方法及系统与流程

本发明涉及护理方法，尤其涉及一种基于多模态知识图谱的护理决策支持方法及系统。

背景技术：

1、随着人口老龄化和慢性疾病的增加，护理领域面临着巨大的挑战。传统护理方法往往依赖于常规化流程和经验，缺乏个性化和精准性。而精准护理正是基于个体化的理念，旨在提供更安全、有效和质量更高的护理服务，而准确且专业的护理知识是实现精准护理的关键因素。但是目前护理领域缺乏一个规范有效的知识管理平台，在对患者的护理期间主要还是采用老带新的“师徒”方式，在关键的护理决策过程中强依赖于人工的经验知识，此外临床护理涉及多学科团队的协作，不畅的沟通可能导致信息传递不准确，决策延迟等问题。

2、因此，亟需一种新型护理方法，为护理人员提供准确可靠的护理知识指导和支持。

技术实现思路

1、本发明提供一种基于多模态知识图谱的护理决策支持方法及系统，用以解决现有护理方法效率低下、决策准确性有待提高的缺陷。

2、本发明提供一种用于护理的多模态知识图谱的构建方法，包括：

3、获取多模态护理数据，多模态护理数据包括以下其中两个或以上：文本数据、图像数据、视频数据、音频数据；

4、根据多模态护理数据进行护理知识抽取，得到各模态的护理知识三元组；

5、根据护理实体、护理关系、护理事件，进行多模态护理知识融合和护理知识表达，得到用于护理的多模态知识图谱。

6、根据本发明提供的一种用于护理的多模态知识图谱的构建方法，所述根据多模态护理数据进行护理知识抽取，得到各模态的护理知识三元组，包括：

7、通过文本语义提取模型对文本数据进行文本语义提取，得到文本数据的知识三元组；

8、通过视觉语义提取模型对图像数据进行视觉语义提取，得到图像数据的知识三元组。

9、根据本发明提供的一种用于护理的多模态知识图谱的构建方法，所述根据护理知识三元组，进行多模态护理知识融合和护理知识表达，包括：

10、通过语义相似度算法得到不同模态的知识三元组之间的相似度；

11、当不同模态的知识三元组之间的相似度满足预设条件时，对知识三元组进行多模态护理知识融合。

12、根据本发明提供的一种用于护理的多模态知识图谱的构建方法，护理实体的类型包括以下任一种或其任意组合：疾病名称、症状名称、药物名称、治疗方法、医疗设备、护理计划、护理措施、健康状况指标、患者信息、护理记录、护理知识和指南、护理教育资源。

13、根据本发明提供的一种用于护理的多模态知识图谱的构建方法，护理关系包括以下任一种或其任意组合：belongs_to(属于)、cure_way(疾病治疗方法)、acompany_with(并发症)、common_drug(疾病常用药品)、do_eat(疾病宜吃食物)、drugs_of(疾病对应的药房药品)、has_assessment(患者的护理评估)、has_disease(患者患病)、has_measures(护理措施)、has_nurse(疾病对应的护理技术)、has_operation(护理技术操作流程)、has_picture(图像资料)、has_problem(护理问题)、has_profile(护理档案)、has_symptom(疾病症状)、has_video(视频资料)、need_check(疾病所需检查)、no_eat(疾病忌吃食物)、recommand_drug(疾病推荐药品)、recommand_eat(疾病推荐食谱)。

14、根据本发明提供的一种用于护理的多模态知识图谱的构建方法，从医院信息系统、健康记录、实验室结果、影像资料、临床数据库、护理培训库、互联网数据中的一个或多个获取多模态护理数据。

15、根据本发明提供的一种用于护理的多模态知识图谱的构建方法，还包括：

16、通过图数据库管理系统存储和展示用于护理的多模态知识图谱。

17、根据本发明提供的一种用于护理的多模态知识图谱的构建系统，包括：

18、数据获取模块，用于：获取多模态护理数据，多模态护理数据包括以下其中两个或以上：文本数据、图像数据、视频数据、音频数据；

19、知识抽取模块，用于：根据多模态护理数据进行护理知识抽取，得到各模态的护理知识三元组；

20、知识图谱构建模块，用于：根据护理知识三元组，进行多模态护理知识融合和护理知识表达，得到用于护理的多模态知识图谱。

21、根据本发明提供的一种基于多模态知识图谱的护理决策支持方法，包括：

22、根据上述任一项所述的用于护理的多模态知识图谱的构建方法构建的多模态知识图谱；

23、根据用户输入的护理查询指令，根据多模态知识图谱，向用户反馈相应的护理知识；或，根据用户输入的护理问题信息，根据多模态知识图谱，向用户反馈护理建议信息。

24、在一个具体实施方案中，所述护理问题可以是与患者相关的护理事件，所述护理建议信息可以是与所述护理事件相关的护理计划和/或护理措施。

25、在一个具体实施方案中，所述护理查询指令可以包含关键词、代码、数字、文本文件、音频文件、视频文件等中的一个或其任意组合。

26、根据本发明提供的一种基于多模态知识图谱的护理决策支持方法，还包括：对患者的多模态护理数据进行保密处理。

27、根据本发明提供的一种基于多模态知识图谱的护理决策支持方法，还包括：

28、根据护理知识三元组的头护理实体的科室标签，对护理知识三元组进行分层；

29、利用聚类算法对分层后的护理知识三元组进行聚类，得到每层不同分区的护理知识三元组；

30、获取外部护理知识三元组；

31、根据聚类结果，比较外部护理知识三元组与护理知识三元组在护理实体维度、护理关系维度以及护理事件维度上的相似度；

32、对外部护理知识三元组与护理知识三元组在护理实体维度、护理关系维度以及护理事件维度上的相似度进行加权平均处理，得到相似度比较结果；

33、当相似度比较结果大于预设阈值时，将外部护理知识三元组与护理知识三元组进行知识融合。

34、本发明还提供一种基于多模态知识图谱的护理决策支持系统，包括：

35、多模态知识图谱构建模块，用于：根据上述任一项所述的用于护理的多模态知识图谱的构建方法构建多模态知识图谱；

36、护理知识搜索模块，用于：根据用户输入的护理查询指令，根据多模态知识图谱，向用户反馈相应的护理知识；

37、护理问答模块，用于：根据用户输入的护理问题信息，根据多模态知识图谱，向用户反馈护理建议信息。

38、本发明还提供一种电子设备，包括处理器和存储有计算机程序的存储器，其特征在于，所述处理器执行所述计算机程序时实现上述任一项所述的用于护理的多模态知识图谱的构建方法，或者所述处理器执行所述程序时实现上述任一项所述的基于多模态知识图谱的护理决策支持方法。

39、本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述任一项所述的用于护理的多模态知识图谱的构建方法，或者所述处理器执行所述程序时实现上述任一项所述的基于多模态知识图谱的护理决策支持方法。

40、本发明还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在非暂态计算机可读存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述任一项所述的用于护理的多模态知识图谱的构建方法，或者计算机能够执行所述程序时实现上述任一项所述的基于多模态知识图谱的护理决策支持方法。

41、本发明提供的一种基于多模态知识图谱的护理决策支持方法及系统，通过获取不同模态的护理数据进行护理知识抽取、多模态护理知识融合以及护理知识表达，构建出专用于护理领域的全面的多模态知识图谱，能够为护理人员提供可靠的数据指导和支持，提高护理决策效率和质量，减少不必要的医疗资源浪费，进而为患者提供个性化、精准的护理服务，以适应社会的需求。