一种反恐数据全局知识图谱构建及系统实现的方法

本发明属于大数据分析，具体涉及一种反恐数据全局知识图谱构建及系统实现的方法。

背景技术：

1、知识图谱，也称作知识域可视化或知识领域映射地图，是显示知识发展进程与结构关系的一系列各种不同的图形，用可视化技术描述知识资源及其载体，挖掘、分析、构建、绘制和显示知识及它们之间的相互关系。知识图谱是三元组的集合，其中三元组的形式是(主语，谓词，宾语)，主语和宾语是实体，谓词是关系。每个三元组(例如(姓名，出生地，檀香山))表示一个事实。知识图谱可以应用于许多场景，比如在信息推荐系统中基于知识图谱进行信息推荐，或是在文本分类过程中基于知识图谱进行分类等，是当前各行各业处理各类数据的一种新兴的、重要的智能方法。知识图谱分为通用知识图谱和领域知识图谱，其中领域知识图谱汇集了一个领域内的专业知识，通过领域知识图谱，可以构建出一个领域内处理特定问题的智能系统。反恐数据全局知识图谱是一种由马里兰全球反恐数据库与自定义数据库库融合优化，结合知识图谱补全技术进行补全，所构建的一个领域知识图谱。不同于其他领域知识图谱，反恐数据知识图谱更为复杂，具体来讲，结构复杂，不同反恐数据间存在潜在关联，信息隐藏度高，有效信息提取难、精准度低。

2、相关技术中，现有的依据反恐数据知识图谱建立反恐数据全局知识图谱在补全和应用方面缺少相应的方法，导致反恐数据知识图谱精确度低，判断速度慢，难以满足当前的使用需求。

技术实现思路

1、有鉴于此，本发明的目的在于克服现有技术的不足，提供一种反恐数据全局知识图谱构建及系统实现的方法，以解决现有技术中反恐数据知识图谱精确度低、判断速度慢，难以满足当前的使用需求的问题。

2、为实现以上目的，本发明采用如下技术方案：一种反恐数据全局知识图谱构建及系统实现的方法，包括：

3、利用基于反恐数据库中的数据源，基于预设实体词抽取所述数据源，得到与所述实体词相关的三元组；

4、利用所述三元组融合所述反恐数据库与自定义数据库建立全局数据库，利用所述全局数据库得到全局知识图谱，并基于所述全局知识图谱提取资源描述框架三元组；

5、将所述资源描述框架三元组嵌入语义空间，并基于所述语义空间建立训练集，利用所述训练集对深度学习网络进行训练，得到多任务联合学习模型；所述多任务联合学习模型用于识别资源描述框架三元组；

6、将待识别词向量空间输入所述多任务联合学习模型，得到新的资源描述框架三元组，将新的资源描述框架三元组补入所述全局知识图谱中。

7、进一步的，所述数据源包括：

8、结构化数据、半结构化数据和非结构化数据。

9、进一步的，所述基于预设实体词抽取所述数据源，包括：

10、对于结构化数据，采用d2r方法从所述结构化数据抽取知识或使用图映射的方法从链接数据抽取知识；

11、对于半结构化数据，则使用包装器从所述半结构化数据中抽取知识；

12、对于非结构化数据，则使用信息抽取的方法从自由文本中抽取知识。

13、进一步的，基于所述全局知识图谱提取资源描述框架三元组，包括：

14、计算全局数据库中的实体字符串的汉明距离；

15、根据所述汉明距离相似度，筛选出所述反恐数据库与自定义数据库匹配的实体对，并构建实体间的等价映射；

16、根据筛选出的实体对，基于反恐全局数据库进行广度优先搜索，获得与筛选出的实体对相关的实体；

17、依据获得的实体，提取资源描述框架三元组。

18、进一步的，所述将待识别词向量空间输入所述多任务联合学习模型，得到新的资源描述框架三元组，包括：

19、将映射至词向量空间的资源描述框架三元组输入至多任务联合学习模型，将嵌入到词向量矩阵空间中的知识重新映射到文字表示的资源描述框架三元组，从而得到新的资源描述框架三元组。

20、进一步的，新的资源描述框架三元组包括多个，得到新的资源描述框架三元组之后，还包括：

21、将新生成的资源描述框架三元组进行整理合并。

22、进一步的，还包括：

23、对反恐全局数据库中的字符串规范化处理。

24、本申请实施例提供一种反恐数据全局知识图谱构建及系统实现的装置，包括：

25、抽取模块，用于利用基于反恐数据库中的数据源，基于预设实体词抽取所述数据源，得到与所述实体词相关的三元组；

26、建立模块，利用所述三元组融合所述反恐数据库与自定义数据库建立全局数据库，利用所述全局数据库得到全局知识图谱，并基于所述全局知识图谱提取资源描述框架三元组；

27、训练模块，用于将所述资源描述框架三元组嵌入语义空间，并基于所述语义空间建立训练集，利用所述训练集对深度学习网络进行训练，得到多任务联合学习模型；所述多任务联合学习模型用于识别资源描述框架三元组；

28、补全模块，用于将待识别词向量空间输入所述多任务联合学习模型，得到新的资源描述框架三元组，将新的资源描述框架三元组补入所述全局知识图谱中。

29、本发明采用以上技术方案，能够达到的有益效果包括：

30、本发明提供一种反恐数据全局知识图谱构建及系统实现的方法，本申请将马里兰全球反恐数据库与自定义数据库进行融合优化，得到全局数据库，基于全局数据库得到全局知识图谱，并基于所述全局知识图谱提取资源描述框架三元组；将资源描述框架三元组嵌入语义空间，通过语义空间对深度学习网络进行训练，得到多任务联合学习模型；将待识别词向量空间输入多任务联合学习模型，得到新的资源描述框架三元组，将新的资源描述框架三元组补入全局知识图谱中。本发明利用了全局知识图谱，使得在训练、测试和查询中的知识库规模大幅缩小，精准度大幅提高，还自动挖掘反恐数据全局知识图谱中的隐藏知识，填补了基于知识图谱的反恐数据全局知识图谱补全方法的空白，同时，反恐数据分析系统的实现可以最大限度、最快速的从海量零散的数据中挖掘有价值的信息，利用事物的相关关系，快速判断、分析恐怖情况，极大的满足了当前的应用需求。

技术特征：

1.一种反恐数据全局知识图谱构建及系统实现的方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述数据源包括：

3.根据权利要求2所述的方法，其特征在于，所述基于预设实体词抽取所述数据源，包括：

4.根据权利要求1所述的方法，其特征在于，基于所述全局知识图谱提取资源描述框架三元组，包括：

5.根据权利要求4所述的方法，其特征在于，所述将待识别词向量空间输入所述多任务联合学习模型，得到新的资源描述框架三元组，包括：

6.根据权利要求5所述的方法，其特征在于，新的资源描述框架三元组包括多个，得到新的资源描述框架三元组之后，还包括：

7.根据权利要求4所述的方法，其特征在于，还包括：

8.一种反恐数据全局知识图谱构建及系统实现的装置，其特征在于，包括：

技术总结
本发明涉及一种反恐数据全局知识图谱构建及系统实现的方法，所述方法包括将马里兰全球反恐数据库与自定义数据库进行融合优化，得到全局数据库，并得到全局知识图谱，提取资源描述框架三元组；将资源描述框架三元组嵌入语义空间，通过语义空间对深度学习网络进行训练，得到多任务联合学习模型；将待识别词向量空间输入多任务联合学习模型，得到新的资源描述框架三元组，将新的资源描述框架三元组补入全局知识图谱中。本发明利用了全局知识图谱，使得在训练、测试和查询中的知识库规模大幅缩小，精准度大幅提高，还能够填补全局知识图谱，本申请提供的技术方案利用事物的相关关系，快速判断、分析恐怖情况，极大的满足了当前的应用需求。

技术研发人员：杜波,俞昭君,袁琛
受保护的技术使用者：中国人民武装警察部队工程大学
技术研发日：
技术公布日：2024/1/15