一种结合大数据的电力数据样本的采集方法与流程

本发明涉及数据采集，具体为一种结合大数据的电力数据样本的采集方法。

背景技术：

1、为保障电网的安全运行，日常管理以及巡检是不可或缺的一项工作，但是投入大量的人力和物力，但是仍然有监管不到的地方，易因未及时发现线路问题而引发线路故障，影响电力系统的正常使用。虽然人工智能技术已在各业务领域中都有典型的应用案例与成果，但当前人工智能应用仍存在以下问题：人工智能平台与业务系统尚未建立数据通路，无法及时获取业务系统原始数据信息，对于大量上传的原始业务数据，缺少统一管理和分析页面，难以支撑样本运营问题。

技术实现思路

1、本发明的目的在于提供一种结合大数据的电力数据样本的采集方法，以解决上述背景技术中提出的问题。

2、为实现上述目的，本发明提供如下技术方案：一种结合大数据的电力数据样本的采集方法，包括以下步骤：

3、a、建立nosql数据库，接入涵盖输电、配电、安监、电力专业知识图谱领域原始样本，并对所有样本进行图像采集、处理以及标注，用于数据存储以及分析，方便后台监管人员查看相关电力设备运行情况以及一线电力工作人员提供电力知识的专业查询智能库；

4、b、建立模型库：纳管输电、变电、安监业务领域多类别模型；

5、c、建立远程监控系统：在电网各关键位置安装传感器以及数据记录仪，实时感知电网的参数和状态，所述数据记录仪将采集到的所述数据进行实时记录和存储，所述传感器能够将感知到的所述数据转化为电信号，并通过通信设备传送给所述数据库，利用通信网络实现对电网设备的远程监测和控制；

6、d、所述数据库日志采集：一方面利用智能终端检查设备的基本仪表参数是否正常，所述智能终端通过通信设备将检测参数传送给所述数据库，另一方面，支持所述智能终端利用通信网络对图片、音频和视频文件的上传至传送给所述数据库，以上数据采集产生大量日志数据，系统日志采集工具均采用分布式架构，能够满足每秒数百mb的所述日志数据采集和传输需求；

7、e、优化所述数据库性能：根据实际应用情况，对所述数据库进行性能优化；

8、f、所述数据的备份和恢复：为防止所述数据丢失或意外情况发生，定期备份所述数据库，定期进行备份提取操作以免所述数据丢失；

9、g、监控和维护：对所述数据库实例进行监控和维护，确保所述数据库的稳定运行。

10、可选地，所述传感器包括温度传感器、湿度传感器以及电流传感器。

11、可选地，所述数据记录仪选择电线直接高效采集所述数据或通过无线通信技术与采集终端进行所述数据交互。

12、可选地，e、优化所述数据库性能：根据实际应用情况，对所述数据库进行性能优化包括索引优化以及查询优化。

13、可选地，还包括etl处理模块，所述etl处理模块将不同的所述智能终端采集的不同所述数据整合到一起，进行清洗、转换和加载。

14、可选地，所述智能终端采样方法包括随机采样、系统采样和分层采样及其结合。

15、可选地，还包括收纳所述智能终端的便携式收纳结构，所述收纳结构包括收纳盒，所述收纳盒上端开设有收纳所述智能终端的收纳腔；

16、所述收纳盒边侧壁设有十字结构的背板，所述背板两端均固定有绑带，两个绑带端部侧壁分别设有毛面和勾面，两个绑带端部之间通过毛面和勾面粘连。

17、可选地，所述收纳盒上端面设有挡盖，所述收纳盒一端两个边角位置均固定有t型滑块，所述挡盖底壁水平开设有两个相互平行的t型滑槽，所述t型滑块与所述t型滑槽内部滑动卡接；

18、所述收纳盒安装所述背板的一侧侧壁内部设有调节腔室，所述调节腔室一端为水平设置，另一端为圆弧形结构且圆弧形结构上端延伸至所述收纳盒上端，所述调节腔室的水平位置侧壁转动插接有销轴且转动处设有扭簧，所述销轴端部伸出所述调节腔室后与所述背板侧壁固定连接，所述销轴位于所述调节腔室内的一端径向侧壁固定有连杆，所述连杆沿着水平位置延伸至圆弧形结构位置且固定有圆弧形结构的限位杆，所述限位杆端部沿着至所述收纳盒上端且所述挡盖底壁开设有与所述限位杆端部插接的限位槽。

19、可选地，所述收纳盒远离所述背板的一侧侧壁开设有多个沿着所述收纳盒上端面的缺口。

20、可选地，所述收纳盒内设有多个隔板，所述隔板底壁设有插接柱，所述收纳腔内底壁开设有多个插接槽，多个所述插接槽等分为多组，每个所述隔板底壁的所述插接柱与每组多个所述插接槽插接，多个所述隔板将所述收纳腔分隔为多个放置空间。

21、与现有技术相比，本发明的有益效果是：

22、本发明为一种结合大数据的电力数据样本的采集方法，通过上述线上和线下结合的电力数据采集方式，便于后台及时获取业务系统原始数据信息，通过建立nosql数据库对于大量上传的原始业务数据，进行统一库存、分类管理和分析，提升电力样本规模与质量，形成了统一的样本技术标准、规范的管理流程，提供高效稳定的样本管理及应用服务能力，节省人力和物力的投入量，降低成本，提高电力运行的效率。

23、本发明实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。

技术特征：

1.一种结合大数据的电力数据样本的采集方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的结合大数据的电力数据样本的采集方法，其特征在于：所述传感器包括温度传感器、湿度传感器以及电流传感器。

3.根据权利要求1所述的结合大数据的电力数据样本的采集方法，其特征在于：所述数据记录仪选择电线直接高效采集所述数据或通过无线通信技术与采集终端进行所述数据交互。

4.根据权利要求1所述的结合大数据的电力数据样本的采集方法，其特征在于：e、优化所述数据库性能：根据实际应用情况，对所述数据库进行性能优化包括索引优化以及查询优化。

5.根据权利要求1所述的结合大数据的电力数据样本的采集方法，其特征在于：还包括etl处理模块，所述etl处理模块将不同的所述智能终端采集的不同所述数据整合到一起，进行清洗、转换和加载。

6.根据权利要求1所述的结合大数据的电力数据样本的采集方法，其特征在于：所述智能终端采样方法包括随机采样、系统采样和分层采样及其结合。

7.根据权利要求1-6任一所述的结合大数据的电力数据样本的采集方法，其特征在于：还包括收纳所述智能终端的便携式收纳结构，所述收纳结构包括收纳盒(1)，所述收纳盒(1)上端开设有收纳所述智能终端的收纳腔；

8.根据权利要求7所述的结合大数据的电力数据样本的采集方法，其特征在于：所述收纳盒(1)上端面设有挡盖(2)，所述收纳盒(1)一端两个边角位置均固定有t型滑块(12)，所述挡盖(2)底壁水平开设有两个相互平行的t型滑槽，所述t型滑块(12)与所述t型滑槽内部滑动卡接；

9.根据权利要求8所述的结合大数据的电力数据样本的采集方法，其特征在于：所述收纳盒(1)远离所述背板(3)的一侧侧壁开设有多个沿着所述收纳盒(1)上端面的缺口。

10.根据权利要求8所述的结合大数据的电力数据样本的采集方法，其特征在于：所述收纳盒(1)内设有多个隔板(4)，所述隔板(4)底壁设有插接柱(41)，所述收纳腔内底壁开设有多个插接槽(16)，多个所述插接槽(16)等分为多组，每个所述隔板(4)底壁的所述插接柱(41)与每组多个所述插接槽(16)插接，多个所述隔板(4)将所述收纳腔分隔为多个放置空间。

技术总结
本发明实施例提供一种结合大数据的电力数据样本的采集方法，属于数据采集技术领域。所述采集方法包括以下步骤：A、建立NoSQL数据库；B、建立模型库；C、建立远程监控系统：D、所述数据库日志采集；E、优化所述数据库性能；F、所述数据的备份和恢复；G、监控和维护。本发明为一种结合大数据的电力数据样本的采集方法，通过上述线上和线下结合的电力数据采集方式，便于后台及时获取业务系统原始数据信息，通过建立NoSQL数据库对于大量上传的原始业务数据，进行统一库存、分类管理和分析，提升电力样本规模与质量，形成了统一的样本技术标准、规范的管理流程，提供高效稳定的样本管理及应用服务能力，节省人力和物力的投入量，降低成本，提高电力运行的效率。

技术研发人员：熊嘉丽,何德明,谢炜,李扬笛,杨彦,黄建业,林晨翔,钱健,林爽,翁宇游,林国庆
受保护的技术使用者：国网福建省电力有限公司电力科学研究院
技术研发日：
技术公布日：2024/3/4