基于大数据的电力设备运行数据分析系统的设计
2021-01-13李远
数字通信世界 2021年5期
李 远
(国网山西省电力公司,山西 太原 030021)
0 引言
应用大数据电力设备的运行分析系统,能够对网络信息进行实时分析,针对电力设备的运行数据展开处理,综合分析管理。系统实质是利用设计软件,将设备的运行数据进行集成化管理,按照电力数据的管理需求,设定各项模块。同时,利用该系统还能完成电力数据信息的录入和修改,或者删除和查看,进而分析设备是否处于正常状态,保证管理的高效性。
1 大数据的电力设备运行数据分析系统的设计
1.1 技术架构
系统设计将Hadoop 作为云计算框架,使用HDFS技术存储系统监测的电力数据,还可借助MapReduce 技术辅助并行计算,不断提高数据质量。使用HBase 作为数据库,存储无结构电力数据,以Sqoop 作为接入数据的工具,传递数据库之间数据,利用开源服务软件支持Hadoop 集群运行[1]。
1.2 系统结构
该系统为B/S 结构,在Hadoop(云计算平台)之上部署服务器,可将网站中的内容向tomcat 中发布,以RESTful 架构辅助服务器、浏览器二者之间通信。使用阶段可通过浏览器点击页面后,即可申请获取服务器内部服务及资源,Hadoop 平台内,以MapReduce 编程模型,借助聚类算法、AR 模型等挖掘HBase 内部状态数据,之后即可回到设备状态的评估页面。远程调用主要使用RESTful 技术进行,将数据封装为JSON 格式,向分析层发送,通过数据挖掘,将结果以同样格式向业务平台当中传输,经过落实处理之后,用JSON 格式进行封装,之后向客户浏览器中返回,此时浏览器即可按照图表的方式在页面上显示相关数据。……
登录APP查看全文
