渠婷婷

(宁夏天地奔牛实业集团有限公司，宁夏 银川 750000)

0 引言

目前煤矿刮板输送机动力部监测系统产品已经成熟，监测数据作为判断设备运行状态的底层支撑，目前存在以下问题：①数据量大，业务系统积累的数据时间长，类型多，传感器实时性高,每天产生大量的数据；②难打通，存储的数据格式多样，不利于其他软件读取分析；③不直观，行列式，无法交互，统计的数据没有产生价值；④采集设备存储的数据质量需要分析核实，并分析数据质量低下的原因。现在存储的数据量已远超目前人工所能处理的范围，但这些数据对刮板输送机的设计制造没有发挥其价值，因此需要开发一套基于Python的数据挖掘及可视化软件，用来整合、归纳、挖掘数据之间的关系，将可视化技术与数据挖掘过程紧密地结合在一起, 将数据与数据挖掘结果可视化。我们采用多种统计、计算手段对数据加以详细研究和总结归纳，多维度观察积累的数据，从大量的历史数据中抽取出潜在的、有价值的信息，发现数据的发展规律和预测趋势走向，然后转化为可视化的表现形式的过程。

1 系统介绍

本系统由数据转换模块、数据处理模块、数据挖掘模块、数据显示模块等组成。数据转换模块负责将不同格式的数据转换为同一种格式；数据处理模块负责将不同来源的数据进行集成，将转换好的数据批量导入数据库，并对采集数据的频率进行处理，并执行数据清洗工作；数据挖掘模块负责发现数据中的隐含规律，用于总结分析；……