气田工业大数据的探索与研究
2021-06-26孟亮
中国管理信息化 2021年10期
孟 亮
(新疆油田公司采气一厂,新疆 克拉玛依 834007)
0 引言
新疆油田采气一厂建设了厂级实时数据中心,实现了4 个作业区秒级采集物联网数据的厂级统一管理,形成了一个每年TB 级别积累的数据资源池,是极为宝贵的数据资产。为充分发挥实时数据的分析价值,采气一厂从生产管理角度出发,在充分分析自身业务场景的前提下参考各行业数据分析挖掘技术[1-3],研究开发了一套涵盖数据提取、数据计算、数据管理全过程的后台服务体系,实现了生产管理数据在实时数据平台的自动整合分析,为气田大数据深化应用探索了一条可行的道路[4-5]。
本次研究基于对接实时数据采集平台的技术基础,通过任务配置、任务调度、数据拉取和数据处理的流程建立和管理[6],按业务场景、计划周期、算法类别等多种维度,实现了自动、及时、高效、稳定的实时数据提取与整合,为报表展示和自动化数据存储奠定了基础[7]。
1 数据挖掘过程
本次数据挖掘的目的是将现场实时高频采集的数据进行数据计算、抽稀、过滤等处理,得到气田生产运行管理中所需的生产过程特征数据和生产分析决策关键指标,为生产运行管理提供准确的、唯一的、标准的、全面的数据服务[8]。其中,实时数据来源于天行实时数据平台(DATimsien),数据挖掘过程是通过实时数据抽取、报表定制、自动任务3 个转换引擎实现,各引擎分工不同,引擎之间无缝衔接。
1.1 实时数据抽取引擎
实时数据抽取引擎……
登录APP查看全文
