APP下载

基于大数据的数据挖掘技术和应用分析

2019-11-13徐伟

安阳师范学院学报 2019年5期
关键词:数据挖掘分类用户

徐 伟

(桐城师范高等专科学校,安徽 桐城 231400)

大数据技术发展带来的巨大信息风暴正在改变人们的生活、工作和思维方式,也是开启重大时代转型的钥匙。全球各国普遍认识到数据作为战略性资源对发展和竞争带来的关键作用,诸多国家开始制定以大数据为核心的战略或发展计划,借此实现业务创新和新兴产业发展。大数据技术能够挖掘海量数据的内在规律,打开全新思维和认知视角,在“互联网+”的时代背景下,为各行各业的发展保驾护航[1]。本文讨论基于大数据的数据挖掘关键技术,理清思路,突出数据挖掘价值,并以电力行业为例,分析大数据挖掘技术在企业生产经营中的应用场景和应用价值。

1 数据挖掘技术

数据挖掘技术是利用算法搜索,从海量数据中提取重要信息和有趣模式的过程[2]。图1所示为数据挖掘的数据模型建立过程。

图1 数据挖掘建模过程

第一个阶段是数据的预处理,将采集到的原始数据转化为符合项目需求的有效数据。数据预处理是为了有效弥补原始数据缺陷,保证数据的可靠、完整。数据抽取就是要在海量数据中快速获取与项目有关的数据。

第二个阶段是数据挖掘。根据数据仓库中数据的普遍特征,选择合适的算法和工具,采用案例推理、规则推理、模糊集、遗传算法、神经网络、统计学等方法处理信息。数据挖掘的关键在于明确挖掘任务,并找到合适的挖掘算法。

第三个阶段是知识表示和模式评估。……

登录APP查看全文

猜你喜欢

数据挖掘分类用户
分类算一算
探讨人工智能与数据挖掘发展趋势
教你一招:数的分类
基于并行计算的大数据挖掘在电网中的应用
关注用户
关注用户
关注用户
一种基于Hadoop的大数据挖掘云服务及应用
如何获取一亿海外用户
基于GPGPU的离散数据挖掘研究