APP下载

Java千万级别数据处理与优化

2016-11-09赵珊

数字技术与应用 2016年9期
关键词:处理技术大数据

赵珊

摘要:伴随着云计算、物联网等新兴技术的不断发展,数据量呈现几何式的增长,海量庞大的数据出现标志着大数据时代的来临。从海量的数据资源中提取有价值的信息并反馈给用户是数据处理面临的主要研究方向。本文主要探讨Java这门经典的编程语言在当前的数据环境下,如何实现对大数据的加工及优化处理,来实现数字资产的保值增值。

关键词:Java 大数据 处理技术

中图分类号:TP315.1 文献标识码:A 文章编号:1007-9416(2016)09-0239-01

1 Java处理数据时的交互方式

大数据本身就是传统意义上的数据的几何级表现形式。大数据技术意义在于对这些有价值的数据进行专业化处理,通过“加工”实现数据的“增值”。大数据处理的一个关键环节就是数据处理引擎如何与大数据有一个良好的连接通道。目前比较主流的数据处理引擎开发语言有Java,C#,C++等。

Java作为主流开发语言的连接数据库方式采用JDBC,通过建立一个数据库连接池以及一套连接使用、分配、管理策略,连接可以得到高效、安全的复用,避免了数据库连接频繁建立、关闭的开销。另外,由于对JDBC中的原始连接进行了封装,隔离了应用本身的处理逻辑和具体数据库访问逻辑,使应用本身的复用成为可能,提高了开发效率。

从传统技术发展来看,一般新技术通常不会跨越太大。特别是软件开发技术,为了不过度超前采用一种妥协的技术发展方式向下兼容。新技术大多是从传统方式拓展延伸过来,而不是跨越式的从新研发一套全新的技术,大数据处理也遵循着这样的一个原则。……

登录APP查看全文

猜你喜欢

处理技术大数据
农村生活污水处理技术进展研究
浅议大数据的产生与发展现状
简析常用园林生态水处理技术
浅谈城市生活污水处理技术现状及发展趋势研究
浅析城市生活污水处理技术现状及发展趋势
建筑工程项目的软土地基处理技术
大数据环境下基于移动客户端的传统媒体转型思路
基于大数据背景下的智慧城市建设研究
数据+舆情:南方报业创新转型提高服务能力的探索