APP下载

对基于“大数据”时代背景下计算机信息处理技术的应用探讨

2021-08-28黄佰强

科教导刊·电子版 2021年20期
关键词:数据处理大数据效率

黄佰强

(华南农业大学珠江学院 广东·广州 510900)

大数据技术在计算机信息处理技术中的应用,给网络数据的处理带来了极大的便利,但是也给计算机技术的发展带来了极大的挑战,如果不能有效的利用信息技术对各种数据存储、整理、分析与传输,就会导致信息泄露的问题与数据丢失的情况,也就会对数据的安全造成影响,为了提高计算机信息处理技术与各类数据存储效率,需要深入研究数据的采集与存储以及数据安全技术,提高网络数据的处理效率,使得大数据技术能在更为广泛的角度得到应用,能更有效的保证网络数据的安全性能。

1 计算机信息处理技术

1.1 数据的采集

目前,对网络数据采集的流程是从数据的来源端机芯抽取(extraot)、转换(transform)、加载(load)后保存在存储服务中,如比较流行的Sqoop和ETL工具,还可以采用关系型数据库MySQL和Oracle对远端的数据进行收集,并利用加工工具对数据清洗、加工、挖掘与存储。在大数据的环境下,对网络数据的采集与存储也提出了更高的要求,采用计算机硬件技术来提高网络数据的存储,云存储技术刚好能满足这一需求,例如阿里云、百度云、谷歌云等,其作用不仅是对数据进行存储,还能有效地对信息数据进行处理。

1.2 信息的存储

对于收集到的海量数据,往往存在着不同的结构与类型,为了保证数据的完整性,需要针对数据的来源与类型,对其进行分类存储,以有利用后期处理。如何有效地保证网络数据存储的安全性与稳定性,是计算机信息处理面临的关键性问题,也是在数据存储时必须要考虑的首要问题。……

登录APP查看全文

猜你喜欢

数据处理大数据效率
认知诊断缺失数据处理方法的比较:零替换、多重插补与极大似然估计法*
ILWT-EEMD数据处理的ELM滚动轴承故障诊断
提升朗读教学效率的几点思考
基于大数据背景下的智慧城市建设研究
基于希尔伯特- 黄变换的去噪法在外测数据处理中的应用
跟踪导练(一)2
“钱”、“事”脱节效率低
基于POS AV610与PPP的车辆导航数据处理
提高讲解示范效率的几点感受