对基于“大数据”时代背景下计算机信息处理技术的应用探讨
2021-08-28黄佰强
科教导刊·电子版 2021年20期
黄佰强
(华南农业大学珠江学院 广东·广州 510900)
大数据技术在计算机信息处理技术中的应用,给网络数据的处理带来了极大的便利,但是也给计算机技术的发展带来了极大的挑战,如果不能有效的利用信息技术对各种数据存储、整理、分析与传输,就会导致信息泄露的问题与数据丢失的情况,也就会对数据的安全造成影响,为了提高计算机信息处理技术与各类数据存储效率,需要深入研究数据的采集与存储以及数据安全技术,提高网络数据的处理效率,使得大数据技术能在更为广泛的角度得到应用,能更有效的保证网络数据的安全性能。
1 计算机信息处理技术
1.1 数据的采集
目前,对网络数据采集的流程是从数据的来源端机芯抽取(extraot)、转换(transform)、加载(load)后保存在存储服务中,如比较流行的Sqoop和ETL工具,还可以采用关系型数据库MySQL和Oracle对远端的数据进行收集,并利用加工工具对数据清洗、加工、挖掘与存储。在大数据的环境下,对网络数据的采集与存储也提出了更高的要求,采用计算机硬件技术来提高网络数据的存储,云存储技术刚好能满足这一需求,例如阿里云、百度云、谷歌云等,其作用不仅是对数据进行存储,还能有效地对信息数据进行处理。
1.2 信息的存储
对于收集到的海量数据,往往存在着不同的结构与类型,为了保证数据的完整性,需要针对数据的来源与类型,对其进行分类存储,以有利用后期处理。如何有效地保证网络数据存储的安全性与稳定性,是计算机信息处理面临的关键性问题,也是在数据存储时必须要考虑的首要问题。……
登录APP查看全文