基于云计算模式的大数据处理技术
2021-11-24王建军闫洪利姜子琛颜蜜蜜岑芸芸
商品与质量 2021年40期
王建军 闫洪利 姜子琛 颜蜜蜜 岑芸芸
济南轨道交通集团有限公司 山东济南 250014
1 相关理论基础
1.1 云计算技术
云计算技术是我国服务范围最广的计算技术,它通过运用集中式远程计算机资源池进行数据的存储、计算,以按需分配的方式为用户提供相应的服务。云计算以其超强的计算能力,超高的服务质量,超大的存储空间,在诸多数据处理技术中体现出巨大的优势。其特征主要表现在:①透明化。云计算的资源池对每个用户都是透明的,并且保证数据的开放性;②无限制。云计算可以为计算机系统提供不受任何时间限制、行业限制的服务,允许各行业根据需要科学选取合适的计算模式,以期得到更精准且有效的数据信息;③便捷性。数据获取方便快捷,成本较低,为用户处理数据节省时间,提升数据处理的效率;④灵活性。云计算提供灵活的服务与方式。可根据用户需求选择合适的计算方法,提供针对性服务,更能提升用户的满意度[1]。
1.2 大数据技术
大数据技术能够对海量信息进行获取、组合和传输。通过大数据技术,可以有效收集结构化数据、半结构化数据和非结构化数据。数据集的规模大幅提升,从TB级到PB级,有效增大了数据容量。大数据的主要特征可以用“5V”来描述,即:Volume、Velocity、Variety、Veracity、Value。大数据的应用主要包括三个架构:①融合化架构。这是一种客户机/服务器的架构模式。在此架构下,服务器起主导作用,管控应用系统,进行数据调度及逻辑处理等操作;②分散式架构。……
登录APP查看全文
