基于分布式存储系统的数据布局策略研究
2019-08-21赵媛媛王珂周瑶
现代计算机 2019年21期
赵媛媛,王珂,周瑶
(西安建筑科技大学,西安710055)
0 引言
随着互联网和物联网在生活中的不断普及和完善,网络社交媒体的数据呈现几何增长的状态,大数据已融入到各个领域,成为企业最重要的生产因素,决定了企业以后的发展。如何有效对大数据进行存储和管理来更深层次的挖掘和利用数据中的信息已成为当前需要解决的一个重要问题。分布式存储系统成为目前存储大数据的主要方式。然而,随着存储数据量越来越多,原有的存储系统中设备不断进行更替,系统规模的不断扩大,人们对于数据存储有了更高的要求,需要设计一个可靠的数据管理方法来根据系统存储规模的变化来动态调整数据布局,保证系统在处理过程中能够快速地对数据进行存储并且使得系统负载保持均衡,这对于系统性能的提升至关重要。
1 传统的数据布局策略及其缺陷
数据布局策略是指为了达到存储目标,将数据通过某种映射机制来指派到合适的存储节点中。在存储系统中,存储目标在一定程度上决定了其所采用的数据布局策略。对于分布式存储系统来说,数据布局策略在系统响应、访问速率和负载均衡等方面有着更高的要求。数据布局的标准有以下几点:公平性、冗余、自适应性以及时空有效性[1],在研究数据布局方面,为了提高系统性能,通常从降低系统平均响应时间、提高可用性和可靠性、保证系统负载均衡这几个方面来进行考虑。……
登录APP查看全文
