APP下载

面向CLAIMS基于Smart物化策略的列存储设计与实现

2017-09-22张晗周敏奇

华东师范大学学报(自然科学版) 2017年5期
关键词:数据库策略

张晗,周敏奇

(华东师范大学数据科学与工程学院,上海200062)

面向CLAIMS基于Smart物化策略的列存储设计与实现

张晗,周敏奇

(华东师范大学数据科学与工程学院,上海200062)

物化是列存储数据库查询中必不可少的操作,物化策略和物化技术在查询执行过程中起着至关重要的作用.因此设计一种针对列存储数据库的物化策略尤为重要.提前物化生成的元组中存在无关属性;而延迟物化对选择率较高的查询可能无法优化其性能,且某些列会被访问多次.针对以上缺点,本文提出了有别于上述两种策略的策略——Smart物化策略.本文提出了在逻辑查询计划中使用结构——projection,该结构是由用户选取查询所需的属性来生成的,相当于对全表进行物理上的切分;在查询开始时,能减少直接加载到内存的数据量,避免额外的开销.在构建逻辑查询计划过程中,Smart物化策略将projection作为扫描操作标准来对数据进行按列划分,根据一组语句集中对列访问的相关性来对下一次查询所需要的列进行预测,将所需要的列加入到一个最合适的projection中来进行物化.本文通过在分布式内存数据库CLAIMS上使用TPC-H数据集来验证其有效性.

projection;Smart物化;数据压缩

0 引言

随着互联网技术的发展、计算机硬件的不断更新、企业及政府信息化的不断深入,行存储数据库所涉及应用的复杂性越来越高.海量数据管理、实时数据分析、商务智能、决策支持等应用对系统的可扩展性、数据分析的实时性提出了新……

登录APP查看全文

猜你喜欢

数据库策略
基于“选—练—评”一体化的二轮复习策略
例谈未知角三角函数值的求解策略
我说你做讲策略
高中数学复习的具体策略
数据库
数据库
数据库
数据库
数据库
Passage Four