APP下载

分布式大数据树形处理架构在犯罪预测方面的应用研究

2014-11-20万雪勇雷鹏程

江西警察学院学报 2014年5期
关键词:数据处理数据库模型

朱 峰,万雪勇,雷鹏程

(1.吉安市公安局网安支队,江西 吉安 343000;2.江西警察学院,江西 南昌 330103;3.江西省公安厅网络安全和技术侦察总队,江西 南昌 330006)

我们面对的大数据由大量的各种各样的数据库构成,数据库是由一张张数据表组成,大数据是由看则无限实则有界的数据表铺接成的数据地球。 站在数据地球之外来看, 我们需规划管理好各地的数据库,身在数据地球之中来讲,则需分布式交通和枢纽来遍及整个数据地球。 因此我们设计了以地域来划分,以服务接口为连接点的分布式大数据处理架构。

我们将分布各地的数据库称为离散数据库或数据库集群, 该架构物理上是一种以大数据处理中心为根、总线与接口为枝、各离散数据库和数据库集群为叶的树形结构。 基本原理是由大数据处理中心统一协调下发任务, 以各离散数据库预建的数据源产生地区索引为基础, 通过大数据处理的词义模型来挖掘大量数据中潜在的价值信息。 大数据时代很多情况下难以预先确定模式, 模式只有在数据出现之后才能确定, 且模式随着数据量的增长处于不断的演变之中,[1]大数据处理的词义模型跨越了大数据模式和数据的关系的障碍, 体现了该架构对不同数据库或者说数据模式的包容性, 而包容性是未来超大规模大数据处理的核心内容与研究方向。

本文将探讨基于面向服务可包容的分布式大数据树形处理架构在犯罪预测方面的应用。……

登录APP查看全文

猜你喜欢

数据处理数据库模型
一半模型
认知诊断缺失数据处理方法的比较:零替换、多重插补与极大似然估计法*
ILWT-EEMD数据处理的ELM滚动轴承故障诊断
重尾非线性自回归模型自加权M-估计的渐近分布
数据库
3D打印中的模型分割与打包
数据库
数据库
数据库
基于希尔伯特- 黄变换的去噪法在外测数据处理中的应用