APP下载

大数据时代对传统统计数据收集的影响

2021-11-29山东省济宁市泗水县统计局

营销界 2021年17期
关键词:普查部门信息

张 莲(山东省济宁市泗水县统计局)

■ 传统统计数据的收集方法

我国政府统计部门传统的数据收集方法。

(一)三大周期性普查

我国三大普查:每隔10年进行一次的农业普查、人口普查,根据经济发展周期每隔5年进行一次的经济普查,是由统计部门组织,用来调查一定时点或时期内的社会经济现象总量,对调查对象全覆盖、大规模的全面调查。

(二)抽样调查和其他非全面调查

除去三大普查,我国统计数据的直接来源还有抽样调查、重点调查、典型调查以及一些常规统计报表。常用的数据采集方式有联网直报、城乡一体化调查、价格调查、地块调查、粮食抽样等方式。

普查与抽样调查及其他非全面调查方式的缺点:

三大普查,是对我国国情国力的全面调查,涉及面广,指标多,工作量大,时间性强,对集中领导和统一行动的要求质量高,需要较多的人力、物力和财力,且调查周期长。

笔者从2005年进入统计站开始统计工作,亲身历经了2006年、2016年的两次农业普查,2008年、2013年和2018年的三次经济普查,2010年和还没有结束的2020年的两次人口普查。从开始的纸质调查表入户登记、人工汇总指标、抄写正式表、光电扫描数据录入上传至国家数据库,到2013年第三次经济普查第一次使用电子数据采集终端PDA进行入户登记、现场采集数据、上传到国家普查数据采集平台,统计数据收集方式越来越先进,越来越智能化,但缺点也显而易见。

(三)数据的间接来源方式

统计数据的间接来源方式主要是与企业生产经营活动有关的各种资料,各级政府行政部门为履行其职能,如办证、登记、检查、保险、税收等,而收集、记录、和保存在文件、档案中个人或单位的资料记录。统计部门把这些收集来的数据再经过筛选、比对、汇总等加工方式,得到符合需要的数据。

这些间接的数据采集方式,有着共同的优点:

第一,可降低统计成本。从公共管理部门处取得行政记录,是一种方便、快捷、简单易行的调查内容,成本极低,能节约大量人力、物力、财力。对调查对象来说,使用行政记录也可以减轻调查对象的负担。第二,可提高统计部门的数据准确性。行政性档案是为了本部门的管理和控制而建立的,因此,行政档案能够真实地反映社会、经济现象的运动、变化过程,大部分行政档案反映的是公民自愿的主动行为,不易弄虚作假。即使罚款等行政记录反映的是非自愿行为,其记录也往往是强制性的,一旦发生情况,则必须予以记录备案,以保存最客观的证据。第三,可验证统计分析结论的正确性。使用这些行政记录进行数据间的匹配性分析,加强相关性、逻辑性研究,来评估验证数据质量,验证统计分析结论的正确性。

但也有着共同的缺点:

第一,和统计上的指标分类标准不一样。有些企业的报表、财务数据或部门的行政记录数据有着自身填报或记录目的,有着自己一套严密的方法体系,这就和我们统计部门的统计指标体系有着很多的差异。第二,两者覆盖范围也不一样,企业的报表、财务数据或部门数据仅仅是本单位或本部门管理范围内的数据,无法保证其完整的代表性。第三,时间记录规则不一致。统计一般分为时点指标或时期指标,一般按照日历年限核算,但有些部门的数据出于行政管理的需要,会调整不同的时期,例如对于出生人口这一指标,公安部门规定只有新生儿到公安部门登记户口才能算作出生人口,但我们统计则按实际发生的时间点来统计出生或者死亡。第四,单位或部门数据的保密性与隐私性。有些部门或单位出于对本部门信息的保密或对公民隐私的保护,无法提供或者根本不愿意提供。随着我国经济日新月异的发展,互联网、物联网技术突飞猛进,海量的信息、各种类型的数据潮水般地涌进人们的生活、工作中,这些数量大、速度快、多样性、时效性强的大数据强烈地冲击着我们的统计工作,传统数据的收集方法已经越来越不适应新时代赋予我们统计工作的新职能,急需我们探索新的方式方法。

■ 大数据的特点

数据规模大。国务院发展研究中心信息中心研究处处长李广乾说过:“大数据的市场规模没有天花板”,我国经济发展飞速,产生数据的终端增多,每天各行各业的数据信息如潮水般涌来。信息流转快。信息时代,人作为网络的核心,每天都在制造爆炸式数据,这些数据再被相应的电商、企业、政府、银行等部门收集、处理、运用,从而使数据快速流动起来。数据类型多。大数据的来源,包括交通运输,互联网文件处理、制作互联网搜索引擎索引、通信记录明细、金融大数据、医疗大数据、社交网络、照片图像、大规模的电子商务等各行各业,从而造成各种各样的类型,包括数字、文字、视频、图片、声音等。价值密度低。爆炸式海量的数据,覆盖面广,信息杂,包含的模糊信息多,从而价值密度就低。

■ 对传统体制的挑战

目前我们的统计调查手段,虽然已是现代化,但不等于统计调查体系的现代化,我国当前统计调查体系的主要问题是各种调查方式、调查力量和数据来源的有效整合不够,各种统计调查制度、方式方法不能很好地衔接,数据孤岛现象十分突出。

许多大数据,例如社交媒体数据,微信、QQ、淘宝等网上产品的价格信息,多是由观察数据组成,因此没有明确定义目标人群、结构和质量。这使得基于采样理论的传统统计方法难以应用许多大数据源的非结构化性质,使得提取有意义的统计信息变得更加困难。大数据时代对数据的收集分为三步,第一步数据预处理,包括识别与整理。第二步数据分析,提炼有价值信息。第三步数据存储。

■ 应对措施

(一)统计体系改革,制定新的指标体系

1.建立智能数据系统

在基于原来联网直报、常规统计报表、周期性普查、抽样调查的基础上,引入大数据共享平台,开发新的针对大数据特征的指标体系和指标解释方法,把来源于各个网络终端的数据,快速的收集、整合、去杂、存储,建立新的智能数据系统。

2.整合传统统计数据

整合各类普查、常规调查和专项调查等数据,打破专业壁垒和信息孤岛,实现数据共享和深度开发。

3.完善统计业务流程

统计数据收集、整理、分析和储存的科学化生产流程,通过技术创新,改变了传统的统计工作方式,进一步提高了统计工作的质量、效率和水平。

4.加快大数据应用创新

推动统计数据采集方式的变革,充分利用电子行政记录、企业生产经营记录、大数据等,完善数据解读机制和方法。推动大数据统计研究,充分利用国内统计学界在大数据领域的研究力量,开展大数据应用研究,与大数据企业、高校及科研机构开展广泛合作。

(二)统计机构转型,提升基本服务职能

海量大数据的采集与加工整理,对统计机构特别是基层统计机构的转型是个不小的挑战,传统统计工作方式必须做出相应的转型,由以往的催报、审核、汇总,转型为挖掘、分析、快速加工整理,建立专业的、相适应的、新的数据存储平台,对瞬息万变的大数据信息做出及时有效的挖掘整理,提炼出我们需要的数据,由以往的数据传输功能转型为信息反应与预警服务功能,以提升和丰富统计机构的基本服务职能。

(三)统计人员技能升级,夯实数据收集基础

1.加强统计人员业务能力培养

加强统计人员,特别是基层统计人员对大数据信息的挖掘、整理、甄别技术能力的培养;让统计人员熟练掌握先进的数据挖掘、分析整理工具与软件,提高每个人的专业技术能力;加强相应专业技术人才的引进与培养,夯实适应新技术、新业务的统计人才基础。

2.改变传统思维方式

打破原来固有的数据“收集、汇总、上报”传统的统计思维方式,向智能化数据收集、分析、加工、整理方式转变,以适应现代化的大数据采集方式。

3.提供政府统计分析思路

政府应推进大数据统计研究,为更好地开展大数据应用提供理论支撑,同时关注国外大数据统计应用动态,及时分析成果,推动数据共享,让更多的人使用更多的数据,在使用过程中对数据进行进一步加工,使数据赋予更多的信息。

■ 总结

综上所述,大数据时代,面对海量数据信息的爆炸式增长,传统的数据采集方式已很难适应。统计处和统计员应充分利用大数据,丰富统计资料的来源,优化统计方法,对现有统计资料进行统计分析。审计工作中也在积极探索,进行了一系列有益的尝试,推动大数据真正成为推动政府统计工作发展的强大动力,为政府部门和社会各界提供高质量的统计服务。

猜你喜欢

普查部门信息
立即全面普查 警惕二代粘虫发生
胡春华强调:确保脱贫攻坚普查取得圆满成功
102个中央部门公开预算过“紧日子”成关键词
2018年中国将开展第四次全国经济普查
订阅信息
展会信息
学习调查要“四会”
我国多部门联合行动打击网上造谣传谣行为
89家预算部门向社会公开
年终总结