APP下载

自动土壤水分站资料质量控制及其相关关系分析

2015-10-21单新兰张吉周李新庆张磊

安徽农业科学 2015年3期
关键词:相关关系土壤水分质量控制

单新兰 张吉周 李新庆 张磊

摘要 以距离自动土壤水分站最近的人工观测地段的历史土壤水分资料为依据,开展对应的自动土壤水分站观测资料的质量控制阈值研究。统计有土壤水分观测任务的各台站近30年10~50 cm深度5个层次人工观测的土壤重量含水率最大、最小值,且分析与本站凋萎湿度和田间持水量的相关性,作为自动土壤水分站所属区域片上的极值,完成区域极值检查规则的定义。通过分析人工站历年极值序列的均方差确定条件阈值范围和安全指标,实现该区域内自动土壤水分站资料的实时质量控制;通过邻近站资料对比、时序检查等自检方法完成人工干预质量控制。

关键词 土壤水分;质量控制;閾值;相关关系

中图分类号 P413.2;S152.7  文献标识码 A  文章编号 0517-6611(2015)03-236-02

Quality Control of Automatic Soil Moisture Data and Correlation Analysis

SHAN Xinlan, ZHANG Jizhou, LI Xinqing et al

(Ningxia Meteorological Information Center, Yinchuan, Ningxia 750002)

Abstract Based on soil moisture data of artificial observation section nearest automatic soil water station, the corresponding soil moisture station data quality control threshold was carried out. The maximum and minimum soil moisture content of 5 levels artificial observation in 10-50 cm depth in recent 30 years of each station were studied, the correlation with wilting moisture and field capacity was analyzed. Through analysis of the mean square deviation of artificial station historical extreme sequence determined the threshold value range and safety indicators, to implement the regional soil water station observation data of automatic quality control.

Key words Soil moisture; Quality control; Threshold; Correlation

基金项目 宁夏气象局2012-2014项目“宁夏农业气象自动土壤水分站资料质量控制及应用研究”。

作者简介 单新兰(1962-  ),女,宁夏银川人,高级工程师,从事气象观测数据应用研究。

收稿日期 20141204

土壤水分观测资料是开展防灾减灾气象决策服务以及农业干旱监测、预警与防御的重要依据。自动土壤水分站开展土壤水分监测具有实时性及连续性强、获取方便、节省人力等特点,在各省区得到快速发展。宁夏气象局在全区共建成了24套DZN-3型自动土壤水分观测站,有22套仪器安装在固定地段,2套仪器安装在作物地段,均已能自动开展土壤水分的连续观测[1]

自动土壤水分站的生产厂商没有提供相应的资料质量控制、数据分析应用系统,资料质控、分析、应用尚未深入开展,造成自动土壤水分观测资料的业务应用受到较大限制,急需探讨适合宁夏农业气象业务应用的资料质量控制方法及开发相应的应用软件系统。根据中国气象局对各类气象资料的传输考核办法及资料共享应用的实时性要求,以“传输时效和资料共享时效不受影响”为原则,开展自动土壤水分资料质量控制阈值研究工作。笔者在此以距离自动土壤水分站最近的人工观测地段的历史土壤水分资料为依据,开展对应的自动土壤水分站观测资料的质量控制阈值研究。

1 自动土壤水分站实时资料质量控制规则定义

1.1 质量控制原则及流程

以“传输时效和资料共享时效不受影响,保障原始资料库安全”为设计原则,采用Microsoft SQL Server 2008完成质量控制应用数据库设计与实现。采用C#设计后台数据入库软件,实现自动土壤水分站实时资料质控数据自动入库。研究自动土壤水分观测资料质量控制方法,确定阈值范围和安全指标、数据实时监控和自动标注、人工干预处理流程。初步建立软件自动处理和人工干预相结合的质量控制业务流程,将台站极值检查、区域极值检查、时序检查(内部一致性)在资料入库后共享前完成,质量控制对象为资料要素库。

1.2 质量控制规则定义

1.2.1 实时数据资料库要素质控规则。

DZN3型自动土壤水分观测仪器是一种利用频域反射法原理测定土壤体积含水量的自动化测量仪器。根据土壤水文、物理常数和相关公式可计算出土壤重量含水率W(%)、土壤相对湿度(%)、土壤水分总贮存量(mm)和土壤有效水分贮存量(mm),具体规定见《自动站土壤水分观测规范》[2]。以上实时要素数据均保存在中心站服务器内。

通过自动土壤水分资料和相应地点的土壤水分人工观测资料分析,以完成自动土壤水分站小时整点平均土壤水分重量含水率要素值为质量控制索引要素即可。平均土壤水分重量含水率气候极值规则的定义根据地形、灌溉条件分布,结合自动站点位置分布等。历史极值采用历年土壤水分人工观测历史资料,以人工固定观测地段为中心,土壤水分自动站区域片内经纬度靠近人工站划分,实现自动站区域极值规则的定义。

1.2.2 质量控制方法时序及控制结果和对应的质控码。

质量控制方法有界限极值、区域极值检查、时间一致性检查、内部一致性检查[3]

质量控制时序包括刻度界限极值检查、区域极值检查、时间一致性检查、内部一致性检查(10~50 cm 5个深度层次)。

根据所用质量控制方法,确定:可用、可疑、不可用3种质量控制结果,对应的质量控制码分别为2、3、4(0,未处理;1,空记录)。自动土壤水分观测数据质量控制流程如图1所示。

图1 自动土壤水分数据质量控制流程

2 自动土壤水分站实时质量控制方法内容

实时资料质量控制主要包括完成自动土壤水分站观测数据理论刻度值0~100%范围内的界限值检查及所在区域内的阈值检查,针对土壤10~50 cm 深度5个土层的实时整点平均土壤重量含水率W。

2.1 实时数据检查

资料入库后主要完成台站极值、时变检查、内部检查。质量控制结果包括未处理、空记录、可用、可疑(超出阈值范围)、不可用(超出理论刻度范围及资料长期没有任何变化)五类。

2.2 缺测值检查

根据要素所在位置完成缺测值检查,缺测用“1”表示。将检查出的缺测记录写入日志文件,并做异常数据的备份。

2.3 人工干预检查

未通过实时检查的疑问数据,自动预警,提醒人工干预:正确性认定或记录删除。

根据土壤水分阈值范围和安全指标,对数据内容进行质量检查,确定已入库数据为可用、不可用(资料长期没有任何变化属不可用的资料)、可疑3种状态。对于可疑数据进行人工干预审核(图2)。采用本站与周边邻近站当前时次至前8个时次要素变化曲线值对比判断,曲线长期没有任何变化、急剧下降的情况属于不可用的资料范畴,如果上下层出现高低起伏巨大的情况,层次间没有关联首先查看降水量情况,根据经验判断是否也属于可疑数据。用要素时序变化线与邻近站点比较自检确定不可用数据的,进行定期删除。

图2 人工干预疑误数据界面

3 自动土壤水分站实时质量控制阈值的安全性

3.1 人工站极值规则

根据宁夏行政区划、地形分布、小气候特点,通过干旱及灌溉条件和土壤湿度的关系,结合自动站点分布位置定义,在空间上有相关性,即经度、纬度接近,选择了宁夏有人工土壤水分观测任务的14个站点。统计各站历年30年10~50 cm 5个层次的平均土壤重量含水率的最大值Wmax、最小值Wmin,且考虑本站土壤水文特性值、《农业气象观测规范》观测允许误差范围,作为所属区域片上的极值,完成区域极值检查规则的定义,实现该区域片上所有自动站点观测极值的检查。

3.2 质量控制阈值安全性确定

由于自动土壤水分站建站采集资料时间短,资料无法形成有效的极值序列。因此,自动站极值以邻近的人工土壤水分观测资料历史极值为基础,考虑其所处地理位置、探测环境、灌溉等因素,根据本站凋萎湿度和田间持水量(fc)、《农业气象观测规范》所需允许的测量±5%误差[4]范围等进行订正后作为该自动站质量控制极值与可选择均方差倍数的条件阈值范围,其计算公式为:

W=Wmax+5%Wmax+X|Smax|、

W=Wmin-5%Wmin-X|Smin|(当Wmin>fc Wmin=fc),

其中,S为历年极值序列的均方差。

自动站阈值的确定则是在人工观测站点气候界限值的基础上,采用极值序列标准差的倍数作为界限值的参考订正依据[5],結合强降水天气影响,通过分析实测情况生成气候界限值指标。

3.3 阈值界限检查

3.3.1 理论刻度范围界限值检查。

平均土壤重量含水率W刻度界限值范围在0%~100%,超越范围的数据判为错误(资料不可用),规则为:

0

3.3.2 自动站区域极值检查。

区域极值的确定是人工观测站点气候极值的基础上,采用极值序列均方差S的X倍作为界限值的参考订正依据,形成土壤水分区域条件阈值,质量检查算法如表1所示。

表1 小时土壤含水率界限值、极值检查算法

方法名称算法质量控制码

界限W>100F(W)=4

检查W<0F(W)=4

极值W>Wmax+5%Wmax+X|Smax|F(W)=3

检查W

4 质量控制阈值测试结果

各省自动土壤水分实时质量控制工作在探索中,初步实现了显性错误质量控制。由于所借鉴的经验少,在此质量控制阈值的确定方法主要借鉴了李志鹏等利用地面区域站资料极值序列获取自动站数据实时质控阈值经验[5]

根据质量控制阈值安全性确定的土壤重量含水率阈值计算模式为:

极值± 5%极值 ±X×序列均方差;

通过计算获取的质量控制阈值进行了测试检查,资料时段为2012年9月10日11:00~2013年9月27日13:00,总记录291 393条。

4.1 疑误数据测试结果

计算模式中当X取1,即1倍的偏差值时疑误数据结果与X取2即两倍的偏差值,不同深度层次相差0.01%~0.90%;X=3时结果为0.01%~3.08%(表2)。

4.2 错误数据测试结果

错误数据测试到一个站点10 cm值个别时次>100%判断为错误记录,占总记录0.006%。

通过表2结果分析表明,选取人工观测站极值序列偏差值参加

计算阈值是可行和安全的。

表2 疑误数据占总记录百分率

深度

cmX1=1时

百分率∥%X2=2时

百分率∥%  X3=3时

百分率∥无偏差

%X1-X3

百分率∥%

1019.0618.2817.8324.501.23

206.136.126.129.300.01

3015.1614.1812.0817.003.08

4011.3611.0710.6712.700.69

5011.3510.7310.1413.101.21

5 小结

(1)土壤水分自动站资料仅局限于本地应用入库前的质量控制,而上传中国气象局的资料没有进行质控。

(2)资料随降水因子时变检查尚未考虑,土壤水分自动站无降水要素采集也是解决此问题的难点。

(3)宁夏土壤水分自动站业务根据需求在增设安装,因此,质量控制工作同样需要根据实际情况补充完善,更需要投入业务试运行检验优化。

参考文献

[1] 宁夏自动土壤水分观测站试运行评估报告[R].宁夏气象局,2012:1-7.

[2] 自动土壤水分规范(试行)[S].中国气象局综合观测司,2010:1-3.

[3] 孙林花,李仲龙,杨斌,等.甘肃省区域站实时气象资料质量控制与问题分析[C]//第二届全国气象观测技术经验交流会文集.北京,2012:39-44.

[4] 国家气象局.农业气象观测规范(上卷)[M].北京:气象出版社,1993:78-83.

[5] 李志鹏.张玮.黄少平,等.自动气象站数据实时质量控制业务软件设计与实现[J].气象,2012,38(3):373-375.

猜你喜欢

相关关系土壤水分质量控制
地区公路投资与经济增长关系探究
西藏高原土壤水分遥感监测方法研究
以数据新闻获奖作品探析数据新闻特征
不同覆盖措施对枣园土壤水分和温度的影响
植被覆盖区土壤水分反演研究——以北京市为例
土壤水分的遥感监测方法概述