APP下载

基于一网通办的城市政务数据采集与资源共享交换平台

2020-02-21李君朱涛

电子技术与软件工程 2020年13期
关键词:一网通办数据采集

李君 朱涛

摘要:本文针对政府数据协调困难、数据维度不足、实时高价值数据无法获取等痛点,提出一种“一网通办+政务资源共享交换平台”的城市政务数据采集思路,并定义一款通用的场景驱动数据采集工具。本文是对现有标准的政务资源共享交换平台政务数据采集及共享交换思路的补充扩展,在合法合规的前提下,可提升政务数据的获取效率,有助于获取高质量、实时性的政务数据,从而实现构建城市大脑坚实数据底座的目标。

关键词:一网通办;数据采集;共享交换平台;智能服务接口

1 政务数据现状

如果将数据资源形象水资源,那么数据资源的采集至存储过程对应引水过程。政务数据的引水伴随城市大脑的建设进程,以所在易华录公司为例,从2019年9月份成都市金牛区首个城市大脑项目建设开始,己在徐州、津南、大连各地全面快速开展。目前包括易华录在内城市大腦建设过程中,政务数据引水主要依托于政务资源共享交换平台工具,或者自建数据资源平台对接同步政务资源共享交换平台内的数据,该平台内的数据资源主要来自委办局挂接的政务数据、视频AI解析数据、互联网及其他渠道数据。

1.1 引水工具

政务资源共享交换平台,作为政务数据引水的核心工具,支持API、数据库表、上传文件等方式接入结构化及非结构化数据。通过制定统一的交换流程及标准,实现了各委办局间数据资源共享交换的通道。并通过级联协议,形成国家平台、市级平台、区县平台三级共享结构,政务资源共享交换经二十余年发展,接入及数据交换流程均已形成标准,也是各地大数据湖的标配,政务资源共享交换平台通常架构在大数据平台底座,提供政务目录、数据清洗转换、数据治理等功能,从而构建政务数据的资源池,参考系统架构如图1所示。

基础设施层:在云环境基础上建设政务信息资源共享交换体系。

数据资源层:包括政务信息资源共享交换平台、基础库、主题库、部门库等。

应用支撑层:支撑整个政务信息资源共享交换体系的数据高质量汇聚、与共享开放。包括数据治理平台、服务管理平台、信息资源目录系统、大数据平台。

数据服务层:基于数据资源层、应用支撑层的全面支撑下,建设政务数据资源管理中心、信息资源共享网站和整合可视化平台服务。

应用场景层:提供共享交换、数据治理、支撑城市大脑驾驶舱、级联省市平台等应用服务。

1.2 主要问题

当前,政务资源共享交换平台的建设及政务资源数据编目工作通常由大数据局、网信办等相关单位牵头。各委办局按统一标准填报数据盘查清单配合完成政务数据盘查和四清单梳理工作、数据编目及资源挂接等工作,通常也有相应的政府考核制度考察委办局的配合度。

图2是某项目中国政务数据资源接入情况。

分析政务引水数据过程及结果,暴露以下问题:

(1)信息资源目录数量虽然较多,但整体数据容量、数据条数均较少;

(2)主要以文件类资源为主,超过95%,API及库表类数据资源极少;

(3)文件类资源以PDF、Word、Excel等格式为主,此类资源基本以系统导出报表、人工编写方式形成,同一目录挂接的不同时间段的内容格式差异较大,无法模板化;

(4)由于库表、API类资源较少,因此数据提取过程需要人工参与,无法保证数据接入的实时性。

政务资源共享交换平台引水效果不理想,分析其深层原因,主要有以下几点:

(1)部分地区,省级、市级垂直系统比例较高,委办局用户分配账号只有系统使用权,不具有数据所有权。数据所有权由上级部门掌握,按政府现行体制及数据共享流程,本部门极难协调获取到自身工作产生的业务数据

(2)大部分委办局信息系统使用普及度不高,或者非其业务核心关注点,不熟悉自建IT系统,部分系统运行周期很长,厂家运维力度不够。而政务共享交换流程过于技术化,没有专业信息化团队支持,极难完成API、库表等类资源编目、挂接;

(3)主观层面,委办局共享意愿不强,跨部门数据融合、数据分析挖掘、辅助业务决策等理念还较薄弱,同时各委办局也存在自身信息泄露、系统受影响等方面顾虑。

总结起来,单独依赖政务资源共享交换平台引水,因委办局“不能”、“不会”、“不愿”、“不敢”等方面四点原因,即使区府办/大数据下发红头文件将政务资源盘查、编目定为督办和考核项,仍达不到预期政府数据接入效果。

由于政务数据种类较少、数据实时性难以保证等问题,除影响城市数据湖引水效率,更重要的直接关系到易华录城市大脑业务的丰富度、实战性,也影响到核心业务闭环。

虽通过定制开发的爬虫服务技术手段,能够从委办局的系统网站定时提取部分数据,但因其不合规同时对被访问的系统增加额外计算压力双层问题,只能在小范围使用,无法彻底解决以上政务引水问题。

2 “一网通办”引水模式

2.1 网格通的启示

之前在某项目中研发了一款一网通管应用软件”网格通“,网格通是通过小程序端、APP端和Web端以及相关技术支撑平台的建设,建立了人口信息、人事物关联信息的动态数据库,实现了区域房屋、人员、户籍、车辆、企事业单位等网格内重点管理服务对象的实时动态管理,属于政府一网统管的范畴。本软件服务与网格中心社会治理、实现网格化精准管理、提升网格员的基层管理和服务效率的需求。

在本项目同时有效汇聚了城市基层的社会数据,为城市管理者快速分析城市人口总量、结构和分布,更加准确把握城市需求结构、城乡结构、区域结构和产业结构的发展态势提供了强有力的支持,系统上线以来采集到数据情况,如表1所示。

同时,系统与本地企业大数据资源池“要素共享平台”进行企业基础数据关联,采集到的全区企业数据10万+,目前己采集到人口数据,以及9+x特殊关照、重点关注、重点青少年等21类城市关键“人、地、事、物”的详细要素信息。

网格员通过APP、微信小程序随时录入、更新、删除各类基础数据,从而确保了数据的准确性、实时性,同时网格通与区级政务资源共享交换平台数据库打通,网格通中关键数据变化,政务平台的数据采集服务自动识别网格通中各类数据的增、删、改变化,将变化的数据信息实时同步至政务平台的数据库,进而构建了本项目区级的人口基础库、人口关系图谱并构建城市驾驶舱人口大数据主题板块。

2.2“一网通办”概念

“一网通办”,是指依托一体化在线政务服务平台,通过规范网上办事标准、优化网上办事流程、搭建统一的互联网政务服务总门户、整合政府服务数据资源、完善配套制度等措施,推行政务服务事项网上办理,推动企业群众办事线上只登录一次即可,全网通办。其核心理念为以用户办事需求为立足点,打破各部门的数据壁垒,以整体政府的形象为公众提供高度、线上线下一体化的联动服务。

2018年,在上海政务服务工作中首次提出一网通办解决方案,并在2019年上海举办的全国一体化在线政务服务平台全面对接暨现场交流会,明确提出在全国范围内全面推广。

图3为参考一网通办的总体框架。

如图3参考架构中,包括前臺、一网通办中台及后台三部分。其中前台面向企业和个人提供全生命周期服务,例如就业创业、民生保障、交通旅游、养老服务等等,并提供线上Web及移动门户、线下智能化办事设备等服务模式。“一网通办”中台分为与前台对接的窗口受理平台及与部门业务系统对接的应用支撑平台,将原先分布在不同委办局的业务系统事项进行归集、统一受理,并与委办局后台系统打通数据及业务审批通道,实现全流程闭环管理。

2.3 引水策略

网格通案例说明,业务场景驱动,作为政务数据引水的一种手段,可作为政务资源共享交换平台类工具引水的有力补充,在满足相关委办局自身业务效率提升等需求的情况下,有效解决1.2中反应各类政务引水痛点。

政府委办局众多,自建业务系统更多,为加速推进新型智慧城市及大脑建设效率,真正达到优政、惠民、兴企的建设秒,除引入政务领域优秀生态合作伙伴协作推进外,建议布局核心业务方向,加大引水类行业应用产品研发力度,重点方向建议如下:

(1) 一网通办类,对标上海一网通办样板、天津津心办,提供惠民、兴企类服务;

(2) 一网统管类平台,对标天津津治通,后续网格通可以扩大业务范围,打通四大城市治理领域,包括大建管、大平安、大市场、大民生,重点突出AI智能感知,实现事件自动感知、人工或半自动指派、承办、AI分析解决情况、审核实现业务闭环;

(3)政务五大基础数据库相关方向,人口、法人、电子证照、地理信息、社会信用。

以上方向均具有国家政策热点、多系统业务及数据融合、系统数据价值密度高等特点。2.4引水工具需求

建设一网通办、一网统管等引水工具中,主要面临以下需求:

(1)因需对接多个异构系统,为降低对接阻力,引水工具因尽量减少各委办局系统的额外改造成本;

(2)为实现最多跑一次、数据多跑路等一网通办服务目标,整合各类服务接口,具备业务组织能力;

(3)应具备高效的系统接口对接、业务编排能力,能够快速对接新系统、新业务的对接需求。

3 智能接口模块定义

为解决2.4中一网通办、一网统管引水工具中公共需求,在无原系统厂商配合下高效实现数据融合及业务能力编排,初步定义智能接口模块,总体架构如图4所示。

智能接口模块对接委办局系统内部的API服务接口(也包括其网站端自用的服务接口),内部提供了工具化的接口配置工具、接口管理中心、监控中心、业务编排引擎,对外提供包装的API服务接口及数据库表两类服务。可支撑一网通办、一网通管等多系统业务整合需求,并与资源共享交换平台打通,实现政务数据引水目标,支撑城市大脑业务。智能接口模块基于微服务技术架构,采用容器化部署模式,可基于业务复杂度、系统规模等做到计算架构弹性伸缩。

3.1 核心功能

3.1.1 接口配置工具

提供图形化配置化工具,输入用户名、密码认证信息,浏览器访问委办局系统时,可智能识别系统后台接口,并快速完成对外封装接口定义。

3.1.2 资源管理中心

提供对外提供API的分组管理、API管理、对外客户端应用管理及系统运维等能力。

3.1.3 监控中心

包括服务监控、应用统计及告警管理等功能。

其中服务监控主要从API类别、时间范围、访问用户、分组等各维度统计API被调用情况;

应用统计是从客户端应用的纬度出发,展示应用调用了哪些API、调用次数、平均响应时间等;

告警管理主要针对API访问异常,提供告警规则定义,例如告警级别、告警处罚条件。

3.1.4 业务编排引擎

将多个后端服务通过编排的形式封装成一个服务暴露给客户端应用,也是实现一网通办的技术基础。

3.1.5 任务调度引擎

可定义任务调度策略,周期性增量或全量调用API获取数据,输出至指定中间表中。

3.2 功能价值

智能接口模块主要价值在于:

(1)与业务系统弱耦合,方便系统能力集成,较好解决委办局IT信息化能力不足问题;

(2)提供体系化接口管理及监控功能,通过智能化的API生成,实现原系统对外服务能力;

(3)通过接口实现数据流转,打通不同系统间信息孤岛,同时结合灵活的业务编排能力,避免信息重复录入,有效支撑一网通办各类申请业务,降低办理周期;

(4)借助调度引擎,在外部无感知情况下,可输出政务关键数据至中间表,结合政务资源共享交换平台的数据接入、清洗、转换能力,实现数据同步及政务引水目标。

3.3 难点问题

本模块设计主要参考了北大燕云小数盒子、明行科技智能接口产品设计,但各家产品在项目具体应用时,无法完全覆盖所有业务系统接口的集成,仍需数据开发工程师以定制爬虫服务以及申请委办局协调支持。

4 工作推进思路

(1)现有网格通只局限与网格中心各级用户,应拓展数据业务领域,在津南项目上尝试融入城管、公安等其他社会治理板块,构建津南区的一网统管APP应用;

(2)建议引入生态,积极尝试布局一网通办业务领域,快速提升自研产品能力;

(3)对智能接口服务业务编排引擎、可视化接口配置模块做深入技术预研,初期与生态加强合作,支撑好网格通、一网通办的数据接口集成、业务编排等需求。

5 总结

政务数据引水是开展城市大脑、繁荣数据要素市场及相关交易平台建设的前置关键工作,本文针对数据湖当前引水的困境,提出政务数据场景引水的思路、一网通办等引水切入点及公共的智能接口模块需求,是现有政务资源共享交换平台引水能力的补充。借助场景引水合法合规,数据在政务平台汇聚,实现真正的政务数据资源池,另智能接口模块也能够提升系统集成对接效率,规避对接过程数据所有权、技术层、主观性各方面问题。

参考资料

[1]王璟璇,杨道玲.政府网上办事服务的模式分析及整合建议[J].电子政务,2015 (06).

[2]张玺.“一网通办”:政务服务供给新阶段[J].党政论坛,2019 (08).

[3]华先胜,黄建强,沈旭,付志航,赵一儒,黄镇,王潇宁.城市大脑:云边协同城市视觉计算[J].人工智能,2019 (05).

[4]彭言海.基于云计算的政务信息资源共享交换与整合平台的研究与实现[D].郑州大学,2017.

作者简介

李君(1982-),男,吉林省图们市人。天津大学工学硕士毕业,高级工程师。研究方向为大数据、人工智能等新一代信息技术及产业化应用。

朱涛(1970一),女,江苏省江阴市人。大学本科学历,工程师。研究方向为大数据及产业化应用。

猜你喜欢

一网通办数据采集
2020年年底前河北政务服务事项全面实现“一网通办”
上海政务“一网通办”门户上线
上海“一网通办”移动端试运行
我省发布“互联网+政务服务”试点实施方案
基于开源系统的综合业务数据采集系统的开发研究