APP下载

面向区域科技创新的竞争情报服务平台绩效评价研究

2022-03-11龚花萍张小斌周江涌

现代情报 2022年3期
关键词:评价指标体系绩效评价

龚花萍 张小斌 周江涌

摘要:[目的/意义]竞争情报服务平台是面向区域创新主体提供服务支持的重要载体,对其综合绩效进行评价研究,有利于充分发挥竞争情报的战略工具作用,提升区域竞争优势。[方法/过程]基于平台服务科技创新全视角,构建包括资源环境、服务技术、运行管理、情报服务、合作支持5个维度的面向区域科技创新的竞争情报服务平台绩效评价指标体系,利用层次分析法确定指标权重,设计评价规则计算综合得分。[结果/结论]以江西省竞争情报服务平台为实证对象,验证绩效评价指标体系和评价方法的适用性,并依据评价结果给出加强竞争性资源整合和产业创新环境建设、提高服务技术水平和运行管理效率的对策建议。

关键词:区域科技创新;竞争情报服务平台;绩效评价;评价指标体系

2021年的《政府工作报告》在论述“十四五”时期主要目标任务时强调,要坚持创新在我国现代化建设全局中的核心地位,把科技自立自强作为国家发展的战略支撑[1]。在创新驱动发展战略的大环境之下,科技创新已然成为推动区域高质量发展、提升国家核心竞争力的关键抓手和不竭动力。日新月异的科技进步和成效突出的创新驱动,催生了高校、政府机构、创新型企业以及公共服务机构等区域创新主体对于竞争情报服务的需求,面对我国竞争情报服务资源分散、利用率低等现实问题,基于国家战略指引,我国各省市相继开始建设综合性竞争情报服务平台。然而,围绕我国各区域竞争情报服务平台的快速发展,仍然缺乏一套能够对平台实际发展状态和绩效水平进行科学评价的指标体系,这在一定程度上制约着平台的发展和优化升级。因此,构建一套科学适用的、面向区域科技创新的竞争情报服务平台绩效评价指标体系,对于丰富竞争情报服务领域的理论研究成果,客观评价我国区域竞争情报服务平台在各维度的表现情况和综合绩效,从而有针对性地制定优化升级策略,更加高质、高效地服务区域科技创新具有重要的理论价值和现实意义。

1文献回顾

区域科技创新最初源于英国学者CookePN等[2]提出的区域创新体系的概念,是由高新企业、高等院校和科研机构等主体构成的区域创新组织体系的一部分。日益活跃的科技创新活动使得竞争情报成为除资本、技术、人才以外的又一种核心竞争力,而为了整合情报资源和提高竞争情报服务利用率,竞争情报服务平台应运而生。目前,国内外关于竞争情报服务平台的研究多集中于概念定义、架构功能、服务模式等方面,未见有关于平台绩效评价的研究,如李想[3]认为,区域竞争情报服务平台是以集成的信息资源为基础,以先进的信息技术为手段,以提升区域整体竞争力为目标,面向区域科技创新主体提供竞争情报服务的一种中介载体。基于以上情况,笔者扩大文献调研范围,发现在区域科技创新服务平台绩效评价方面的研究成果相对更加丰富。鉴于竞争情报服务平台和科技创新服务平台都是为区域科技创新提供服务支持的中介载体,为对本文研究提供一定借鉴和支撑,进一步对区域科技创新服务平台绩效评价方面的文献进行梳理,其中,李佳等[4]从平台绩效影响因素的视角出发,利用组合赋权法系统构建了区域科技资源共享平台绩效评价指标体系,并设计评价规则对黑龙江共享平台的绩效进行了评价;魏建良等[5]基于投入产出视角,分别构建面向基础研究、行业发展和区域创新的浙江省科技创新服务平台绩效评价指标体系,并运行DEA-Malmqusit指数分析法对3类平台的绩效进行了评价;廖少纲等[6]运用平衡计分法构建了“四维三层”结构的科技创新服务平台评价框架,并采用AHP-Delphi法确定了各指标的权重,最后以江西省科技创新服务平台为实证对象进行了绩效评价。

综上所述,竞争情报服务平台作为立足区域实际、推动科技创新的重要载体,在提升区域整体竞争力方面发挥着关键作用,然而目前关于竞争情报服务平台绩效评价方面的研究较少,结合区域科技创新背景对综合性竞争情报服务平台进行绩效评价的研究更是罕见,亟需构建一套系统完整的绩效评价指标体系来客观评价平台支撑科技创新的效果。因此,本文在借鉴区域科技创新服务平台相关研究成果的基础上,从区域竞争情报服务平台服务科技创新的全视角出发,系统构建“五维四层”结构的面向区域科技创新的竞争情报服务平台绩效指标体系,并利用基于专家判断的层次分析法确定指标权重,设计评价规则计算平台综合得分,为丰富竞争情报服务平台评价领域的研究成果,全面掌握我国各区域竞争情报服务平台发展现状,有效提升服务水平提供理论支撑与决策参考。

2评价指标体系构建

区域竞争情报服务平台综合绩效是对平台服务区域科技创新效果的定量表达,构建评价指标体系之前,必须全面系统地分析影响综合绩效的因素并明确它们的层次关系。鉴于区域竞争情报服务平台是根植产业创新环境,通过集成丰富的竞争性资源,利用先进的技术研发和高效的运行管理体系,联盟其他技术和情报服务平台并争取政府政策和资金支持,面向区域创新主体提供竞争情报服务的重要载体。一方面,它在基础架构、运行管理、服务目标等方面和区域科技创新服务平台存在很大的相似性;另一方面,它又极具对抗性、时效性、综合性、动态性和谋略性,有着区别于其他各级各类平台的鲜明特色。因此,本文在借鉴区域科技创新服务平台绩效评价相关研究成果的基础上,从竞争情报服务平台的竞争性特点、运行发展过程和服务科技创新的全视角出发,确定了包括资源环境、服务技术、运行管理、情报服务和合作支持5个维度在内的面向区域科技创新的竞争情报服务平台绩效评价指标体系,如表1所示。

3评价设计

3.1采用层次分析法确定权重

利用层次分析法衡量指标的相对重要性,并进行指标赋权的步骤,如图1所示。

Step1:获取专家判断数据。首先结合评价指标体系的构成和层次关系,借助决策软件Yaahp12.0构建层次结构模型,在确保模型合法性之后导出问卷。为保证指标赋权的可靠性,将设计好的问卷向江西省高校、创新型企业、公共服务机构和政府机构的24位专家一对一发放,受访专家主要包括长期耕耘于竞争情报領域的南昌大学教授和研究生团队人员、江铃汽车集团信息部和研发团队人员、江西省科技信息研究所、江西省科学院科技战略研究所和江西省图书馆的负责人员等。这些专家对竞争情报理论研究或服务实践有着丰富的经验,是竞争情报服务平台的深度体验者,能够比较真实地反映创新主体对于影响区域竞争情报服务平台绩效的各层要素的重要性度量。专家所属单位性质基本统计信息如表2所示。

Step2:构建判断矩阵aij并计算单层权向量。专家填写问卷时,采用Saaty提出的1~9标度法,分别对准则层、子准则层和指标层的要素进行两两比较,按照相对重要性选择标度值。回收专家问卷后将数据以Excel文件格式导入Yaahp软件,在群决策面板,将数据集结方式设置为计算结果集结,在这种集结方式下,软件会先运算各专家判断矩阵,然后将计算得到的排序权重算术平均值作为集结结果。

Step3:一致性检验。在计算得到单层权向量之后,还需进行单层一致性检验来鉴别判断矩阵偏离一致性的程度是否在容许的范围之内,一般通过计算一致性比率CR值来衡量判断矩阵偏离一致性的程度,经软件运算得各层指标的一致性比率CR值均小于0.1,因此认为构建的判断矩阵通过单层一致性检验。

Step4:计算各层指标权重。通过Step1~Step3得到各层权重及总排序,如表3所示,在计算得到组合权向量之后,还需检验指标权重的组合一致性,经过计算得出准则层和子准则层的组合一致性比率CR值分别为0.0359和0.0530,均小于0.1,说明构建的判断矩阵通过组合一致性检验。

绘制指标层总排序权重的簇状条形图,如图2所示。通过图2和表3可以较为直观地看出,各层指标相对于区域竞争情报服务平台绩效评价总目标的权重大小排序情况,在准则层中,资源环境维度占比最大,达到25.26%,情报服务维度紧跟其后,达到24.98%,说明在提升区域竞争情报服务平台绩效的过程中,整合优质丰富的竞争性资源、优化产业创新环境和提供更高效的情报服务最为关键。具体到三级指标来看,权重占比最大的是市场环境,达到8.22%,排在第二位和第三位的是企业竞争性资源和服务匹配有效性,分别占比7.05%和5.99%,这说明营造良好的宏观市场环境,加大基础研发投入,推动科技成果向现实生产力转化,提供更加专业对口的竞争情报服务,是提高竞争情报服务平台综合绩效的重要措施。

3.2基于規则的评价模型

通过综合衡量我国各区域竞争情报服务平台的实际发展状态、查找政府文件、检索CNKI年鉴库最新数据、基于规则的专家打分等方式收集相关定性和定量指标数据,以保证数据来源的可靠性。同时,为了帮助待评价对象更好地掌握其与发展较好的平台之间的差距,找到提升平台综合服务绩效的有效路径,以我国运行时间较长、服务成效较好的湖南省竞争情报网络协作平台、上海情报服务平台作为标杆,结合前文构建的评价指标体系,采用25分制5个等级设计具体的评价规则和标准,用于区域竞争情报服务平台绩效的综合评价,如表4所示,基于规则的具体评价流程如下:

Step1:收集可直接获取的定量数据。国家统计局每年发布的中国统计年鉴,对地区生产总值、专利数量、政府一般公共预算支出、技术市场交易额、R&D人员全时当量指标数据有详细记载,可通过CNKI年鉴库快速准确获取。

Step2:收集不易直接获取的定量数据和定性数据。由于情报平台初始投入额、科技成果转化服务量等指标涉及平台内部发展信息,很难直接获取,对于这类数据以及诸如信息共享频率、竞争情报服务的社会效益等定性数据,本研究邀请多位对竞争情报理论研究和服务实践有丰富经验的专家进行打分,将多位专家对相应指标的评分均值作为最终评分。

Step3:计算评价值。对照评分规则和标准确定指标层具体评价值后,采用线性加权法依次计算子准则层各指标评价值Uk(k=1,2,…,12),准则层各指标评价值Uv(v=1,2,3,4,5)和目标层即区域竞争情报服务平台绩效总评价值Ut,并依据总评价值所处区间,即好(20,25]、较好(15,20]、一般(10,15]、较差(5,10]和差[1,5],判定区域竞争情报服务平台的综合绩效水平。

4实证研究

4.1评价对象选取与数据来源

2005年,江西省教育厅在南昌大学图书馆正式设立“CALIS江西省文献信息服务中心”,作为江西省集资源整合、信息服务、技术支持和推广培训于一体的中心机构,它与江西省科学技术信息研究所、江西省科学院科技战略所等情报服务机构共同组成了江西省竞争情报服务科技创新的中坚力量,为研究方便,本文将这些情报服务机构统称为江西省竞争情报服务平台。江西省竞争情报服务平台在支撑政府决策、服务科技创新和推动产业发展等方面发挥着重要作用,但由于缺乏科学评价机制,平台的服务成效难以准确把握,此时建立一个科学适用的、面向区域科技创新的竞争情报服务平台绩效评价指标体系,对于促进江西省科技进步和经济发展有着重要意义。考虑到江西省竞争情报服务平台评价的现实需要和数据收集的易得性,本文将江西省竞争情报服务平台作为研究对象,进行服务绩效评价的实证研究。面向区域科技创新的竞争情报服务平台绩效评价指标体系中同时含有定量指标和定性指标,部分可直接获取的定量指标的数据来源主要来自统计年鉴;其他不易直接获取的定量指标和定性指标的数据则通过在竞争情报理论研究和服务实践领域有丰富经验的多位专家的评分均值获取。

4.2评价值计算

对于可直接获取的定量数据,通过查阅《中国统计年鉴-2020》获取,并对照评价规则计算评分结果;对于其他不易直接获取的定量指标和定性指标,邀请10位长期耕耘于竞争情报服务领域或熟悉平台工作的专家基于设计好的规则进行打分,取平均值作为评分结果。基于评分结果和权重占比,利用线性加权法首先计算子准则层12个指标的评价值,其次计算准则层5个指标的评价值,最后计算江西省竞争情报服务平台绩效评价总值:Ut=17.3,具体结果如表5所示。

4.3结果分析

综上所述,江西省竞争情报服务平台绩效评价的总得分为17.3,位于区间(15,20]内,这说明江西省竞争情报服务平台目前总体绩效处于“较好”水平。具体来看,准则层5个维度的评价值分别为11.4、18.2、17.3、20.5和20.5,反映出平台目前资源环境、服务技术、运行管理、情报服务与合作支持维度的评分分别处于“一般”“较好”“较好”“好”“好”的水平。在资源环境对应的子准则层维度中,产业创新环境和区域竞争性资源评分均处于“一般”水平;服务技术维度中,情报采集能力、情报协同能力和情报处理能力评分处于同一区间,均为“较好”水平;运行管理维度中,组织管理和运行条件的评分也均落在水平为“较好”的区间内;情报服务维度整体水平明显高于前3个维度,服务数量和质量评分均处于“好”的水平,服务成效也以十分接近20的评分值落在“较好”的区间内;合作支持维度整体表现最佳,联盟合作和政府支持评分均超过20,同时落在“好”的区间中。

从以上评分结果可以看出,一方面,江西省竞争情报服务平台拥有较好的运行条件,在地方政府的强大财政政策支持下,呈现出比较迅猛的发展趋势,并较为注重竞争情报服务的数量、质量和成效,与多个国家级、省市级竞争情报服务平台和科技创新服务平台建立了紧密的联盟合作关系;另一方面,江西省竞争情报服务平台目前发展空间巨大,在资源环境、服务技术、运行管理层面均需进行有效的升级与优化,从而不断提高江西省竞争情报服务平台服务科技创新的综合绩效。

基于上述评价结果,结合江西省竞争情报服务平台的发展现状与需求,提出如下建议:

1)加强竞争性资源整合和产业创新环境建设。面对日新月异、纷繁复杂的科技创新环境,江西省竞争情报服务平台亟需借助大数据、云计算、人工智能和物联网等新一代信息技术动态监测平台目前所集成的政府、产业和企业竞争性资源情况,在扩大地区生产总值的基础上,逐步提高政府一般公共预算支出在基础研发的投入比例,争取形成一批高质量的研究成果;同时,还需要大力推动专利等科研成果向现实生产力转化,為形成良好的产业创新环境提供坚强保障。

2)提升服务技术水平。初始情报源需要经过采集、处理和协同等步骤,才能成为多方创新主体共享的情报产品,任何一个环节的薄弱都将导致情报服务效果大打折扣。因此,江西省竞争情报服务平台需在采集工具的现代化和情报源拓展方面不断进步和突破,以实现情报采集能力的提高;同时还应完善信息和技术交流机制,促进创新主体之间信息互通,成果共享;另外,推广使用统一数据标准和信息可视化技术是促进资源和成果共享的重要手段,有必要加强探索和建设。

3)提高运行管理效率。江西省竞争情报服务平台必须充分利用好初始投入资金,不断扩大集成资源的数量和质量,加强资源库建设;同时平台管理相关部门需在不断完善管理机制的基础上,加强对情报人员的培训,深化人才培养、组织培训、员工激励的体制机制建设,加快推进人才、资源和制度的有机融合,不断提高平台组织管理水平和运行成效。

5结语

鉴于区域竞争情报服务平台绩效评价领域的理论研究匮乏以及提升竞争情报平台服务区域科技创新能力的现实需要,为综合掌握我国各区域竞争情报服务平台的运行与发展现状,对区域竞争情报服务平台绩效进行评价具有重要意义。因此,本文基于竞争情报服务平台的竞争性特点、运行发展过程和服务科技创新的全视角,构建了包括资源环境、服务技术、运行管理、情报服务、合作支持5个维度的面向区域科技创新的竞争情报服务平台绩效评价指标体系,并利用基于专家判断的层次分析法进行指标赋权,设计评价规则进行评价值计算,再以江西省竞争情报服务平台为例进行实证研究。实证结果表明,本文构建的评价指标体系和设计的评价方法能够对我国各区域竞争情报服务平台绩效进行科学评价与定量分析,其应用不仅能丰富竞争情报服务平台评价领域的理论研究成果,还有助于我国各区域竞争情报服务平台明确掌握自身发展与服务中的优势与不足,为平台优化升级与发展规划的制定提供科学的方向指引与依据。

面向区域科技创新的竞争情报服务平台绩效评价研究是一个较新的研究视角,可供查阅、借鉴的资料有限。因此,本文在构建面向区域科技创新的竞争情报服务平台绩效评价指标体系时,除了考虑竞争情报服务平台鲜明的对抗性等特点以及平台运行和发展过程中可能的影响因素外,还采用与区域科技创新服务平台进行类比迁移的方法,未来可以考虑结合社会网络分析、粗糙集理论等方法进行指标体系的约简和优化。另外,本文在进行实证研究时只选取了江西省竞争情报服务平台,调研范围有限,今后可以考虑扩大调研对象的范围,进一步验证评价指标体系和评价方法的适用性和可推广性。

3628500338299

猜你喜欢

评价指标体系绩效评价
企业绩效审计评价指标体系的有效构建探讨
翻转课堂下学习绩效评价模型的构建
民办高职院校评价指标体系研究
工程咨询企业可持续竞争力评价指标体系研究
新常态下大型煤炭企业生态竞争力实证分析
基于BSC的KPI绩效评价体系探析
非营利组织绩效评价体系的构建
气象部门财政支出绩效评价初探
公立医院绩效评价体系的思考
绩效评价及其政策选择