李仁义李 曦卞 勇马宇坤潘广悦曹 虎刘 贞刘 磊（. 中国兵器工业新技术推广研究所；. 国防科工局协作配套中心；. 中共中央党校研究生院）

国防科技成果推广成熟度评价体系研究

李仁义1李 曦2卞 勇1马宇坤1潘广悦1曹 虎1刘 贞1刘 磊3
（1. 中国兵器工业新技术推广研究所；2. 国防科工局协作配套中心；3. 中共中央党校研究生院）

国防科技工业作为战略性高技术产业，事关国家安全，承担着为国防现代化提供先进武器装备的重任。而武器装备的研发和升级换代必须建立在一定的科技成果积累的基础上，如美军装备建设的“三七”理论（新武器装备研发所需科技成果中的30%为新开发，剩余70%应为已应用的科技成果）就是这种经验的归纳和提炼，并已得到了充分验证。所以，各类先进、成熟的科技成果在武器装备研制中的推广应用是增强军工核心能力建设，提升武器装备科研生产水平，加速先进国防科技工业建设，保障国家安全的有效途径。

近年来，我国的国防科技成果推广转化工作取得了显著的成绩，对于积极推动国防自主创新能力提升，加快军工核心能力建设起到了积极作用，但其中也存在着一些问题，制约了科技成果推广的示范验证作用，主要体现在适用于推广转化的国防科技成果评价机制尚不健全等方面。因此，开展国防科技成果推广转化工作首先应对所推广的科技成果能否推广进行判断。国防科技成果推广转化工作有其自身的特点，要求拟推广应用的科技成果必须具有一定的先进性、成熟性、适用性，而有关如何评定国防科技成果推广成熟度的相关标准目前尚缺乏统一的规定，实施推广转化的技术成熟程度尚未明确。这一方面导致在实际科技成果选择过程中，选择了一些推广成熟度不高、基础不好的科技成果，影响了推广项目的示范验证效果；另一方面，也有很多成熟的技术成果由于缺少科学的筛选依据，无法对科技成果的推广适应性作出科学的评价，从而无法针对武器装备和工业生产的急需在行业内实现先进科技成果的共享。

因此，建立科学、规范的国防科技成果推广成熟度评价体系是促进国防科技成果推广转化工作科学发展，最大限度地发挥国防投资的溢出效益，提升武器装备科研生产整体水平的重要制度保障。本文旨在通过总结分析国内外科技评价、国防科技成果评价的理论、方法，结合我国国防科技成果推广转化工作的实际需求，利用层次分析法，研究建立定性与定量相结合的国防科技成果推广成熟度评价体系，并制定出相应的评价标准，为我国国防科技成果推广转化工作的科技成果评价提供指导、借鉴。

相关内涵界定

“国防科技成果”是指在国防科研和武器装备研制及与其密切相关的工作中所产生的科学技术成果。国防科技成果的取得是按照国防科技发展战略、发展规划、发展计划，通过研究、开发等一系列工作环节完成的。

“国防科技成果推广转化”是指国防科技工业管理部门为加强国防建设和提高生产力发展水平，对国防科研和武器装备研制（包括预先研究、型号研制等）中所产生的具有实用价值的科技成果所进行的后续试验、开发、应用、推广，将国防科技成果应用于其它武器装备型号科研生产的活动，即所推广的科技成果源于“军”，开展“军转军”的推广转化活动。

“国防科技成果推广成熟度”是指国防科技成果跨军工行业、跨武器装备型号推广应用的成熟程度。国防科研生产具有战略性、全局性等特点，国防科技成果的推广转化不仅要考虑成果本身的成熟性，更要考虑成果对国防全行业的支撑性、引领性，以及推广的适用性等诸多特性，综合考量成果推广转化的可行性。

任何一项国防科技成果都必然有一个发展、成熟的过程，具有一定的规律性，国防科技成果的应用要以其成熟性、功能性、环境适应性等为依据。其中，国防科技成果的成熟性主要通过成熟度来度量。成熟度是指针对具体的工作过程进行明确定义、管理、测量、控制的有效程度。国外通常使用技术成熟度评价产品类技术，使用制造成熟度评价工艺类技术。技术成熟度评价和制造成熟度评价是国防科技成果评价中不可或缺的两部分。

技术成熟度（TRL）主要用来表示型号项目中关键技术的成熟程度。其将型号发展过程中技术逐渐成熟的过程划分为9个阶段，代表技术成熟的不同程度，是研究人员在大量科研和工程实践基础上，对技术成熟规律认识的一种总结和量化。技术成熟度等级是对技术成熟度进行量度和评测的一种标准，可用于评价特定技术的成熟度，也可用于判断不同技术对同一项目目标的满足程度。

技术成熟度的概念源于美国国家航空航天局（NASA）。20世纪90年代，技术成熟度的概念基本趋于成熟。进入21世纪之后，技术成熟度评价方法被美国国防部广泛应用于国防采办项目管理中。经过40多年的发展和应用，目前，技术成熟度评价标准已基本成熟，评价方法和实施程序也已形成规范，并获得了广泛应用，取得了可观的社会效益。

我国国防和航天领域的科技人员在长期的科研和工程实践过程中，也总结出了一套研制阶段划分方法。例如，装备研制的四个一代：探索一代、预研一代、研制一代、生产一代；航天型号研制阶段一般划分为：模样（方案论证与验证）阶段、初样阶段、试样阶段等。与国外的技术成熟度概念相比，虽然量化程度不同，但也都体现了技术成熟度级别划分的朴素思想。

制造成熟度（MRL）主要是为了弥补制造知识的不足，重建制造风险管理能力，提高科技项目的技术转化能力，对产品生产的经济有效性进行的评价。MRL主要用于衡量武器装备研制过程中的关键制造技术的成熟程度，以及技术转化过程中的制造风险，实现对装备研制生产过程的优化管理与控制，降低制造风险、提升装备制造能力、缩短生产周期、有效控制成本。

2001年，美国三军联合制造技术委员会基于技术成熟度提出了制造成熟度的评价模型。2007年，美军正式在项目采办管理中引入并应用制造成熟度。

目前，制造成熟度在美国军方的应用正在逐步扩大。在美军武器装备研制项目中，包括陆军的“未来战斗系统”项目、导弹防御局的所有开发项目、空军小企业创新研究计划项目等均已引入了制造成熟度概念。

国防科技成果推广成熟度评价指标体系

国防科技成果推广成熟度评价体系包括评价指标、指标权重和评价标准等3个部分，如图1所示。

一、指标确定原则

本文在指标的设计方面采用了SMART准则，即特定（Specific）、可测量（Measurable）、可得到（Attainable）、相关（Relevant）、可跟踪（Trackable）。

（一）特定性原则

国防科技成果推广成熟度评价指标是对国防科技成果可推广程度的本质特征、组成结构及其构成要素的客观描述，并为国防科技成果的推广成熟度评价服务，指标本身具有特定性和专门性。

（二）可测量性原则

对于国防科技成果推广成熟度指标进行评定应当有相应的标准，以相同的标准作为统一的尺度，来衡量被评价的国防科技成果。指标的概念应正确、涵义清晰、可测量。

（三）可得到性原则

国防科技成果推广成熟度指标的设计应考虑到验证所需数据获得的可能性，细致考虑数据的获取方式和渠道。对于获得难度较大的定性指标，可采用近似方法获得数据。

（四）相关性原则

国防科技成果推广成熟度评价指标之间应具有一定的内在逻辑关系，能互为补充、相互验证，对国防科技成果推广过程中的各个方面给予描述，但不能包容、涵盖。

（五）可跟踪性原则

国防科技成果推广成熟度的评价工作是一种事先评价，为了便于之后的监督与控制，应当在进行评价指标设计时，选择一些可跟踪、监督的指标。

国防科技成果推广成熟度评价指标体系的设计包含定量与定性两部分指标，在设计过程中，应尽量采用定量指标，以更客观地反映国防科技科技成果推广转化工作中的实际情况，且定量部分指标的总权重应在全部标准分中占有较大的比重；不能被定量的指标，可采用定性的方法，以实现整套指标体系全方位、多角度、全过程地对国防科技成果推广成熟度进行评价。

二、具体指标说明

在查阅相关文献和资料、征求有关专家意见的基础上，结合国防科技成果推广转化工作实际，对回收的100余份有效专家调研问卷进行分析之后，以“技术成果”、“推广价值”、“技术持有方因素”等3个要素作为评价指标体系的一级指标，由影响这3个方面的10个关键要素组成二级评价指标体系。依据层次分析法，构建层次评价指标体系，从上到下依次为目标层、准则层和措施层，如图2所示。

图1 国防科技成果推广成熟度评价体系

（一）技术成果

技术成果的水平主要包括先进性、成熟性、完备性等3个方面。

先进性：主要用来评价技术在国内外的先进程度，可通过科技检索来实现。

成熟性：技术成熟度、制造成熟度等级，技术达到接近完善的程度。通常认为，技术越成熟，应用过程中可能出现的问题就越少。

完备性：技术标准、工艺规范、操作指南等技术文件齐全、准确、规范的程度，以及与国际标准的吻合程度，具备的推广基础等。

（二）推广价值

国防科技成果推广的价值与意义主要包括需求迫切性、政策性、支撑引领性、适用性、经济性等方面。

需求迫切性：国防科技工业的需求迫切程度，对高新工程、重点型号的作用和影响。

政策性：与国家科技政策、发展方向、支持重点的符合程度。

支撑引领性：对国防全行业基础能力、水平的支撑作用，对国防全行业技术的引领、示范、带动、辐射作用。

适用性：在不同行业、不同装备型号中的适用范围。

经济性：节约成本、预期收益率、环境、生态效益、符合绿色制造模式要求等的程度。

（三）技术持有方因素

技术持有方的实力包括技术负责人水平、研究团队实力等方面。

技术负责人条件：对风险预见、技术现状、国内外发展趋势的把握程度，后续发展潜力，相关管理经验等。

技术团队实力：结构合理性、整体技术实力水平、团队紧密度等。

国防科技成果推广成熟度评价指标权重

为了提高研究的合理性，国防科技成果推广成熟度评价指标的权重采用专家打分的方法，并结合层次分析法进行计算。本项研究邀请来自各军工单位、部属高校等科研机构，国防科技成果推广专业机构和政府主管部门的百余名专家对国防科技成果推广成熟度评价指标体系进行评判打分。根据专家打分结果，得到最终的国防科技成果推广成熟度评价指标体系及权重，如表1所示。

在影响国防科技成果推广成熟度的一级指标中，技术成果的权重最高，为0.4023；其次为推广价值，权重为0.3842；最后为技术持有方因素，权重为0.2135。在二级指标中，成熟性的权重最高，为0.1892；其次为先进性，权重为0.1338；第三位为研究团队实力，权重为0.1156。

由此可以看出，在国防科技成果的推广转化过程中，成熟性、先进性、技术的研究团队实力是影响国防科技成果推广成熟度的较为关键的要素。而国防科技成果的政策性、经济性，影响权重相对较低，这也反映了在国防科技成果推广转化过程中，往往更关注技术性能的实现这一倾向。

国防科技成果推广成熟度评价标准

一、评价指标的评分标准

结合国防科技成果推广转化工作实际，将每项评价指标划分为6个等级，并深入分析影响各等级的关键要素，逐项开展研讨，细化每项指标的考核内容和考核形式，最终形成国防科技成果推广成熟度的评价标准。其中，各项评价指标的评分标准如表2所示。

图2 层次评价指标体系

表1 国防科技成果推广成熟度评价指标体系及权重表

二、推广成熟度等级划分

在国防科技成果推广成熟度评价中，每个评价对象客观上存在优、良、好、中、差等多种状况，本文不仅结合国防科技成果推广转化工作实际，建立了相应的推广成熟度等级及评价标准，还依据推广成熟度等级提出了相应的应用建议，如表3所示。

实证研究

为验证国防科技成果推广成熟度评价体系”的科学性、合理性，开展了国防科技成果推广成熟度评价体系的实证应用研究，具体如下：

一、大范围征集先进国防科技成果

面向全行业十一大军工集团、有关高校征集了一批先进、适用的国防科技成果，要求提供先进性、成熟性、完备性、适用性等方面的佐证材料。

对征集的160项国防科技成果进行初步筛选后，剔除知识产权不明晰、材料不完备的科技成果44项，最终遴选出116项资料齐全、完备的国防科技成果。

表2 国防科技成果推广成熟度评价指标评分标准

二、推广成熟度评价程序

根据《GB/T 22900-2009 科学技术研究项目评价通则》中对评价步骤的阐述，同时结合国防科技成果推广成熟度评价的特点，确定评价程序如下：首先，确定以拟评价的116项国防科技成果为推广成熟度评价主体；然后，明确评价目标为遴选成熟度较高、适用范围较广的成果；第三，在已收集的成果基本信息基础之上，开展成果查新、定性分析、同行评价，最后综合得出评价结果。

三、评价结果

组织不同领域的技术、管理型专家开展国防科技成果推广成熟度评价体系集中学习，对征集的不同技术领域国防科技成果进行关键要素识别、细分，从政策性、需求迫切性、技术负责人水平、成熟性、支撑引领性、先进性、完备性、经济性、研究团队实力、适用性等10个维度对成果进行评价，得出评价结果如表4和表5所示。

四、实证研究的意义

116项国防科技成果中，有80项成果较先进、成熟，至少在2个国防分行业具有适用性，其支撑、引领、带动作用明显，技术资料较完整、规范，配套条件较成熟，达到推广成熟度二级水平，建议由国家财政经费支持进行跨行业、跨领域推广。该推广成熟度评价体系为遴选进入国防科技成果推广计划项目提供了科学依据。

116项国防科技成果中，有36项成果技术先进，非常成熟；在国防全行业具有普适性，支撑、引领、带动作用明显；技术资料完整、规范、齐全，配套条件成熟、技术团队结构合理，达到推广成熟度三级水平，具备大规模市场化推广基础，建议由国家列入国防科技成果推广目录，推荐军工行业进行自发市场性推广转化。由此可见，该推广成熟度评价体系为相关部门编制国防科技成果推广转化目录提供了有效、可靠的遴选依据。

结束语

本文结合国防科技成果推广转化工作实际，创新性地提出了国防科技成果“推广成熟度”概念，组织近百名专家深入论证，利用层次分析法，借助YAAHP软件，建立了国防科技成果“推广成熟度”评价体系，解决了国防科技成果推广转化过程中成果遴选的“门槛”问题，为成果推广转化过程中技术供需双方开展需求对接、应用实施、提供了指导依据，并通过实际案例验证了评价体系的科学性和实用性。对于推广成熟度评价体系的应用，提出以下意见：

（1）建议国防科技工业主管部门针对财政性资金支持的推广转化项目开展推广成熟度评价，遴选先进、成熟、需求迫切的共性、关键国防科技成果面向全行业开展推广应用工作，进一步发挥推广类科研项目的引导、示范、带动作用，促进国防科技工业整体技术水平的提升。

（2）建议有关军工集团等主管部门利用推广成熟度评价体系，积极组织本行业、本集团内部成果的转移转化，促进本行业、本领域成果信息共享、推广应用，推动成员单位间共性技术水平的提升。

（3）建议有关军工企事业单位利用推广成熟度评价体系开展成果推广转化工作，在自主引进成果和向外推广成果的过程中，将成果的推广成熟度作为开展工作的依据，提高转化成功率。

表3 推广成熟度等级划分

表4 针对遴选的科技成果的整体评分统计情况

表5 针对遴选的科技成果的推广成熟度指标平均得分情况