胡光明，吴群妹

(1.无锡科技职业学院 文化旅游学院， 江苏 无锡 214028；2.无锡科技职业学院 基础部， 江苏 无锡 214028)

0 引言

2010年起，我国由教育部牵头，引领政、行、企、校各方参与，建设了国家级职业教育专业教学资源库。职业教育专业教学资源库是“互联网+教育”在高职教育领域的率先落地，以网络信息技术为基础的系统教学资源，能为学习者提供更丰富、全面的学习资源，提高教学水平和教学质量，也能够引领教育教学改革，支撑产业发展，有助于推动职业教育公平和高质量发展。经过十余年的时间，目前已建设112个国家级资源库，开发241万余条资源，注册用户304万余人，累计访问超过6亿人次。作为资源库的教学资源使用者，用户理应成为高职院校教学资源库的关注核心。然而目前从国家职业教育资源库到省市及各高职院校的资源库建设，仍然以资源库的管理者为监督和验收的主体，采取自上而下的实施监控，更多注重资源数量是否达标、技术是否合格、使用是否到位。目前在监管体系中还没有统一的用户体验、评价、反馈和监督标准。本文是以用户需求为导向，以我校承建的国家职业教育专业教学资源库建设子项目为研究对象，尝试构建高职专业教学资源库建设效果评价的指标体系[1]，并在建设及应用的过程中不断根据用户反馈进行修正，为实现以用户为导向的高职教学资源库的建设提供理论依据和实践参考。

1 以用户为导向的评价指标体系的构建

随着教育资源库的不断推广和应用，用户对于资源库的需求也正在变得越来越高：从简单的资源共享服务发展到资源加工、处理、共享、交流的一体化服务；从单一的资源服务发展到网上资源学习、下载、共享、网上学习互动、网上教研、网络课堂等整合性的资源服务。2020年初新冠疫情的爆发，一时间使得网络远程教学成为世界各地各类学校的重要教学手段。在国内高职教育的远程教学过程中，国家职业教育专业教学资源库提供了丰富可靠的教学资源。但与此同时，远程教学过程中，由于学习者的背景层次不同，学习目的不同，学习偏好不同等原因，各类用户对资源库建设使用的要求和满意度也各不相同。从终端使用及反馈的角度出发，目前迫切需要解决的问题是：高职院校专业教学资源库的建设如何能真正做到把用户放在首位？用户满意度的评价标准如何能够科学、系统地实施并良性反馈于资源库的再建设？

综合各层级教育主管部门的要求，高职院校专业教学资源库主要应从资源开发与建设、资源管理与共享、教学实践与应用、社会服务、特色与创新、长效机制等方面进行建设。而这些指标的实现均离不开用户的使用反馈和需求要求。本文结合用户行为分析理论，就不同类型的用户需求进行不同维度的数据解读，用层次分析法赋予高职院校专业资源库指标体系的各层级权重，进行评价维度和指标要素的设计。

1.1 基于用户视角的教学资源库建设[2]

立足于我校2018年职业教育专业教学资源库立项任务“会展策划与管理”资源库的“会展市场调查”和“企业年会实务”两门课程的建设，制作调查问卷。通过对436份问卷的反馈信息进行统计分析，发现影响用户使用资源库的主要因素有四个，即资源内容、技术指标、视觉效果和使用效果。结合反馈情况，将对这些因素的具体要求总结如下：

第一，资源内容。资源库的教学内容是资源库的重中之重。内容应该达到基本理论概念清楚，重点突出，难点破解有方，内容详略得当。教学资料规范，教学行为规范，并且设计上具有自己的特色。在教学过程中，能够吸收新成果，反映新信息；理论联系实际，注重素养教育和创新创业能力培养。以先进教育思想和教学理念为指导，以使学习者自主学习达到最佳效果为目标。

第二，技术指标。资源库的制作也非常重要，包括视频与音频的清晰度。视频每个长度也要符合使用者最舒适的长度，太短内容还没有表达完整或者太长观看起来太辛苦都不合适。拍摄的过程中，要求人物和板书(或其他画面元素)同样清晰，录像环境应光线充足、安静，教师衣着整洁，讲话清晰，板书清楚。音频清晰，无交流声或其他杂音、噪音等缺陷。

第三，视觉效果。视觉效果是摄影画面形象给观众造成的视觉感受，画面上应该尽量做到准确、鲜明、生动，符合视觉规律。资源库的视觉效果评价包括界面设计是否合理，媒体制作是否精细，画面是否具有吸引力。色彩是否真实清晰，是否符合观看者的视觉心理，声音是否柔和等等。

第四，使用效果。使用效果也是非常重要的，如果光有制作技术、色彩画面再美，达不到学习成效都是无用的。资源库的建设如果能够给使用者带来帮助，通过学习，他们确实能够得到提升，那么这样的资源库才是成功的。其中具体内容包括是否可以调动使用者的积极性、主动性；相比面授课程，能否提高使用者的学习效率；在能力的培养方面，是否可以提高使用者分析问题和解决问题的能力。

通过调查，在资源库的诸多指标中，参照用户最在意的是资源的内容、资源库录制的技术指标、观看的视觉效果以及使用后的效果这四个指标，对资源库的评价指标体系进行初步构建。

1.2 指标体系的构建[3]

在上述两门课程通过一期验收并上线使用后，通过对校内学生用户反馈、校外社会用户反馈、校企专家使用反馈收集相关用户使用评价信息，将其进行量化分析并与专业教学资源库项目管理平台监控数据进行比对，以提出用户评价指标体系在建设效果评价体系中的侧重点和权重值。具体各个指标的权重如表1所示。

表1 教学资源库指标体系表

2 关联矩阵法在指标体系中的应用

2.1 关联矩阵法

关联矩阵法是一种利用备选方案中各个评价指标的重要程度以及指标评价尺度进行列表分析，根据最终算出的综合评估数值评价出最优的方案。关联矩阵法[4]的主要步骤有两个：

2.2 关联矩阵法在资源库评价指标体系中的应用

以我校现有的两门资源库课程“会展市场调查”和“企业年会实务”为例，对建立的资源库指标评价体系中各个指标进行效用评价，设“会展市场调查”为资源库A，“企业年会实务”为资源库B，结果如表2所示。

表2 资源库指标评价表

根据对校企专家的访问调查，得到各个评价指标的评价得分，即评价尺度表，如表3所示。

表3 评价尺度表

再结合指标体系表以及评价尺度表，得到关联矩阵法计算表，如表4所示。

表4 关联矩阵法计算表

算得两个资源库的综合评价值为：m1=38/10，m2=33/10，显然用户更加满意的资源库是A，即“会展市场调查”。且由资源库指标评价表直接可以看出，从用户评价的角度，对“企业年会实务”这门课的视觉效果满意度高于“会展市场调查”，而“会展市场调查”的资源内容的满意度要高于“企业年会实务”。

以上仅是初步分析中相对较为突出的两个指标，以此为例，可根据相关数据反馈，在课程第二轮资源添加及整改过程中进行有针对性的修正，同时关联矩阵也可以在评价指标、评价尺度、权重系数等各类系数中进行动态调整，以确定既能满足用户需求，又符合教学要求和技术支持的资源建设需要，从而真正提升资源库素材建设的质量。

构建基于用户视角的指标评价体系，基本能够区分各个资源库在使用者心目中的满意程度。关联矩阵法也可以对多个资源库进行综合比较，给出各个资源库的综合评估值，分析受用户欢迎的资源库的突出特质和用户不满意的资源库资源的缺欠指标，从而进行有针对性的修正改进。

3 结语

本文采用关联矩阵法采样，对用户反馈评价进行了评价程度和尺度分析。由于样本数量以及时间的局限性，本研究还停留在我校的师生以及我校现有的两门在线课程上。希望后面能够做进一步的研究，扩大样本使用者范围，区分出各个在线课程的优劣，为更多的建设者和研究者提供更为详实可靠的数据以资参考。

毋庸置疑，用户满意度理应是一款产品开发或一个项目建设应追求的重要指标。但亦应注意到，国家级高职院校专业教育资源库所规定的教育教学及技术评价指标，并不能因为对用户满意度的单纯追求而有丝毫偏废。对“碎片化资源、结构化课程、系统化设计”的顶层设计和建设规范，强化共享应用的功能与制度设计，都必须在资源库建设及评价过程中一以贯之。同时，由于职业教育资源库有为社会学习者提供资源和服务，增强职业教育社会服务能力，为形成灵活开放的终身教育体系、促进学习型社会建设提供条件和保障的功能，那么校内外、职场内外的不同学习者对资源库评价的标准和要求又会有所不同，这些都将是作者后续研究的方向。