APP下载

上海高校易班建设评价指标体系研究

2021-12-10赵盼盼盛春

中国教育信息化·高教职教 2021年11期
关键词:评价指标体系

赵盼盼 盛春

摘   要:易班是高校开展网络思想政治教育的重要平台和载体,自2007年从上海高校发起到覆盖全国高校,经过多年蓬勃发展,建设成效明显,但也出现很多发展瓶颈。因此,有必要建立更加科学有效的评价体系,促进上海高校易班建设进一步优化和提升。文章在上海高校易班发展现状、建设内涵、评价依据研究的基础上,结合16所上海高校的实地调研结果,设计了上海高校易班建设评价指标体系的结构模型。该评价指标体系依据全面性、针对性和可行性三个评价原则,包括4个一级指标和14个二级指标,从发展效益、信息内容、功能服务和管理运作等方面对高校易班进行评价。同时对各个指标数据的获取方式进行了初步设计,为评价指标体系的实际应用奠定了基础。

关键词:上海高校;易班建设;评价指标体系

中图分类号:G434 文献标志码:A 文章编号:1673-8454(2021)21-0019-06

易班是提供教育教学、生活服务、文化娱乐、思政教育的综合型网络互动社区,自2007年诞生以来,通过不断改版升级,成为融合主流Web2.0应用、能为师生提供教育信息化一站式服务功能的非商业性公益网站,也是全国教育系统知名文化品牌。易班从上海高校发起,截止到2020年底,覆盖了全国31个省区市和新疆生产建设兵团的1700多所高校,拥有2000多万大学生实名注册用户。十余年来,易班网所包含的内容、数据、功能应用等不断更新和丰富。面对如此庞大的建设规模,如何观测和评价高校易班建设成果,从哪些因素衡量高校易班建设的程度和效果,均需要管理部门确定具体的评价指标和评价方法,引导和促进建设部门在建设易班过程中有目的、有计划地进行内容设计、具体实施、自我评判并调整,才能使各高校易班建设工作真正发挥实效。目前,高校易班建设涌现出一些比较成功的案例,但同时也面临着一些发展困境,如内容特色不显著、信息利用率低、层级架构复杂、用户体验的满意度有待提高等问题。而针对高校易班建设的评价研究可以促进易班建设不断凝练和增强核心竞争力,推动易班与其他校园媒介或平台优势互补,提升高校开展网络思想政治教育的实效,其重要性不言而喻。因此,建立一套科学实用的评价指标和评价方法对易班建设进行有效的评价,可为其发展提供决策思路并指导发展战略的制定。

一、研究现状

关于易班建设的研究,目前在高校思想政治教育领域有比较丰富的成果。这些研究成果主要集中于两种角度。一是通过一些理论、视角或技术,来提升易班网络思想政治教育的效果。如吴昊等研究了通过大数据分析技术提升易班进行教育和服务的实效性[1];崔海英通过加强易班主阵地建设,推进大学生社会主义核心价值观的教育实效[2];沈漫、朱建征、施渝一等则从不同影响因素,提出改善易班用户粘性、核心竞争力和使用活跃度的路径措施[3-5]。二是探讨易班作为主阵地在开展网络思想政治教育中的实践运用,如徐孝蕾等研究了运用易班等新媒体开展党员教育[6];刘淑慧建构了运用易班等网络开展“课程思政”的新模式[7];董玉来等研究了运用易班平台创新教育教学的方式方法[8];张建利等研究了运用易班平台化解和引导网络舆情事件[9],等等。这些研究可以为把握易班建设特征、确定评价方向和原则提供重要参考。

根据2000年教育部发布的《教育网站和网校暂行管理办法》中对教育网站的定义,以及彭绍东等学者的观点,将教育网站按照网站建设者、服务层次、服务对象、服务范围和网站规模、语言、地域等不同维度来分类[10]。可以明确,易班属于教育网站范畴,是教育行政部门建设的面向高校师生,具有思政、教学、管理、服务等多种功能的大型综合教育网站。因此,教育网站的评价研究成果对易班建设评价体系的建构和指标的确立具有十分重要的借鉴作用。关于教育类网站、APP、网络平台、网络社区等的评价研究,由于各类网络产品仍在不断发展、创新中,缺乏统一的行业规范和设计目标,众多研究者从不同的角度利用不同的方法对教育网站评价进行了研究,但未形成统一的标准[11]。周梅群等从内容、技术、效用性和发展性角度建构了教育网站评价指标体系[12];陈美玲等研究了教育主题网站的三层模式:知识加工、信息组织和技术集成[13];缪蓉等从使用者视角认为教育资源网站的内容丰富性、实用性、网站交互性、界面设计、资源易用性等更为重要[14];梁玉娟等从教育性、技术性和社会性三个维度编制了网络学习社区的评价问卷[15];宫淑红等建构了包含技术与平台界面、资源与目标定位、交往与互动文化、情感与情境氛围四个层次的虚拟学习社区评价指标体系[16]。还有一些学者聚焦专题教育网站的评价研究,如胡水星等从课程资源的教学性、科学性、交互性和技术性等方面建构了社区网络教学的评价模型[17];钱冬明等设计了包含信息内容、教学特性、网站设计、技术水平、网站效益五个一级指标的社区教育网站评价指标体系[18];任祥等在高校红色网站的评价研究上,确立了内容建构、风格设计、技术支持、管理运作及教育功效等五个一级指标[19]。

二、上海高校易班建设现状调研

1.调研方法与过程

上海高校易班建设先后不一,调研选取了具有代表性的16所高校易班作为调研对象,其中包括4所部属高校、10所市属本科高校和2所市属专科院校。这些高校的易班建设基本都获得过市级或全国性的奖项荣誉,其建设质量有一定的保障。同时,这些高校的易班在内容、管理和服务等方面的建设成效,可助力于挖掘易班建设的评价指标。另外,考虑到高校易班建设的专门性,本研究还于2019年9—12月通过半结构化访谈方式访问了高校易班管理者、相关技术人员、高校辅导员和学生等,了解其在实际工作或使用中对易班建设评价指标方面的需求。

2.调研结果

(1)上海高校易班的内容建设

每所高校的易班主页框架一致,设置了“公告”“活动”和“校园大杂烩”三个板块,内容包含思想引领、校园文化、事务办理指南、心理健康教育、安全教育等,通过公告、通知、推文等形式表现出来。这些以高校“第二課堂”实践教育为主的教育资源,为大学生营造出“易班是学生自己的乐园”的氛围。另一方面,易班优课的教学资源则以补充高校“第一课堂”理论教育为目标,以视频形式实现高校专业教学课程网络化、实践教育理论化。所调查的高校建有几十到几百门不等的课群资源,课群门类有形势政策课、课程思政示范课、精品专业课、大学生领导力课程、生涯教育课程、心理健康教育课程、软件教学课程等。

(2)上海高校易班的功能应用

据调查显示,上海高校易班在丰富功能应用、提升功能性上主要围绕四个功能类型开展:行政管理类型、教育学习类型、文化娱乐类型和生活服务类型。这也符合高校易班建设的定位。例如:东华大学将学工系统与易班平台对接,扩展易班在学生日常管理方面的功能性;建立“课程思政云平台”和“习近平新时代思想微课”应用,丰富易班的教学资源。上海理工大学建立了迎新晚会抢票应用和校庆送祝福互动应用,提升校园文化活动的网络氛围。另外,上海海事大学建立了校内地图应用、上海海洋大学建立了网薪商城应用,提升学生在校学习生活的便利性。

(3)上海高校易班的管理投入

在管理部门方面,所调查的16所高校易班绝大部分在学工部(学生处)管理和指导之下,占比82.97%;其次是校团委,占比8.62%;极少部分是由宣传部、信息办管理负责。在建设经费方面,所调查的16所高校易班近三年的建设经费平均值选择5~10万的最多,占比46.9%;其次是1万以内,占比21.9%。在队伍工作经验方面,16所高校的易班工作负责教师大都是新手,工作年限大都在3年以内,占比81.03%。在考核激励制度方面,16所高校易班有超过半数的高校将易班工作认定为校级荣誉并纳入全校表彰体系,占比56.3%。易班管理投入情况如图1所示。

3.调研启示

通过调研发现,因各高校办学层次和建设目标不同、易班发展程度不同等情况,使得建立有效的易班建设评价指标体系有一定的难度。各高校易班的发展进程、建设理念、信息技术应用水平、校园媒体生态等情况的差异,导致易班建设发展的重点和目标各有不同。并且,由于建设基础不同,现有的兩个量化指标也不能完全反映易班的实际使用情况,统一的硬性指标会打击各高校对易班建设的积极性,不利于易班建设的持续优化。同时,各高校易班不仅仅承担着网络信息服务的功能,更是高校开展思想政治教育的重要抓手和平台,对其评价不应局限于网络平台的数据量,还应体现出网络思想政治教育的水平。另外,针对各高校的易班建设评价,其研究成果也应首先服务于各高校,评价指标应侧重于高校能发挥主观作用的因素和环节上,舍弃作用一般、资料收集十分困难的指标,保障评价体系的可行性。上海高校易班建设的评价体系,还应具备基本的普适性,辐射到整个上海市甚至全国。因此,面对以上情况,本研究在设计评价指标体系时,着重于把握易班建设的特征并提出了相应的评价原则。

三、上海高校易班建设的评价特征及原则

1.评价特征

易班作为高校开展网络思想政治教育的网络平台,具有多重属性。首先,作为网络平台,易班需维持一定的网络流量、内容量和活跃度等,这些表示易班要追求运营效率;其次,通过易班开展思想政治教育,它是高校网络舆论的引导者,发挥着特定意识形态的“喉舌”作用,具有政治功能;第三,易班作为集教育教学、文化娱乐和生活服务为一体的信息平台,承担着提供教育、文娱和信息服务等满足校园师生学习、工作、生活等需求的责任。因此,对易班建设的评价过程具有以下特征:

(1)评价目标的多元性

基于高校易班的多重属性,不难理解针对不同的建设目标和建设角度,其评价目标也各有不同。对易班建设的评价,可以是对建设环境的评价,如网络技术、校园文化、平台群体和组织价值观等;也可以是对内容资源的评价,如信息结构、信息时效性、功能易用性等;还可以是对建设队伍的评价,如工作群体结构、个人信息素养,信息生产、传输、分解技术能力等。这些都是易班建设发展过程中的影响因素。基于不同的评价目标,针对不同的建设方向,选用的评价指标与建构的评价指标体系也不尽相同。

(2)评价信度的层次性

评价信度是指评价主体在一定约束条件限度内所做出的适合实现指定目标对客体意义的衡量。[20]一个科学可靠的评价要满足3个层次的条件:评价过程中的客体信息必须符合实际;评价视角、方法必须与评价目标保持逻辑和谐;评价所引导的行为必须符合网络平台的发展性和进步性。易班建设的评价过程应充分考虑高校易班发展要求和建设实际,在确立建设目标的基础上,做到科学、客观地衡量和评价。

(3)评价体系的动态性

高校易班是一个动态发展的复杂系统,其评价主体对易班建设的特征与规律的认识具有动态性,不同时期针对不同建设方向所选取的评价指标偏向也具有动态性。因而,随着易班平台的发展、信息生态环境的更新、政策要求的变革,其评价指标体系也在不断变化。

2.评价原则

指标体系是对高校易班建设进行测评的核心组成部分,是关系到评价结果客观公正的关键要素。因而,在把握评价特征的基础上,建构一套科学可行的易班建设评价指标体系应遵循一定的基本原则。

(1)全面性

高校易班建设包含线上和线下不同方面,既包括网络内容建设,又隐含教育目标;既体现组织管理服务,又强调学生群体参与。其建设的复杂性,决定了评价指标体系的多因素、多层次的多维结构,要求对易班建设的各个方面进行不同层次的全方位评价。比如,要有定量指标,也要有定性指标,以反映易班建设的不同层次;有直接性指标,也要有间接性指标,以反映易班建设的不同方面,指标体系要能够较为完整地、全面地反映高校易班建设的现状,并能够测度易班建设的深层次内涵。

(2)针对性

当前各高校易班建设内容十分丰富,且具备独立创新的空间,如果直接套用一般普遍性的网络建设评价指标,则可能会影响评价结果的有效性。针对易班不同的建设模块和功能载体,应有不同的评价指标。易班作为高校网络思想政治教育的主阵地,如何把握学生特点,最大限度、及时方便地满足学生、教师等在校学习、生活是易班面临的主要问题。评价指标体系的建构应充分考虑高校易班的典型特征,使其更有针对性,保证评价效果和质量。

(3)可行性

作为网络教育平台,上海高校易班建设除了要遵循基本的网络发展规律,还受到政策制度、育人理念、学校特色等影响,其评价指标体系亦是一个由政策引导的动态系统。因此,评价指标体系应在保证科学性的前提下,反映出评价行为的可行性特点。高校对易班建设负有主体责任,应促进其发挥主观能动性,结合学校特色,依照不同建设目标,可差异化地开展易班建设,其评价行为也应从实际出发,对不同情况区别对待,在选取评价指标和具体实施评价过程中尽量简化,努力做到整个评价工作动态可取、简易可行。

四、上海高校易班建设评价指标体系的模型设计

1.现有评价指标的不足

现有的用来测评上海高校易班建设情况的指标有两个,一个是“共建指数”,一个是“活跃指数”。目前尚未有对这两个指标的权威解释。根据该指标的实际指向和计算方法,可以大致明确这两个指标的内涵。“共建指数”是指一所高校在易班平台上生产、发布信息或开发、添加应用等的集合,以传播者为视角,能体现出平台上的信息种类和总体容量。“活跃指数”是指高校易班用户对所发布信息的浏览、回复或对网络应用的使用、互动等的集合,以传播受众为视角,能体现平台的信息活跃度,也能间接反映出平台内容的质量和影响力。这两个指标的设定基本遵循了上级管理部门对高校易班建设的要求,且指标测度方法做到量化可视,能客观地统计平台的信息量,对目前评价高校易班建设具有一定的引导和推动作用。

然而,仅用这两个指标来观测高校易班建设情况是完全不充分的。首先,这两项指标是对信息量的简单统计,无论是传播者发布的信息,还是受众回复的信息,都是以点击、浏览、跟帖、参与等网页行为次数的数学统计,对其内容质量不能进行把关,发布的信息可以良莠不齐,回复的信息也是参差不一,甚至出现恶意刷屏、应用空挂等现象,这些统统都被平台自动算作了信息量,显然这些是不能代表一所高校易班建设水平的。其次,这两项指标仅代表了高校易班建設的数据结果,忽略了建设结果与建设过程中直接或间接的影响因素之间的联系,过于强调结果性导向作用,而忽略过程性导向作用。如高校建设易班的相关管理机制、资源配置、建设理念和发展观念等方面对易班建设的影响。

2.评价指标体系的建构

本研究根据易班建设的内涵要求、现状和高校开展网络思政教育的特点,在整理文献及访谈调研的基础上,结合现有的评价指标,建构了上海高校易班评价指标的结构体系,通过德尔菲法,听取多方意见,不断修改、完善,最终确立了发展效益、信息内容、功能服务和管理运作4个一级指标,以及相对应的14个二级指标,部分二级指标设有三级指标。其中,指标结构中设置了中介层,以反映指标之间的关系。发展效益指标作为实现结果指标,信息内容、功能服务指标作为直接因素指标,管理运作指标视为间接因素指标。如表1所示。

(1)实现结果指标及数据获取

实现结果指标包含1个一级指标:发展效益。高校易班建设的发展效益既要追求“量”,也要追求“质”,因此包括数据表现和影响力两方面,一个强调易班的基础数据结果,一个强调易班的影响力结果。共建指数、活跃指数均为高校易班平台运营数据,由网站监测直接获取。影响力指标体现的是高校易班建设的综合效益,通过多领域专家对网站建设情况进行评价,以及用户问卷调查的反馈来综合评议和打分。影响力特征主要体现在易班在校内的应用率即易班在各二级学院、部门、组织等单位的覆盖面,以及师生使用易班的满意度和认同感。

(2)直接因素指标及数据获取

直接因素指标即与高校易班建设成效直接相关的影响因素,包括信息内容和功能服务两个指标。这些指标数据主要以专家评价和用户问卷调查的方式获取。专家可采用访谈、座谈等方式进行评议,问卷调查主要用于获取用户对易班的使用评价和反馈等信息。可将评价指标编写为问卷,通过问卷调查结果进行统计分析后,计算出指标相应的得分。

信息内容是评价易班建设的最主要对象,其特征主要包括内容的可靠性、全面性、时效性和新颖性。可靠性指易班信息的权威和准确,是在高校同类网络平台中,易班信息资源专业性、准确性的综合表现。全面性是指高校易班信息资源丰富度与链接丰富度,包括易班平台提供的各类内容和形式是否丰富、资源链接的数量和质量情况等综合评价。时效性是指信息更新速率和信息延迟率[20]。更新速率代表易班运行过程中新旧信息更替的速率,延迟率代表信息从生产到发布、传播的延迟数量和时间。新颖性表示信息更新质量,体现内容变化的丰富性、独有性和原创性。

易班功能服务水平会影响用户的使用体验。在功能服务方面,易班平台功能的规范性、稳定性、便捷性和交互性是其主要评价对象。各高校易班所开发的功能应用要符合内容规范和技术规范。内容规范指所开发的功能应用符合高校开展网络思政教育要求、基本的网络应用法律法规,保障基本的数据安全;技术规范指所开发的功能应用符合易班网技术要求,可正常显示、登录和使用。稳定性是指用户使用易班功能应用无闪退、无断链,顺畅有效。便捷性是指使用易班功能时操作便捷,网页设计层次清晰、结构合理,操作流程简洁适当,尽量避免因操作繁琐带来的负面影响。交互性是网络平台非常重要的特征,通过精心设计的交互功能,能有效促进易班用户的使用黏性,进一步提升易班功能的服务水平。

(3)间接因素指标及数据获取

间接因素指标即与高校易班建设成效间接相关的影响因素。在遵循易班建设评价特征和原则的基础上,设置了管理运作指标,主要包括管理机制、资源投入、队伍建设和文化理念四个方面。管理机制是指高校开展易班建设的领导体制、工作机制和制度办法落实等情况,是校级层面领导还是院级层面领导,有无年度工作计划、工作思路,是否明确工作职责和任务检查、评估办法等。资源投入是指高校易班建设中人力、物力、财力等资源的投入情况,如是否设有专职岗位、是否落实相应的人员薪酬待遇、是否建有专门开展易班建设的场所和配套设施并充分使用、是否有专项建设经费并做到专款专用、专项经费是否充足,以及可适当考虑经济增幅等。队伍建设的人员结构、培养机制、考核激励机制是主要评估对象,如是否配有一支梯次分明、布局合理的专兼职工作队伍;是否明确工作队伍的培养方案,提供相应的研修机会和锻炼平台;是否将易班工作纳入学校各类表彰体系中,创造平台和机会鼓励专职工作人员争先创优等。文化理念是指导易班建设的最高理想、建设思想、目标以及工作人员本身的职业观等内容,如是否形成了较为统一的建设共识,并以此指导工作实施;是否将校本文化、育人理念融入到易班建设中去,发挥高校特色,创造性地开展易班建设;还有全体工作人员对易班建设的态度、自身职责感、职业观的影响等。

五、结语

建立高校易班建设评价指标体系的目的是为明确评估在开展易班平台建设过程中,高校相关的保障水平及建设带来的实际成效,为开展高校网络思想政治教育提供依据,引导和推动高校有目的、有计划、有步骤地开展易班建设。本研究建构的评价指标体系具有良好的普适性,面对不同高校,因办学层次、专业特色和管理方式不同,评价过程中可结合易班建设实际情况进行选择,以提高评价的准确性,如选择间接因素指标作为单项评价系统来评估学校管理保障水平。通過对易班建设进行评价可以使高校衡量其易班建设状态并为发展战略的制定提供指向,引导易班在高校众多网络思政教育平台中增强核心竞争力。同时,可以使易班建设者深入解析易班建设成效的影响因素。对于任何一个事物的评价行为都是一个多方因素互相作用的复杂过程,相关实证研究有待推进,因此本研究仍有继续深入的空间。

参考文献:

[1]吴昊,黄禹鑫.基于易班建构高校网络思想政治教育大数据平台的思考与实践——以重庆大学为例[J].思想教育研究,2016(1):64-67.

[2]崔海英.易班是推进大学生社会主义核心价值观教育的网络主阵地[J].学校党建与思想教育,2015(3):90-91.

[3]沈漫,夏文芳.提高易班用户粘性的工作策略研究[J].思想理论教育,2014(8):81-84.

[4]朱建征,薛云云.网络社区时代易班建设面临的挑战和应对策略[J].思想理论教育,2015(9):84-87.

[5]施渝一.高校易班使用活跃度的实证分析及对策研究[J].思想理论教育,2014(4):78-82.

[6]徐孝蕾,焦爱华,杨聪聪.新媒体在高校学生党员培养和教育中的运用研究[J].思想理论教育导刊,2013(2):120-122.

[7]刘淑慧.“互联网+课程思政”模式建构的理论研究[J].中国高等教育,2017(Z3):15-17.

[8]董玉来,陈艳红,孔维刚,等.基于“易班”的高校思想政治理论课教学方法创新探微[J].思想理论教育,2012(17):55-59.

[9]张建利,李羽佳.基于易班平台的高校网络舆情事件化解与引导机制研究[J].思想理论教育,2014(9):81-84.

[10]彭绍东,周鸿彬.教育网站的类型与评价[J].远程教育杂志,2002(6):54-55.

[11]白银,曹梅.国内教育网站评价研究概述[J].现代教育技术,2011,21(1):107-111.

[12]周梅群,吴华.教育网站评价指标体系设计之研究[J].开放教育研究,2004(2):55-57.

[13]陈美玲,柳栋,武健.教育主题网站的评价量表[J].中国教育学刊,2003(9):58-60.

[14]缪蓉,李琳.教育资源网站的评价研究:使用者视角[J].现代远程教育研究,2011(2):65-70.

[15]梁玉娟,彭华茂,王迎,等.网络学习社区评价问卷的编制[J].中国远程教育,2007(1):25-28.

[16]宫淑红,曹晓粉.虚拟学习社区评价指标体系的建构[J].当代教育科学,2015(5):15-18,26.

[17]胡水星,邱相彬.社区网络教学资源的绩效评价研究[J].电化教育研究,2010(12):71-73,79.

[18]钱冬明,孙梦,庄俭,等.社区教育网站评价指标体系研究——以上海市社区教育网站为例[J].远程教育杂志,2014,32(6):49-55.

[19]任祥,王天志.高校红色网站综合评价方法研究[J].思想教育研究,2008(9):41-44.

[20]周昕,黄微,韩瑞雪,等.信息生态视角下网络平台运行效率影响因素分析及评价体系建构[J].情报理论与实践,2016,39(7):102-107,73.

(编辑:王晓明)

猜你喜欢

评价指标体系
高校学生信息素质评价指标体系研究
独立学院技能型人才技能训练方案及评价指标体系
关于AI上市公司发展水平评价
基于层次分析法的企业品牌竞争力研究
市场营销竞争力评价指标及其体系建立分析
企业绩效审计评价指标体系的有效构建探讨
民办高职院校评价指标体系研究
工程咨询企业可持续竞争力评价指标体系研究
新常态下大型煤炭企业生态竞争力实证分析