APP下载

“高职院校核心竞争力调研问卷”的信度效度评价

2023-08-11何进武陈梅花李苑辉樊伟伟

黑龙江科学 2023年11期
关键词:题项效度信度

何进武,陈梅花,李苑辉,樊伟伟

(三亚航空旅游职业学院,海南 三亚 572000)

2019年,国务院出台《国家职业教育改革实施方案》,指出职业教育是与普通教育具有同等重要地位的教育类型,没有职业教育现代化就没有教育现代化,职业教育发展迎来前所未有的机遇。面对新的经济形势及产业结构的转型升级,高职院校如何提升核心竞争力,在职业教育的新一轮发展与竞争中抓住机遇,再上台阶,是迫切需要研究和采取切实行动的课题。

本研究设计“高职院校核心竞争力调研问卷”,选取高职院校的教师、行政人员、中层干部、校领导等为调研的目标人群进行问卷调查,共收回有效问卷370份,利用SPSS 19.0软件进行问卷的信度和效度评价,对调研结果进行可靠性及有效性研究,为高职院校增强核心竞争力提供参考。

1 问卷设计及数据采集

问卷包括身份甄别、对高职院校核心竞争力影响因素的看法、各因素对高职院校核心竞争力产生影响的重要性排序三大部分。第一部分筛选合格的被访问者,选项为被调研者的职位。第二部分硬件设施、师资力量、管理能力等共11个题项,每个题项设5个选项,分别是“非常不认同、不认同、一般、认同、非常认同”。第三部分是被调研者对第二部分中各因素对高职院校核心竞争力产生影响的重要性的评价,共33个题项。

被调研者扫描二维码在线作答,后台自动采集数据。为确保调研的代表性与广泛性,要求被调研者勾选其所在地区、学校性质、学校层次、自身职位等信息,共获得370份问卷。因预先设置部分条目缺失时无法提交,故后台统计时已经剔除缺失值,统计的有效样本量为370例。

2 信度评价

信度(Reliability)指对问卷开展重复调研,出现一致性结果的程度。结果的一致性高,表明同一被调研对象接受关于相同题项的不同问卷测试时获得的各调研结果间的正相关性强。信度系数是评估信度的工具,计算公式为真实方差除以测量方差。

根据测量方法的不同,信度又分为复本信度、重测信度、内部一致性信度等。在实际应用中,前两种受开展条件、时间成本等现实因素限制不常使用,内部一致性信度成为最主要的信度测量方式。本研究选择学界广泛采用的、用于评判内部一致性信度的工具克隆巴赫信度系数(Cronbach’sα)作为信度指标,通过以下方程计算:

Cronbach’sα的数值范围为0≤α≤1,α越大表示问卷各问题之间的关联程度越高,内部一致性信度越好。在现实使用中普遍认为α≥0.9(文中所有大于等于号换为≥)说明问卷的内部一致性水平极高,α≥0.7说明问卷的内部一致性水平比较好,0.5≤α<0.7说明问卷有价值但需要做较大改动,α<0.5则说明内部一致性水平较差,问卷价值很低。利用SPSS 19.0软件分析问卷数据,由表1可知,问卷总体的Cronbach’sα系数值为0.936,基于标准化项的Cronbach’sα系数值为0.935,说明该问卷的总体信度极好。

表1 信度系数表

对信度描述统计量进行分析,总分均值、方差、标准差详见表2。

表2 信度统计量Tab.2 Reliability statistics

由表3可知,对高职院校核心竞争力影响因素的看法维度中每项的相关系数大多在0.8以上,说明信度处于良好水平。各因素对高职院校核心竞争力产生影响的重要性排序维度中,题项42的相关系数较低,与总体的关联性较小,说明这个问题设计得不够理想。删除这个题项可提高该维度的整体信度,但是该题项对于问卷内容非常重要,需重新设计或添加新的题项。可见该维度存在细微缺陷,需要改动后重新进行信度分析。

表3 各题项总计统计量Tab.3 Total statistics for each item

3 效度评价

效度(Validity)指被调研对象间测量值的差异所反映的真实值间的差异程度,可反映调研人员的初衷是否能够被受测对象理解,受测对象的行为或想法是否能够有效地被问卷测量,问卷的各个题项刻画相应概念的准确程度[1],即反映问卷的有效性。

效度评价中通常检验内容、区分、结构三方面的效度,其中结构效度指问卷实际测到所要测量的理论结构及特质的程度,一般被认为是最强有力的效度评价指标[2]。检验结构效度常用的手段是因子分析,主要看共同度、累积贡献率、因子负荷这几个指标,过程如下:

1)评估是否适合做因子分析。在KMO(Kaiser-Meyer-Olkin)检验与巴特利(Bartlett)球形检验量表中,一般认为KMO值大于0.6表示样本适合进行因子分析,0.6以下意味着变量之间的相关性不高,需重新选择变量。由表4可知,KMO值为0.636,近似卡方值为16 304.128,自由度为946,P值为0,表明这些题项间存在共同因素,适合做因子分析。

表4 KMO及Bartlett检验结果Tab.4 Results of KMO and Bartlett test

2)统计变量共同度。由表5可知,只有变量Q13的提取值低于0.5,意味着因子分析的整体效果良好。

表5 变量共同度与旋转成份矩阵Tab.5 Common degree of variables and rotating component matrix

3)统计因子的累计贡献率。该指标可确定因子数量,当累计贡献率高于80%,即损失的信息量低于20%时,可认为因子数量充足。由表6可知,前15个因子的累积贡献率约为81%,达到因子数量对累积贡献率的要求,故可选择15个因子做负荷矩阵。

表6 总的方差解释Tab.6 Total variance interpretation

4)做出旋转以后的因子载荷矩阵。由表5可知,在因子2上载荷较大的变量是前11项,且与因子2密切相关的变量恰好都属于对高职院校核心竞争力影响因素看法的维度,说明这11个变量具有共同特征。在因子5、6上载荷较大的变量分别是42和16,均为单独变量,说明该变量与其他变量的相关性较弱,需要进行修改。

4 结论

研究表明,本问卷总体上具有良好的信度及效度,需对因子5和因子6的个别题项进行补充、完善,进一步改善评价结果的有效性和可靠性,以便为高职院校对核心竞争力进行定位、分析与采取行动提供参考。

猜你喜欢

题项效度信度
《广东地区儿童中医体质辨识量表》的信度和效度研究
幼儿家长学前教育立法需求调查问卷的编制
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
教师教学风格测量工具TSI修订的实证研究
高职学生价值观调查的研究变量的项目分析
科技成果评价的信度分析及模型优化
耳鸣残疾问卷中文版的信度和效度检验及其临床应用
被看重感指数在中国大学生中的构念效度
12题项一般健康问卷(GHQ-12)结构的多样本分析
外语形成性评估的效度验证框架