APP下载

精神卫生专科护士客观结构化考核的标准的信度检验

2021-08-24蔡珊蔡琴徐柳柳

临床精神医学杂志 2021年4期
关键词:信度精神科专科

蔡珊,蔡琴,徐柳柳

客观结构化临床考试(OSCE)[1]是由英国学者于1975年提出的客观化临床能力考试的一种模式,是在模拟的临床情境中,通过模型或是标准化患者(SP)来对医学生的临床实践能力进行测试,同时可以综合评估考生的知识、技能和态度[2]。精神科专科护理在精神病患者治疗、护理、教育和疾病管理中均起到至关重要的作用[3]。中华护理学会全国精神科护理专业委员会依据《中国护理事业发展规划纲要(2011~2015年)》[4]要求,在全国范围推进精神卫生专科护士培训项目;江苏在专科护士考核中采用OSCE,由于精神障碍患者的特殊性,考核需要护士灵活应对患者出现的问题,监考人员对考核标准的把握具有一定的主观性,评价结果往往会存在主观差异,会影响考核信效度;因此保证监考人员对评价标准理解的一致性非常重要,也决定了精神卫生专科护士考核结果的一致性。本研究通过对江苏省精神卫生专科护士OSCE考核标准一致性分析,评价精神卫生专科护士OSCE考核结果的一致性。

1 对象和方法

1.1 对象 参与评分者为2020年本院精神卫生专科护士带教老师8名,男1名,女7名;年龄(33.25±2.17)岁;均为本科学历;职称:主管护师7名,护师1名;能级:N3护士7名,N2护士1名。精神科护理专家2名;均为女性;平均年龄47.5岁;本科学历;主任护师。被评者为2020年本院培训基地招收的专科护士学员5名;均为女性;年龄(29±2.83)岁;职称:主管护师1名,护师4名;能级N3护士1名,N2护士4名。

1.2 方法

1.2.1 精神卫生专科护士OSCE考核标准 采用3站式考核,第1站考核学员病情及风险评估能力,包括建立关系、一般资料评估、症状评估、风险评估4个维度,20个条目;第2站为症状管理,考核学员指导患者症状在自我管理的能力,包括人文关怀、沟通技巧、症状识别、应对指导、效果评价5个维度,20个条目;第3站考核应急技能,包括应急操作、评估、反馈评价、健康教育技能4个维度,共20条目。每条目4级评分(5:全部做到;3:大部分做到;1:小部分做到;0:未做到);每站总分100分,考核时间均为10 min。

1.2.2 培训、评分方法 本研究由经验丰富的精神科护理专家对带教老师进行培训,逐项分析讲解3个站点的评分细则及可能出现的情况,让带教老师掌握所有评分要求;然后安排5名专科护士培训班学员作为被考核对象,与标准化患者进行3站考核同时录像。带教老师根据每站的评分标准对学员进行评分,评分结束将评分表回收。1周后,8位带教老师对5名学员的考核录像再次使用评价标准进行评分。分析评分者评分的一致性及重测评分的一致性。

2 结果

2.1 项目内部一致性 3站回收有效评分表均为40份,8名带教老师评分,各维度的内部一致性Cronbach α为0.803~0.983。见表1。

2.2 重测信度 1周后8名带教老师再次对5名学员考核情况进行评价,回收有效评分表40份,重测各维度一致性的相关系数在0.794~0.919。见表1。

表1 组内一致性结果

2.3 评定者一致性 带教老师之间评分一致性在0.814~0.983,带教老师与专家评分差异无统计学意义。见表2。

3 讨论

我国培养了大量精神科专科护理人才[5],但是尚未有权威的专业认证机构来保证培养质量。客观结构化考核能较切实的反映出考生的综合能力,迅速被国内外各大医学院校引用,作为一种广泛应用的教学评估方法。

江苏省精神卫生护理专科护士培训,在全国范围内首次应用OSCE考核模式,同时构建了江苏省精神卫生专科护士OSCE三站式考核评分标准,评分标准制定完成需要对标准进行信度分析,确保能真实体现考生实力。精神科专科护士OSCE考核由于精神科专业特点,这种考核模式需要通过考生与患者沟通才能完成,评价标准需要考官理解和判断,缺乏绝对客观性,评价这种考核方式可靠性的一个重要指标就是评价者的一致性,通过信度体现考试的公平、公正,所以保证考核标准信度是考核能否体现考生实际能力的保障[6]。

信度的测评方法包括分组内相关系数法、半信度法以及Cronbach's α系数。本研究对精神卫生专科护士OSCE考核评分标准进行评分一致性的检验。本研究结果显示,江苏省精神卫生专科护士客观结构化考核,3站各维度评分内部一致性Cronbach α系数均>0.832,一周后的重测信度,三站各维度相关系数均>0.794;显示本考核标准具有较高的项目一致性。8位带教老师评分内部一致性在0.814~0.983之间,带教老师与专家评分无显著差异(P值均>0.05),这与同类的考核标准信度检验结果接近[6]。说明3站各维度的考核标准不受主、客观因素影响混淆,使用该标准对培训学员进行考核评分,能保证考核结果的一致性,能有效反映考生的实际能力,能满足精神卫生护理人才培养的需求;提示本考核标准操作便捷,易于掌握,有可靠的一致性及稳定性。

本研究的局限之处在于研究对象样本量较小,代表性不足,且无同类同等级研究可借鉴比较,期待今后在全省范围、各级专科医院对带教老师进行OSCE考核评分信度检验。

猜你喜欢

信度精神科专科
我院精神科患者医院获得性肺炎的影响因素分析
平衡损失函数下具有两水平共同效应的信度模型
探讨精神科护理中存在的安全隐患与护理对策
问卷是否可信
——基于体育核心期刊论文(2010—2018年)的系统分析
福建抗疫专科护理队出征支援湖北
山东省首个专科医联体成立 55家联盟医院正式挂牌
探讨人性化管理理念在精神科护理管理中的应用价值
精神科低年资护士在健康教育中的状况调查
论国内本科和专科的异同
计算机辅助英语测试研究