DOPS在康复治疗学实习生操作考核中的应用与评价

张仁杰 李洪凯 唐智超 李英爽 钟小日 乔娜

操作技能直接观察法（direct observation of procedural skills，DOPS）是观察者就某一项或一类临床技能对受训学生进行评估和考核，直接观察学生的表现及与患者之间的交流，操作结束后直接对学生的表现进行打分并给予建设性的意见[1-2]。目前DOPS方法多应用于医学领域临床技能的评价，如住院医师培训考核，提高住院医师的技能水平；应用于院校实习生的考核，提高学生实际操作能力以适应临床[3]。为更好地适应康复治疗学专业实习生进行临床技能考核，实习过程中引入 DOPS 评估考核体系，探索能否有效应用于康复治疗学实习教学工作中的考核和反馈，从而改善教学手段和方法，提高教学质量，为推广DOPS 在康复治疗学临床教学中的应用提供参考。

1 对象和方法

1.1 对象

2016年6 月—2018年6月，选择海南医学院2013级和2014级康复治疗学专业的54名全日制本科实习生作为研究对象。将其随机分成两组，实验组27名，男17名，女10名，平均年龄（21.2±2.4）岁；对照组27名，男13名，女14名，平均年龄（21.7±2.0）岁。两组实习生的一般资料对比，差异无统计学意义（P＞0.05），具有可比性。实验组实习生分别于实习的第1周、第2周、第3周末各进行1次DOPS评估考核，对照组实习生只在第3周末进行1次DOPS评估考核。考核内容包括：（1）掌握操作适应证、相关解剖关系和操作技术；（2）医学面谈技巧：患者身份的确定并获得知情同意以及患者预期目标的确定；（3）操作前的准备工作：工具、仪器的检查及试用、患者体位的选择、衣物的处理、护具的佩戴、骨折端的处理等；（4）需要时及时需求帮助；（5）康复评定技巧：康复功能评定量表的使用、康复评定方法的熟练程度；（6）临床判断及分析能力康复目标的制定；（7）康复治疗措施的熟练程度；（8）治疗结束后对患者的安排及健康安全教育；（9）交流沟通技巧；（10）人道关怀和专业素养；（11）总体表现评价[4]。

1.2 考核与评分方法

以存在肢体运动功能障碍的脑卒中患者为操作对象。其中评分标准分：1分表示操作水平远低于能力预期；2分表示操作水平低于能力预期；3分表示操作水平达到能力预期下线；4分表示操作水平符合平均能力预期；5分表示操作水平高于平均能力预期；6分表示操作水平达到高一级别能力预期及0分未观察到操作或难以评价；每次考核结束后，教师指出实习生操作中的优点与不足，填写反馈意见，并当场交流10～15分钟。随后教师与实习生对此次考核的满意度相互之间进行打分。其中评分标准为1、2、3分不满意；4、5、6分满意；7、8、9分非常出色。

1.3 统计学分析

采用SPSS 23.0对数据进行统计分析。实验组和对照组第三周的DOPS考核成绩和满意度结果符合正态分布的采用独立样本t检验，以P＜0.05表示差异具有统计学意义。

2 结果

2.1 DOPS考核成绩的比较

实验组第3次DOPS考核平均成绩为（58.03±3.57）分，高于对照组的（42.00±2.96）分，组间比较，差异具有统计学意义（t=17.972，P=0.001＜0.05）。

2.2 DOPS满意度的比较

教师对实验组第3周末DOPS考核结果的满意度为（7.52±0.51）分，高于对照组的（5.74±1.02）分，组间比较，差异均具有统计学意义（P＜0.05）。实验组对第3周末DOPS考核结果的满意度为（7.33±0.83）分，高于对照组（6.07±1.11）分，组间比较，差异均具有统计学意义（P＜0.05），见表1。

表1 教师及实习生对第3周末DOPS考核结果的满意度（±s，分）

表1 教师及实习生对第3周末DOPS考核结果的满意度（±s，分）

项目 实验组 对照组 t值 P值教师满意度 7.52±0.51 5.74±1.02 -5.496 0.002实习生满意度 7.33±0.83 6.07±1.11 -3.977 0.001

3 讨论

传统的操作技能考核方法，主要是根据操作程序进行评价，按照一定的评分标准来计分，着重评价操作者对技能掌握的全面性。但缺少对每个完成过程所展现的行为与能力进行“质的评价”，例如，按照传统考核标准，操作者向患者解释了操作目的、配合要点便可以获得此项的全部得分[5-6]。但采用DOPS 考核方法，此项一方面要考核操作者解释操作目的、配合要点的全面性，同时要考核其是否采用了通俗易懂语言，患者及家属是否清晰了解了其所解释的内容，是否给予了明确回应，其要对解释过程与结果进行“质”的判断与区分。因此，传统考核方法对“质”的评价的不敏感性容易造成以“假象的高分”掩盖“质的问题”，从而阻碍管理者及时发现教学中隐藏的“质的问题”[7]。

临床操作是一种教学情境，因此具有情境性，还具有发展性。临床技能考核是在真实的实际操作过程下进行的[8]。以教师作为观察者，以DOPS为主要工具，及时、有效地对学生在临床技能实践过程中出现的问题和优点进行评价和反馈，真正促成学生临床综合素质的培养；在临床技能的评价中，相较于其他工具所处的封闭环境，DOPS考核是基于工作场所为基础的，弥补了传统考核中考核环境封闭的缺点，并对操作过程中的表现行为与能力从多维度进行现场综合评价，同时进行总结分析。因此，其解决了传统考核中缺乏问题教学思维、缺乏多维度评价的缺点，是一种多维、立体的基于工作场所考核的操作技能评价方法[9-12]。

本DOPS考核方法根据康复治疗学专业特点、培养目标、教学大纲及在实际工作时专业的分工，将重点考查的内容作为考点恰当地融入考核中，设计了一系列与康复治疗相关的临床操作考核，对被考核者的行为与能力进行了“质的评价”。从结果上看，实验组DOPS考核平均成绩、教师对实验组DOPS考核结果的满意度以及实验组对DOPS考核结果的满意度均高于对照组，组间比较，差异均具有统计学意义（P＜0.05），进而提示在康复治疗学实习生的操作考核中，DOPS考核方法具有较佳的效果。

DOPS具有评价系统、全面，标准明确的优点，兼具教与学的功能，从开展以来得到了广泛的应用。但其亦存在一定的缺点，体现在繁杂的评估指标，以致于评价的完成率较低，考虑今后会逐步完善各项评估指标。