M.Unger1, L. Manás1, L Keiller2
1Universidad Stellenbosch, Rehabilitación y Ciencias de la Salud, Ciudad del Cabo, Sudáfrica, 2Universidad Stellenbosch, Learning Technology Systems, Ciudad del Cabo, Sudáfrica
Fondo: Los estudiantes de fisioterapia de pregrado tienen que aprender a realizar con eficacia más de 200 técnicas de evaluación y tratamiento necesarias para una práctica exitosa. Los profesores a menudo cuestionan la validez del actual formato de evaluación del Examen Práctico Estructurado Objetivo (OSPE) y los estudiantes luchan por cumplir con el estándar mínimo antes de ingresar y aplicar estas técnicas en el lugar de trabajo. Se implementó una estrategia alternativa, un portafolio de video autograbado para que los estudiantes practicaran estas técnicas de manera más consistente y para ayudarlos a alcanzar niveles satisfactorios de competencia.
Propósito: Investigar el efecto, y las percepciones de los estudiantes, de una intervención de cartera electrónica de video evaluada por pares sobre el aprendizaje y la evaluación de técnicas prácticas fundamentales de fisioterapia. El objetivo secundario fue determinar la confiabilidad de la evaluación por pares.
Métodos: Se utilizó un enfoque de métodos mixtos con muestreo intencional. Todos los estudiantes de segundo año (n=67) después de enviar 23 técnicas a sus carpetas electrónicas fueron invitados a completar un cuestionario de autopercepción calificado y abierto en una escala de Likert. El análisis retrospectivo que utilizó el coeficiente de correlación de Pearson comparó la cartera electrónica evaluada por pares de los estudiantes y las puntuaciones finales de la OSPE. ANOVA de medidas repetidas comparó el rendimiento en 4 evaluaciones OSPE. Se utilizaron los coeficientes de correlación intraclase (acuerdo ICC) utilizando un modelo de efectos mixtos de dos vías para explorar la confiabilidad de la evaluación por pares.
Resultados: La tasa de respuesta fue justa (62.7 %) con edad (19-26 años) y género (5 hombres y 37 mujeres) demográficos representativos de la clase. Las respuestas de los estudiantes sugirieron que la intervención les hizo practicar más (87.2%), les ayudó a mejorar en la OSPE (77.5%) y les hizo reflexionar sobre su propio desempeño (71.8%). Las puntuaciones generales de la OSPE mejoraron significativamente a lo largo del año (p=0.021). Contrariamente a nuestra hipótesis, las notas finales del e-portafolio fueron casi idénticas a las puntuaciones finales de la OSPE (p=0.96).
Sesenta y cinco por ciento de los estudiantes calificaron la evaluación por pares como consistentemente justa. La confiabilidad de la evaluación por pares en comparación con la facultad fue baja con un ICC de .616, pero mejoró significativamente (ICC=.938) cuando se proporcionó un video de referencia antes de la evaluación por pares.
Sesenta y cinco por ciento de los estudiantes calificaron la evaluación por pares como consistentemente justa. La confiabilidad de la evaluación por pares en comparación con la facultad fue baja con un ICC de .616, pero mejoró significativamente (ICC=.938) cuando se proporcionó un video de referencia antes de la evaluación por pares.
Conclusión (es): Un portafolio de videos en el que los estudiantes practicaron semanalmente, técnicas prácticas fundamentales de fisioterapia seleccionadas autograbadas y evaluadas por pares, dio como resultado que los estudiantes practicaran de manera más consistente. Los estudiantes valoraron la intervención y tuvo un efecto positivo significativo en sus puntajes finales de OSPE, a pesar de que más del 90% de las técnicas de OSPE difieren de las técnicas registradas en sus carpetas electrónicas.
La evaluación por pares es confiable, con la condición de que se proporcione un video de referencia antes de la evaluación. Los resultados de este estudio sugieren que un portafolio electrónico en video puede ser una alternativa factible al actual formato OSPE estresante, lento y costoso; sin embargo, se recomienda una mayor investigación sobre su validez y valor predictivo del desempeño en el mundo real.
La evaluación por pares es confiable, con la condición de que se proporcione un video de referencia antes de la evaluación. Los resultados de este estudio sugieren que un portafolio electrónico en video puede ser una alternativa factible al actual formato OSPE estresante, lento y costoso; sin embargo, se recomienda una mayor investigación sobre su validez y valor predictivo del desempeño en el mundo real.
Trascendencia: Los resultados del estudio actual sugieren:
- Los videos autograbados de técnicas prácticas fundamentales que también son evaluados por pares son una intervención adecuada para mejorar la participación de los estudiantes en su dominio de las técnicas de evaluación y tratamiento de fisioterapia.
- Se recomienda una mayor investigación sobre la validez predictiva de los portafolios electrónicos de técnicas prácticas evaluados por pares para permitir la exploración de esto como una estrategia de evaluación alternativa al formato OSPE estresante, costoso y lento, actualmente considerado el estándar de oro para la evaluación de habilidades prácticas.
Financiamiento, agradecimientos: Este estudio fue financiado por el Fondo para la Innovación y la Investigación en el Aprendizaje y la Enseñanza de la Universidad de Stellenbosch (FIRLT)
Keywords: técnicas prácticas, videoportafolio electrónico, evaluación
Tema: Educación: métodos de enseñanza y aprendizaje
¿Este trabajo requirió aprobación ética? Sí:
Institución: Universidad de Stellenbosch
Comité: Comité Ético de Investigación en Salud (HREC 1)
Número de ética: N18/09/093
Todos los autores, afiliaciones y resúmenes han sido publicados tal como fueron enviados.
