"debriefing" Y EVALUACIN

DE LA SIMULACIN
Debriefing" y
Evaluacin de la
Simulacin
11/13/2012
"debriefing"
donde ocurre el verdadero aprendizaje.
11/13/2012
Objetivos
Finalizada la presentacin, los participantes:
Definirn el concepto de "debriefing" o reflexin
estructurada apoyada en el contexto de la simulacin
en la educacin en salud.
Distinguirn las mejores prcticas del "debriefing" en
escenarios clnicos simulados.
Discutirn los aspectos del desarrollo e implantacin
de Evaluacin Clnica Objetiva y Estructurada
(ECOE) y la evaluacin de la simulacin.
11/13/2012
Fases de la simulacin
Establecer
introduccin


Manejo
del
simulador
Teora
Discusin
del caso
Escenario
"debriefing"
Conclusin
Dr. Peter Dieckmann
11/13/2012
Una actividad que sigue a una experiencia de
simulacin, en la que se realiza un anlisis o
reflexin guiada por el facilitador. Fomenta la
autoevaluacin, el aprendizaje reflexivo y
significativo.
-adaptado Universidad de Cdiz, 2012
11/13/2012
Importancia del "debriefing"
Reflexin sobre la experiencia vivida
Discusin sobre los objetivos de aprendizaje
Refuerzo de las buenas prcticas

11/13/2012
Importancia del "debriefing"
Aprendizaje de los errores
Aumentar el apoyo y el espritu de trabajo en
equipo
Creacin de nuevas metas de aprendizaje
individuales/grupales

-Amaya, 2012
11/13/2012
Aplicacin de nueva
informacin
pensamiento
Sentimientos
Tiempo para
reflexin
Judy Johnson-Russell, 2007
11/13/2012
Las mejores
prcticas
para
"debriefing"
Un lugar seguro
para hablar
sobre sus
pensamientos y
sentimientos
Sin crticas o
burlas de sus
compaeros o
profesores
Ambiente
tranquilo lejos
del simulador
rea donde
puedan ver y
compartir los
recientes
eventos
Judy Johnson-Russell, 2007
11/13/2012
Deber ser un momento de descubrimiento, de
aprendizaje compartido, ms que uno de
evaluacin.
Garantizar la seguridad y el estmulo durante el
proceso.

Las mejores prcticas de "debriefing"
11/13/2012
Consideraciones para el "debriefing"
Lugar (ubicacin)
Tiempo
Rol del facilitador
Rol del estudiante
Tipos de "debriefing"
11/13/2012
Ubicacin
Lugar privado y tranquilo
Saln o rea con mesa que permita que los
participantes se sienten de manera circular
11/13/2012
Ubicacin
Televisor o pantalla con video
Libros de texto, guas, PDR, documentacin
relacionada al escenario, pizarra y el expediente
del paciente.

11/13/2012
Tiempo
Debe ocurrir lo ms pronto posible
El tiempo depender de:
objetivos
nivel y cantidad de estudiantes
complejidad del escenario
Se recomienda entre 30 minutos y una hora.

11/13/2012
Rol del facilitador durante el "debriefing"
Facilitador
Realizar
preguntas
Estimular el
pensamiento
Comprensin
y anlisis
profundo
Rol del facilitador
11/13/2012
Rol del estudiante durante el
"debriefing"
Informar sobre los procedimientos o
comportamientos que observan durante el
escenario y cules se omiten.


11/13/2012
Rol del estudiante durante el
"debriefing"
Retroalimentacin entre pares
Trabajo en equipo

11/13/2012
Tipos de "debriefing"
"debriefing" verbal
-Es el ms comn y ms efectivo
-Se realiza inmediatamente despus de la simulacin




11/13/2012
Tipos de "debriefing"
"debriefing" escrito
-En ocasiones se puede dar al finalizar el "debriefing"
verbal.
-Ofrece tiempo adicional para procesar pensamientos y
expresarlos en forma escrita.
-Permite la integracin de la tecnologa a travs del uso
de blogs, wikis, entre otros.
11/13/2012
Tipos de "debriefing"
Journals (diarios)
-Es un tipo de "debriefing" escrito
-Tiende a promover la autoevaluacin y profundizar en
el aprendizaje
-Proporciona un intercambio privado o personal con el
facilitador
11/13/2012
Tcnicas efectivas
Interacciones grupales.
Reflexin individual y maximizar el aprendizaje.
Preguntas abiertas que ayuden al estudiante a
identificar sus sentimientos y la razn para ellos.

11/13/2012
Ejemplos de preguntas abiertas

Cmo te sentiste durante el escenario?
Qu crees que le caus los vmitos al Sr. Wilson?
Cuando insertaste el tubo nasogstrico; qu
esperabas que ocurriera?
Las preguntas abiertas, pueden utilizarse para ayudar a
los estudiantes a evaluar su experiencia en general y su
relacin con el mundo real.
11/13/2012
Uso de videos
Es una excelente herramienta para un buen
"debriefing"
Provee direccin a la discusin
Ayuda a los participantes a recordar buenos y malos
aspectos del escenario

Amaya Afanador 11/13/2012
Uso de videos
Recomendaciones:
El facilitador no debe hablar o argumentar mientras
se observa el video
Utilizar preguntas como por ejemplo: Qu
observaron sobre el trabajo en equipo?
Utilizar instruccin y facilitacin conforme se
requiera
Amaya Afanador
11/13/2012
Recomendaciones para el "debriefing"
Asignar tiempo suficiente para la reunin
Formular preguntas abiertas
Evitar crticas directas
Promover la participacin de todos
Desarrollar planes de accin, una vez se
identifiquen las debilidades


11/13/2012
"debriefing" #1
11/13/2012
"debriefing" #2
11/13/2012
"debriefing" Y EVALUACIN
DE LA SIMULACIN
EVALUACIN DE LA
SIMULACIN

11/13/2012
Evaluacin de la Simulacin
Evaluacin de un programa de entrenamiento
basado en la simulacin.

Evaluacin del aprendizaje a travs de la
simulacin.

11/13/2012
Clarificacin de conceptos
Evaluacin programa
Assessment individuo
Evaluacin Formativa mejoramiento
Evaluacin Sumativa para comprobar
Investigacin de los resultados - efectividad

11/13/2012
Evaluacin de un Programa de
entrenamiento basado en la Simulacin
Propsito:
Mejoramiento del programa
Determinar pasos a seguir y tomar decisiones
Para determinar efectividad
Para documentar sucesos
Para medir resultados
11/13/2012
Modelo para evaluar la efectividad de un
programa de adiestramiento basado en la
Simulacin
Evaluacin de
Resultados
(impacto)
Evaluacin de
comportamiento
(conocimiento
aplicado)
Evaluacin de Aprendizaje
(conocimiento adquirido)
Evaluacin de Reacciones
(satisfaccin)
Modelo de
Kirkpatrick
11/13/2012
Modelo de Kirkpatrick
Nivel 1: Reaccin
Se evala la
reaccin de los
participantes en el
programa de
formacin
Busca el grado de
satisfaccin de los
estudiantes.

Impacto
Conocimiento
aplicado
Conocimiento
Adquirido
Satisfaccin
11/13/2012
Modelo de Kirkpatrick
Nivel 2: Aprendizaje
Se centra de pleno
en la evaluacin de
las competencias
adquiridas

11/13/2012
Impacto
Conocimiento
aplicado
Conocimiento
Adquirido
Satisfaccin
Modelo de Kirkpatrick
Nivel 3: Conducta
Se evala la
transferencia de los
aprendizajes al
lugar de trabajo

11/13/2012

Impacto
Conocimiento
aplicado
Conocimiento
Adquirido
Satisfaccin
Modelo de Kirkpatrick
Nivel 4: Resultados
Lo que se pretende
evaluar en este
nivel es el impacto
en la poblacin o
sociedad.

11/13/2012

Impacto
Conocimiento
aplicado
Conocimiento
Adquirido
Satisfaccin
Relacin entre modelos de evaluacin
de Kirkpatrick y Miller
Hacer
Demostrar
Saber cmo
Saber
Pirmide Miller
Modelo Kirkpatrick
11/13/2012
11/13/2012


Evaluacin del aprendizaje a travs
de la simulacin


El assessment es el proceso de obtener,
organizar y presentar informacin variada sobre
qu aprende el alumno y cmo lo aprende,
mediante el uso de diferentes tcnicas y en
diferentes momentos durante el proceso de
enseanza-aprendizaje.

Assessment o Avalo
GCRME, University of Miami
11/13/2012
El assessment dirige el aprendizaje

Permite a la institucin educativa medir el
progreso individual de los estudiantes.

Es fundamental para la conceptualizacin de los
resultados (outcomes) y las competencias del
programa.

Por qu es importante el
Assessment?
GCRME, University of Miami
11/13/2012

Garantiza la competitividad de los estudiantes
como futuros proveedores de salud.

Permite a los participantes prepararse para
tomar exmenes de revlida, certificaciones
profesionales y credenciales.

Por qu es importante el
Assessment?
11/13/2012
EVALUACIN
CLNICA
OBJETIVA
ESTRUCTURADA
11/13/2012
Evaluacin de destrezas ECOE

La Evaluacin Clnica Objetiva Estructurada
(ECOE) es un mtodo que utilizamos para
evaluar competencias para un curso en
particular.




GCRME, University of Miami
11/13/2012
Diseo
La ECOE est diseada en un formato que
incorpora diversos instrumentos evaluativos y se
desarrolla a travs de estaciones que simulan
situaciones clnicas.

11/13/2012
Diseo de ECOE
El poder de este formato
radica en la combinacin
de mtodos de
evaluacin, de manera
que es capaz de explorar
suficientemente tres de
los cuatro niveles de la
pirmide de Miller: saber,
saber cmo y demostrar
cmo.


Hacer
Demostrar
Saber cmo
Saber
11/13/2012
Los elementos fundamentales para
el diseo de ECOE son:

El Comit de Prueba
La tabla de especificaciones, representacin
resumen de la prueba.
Los casos, que darn lugar a las estaciones y a las
listas evaluativas.

11/13/2012
1. Examina los componentes individuales de una
competencia y una amplia muestra de las
mismas.
2. Evala el proceso y los resultados.
3. Utiliza checklists o listas de control / escalas
validadas para los examinadores
4. Utiliza preguntas relacionadas con los
objetivos
5. Utiliza la simulacin de casos y pacientes
estandarizados

Caractersticas de ECOE

11/13/2012
Propsito de la prueba
Contenidos de dominio
Nivel de habilidad evaluada
Formato de la prueba
Nmero de estaciones
Competencias a ser evaluadas
Instrumentos de evaluacin
Evaluadores
Establecer mnimo requerido
Planificacin de ECOE
11/13/2012
Ejemplo:
Garantizar que los estudiantes del programa Tcnico
de Emergencias Mdicas Paramdico tengan las
habilidades y competencias clnicas necesarias para
obtener su grado acadmico.
Propsito de la Prueba
11/13/2012
Ejemplo:
Pacientes con alteraciones del sistema
cardiorespiratorio.
Contenido de Dominio
11/13/2012
Ejemplo:

Destrezas especficas
Examen fsico cardiorespiratorio
Entubacin
Resucitacin cardiopulmonar


Nivel de destrezas a evaluar
11/13/2012
Ejemplo:
Realizar las destrezas clnicas (15 minutos)
Documentacin (10 minutos)
Pensamiento Crtico (10 minutos)
Formato de prueba
11/13/2012
3 a 12 estaciones
Basado en el propsito y contenido de la prueba
Basado en los recursos disponibles
Nmero de estaciones
11/13/2012
Panificacin de la prueba Especificaciones
Propsito de la prueba
Contenido del dominio
Nivel de destrezas a ser evaluadas
Formato
Nmero de estaciones
Competencias
Instrumentos de evaluacin
Planificacin de ECOE
11/13/2012
Planilla de Especificaciones
Es el documento bsico de la ECOE. Representa el
diseo general de la prueba, y est constituida por una
tabla donde se relacionan los casos con los objetivos,
competencias y destrezas a evaluar en cada ejercicio.
En la tabla de especificaciones se establece la cantidad
de estaciones que se evaluarn en cada ejercicio, as
como el tiempo asignado para realizar cada estacin.

11/13/2012
Planilla de Especificaciones
11/13/2012
Instrumentos de evaluacin
Los participantes de ECOE se evalan a travs de
instrumentos de evaluacin diseados para cada
estacin.


11/13/2012
Criterios de evaluacin
Se recomienda que los criterios estn basados en
las competencias y estndares para los
profesionales de la salud.
IOM (Institute of Medicine)
QSEN (Quality and Safety Education for Nursing)
Juntas Examinadoras
Otros

11/13/2012
ECOE Programa de Emergencias
Mdicas 2012
11/13/2012
Preguntas
11/13/2012
Referencias
Dieckman, P. (2009). Simulation is more than Technology The Simulation Setting.
Recuperado el 11 de septiembre de 2012 desde
http://www.laerdaltraining.com/sun/enable/PDF/dieckman_article.pdf
Jeffries, P. (2007). Simulation in Nursing Education from Conceptualization to
Evaluation. National League of Nursing. USA.
Gordon Center for Research in Medical Education University of Miami Miller School
of Medicine (2012). ISIM Improving Simulation Instructional Methods.
Universidad de Cdiz, Departamento de Enfermera y Fisioterapia (2012). Manual de
Casos Clnicos Simulados.
11/13/2012
Muchas Gracias!
11/13/2012