METODOLOGÍAS Y HERRAMIENTAS PARA LA CAPACITACIÓN EN GESTIÓN DE RIESGO DE DESASTRES 81 Capítulo VI LA EVALUACIÓN DEL PROCESO DE CAPACITACIÓN
82
METODOLOGÍAS Y HERRAMIENTAS PARA LA CAPACITACIÓN EN GESTIÓN DE RIESGO DE DESASTRES 83 Una de las principales debilidades de las actividades y procesos de capacitación en prevención y atención de desastres sigue siendo la evaluación de tales actividades y del impacto del proceso educativo en general. En este capítulo, formulamos algunas recomendaciones para los capacitadores en prevención y atención de desastres. Se puede definir la evaluación como el proceso sistemático de recolección y análisis de la información, destinado a describir la realidad y emitir juicios de valor sobre su adecuación a un patrón o criterio de referencia establecido. La evaluación está referida al cumplimiento de los objetivos y el desarrollo de las actividades planificadas. Tiene como objetivo extraer lecciones que permitan mejorar el proceso seguido hasta entonces, u otros procesos futuros. Ello implica que los objetivos, resultados e indicadores de éxito tanto de las actividades y del proceso de capacitación deben ser claros y específicos para todos los responsables de su ejecución. Sin este prerrequisito será muy difícil escoger los instrumentos y decidir qué tipo de información nos será más útil para lograr una buena evaluación del proceso y de las actividades de capacitación. La evaluación de actividades de capacitación está referida a las capacidades adquiridas por los participantes. Cuando estas actividades se desarrollan con enfoques participativos, la evaluación forma parte de todo el proceso de capacitación: se trabaja antes, durante y al final de cada uno de los temas o de la actividad. La evaluación de las actividades y procesos de capacitación para prevenir desastres o responder a situaciones de emergencia requiere de indicadores que deben ser definidos con la participación de los capacitados. Podemos evaluar el grado de satisfacción de los capacitados, la evaluación del aprendizaje (tanto del proceso, como del grado de los conocimientos consensuados), o la utilidad de la capacitación o su aplicabilidad en relación con los riesgos y situaciones de emergencia. Otro aspecto para tener en cuenta es el nivel de participación de los capacitados en la evaluación. Generalmente, se aplica cuestionarios para evaluar una actividad; en otros casos, se lanza preguntas abiertas a los capacitados para que puedan expresar sus puntos de vista al culminar una actividad de capacitación. La evaluación puede estar referida a una determinada acción educativa o al proceso más integral de capacitación. 1) Para qué evaluar? Para determinar si los beneficiarios han comprendido la información necesaria para promover una gestión de riesgos en el contexto en el que viven.
84 Para establecer si los métodos, contenidos u otros son apropiados para transmitir las habilidades requeridas. Para mejorar el proceso o programa de capacitación a partir de las acciones ya implementadas. Para extraer lecciones que puedan ser aplicadas en otros procesos o programas de capacitación. 2. Formas que asume la evaluación de las actividades de capacitación Evaluación del nivel de satisfacción: cuán satisfechos están los participantes con la actividad? Tiene como objetivo conocer la opinión de los participantes sobre los diferentes aspectos que conforman la actividad educativa. Estos son los aspectos que se debe tomar en cuenta en las evaluaciones: Calidad de los capacitadores (conocimientos, didáctica). Métodos didácticos utilizados: si son apropiados considerando el capacitado. Materiales: utilidad, contenidos, calidad, claridad. Ambiente físico. Utilidad y aplicabilidad de los contenidos de la capacitación. Participación y relaciones entre los participantes. Organización general. Al finalizar la acción formativa, se les entrega un cuestionario que generalmente es anónimo y contiene preguntas cerradas y abiertas. Evaluación del aprendizaje: qué conocimientos, habilidades o actitudes han adquirido los participantes? Se trata de medir o contrastar el nivel de modificación del comportamiento producido en los participantes como resultado de la capacitación. Esta evaluación indaga si los participantes lograron los objetivos de capacitación. Los aspectos que se debe tener en cuenta son: Cuándo evaluar: antes, durante, después de la capacitación. Quién debe realizar la evaluación? Cómo realizar la evaluación? Interpretación de los datos obtenidos. A quiénes se debe informar de los resultados de las evaluaciones aplicadas? Los instrumentos que se utilizará son pruebas escritas, entrevistas (ambas: antes, durante, después de la capacitación) y pruebas situacionales.
METODOLOGÍAS Y HERRAMIENTAS PARA LA CAPACITACIÓN EN GESTIÓN DE RIESGO DE DESASTRES 85 Evaluación de la eficacia de la capacitación en el tiempo: Están aplicando lo aprendido? Es la evaluación que se realiza con posterioridad a la conclusión de las actividades de capacitación, observando las capacidades desarrolladas y el desempeño de los participantes en el campo de la gestión de los desastres. Es un proceso que permite medir hasta qué punto y con qué eficacia son utilizados los conocimientos, habilidades o actitudes adquiridos en la acción formativa. Esta evaluación, además, debe responder a las preguntas: Qué factores han facilitado o dificultado la aplicación de la capacitación? Fueron todos los contenidos relevantes o algunos no lo han sido? Hasta qué punto se puede atribuir los cambios positivos de desempeño a la capacitación recibida? Los instrumentos que se puede utilizar son: evaluación de desempeño (individualizada o de grupo), informes de responsables de las entidades a cargo de las actividades, entrevistas, encuestas, observación y estudios comparativos a partir de una línea de base. Cabe destacar que en el caso de la preparación para emergencias, el instrumento clave para la evaluación pueden ser los simulacros, a lo cual habría que agregar algunos indicadores (que se construirán según el tipo de participante) relativos a la implementación de los planes, como: la señalización de peligros y rutas de evacuación, la habilitación de las rutas de escape, los sistemas de alerta o la actualización periódica de los planes de emergencia. 3. Evaluación según el momento Se realiza evaluaciones al inicio, durante y al final de la actividad del proceso de capacitación. El momento de evaluación dependerá del diseño de la actividad o programa de capacitación, de las necesidades del evaluador y de las situaciones que se sucedan durante el proceso de enseñanza-aprendizaje. Al inicio: son evaluaciones que se realizan al iniciar el proceso de capacitación para: Identificar qué conocimientos o destrezas tiene el participante, determinar qué áreas necesita reforzar y orientar la capacitación hacia éstas. Ajustar la capacitación a las necesidades del grupo (nivelación). Durante el proceso: realizar un seguimiento cercano de los progresos que logran los participantes. Con el fin de evaluar los niveles de conocimiento de los beneficiarios y la efectividad de los métodos de capacitación es necesario instrumentar programas de evaluación continua durante la capacitación y, de ser posible, poner en práctica cualquier medida correctiva.
86 Evaluación final: es la más usada y permite verificar si se ha alcanzado el nivel suficiente de conocimientos y capacidades. 4. La retroalimentación Una buena forma de determinar qué tan apropiados han sido los métodos y estilos de capacitación y de tener una idea precisa de dónde puede ser necesaria una mayor capacitación para la promoción de la gestión de riesgo, es interrogar a los mismos beneficiarios. Esto puede hacerse formalmente al final de las sesiones de capacitación, mediante el llenado de cuestionarios que incluyan asuntos como los siguientes (es necesario recabar información tanto positiva como negativa de los siguientes aspectos): Lo conveniente y confortable que ha resultado el sitio y las facilidades de la capacitación, la duración de las sesiones, los recesos y las oportunidades de formular preguntas. Lo relevante que ha sido el material presentado y cualquier área en la que el personal considere que requiere mayor información o práctica. Lo conveniente que han resultado los estilos y métodos de capacitación empleados qué resultó efectivo y qué no al transmitir la información? Una auto evaluación integral de conocimiento en las responsabilidades encomendadas; Sugerencias para mejorar sesiones futuras de capacitación. 5. Ideas útiles en la construcción de indicadores de evaluación Algunos principios que pueden servir para construir indicadores de evaluación de las actividades de capacitación los encontramos en el código de conducta de la Cruz Roja y de la Media Luna Roja. Entre éstos, destacamos: El respeto a las culturas y costumbres locales. La utilización de medios disponibles a nivel local para hacer frente a los desastres. La participación de los beneficiarios. El prepararse para responder a las emergencias tratando de reducir la vulnerabilidad ante desastres futuros. La creación de mecanismos para la rendición de cuentas a los destinatarios de la ayuda y a los donantes. El reconocimiento de los damnificados como sujetos con aptitudes y aspiraciones y no solo como víctimas. En el caso de la capacitación para la prevención de desastres, se hace necesario contar con algunos instrumentos de evaluación de los conocimientos adquiridos, como pueden ser las pruebas individuales de entrada y salida a los participantes de los talleres o, en el más largo plazo, los cambios de actitudes manifiestas, por ejemplo, en la gestión y
METODOLOGÍAS Y HERRAMIENTAS PARA LA CAPACITACIÓN EN GESTIÓN DE RIESGO DE DESASTRES 87 ejecución de obras de prevención, en la evaluación de riesgo de los centros poblados, en la evaluación de la vulnerabilidad de las escuelas, en la incorporación y priorización de actividades de prevención, en los planes y presupuestos locales, en las demandas de incorporación de actividades de prevención en los distintos programas sociales y actividades productivas.
88