Evaluación de resultados de la educación financiera

Transcripción

1 Evaluación de resultados de la educación financiera Documento de Trabajo N 3

2 Se autoriza la reproducción, traducción o adaptación de las secciones de este libro según sea necesario para satisfacer las necesidades locales de los usuarios, siempre y cuando las copias así reproducidas, traducidas o adaptadas sean distribuidas sin costo o a precio de costo y sin fines de lucro y siempre y cuando los cambios resultantes, si los hubiera, preserven la integridad del libro. Sírvase notificar a Microfinance Opportunities y/o a Freedom from Hunger sobre la traducción de estos materiales, de existir, y proporcionar a cada institución una copia de la misma. Toda copia de las secciones de este libro debe incluir la siguiente aclaración: 2005 Microfinance Opportunities. Derechos reservados Cualquier cambio sustancial en el contenido deberá ser autorizado por escrito por Microfinance Opportunities. Para consultas sobre los derechos, sírvase comunicarse con: Microfinance Opportunities 1701 K Street NW, Suite 650 Washington DC USA Tel.: Fax: info@mfopps.org Para otras consultas, comunicarse con Microfinance Opportunities o con Freedom from Hunger Freedom from Hunger 1644 DaVinci Court Davis, CA USA Tel.: Fax: education@freefromhunger.org

3 EVALUACIÓN DE RESULTADOS DE LA EDUCACIÓN FINANCIERA Documento de Trabajo N 3 J. Sebstad M. Cohen K. Stack Washington, D.C. 2006

4 PREFACIO Documento de trabajo sobre la evaluación de resultados Jennefer Sebstad es la principal autora del documento final. Monique Cohen contribuyó con la parte técnica y Kathleen Stack con el diseño de la educación. MICROFINANCE OPPORTUNITIES Microfinance Opportunities fue fundada en 2002 como un centro de recursos microempresariales que promueve operaciones microfinancieras dirigidas por los clientes. Su objetivo es ayudar a mejorar el acceso de los pobres a servicios financieros bien diseñados y de calidad. Microfinance Opportunities ofrece investigación práctica, capacitación y asistencia técnica en tres áreas orientadas a los clientes de servicios microfinancieros: Educación Financiera, Microseguros y Evaluación del Cliente. FREEDOM FROM HUNGER Fundada en 1946, Freedom from Hunger es una organización sin fines de lucro comprometida con el desarrollo internacional que ofrece soluciones innovadoras y sostenibles de autoayuda para combatir la pobreza y el hambre crónicos. Freedom from Hunger se especializa en garantizar el acceso de los pobres a servicios microfinancieros, de protección de la salud y de capacitación, permitiéndoles mejorar sus habilidades de supervivencia diaria y alcanzar seguridad alimentaria para sí mismos y sus familias. CITIGROUP FOUNDATION Citigroup Foundation, que otorga partidas de financiamiento en más de 85 países de todo el mundo, concentra sus esfuerzos básicamente en tres áreas: educación financiera, educación de la próxima generación y consolidación de comunidades y empresarios. Mayor información disponible en el sitio

5 AGRADECIMIENTOS La idea de desarrollar un programa de capacitación en educación financiera para los pobres surgió durante una cena con Jayshree Vyas, Directora Ejecutiva de SEWA Bank. En aquella ocasión, Jayshree sustentó con gran acierto que la consolidación de una cultura financiera entre los pobres constituye un aspecto crítico para el logro de mejoras reales en su capacidad para administrar su dinero y promover la acumulación de bienes. Cuando presentamos esta idea ante Citigroup Foundation por primera vez en el 2002, hablar de educación financiera para los clientes de las instituciones microfinancieras era algo nuevo y diferente. Además de SEWA Bank, pocas instituciones de los países en desarrollo se habían aventurado en el campo de la educación financiera, o incluso tal vez ninguna. Ante tales circunstancias, desarrollar un programa de fundamental trascendencia para promover la educación financiera en los países pobres se presentaba como un gran reto para Microfinance Opportunities y Citigroup Foundation. Freedom from Hunger había trabajado con SEWA en su programa de capacitación en educación financiera y fue invitado a participar como asociado principal en el Desde entonces, ha crecido el interés en este programa por parte de organizaciones y expertos en microfinanciamiento. Mientras muchos se preguntaban en voz alta por qué la industria microfinanciera había tardado tanto en reconocer la importancia de la educación financiera, estas organizaciones la percibieron de inmediato como una oportunidad de beneficio mutuo donde todos ganan, tanto las instituciones microfinancieras como sus clientes. Por ello, quisiéramos agradecer en primer lugar a Citigroup Foundation por invertir en este programa. Chip Raymond, ex Presidente de la Fundación, y Leslie Meek, nuestra Funcionaria de Programas, asumieron un doble riesgo al embarcarse en un área nueva de las microfinanzas y al apoyar a una organización que comenzaba operaciones, Microfinance Opportunities. Ellos han sido socios extraordinarios por su invalorable apoyo para la realización de este proyecto. Posteriormente, se unieron a nuestro trabajo otros miembros del equipo de Citigroup, como Stacey Sechrest de la Oficina de Educación Financiera y Amy Feldman de Citigroup Foundation, aportando valiosa información hacia la culminación del plan de estudios. Asimismo, deseamos expresar nuestro reconocimiento a las instituciones asociadas, así como a sus clientes, quienes hicieron posible la realización del plan de estudios. Estas instituciones son Al Amana (Marruecos), CARD Bank (Filipinas), The Equity Building Society (Kenia), Microfinance Centre (Polonia), Pro Mujer (Bolivia), SEWA Bank (India) y Teba Bank (Sudáfrica). Durante los tres años de vida de este proyecto, estas instituciones han trabajado diligentemente llevando a cabo estudios de mercado, así como desarrollando y probando los módulos de capacitación. Debemos agradecer enormemente a Candace Nelson por su contribución en el área técnica y financiera. También es oportuno mencionar nuestro especial reconocimiento a los miembros de nuestro personal, quienes han brindado todo su apoyo para la culminación de este trabajo. Entre ellos se encuentran Tracy Gerstle, Diana Tasnadi, Danielle Hopkins y Liz McGuinness de Microfinance Opportunities y Christopher Dunford, Rossana Ramirez, Ellen Vor der Bruegge, Marc Bavois, Joan Dickey, Julie Uejio, Bobbi Gray y Wava Haggard de Freedom from Hunger. Monique Cohen Jennefer Sebstad, Consultora Kathleen Stack Microfinance Opportunities Microfinance Opportunities Freedom from Hunger Diciembre 2005

6

7 CONTENIDOS Evaluación de resultados de la educación financiera 1. INTRODUCCIÓN HACIA UN MARCO DE TRABAJO PARA LA EVALUACIÓN DE PROGRAMAS DE EDUCACIÓN FINANCIERA Insumos Resultados Impactos ENFOQUE EN LOS RESULTADOS Indicadores de aprendizaje financiero Conocimientos, habilidades y actitudes Comportamientos financieros Resultados financieros Otra información referencial sobre los participantes Características de los clientes Exposición a la educación financiera Evaluación de la calidad de las actividades de capacitación y facilitación Indicadores del desempeño institucional OTROS ASPECTOS DE LA EVALUACIÓN Enfoques de la evaluación Sistemas para llevar el control del avance logrado Evaluación única de resultados Evaluaciones de impacto Diseño de los indicadores Programación de las actividades de evaluación Cuánto costará? Diseminación de los resultados RESUMEN Y CONCLUSION Anexos

8

9 EVALUACIÓN DE RESULTADOS DE LA EDUCACIÓN FINANCIERA 1. INTRODUCCIÓN Los programas de capacitación en educación financiera para los pobres son relativamente nuevos en los países en desarrollo y en transición. Aunque todavía pocos en número, esfuerzos innovadores están surgiendo para ayudar a los clientes de instituciones microfinancieras, asi como otras personas pobres, a mejorar la administración de sus bienes mediante la consolidación del conocimiento de los principales conceptos financieros y de las habilidades necesarias para la toma informada de decisiones financieras. Microfinance Opportunities (MFO) y Freedom from Hunger han iniciado varios de estos programas en educación financiera junto con siete organizaciones afiliadas. 1 El objetivo de los programas es mejorar el conocimiento y las habilidades sobre temas como el presupuesto, el ahorro, la administración de la deuda, el uso de los servicios bancarios y las negociaciones financieras. Citigroup Foundation ha apoyado a estos esfuerzos a través del Proyecto Educación Financiera para los Pobres. La educación financiera con un enfoque centrado en los participantes Estas actividades de capacitación en educación financiera, que todavía se encuentran en una etapa preliminar, han sido desarrolladas usando un diseño de educación con un enfoque centrado en los participantes. Este método comienza con la realización de un estudio de mercado para identificar las necesidades y oportunidades de los clientes del sector microfinanciero con respecto a la educación financiera. Los resultados del estudio de mercado, llevado a cabo por las organizaciones asociadas al proyecto en cinco países en desarrollo, destacan la infinita energía y creatividad que aplican las personas de bajos recursos para administrar sus necesidades diarias, aprovechar oportunidades y enfrentar las dificultades y eventos de cada etapa de la vida que traen consigo presiones financieras sobre sus familias y negocios. Asimismo, el estudio revela el papel preponderante que juegan el ahorro y el crédito (por lo general accesibles a través del sistema financiero informal o del sector microfinanciero) en las estrategias económicas de los pobres. Este estudio muestra que los comportamientos financieros son con frecuencia reactivos. Es decir, responden a las necesidades y a los problemas inmediatos dejando poco tiempo para considerar las opciones disponibles, las ventajas o desventajas o las consecuencias a largo plazo. Una respuesta común es obtener préstamos bajo términos muy desfavorables, lo que resulta en el sobreendeudamiento y en la 1 Al Amana (Marruecos), SEWA Bank (India), Pro Mujer (Bolivia), Teba Bank (Sudáfrica), Equity Building Society (Kenia), Microfinance Centre (Polonia) y CARD Bank (Filipinas). 1 Microfinance Opportunities Citigroup Foundation Freedom from Hunger

10 Evaluación de resultados de la educación financiera El aprendizaje financiero se puede definir como el conocimiento de los conceptos financieros, así como de las habilidades y actitudes necesarias para traducir este conocimiento en comportamientos que resultan en buenos resultados financieros. erosión de los bienes. En algunos casos, experiencias financieras negativas, resultan en la toma de actitudes fatalistas acerca de cómo saldar una deuda o cómo avanzar financieramente. Un tema relacionado que emerge del estudio de mercado, es el sentimiento de impotencia que experimentan los pobres, especialmente las mujeres, al enfrentar los asuntos financieros en los bancos, en sus relaciones comerciales y con sus esposos u otros miembros de su familia. Esto está conectado no solamente con el conocimiento de los conceptos financieros, sino también con la falta de habilidades para establecer negociaciones financieras. El estudio sugiere además que muchos pobres carecen de los recursos para tomar decisiones financieras informadas, especialmente dentro de un contexto de rápida proliferación de nuevos productos y servicios financieros ofrecidos por los bancos y otras entidades de consumo. La administración de las fuentes formales de crédito requiere de más disciplina y más planificación. Los términos de fuentes de crédito formales son, por lo general, menos flexibles que los términos que imponen las fuentes informales y las consecuencias de la morosidad son más graves. El estudio de mercado confirma además que las personas usualmente aprenden a manejar su dinero de manera informal a través de la experiencia personal y de la información que reciben de la familia, amigos y compañeros y no tanto como resultado de la educación formal. Aunque los pobres reconocen las consecuencias negativas de la mala administración del dinero y la importancia del aprendizaje financiero, tienden no obstante a ver la educación financiera como algo que corresponde únicamente a los ricos. Sobre la base de los resultados de éste y otros estudios, MFO y Freedom from Hunger han trabajado con organizaciones afiliadas (instituciones microfinancieras de siete países) en el diseño de los módulos de la educación financiera sobre las cinco áreas temáticas descritas anteriormente. Los equipos de diseño usaron los resultados del estudio de mercado para identificar las principales dificultades y los comportamientos financieros que actualmente muestran los clientes del sector microfinanciero. Esto proporcionó las bases para identificar los comportamientos financieros que se desea alcanzar en el futuro y para diseñar las actividades educativas que permitirán mejorar los conocimientos, habilidades y actitudes necesarias para respaldar dichos comportamientos (Tabla 1). Una vez que las organizaciones sometieron a prueba las actividades educativas en el campo, éstas fueron transformadas en módulos genéricos que pueden ser adaptados y usados en diferentes lugares. 2

11 1. INTRODUCCIÓN TABLA 1: USO DEL ESTUDIO DE MERCADO PARA IDENTIFICAR LOS COMPORTAMIENTOS FINANCIEROS DESEADOS Área temática Presupuesto Ejemplos de comportamientos actuales Viven día a día Comportamientos financieros reactivos Falta de planificación financiera Ejemplos de comportamientos deseados Planificar los gastos por anticipado Elaborar un presupuesto Usar un presupuesto para administrar el dinero Ahorros Administración de la Deuda Gastos innecesarios Ahorro irregular Ahorro sin tener metas Pedir dinero prestado para enfrentar emergencias Sobreendeudamiento Préstamos sin comprender bien los términos y consecuencias de la morosidad Evitar gastos innecesarios Preparar un plan de ahorro Ahorrar regularmente Mantener una cuenta de ahorros para emergencias Preparar un plan para reducir la deuda Evitar la deuda en exceso Pedir préstamos comprendiendo bien los términos y condiciones Negociaciones Financieras Servicios Bancarios Posición débil durante las negociaciones comerciales Las mujeres tienen limitado control sobre sus propios ingresos Limitado conocimientos de los servicios bancarios Limitado uso de los servicios bancarios Negociar con una meta específica sobre lo que se desea obtener de la transacción comercial Asumir un papel activo en las decisiones sobre sus propios ingresos Conocer las opciones financieras y sus términos y condiciones Usar los servicios bancarios para respaldar las metas financieras En otros documentos se describen los resultados del estudio de mercado y el diseño de las actividades educativas. El propósito del presente documento es ofrecer una guía para la evaluación de resultados de la educación financiera en cuanto a la promoción de (1) mejoras en los conocimientos, habilidades y actitudes sobre temas financieros; y (2) comportamientos que conducen a mejores resultados financieros y, finalmente, mayor acumulación de bienes entre la población pobre de los países en desarrollo. En esta etapa inicial del desarrollo de la educación financiera para los pobres de los países en desarrollo, nuestro enfoque está concentrado básicamente en generar información que pueda ser útil para mejorar el diseño y la implementación de los programas de educación financiera para este nuevo grupo meta. 3

12 Evaluación de resultados de la educación financiera 2. HACIA UN MARCO DE TRABAJO PARA LA EVALUACIÓN DE LOS PROGRAMAS DE EDUCACIÓN FINANCIERA Los resultados e impactos de los programas de educación financiera pueden ser muy amplios, dependiendo del objetivo del programa, su diseño en términos del contenido y métodos de enseñanza e implementación. Cualquier estrategia de evaluación necesita comenzar por definir un conjunto específico de preguntas, niveles relevantes de análisis, e indicadores que puedan ser medidos. La elección dependerá del propósito de la evaluación, del público al que está dirigida y de los recursos disponibles. También dependerá en lo que razonablemente se espere que cambie como resultado del programa dentro del periodo de tiempo del estudio. Finalmente, la elección de los indicadores de resultados debe estar guiada por una conceptualización detallada de una ruta de impacto que delinee la relación entre: el tipo particular de capacitación en educación financiera; cambios a nivel de los clientes en los conocimientos, habilidades y actitudes; cambios en los comportamientos financieros y en los resultados financieros; y cambios superiores a nivel social e institucional (por ejemplo, bienestar de los clientes y desempeño de la IMF). En la siguiente etapa del Proyecto Educación Financiera para los Pobres se desarrollará un marco de trabajo complementario más elaborado. 2 En este documento presentamos las bases de un marco de trabajo para evaluar los resultados e impactos de la educación financiera. La Figura 1 establece la relación entre los programas de educación financiera, el aprendizaje financiero e impactos más amplios a nivel social e institucional. Los componentes del marco de trabajo se presentan y describen brevemente a continuación. 4 2 El presente marco de trabajo tiene carácter preliminar y guía los esfuerzos de la etapa piloto inicial para evaluar los resultados de la educación financiera en los clientes del sector microfinanciero. La siguiente etapa del Proyecto Educación Financiera para los Pobres incluye planes para desarrollar un marco de trabajo más detallado para evaluar los impactos de la educación financiera.

13 2. HACIA UN MARCO DE TRABAJO PARA LA EVALUACIÓN DE LOS PROGRAMAS DE EDUCACIÓN FINANCIERA FIGURA 1: MARCO DE TRABAJO PARA LA EVALUACIÓN DE RESULTADOS E IMPACTOS DE LA EDUCACIÓN FINANCIERA INSUMOS RESULTADOS Aprendizaje financiero IMPACTOS Educación financiera Experiencias de aprendizaje financiero Mejoras en los conocimientos, habilidades y actitudes sobre temas financieros Comportamientos financieros de los clientes y prácticas que mejoran los resultados financieros A nivel del cliente: incremento de bienes menor vulnerabilidad mejoras en el bienestar financiero A nivel de la institución financiera: mejor desempeño financiero mejor capacidad de respuesta a las necesidades de servicios financieros de los pobres 2.1. Insumos Nuestro marco de trabajo define los insumos como la educación financiera, lo cual abarca los programas de capacitación, seminarios, campañas y otros tipos de eventos de aprendizaje para los clientes del sector microfinanciero y otros segmentos de la población pobre. Ésta es la variable de entrada de nuestro marco de trabajo. Varias características de la educación financiera afectarán los resultados. El diseño de la educación financiera define los comportamientos que ésta busca alcanzar y determina los resultados. Otra característica es el grupo meta de la educación financiera y si el programa está llegando o no este grupo. Otro elemento es la relevancia que tiene el contenido impartido en la educación financiera para el grupo meta. Igualmente, otro factor que es importante considerar es el nivel de exposición de los clientes a la educación financiera, o cuánta capacitación en educación financiera reciben. Un factor que con frecuencia recibe menos atención es el sistema de implementación de la educación financiera. Cuándo, dónde y cómo se implementa la capacitación, tiene implicaciones importantes para su eficacia en el logro de resultados e impactos. Es importante comprender tanto el contenido de los eventos educativos, como la manera en que se implementa dicho contenido. Por ejemplo, la capacitación se podría dar en un salón de clases formal, o a través de videos, folletos, programas de computación interactivos u otros medios. Los resultados también pueden verse afectados por quién facilita la capacitación grupos comunitarios, agencias de servicio social, instituciones de capacitación, instituciones microfinancieras u otras instituciones financieras, organizaciones religiosas u otras organizaciones que trabajan en un campo específico de interés o afinidad como las organizaciones de apoyo a los jóvenes. Estudios de mercado en Sudáfrica y estudios generales en Estados Unidos han demostrado que los diferentes grupos de personas (agrupados por género, edad, y así sucesivamente) 5

14 Evaluación de resultados de la educación financiera tienen diferentes preferencias en cuanto al lugar de capacitación. Independientemente de que la facilitación tenga lugar en un centro de capacitación formal o en un banco, en el centro comunal o a través de la escuela de la comunidad, el lugar donde se realiza el entrenamiento puede marcar una diferencia. La cantidad de capacitación en educación financiera que se puede implementar también afecta los resultados en términos de los conocimientos, habilidades, actitudes y comportamientos financieros. La diferencia entre el mensaje único de una campaña, o un seminario de un día o un curso más intensivo que dura varias semanas o meses puede tener un efecto significativo en los resultados. Las experiencias de aprendizaje financiero ( socialización económica ) desempeñan asimismo un papel preponderante en el desarrollo de los conocimientos, habilidades, actitudes y comportamientos financieros. Esto incluye lo que las personas aprenden sobre la administración del dinero de manera informal a través de la información que reciben de amigos, de los padres, de otros miembros de la familia, de colegas o profesores (Hogarth et al., 2003). El comportamiento financiero de los padres u otros modelos por ejemplo, si ahorran más de lo normal y comunican los elementos básicos del ahorro familiar a sus hijos puede tener una influencia significativa en el comportamiento financiero de una persona (Bernhiem et al., 1997). Las personas también aprenden a través de la observación o exposición a ciertas figuras positivas o modelos positivos. En algunos casos, las personas aprenden a través de una mala experiencia personal o golpes duros. El estudio de mercado reveló una serie de ejemplos de cómo los clientes controlaron diferentes tipos de crisis financieras. 3 La interacción entre la educación financiera y las experiencias de aprendizaje financiero afectan los comportamientos y resultados Resultados El aprendizaje financiero se puede definir como los conocimientos de los conceptos financieros básicos y de las habilidades y actitudes necesarias para traducir este conocimiento en comportamientos que mejoren los resultados financieros. 4 Los 3 Considerando que casi siempre existe más de una fuente de aprendizaje sobre temas financieros, el resultado de un programa particular de educación financiera se apoyará en los conocimientos y las experiencias pasadas de los participantes, reflejando nuevas experiencias financieras que se producen durante el curso de la evaluación que pueden o no estar directamente relacionadas con el programa de educación financiera. La información de los exámenes de entrada y exámenes finales revelará las diferencias entre lo observado antes y después de la capacitación; sin embargo, no establecerán diferencias entre los cambios relacionados con la educación financiera y los cambios relacionados con otras experiencias financieras. Aislar el efecto del programa de educación financiera a través de un estudio controlado, aunque es una alternativa que se espera proporcione información sobre el impacto de la educación financiera, es una solución compleja, de alto costo y de limitado valor en esta etapa inicial del desarrollo en la que el diseño de los módulos de la educación financiera evolucionará conforme sean usados y adaptados en diferentes lugares. El objetivo de nuestro trabajo de evaluación en esta etapa es proporcionar información que pueda ser usada para mejorar la relevancia y el diseño de la educación financiera. 6 4 En Sudáfrica, ECI Africa (2004) define el aprendizaje financiero como la capacidad para tomar decisiones financieras informadas así como para iniciar acciones apropiadas sobre asuntos que afectan la situación y el bienestar financiero de una persona. Es un concepto multidimensional que requiere amplitud y profundidad de conocimiento.

15 2. HACIA UN MARCO DE TRABAJO PARA LA EVALUACIÓN DE LOS PROGRAMAS DE EDUCACIÓN FINANCIERA conocimientos de los conceptos financieros pueden abarcar, por ejemplo, comprender el propósito de un presupuesto o los elementos de un plan de ahorro. Otros conceptos abarcan la comprensión de los términos y condiciones de un préstamo o establecer diferencias entre los distintos tipos de instituciones financieras. Las habilidades para traducir este conocimiento en comportamientos pueden abarcar cómo preparar un plan de gastos, abrir una cuenta de ahorros, calcular la tasa de interés u obtener información sobre los productos y servicios ofrecidos por una institución financiera en particular. Algunos ejemplos de actitudes relacionadas con el cambio de un comportamiento son la motivación para trabajar hacia el logro de una meta financiera, el compromiso de cumplir un plan de gastos, desarrollar la disciplina de ahorrar regularmente o tener confianza en sí mismo para hacer preguntas en un banco. Las mejoras en los conocimientos, habilidades y actitudes sobre temas financieros deberán contribuir a crear cambios en los comportamientos financieros. Un ejemplo de cambio de comportamiento puede ser el transformar un comportamiento financiero reactivo en un comportamiento proactivo, al elaborar un presupuesto para planificar los gastos a futuro o un plan de gastos para la administración del dinero. Otros ejemplos podrían ser recortar los gastos innecesarios (resistir la tentación de gastar), abrir una cuenta de ahorros o ahorrar regularmente, o incluso negociar los términos de la compra o de la venta de un negocio y no simplemente aceptarlos tal cual los proponen. Los cambios en el comportamiento financiero deberán conducir a su vez a mejoras en los resultados financieros. Por ejemplo, los resultados financieros pueden abarcar el logro de una meta financiera específica como reunir una cierta cantidad de ahorros, establecer un fondo de ahorro para emergencias, reducir la deuda o adquirir una casa o un bien. También podrían involucrar la reducción de las presiones financieras el sentimiento de opresión debido a las implacables exigencias y preocupaciones financieras. Otro resultado se puede ver a través de una mayor satisfacción financiera un sentido de control de las finanzas y de bienestar financiero. Esto se relaciona con la estabilidad financiera una percepción o expectativa de que las finanzas son las mismas o mejores que antes (por ejemplo, en comparación al año pasado). Las mejoras en los resultados financieros también se podrían manifestar mediante una reducción del tiempo invertido en asuntos financieros o en el número de veces que los problemas financieros personales interfieren con el trabajo o el cumplimiento de otras actividades (Kim et al., 2004) Impactos Finalmente, el aprendizaje financiero puede tener mayores impactos sociales e institucionales. A nivel del cliente, en el transcurso del tiempo, las mejoras en los conocimientos, habilidades, actitudes, comportamientos y resultados financieros deberán contribuir a una mayor acumulación de bienes. Dado que los activos son una forma de acumular riqueza (recursos financieros, físicos, humanos y sociales) a los que se puede recurrir en épocas de necesidad, éstos juegan un papel primordial en la reducción de la vulnerabilidad y en las mejoras en el bienestar de los pobres y de sus familias. Aunque no forman parte del alcance de este documento, existe una serie de 7

16 Evaluación de resultados de la educación financiera enfoques para la evaluación de impactos a este nivel (Copestake et al., 2005; AIMS, 2001; EDA Rural Systems, 2003; Sebstad y Cohen, 2001). En términos de los impactos a nivel institucional, el aprendizaje financiero entre los clientes de las instituciones financieras deberá contribuir a crear mejoras en el desempeño financiero de la institución (por ejemplo, crecimiento de la cartera, tasas de pagos, sostenibilidad operacional y financiera) y en la rentabilidad (retorno sobre los activos y el patrimonio). La mayor interacción entre los pobres con las instituciones financieras puede conducir al desarrollo de productos y servicios que respondan de manera más directa a sus necesidades y oportunidades. Esto es parte del proceso de desarrollo de un mercado que busca servir a los pobres. Con el tiempo, la existencia de clientes y consumidores más informados para los servicios financieros puede contribuir a la creación de mercados financieros más competitivos. 5 Un estudio realizado en Estados Unidos sobre los efectos de la educación financiera sobre un periodo más prolongado muestra que la exposición de estudiantes de secundaria a la capacitación en educación financiera eleva sus niveles de ahorro y bienestar acumulado durante el transcurso de sus vidas. (Bernheim, Garrett y Maki, 1997) 3. ENFOQUE EN LOS RESULTADOS La presente sección de este documento se enfoca básicamente en los resultados del aprendizaje financiero; es decir, en los cambios que muestran los clientes en cuanto a los conocimientos de los conceptos financieros, así como en sus habilidades y actitudes para traducir estes conocimientos en comportamientos que contribuyan a lograr buenos resultados financieros. Dado que nuestros programas todavía se encuentra en una etapa piloto, creemos que es importante comenzar por evaluar su contribución en estas áreas de cambio, identificando qué temas necesitan mayor atención y usando esta información para seguir mejorando el diseño de las actividades de la educación financiera para este nuevo grupo meta. 6 Nuestro propósito en el presente documento es ofrecer una guía que ayude en el diseño de las evaluaciones de resultados. La intención es sugerir ideas que puedan ser adaptadas a cada programa y evaluación individual y no tanto sugerir un enfoque absoluto. Las siguientes secciones presentan algunos indicadores que sirven para ilustrar la evaluación de cambios en los clientes a nivel de sus conocimientos, habilidades, actitudes, comportamientos y resultados financieros. La idea es ofrecer algunas ideas. Sin embargo, será necesario que cada programa de educación financiera adapte los 5 Este nivel de impacto será más elaborado durante la Etapa II del proyecto. 8 6 Tal y como se describió anteriormente, es probable que mayores impactos a nivel social e institucional se alcancen a través de programas de educación financiera más grandes, en una etapa de desarrollo más madura y que hayan con éxito mejorado el aprendizaje financiero. Por ello, nuestra prioridad inmediata es evaluar los resultados del aprendizaje financiero.

17 3. ENFOQUE EN LOS RESULTADOS indicadores de resultados de acuerdo a sus propias características y al propósito de su evaluación. El Anexo A presenta algunos ejemplos de cómo se pueden transformar algunos de estos indicadores en preguntas para medir los cambios. La sección final presenta varios aspectos relacionados con la evaluación: diferentes enfoques de la evaluación, el diseño de los indicadores, la programación de las actividades de evaluación, costos y diseminación. Concluimos con sugerencias acerca de los próximos pasos para mejorar el diseño de las futuras evaluaciones de la educación financiera para los pobres en los países en desarrollo. El principal propósito de este enfoque de evaluación de resultados es generar información que se pueda usar para mejorar el diseño e implementación de los programas de educación financiera para los clientes del sector microfinanciero. El público de estas evaluaciones son los clientes del sector microfinanciero, los diseñadores del programa, los capacitadores de la educación financiera, los proveedores de servicios financieros, los proveedores de servicios sociales y los consumidores de productos educativos. Se plantean dos preguntas relevantes: (1) la participación en las actividades educativas de la capacitación en educación financiera contribuye a cambios en los conocimientos, habilidades y actitudes sobre temas financieros? y (2) la educación financiera contribuye a cambios en los comportamientos y bienestar financiero? Estas preguntas básicas de la investigación pueden ser elaboradas en mayor detalle, con base en el enfoque de cada programa o público. Por ejemplo, una pregunta para el diseño programático sería qué tipo de capacitación en educación financiera tiene el mayor beneficio para un grupo en particular de clientes o segmento del mercado. Otra pregunta podría ser qué tipo y cantidad de capacitación en educación financiera se necesita para enfrentar un problema en particular o para lograr un objetivo específico de la educación financiera. Para responder la primera pregunta, sería necesario dividir la muestra del estudio en segmentos de mercado y comparar los resultados. Para la segunda pregunta, sería necesario dividir la muestra del estudio de acuerdo al tipo y cantidad de educación financiera recibida y comparar los resultados asociados a un problema u objetivo particular. El nivel de análisis para la evaluación de los resultados del aprendizaje financiero será a nivel individual. Es decir, a nivel de los participantes de los programas de educación financiera. La definición de los indicadores y medidas para evaluar la eficacia de los programas de educación financiera plantea una serie de retos. Prácticamente no existe experiencia en los países en desarrollo ni un consenso real sobre las medidas que se deben usar o los parámetros de éxito de estos programas. Éste también es el caso de los países desarrollados en los que los programas han alcanzado un nivel de madurez más alto (Lyons et al., 2003). Existe así mismo la precaución de no guardar grandes expectativas sobre los resultados de nuevos programas que todavía están en desarrollo y refinando sus objetivos, actividades educativas y sistemas de implementación. La experiencia para medir los resultados de los programas de educación financiera en los países en desarrollo es muy escasa, o ninguna. Éste es el primer intento que se hace por definir indicadores de resultados para este tipo de programas. Todavía será necesario, que con el tiempo, estos indicadores se prueben, revisen y refinen. 9

18 Evaluación de resultados de la educación financiera 3.1. Indicadores del aprendizaje financiero A continuación presentamos tres grupos de indicadores del aprendizaje financiero: (1) conocimientos, habilidades y actitudes sobre temas financieros; (2) comportamientos financieros; y (3) resultados financieros. Éstos se derivan de las cinco áreas temáticas del Proyecto Educación Financiera para los Pobres: presupuesto, ahorros, administración de la deuda, uso eficaz de los servicios bancarios y negociaciones financieras. En general, la elección de los indicadores debe basarse en lo siguiente: (1) el propósito y diseño de cada programa de educación financiera; (2) los comportamientos financieros deseados que el programa promueve; y (3) los objetivos específicos basados en logros de las actividades educativas del programa. Los indicadores de resultados presentados en el presente documento son específicos al Proyecto Educación Financiera para los Pobres 7 y se ofrecen como ejemplos para guiar el diseño de los indicadores que se adaptarán a los diferentes programas y contextos. Dentro de cada categoría, los conocimientos son lo que el participante debe saber o la información que necesita para adoptar el comportamiento financiero deseado. Las habilidades representan la capacidad que el participante debe tener para adoptar el comportamiento. Las actitudes son los pensamientos, sentimientos y opiniones que respaldan el comportamiento. Los comportamientos financieros representan la manera en que la persona actúa o responde a una situación o evento CONOCIMIENTOS, HABILIDADES Y ACTITUDES En el primer nivel, consideramos la relación entre la capacitación en educación financiera implementada y los cambios en los conocimientos, habilidades y actitudes. Esto permitirá evaluar la eficacia de las actividades educativas y sugerir las mejoras necesarias. La Tabla 2 presenta indicadores sobre los conocimientos, habilidades y actitudes sobre temas financieros asociados con las actividades educativas de nuestras cinco áreas temáticas. Para medir el cambio en estas variables, es necesario traducirlas a preguntas que puedan ser planteadas antes y después de la exposición a la educación financiera (examen de entrada y examen final). El Anexo A presenta algunos ejemplos de estas preguntas. Programación: Los exámenes de entrada y exámenes finales que los participantes completan sobre sus conocimientos, habilidades y actitudes sobre temas financieros, pueden ser administrados inmediatamente antes y después de su exposición al programa. Esto permitirá medir el aprendizaje inmediato asociado a la capacitación en educación financiera. El examen final podría repetirse posteriormente en diferentes puntos en el tiempo para evaluar la sostenibilidad del aprendizaje Aunque estos indicadores se derivan de los programas diseñados y sometidos a prueba en su versión piloto por las organizaciones asociadas del proyecto, no abarcan todos los posibles resultados del aprendizaje financiero. Asimismo, algunos de los mismos resultados pueden resultar de más de una actividad educativa o de diferentes tipos de capacitación en educación financiera.

19 3. ENFOQUE EN LOS RESULTADOS TABLA 2: INDICADORES ILUSTRATIVOS DE LOS CONOCIMIENTOS, HABILIDADES Y ACTITUDES POR ÁREA TEMÁTICA DE LA EDUCACIÓN FINANCIERA Conocimientos Habilidades Actitudes Presupuesto El propósito de un presupuesto Los elementos de un presupuesto Los beneficios del control del flujo de efectivo Los beneficios de un plan de gastos Creencias sobre el dinero Metas financieras Ahorros El propósito del ahorro Elementos de un plan de ahorro Diferentes maneras de ahorrar Diferentes lugares dónde ahorrar Qué se debe tomar en cuenta al elegir una cuenta de ahorros (accesibilidad, seguridad, costos) Administración de la Deuda Qué es un préstamo Las ventajas y desventajas del crédito Fuentes y opciones de préstamos La diferencia entre capital e interés Elementos de un préstamo (tasas de interés, términos y condiciones, comisiones, multas, políticas de morosidad) Compromisos asociados a la aceptación de un préstamo Consecuencias de la morosidad y del incumplimiento Estrategias para administrar la deuda (pagar primero la deuda más grande; reducir las líneas de crédito; hacer pagos consistentes y a tiempo) Estrategias para reducir la deuda (ahorrar para eventos futuros; refinanciar el crédito a un menor costo) Llevar el control del flujo del dinero Elaborar un presupuesto Elaborar un plan de ahorro Elaborar un plan de ahorro Solicitar la apertura de una cuenta de ahorros Usar una libreta de ahorros Llevar el control de los movimientos de la cuenta de ahorros Completar una solicitud de crédito Leer y comprender el acuerdo de crédito Hacer preguntas apropiadas antes de pedir el préstamo Evaluar la capacidad de pago Calcular los costos directos e indirectos asociados a un préstamo Calcular la relación entre deuda e ingresos Preparar un plan de pagos Compromiso de trabajar hacia el logro de una meta financiera Compromiso para cumplir un presupuesto Disciplina para cumplir un plan de gastos Confianza en sí mismo para administrar su dinero Motivación para planificar Creer en los beneficios del ahorro Disciplina para ahorrar regularmente Confianza en sí mismo para hacer preguntas Confianza en sí mismo para negociar los términos Precaución en la toma decisiones al pedir dinero prestado Fortaleza para decir No a los términos desfavorables Disciplina para cumplir un plan de administración de deuda 11

20 Evaluación de resultados de la educación financiera TABLA 2: INDICADORES ILUSTRATIVOS DE LOS CONOCIMIENTOS, HABILIDADES Y ACTITUDES POR ÁREA TEMÁTICA DE LA EDUCACIÓN FINANCIERA (CONTINUACIÓN): Conocimientos Habilidades Actitudes Servicios Bancarios Las funciones de un banco Tipos de bancos e instituciones financieras Tipos de servicios ofrecidos por los bancos (servicios de ahorro, préstamo y seguros) Propósitos del ahorro Propósitos de los préstamos Propósitos del seguro Qué se debe tomar en cuenta al elegir un servicio financiero Servicios financieros que traen beneficios personales Cómo evalúa el banco las solicitudes de crédito Investigar y elegir bien el mejor servicio financiero del mercado que satisfaga una necesidad Seguir los procedimientos para el uso de los productos y servicios financieros Confianza en sí mismo para hacer preguntas Confianza en sí mismo para negociar con el banco, para hablar con el personal del banco, manejar cajeros automáticos Negociaciones Financieras Principios de la negociación Técnicas de negociación Pasos para prepararse para una negociación Establecer objetivos para la negociación Elaborar un plan para la negociación Confianza en sí mismo para negociar Cautela para negociar teniendo en mente lo que se desea obtener Compromiso para cumplir los objetivos de la negociación COMPORTAMIENTOS FINANCIEROS En el siguiente nivel, analizamos los cambios en los comportamientos financieros como resultados de la exposición a la educación financiera. Probablemente éste sea el paso más importante a nivel de resultados, ya que el cambio en los comportamientos financieros es el principal objetivo de la educación financiera y el principal medio a través del cual se pueden lograr impactos a un nivel superior. La programación es una consideración importante al evaluar el cambio en los comportamientos: algunos cambios en los comportamientos se pueden observar de inmediato o poco después de la capacitación; otros cambios pueden tomar años en manifestarse. Por ejemplo, los clientes de la educación financiera pueden establecer una meta financiera realista, o elaborar un presupuesto por escrito siempre y cuando estos temas se hayan tratado 12

21 3. ENFOQUE EN LOS RESULTADOS durante el programa. Otros comportamientos tomarán más tiempo en manifestarse, como por ejemplo el establecer un fondo de ahorro para emergencias, usar un nuevo servicio bancario, o recortar los gastos innecesarios. Algunos comportamientos se manifestarán solamente durante un periodo corto de tiempo. Por ejemplo, algunas personas pueden implementar un plan de ahorros apenas completada la capacitación pero abandonarlo al cabo de unos pocos meses. Nuestro enfoque en el presente documento es identificar los cambios en los comportamientos y los resultados financieros que se pueden producir durante el primer año posterior a la capacitación. Un enfoque para evaluar el cambio en los comportamientos como resultado de la educación financiera es identificar indicadores que reflejen comportamientos financieros positivos (Tabla 3) y evaluar el número y proporción de personas que reportan estos comportamientos antes y después de la exposición a la educación financiera. Se pueden medir los resultados de acuerdo al cambio observado en el número y proporción de participantes con estos comportamientos antes y después de la exposición. 8 Con el transcurso del tiempo, conforme el estudio de mercado y las evaluaciones generen más información sobre el comportamiento financiero de los pobres de los países en desarrollo, se pueden seguir refinando los indicadores más apropiados sobre el comportamiento financiero positivo y medir los resultados de los programas de acuerdo a los parámetros establecidos. Un ejemplo de un parámetro puede ser que seis meses después de participar en un programa de capacitación en educación financiera, 90% de los participantes ha establecido un fondo de ahorro para emergencias. En la presente etapa, nos estamos concentrando en el diseño de indicadores apropiados para comenzar el proceso de recopilación de información que se puede usar para definir parámetros apropiados. Programación: Para esta etapa piloto, el periodo para medir cambios en los comportamientos, corresponde al tiempo inmediatamente anterior a la capacitación y de tres a doce meses después de ésta. 8 En la Etapa II del Proyecto Educación Financiera para los Pobres se considerará un análisis más detallado de los aspectos metodológicos conectados a la evaluación de resultados e impactos de los programas de educación financiera. 13

22 Evaluación de resultados de la educación financiera TABLA 3: INDICADORES ILUSTRATIVOS DE LOS COMPORTAMIENTOS FINANCIEROS Presupuesto Ha identificado una meta financiera realista Ha elaborado un presupuesto por escrito Sigue un plan de gastos Cuenta con un plan de gastos futuros Ahorros Evita gastos innecesarios Gasta menos de lo que gana Cuenta con un plan de ahorro realista Tiene una cuenta de ahorros Ahorra una parte de su ingreso tan pronto como lo recibe Cuenta con un plan de ahorro para emergencias Ahorra regularmente Administración de la Deuda Acepta un préstamo comprendiendo los términos Mantiene una cuenta de ahorros para emergencias Prepara un plan para reducir la deuda Evita endeudarse en exceso Hace sus pagos a tiempo Mantiene una relación deuda-ingresos por debajo de una cantidad específica (definida contextualmente por ejemplo, menos del 33 por ciento) Servicios Bancarios Usa los servicios bancarios de manera más eficaz Usa los servicios bancarios para respaldar sus metas financieras Tiene experiencia con múltiples productos financieros (por ejemplo, cuenta de ahorros a corto plazo, cuenta de depósito a plazo fijo, préstamos bancarios, tarjetas de cajero automático, tarjetas de débito, seguros, tarjetas prepagadas, etc.) Tiene experiencia con múltiples instituciones financieras (bancos, compañías de seguros, sociedades funerarias, prestamistas, instituciones microfinancieras, empleadores, tiendas comerciales) Negociaciones Financieras Negocia teniendo en mente lo que desea lograr de las transacciones comerciales Tiene un papel activo en la toma de decisiones sobre sus propios ingresos 14

23 3. ENFOQUE EN LOS RESULTADOS RESULTADOS FINANCIEROS Finalmente, las mejoras en los conocimientos, habilidades y actitudes sobre temas financieros, así como los cambios en los comportamientos financieros incluidos en nuestras cinco áreas temáticas deberán contribuir al bienestar financiero. Esto se puede dar en áreas directamente conectadas con los módulos de la educación financiera, como incremento en los ahorros o mejor administración de la deuda. También se puede reflejar indirectamente a través de medidas más subjetivas de las dificultades o de la satisfacción financiera percibidas. El bienestar financiero se puede evaluar a través de una combinación de datos cualitativos y cuantitativos y de medidas objetivas y subjetivas. TABLA 4: INDICADORES ILUSTRATIVOS DE LOS RESULTADOS FINANCIEROS Reducción de las presiones financieras 9 Mayor satisfacción con la situación financiera (Véase la nota 9) Menor tiempo dedicado a la administración de asuntos financieros (Véase la nota 9) Reducción del número de veces que los asuntos financieros personales han interferido con el trabajo u otras actividades (Véase la nota 9) Estabilidad financiera Percepción de que la situación financiera es la misma o mejor que hace un año Expectativa de que la situación financiera será la misma o mejor el próximo año Logro de una meta financiera Motivación para planificar a futuro y establecer metas financieras Decisión independiente sobre temas financieros Menor deuda Menor relación deuda-servicio Mayores ahorros Éxito durante las negociaciones financieras/comerciales Mayor satisfacción con el producto o servicio bancario 9 Fuente: Kim et al., 2004 La presión financiera se midió mediante una sola pregunta - Cuál cree que es su nivel de presión financiera hoy en día? y cinco opciones: insoportable (5), severa (4), moderada (3), baja (2), ninguna (1). Los valores más altos representan niveles más altos de presión financiera. Esta pregunta se usó en Bagwell (2001). La satisfacción financiera se midió mediante una sola pregunta y una escala de niveles del 1 al 10. Se pidió a las personas que indicaron insatisfacción con su situación financiera que marcaran los pasos más bajos (el nivel más bajo =1) y a las que indicaron satisfacción que marcaran los pasos más altos (el nivel más alto =10). El conflicto entre las finanzas personales y el trabajo se evaluó mediante una pregunta directa sobre la frecuencia directa en que las finanzas personales interfirieron con el trabajo, como por ejemplo llegar a tiempo al centro de trabajo, cumplir las actividades diarias, o trabajar tiempo extra. Las respuestas se codificaron: con mucha frecuencia (4), algunas veces (3), sin frecuencia (2), nunca (1). El tiempo de trabajo usado para atender las finanzas personales incluyó nueve preguntas para evaluar cuánto tiempo se usó en el trabajo pensando en cómo resolver o administrando asuntos asociados a las finanzas personales. Se pidió a los participantes que indicaran el número de horas que en el mes pasado dedicaron a actividades de sus finanzas personales que no estaban relacionadas con su trabajo propiamente pero que atendieron mientras estaban en su centro de trabajo. Algunos ejemplos son habló con un compañero de trabajo sobre un problema financiero personal o habló con un acreedor sobre un pago vencido. El absentismo se midió en tres puntos: frecuencia de ausencias (con la excepción de días festivos y vacaciones), días en los que no se pudo realizar ninguna actividades normal y días en los que hubo una disminución en las actividades normales. 15