MINUTA TÉCNICA SOBRE EVALUACIÓN DE DESEMPEÑO ANUAL LÍNEA DE DIAGNÓSTICO - PROYECTOS DAM AÑO 2013 Santiago, enero de 2013. La Oferta Programática de la Línea de Diagnóstico Ambulatorio a nivel nacional, está compuesta por 57 proyectos que cubren el total de las jurisdicciones de los Tribunales de Familia y Fiscalías Locales. Para el presente año, a un grupo de ellos, les corresponde la Evaluación de Desempeño Anual, según el período convenido en procesos licitatorios. De este modo, y con el propósito de apoyar a las Unidades de Protección de Derechos de las Direcciones Regionales de Sename en la preparación y desarrollo de los procesos de evaluación de desempeño anual - 2013, va la siguiente orientación: La Evaluación de Desempeño Anual en DAM por parte del Supervisor/a Técnico/a. La mencionada evaluación, se constituye en uno de los procesos de información evaluativa sobre el funcionamiento de lo comprometido en el convenio por el Proyecto DAM y lo que efectivamente ha desarrollado en el período evaluado. Se alude como uno de los procesos de información porque se entiende que también lo son cada uno de los eventos de supervisión y visita al Proyecto por parte del o la supervisora técnica de la Dirección Regional en que se implementa el mismo, como lo es también el monitoreo de avance que éste/a realiza a través de los datos que obtiene del Senainfo por cada proyecto DAM. Dichos datos pueden ser los siguientes: a) número de servicios prestados mensualmente por el proyecto en evaluación b) tipos de servicios prestados y su distribución porcentual c) número de días de ejecución por cada pericia o servicio prestado d) número de niños/as y adolescentes atendidos mensualmente, e) número de servicios prestados por niño/a, f) número de solicitudes por Tribunal de Familia o Fiscalía Local, Garantía u Oral. g) Otros datos como el sexo, la edad de los niños, niñas y adolescentes atendidos e incluso el número de servicios realizados por cada profesional del proyecto en un determinado período. Otra importante variable de información es la lista de espera del proyecto en evaluación (la que puede ser eventual o permanente) y la gestión que ha realizado para dar respuesta lo más pronto posible a dicha demanda, considerando que se trata de niños que han sido vulnerados en sus derechos. Aquí es muy importante, que la o el Supervisor Técnico identifique con claridad, los Minuta Técnica Línea Diagnóstico Enero 2013 1
mecanismos que tuvo el equipo para priorizar los casos más graves de vulneración de derechos (aplicación de los criterios para priorizar la atención de niños/as vulnerados en sus derechos) de las listas de espera, a fin de garantizar la protección de los NNA. Otro elemento relevante a considerar en la evaluación anual de los Proyectos DAM es aquel trabajo permanente de coordinación y trabajo colaborativo tanto con la instancia judicial de familia y/o de fiscalías locales, a objeto de verificar la vigencia de la solicitud de servicios, evitando la realización y pagos de pericias que, por su desfase en el tiempo requerido, se falla sin ellas. Sin duda este es un elemento que no puede ser controlado por el equipo DAM, pero podemos contribuir a evitarlo dado que se trata de niños y niñas víctimas. Los proyectos que deben ser evaluados en el mes de Febrero de 2013 son los siguientes: Cuadro Nº1 Proyectos DAM que debe ser Evaluados en su Desempeño Reg. Nombre del Proyecto 5 DAM Viña del Mar 5 DAM Marga Marga Institución Código Nº Servicios Asociación Cristiana de Jóvenes de Valparaíso Corporación de Educación CERCAP Fecha Inicio Fecha Término 50525 80 08-06-2010 08-12-2011 50527 78 08-06-2010 08-12-2011 Término de la 2ª Prórroga 5 DAM San Antonio 6 DAM Rancagua OCF Centro de Apoyo al Niño y a la Familia Corporación OPCION 50526 80 08-06-2010 08-12-2011 60144 50 08-06-2010 08-12-2011 7 DAM Linares Fundación CRATE 70227 73 15-02-2010 15-02-2012 16-02-2012 07-06-2013 Corresponde Licitación Junio 2013 8 DAM CTD Ambulatorio Andalicán 8 DAM Ayún Ñuble 8 DAM CODENI Los Ángeles 9 DAM Pilleltu Angol Corporación para la atención integral del maltrato al menor del Bíobío Corporación Llequén Fundación Tierra de Esperanza 80526 67 09-06-2011 09-06-2012 80524 60 09-06-2011 08-06-2012 80528 86 09-06-2011 08-06-2012 90266 80 08-06-2010 08-12-2011 10 DAM Chiloé 100319 50 08-06-2010 08-12-2011 10 DAM Andalén 100318 75 08-06-2010 07-12-2011 Minuta Técnica Línea Diagnóstico Enero 2013 2
10 DAM Entre Ríos 13 DAM Puente Alto 13 DAM Quinta Normal 14 DAM Valdivia Fundación Hogares de Menores Verbo Divino Corporación OPCION 100315 87 08-06-2010 07-12-2011 130975 75 08-06-2010 08-12-2011 130972 75 08-06-2010 08-12-2011 140021 65 08-06-2010 08-12-2011 En total tenemos 15 proyectos de las regiones de Valparaíso, Libertador Bernardo O Higgins, La Araucanía, De Los Lagos, Región Metropolitana y Región de Los Ríos Todos los elementos mencionado con anterioridad, sin duda, proporciona al supervisor o supervisora técnica y también al supervisor/a financiero/a, elementos claves sobre el desempeño del proyecto DAM en un determinado período, en que la lógica de proceso es la realización de servicios de calidad, tanto para el usuario/a niño/a, su familia como para la autoridad judicial que lo solicita, coadyuvando a la toma de la mejor decisión sobre la protección y respeto a los derechos de niños y niñas. No obstante lo indicado, cabe señalar que los procesos de análisis que el supervisor/a realiza con la información del Senainfo, con sus propios informes de proceso y con el equipo DAM sobre la base de los productos concretos y observables (referidos tanto a la atención que dispensa en el espacio Sede, la acogida al niño/a, adolescente y su familia como de la elaboración técnica de los servicios prestados), todos ellos son elementos que resultan fundamentales en la evaluación de desempeño anual. Se reitera que en los Proyectos DAM, la auto-evaluación por parte del equipo DAM, no tiene un formato de presentación dado por el nivel central o regional en tanto, cada propuesta DAM en ejecución incorporó, de acuerdo al formato de presentación de proyectos en la línea, su propio diseño de autoevaluación y sobre esa base el equipo DAM debe dar cuenta de su gestión evaluativo. A pesar que dicho informe no se considera exigible para el desarrollo del proceso de evaluación de desempeño, sí sirve como un insumo más al supervisor/a técnico/a que evalúa el período. El supervisor/a técnico, debe considerar que todo proyecto licitado y adjudicado a un organismo colaborador acreditado que obtiene una evaluación que superó a la de otra propuesta en similares condiciones (evaluación ex ante), propuso dos criterios de calidad: la calidad operativa para la atención y la calidad técnica de los informes elaborados La calidad operativa para la atención brindada por el proyecto DAM a sus usuarios/as: entendiendo por éstos, a Niños, niñas, adolescente y sus familias, a los Tribunales de Familia y Fiscalías Locales y por último, la Red Sename y social con la cual se vincula para el cumplimiento de sus objetivos. En forma operativa Cuál es la evaluación que hace el o la Supervisora Técnica sobre las característica del lugar en que el DAM brinda su atención, a saber: Instalación física del DAM en un lugar de fácil acceso para la familia, Minuta Técnica Línea Diagnóstico Enero 2013 3
Espacios privados, suficiente y cómodos, recepción y sala de espera de público Condiciones de iluminación, ventilación, higiene y seguridad suficientes y acordes al número de servicios convenidos (número de niños/as y peritos involucrados), Mobiliario suficiente tanto para la atención del usuario/a como para el trabajo de su equipo de peritos/as, Equipamiento técnico y logístico, referido a computadores con banda ancha u otro sistema de interconexión, impresora, scanner, teléfonos con salida a celular y fax, Contar con sistema de movilización para la realización de visitas domiciliarias. El análisis sobre el conocimiento adquirido en el acompañamiento técnico y visitas en el terreno al Proyecto DAM, permitirán al supervisor/a técnica aplicar la pauta de evaluación de desempeño en el Criterio Calidad Operativa de la atención brindada por el DAM. La calidad técnica de los informes emitidos a la autoridad judicial, resulta ser lo más relevante en la evaluación de desempeño del DAM, ya que ellos se convierten en el producto final y concreto de los servicios de diagnóstico. En este ámbito el supervisor/a, previo al examen de tres informes al azar realizados por el DAM en el período evaluado, deberá considera en su evaluación lo siguiente: calidad técnica especializada de los/as profesionales peritos que se desempeñaron durante el período en evaluación en el proyecto DAM; se debe considerar experiencia de los profesionales en el área de evaluación psicosocial infanto-adolescente, su formación universitaria y su especialización en peritaje en sede proteccional y sede forense. Así también evaluar la característica y razones (si ésta se da) de la rotación de los profesionales del DAM. Respecto de la calidad técnica de los informes realizados por los peritos del DAM, el supervisor/a técnico/a debe proceder a analizar el contenido de tres informes, partiendo por tomar en cuenta la pregunta jurídica de la autoridad judicial y con dicho antecedente evaluar, haciéndose las siguientes preguntas: Se logra la identificación clara del informe en un formato estandarizado y coherente con lo solicitado por la magistratura? Identifica al sujeto de atención y de las personas involucradas, en la evaluación, Tiene una redacción clara, coherente y ordenada de lo que expone como información metodológicamente obtenida de un proceso científico de evaluación, Incluye la participación y opinión del niño/a o adolescente? La Exposición de argumentos sólidos sobre la base de la aplicación de instrumentos de evaluación y/o incorporando conocimiento experto y explicativos de la ciencia o técnica propia de su especialidad y que se expresan de una determinada forma en el niño/a o adolescente evaluado/a? Existe explicación técnica y práctica de la o las situaciones de vulneración de derechos de la víctima y de la expresión o no de daño que tiene ella en el niño o niña del cual se informa? Minuta Técnica Línea Diagnóstico Enero 2013 4
Incorpora y otorga importancia en el análisis, a la etapa de desarrollo del niño/a, su género, sus necesidades especiales, su etnia? El cierre y conclusiones resultan coherentes con el desarrollo de la parte anterior del informe? Las sugerencias de derivación son también coherente con los requerimientos del niño/a, fundamentalmente desde la protección de sus derechos? Sin duda, el resultado las preguntas sobre la evaluación del contenido de los tres informes del Proyecto DAM en evaluación, le permitirán al supervisor/a aplicar la pauta de evaluación en el Criterio Calidad Técnica de los Informes emitidos por el Proyecto DAM. Pauta de Evaluación de Desempeño Anual 1 Se orienta a cada supervisor/a que tiene que evaluar el desempeño de un proyecto DAM, que revise con atención el instrumento o pauta de evaluación de desempeño, sus categorías evaluativas y asignación de puntos, a saber: Categoría de Evaluación Cumplió = 2 puntos Necesita Mejorar = 1 punto No cumplió = 0 punto Cada criterio a evaluar tiene una valoración porcentual específica. Como se expone en el recuadro a continuación, la calidad operativa de la atención y la calidad técnica de los servicios prestados tienen una incidencia del 30% cada criterio. CRITERIOS Y DESCRIPTORES % Incidencia 1. Sobre el Ingreso y el Egreso en el Proyecto DAM 20% 2. Calidad Operativa de la atención brindada en el proyecto DAM 30% 3. Calidad Técnica de los Informes Emitidos por el Proyecto DAM 30% 4. Cumplimiento de Objetivos y Resultados Esperados 20% TOTAL PUNTAJE 100% En términos concretos, el o la supervisora deberá reunir toda la información necesaria para proceder a la evaluación y asignación de categoría y puntaje a cada uno de los descriptores que consideran los criterios antes indicados. Para contar con información objetiva para evaluar la calidad técnica de los informes emitidos por el Proyecto DAM, el o la supervisora técnica deberá solicitar al Director/a del mismo, informes periciales de distintos RIT, evacuados durante el período con sus respectivas solicitudes desde la autoridad judicial, los cuales serán analizados y evaluados (3 Criterio de la Pauta y orientación antes señalada) sobre la base de las orientaciones técnicas y metodológicas de DAM; constituyendo respaldos objetivos sobre la calidad de los servicios prestados, como asimismo, en concordancia con las orientaciones para la planificación del proceso de 1 Vigente en la página web de Sename. Minuta Técnica Línea Diagnóstico Enero 2013 5
supervisión y las instrucciones para la aplicación del informe de proceso enviados recientemente a las direcciones regionales. También, en el proceso de análisis evaluativo del proyecto DAM, el o la supervisora técnica debe incorporar los reportes financieros y las opiniones, si las tuviese, de los/as usuarios/as: Niños/as o adolescentes, Jueces/zas, Consejeros/as Técnicos/as, Fiscales y de otros proyectos de la Red, manifiesten sobre el proyecto DAM. La Pauta de Evaluación de Desempeño Anual 2013, en lo sustantivo corresponde a la aplicada en procesos anteriores y que se encuentran en la página Web del Servicio; sin embargo, próximamente tendrá un cambio en busca de homologar más aún los instrumentos de las distintas líneas (pautas de evaluación). Para la evaluación de desempeño del mes de febrero 2013, se hará como se indica a continuación: Se mantienen los criterios de evaluación, indicando claramente el peso específico de cada uno de ellos en el resultado final. Se mantiene la nomenclatura de Cumple, Necesita Mejorar y No cumple, no obstante, se incorpora a cada nomenclatura un puntaje 2, 1 y 0. Se ha cambiado la palabra dimensiones por descriptores El formato de la pauta se va completando automáticamente en la medida que el supervisor/a asigna los puntos que corresponden. Se ha mejorado la tabla de calificaciones y sus resultados, cuyo formato se va completando automáticamente. Por otro lado, en los criterios 1, 2 y 4 se han incorporado en total, tres descriptores que evalúan el apoyo que el organismo colaborador acreditado realiza en favor del equipo del proyecto DAM, elemento no menor al momento de evaluar la gestión institucional. Minuta Técnica Línea Diagnóstico Enero 2013 6
Cronograma de Evaluación de Desempeño Anual de Proyectos DAM Acciones del Proceso Fecha del Proceso Año 2013 Enero Febrero Marzo Abril Mayo Junio Pauta de Evaluación de Desempeño Anual 2013 y su X instructivo, en la página Web de Sename. Envío Minuta Técnica Nº 1 Sobre Evaluación de Desempeño Anual X 2013 * Observación: No existe formato de auto-evaluación en DAM Ver explicación en página 3, párrafo cuarto de este documento Período de Evaluación de Desempeño Anual por parte de las/os supervisores técnicos de DAM en las Direcciones Regionales. Dirección Regional Notifica los resultados de la Evaluación Anual a Representantes Legales de Organismos colaboradores y a Directores/as de los Proyectos DAM Período de Apelación por parte los organismos colaboradores a la Evaluación de Desempeño Anual Dirección Regional resuelve sobre la apelación y comunica los resultados de la Evaluación de Desempeño Anual a los Organismos Colaboradores (representantes legales) y sus proyectos., a través de carta certificada. Direcciones Regionales envían resultados de Evaluaciones de Desempeño DAM al Deprode (Se recuerda que deberán contar y dejar en la carpeta del proyectos DAM los respaldos (3 pericias o informes y sus respectivas solicitudes desde la autoridad judicial) sobre los que basaron su evaluación en el criterio: Calidad Técnica de los Informes. Direcciones Regionales entregan orientación respecto de introducir las observaciones al proyecto DAM para el nuevo proceso de licitación 11 al 15 de Febrero 18 de Febrero * Se debe asegurar que la notificación de evaluación positiva o negativa esté en conocimiento del organismo colaborador con el plazo de 60 días de notificación en casos en que deba llamar a licitación. La Dirección Regional define la fecha más adecuada y dentro de los plazos estipulados para los procesos indicados con asterisco. Departamento de Protección de Derechos Área de Diseño de la Oferta Programático Línea de Acción Diagnóstica Proyectos DAM- Minuta Técnica Línea Diagnóstico Enero 2013 7