INSTRUMENTOS TÉCNICOS PARA EL ASEGURAMIENTO DE LA CALIDAD DE LAS ESTADÍSTICAS OFICIALES Noviembre de 2013
Sistema Estadístico Nacional Estadísticas relevantes Toma de decisiones Requerimientos de información ACTIVIDAD ESTADÍSTICA (Conjunto de procesos estadísticos)
Actividad Estadística AUTORIDAD ESTADISTICA Entidades Procesos Resultados Estadística oficial Usuarios Planificación Estadística Planes estadísticos Rama poder público Rama ejecutiva Rama legislativa Rama judicial Órganos autónomos Proceso estadístico 1 Proceso estadístico 2 = Proceso estadístico n Información estadística Información estadística Información estadística Calidad Estadística Certificación 1 Estadística oficial 2 Regulación Conceptos, Metodologías, Clasificaciones, Nomenclaturas, Códigos, Normas, Procedimientos Estadística oficial n
Qué es el SEN? Conjunto articulado de componentes que garantiza la producción y difusión de las estadísticas oficiales en Colombia. Está conformado por productores, fuentes de información, principios, normas, infraestructura humana y técnica, políticas y procesos técnicos.
El papel del DANE en el contexto del SEN: sus instrumentos Difusión Análisis Planificación Estadística Ejecución y Procesamiento Planificación DANE Regulación Estadística Calidad estadística Producción Coordinación del SEN
investigación Instrumentos para la coordinación del SEN
Planificación Estadística Proceso concertado entre los integrantes del Sistema Estadístico Nacional, para definir y priorizar las estadísticas que requiere el país, entre otras, con el fin de: Mejorar el diseño, evaluación y seguimiento de políticas públicas. Apoyar la toma de decisiones y permitir la gestión gubernamental y privada.
Regulación Estadística Proceso mediante el cual los integrantes del SEN adoptan, un conjunto de principios, normas y estándares estadísticos que permiten la armonización, comparabilidad, agregabilidad, calidad e integración de las estadísticas oficiales en Colombia.
Calidad Estadística Conjunto de acciones sistemáticas que buscan garantizar rigor técnico en el proceso estadístico, en atención a las buenas prácticas internacionales de producción, los Principios Fundamentales de las Estadísticas Oficiales promulgados por las Naciones Unidas y el Código Nacional de Buenas Practicas, con el fin de generar credibilidad, confiabilidad, comparabilidad y transparencia en la producción de la información estadística.
Ventajas para el país de la implementación del aseguramiento de calidad en la producción de estadísticas del SEN. Obtener estadísticas de calidad en sus procesos de generación de resultados. Proporcionar confianza en los usuarios, así como promover su participación en los procesos de diseño y mejora de procesos estadísticos. Generar estadísticas comparables nacional e internacionalmente. Promover el cumplimiento de requisitos de calidad en todas las etapas del proceso estadístico. Implementar las mejores prácticas de producción estadística en los marcos de gestión en todas las entidades del SEN.
Modelo de la Calidad Código de Buenas Prácticas Proceso estándar de producción Requisitos de Calidad 15 principios 88 buenas prácticas Planeación Diseño Ejecución Análisis Difusión Componentes Entorno de la OE Proceso Estadístico Base de datos FOMENTAR EVALUAR MONITOREAR
1. Fomento Busca dar a conocer y promover el uso y cumplimiento de los requisitos de calidad en todas las etapas del proceso estadístico, a través de instrumentos y mecanismos permanentes orientados a mejorar la calidad del proceso estadístico Herramientas y contenidos digitales para la consulta y transferencia de conocimiento e información Producción y difusión de material técnico Talleres temáticos de capacitación PROMOCIÓN DE LA CALIDAD ESTADÍSTICA Charlas de socialización y sensibilización a grupos técnicos Acompañamiento a operaciones estadísticas nuevas Asistencia técnica en la implementación del plan de mejoramiento
Modelo de la Calidad Código de Buenas Prácticas Proceso estándar de producción Requisitos de Calidad 15 principios 88 buenas prácticas Planeación Diseño Ejecución Análisis Difusión Componentes Entorno de la OE Proceso Estadístico Base de datos FOMENTAR EVALUAR MONITOREAR
Qué se evalúa? Se realiza la verificación del cumplimiento de los requisitos de calidad en el proceso estadístico. Atributos de calidad establecidos internacionalmente Pertinencia Precisión Puntualidad y Oportunidad Accesibilidad Interpretabilidad Coherencia Integridad y consistencia Requisitos de calidad definidos por el DANE Conjunto de propiedades adaptadas y adoptadas por el DANE para evaluar el nivel de calidad del proceso de producción de una operación estadística. Matriz de Calificación Componentes evaluados Entorno Proceso Estadístico Base de Datos Medición de la Calidad del Proceso Estadístico
Requisitos de la calidad Entorno de la OE Marco normativo Recursos Compromiso de calidad Componentes Proceso Estadístico Planeación Diseño Ejecución Análisis Difusión y acceso Base de Datos Entorno tecnológico Entorno de base de datos
Tipos de certificación De acuerdo a la calificación realizada por la Comisión de Expertos Independientes, la siguiente es la escala de calificación para las operaciones estadísticas evaluadas: Certificación Tipo A 94 100 puntos (3 años) Certificación Tipo B 87 93 puntos (2 años) Certificación Tipo C 80 86 puntos (1 año) NO CERTIFICADA: Menos de 80 puntos
Quién y cómo se evalúa? Análisis de la información obtenida a partir del formulario de características técnicas. Revisión de las paginas web y otros medios de difusión. Revisión y análisis de las evidencias y soportes documentales suministrados por la entidad. La comisión de expertos independientes emite su concepto a partir de: Responsables OE y de procesos tercerizados o compartidos Entrevistas con: Usuarios DANE y Usuarios externos Evaluación de la calidad de las bases de datos
Modelo de la Calidad Código de Buenas Prácticas Proceso estándar de producción Requisitos de Calidad 15 principios 88 buenas prácticas Planeación Diseño Ejecución Análisis Difusión Componentes Entorno de la OE Proceso Estadístico Base de datos FOMENTAR EVALUAR MONITOREAR
3. Monitoreo Se verifica y se hace seguimiento a la implementación de las acciones y productos establecidos en el plan de mejoramiento que se ha generado en la evaluación por parte de la Comisión de Expertos Independientes. Cumplimiento al plan de mejoramiento MONITOREO A LA IMPLEMENTACIÓN DEL PLAN DE MEJORAMIENTO Verificación de avances Preparación para la publicación de estadísticas certificadas
Resultados del proceso de Aseguramiento de la Calidad Estadística en el SEN 2007-2012 por sectores Año Sectores 2007 Industria, Comercio y Servicios, Índices de Precios y Costos, Medioambiente, Administración Pública. N OE Evaluadas 2008 Educación y Servicios Públicos Domiciliarios. 6 2009 Comercio, industria y servicios, Construcción y vivienda, Nivel, calidad y condiciones de vida, Construcción y vivienda, Índices de precios y costos, Administración Pública, Agricultura, 20 ganadería y pesca, Cultura, deporte y recreación. 2010 Comercio, industria y servicios, Minero energético, Demografía y población, Mercado laboral y transporte 10 2011 Comercio, industria y servicios, Minero energético, Salud, Servicios públicos domiciliarios, Justicia, Agricultura, ganadería y pesca y Nivel, calidad y condiciones de vida. 39 20 2012 Comercio, industria y servicios, Minero energético, Salud, Servicios públicos domiciliarios, Justicia, Agricultura, ganadería y pesca y Nivel, calidad y condiciones de vida. 34 Total OE evaluadas 129 * 14 OE han realizado de nuevo el proceso de evaluación.
Resultados del proceso de Aseguramiento de la Calidad Estadística en el SEN 2007-2012 40 35 30 39 34 25 20 20 20 15 10 5 6 10 0 2007 2008 2009 2010 2011 2012 * 14 OE han realizado de nuevo el proceso de evaluación.
Resultados del proceso de Aseguramiento de la Calidad Estadística en el SEN 2007-2012 por sectores 29% 4% 67% Económica Medio Ambiente Social
Resultados del proceso de Aseguramiento de la Calidad Estadística 2007-2012 por tipos de entidades Tipo de entidades productoras N OE Evaluadas Operaciones estadísticas producidas por entidades estatales. 123 Operaciones estadísticas producidas por entidades privadas u organizaciones no gubernamentales. Total OE evaluadas 129 6
Resultados del proceso de Aseguramiento de la Calidad Estadística 2007-2012 por tipos de entidades 5% 95% Entidades públicas. Entidades privadas u organizaciones no gubernamentales.
Aspectos por mejorar evidenciados en las evaluaciones de calidad del proceso estadístico Uso e implementación de estándares estadísticos, clasificaciones, conceptos, metadatos. Fortalecimiento de trabajo con usuarios Acceso a microdatos anonimizados. Difusión oportuna y de series históricas.
Aspectos por mejorar evidenciados en las evaluaciones de calidad del proceso estadístico Fortalecimiento de la documentación y metadatos. Documentar las pruebas pilotos o de los cambios que se realicen en el instrumentos de recolección. Documentar detalladamente la metodología de diseño muestral. Implementar el uso de nomenclaturas y/o clasificaciones actualizadas. Documentar el diccionario de datos y las reglas de consistencia y validación de la base de datos.
Acciones implementadas por el DANE, como coordinador del SEN: Generación de instrumentos para la coordinación del SEN; Adopción y adaptación de estándares estadísticos; Capacitación y asesoría para el uso de estándares estadísticos Desarrollo de lineamientos para la regulación y estandarización de la actividad estadística. Mejora continua de los instrumentos de evaluación Seguimiento al cumplimiento del plan de mejoramiento suscrito con el dueño de la operación estadística, resultado del proceso de evaluación.
GRACIAS!