ÍNDICE PARTE I. INTRODUCCIÓN Y OBJETIVOS OBJETIVOS E INTERROGANTES DEL PROCESO EVALUADOR- INVESTIGADOR 17

Transcripción

1 I TÍTULO: DESARROLLO, DIVERSIFICACIÓN Y CONSTRUCCIÓN DE MODELOS DE EVALUACIÓN: ESTRATEGIAS REFLEXIVAS DE AFRONTAMIENTO DESDE LA INVESTIGACIÓN SOCIAL APLICADA Í N D I C E D E C O N T E N I D O S G E N E R A L E S PARTE I. INTRODUCCIÓN Y OBJETIVOS INTRODUCCIÓN 1 OBJETIVOS E INTERROGANTES DEL PROCESO EVALUADOR- INVESTIGADOR 17 PARTE II. CONTEXTUALIZACIÓN DISCIPLINARIA COMPARATIVA (ESTADO DE LA CUESTIÓN) CAPÍTULO 1 ESTADO DE LA CUESTIÓN EN EVALUACIÓN/ LECTURAS PARALELAS DE LA CRISIS DE LA SOCIOLOGÍA 1A) CRISIS DE DESARROLLO DE LA EVALUACIÓN 31 1A.1) APRENDIZAJES CRUZADOS ENTRE EVALUACIÓN, SOCIOLOGÍA Y PROSPECTIVA 31 Antecedentes macrohistóricos de la evaluación 35 1A.2) EL DEBATE INVESTIGACIÓN SOCIAL / EVALUACIÓN 37 1A.3) ESTADO DE LA CUESTIÓN EN EVALUACIÓN 46 1A.4) DEVENIR PERSONAL COMO EVALUADOR: BIOGRAFÍA DEL EVALUADOR 53 1A.5) CONSIDERACIONES BÁSICAS: QUÉ SUPONE LA EVALUACIÓN? (DISCUSIONES PARADIGMÁTICAS) 55 Recorrido diacrónico por los avatares de la evaluación 56 Cinco momentos en la historia de los procesos de evaluación (macro) 56 Entorno actual de convivencia entre inercias y potencialidades transformadoras: posibilidades de intervención-evaluación por niveles de análisis sociológico 74 Breve aproximación al porvenir académico-profesional y a la razón de ser de la investigación evaluativa 83 1B) CRISIS DE LA SOCIOLOGÍA: LECTURAS PARA LA EVALUACIÓN 91 ANTECEDENTES: DEL CÍRCULO VICIOSO A LOS CÍRCULOS VIRTUOSOS 91 Finalidad del epígrafe (flujograma del proceso) 92 1C) DESAFÍOS Y RETOS DE LA SOCIOLOGÍA: LECTURAS PARA LA EVALUACIÓN 95 Problemáticas, crisis y estrategias transcendentes 98 CAPÍTULO2 ESTRATEGIAS DE AFRONTAMIENTO PROCESO EVALUADOR-INVESTIGADOR 2) EL CONCEPTO DE ESTRATEGIA O ESTILO DE AFRONTAMIENTO DEL PROCESO INVESTIGADOR: INVESTIGACIÓN SOCIAL DE SEGUNDO ORDEN 101 Utilidad y empleo de las definiciones teóricas 101 Primera aproximación al concepto dinámico de estrategia de afrontamiento 103 Adaptación del concepto de estrategia de afrontamiento a las prácticas de 107 investigación social a) Utilización originaria del concepto: Lazarus y Folkman 107 b) Aportación a la investigación en Ciencias Sociales y a la evaluación 110 Estrategias investigadoras que afrontan la reflexividad 115 El papel a desempeñar por las estrategias de afrontamiento 120 Estrategias aplicadas (ejemplos de aplicación) 121 PARTE III. RECURSOS TEÓRICOS Y METODOLÓGICOS DE AFRONTAMIENTO CAPÍTULO 3 + 4: A) ARTICULACIÓN ENTRE TEORÍA Y EMPIRIA EN EVALUACIÓN E INVESTIGACIÓN SOCIAL DIÁLOGO ENTRE TEORÍA Y EMPIRIA 126 ADAPTACIÓN DEL PROCEDIMIENTO G.T.M.: ARTICULACIÓN TEORÍA-EMPIRIA 133 Aportaciones del procedimiento G.T.M. al proceso evaluador e investigador 134

2 II CAPÍTULO 3 + 4: B) RECURSOS DE AFRONTAMIENTO DEL PROCESO EVALUADOR- INVESTIGADOR OTROS CIMIENTOS PARA EL AFRONTAMIENTO DE DESAFÍOS/PARADOJAS 145 Pluralidad de paradigmas 145 Definición del objeto de estudio sociológico y evaluativo 148 La incorporación de los valores en las estrategias de afrontamiento 149 La idea de valor, la carga valorativa y la ideología en evaluación 156 La perspectiva diacrónica en investigación social y evaluación 161 PARTE III a). DOMINIO TEÓRICO PARA LA EVALUACIÓN CAPÍTULO 3: MARCO TEÓRICO PARA LA EVALUACIÓN (TEORÍA DE LA REALIDAD SOCIAL 169 / TEORÍA DE LA EVALUACIÓN) 3A) EL PROBLEMA DE LA REALIDAD Y LA TEORÍA DEL OBJETO SOCIAL: EVALUACIÓN E INVESTIGACIÓN SOCIAL EN BUSCA DE CORRELATO EMPÍRICO 169 3A.1) CONCEPTOS TEÓRICOS PARA LA CONSTRUCCIÓN DEL OBJETO SOCIAL Y EVALUATIVO: PARADIGMA INTERPRETATIVO-HERMENÉUTICO 173 Teoría de la realidad: construcción comunicativa de la realidad social (Luckmann) 179 Reconstrucción 179 Explicación 179 Teoría de la construcción significativa de la realidad social (Schutz) 183 Etnometodología e interaccionismo simbólico: definición de la situación, indexicalidad, reflexividad (del orden normativo al cognitivo) 184 a) Definición de la situación (consenso operativo, emic-etic) 185 b) Indexicalidad (conceptos sensibilizadores Blumer) 190 c) Experimentos disruptivos 193 3A.2) DEL PARADIGMA DE LA OBJETIVIDAD AL PARADIGMA DE LA REFLEXIVIDAD RELACIÓN SUJETO-OBJETO DE CONOCIMIENTO 196 Carácter reflexivo, autorreflexivo e hiperreflexivo de los sistemas sociales (paradoja de la reflexividad en evaluación) 197 Relación entre sujeto y objeto de conocimiento desde el paradigma de la reflexivdiad (relación actor-observador, etnocientífico- científico) observadorevaluador absoluto, relativo, reflexivo 201 3A.3) INTEGRACIÓN DE LAS DIMENSIONES MICRO-MACRO EN INVESTIGACIÓN SOCIAL Y EVALUACIÓN 212 El concepto de holograma social (P. Navarro) 214 Niveles de análisis: micro-meso-macro 218 Integración de las dimensiones micro-macro (Cicourel) 220 La correlación de fuerzas entre actores comunicativos 224 3A.4) AFRONTAMIENTO DE LA RELACIÓN IDEOLOGÍA-EMPIRIA Y LOS VALORES: LA INVESTIGACIÓN SOCIAL DE SEGUNDO ORDEN 226 El pensamiento de segundo orden 232 La cuestión de los criterios de valor (juicios de valor-mérito) 234 Criterios evaluativos: instrumentos para puntuar la realidad 239 3A.5) TRATAMIENTO DEL TIEMPO COMO VARIABLE CENTRAL EN LA CONSTRUCCIÓN DE LA REALIDAD SOCIAL 244 3B) BORRADOR DE TEORÍA DE LA EVALUACIÓN: DIVERSIFICACIÓN DE PERSPECTIVAS SOBRE PROBLEMÁTICAS 251 3B.1) DEFINICIÓN DE EVALUACIÓN 253 Definición reflexiva de evaluación 263 Teoría pragmática-goffmaniana- de la evaluación 272 Reticencias o hacia la evaluación (retorno infinito de consideraciones mutuas) 278 Teoría de la atribución: incidencia sobre procesos evaluativos 282 3B.2) TIPOS DE CUESTIONES EVALUABLES (DIVERSIDAD DE OBJETOS DE EVALUACIÓN) 285

3 III 3B.3 ) TIPOS DE EVALUACIÓN 285 Modelos evaluativos ( perspectivas en evaluación ) 285 Realidad evaluable y objetos de evaluación 285 Tipos aplicados de evaluación 285 PARTE III b). ESTRATEGIAS INVESTIGADORAS PRÁCTICAS (DOMINIO METODOLÓGICO) CAPÍTULO 4: DISEÑO METODOLÓGICO PARA LA EVALUACIÓN (INVESTIGACIÓN SOCIAL Y EVALUACIÓN) 4A) PRESUPUESTOS METODOLÓGICOS PARA LA EVALUACIÓN (PLURALIDAD METODOLÓGICA Y COMBINACIÓN DE PARADIGMAS) 287 Paradigmas en evaluación 288 Combinación de paradigmas en estrategias aplicadas de evaluación e investigación social (positivista, hermenéutico-interpretativo y sociocrítico) 291 Posicionamientos paradigmático-estratégicos flexibles para practicar evaluación 293 4B) METODOLOGÍA DE LA EVALUACIÓN 294 Implicaciones metodológicas de los paradigmas 294 VARIABLES DISCRIMINANTES RECURRENTES EN CUALQUIER DISEÑO EVALUATIVO (DE TRADICIONAL AFRONTAMIENTO DICOTÓMICO) 299 Evaluación interna / externa (agentes de la evaluación) 299 Criterios absolutos /criterios relativos en la elaboración de estándares de comparación 301 Evaluación sumativa / evaluación formativa 302 Evaluación cuantitativa / evaluación cualitativa 306 DISEÑOS Y PLANIFICACIÓN DE LA EVALUACIÓN SEGÚN LOS TIPOS DE EVALUACIONES 311 SELECCIÓN DE DISEÑOS [a) perspectiva experimentalista; a ) perspectiva de la modalización; b) diseños cuantitativos -enfoque deductivo- y b ) diseños cualitativos -enfoque inductivo-] 314 a) Diseños evaluativos cuantitativos 319 a1 Perspectiva experimental 320 a2 Diseños cuasi-experimentales 321 a3 Diseños correlacionales u observacionales / a4 Diseño antes y después (before-and-after-desing) / a5 Diseño de discontinuidad en la regresión / a6 Estudios de panel / a7 Métodos de encuesta y diseño de cuestionarios 322 b) Diseños evaluativos cualitativos 323 4C) CONCEPCIÓN DE LAS TÉCNICAS PAPEL DE LA METODOLOGÍA (INVESTIGACIÓN SOCIAL APLICADA: TÉCNICAS DE INVESTIGACIÓN PARA LA EVALUACIÓN) 331 PERSPECTIVAS DE LA INVESTIGACIÓN SOCIAL 335 Las bases epistemológicas de la investigación social 335 DATOS OBSERVACIONALES EN INVESTIGACIÓN SOCIAL (PARA EVALUACIÓN) 337 Validez y fiabilidad de los datos observacionales 338 El valor de los datos observacionales para la evaluación 339 Recogida-producción de datos observacionales 342 TRIANGULACIÓN Y MEZCLAS METODOLÓGICAS; MUESTREOS 352 Contexto metodológico que hace recomendable la triangulación 352 El concepto de triangulación y las mezclas metodológicas 355 Muestreos (selección de participantes y estrategias de muestreo) 358 Muestros aleatorios (generalización) 358 Muestreos intencionales 358 Muestreos etnometodológicos 359 Muestreos intensivos 359 Muestreos representativos, significativos y reflexivos 360 Tamaño de las muestras 360

4 IV 4D) DISEÑO METODOLÓGICO: INSTRUMENTOS CONCEPTUALES Y TÉCNICAS PARA EVALUAR Investigación social aplicada=técnicas de investigación para la evaluación 361 PERSPECTIVAS Y TÉCNICAS DE INVESTIGACIÓN 361 TÉCNICAS INVESTIGACIÓN SOCIAL PARA LA EVALUACIÓN (ALTERNATIVAS) 365 A) Observación 367 Observación participante 367 Grado de implicación del observador 369 Explicitación o no de la observación (observaciones abiertas o encubiertas) 370 Variaciones en la duración de las observaciones 370 Variaciones en el enfoque observacional 371 Qué observar? Materias primas para la observación? 372 B) Entrevistas 373 Entrevistas abiertas 373 Entrevistas cualitativas 375 Entrevista conversacional informal 377 Entrevistas grupales (entrevistas fotográficas) 380 Entrevistas de intereses compartidos 380 C) Grupo de discusión 382 Selección de participantes 384 Actuación de los sujetos en relación con la técnica 384 D) Mapas 385 Mapas de relaciones (automapas de redes) 385 Algunas claves introductorias para el análisis de relaciones / automapas de redes (perspectiva estructural) 385 Mapas cognitivos (conceptuales) 388 Claves introductorias: análisis de mapas cognitivos (conceptuales) 388 E) Técnicas de Sociología Visual 391 Metodología visual: claves introductorias para la utilización de imágenes en investigación social 391 Modos aplicados de acceso a los datos visuales (imágenes) -anexo- 391 F) Encuestas (combinación de los paradigmas positivista y hermenéuticointerpretativo) / encuestas etnometodológicas 395 G) Técnicas biográficas (historias de vida y técnicas de refrendación de texto) 398 H) Otras alternativas para ampliar el espectro de posibilidades metodológicas 398 PARTE IV. ENFOQUES EVALUATIVOS E INVESTIGACIÓN SOCIAL APLICADA (DOMINIO EMPÍRICO) PUESTA EN PRÁCTICA DE ESTRATEGIAS CAPÍTULO 5: EJEMPLOS EMPÍRICOS DE EVALUACIÓN DESDE LA INVESTIGACIÓN SOCIAL APLICADA 5A) EVALUACIÓN ORGANIZACIONAL PSICOSOCIAL: MODELO HERMENÉUTICO- INTERPRETATIVO Evaluación de barreras/incentivos a la introducción de innovaciones 401 5A.1) DESCRIPCIÓN DEL OBJETO DE EVALUACIÓN DE BARRERAS/INCENTIVOS A LA INNOVACIÓN ORGANIZACIONAL Origen, campo de actividad y caracterización de la organización Modelo de organización, objetivos y plan estratégico 404 5A.2) OBJETIVOS GENERALES Y ESPECÍFICOS: INVESTIGACIÓN EVALUATIVA 406 Objetivos generales de la evaluación 406 Objetivos específicos 406 Acercamiento teórico al objeto evaluado y a la realidad evaluable 407 5A.3) METODOLOGÍA: MUESTRA, MÉTODO, PROCEDIMIENTO E INSTRUMENTOS 409 a) Método para la investigación evaluativa: entrevista abierta no estructurada y entrevista de intereses compartidos 410

5 V b) Unidad primaria de análisis 412 c) Estrategia de muestreo 412 d) Tipo de datos y comparaciones 413 e) de quién se extraerán los datos, cuándo, con qué instrumentos...? 414 f) Tipo de datos esperados 414 g) Planteamientos y hallazgos resultantes 414 5A.4) RESULTADOS: EXPOSICIÓN DE LA EVALUACIÓN DE FUNCIONES 414 A) Funciones evaluables: f1) tecnología, f2) gestión y f3) social 415 B) Variables 417 C) Criterios 419 Criterios para la identificación de la cultura de la innovación 419 Criterios para la identificación de la gestión de la innovación 422 Evaluación: contraste de criterios con datos 423 5A.5) ANÁLISIS DE RESULTADOS: DIAGNOSIS EVALUATIVA 437 5B) EVALUACIÓN ORGANIZACIONAL PARTICIPATIVA: Evaluación del Centro Loyola de Alicante PARADIGMA HERMENÉUTICO INTERPRETATIVO 441 SECCIÓN I: INTRODUCCIÓN A LA EVALUACIÓN 442 SECCIÓN II: INFORMACIÓN SOBRE LOS ANTECEDENTES DE LA EVALUACIÓN 443 A) Orígenes y contenidos de la evaluación 443 B) Objetivos de la evaluación 443 SECCIÓN III: DESCRIPCIÓN DE LA INVESTIGACIÓN EVALUATIVA 444 A) Propuestas de la evaluación 444 B) Diseño de la evaluación 449 SECCIÓN IV: CONEXIÓN ENTRE DISEÑO Y RESULTADOS 453 A) Funciones evaluables: f1) tecnología, f2) gestión y f3) social 453 B) Variables (tipos de evaluación) 454 C) Criterios 459 Análisis de resultados: diagnosis 470 SECCIÓN V: DISCUSIÓN Y BREVE COMENTARIO DE LOS RESULTADOS 473 5C) EVALUACIÓN E INTERVENCIÓN PSICOSOCIAL: PARADIGMA POSITIVISTA- TECNOLÓGICO (diseño cuasi-experimental) E INTERPRETATIVO: Prevención de 475 accidentes humanos y materiales (mujeres economía informal) INFORME EXPERIMENTAL DE INTERVENCIÓN-EVALUACIÓN 475 A) Título 475 B) Sumario (abstract) 475 C) Palabras clave 476 D) Introducción 476 D1) Planteamiento: problema susceptible de intervención preventiva y evaluación 476 D2) Marco teórico de la intervención-evaluación 480 D3) Evaluación inicial, antecedentes, descripción de las hipótesis de trabajo y objetivos del diseño 486 E) Metodología 488 Programación de la intervención-evaluación para conseguir los objetivos. Estrategias de intervención (objetivo general, objetivos específicos, hipótesis e hipótesis de trabajo) E1) Sujetos 492 E2) Procedimiento 494 E3) Diseño: diseño cuasiexperimental de aislamiento del grupo de control, no equivalente y tratamiento al grupo experimental (medición grupo de control / medición grupo experimental) PROGRAMACIÓN Y DETALLES DE LA INTERVENCIÓN (INSTRUMENTO, DISEÑO METODOLÓGICO). ESTRATEGIA DE INTERVENCIÓN 515 Charla o reunión de grupo (intervención: influencia informacional social) 515 F) Resultados: evaluación final, diagnosis

6 VI a) Cruces de variables 531 b) Distribución de frecuencias (frecuencias variables de control más significativas) 535 c) Comparación entre encuesta inicial y encuesta final de evaluación (variables afines o asimiladas) 544 d) Variables / indicadores indirectos de riesgo añadido (identificación de potenciales situaciones de riesgo): 545 D1) Consumo de medicamentos y automedicación 545 D1 ) Estado de salud autopercibido y expresado 547 D2) Consumo de alcohol 548 D3/ Situación de las perspectivas de empleo juvenil femenino en el barrio 550 D4) Estado de salud expresado 552 Diagnosis: evaluación de los resultados de la intervención 554 Contraste de hipótesis 557 G) Discusión 560 5D) EVALUACIÓN EX ANTE: PARADIGMA DIALÓGICO-SOCIOCRÍTICO Y HERMENÉUTICO INTEPRETATIVO: I.A.P. sobre asociacionismo y juventud (identificación 561 de necesidades-proyectos) 5D ) VILLENA 569 La Investigación Acción Participativa y la evaluación participativa como procedimientos para evaluar la realidad e informar sobre ella 561 5E) ENFOQUES DE EVALUACIÓN DE ACCIONES-PROYECTOS DE COOPERACIÓN PARA EL DESARROLLO 5F) EVALUACIÓN ORGANIZATIVA ENTIDAD SOCIOSANITARIA PARTE V. CONCLUSIONES ABIERTAS CAPÍTULO 6: CONCLUSIONES ABIERTAS Acerca de la utilidad aplicada del concepto de estrategia de afrontamiento del proceso evaluador-investigador Acerca de la aplicación y aportaciones del procedimiento Grounded Theory Methodology Acerca de experiencias evaluativas 589 Acerca de la teoría de la evaluación y de la evaluación reflexiva 593 Acerca de las paradojas de la reflexividad en evaluación 610 Acerca de la relación sujeto-objeto de conocimiento en evaluación 621 Acerca de la definición de la evaluación y la pluralidad de paradigmas evaluativos 633 Acerca del debate investigación / evaluación 639 Acerca de la diversificación de objetos de evaluación 647 Acerca de las aportaciones de la I.A.P. para la evaluación 648 Acerca del estado de la cuestión en evaluación (cultura de la evaluación) 659 Acerca de la utilidad social de la evaluación (satisfactora de necesidades sociales) 669 Acerca del afrontamiento del reto de la neutralidad valorativa (criterios evaluativos) Acerca de las aportaciones metodológicas de la investigación social para la evaluación 684 Acerca de las aportaciones del cualitativo en evaluación Acerca de la centralidad de la perspectiva temporal Acerca de planteamientos éticos en investigación evaluativa: deontología de la evaluación Acerca de las limitaciones del proceso evaluador-investigador 716 PARTE VI MATERIALES Y CONTENIDOS DE REFERENCIA BIBLIOGRAFÍA I ÍNDICE DE CUADROS, TABLAS, GRÁFICOS Y FLUJOGRAMAS XXXIX ANEXO METODOLÓGICO-EMPÍRICO