Estado actual del estándar ISO/IEC Software Testing

Transcripción

1 Estado actual del estándar ISO/IEC Software Testing Javier Tuya Universidad de Oviedo AENOR: AEN/CTN 71/SC7/GT26 giis.uniovi.es IV Taller sobre Pruebas en Ingeniería del Software, San Sebastián, 8 de Septiembre de 2009

2 Estado actual Estándares BSI BS , SW Testing: Part 1-Vocabulary BS , SW Testing: Part 2-SW Component Testing Estándares IEEE testing: IEEE Std 829, Software Test Documentation IEEE Std 1008, Software Unit Testing Otros estándares ISO/IEC: 12207, Otros estándares sectoriales Cuerpo de conocimiento y metodologías (p.e.) ISTQB TMap Next ISO/IEC Software Testing 2

3 Estado actual Áreas no cubiertas por estándares BSI/IEEE Aspectos organizativos Proceso y gestión de las pruebas Pocas técnicas funcionales y no funcionales Pruebas basadas en riesgos Objetivo Unificar estándares anteriores en uno solo Cubrir el ciclo de vida completo Aplicable a todo tipo de sistemas software Consistente con otros estándares ISO ISO/IEC Software Testing 3

4 Organización Estructura Comités y GT Propuesta: Febrero 2007 WG26: Mayo 2007 ISO IEC AENOR Base para Terminología común JTC1 CTN71 Cuerpo de conocimiento Cualificaciones profesionales Certificaciones SC7 SC7 Contratación Información WG26 GT26 ndard.org/ ISO/IEC Software Testing 4

5 ISO/IEC Estructura ISO/IEC Software Testing 5

6 Plan de trabajo ISO/IEC Software Testing 6

7 Parte 1 Conceptos y Vocabulario Conceptos generales Ciclo de vida de las pruebas Objetivos de las pruebas Tipos de pruebas, niveles de pruebas, técnicas Conformidad Implicaciones en diferentes ciclos de vida (secuencial, evolutivo, ágil) Roles y Responsabilidades Vocabulario ISO/IEC Software Testing 7

8 Parte 2 Procesos (Versión Agosto 2008) Test Policy Process IT Policy, Management Policy Test Strategy Process Test Policy, IT Project Management Policy Project Test Management Process Test Strategy Project Management Plan Product documentation Software Development Plan Regulatory Standards Project and Product Risks Anomaly s Create/Maintain Project Test Plan (TM1) Project Test Plan Project Test Plan Updates Project Test Plan Create/Maintain Test Policy Create/Maintain Test Strategy Test Strategy Control Directives Test Policy Comments on Test Strategy usage Monitor and Control (TM2) Project Test Status s Level Test Status Project and Product Risks Test Policy Updates Test Project (TM3) Test Policy Test Strategy Project Test Level Test Política de la organización (Test Policy: TP) Estrategia organización (Test Strategy: TS) Gestión del proyecto (Test Management: TM) Test Level Process Project Test Plan Create/Maintain Level Test Plan (TL1) Level Test Plan Level Test Plan Updates Test Execution Cycle Design & Build Tests (TL3) Test Specification Monitor and Control (TL2) Control Directives Run Tests (TL5) Test Results Test Process Information Measures Close Down Testing (TL7) [No issues noticed] Asset Archive Records Test Level (TL8) Test Results; Anomaly s Level Test Nivel de pruebas X (Test Level: TL) Set Up & Maintain Test Environment (TL4) Test Environment Requirements Test Environment Readiness [Issue(s) noticed] Anomalies (TL6) Anomaly (s) ISO/IEC Software Testing 8

9 Parte 2 Ejemplo (TP) (Versión Agosto 2008) ISO/IEC Software Testing 9

10 Test Policy Process IT Policy, Management Policy Create/Maintain Test Policy Test Policy Parte 2 Proceso de Gestión (TM) Test Strategy Process (Versión Agosto 2008) Test Policy, IT Project Management Policy Test Policy Create/Maintain Test Strategy Test Policy Updates Test Strategy Test Strategy Comments on Test Strategy usage Project Test Management Process Project Test Plan Updates Test Strategy Create/Maintain Project Test Plan (TM1) Project Test Plan Monitor and Control (TM2) Project Test Status s Test Project (TM3) Project Test Project Management Plan Product documentation Software Development Plan Regulatory Standards Project and Product Risks Anomaly s Project Test Plan Control Directives Level Test Status Project and Product Risks Level Test Test Level Process Project Test Plan Create/Maintain Level Test Plan (TL1) Level Test Plan Monitor and Control (TL2) Test Process Information Close Down Testing (TL7) Asset Archive Records Test Level (TL8) Level Test Level Test Plan Updates Test Execution Cycle Design & ISO/IEC Software Testing 10 Test Specification Control Directives Run Tests Test Results Measures [No issues noticed] Test Results; Anomaly s

11 Parte 2 Ejemplo (TM1) ISO/IEC Software Testing 11

12 Test Strategy Comments on Test Strategy usage Project Test Management Process Parte 2 Nivel de Pruebas (TL) Create/Maintain Test Strategy Project Test Plan (TM1) Project Test Plan Updates Project Test Plan (Versión Agosto 2008) Monitor and Control (TM2) Project Test Status s Test Project (TM3) Project Test Project Management Plan Product documentation Software Development Plan Regulatory Standards Project and Product Risks Anomaly s Project Test Plan Control Directives Level Test Status Project and Product Risks Level Test Test Level Process Project Test Plan Create/Maintain Level Test Plan (TL1) Level Test Plan Monitor and Control (TL2) Test Process Information Close Down Testing (TL7) Asset Archive Records Test Level (TL8) Level Test Level Test Plan Updates Control Directives Measures Test Execution Cycle Test Results; Anomaly s Design & Build Tests (TL3) Test Specification Run Tests (TL5) Test Results [No issues noticed] Test Environment Requirements [Issue(s) noticed] Set Up & Maintain Test Environment (TL4) Test Environment Readiness Anomalies (TL6) Anomaly (s) ISO/IEC Software Testing 12

13 Novedades en progreso Ultimo borrador difundido Agosto 2008 Ultima reunión internacional: ISO SC7 Plenary: Mayo 2009-Hyderabad (23 participants Australia, China, Denmark, Finland, Germany, Hong Kong, India, Korea, S Africa, Spain, UK, USA) Decidir sobre los 1557 comentarios recibidos Descripción procesos parte 2 adaptada a Mappings & Ultimo borrador interno, Septiembre 2009 Modelo de procesos revisado ISO/IEC Software Testing 13

14 Parte 2 Procesos (Versión Revisada, Septiembre 2009) Proceso genérico para políticas y estrategias Proceso genérico para gestión Diseño y ejecución: Fundamental test processes ISO/IEC Software Testing 14

15 ISO/IEC Software Testing 15

16 Parte 3,4 Documentación, Técnicas Documentación Contenido + Plantillas Técnicas Descripción + Ejemplos Estáticas: revisiones, inspecciones Dinámicas Especificación: PCE, AVL, Sintácticas, Casos Uso, Combinatorias Estructura: Condiciones MC/DC, Flujo Datos Experiencia: Búsqueda Errores, Prueba Exploratoria ISO/IEC Software Testing 16

17 Conclusión Cobertura de una laguna en el estado actual de los estándares Proveer a los profesionales de una guía sobre pruebas cubriendo todos los aspectos del ciclo de vida (Conceptos, Vocabulario, Proceso, Documentación, Técnicas) Más información: Información GT26: Más Información (WG26): Red RePRIS : ISO/IEC Software Testing 17