Taller Verificación de Métodos Cuantitativos

Transcripción

1 Taller Verificación de Métodos Cuantitativos

2 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

3 Introducción Objetivo del Taller: - Verificar un procedimiento de medida cuantitativo. a)- Especificaciones del fabricante. b)- Requisito de la Calidad seleccionado de acuerdo al uso previsto del procedimiento de medida.

4 Introducción Procedimiento de medida: Glucosa en suero en mg/dl Requisito de la calidad : CLIA

5 Introducción Procedimiento de medida Unidades Glucosa en Suero mg/dl Requisito de la Calidad (CLIA) 6 mg /dl o 10 % Plataforma Analítica Reactivo Alcance de la Evaluación Precisión Veracidad Linealidad Límite de Cuantificación Glucosa en Suero en mg/dl Verificación de Intervalo de Referencia SuperQC SuperQC Verificación SI SI SI NO SI

6 Introducción Herramientas estadísticas a aplicar: Parámetro Protocolo Aplicación Precisión EP 15 A2 SI Veracidad EP 15 A2 SI Linealidad EP 6 A SI Límite de cuantificación EP 17 A No aplica Intervalo de Referencia C 28 A3 SI

7 Introducción Plan de trabajo: 1)- Requisito de la Calidad 2)- EP 15 A2 3)- Rango Analítico 4)- Intervalo de referencia 5)- Evaluación del Desempeño

8 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

9 Requisito de la Calidad Busco en la web la información disponible:

10 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

11 EP 15 A2 Qué necesito? a)- El protocolo. b)- 2 materiales de control (niveles de decisión médico) c)- Informe del esquema interlaboratorio e)- Inserto del fabricante f)- Planillas de cálculo o software

12 a)- El protocolo EP 15 A2

13 EP 15 A2 b)- 2 Materiales de Control c)- Informe del esquema interlaboratorio Nivel 1 Nivel 2 mensual acumulado mensual acumulado

14 EP 15 A2 Mejor estimación del valor verdadero Media acumulada del grupo par de comparación Nivel 1 Nivel 2 mensual acumulado mensual acumulado Control 1 (mg/dl) Control 2 (mg/dl) 86,58 295,8

15 EP 15 A2 e)- Inserto del fabricante Intraserial = Repetibilidad Total = Precisión Intremedia (Intralaboratorio) Repetibilidad Intralaboratorio

16 EP 15 A2 Buscamos las especificaciones: Concentración Evaluada =86,58 mg/dl Repetibilidad Intralaboratorio

17 f)- Planilla de cálculo EP 15 A2

18 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

19 Precisión: Planilla Ingresar nombre del instrumento y su número de serie. Instrumento: SuperQC N de Serie: 12345

20 Precisión: Planilla Ingresar el lote del reactivo y su vencimiento: Lote de Rvo.: 4567M100 Vto. Del Rvo.: 30/10/2012

21 Precisión: Planilla Colocar el nombre del operador del instrumento: Operador: Juana Lopez

22 Precisión: Planilla Insertar nombre del analito y unidades: Analito: Glucosa en suero Unidades: mg/dl

23 Precisión: Planilla Agregar nombre del material empleado con su lote y vencimiento si esta disponible: Material: QC1 Vencimiento: 12/03/2014 Lote:

24 Precisión: Planilla Agregar el lote del calibrador y su vencimiento: Lote del Cal.: Vto. Del Cal.: 12/07/2013

25 Precisión: Planilla Colocar la mejor estimación del valor verdadero del material empleado. Material de control que participa en un esquema interlaboratorio

26 Precisión: Planilla Nivel 1 Nivel 2 mensual acumulado mensual acumulado mg/dl Mejor estimación del valor verdadero: Media acumulada del grupo par de comparación

27 Precisión: Planilla Colocar la mejor estimación del valor verdadero del material empleado mg/dl Media acumulada del grupo par de comparación

28 Precisión: Planilla Vamos a trabajar con los datos del inserto del fabricante.

29 Precisión : Planilla Premisa: Como la concentración evaluada está próxima a la concentración ensayada por el fabricante, se asume que podemos transferir los CV del inserto a nuestra concentración. CV % Concentración Evaluada 86,58 mg/dl Repetibilidad (Intraserial) 1,98 79,6 86,58 mg/dl

30 Precisión : Planilla Como la concentración evaluada está próxima a la concentración ensayada por el fabricante, se asume que podemos transferir los CV del inserto a nuestra concentración. CV % Concentración Evaluada 86,58 mg/dl Intralaboratorio (Total) 2,15 79,6 86,58 mg/dl

31 Precisión: Planilla Qué tengo? Nivel de decisión CVr CVi médica 86,58 mg/dl 1,98 % 2,15 % Qué necesito? Nivel de decisión médica (NDM) CVr SDr CVi SDi 86,58 mg/dl 1,98 % 2,15 %

32 Precisión: Planilla CV = SD x 100 Media Media: mg/dl CV r : 1.98 % SD r = CV r * Media 100 SD r = 1.98 * SD r = mg/dl

33 Precisión: Planilla CV = SD x 100 Media Media: mg/dl CV i : 2.15 % SD i = CV i * Media 100 SD i = 2.15 * SD i = mg/dl

34 Precisión : Planilla Efectuar las corridas por triplicado durante 5 días y obtener los datos. Día 1 Día 2 Día 3 Día 4 Día 5 01/05/ /05/ /05/ /05/ /05/ ,4 86,4 84,6 84,5 83,9 86,6 86,7 84,2 85,1 84,7 84,9 86,3 85,3 85,1 84,2

35 Precisión: Planilla Ingresar las fechas de cada una de las 5 corridas: 1, 2, 3, 4 y 5 de Mayo del 2012

36 Precisión: Planilla Ingresar los triplicados de cada uno de los 5 dias.

37 Precisión: Planilla

38 Precisión: Planilla La planilla efectúa los cálculos:

39 Precisión: Planilla La planilla saca sus conclusiones

40 Precisión: Planilla Repetibilidad Si SD r (datos propios) < SD r(fabricante) Repetibilidad verificada Si SD r (datos propios) > SD r(fabricante) Repetibilidad Aplicar verificación

41 Precisión: Planilla <

42 Precisión: Planilla Desvío estándar en condiciones de repetibilidad obtenido a partir de nuestros datos: Especificación del fabricante obtenida a partir del inserto para precisión en condiciones de repetibilidad: Ha sido la precisión en condiciones de repetibilidad aceptada? Por qué? Si < 1.714

43 Precisión: Planilla Ha sido necesario aplicar una verificación adicional? Por qué? No < Cuál es el valor de verificación (especificación aumentada) para el desvío estándar en condiciones de repetibilidad? 2.543

44 Precisión: Planilla Repetibilidad Verificada

45 Precisión: Planilla Precisión Intermedia Si SD i (datos propios) < SD i(fabricante) Si SD i (datos propios) > SD i(fabricante) Precisión Intermedia verificada Precisión Intermedia Aplicar verificación

46 Precisión: Planilla <

47 Precisión: Planilla Desvío estándar en condiciones de precisión intermedia obtenido a partir de nuestros datos: Especificación del fabricante obtenida a partir del inserto para precisión en condiciones de precisón intermedia: Ha sido la precisión en condiciones de precisión intermedia aceptada? Por qué? Si < 1.861

48 Precisión: Planilla Ha sido necesario aplicar una verificación adicional? Por qué? No < Cuál es el valor de verificación (especificación aumentada) para el desvío estándar en condiciones de precisión intermedia? 2.890

49 Precisión: Planilla Precisión Intermedia Verificada

50 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

51 Veracidad: Planilla Muchos datos se cargan en forma automática cuando son ingresados en la planilla de precisión y otros dependen del diseño del ensayo.

52 Veracidad: Planilla Nombre del instrumento y número de serie Nombre de analíto y unidades Lote del reactivo y vencimiento Material empleado, lote y vencimiento Mejor estimación del valor verdadero Cantidad total de datos y cantidad de días Lote del calibrador y vencimiento

53 Veracidad: Planilla Mejor estimación del valor verdadero: Media acumulada del grupo par

54 Veracidad: Planilla Sa Sa = S.D. / n Sa = 2.84 / 41 Sa = mg/dl Cantidad de replicados por día; cantidad de corridas analíticas (cantidad de días).

55 Todos estos datos vienen de la planilla de precisión Veracidad: Planilla

56 Veracidad: Planilla Media de los 15 resultados (3 x 5) X X = mg/dl

57 Veracidad: Planilla Varianza de los 15 datos (triplicados durante 5 días) Desvía Estándar de los 15 datos (triplicados durante 5 días) X = mg/dl

58 Veracidad: Planilla Grados de Libertad:=3 x n -1 n : 5 (Días) 3: Replicados por día α: Probabilidad 0.01 α: 1 % Grados de Libertad:=3 x 5-1 Grados de Libertad = 14

59 Veracidad: Planilla

60 Veracidad: Planilla X = mg/dl S a = mg/dl Intervalo de Verificación = x ( ) 1/2 Intervalo de Verificación =

61 Veracidad: Planilla Intervalo de Verificación =

62 Veracidad: Planilla Media acumulada del grupo para de comparación Valor Evaluado mg/dl Verificación Aceptada Intervalo de Verificación =

63 Veracidad: Planilla Media acumulada del grupo para de comparación Valor Evaluado mg/dl

64 Veracidad: Planilla Media acumulada del grupo para de comparación Valor Evaluado mg/dl

65 Veracidad: Planilla Media de las 15 repeticiones (triplicados durante 5 días)

66 Veracidad: Planilla Bias (c) = Valor Obtenido Concentración Evaluada Bias (c) = ( ) mg/dl Bias (c) = mg/dl

67 Veracidad: Planilla Bias % = Valor Obtenido Concentración Evaluada x 100 Concentración Evaluada Bias % = [ ] x Bias % = 1.5 %

68 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

69 Rango Analítico Qué necesito? a)- El protocolo. b)- 1 muestra de concentración alta c)- Inserto del fabricante d)- Diluyente e)- Software g)- Requisito de la Calidad h)- Material Volumétrico

70 a)- El protocolo Linealidad Rango Analítico Aplica el concepto de linealidad estadística y clínica

71 Rango Analítico b)- 1 Muestra de concentración alta c)- Inserto del fabricante d)- Diluyente Diluyente Solución Salina

72 Rango Analítico Protocolo de concentraciones equidistantes. h)- Material Volumétrico Partes iguales 0 % 25 % 50 % 75 % 100 % Partes iguales Partes iguales

73 Rango Analítico Nombre del Laboratorio Fecha y Operador Método Unidades Comentarios Niveles ensayos Diluciones equidistantes Valor Muestra 1 Valor Muestra 5 Enter

74 Rango Analítico Concentraciones teóricas de las 5 diluciones

75 Rango Analítico Línea de referencia Opción (1) No existe referencia Opción (2) Línea recta Opción (3) Calibración, se ingresan las concentraciones de los calibradores altos y bajos.

76 Rango Analítico Se ingresan los valores obtenidos de los triplicados de cada dilución y luego se selecciona Update

77 Curva obtenida A Referencia Orden 1 Ensayo no lineal desde el punto de vista estadístico Selecciono la solapa polinomios

78 Curva grado 3 Selecciono la solapa Nonlinearity

79 Curva obtenida Referencia Orden 1

80 Rango Analítico mg/dl Error de no linealidad Máximo a X= 500 mg/dl Promedio Unidades Máximo error de no linealidad X= 500 mg/dl En concentración: 3.76 mg/dl En porcentaje: 0.77 %

81 Rango Analítico mg/dl Error de no linealidad Máximo a X= 500 mg/dl Promedio Unidades Máximo error de no linealidad X= 500 mg/dl En concentración: 3.76 mg/dl En porcentaje: 0.77 % TESa permitido se presupuesta como 50% ETa TESa = 0,50 * 10% TESa = 5 %

82 Rango Analítico Máximo error de no linealidad X= 500 mg/dl En concentración: 3.76 mg/dl En porcentaje: 0.77 % TEa (CLIA) 6 mg/dl 0 10% TSEa : 0.5 * TEa TSEa : 3 mg/dl o 5% Error máximo de NO linealidad < TESa 0.77 % < 5 % LINEALIDAD CLÍNICA ACEPTADA entre 0 y 500 mg/dl

83 Rango Analítico mg/dl Error de no linealidad Máximo a X= 500 mg/dl Promedio Unidades Máximo error de no linealidad X= 500 mg/dl En concentración: 3.76 mg/dl En porcentaje: 0.77 % El procedimiento de medida no es estadísticamente lineal en el rango de concentraciones evaluado Evaluar linealidad Clínica

84 Rango Analítico Error de no Linealidad Error de no Linealidad Error Sistemático Error Sistemático Hasta el 50 % Hasta del Requisito el 50 % del la Requisito Calidad de la Calidad

85 Rango Analítico mg/dl Error de no linealidad ETa (CLIA) 10 % Máximo a X= 500 mg/dl ETa * 0,5 (50 % del Eta) 0,77 % 5 %

86 Rango Analítico ETa (CLIA): 6 mg/dl o 10 % (el más grande) Error de no Linealidad Hasta el 50 % del Requisito de la Calidad 0,77 % < 5 % El procedimiento de medida es clínicamente lineal en el rango de concentraciones evaluado considerando un ETa del 10 % con un presupuesto de error sistemático del 50 %.

87 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

88 Intervalo de Referencia Qué necesito? a)- El protocolo b)- Intervalo Propuesto c)- Cuestionario d)- Mínimo 20 individuos Sanos e)- Criterio

89 Intervalos de Referencia a)-el Protocolo

90 Intervalos de Referencia (1) INDIVIDUOS DE REFERENCIA Componen una (2) POBLACIÓN DE REFERENCIA De la cuál es seleccionada una (3) MUESTRA DE GRUPO DE REFERENCIA En la cuál son determinados (4) VALORES DE REFERENCIA Que caracterizan (5) DISTRIBUCIÓN DE REFERENCIA Desde la cuál son calculados (6) LÍMITES DE REFERENCIA Que pueden definir (8) VALOR OBSERVADO en una persona pueden ser comparados con (7) INTERVALOS DE REFERENCIA

91 Intervalos de Referencia b)- Intervalo Propuesto Se identifica el intervalo de referencia propuesto. Se procesan las muestras de los 20 individuos sanos. Se procesan los datos.

92 Intervalos de Referencia c)- Cuestionario con consentimiento Examen fisco

93 Intervalos de Referencia

94 Intervalos de Referencia Evaluación de los datos Si NO más de 2 valores (o hasta el 10 %) caen fuera del intervalo propuesto El IR se considera verificado para el Laboratorio

95 Intervalos de Referencia Evaluación de los nuevos 20 datos Si 3 o 4 más valores (o entre el 15 y 20 %) caen fuera del intervalo propuesto El Laboratorio debería considerar seleccionar 20 individuos sanos nuevamente y repetir

96 Intervalos de Referencia Evaluación de los datos Si 5 o más valores (o mas del 25 %) caen fuera del intervalo propuesto El Laboratorio debería considerar determinar su propio IR

97 Intervalos de Referencia Resumen Cantidad de Individuos fuera del intervalo de referencia propuesto sobre 20 individuos evaluados Porcentaje Conclusión / Acción < 2 <10 % Intervalo Propuesto Verificado de 3 a 4 de 15 a 20 % Ensayar 20 individuos sanos nuevos. >5 > 25 % Establecer Intervalo de Referencia Si se evalúan mas de 20 individuos prestar atención a los porcentajes

98 Cantidad de Individuos fuera del intervalo de referencia propuesto sobre 20 individuos evaluados Porcentaje Caso de Aplicación Conclusión / Acción Herramientas: C 28 A3 < 2 <10 % Intervalo Propuesto Verificado de 3 a 4 de 15 a 20 % Ensayar 20 individuos sanos nuevos. >5 > 25 % Establecer Intervalo de Referencia

99 Intervalos de Referencia

100 Intervalos de Referencia Cantidad total de resultados obtenidos a partir de individuos de referencia = 20 Porcentaje = Cantidad 1 x 100 x = % 20 N Total

101 Agenda Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

102 Evaluación de Desempeño Requisito de la Calidad Fuente CLIA Nivel de Decisión médica evaluado (Mejor estimación del valor verdadero)

103 Evaluación de Desempeño Bias (Sesgo) expresado en porcentaje tomado de la solapa de veracidad para el nivel de decisión médica evaluado SD y CV en condiciones de precisión Intermedia (intralaboratorio ) obtenidos de la solapa de precisión

104 Evaluación de Desempeño Error Sistemático Sesgo Error Total TE Error Aleatorio SD o CV TE TEa SD: Desvío estándar CV: Coeficiente de variación TE: Error total TEa: Requisito de la Calidad

105 Evaluación de Desempeño TE (c) = Sesgo (c) + Z * SD TE (%) = Sesgo (%) + Z * CV SD: Desvío estándar CV: Coeficiente de variación TE: Error total Z: 2

106 Evaluación de Desempeño TE (%) = Sesgo (%) + 2 * CV TE (%) = 1,5 (%) + 2 * 1,2

107 Evaluación de Desempeño TEa Sigma σ CV Sesgo CV: Coeficiente de variación σ : Sigma TEa: Requisito de la Calidad

108 Evaluación de Desempeño Sigma (σ) = ( TEa % Sesgo % ) CV % CV: Coeficiente de variación σ : Sigma TEa: Requisito de la Calidad

109 Evaluación de Desempeño Sigma = (TEa Sesgo)/CV Sigma = (10 1,5)/1,2

110 Evaluación de Desempeño Sigma Desempeño σ <2 2 < σ < 3 3 < σ <4 Inaceptable, no válido como procedimiento de medición de rutina. Marginal, necesita que se le aplique un esquema de mejoramiento de la calidad. Pobre, va a necesitar de un esquema de control estadístico interno de la calidad con más de una corrida analítica (R) y varios resultados por corrida (N). 4 < σ < 5 Bueno, con un esquema de reglas múltiples se asegura la utilidad clínica de los resultados. 5 < σ < 6 σ > 6 Muy Bueno, con un esquema de regla única se asegura la utilidad clínica de los resultados. Excelente!!!!!!!!!!!!

111 MUCHAS GRACIAS!