NTP-ISO 15189:2014

5.5 Procesos de Análisis

5.5.1.2 Verificación de Métodos

Docente/Consultor:
Lic. TM César A. Fernández Olivera

Instituto de Gestión y Certificación para la Calidad

 Verificación de
Métodos

Evaluación de
Error Aleatorio Error Sistemático
errores

Uso de herramientas estadísticas

Estimar la magnitud del Utilidad Clínica del

error resultado

Instituto de Gestión y Certificación para la Calidad

Instituto de Gestión y Certificación para la Calidad
Instituto de Gestión y Certificación para la Calidad
NTP-ISO 15189:2014
5.5 Procesos de Análisis

5.5.1.2 Verificación de Métodos

“Verificación de la Precisión y
estimación del Sesgo”
Docente/Consultor:
Lic. TM César A. Fernández Olivera

Instituto de Gestión y Certificación para la Calidad

 Verificación del Usuario de la
Precisión y Estimación del Sesgo

Instituto de Gestión y Certificación para la Calidad

 EP 15-A3: Precisión
¿Qué condiciones de precisión deben ser
verificadas?

Repetibilidad

Precisión
Intralaboratorio

Instituto de Gestión y Certificación para la Calidad

 Condiciones de repetibilidad

- El mismo procedimiento de medida

- El mismo laboratorio
- El mismo equipo CVR
- El mismo operador
- El mismo reactivo (lote/ envase) y la misma calibración
- Repeticiones en un intervalo corto de tiempo

“Es lo que comúnmente denominamos precisión

intracorrida/intraserie”.

Instituto de Gestión y Certificación para la Calidad

 Condiciones de precisión intermedia o
intralaboratorio

- El mismo procedimiento de medida

- El mismo laboratorio
- El mismo equipo CVWL
- El mismo operador o no
- Repeticiones en un intervalo prolongado de tiempo

“También se le conoce como precisión total”.

Instituto de Gestión y Certificación para la Calidad

 1
1 1 1 1
2 2 2 2 2
Día 1 Día 2 Día 3 Día 4 Día 5
3 3 3 3 3
(Nivel 1) (Nivel 1) (Nivel 1) (Nivel 1) (Nivel 1)
4 4 4 4
4
5 5 5 5
5

A partir de estos datos se calcula: CVR CVWL

1
1 1 1 1

2 2 2 2 2
Día 1 Día 2 Día 3 Día 4 Día 5
3 3 3 3 3
(Nivel 2) (Nivel 2) (Nivel 2) (Nivel 2) (Nivel 2)

4 4 4 4
4
5 5 5 5
5

Instituto de Gestión y Certificación para la Calidad

Información obtenida Información de la Validación
en el Laboratorio del fabricante

CVR CVR

CVWL CVWL

Si Verificación aceptada

No Verificación rechazada

Instituto de Gestión y Certificación para la Calidad

 Verificación del USUARIO de
precisión y estimación del sesgo

¿Qué necesitamos?
a) El protocolo.
b) 2/3 materiales (2 o 3 niveles de decisión médica distintos).
c) Plantillas de cálculo o software.
d) Inserto del reactivo o manual del fabricante, cuando corresponda.

¿Qué vamos a evaluar?

- Condiciones de repetibilidad
- Condiciones de precisión intermedia o intralaboratorio
- Reproducibilidad

Instituto de Gestión y Certificación para la Calidad

¿Qué materiales puedo emplear para el EP 15-A3?

En base a considerar los dos criterios podemos establecer una escala de jerarquía para
los materiales:
- Materiales certificados de referencia.
- Materiales de referencia.
- Controles de veracidad.
- Materiales de control con participación en esquemas interlaboratorio.
- Materiales que hayan participado en PEEC.
- Materiales de control comerciales con valores asignados.

Instituto de Gestión y Certificación para la Calidad

¿Qué consideraciones debemos tener?
 Se emplean como mínimo 2 concentraciones diferentes del material a evaluar (interés clínico).
 Se debe obtener 25 mediciones: 5 réplicas en 5 días para cada nivel evaluado.
 Para mejorar el rigor en la estimación, el protocolo se puede extender unos días adicionales
para una o más muestras (hasta 7 días). Nunca menos de 5 días.
 Los días de corrida no necesariamente deben ser consecutivos.
 El procesamiento de preferencia por diferentes analistas entre los días (condiciones de rutina).
 Examinar los datos obtenidos diariamente para detectar valores aberrantes.
 Como máximo, dos resultados pueden ser tratados como aberrantes en todo el estudio (se
recomienda el empleo del Test de Grubb´s).
 Si se observan múltiples valores aberrantes, considerar repetir el estudio o en su defecto
contactarse con manufactura.
 El análisis de la varianza se realiza con ANOVA.

Instituto de Gestión y Certificación para la Calidad

Esquema para la
Evaluación de la Se ha verificado la
precisión en condiciones

Precisión de Repetibilidad /
Intralaboratorio

Se ha verificado la precisión en condiciones de

Repetibilidad / Intralaboratorio

Instituto de Gestión y Certificación para la Calidad

Esquema del protocolo Ferritina (ug/L) 3 niveles

Día 1 Día 2
(Nivel 2) (Nivel 2)

140 139 138 138 140 140 143 141 143 137

Día 3
(Nivel 2)

140 138 136 141 136

Día 4 Día 5
(Nivel 2) (Nivel 2)

141 144 142 143 144 139 140 141 138 141

Instituto de Gestión y Certificación para la Calidad

Instituto de Gestión y Certificación para la Calidad
Análisis de valores atípicos: Test Grubb´s

Límite Grubb´s = Factor Grubb´s * DS

Límite Grubb´s = 3.135 * 2.297 = 7.2

Límite superior = 140.12 + 7.2 = 147.32

Límite inferior = 140.12 – 7.2 = 132.92

Instituto de Gestión y Certificación para la Calidad

Análisis ANOVA: Análisis de varianza

El ANOVA me brinda información:

Variación intracorridas
Variación entre corridas

Instituto de Gestión y Certificación para la Calidad

 Recordar:
Términos de la guía EP 15-A3: El Desvío estándar es la raíz
cuadrada de la varianza.

Desvío estándar en
Varianza intracorrida condiciones de Repetibilidad

VW = MS2 √ VW = SR

Varianza entre corridas

Si MS1 ≤ MS2 (esto es comparativamente
raro), considerar VB = 0;
de otra manera: VB = (MS1 - MS2) / n0

Instituto de Gestión y Certificación para la Calidad

 Varianza intracorrida

VW = MS2 VW = 3.16

√ VW = SR SR = 1.78

Varianza entre corridas

VB = MS1
MS1 = 15.86
Si MS1 ≤ MS2 MS2 = 3.16

Considerar: VB = 0;
de otra manera: VB = (MS1 - MS2) / n0

Instituto de Gestión y Certificación para la Calidad

 Varianza intracorrida

VW = MS2 VW = 3.16

√ VW = SR SR = 1.78

Varianza entre corridas

VB = MS1 VB = MS1-MS2
n0

VB = 15.86 - 3.16
VB = 2.54
5

Instituto de Gestión y Certificación para la Calidad

 Varianza intracorrida

VW = MS2 VW = 3.16

√ VW = SR SR = 1.78

Varianza entre corridas

VB = MS1 VB = 2.54

√ VB = SR SB = 1.59

Instituto de Gestión y Certificación para la Calidad

 Varianza Total
Varianza intracorrida VW = 3.16
SWL = √ VW + VB
Varianza entre corridas VB = 2.54

SWL = 2.39 ug/L

%CVR = 1.78 ug/L * 100 = 1.27 %

140.12

%CVWL = 2.39 ug/L * 100 = 1.71 %

140.12

Instituto de Gestión y Certificación para la Calidad

 Grados de libertad:

Calcule los grados de libertad:

dfR = N – k
Repetibilidad:
donde N es el número total de resultados
k es el número de corridas.

dfR = 25 – 5 = 20

Instituto de Gestión y Certificación para la Calidad

 Grados de libertad:

Precisión
(Repetibilidad):
dfR = 20

F = 1.34

Instituto de Gestión y Certificación para la Calidad

 Grados de libertad:

Calcular la proporción ρ, en la concentración

Precisión
promedio de la muestra de prueba como:
Intralaboratorio:
ρ = σWL / σR = %CVWL / %CVR

p = 3.4 / 2.0 = 1.7

Instituto de Gestión y Certificación para la Calidad

 Grados de libertad:

Precisión p = 3.4 / 2.0 = 1.7

Intralaboratorio:

dfR = 7

Instituto de Gestión y Certificación para la Calidad

 Grados de libertad:

Precisión
Intralaboratorio:
dfR = 7

F = 1.56

Instituto de Gestión y Certificación para la Calidad

Instituto de Gestión y Certificación para la Calidad
Caso Aplicativo:

Estimación del Sesgo – Guía CLSI EP 15-A3

Analito: Ferritina (ug/L)

N° niveles: 3 niveles de control

Material de control: Controles Interlaboratorio

Instituto de Gestión y Certificación para la Calidad

Esquema del protocolo Ferritina (ug/L) 3 niveles

Día 1 Día 2
(Nivel 2) (Nivel 2)

140 139 138 138 140 140 143 141 143 137

Día 3
(Nivel 2)

140 138 136 141 136

Día 4 Día 5
(Nivel 2) (Nivel 2)

141 144 142 143 144 139 140 141 138 141

Instituto de Gestión y Certificación para la Calidad

Instituto de Gestión y Certificación para la Calidad
Intervalo de Verificación del Valor evaluado “TV”:

0.9917

Ferritina (ug/L) 3 niveles

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:

0.9917

Error estándar
combinado

Error estándar asociado a la Error estándar asociado al

media (25 mediciones) valor asignado (material de
referencia)
Instituto de Gestión y Certificación para la Calidad
¿Qué fórmulas vamos a emplear?

sex = Error estándar asociado a la media

Error Estándar asociado a
nRun = Número de corridas
la Media
nRep = Número de réplicas
(25 réplicas obtenidas en SWL = Imprecisión total (intermedia)
el laboratorio)
SR = Imprecisión repetibilidad

Según el material de referencia empleado (RM) Error estándar del valor

asignado (seRM)
- Controles de veracidad. U/k
Error Estándar asociado - Materiales de control con participación en SD RM / √N
al Material de Referencia esquemas interlaboratorio.
(Media del material - Materiales que hayan participado en una
asignado) encuesta de un programa de evaluación externa SD RM / √N
de la calidad.
Como no existe información se
- Materiales control comercial (control interno) asume un valor de CERO.

Instituto de Gestión y Certificación para la Calidad

¿Qué fórmulas vamos a emplear?

sex = Error estándar asociado a la media

Error Estándar asociado a
nRun = Número de corridas
la Media
nRep = Número de réplicas
(25 réplicas obtenidas en SWL = Imprecisión total (intermedia)
el laboratorio)
SR = Imprecisión repetibilidad

Información de
Precisión
1 4
2.4152 1.8242
5 5

0.796

Instituto de Gestión y Certificación para la Calidad

¿Qué fórmulas vamos a emplear?
Según el material de referencia empleado (RM) Error estándar del valor
asignado (seRM)
- Controles de veracidad. U/k
Error Estándar asociado - Materiales de control con participación en SD RM / √N
al Material de Referencia esquemas interlaboratorio.
(Media del material - Materiales que hayan participado en una
asignado) encuesta de un programa de evaluación externa SD RM / √N
de la calidad.
Como no existe información se
- Materiales control comercial (control interno) asume un valor de CERO.

Información del Error Estándar asociada al

Grupo de Comparación: valor asignado (seRM):
SDRM / √ N
Media gp = 142.5 ug/L
DS gp = 4.5 ug/L
N° Lab = 43 4.5 /√ 43 seRM = 0.686
Instituto de Gestión y Certificación para la Calidad
Intervalo de Verificación del Valor evaluado “TV”:

1.05
0.796 0.686

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:

Grados de Libertad combinados: nRun = 5

tau = seRM / sex nRun = 6
nRun = 7
Esquemas
interlaboratorio
Programas de
tau = 0.686 / 0.796
Evaluación Externa
de la Calidad
tau = 0.86

Instituto de Gestión y Certificación para la Calidad

Grados de Libertad combinados: Intervalos de confianza considerando
cantidad de muestras:
Esquemas
interlaboratorio
tau = seRM / sex
Intervalo de confianza al 95%
- tau = 0.86
- nRun = 5
- N° Lab = 43 Respuesta: dfc: 11

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:

De los datos anteriores:

dfc: 11

Valor t:
2.82

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:

142.5 2.82 1.05

Límite superior = 142.5 + (2.82 * 1.05)

Límite inferior = 142.5 - (2.82 * 1.05)

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:

142.5 2.82 1.05

Límite superior = 145.46 ug/L

Límite inferior = 139.53 ug/L

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:

Evaluación del sesgo:

Desde el punto de vista estadístico

Desde el punto de vista clínico

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:
Evaluación del sesgo:
Desde el punto de vista estadístico
Información de
Precisión

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:
Evaluación del sesgo:
Desde el punto de vista clínico

142.5 ug/L  100% ESac = TEa /2

TEac ug/L  15% Esac = 21.37 /2
TEac = 21.37 ug/L ESac = 10.68 ug/L
Instituto de Gestión y Certificación para la Calidad
Intervalo de Verificación del Valor evaluado “TV”:
Evaluación del sesgo:
Desde el punto de vista clínico

VI/2 ≤ ESac
145.46 – 139.53
2
≤ 10.68

2.96 ≤ 10.68

Instituto de Gestión y Certificación para la Calidad

Intervalo de Verificación del Valor evaluado “TV”:
Evaluación del sesgo:
Desde el punto de vista clínico

Media Lab Media gp

Sesgoc = 140.12 – 142.5

Sesgoc = -2.38 ug/L

ESac = 10.68 ug/L

Instituto de Gestión y Certificación para la Calidad

 Es muy grato dar la respuesta adecuada,
y más grato aún cuando es oportuna.
Proverbios 15: 23

Instituto de Gestión y Certificación para la Calidad