Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Material de Validacion
Material de Validacion
Y LABORATORIO
CURSO/TALLER : VALIDACIÓN DE
MÉTODOS
2019
12/11/2019 2
1
IMPORTANCIA DE LOS ENSAYOS
ENSAYOS
ENSAYOS
ENSAYOS CUALITATIVOS CUANTITATIVOS
ENSAYOS
SEMICUANTITATIVOS
Cuantificación de contaminantes:
Ensayos positivos o negativos
Glucosa, colesterol total, de Brucella, NMP
metales pesados, Microorganismos,
Análisis sensoriales, análisis formulados,
cualitativos instrumentales, determinación de propiedades de una
identificación de microorganismos, sustancia,: pH, densidad, viscosidad.
etc. Cuantificaciones bromatológicas:
F1 cenizas, proteína, etc.
3
Variables Estadísticas
Variables. es una característica o cualidad que al ser medida en diferentes
individuos de una población es susceptible de adoptar diferentes valores.
Para que se considere un dato estadístico debe tener 2 características:
a) Que sean comparables entre sí. b) Que tengan alguna relación.
La variable puede
Ordinal tomar distintos valores
(cuasicuantintativa) ordenados siguiendo
una escala establecida
Dicotomía (Dos
Cualitativas
valores)
La valores de la
Nominal variable no pueden ser
sometidos a un criterio
Variables de orden
estadísticas
Un número finito de
Discreta valores entre dos
valores cualesquiera de
una característica.
Cuantitativas
Puede tomar un número
infinito de valores entre
Continua dos valores cualesquiera
de una característica.
12/11/2019 4
2
Requisitos para Validar
Equipos adecuados y
calibrados Técnicos autorizados
Métodos Muestras
documentados representativas
necesarias para validar
Patrones de
referencia confiables Procedimiento de
(MRC) validación/verificación
Verificación/Validación de Métodos
Definición
VERIFICACIÓN, (ISO 9000:2015, 3.8.12)
3
Verificación/Validación de Métodos
Definición
VALIDACIÓN, (ISO 9000:2015, 3.8.13)
12/11/2019 7
4
7. Norma NTE INENISO/IEC
17025:2018
CRGA 01
condiciones del laboratorio.
12/11/2019 9
12/11/2019 10
5
7. Norma NTE INENISO/IEC
17025:2018
7.2.2 Validación de los métodos
12/11/2019 12
6
7. Norma NTE INENISO/IEC
17025:2018
7.2.2.2 Cuando se hacen cambios a un método validado, se debe determinar
la influencia de estos cambios, y cuando se encuentre que éstos afectan la
validación inicial, se debe realizar una nueva validación.
12/11/2019 13
a) procedimiento de b) la especificación de
validación utilizado; los requisitos;
c) la determinación de las
d) los resultados
características de
obtenidos;
desempeño del método;
e) una declaración de la
validez del método,
detallando su aptitud
para el uso previsto
12/11/2019 14
7
CRITERIOS GENERALES DE ACREDITACIÓN
CR GA 01 R05
Validación de métodos
C 7.2.2.1: El laboratorio debe ejecutar una validación con un número de datos que sean
estadísticamente válidos considerando mínimo tres niveles en el rango del alcance de
acreditación solicitado, excepto los métodos que por su rango estrecho de aplicación no lo
permita. La variedad de matrices o instrumentos y los parámetros específicos para cada tipo
de ensayo/calibración.
Para laboratorios de ensayo, dependiendo del caso, debe considerarse las siguientes
características de desempeño del método:
12/11/2019 15
NOTA 1. En caso que se evidencie cualquier falsificación de datos o no disponibilidad de los registros primarios
de confirmación o validación de los métodos, inmediatamente se suspenderá la evaluación del ensayo/calibración
correspondiente para poner a consideración de la Comisión de Acreditación.
NOTA 2. La suspensión de la evaluación también aplicará si se detecta cualquier tipo de colusión o falsificación
de datos primarios en cualquier requisito de la norma.
8
Características del desempeño
de un método
Selectividad /Especificidad
Límite de detección
Límite de cuantificación
Sensibilidad Analítica
Incertidumbre
Robustez
12/11/2019 17
Límite de Detección
LOD
Conocido también como “valor mínimo detectable”, o, en las directivas de la UE,
CCβ.
Según ISO (11843:2002 e ISO 3534) es “valor mínimo detectable de la variable
en estado neto”.
Según IUPAC (1995): “la concentración neta mínima detectable”
9
Límite de Detección
LOD
Consideraciones:
12/11/2019 19
Límite de Detección
LOD
12/11/2019 20
10
Límite de Detección
Eurachem 2014
LOD
Qué hacer Cuántas Qué calcular a Fórmula Comentarios
veces partir de
los datos
Muestras blanco, es decir 10 - Calcule la
matrices que no contengan desviación So
cantidades detectables del estándar, de
analito. los resultados.
o Medidas replicadas de la - Calcule So´
muestra de ensayo con una - Calcular el
baja concentración del LOD LOD = 3 × So´
analito.
Blancos de reactivo. 10 - Calcule la Es aceptable cuando
o Medidas replicadas de desviación So no es posible obtener
blancos de reactivos estándar, de muestras blanco o
fortificados con una baja los resultados. muestras de ensayo
concentración del - Calcule So´ con una baja
analito. - Calcular el concentración.
LOD LOD = 3 × So´
Para algunas técnicas analíticas, p. ej. Cromatografía, puede ser necesario fortificar muestras de ensayo conteniendo
una concentración demasiado baja o blancos de reactivo, para obtener una desviación estándar diferente de cero.
El procedimiento de medición debería ser repetido enteramente para cada determinación.
La desviación estándar se expresa en unidades de concentración. Cuando la desviación estándar se expresa en el
21
ámbito de la señal, el LOD es la concentración correspondiente a la señal del blanco yB + 3 × So´
Límite de Detección
LOD
Límite de detección: Aplicado a análisis microbiológicos cualitativos –
Número más bajo de microorganismos que se pueden detectar, pero en
cantidades que no pueden estimarse exactamente [OMS: 2013].
La estimación del límite de detección requiere del empleo de
suspensiones de inóculo con niveles de concentración bajos.
Por tanto, es aceptable comprobar el método con bajos niveles de
inóculos de microorganismos diana de forma que se evalúen diferencias
entre las distintas matrices, analistas, equipos etc., verificándose la
capacidad del laboratorio para obtener resultados reproducibles y eficaces
a estos niveles.
Los requisitos suponen la definición de un valor
mínimo de ufc detectado, con una probabilidad
determinada.
Para fijar criterios hay que valorar:
a) La probabilidad de detección exigida no puede
ser mayor del 90%, para asegurar que no se exigen
más de 10 repeticiones por nivel.
12/11/2019 22
11
NORMA NTE INEN-ISO 6887-1
PRINCIPIO
Preparación de la suspensión inicial de
manera que se obtenga una
distribución, tan homogénea como sea
posible, de los microorganismos
presentes en la fracción de ensayo
1. Preparado completo
deshidratado
12
NORMA NTE INEN-ISO 6887-1
13
CARACTERISTICAS DE LAS MUESTRAS
A UTILIZARSE
27
Límite de Cuantificación
LOQ
El LOQ es el mínimo nivel del parámetro que puede ser determinado con desempeño
aceptable. “Desempeño aceptable” es considerado de diversas formas por diferentes guías
incluyendo precisión y veracidad, o incertidumbre de medición.
En la práctica, sin embargo, el LOQ se calcula de acuerdo a la mayoría de las convenciones
como la concentración del analito correspondiente a la desviación estándar obtenida a
niveles bajos multiplicada por un factor, kQ. El valor por defecto para kQ es 10.
14
Límite de Cuantificación
LOQ
Los multiplicadores 5 y 6 también ha sido usados ocasionalmente lo cual
corresponde a valores de RSD de 20 % y 17 % respectivamente.
El límite de cuantificación es una característica de desempeño que marca la
habilidad de un proceso de medición para ‘cuantificar’ adecuadamente.
Los cálculos del LOD y LOQ son valores indicativos.
12/11/2019 29
Intervalo de trabajo
Linealidad
El ‘intervalo de trabajo’* es el intervalo en el cual el método proporciona
resultados con una incertidumbre aceptable. (CALCULAR LA INCERTIDUMBRE EN
EL RANGO).
El extremo inferior del intervalo de trabajo esta determinado por el limite de
cuantificación, LOQ. El extremo superior del intervalo de trabajo esta definido
por las concentraciones a las cuales el método no tiene una respuesta adecuada.
El intervalo de trabajo del método que se va a validar, debe indicarse en el
alcance del procedimiento documentado.
12/11/2019 30
15
Intervalo de trabajo
Linealidad
El intervalo de trabajo del método se relaciona con las unidades del
resultado de la muestra. Por ejemplo: mg/kg, ug/L, unidades de pH,
ml/L, g/100 g, etc. El intervalo de trabajo del equipo (en los casos que
aplique) está definido en términos de la concentración de una muestra
de ensayo procesada presentada al instrumento para su medición en
función de la respuesta del instrumento. Ej. : mg/L vs A.
12/11/2019 31
Intervalo de trabajo
Linealidad
Evaluación del intervalo de trabajo del método:
12/11/2019 32
16
Intervalo de trabajo
Linealidad
Evaluación del intervalo de trabajo del equipo (LINEALIDAD):
12/11/2019 33
Intervalo de trabajo
(Microbiología)
En cuanto a límite superior, depende del número de ufc’s que pueden detectarse
en una placa, sin problemas de invasión ó dificultad de recuento, dependiendo
del método.
En cuanto a límite inferior también llamado límite de
cuantificación con el seguimiento de la distribución de
Poisson, para pequeño número de unidades formadoras de
colonias.
17
Linealidad- Regresión
lineal
Consideraciones para elaborar una curva de calibración :
La evaluación inicial del intervalo se realiza mediante una
inspección visual de la curva de respuesta.
Para evaluar el intervalo de trabajo del equipo y confirmar su
aptitud para el uso, se debe disponer de patrones de calibración con
un alcance de concentración que sobrepase el rango de
concentración esperado en ± 10 % o incluso ± 20 % y graficar las
señales.
Para un rango de (1 a 100 ) mg/L, sería de (0,8 a 120 ) mg/L.
Para un rango de (0,2 a 3 ) mg/L, sería de (0,16 a 3,6) mg/L
12/11/2019 35
Linealidad- Regresión
lineal
1. Graficar la respuesta en función de la
concentración.
2. Determinar la linealidad (u otra relación), valorar
el grado de ajuste de esa recta estimada a la
realidad observada para decidir si es aceptable,
mediante el coeficiente de correlación (R o r) y
más comúnmente usado el coeficiente R2 o
coeficiente de determinación.
n n n
Y=a+bX n xi y i xi y i
i 1 i 1 i 1
b yx
b
2
el coeficiente es la PENDIENTE n n
n xi2
xi
el coeficiente a es la ORDENADA AL ORIGEN i 1 i 1
(intercepto ) n n
yi b yx xi
i 1 i 1
a yx
n
12/11/2019 36
18
Linealidad- Regresión
lineal
Propiedades del coeficiente de correlación (puede utilizarse el r2 )
- r mide la fuerza de la asociación LINEAL entre X e Y.
( x x)( y y)
- -1 ≤ r ≤ 1 CORRELACIÓN LINEAL
i i
r i
2
- r = 0 implica que no hay relación lineal ( x x ) ( y y )
i
i
2
i
i
- r = ± 1 cuando todos los puntos caen sobre la recta
12/11/2019 37
Linealidad- Regresión
lineal
Por si solo el valor de r no garantiza el valor de linealidad, pero es
necesario realizar otra prueba estadística.
En la práctica analítica las gráficas de calibración proporcionan valores
de r mayores que 0,99; valores de r menores de 0,9 son poco
comunes.
La recta de regresión incluye los errores aleatorios en el proceso de
medición de los estándares de calibración y por tanto se calcula
su desviación estándar así: sy / x
sb
desviación estándar de la pendiente
(x
i
i x) 2
x
2
desviación estándar del intercepto i
sa s y / x i
n ( x x)
i
2
error aleatorio en y
i
2
( yi yˆ i )
sy / x i
12/11/2019 n 382
19
Linealidad- Regresión
Intervalos de confianza lineal
a t Sa
b t Sb
donde la t es la t de Student para n-2 grados de libertad y
probabilidad de 0,05, es decir, se calcula el intervalo de
confianza que contiene el 95% de los datos de la población.
Obtenemos una buena aproximación de la región de confianza de la recta
(al nivel de significación establecido). La Sensibilidad analítica es la variación de la
respuesta del EQUIPO que corresponde a una
variación de la magnitud medida (por
ejemplo, una concentración de analito), es
decir, el gradiente de la curva de respuesta
(PENDIENTE). CORRESPONDE A LA
DIFERENCIA MAS PEQUEÑA EN LA
12/11/2019
RESPUESTA
39
DEL MÉTODO QUE SE PUEDE
DETECTAR. Permite utilizar un tamaño
adecuado de muestra.
Linealidad
20
Parámetros estadísticos
La curva es simétrica alrededor de µ
Cuanto más grande el valor de σ mayor es la dispersión de la
curva
Aproximadamente 68% de los datos se encuentran entre µ±1σ
Aproximadamente 95 % de los datos se encuentran entre µ±2σ
Aproximadamente 99.7 % de los datos se encuentran entre
µ±3σ DISTRIBUCION NORMAL
Parámetros estadísticos
Media n
xi
n
xi = suma de resultados
i 1
x i 1
n
La media se calcula mediante la ecuación
n = número de resultados
Desviación estándar
n
LaMedia
desviación estándar i 1
( xi x ) 2
Para comparar
está expresada en las s la dispersión de
mismas unidades que la ( n1) resultados que
media.
tienen diferente
s magnitud o
Desviación estándar relativa (RSD) RSD unidades, la
x
RSD puede ser
s
Coeficiente de variación (CV) CV % RSD 100 de más utilidad.
x
21
Parámetros estadísticos
s
Desviación estándar de la media sM
n
Varianza S2, es el cuadrado de la desviación estándar
Por la propiedad de aditividad de las varianzas sabemos que si los resultados están influidos
por n fuentes de error aleatorio diferentes e independientes, la varianza total de un
.
resultado es la suma de las varianzas de los componentes individuales.
Prueba-F
Es una prueba estadística empleada para la comparación de varianzas.
22
Prueba t de Student
Comparación de valores medios de dos conjuntos de
datos
es decir
Prueba t de
Student
Se calcula el estadístico
t:
CRITERIO:
23
Prueba t de
Student
Media
Media
24
Prueba de significación: t-test
(diferente población)
Media
x
tcal
s n
Comparación de dos medias experimentales
Se aplica :
25
Prueba de significación: t-test
Existe diferencia
significativa entre
pares de muestras
(métodos)?
Veracidad
VERACIDAD (“TRUENESS”) :
SESGO (bias):
12/11/2019 52
26
Veracidad
El cálculo del sesgo puede hacerse de diferentes maneras:
a) Utilizando materiales de referencia (matriz muy parecida a la
muestra)
b) Determinación de la recuperación utilizando muestras adicionadas
c) Comparación con resultados obtenidos mediante otro método
error= X - X ref.
X ref.
12/11/2019 53
Sesgo
En algunos sectores de medición analítica, también se utiliza la
recuperación relativa ('recuperación aparente') en porcentaje, R % :
R%= X x 100
X ref.
R%= X X x 100
X adición
27
Sesgo
Es importante recordar que un determinado MR
debería utilizarse únicamente para un fin
durante un estudio de validación. Por ejemplo,
un MR usado para la calibración no debería
utilizarse para evaluar el sesgo. (Eurachem
2014).
Para comparar dos métodos, se comparan los
resultados del método candidato y del método
alternativo (referencia), para la misma muestra
o muestras. La muestra o muestras pueden ser
MR internos, o simplemente muestras de ensayo
típicas.
El MR ideal es un material de referencia de matriz certificado con valores de
las propiedades próximos a los de las muestras de ensayo de interés. Se
acepta en general que los MRC proporcionan valores trazables.
Exactitud (Veracidad y
Precisión)
EXACTITUD :
La ‘exactitud’ de medición expresa la proximidad de un único
resultado a un valor de referencia.
12/11/2019 56
28
Exactitud (Veracidad y
Precisión)
VERACIDAD Y
PRECISIÓN
EXACTITUD
La validación de métodos trata de investigar
la exactitud de los resultados evaluando los
efectos sistemáticos y aleatorios sobre
resultados individuales. Por lo tanto,
normalmente la exactitud se estudia como
dos componentes: ‘veracidad’ y ‘precisión’
12/11/2019 57
Precisión
PRECISIÓN: proximidad entre las indicaciones o los valores
obtenidos entre mediciones de un mismo objeto los resultados de
mediciones sucesivas del mismo mensurando o de objetos similares,
bajo condiciones especificadas. (VIM 2.15)
12/11/2019 58
29
Exactitud (Veracidad y
Precisión)
La repetición es esencial para obtener estimaciones fiables de las
características de desempeño del método.
“deben ser diseñados para tener en cuenta todas las variaciones en las
condiciones operativas que se pueden esperar durante el uso rutinario
del método “.
• el mismo procedimiento
• los mismos operadores
• el mismo sistema de medida
• el mismo lugar
• las mismas condiciones de operación
• mediciones repetidas en el mismo objeto u objetos similares
• en un período corto de tiempo
12/11/2019 59
Exactitud (Veracidad y
Precisión)
REPRODUCIBILIDAD: condición de medición que
incluye :
• diferentes operadores
• diferentes sistemas de medida (pueden utilizar diferentes
procedimientos)
• diferentes lugares
• diferentes condiciones de operación
• mediciones repetidas en el mismo objeto u objetos similares
12/11/2019 60
30
Exactitud (Veracidad y
Precisión)
Entre estos dos extremos, “la precisión intermedia (de medida)” ofrece una
estimación de la variación en los resultados cuando las mediciones se realizan en
un solo laboratorio . El objetivo es obtener una estimación de la precisión que
refleje todas las fuentes de variación que se producirán en un solo laboratorio en
condiciones de rutina (diferentes analistas, períodos de tiempo prolongado,
diferentes piezas de equipo, reactivos, instrumetnos, s etc.)
12/11/2019 61
Exactitud (Veracidad y
Precisión)
El objetivo de la validación es determinar la exactitud
12/11/2019 62
31
Precisión
La evaluación de la precisión requiere la realización de mediciones
repetidas en materiales adecuadas.
12/11/2019 63
Precisión - ANOVA
12/11/2019 64
32
Precisión - ANOVA
ANÁLISIS DE VARIANZA , ANalysis Of VAriance:
ANOVA permite
separar, calcular y
comparar diferentes
fuentes de variación.
65
Precisión - ANOVA
ANÁLISIS SIMPLE DE LA VARIANZA
Diferencias cuadráticas
Origen Grados de Sumas de diferencias
medias
de la varianza libertad () cuadráticas (SDC)
(DCM = SDC/) (varianzas)
5
Entre grupos
B = k-1 SDC B p(Li L) 2 DCM B
SDC B
(Between) i 1 vB
Dentro del 5 5
33
Precisión - ANOVA
,
sr DCM W
La desviación estándar de reproducibilidad (sR) es
La precisión intermedia puede,
DCM B DCM W
s L2
p La contribución a la variación total del
factor de agrupamiento (si) también se Si S L2 <0; S L2 =0
obtiene a partir de la tabla ANOVA
Precisión - ANOVA
F = DCMB / DCMW ; VB ; vW
34
Precisión
Qué hacer Cuántas Qué calcular a partir de Comentarios
veces los datos
a) Mismo equipo y mismo analista, 6-15 replicas para Determinar la desviación Estimar la desviación
mismo laboratorio, corto plazo de cada material. estándar (s) de los resultados estándar de repetibilidad
para cada material. sr para cada material
tiempo.
b) Analistas y equipos diferentes, 6-15 replicas para Determinar la desviación Estimar la desviación
cada material. estándar (s) de los resultados estándar de la precisión
mismo laboratorio, plazo prolongado
de tiempo.
para cada material. intermedia sI para cada
material.
c) Analistas y equipos diferentes, mismo 6-15 grupos de Calcular la desviación estándar de Estimar la desviación
medidas duplicadas repetibilidad de los resultados de estándar de repetibilidad
laboratorio, plazo prolongado de obtenidas bajo ANOVA para cada material. sr para cada material.
tiempo. condiciones de Calcular la desviación estándar Estimar la desviación
repetibilidad en entre grupos de los resultados de estándar de la precisión
ANOVA y combinarla con la
días/equipos
diferentes para cada desviación estándar de intermedia sI para cada
repetibilidad para cada material. material.
material.
12/11/2019 69
Precisión
Qué hacer Cuántas Qué calcular a partir de Comentarios
veces los datos
Una desviación estándar de repetibilidad también se puede estimar al reunir varios conjuntos pequeños de
datos , por ejemplo, n = 2, de diferentes dias.
Las mediciones duplicadas dentro de cada grupo proporcionara un número equilibrado de grados de libertad
para las estimaciones las desviaciones estándar inter y entre grupos. Aumentando el numero de repeticiones
por grupo aumentara el número de grados de libertad asociados con la estimación de la repetibilidad.
12/11/2019 70
35
Error Normalizado (aplicación en sistemas de
medición)
Error Normalizado
𝑋𝑖 − 𝑋𝑟
𝐸𝑛 =
𝑈2𝑖 + 𝑈2 𝑟
Donde:
71
Selectividad/Especificidad
Selectividad
Se relaciona con “el grado en el que un método puede ser utilizado
para determinar analitos particulares en mezclas o matrices sin
interferencias de otros componentes de comportamiento similar”
[Guía Eurachem 2014].
‘Especificidad
La capacidad de un método para medir solamente
lo que se pretende que mida.’ [AOAC - PVMC]
36
Selectividad/Especificidad
Analizar el
comportamiento
Robustez
La “robustez” de un procedimiento analítico es "una medida
de su capacidad para permanecer no afectado por pequeñas
variaciones premeditadas de los parámetros del método. La
robustez proporciona una indicación de la fiabilidad del
método durante su uso normal” (USP, 2003)
37
ROBUSTEZ
Un aspecto importante de la robustez es la estabilidad de todas
las muestras, estándares y reactivos, tanto en el
almacenamiento como durante las condiciones de ensayo. En
este caso pueden ser parámetros a probar:
· Sensibilidad a la temperatura, humedad.
· Sensibilidad a la luz.
· Hidrólisis p. ej. por la humedad del aire.
· Facilidad de oxidación.
· Descomposición química.
· Efectos catalíticos, p. ej. por las paredes del contenedor.
· Variación pequeña de tiempo.
DISEÑO DE ROBUSTEZ
12/11/2019 76
38
DISEÑO DE ROBUSTEZ
12/11/2019 77
ROBUSTEZ
YOUDEN - STEINER PLAKETT -BURMAN
12/11/2019 78
39
Datos Fuera de Límite
Datos separados en valor del resto.
79
Prueba de Outliers
- Pruebas numéricas de outliers
Test de Cochran:
40
Datos Fuera de Límite
Evaluando resultados para Cochran y Grubbs Simple
12/11/2019 81
Test de Grubbs
Variabilidad entre laboratorios o grupos (Between).
41
Datos Fuera de Límite
G = sp-1, p
2 2 p
s0 = å
2
s 0
2
i=1
(xi -x)
p-2 p-2
å xi sp-1, p = å
1 2
x p-1, p = (xi -x p-1, p )
2
p- 2 i=1 i=1
G = s1,2
p p
2 2
s1,2 = å å
2 1
s (xi -x1,2 ) x1,2 =
2
0 i=3 p- 2 i=3 xi
83
42
Técnica Gráfica De Mandel
Técnica gráfica de Mandel
2
p
(x- xi )
s= å n -1
;
i =1
ås 2
1
sr = i =1
p
4. Representar gráficamente los valores de k para cada
laboratorio.
Las líneas que se dibujan como
indicadores de los niveles de
significancia al 1% y 5% (Tablas)
43
MÉTODOS SEMICUANTITATIVOS Y
CUALITATIVOS
En los análisis se dan mediciones con respuestas rápidas de tipo cualitativo , en
algunos casos binarias (mas allá del tipo de detección)
POSITIVO/NEGATIVO ELISA
REACTIVO/NO REACTIVO
UV-VIS
PASA/NO PASA
SENSORES: Químicos,
AUSENCIA /PRESENCIA bioquímicos
MÉTODOS SEMICUANTITATIVOS Y
CUALITATIVOS
12/11/2019 88
44
DETERMINACIÓN DEL NIVEL DE CORTE PARA UN
MÉTODO CUALITATIVO
Tabla de Contingencia
Eurachem 2014
45
Sensibilidad/Valor predictivo positivo
La ‘sensibilidad diagnostica’ es la proporción de muestras con una
determinada condición, p. ej., concentración superior a la concentración
de corte, que proporciona resultados positivos al análisis
VP
MUESTRA
VP + FN
(+) (-)
VN
MUESTRA Especificidad: E =
(+) (-) VN + FP
VERDADEROS FALSOS POSITIVOS
PRUEBA (+) POSITIVOS
VP
FP
b
VN
a
VPN =
PRUEBA (-)
VN + FN
d
c VERDADEROS
FALSOS NEGATIVOS NEGATIVOS
FN VN
46
Índice Kappa
El índice kappa puede aplicarse a pruebas cuyos resultados sólo tengan
dos categorías posibles o más de dos sin un orden jerárquico entre ellas.
El índice kappa puede adoptar valores entre -1 y 1. Es 1 si
existe un acuerdo total, 0 si el acuerdo observado es igual al esperado
y menor de 0 si el acuerdo observado es inferior al esperado
por azar
Po-Pe
K=
1 - Pe
Po= (a+d) /n
Pe= (P+N) /n
n= a+b+c+d
12/11/2019 93
Índice Kappa
12/11/2019 94
47
Métodos de ensayo y validación de
métodos micorbiologicos
48
VALIDACIÓN DE ENSAYOS
MICROBIOLOGICOS CR EA 01
12/11/2019 97
VALIDACIÓN DE ENSAYOS
MICROBIOLOGICOS CR EA 01
EN ENSAYOS CUANTITATIVOS [CEA-ENAC-20 Rev1]
Límite de cuantificación
49
VALIDACIÓN DE ENSAYOS
MICROBIOLOGICOS CR EA 01
EN ENSAYOS CUALITATIVOS [CEA-ENAC-20 Rev1]
99
VALIDACIÓN DE ENSAYOS
MICROBIOLOGICOS CR EA 01
CE 5.4.5.3.2 Para la validación de los métodos de ensayo
microbiológicos cualitativos, tales como los que el resultado se
expresa en términos de detectado/no detectado, y los procedimientos
de confirmación e identificación del microorganismo, deben ser
validados estimando, cuando sea apropiado:
- Especificidad,
- Sensibilidad
- Desviación positiva
- Desviación negativa,
- Límite de detección,
- Eficiencia (recuperación),
- Efecto matricial (debe realizarse cuando se está desarrollando un
método nuevo o fuera de su alcance). [CEAENAC-20 Rev1]
12/11/2019 100
50
Tabla de Contingencia
Eurachem 2014
Sensibilidad
Sensibilidad: Fracción del número total de cultivos o colonias
positivos que son asignados correctamente con el método
utilizado [ISO 13843].
MUESTRAS
(+) (-)
VP
VP + FN
PRUEBA (-) c d
VERDADEROS
FALSOS NEGATIVOS NEGATIVOS
FN VN
51
Especificidad
Especificidad: Fracción del número total de cultivos o colonias
negativos que son asignados correctamente con el método
utilizado [ISO 13843].
MUESTRAS
(+) (-)
VN
Especificidad: E =
VN + FP
VERDADEROS FALSOS POSITIVOS
POSITIVOS FP
PRUEBA (+) VP
a b
c d
PRUEBA (-) FALSOS NEGATIVOS VERDADEROS
FN NEGATIVOS
VN
Desviación positiva
Ocurre cuando el método alternativo da un resultado positivo
sin confirmación y el método de referencia da un resultado
negativo. Esta desviación se convierte en un resultado falso
positivo cuando puede demostrarse que el resultado verdadero
es negativo. MUESTRAS
(+) (-)
52
Desviación negativa
Ocurre cuando el método alternativo da un resultado negativo
sin confirmación y el método de referencia da un resultado
positivo. Esta desviación se convierte en un resultado falso
negativo cuando puede demostrarse que el resultado verdadero
es positivo
MUESTRAS
(+) (-)
Eficiencia/recuperación,
exactitud
Grado de concordancia entre los resultados del método
evaluado y los obtenidos utilizando un método de referencia
reconocido.
MUESTRAS
(+) (-)
53
VALIDACIÓN DE ENSAYOS
MICROBIOLOGICOS CR EA 01
VALIDACION de Sistemas de ensayo comerciales (kits)
VALIDACIÓN DE ENSAYOS
MICROBIOLOGICOS CR EA 01
CE 5.4.5.2.4 Los laboratorios deben mantener los datos sobre
validación de los sistemas de ensayo comerciales (kits) que
utilicen. (intercomparación o del fabricantes. Si no se dispone
de datos sobre o si éstos no son plenamente aplicables, el
laboratorio será responsable de completar la validación del
método
54
VALIDACIÓN MÉTODOS
CUANTITATIVOS
• Límite de cuantificación: Aplicado a análisis microbiológicos
cuantitativos – Número mínimo de microorganismos dentro de una
variabilidad definida que puede determinarse en las condiciones
experimentales del método evaluado
PRECISIÓN
VALIDACIÓN MÉTODOS
CUANTITATIVOS
PRECISIÓN.- Técnica de duplicados con pares de valores
Parámetros estadísticos
Parámetros de distribución o dispersión
Varianza 𝑥1 − 𝑥 2
𝑠2 =
𝑛−1
Desviación estándar s= √𝑠 2
Desviación estándar relativa 𝑆
𝑅𝐷𝑆 =
𝑥
1
%𝑅𝐷𝑆𝑝𝑜𝑖𝑠𝑠𝑜𝑛 = 𝑋100
√𝐶
Repetibilidad 𝑥1 − 𝑥 2
𝑠𝑟 2 =
𝑛−1
Reproducibilidad 𝑥1 − 𝑥 2
𝑠𝑅 2 =
𝑛−1
110
55
VALIDACIÓN MÉTODOS
PRECISIÓN
CUANTITATIVOS
Técnica de duplicados con valor de referencia
Parámetros estadísticos
Parámetros de distribución o dispersión
− 𝑠𝑑
Reproducibilidad 𝑅𝑝% = 1 − 10 . 100
Desviación estándar relativa 1
%𝑅𝐷𝑆𝑝𝑜𝑖𝑠𝑠𝑜𝑛 = 𝑋100
√𝐶
111
Estimación de la incertidumbre
ISO/TS 19036
Tres opciones para estimar SR
- SR intralaboratoio
- SR Método derivado de estudio interlaboratorio
- SR de un ensayo interlaboratorio
U = 2 uc (y) = 2 SR
Considerar:
- Modelo caja negra
- Estimar según microrganismo, matriz, método de análisis
- Tener bajo control factores críticos:
y = son los datos
SR transformados a log base
Cálculo de SR
10
12/11/2019 112
56
CONSIDERACIONES PARA
VALIDAR
Recopilación de la normativa aplicable (métodos de ensayo,
reglamentación legal, requisitos del cliente, etc. ).
CONSIDERACIONES PARA
VALIDAR
Definir el nº de ensayos/calibraciones necesarios para obtener los
valores de Las características del desempeño.
La ejecución experimental debe ser en las CONDICIONES RUTINARIAS
DE TRABAJO.
57
Objetivos de Validación
Objetivos de validación : Definir las condiciones por cumplir:
OBJETIVOS DE VALIDACIÓ. Por ejemplo: límite de detección < 5 mg/L,
intervalo de trabajo
( 0,1 a 5 ) mg/kg , incertidumbre <20%, CVr %<10%, etc.
Como definirlos:
La Ecuación de Horwitz
Relativa 10-9 10-8 10-7 10-6 10-5 10-4 10-3 10-2 10-1 100
RSDR(%) 45 32 23 16 11 8.0 5.6 4.0 2.8 2.0
58
Documentación de Validación
/Verificación
Para la validación de un método en el laboratorio se requiere:
12/11/2019 117
Documentación de Validación
/Verificación
7.2.2.4 El laboratorio debe conservar los siguientes registros de validación:
12/11/2019 118
59
Documentación de Validación
/Verificación
a) Procedimiento de validación usado;
Es un procedimiento donde se detalla las condiciones y diseño
experimental para ejecutar la validación en el laboratorio para el
procedimiento establecido
Documentación de Validación
/Verificación
a) Procedimiento de validación usado;
- Tipo de ítems de ensayo /calibración utilizados en la validación
- Equipamiento utilizado: Patrones , MR, MRC utilizados (trazabilidad),
los equipos usados con especificación técnica y serie, reactivos, material
auxiliar (condiciones ambientales), software, etc.
- Cambios en el método, cuando aplique en el equipamiento o en
alguna condición para ver robustez (tiempo, pH , temperatura,
reactivos, materiales, variedad de equipos).
- Requisitos del método: Identificar las características del desempeño y
los valores o condiciones a obtener. (Objetivos)
60
Documentación de Validación
/Verificación
a) Procedimiento de validación usado;
12/11/2019 121
Documentación de Validación
/Verificación
b) Especificación de los requisitos (Objetivos de
validación ):
incertidumbre <20%,
etc.
61
Documentación de Validación
/Verificación
COMO DEFINIRLOS:
Establecidos por el cliente del laboratorio o por alguna
instancia oficial o autoridad ( resoluciones, reglamentos
o normas técnicas ).
Por Organizaciones científicas internacionales.
Documentación de Validación
/Verificación
b) Especificación de los requisitos (Objetivos de validación ):
62
Documentación de Validación
/Verificación
c) Determinación de las características de desempeño de los
métodos;
12/11/2019 125
Documentación de Validación
/Verificación
12/11/2019 126
63
Documentación de Validación
/Verificación
e) Declaración de la validez del método, especificando en detalle
su aptitud para el uso previsto
64