c,Gbas'

Lifeneeds nnswers

I: VALIDACIN DE MTODOS MODULO

Desarrollo de Herramientas para Anlisis de Datos I

ftCS Nr

r.r.n 6*'

MDULO I: VALIDACIru DEMTOOOS INTRODUCCION Revisin de algunas regulaciones mundiales

del test dependen de la "complejidad" CLIA: Lasrecomendaciones

re
Moderad

.Exactitud .Precisin b'"go reportable .Verificar lntervalos de Referencia

.No hay recomendaciones paraValidarlos Mtodos. Solamente seguirlas recomendaciones del fabricante

m
' '"'.,"jr*f:::
i

;: :*.

--B:a
1,,

!1,

-.":-:,.]i.::s*
: _: .:i I j :*

c*bas"

;--+&q.ngi*

DE METODOS @ MODULOl: VALIDACION INTRODUCCION regulaciones mundiales Revisin de algunas

deltest de la "complejidad" dependen CLIA: Lasrecomendaciones
.Exactitud .Precisin qbngo reportable .Verificar Intervalos de Referencia EXPERIMENTOS .Comparacin de mtodos .Replicacin .Lineatidad .Colecta y verificacin de

v:

*
:"4:

& '*x) w

Moderad

Interualos oenefet,Bas'
LiJeneeds anwos

I DEDATOS PARAANALISIS HERRAMIENTAS

qt

'...e
.4* tt:

que ingresa Todolaboratorio unanueva *{.; prueba y que a partirde ellareportar resultados desde un inicio de pacientes, lasespecificaciones debeverificar de performance por el fabricante. establecidos * Linealidad DE IINEAIIDAD. 1.- EXPERIMENTO (Rango reportable) DE REPLICACN 2.- EXPERIMENTO * Precisin EXPERIMENTO DE COMPARAGNDE 3.. * Exactitud MTODOS * Verificar que los intervalos de referencia 4.- Golectarvalores referenciales. normales) son delfabricante [valores parala poblacin ( Intervalosde referencia) apropiados de pacientes del laboratorio.

VERIFICACION

c<obas'
Lifc neer* awen

E){PERIMENTO

DE LINEALIDAD
t..,,i

resultados analtico de obtener La linealidad es la habilidad del procedimiento Ques linealidad? pruebas que proporcional la muestra. la del analito en de seandirectamente a concentracin ,,i el usodel rango analtico de un mtodo Cules el propsito de la linealidad? Elpropsito es valorar prueba y quevalores sonconfiables Saber muybajos de laboratorio. o muyaltosde unadeterminada pueden ser reportados, tambin es llamado rangoreportable.

t.'-t

Ques AMRy CRR?

c 2
u
trt

= RegoilableResuftg

AMR es el rango de medicinanaltica Verificable cada6 meses CRRes el rango reportable clnico No necesita verificacin

G0trIEATMH

2nd Edition, JamesO. Westgar( - BasicMethodValidation, - http://westgard.com/lesson26.htm

ctobas'
Life needs ofrwts

EXPERIMENTO
Factoresa consderar
Nmero de niveles

DE LINEALIDAD

La NCCLSrecomienda un mnimoentre 4 5 (si son ms mejorJ diferentes concentraciones, Materiales preparadas - Soluciones Estandar - Soluciones Fabricadas con valores conocidos - Diluciones de muestras de suero. Procedimiento para preparar las diluciones Esconveniente el uso de 02 poolde sueros, uno cercanoal nivel ms bajo o ceroy la otra cerca o por encimadel nivelalto del rango ligeramente que se va a estudiar. Nmero de repeticiones NCCLS( DocumentoEP6-P2] recomiendarealizar por cadauno de los niveles 04 replicados como mximo.Generalmente con 03 replicados es suficiente

c(obas'
Life needsorqer

EXPERIMENTO

DE LINEALIDAD

EXPERIMENTO

DE LINEALIDAD

,,1:i

'.r..

Nombres
Faal1 l3a6l

lnstruccicnes
Elanco - Muestra muy bEa

Medidas Promedio I

2 3

MezclaZt25o/'1 Poll1 {3 partes)+Pacl5 {1 partei MezclaS$AVal ?all 1 (Zpartes) + 1 Pasl5 {2 partes}

Mezcla 4l75%o) Poll1 {1 parte)+1 Pcol5 {3 pa*es} ?aal5 $A/&j l*u e str a **n centr acnalta(lmitelinearidad)

ctobas"
Lite needsonswers

VALIDACIN DELRANGO REPORTABLE

QhslaeWrol

*A q''

& &
& & ei &
H

g&

w7g % ffilluttarr

rtw

cobas"
Lili neis oililvts

VALIDACION DELRANGO REPORTABLE

Luego colocar lasmedias Y. obtenidas sobrela columna y colocarlos Inmediatamente losvalores calcular teoricos sobrela columna X, puri y calculamos estousaremos losvalores el pool N" 3 comovalorverdadero paralos restantes poolsde suerosusando tericos una relacin basadas conocida en lasdiluciones. en la tablaJ. [Obseruar Dibujar losvalores tericos sobreel ejeX y lasmedias calculadas sobreel ejeY. (slopeJ (y-intercept). y el interceptor Calcular la pendiente ldealmente , la pendiente y el interceptor debesercercano a 1.00 cercano a 0.0. por resta El biasparacadaniveles calculado entrela media calculada con la media El porcentaje terica. de errores calculado dividiendo el biasentreel valor y multiplicando por 100.Nota: terico Si el Pool1 is cero, el calculo del porcentaje de errorno aplica[Observar en la tablaJ. y el interceptor Compare la pendiente con losvalores ideales. calculado Compare el biasy/o porcentaje de poolde sueros de errorparacadamezcla con parala prueba. el errorpermisible El biasy porcentaje de errordebenser menor que el errorpermisible. Tomarla decisin de aceptabilidad.(.)
(r) http://www.westgard.com/biodatabase l .htm

cobas

VALIDACION DELRANGO REPORTABLE

. TABLADEEXPLICAqN
Forl or It[ittur
Fosl I: ll fuol ?: l$./o Fooll: 5tr/+ Fnol4: ?f/o FnolS:Illll/o

Meen[T]

Thrrcticel (H)

Eias

4'tEmr

3 x 0J Ienhrmeanua]re) [nranofMLr
(enhrmeanvahe) (neanoflvf ix 3J (enhrmean'raheJ (neurofMix 3 x l5)

( T - H) HiA
tl (T 'tl Hr) [[h*,rH.J x I[

(enhrmeanuahe) (neanof['lix - J [[bis',trJ 3 x -5J ( T , ,H' x 10

3 x ?Jl) [enhrmeanuah.eJ {rreaaoftr

( T ,- H, J {[brs,,tr1x I

http ://www.westgard.co m/l26work2. htm

ctobas'
Life n*ds answers

VALIDACION DELRANGO REPORTABLE

tz*WWrd

*aoo

*xwx.97
y,lr:'/.trlrpl*.54

*w

2*8 W 4W 500 th*aratwal in mg/dL ,,

cobas"
Lil. ileeds asrer:

Ejemplos de Linealidad
& V & " %, t & g4eW we
-wt L "p 44 "'-fW vq ,*

(.nhb
Anrylas
Fee. fnstrurunt: ROCHH|T Ar1l912 Peet Reagent. RCHEffi C gFerens Piffersre Allwa$e Etot -1.1"/r -1"5"i -1.1"t t.2% -',1.,'tq -1.4%
? W6 7 w 4 l kb ith ?9.4s& Ltu

E V A LU A TIgI'
ORIGII{AL ".q1 7 '"

twz-*naz t bemis2rylLpidtEnzymes I
Peer L{ean 86.8 441.4 fl52.4 X247.8 X81.& M3,?
Pd 1

*7&'twt7:4;
'@4w

kt^ "*qr,

7.W Wet &;:%, 'Y13

Pw ,eeet1

WqtN

& W1s

Speclmen

Ysqr M*n 6.? 451.5 84.b 122.8 1b86.5 1VT4"5

4&.13 '1124',* '.&^4& tz''w ,t4,yt " 274,',22 "

tt1% :? . .
a. ":.

,&&% W

*&.tt&,. rql .
W.

tl.& w'/,?*

4'

1e4@ :t4W&
wx

t:ryt ?q%'

"

v4"

4Ye e;

.',ry ,34..37 L,Wz$.t& ,&&/.78.W L&&:'29 &,e4..*2.

tN-41 ,-N-02 tf{-*3 Ltt-*4 Ltt-05' LW-ffi''

12.5'& fz.\Y" f2 \ak 2.t4/, t2.5e/6 12.\%

LN-&1 -92 LN & ?-9 3 Lr'-83-94 Ltl *4 - 95 Lr4-85 -8

%tt@wwvt@ @q4/2&eeah4

awr4.4t6*-:W/@/.

Pewiis

lewiisara@i^xp*het1

ar a@

i^ Xp*tul1

ttazrt,w;%Wve4@'. Ll*pa wL?r1 RangeTesterJ w z{Jtf}ry w:3 Yaur LinearlfEvalualar-.LinearznFwlS l8"8 t 1974.3i

E)TPERIMENTO

DE REPLICACIN

ERECISIN)

:1,.

./:.

La precisin es la consistencia de losvalores magnitud medidos bajoidnticas de unamisma condiciones experimentales. Aquel concepto instrumento idntico incluye el mismo observador, df;i medida, lugary procedimiento ascomola cercana en el tiempo. Elconcepto de precisin se de'fiS, preciso muchas vecescomorepetitividad. Esdecir,un aparato es un aparato repetitivo [diferentes medidas magnitud resultado). de unamisma bajolasmismas condiciones conducen al mismo

Cules el propsito del experimento Elpropsito es estimar la imprecisin de replicacin? de un mtodoanaltico, la variacin erroraleatorio esperada en el es decirobservar resultado de unaprueba bajocondiciones normal del laboratorio. de operacin

- BasicMethodValidation, 2nd Edition, JamesO. Westgqqd - http://westga rd,com/lesson22htm

ctobas'
Lit'enees autuefi

EXPERIMENTO DE REPLICACIN ERECISION)

1,4

(r1

A CONSIDERAR FACTORES

que {* por factores causado el erroraleatorio estima de replicacin El experimento de condiciones de muestras, como ppeteo del mtodo, en la operacin varan factoresson muy etcJ. Estos calefaccin, temperatura, reaccin(tiempo,mezcla, automatizados' y procedimientos manuales entreprocedimientos diferentes 1.- Tiempode periododel experimento (within-run), analtica corrida deunasola - Dentro
\ \ diaria[within-day) analtica - O"nttode unacorrida day, total imprecision) das(dayto day,between Dentrode una corridade varios

*"f;

testeada2.-' Matriz de la muestra a ser por parala pruebaque estaevaluando, mirizde inters ;A;Eb"rtoiio-0"6-e "rcogdl o LCR' orina suero, para: total, sangre ejemplo tenemos: usados com-nmente de lostiposde muestras Dentro (calibradores), esiandares - Soluciones y (controles), - Soluciones de control individuales' de pacientes muestras Oepcientes - Poolde muestras

c(obas"
Lrfeneds onswers

EXPERIMENTO

DE REPLICACIN

ERE CISION)

* 3.- El nmero y concentracionesdel material a sertesteado. p-af.a uso& el crticas de lasconntraciones depende a sertesteado, de materiales Elnmero que mdicament# entre2 o 3 materiales, se sel'eccionan beneralmente la prueba. reOJO

4,, |?",

C). ffir''iviit;ecislonimponante de

--:-,^^ --^^^-^,J^^ preparados con datos o de materiales rferehcias ioveedores ire pueoens?rJ conocidos
de en el perodo sermedidos deben de 20 muestras que un mnimo aceptado Escomnmente del error un mejorestimado nosdara (un nmero de mediciones mayor de inters. tiempo la evaluacin)' y de eltiempo el costo perodeben considerarse aleaiorio,

4.- El nmero de muestras a ser analizadas-

* http://www.westgard'com/decision.htm

c<obas'
Life ileadsafrilers

EXIERTMENTI DE REpLrcACrN (pRn ctsNp

m

Calculode datos ( Datos estadsticos) . Elerror aleatorio esdescrito cuantitativamente calculando la y el coeficiente media, desviacin estandar de variacin.

x !E 84,
-

f i*

E{qr-T-Y

n
CV = (s/g X00
corbas'
Life nels am

UALIDACION DELEXPERIMENTO DE REPLICACIN

CRTTERTO DEACEPTABTLDAD

@.x
"&
',

por Elcriterio de aceptabilidad es el paso en el cualdamos perono es solamente vlido el estudio, aceptar el resultado de la DEobtenida, estevalordebeajustarse a la cantidad de error totalpermisible C). Para imprecisiones de un cortoplazo,la DE"within-run" la queel error DE"within-day", deben ser7+ o menor total permisible definido OEal. f) Para imprecisiones de un largoplazo,la DEtotaldebe ser1/3 queel TEa o menor definido. 0) \ c(oDas
Lile fr&ls aLswefr I
o

(*) http://www.westgard.com/biodataSsel .htm

EXPERIMENTO COMPAMICION DE MTODOS @

*: ...;

que de mtodos? La comparacin de mtodos es el experimento Ques comparacin t;:. "comparar", nosva a permitir mtodo, contra el usode un nuevo un mtodo debidamente (mtodo ya establecido, documentado de referencia) de rutina un mtodo Cules el propsito de la comparacin El propsito es valorar la inexactitud de mtodos? o errorsistemtico de un mtodo.Este se puederealizar analizando experimento (porejemplo porel nuevomtodo y un mtodo muestras de pacientes comparativo el que se estausando mtodo en esemomento), dondese estima el errorsistemtico y poder determinar basado en lasdiferencias obseruadas entrelosmtodos si el nuevo mtodo es tan bueno comoel de referencia o no

c<obas"
LiJetdds onilers

EXPERIMENTO COMPAMICION DE MTODOS @

FACTORES A CONSIDERAR
que se utilice parala comparacin, Elmtodo analtico debeserseleccionado con cuidado, parala interpretacin de losresultados, lo ideales utilizar un mtodo de referencia. Alguna y el mtodo diferencia entreel nuevo mtodo sonasignados de referencia al nuevo mtodo, porque normalmente unacorreccin del mtodo de referencia se encuentra documentado. ya Sinembargo se podra utilizar comomtodo de comparacin a algunos mtodos perosu interpretacin establecidos en la rutinade laboratorio, debeser muycuidadosa. Si las podemos diferencias sonpequeas, decirqueambos mtodos tienenrelativamente la misma y mdicamente no aceptables, exactitud. Si lasdiferencias sonmsgrandes entonces es necesario identificar cualmtodo es inexacto. 1.- Nmerode muestrasde pacientes porambos Un nmero mnimo de 40 muestras de pacientes diferentes deben sertesteados mtodos. Estas muestras deben serseleccionadas de cubrirel rango con el propsito de y deberepresentar trabajo del mtodo de enfermedades esperadas tambin el espectro en la y el estimado aplicacin de rutina del mtodo.La calidad del errorsistemtico del experimento rango depender msdel amplio de los resultados de resultados deltestquedel nmero del test.ICALIDAD Y NO CANTTDAD).

cobas'
Lilc eeds aN.

EXPERIMENTO COMPARACINDE MTODOS @

U1

2.- Medicionessmples?o duplicadas?

*&

paraambos Enla prctica comnsolose analiza deformasimple mtodostanto el nuevocom6.* por duplicado y debera el comparativo, La medicin tene ventajas realizarse cadavezquese' posible, ya que nospermite evidenciar mayor mezcla cantidad de errores de , por ejemplo y otrosproblemas, muestras, errorde transposicin La evidencia de uno o doserrores nos pueden darun mayor alcance en la conclusin delexperimento. 3 .- Periodode tempo paraminimizar Varias corridas analticas diferentes, debenserincluidas en dasdiferentes quepueda algn error sistemtico ocurrir en unasimple corrida. Un mnimo de 5 das es recomendado mslargo, el experimento en un perodo extender en la f), peroes preferible que el estudio medida de lo posible.Desde de replicacin a largoplazo se extendo a 20 podra y solose das, el estudio de comparacin cubrirun periodo similar de tiempo por da. necesitara de 2 a 5 muestras de pacientes 4.- Estabilidad del especimen procesados Losespecimenes o muestras debensergeneralmente dentro de las2 horas de paraambos (nuevo y comparativo). potenciar recoleccin mtodos La estabilidad se puede preservantes, adicionando algunos separando el sueroo plasma de lasclulas, refrigerando y sistematizado previo o congelando. El manejo de muestras necesita serdefinido iniciodel estudio.
EP9-A: Methodcomparison and biasestimation usingnatient samples.National O NCCLS Committee for ClinicalLaboratory Standards, Wayn0,PA, 1995.

crobas'
Life teds awrs

EXPERIMENTO COMPARACINDE MTODOS @

GRAFTCANDO LOS DArOS

* porqueaquhayque inspeccionar .* Estaes la partefundamental del experimento, visualmente los datosy graficarlos resultados de la comparacin. ldealmente los r; paradentificar datosdebenser ingresados conforme seanmedidos, discrepancias que puedan de resultados, complcar el anlisis de losdatos.Si existiera alguna paraconfirmar que discrepancia entrelos mtodos comparados, se debereanalizar estadiferencia es realy no producto de un error. "Differcnce Ftot'n

para Si los dos mtodos estnprevistos mostrar uno a uno los resultados, el grfico Hi que ra inicial debeser "diferencia de trazados", muestra lasdiferencias entrelos resultados th del mtodo nuevo menos el mtodo comparativo sobreel ejeY versuslos l) resultadoS del mtodocomparativo sobreel g) ejeX, tal comolo indicala figurade la derecha.Se observa el trazado de puntos alrededor de la lnea de cero.
I

":".;?ooo8of

o oo

o o0-oo oo ooo

7.*to lime

ComparativeMethod Result
Lik fr@dsaLwers

22

EXPERIMENTO COMPARACINDE MTODOS @

que no estnprevistos Paramtodos paramostrar los resultados de uno a uno,el grfico debeser "comparacin que muestran de trazados" los resultados del mtodonuevosobreel ejeY versuslos resultados del mtodo de comparacin sobreel ejeX, tal como.* lo muestra la figura. Comolos puntos sonacumulados visual * , la mejorlnea debedibujarse sobreestospuntosde 4t que muestre tal manera la mejor 4 y a su vez relacin entrelos mtodos ayudarnos a identificar resultados qi discrepantes. porque & Estegrficoes muy importante nos muestra el rangoanaltico de dtos,f la linealidad de la respuesta encima del ' y rango tambin la relacin de mtodos y la mostrndonos el ngulo de la lnea intercepcin con el ejeY.

,/'
".t?1

ry ,&

'a::rl; ryt

"Comparison Plot"

{} *

#*
CnatpaxaL*v'eMet3,w&P"ffiuht

crobas"
Lfe @dt afrws

MTODO DE VALIDACIN:EnPERIMENTO
COMPAMICION DE MTODOS
CAICUIAN DO ESTADSNCNS APROPIADAS.

.gi 't* t*i

&
?, {l;

y comparacin Mientras losgrficos de diferencia nosmuestran unaimpresin visual de los errores analticos entrelos mtodos comparados, numricos de estos estimados errores pueden que clase serobtenidos conclculos estadsticos. Necesitamos conocer de errorestn presentes y quetan grandes pueden ser. quecubran Si queremos comparar resultados rangoanaltico, un amplio estadsticas de (y-intercepJ, regresin lineal sonpreferibles. Valores comopendiente e interceptor [slope) "r" quees usada para soncalculados. Asimismo el coeficiente comnmente de correlacin valorar si el rango de datoses lo suficientemente anchoparaproveer buenos valores de y intercept, slope en otraspalabras la aceptabilidad del mtodo.Elerrorsistemtico en [ES) unadeterminada concentracin de decisin mdica serdeterminada calculando [Xc)puede el valorYc desde la regresin lineal, lassiguientes frmulas: usando

Y c=a + b X c SE= Yc - Xc

Donde: [a): y-intercept (b): slope Xc: nivel de decisin crtica.

cobas'
awers LiJeneeds

rwroooDEuALrDActu: EnnERTMENTo
COMPAMICION DE METODOS
Ejemplo:

t1 t..; tlt

r;
tt{; t7

paraGLUCOSA, Determinamos un estudio de comparacin luegode realizar la regresin lineal obtuvimos: Y : 3.0+ 1.05X slope: 1 .05

y- interceptor: ...3.0 X: 115 mg/dl Y:?........aplicando la frmula Y- 123mgldl E S : 12 3- 11 5: B mg /dl

crobas"
Life rceds answers

METODODE UALIDACION: EXPERIMENTO COMPAMICION DE METODOS

que cubranun reducido Si queremos comparar resultados rangoanaltico, es que es usualmente mejorcalcular el promedio las los de diferencias entre resultados, lo mismo decirla diferencia entrelos promedios llamado de losdos mtodos, que BIAS.El clculo comnmente del BIAS es viable de programas estadsticos proveen clculos de "paired T-test".[*J Ejemplo: paracalciopor el mtodo El promedio de 50 anlisis nuevo es 9.8mg/dly el promedio por el mtodo de la mismamuestra comparativo es 9.2mg/dl,entonces el promedio del errorsistemtico o BIAS es 0.6mg/dl

crobas'
Lifc needsowert

fJ http://tools.westgard.com/cgi-bin/westgard/comp-calc.cgi?he3er=http:/www.westgard.com/images/headtoolkt.gf

nnrooo DEuALrDActu: ExpERtMENTo

tl !.* 4e

coMPAneun nr wToDos

'x * rx
r4

pARA cRrrERros rA AcEpTABtLtDAD og- urooo

Depende de que cantidad de erroranaltico es permisible sin queafecte o limite el usoo interpretacin del resultado de una prueba individual. Esto es un pococomplicado porque cadamedicin individual es propenso tambin a error [erroraleatorio). Entonces debemos hallarel ErrorTotalfl-E), que estacompuesto (ES) de errorsistemtico y (EA). Estopuedeser calculado erroraleatorio de la siguiente frmula:

TE c al c =E S +E A
TECalc: biasmeas * 3Smeas

Donde:

*-*-+

t-

Smeas: D$replicacinJ

BlASmeas:Diferencia de promedios, diferencias de promedios desde el calculo delt-test, la diferencia entreYc-Xc[regresin lineal) La performance del mtodo es aceptado cuandoel errortotalcalculado es menor OEcalc) queel errortotalpermisible OEa)C).

(*) http://www.westgard.com/biodata baseI .htm

qobas'

Lrle needs awers

PIANTEAMIENTO DE EJERCICIOS 2
EiercicioN' I
l. 2. 3. 4. 5. Realice Ud.el experimento parala prueba de linealidad que eligi. Materiales PoolBajo: ssF y PoolAlto : Muestra con concentracin alta. Nmero de repeticiones 2 grficos Realizar de linealidad. y TEa Calcule el BIAS

.,tt t&

* ffi r;fr re

Eiercicio N'2
1. 2. 3. 4. 5. Realice Ud.el experimento parala prueba de replicacin que eligi. - precisin Materiales Control de nivelbajoy Control de nivelalto. Nmero de repeticiones 5 c/u Realizar clculos de Medias, DEy CV. Calcule la estimacin de la DE"within-run" comparndola conelTea.

c(oDas
Life n@lt aM

l@

2 PLANTMMIENTODE E ERCICIOS
14.

N'3 Eiercicio I Realice Ud.el experimento de para comparacin de mtodos lossiguientes datos. y-intercept, Calcule el slope, r, DEdiff. bias, Realice losgrficos de diferencia y comparacin de trazados

r*

2 3

Gobas'
29 Life rqls qNers

http://tools.westgard.com/cgi-bin/westgard/comp_calc.cgi?headeehttp:/www.westgard.com/images/headtoolkit.gif

.4* rtl

]----.

GRACIAS

c(oDas
Life ntuIs an*ets

lo