Investete n oameni !

FONDUL SOCIAL EUROPEAN

Programul Operaional Sectorial Dezvoltarea Resurselor Umane 2007 2013
Axa prioritar 1 Educaia i formarea profesional n sprijinul creterii economice i dezvoltrii societii bazate pe cunoatere
Domeniul major de intervenie1.2 Programe de studii mai bune pentru studeni i piaa muncii
Titlul proiectului: Tehnologii moderne educationale bazate pe utilizarea instrumentelor TIC in predarea cursului de Obstetrica-Ginecologie
Contract nr. POSDRU/156/1.2/G/140076
Beneficiar: Universitatea de Medicin i Farmacie Carol Davila din Bucureti

Metode de analiza critica a

literaturii de specialitate
Sef de Lucrari Dr. Gabriela Caracostea
Universitatea de Medicina si FarmacieI. Haieganu Cluj-Napoca
4/5 pacienti

1/10 pacienti
De ce este importanta evaluarea critica
a literaturii medicale?

Revizuirea critica a 4235 articole publicate in 30 dintre

cele mai cunoscute reviste medicale (BMJ, JAMA,
NEJM, Lancet) in ceea ce priveste corectitudinea
design-ului de studiu, a colectarii datelor si a
metodelor statistice utilizate (Williamson, 1986)

Doar 20% dintre articole au intrunit criteriile de

validitate!
Doar 25% dintre articolele cu un design de studiu
corect ales au raportat rezultate pozitive!
 Reviste peer review

Evaluarea de catre
persoane/experti
cu competenta cel
putin similara cu a
autorilor pe
domeniul caruia se
adreseaza tema de
cercetare
Learning the skill of critical appraisal is like
learning a foreign language Gossal, 2012

the assessment of evidence by systematically

reviewing its relevance, validity results to
specific situations. Chambers, 1998
 Critical appraisal scepticism sanatos
REPREZINTA O EVALUARE
ECHILIBRATA
-puncte tari dar si limitarile
unui articol
-metodologie de cercetare in
corelatie cu scopul cercetarii si
rezultatele obtinute
-aspecte cantitative dar si
calitative ale articolului
NU REPREZINTA
- discreditarea unui articol de
specialitate
- simpla evaluare a rezultatelor
- evaluarea minutioasa doar a
analizei statistice dintr-un
articol
- responsabilitatea exclusiva a
unui grup de experti
 Critical appraisal must have?

Publicarea unei lucrari stiintifice nu reprezinta

garantia calitatii acesteia
2% din literatura de specialitate este clinic
relevanta
Media ofera surse variate de informare pentru
pacienti
Cunostintele necesare elaborarii corecte a
unei lucrari stiintifice faciliteaza publicarea
 Medicina bazata pe dovezi
transpunerea dovezilor din cercetare in practica
 made doctors realise how unware
they are of the effects of healthcare

1972

1992
 Premiul Lingura de lemn
Se acorda

OBSTETRICII
1979
1989
 evidence-based medicine
litigation phobia
"nervousness-based
medicine
Searle J. Evidence-based obstetrics in Australia: can we put away the wooden spoon?
Med J Aust 2001 Jun 4;174(11):588-9.
Valoarea stiintifica a surselor medicale
"The Radium Water Worked Fine Until His Jaw Came Off
Wall Street Journal

Sarlatanie radioactiva

1918-1928
"A Cure for the Living Dead "Perpetual Sunshine"
Valoarea stiintifica a surselor medicale

Cochrane Collaboration
metaanaliza
Validitate interna,
validitate externa
 Concluzie constructia caselor conform principiilor
feng-shui creste semnificativ cifra de afaceri a
dezvoltatorilor imobiliari ?

Transmiterea informatiei (blinded)

Casele reamenajate feng-shui (counfounding factor)
Casele reamenajate cu 6 luni mai noi (bias)
Alegerea caselor reamenajate (by random/bias)
Marimea lotului (bias)
 Pasul 1

Titlul articolului
Autori
Revista medicala
Bibliografie
 Bibliografie

Citarea surselor bibliografice respecta

formatul standard?
 Lista de autori
NU
Peste 20 de AUTORI pentru un STUDIU CU 30 DE
PACIENTI!!
 Pasul 2
Rezumat
Relevanta pentru motorul de cautare/setting
Rezultatele importante ale articolului
Cercetare in setting similar

Rigurozitate Credibilitate Relevanta

 Pasul 3
Introducere
Identifica conceptul, obiectivul/tema de
cercetare
Subliniaza importanta cercetarii prezentate in
articol

Background ( tratamentul insuficientei

cardiace)
Foreground ( asocierea warfarinei la terapia
standard reduce riscul de trombembolism)
 Pasul 4 - Material si metoda
Loc de desfasurare a studiului
Personal implicat/Infrastructura utilizata
Intrebarea clinica
Design de studiu tema de cercetare
Descrierea grupurilor de studiu
diferentele dintre ele
criterii de includere si excludere
alocarea catre diferitele grupuri de studiu
Variabile masurate
Bias/ confounding factors (masuri de control!)
Definirea riscurilor implicate de studiu
Finantarea studiului/conflict de interese
 Wakefield et al. Ileal-lymphoid-nodular
hyperplasia, non-specific colitis, and pervasive
developmental disorder in children.
Lancet,1998;351:637-41.

Trivaccin la 2 ani boala inflamatorie intestinala

si autism
Metode Intrebarea clinica
Conceptul PICO
 Metode Intrebarea clinica
Conceptul PICO
P Patient or Problem La un pacient cu depresie

I Intervention terapia comportamentala cognitiva

C Comparison comparativ cu administrarea de fluoxetina

O Outcomes este un tratament mai bun pentru ameliorarea

simptomelor depresive?
Metode Intrebarea clinica
Conceptul PICO
Pentru a sumariza, un studiu corect
va
defini clar intrebarea clinica/ipoteza primara
explica motivul pentru care a fost facuta
cercetarea
explica diferentele intre ipoteza studiata fata
de articolele deja publicate pe tema respectiva
specifica daca au fost realizate analize
statistice si pe subgrupuri de pacienti
 Design de studiu
Observationale descriptive patologii rare
Observationale analitic
- studiu de cohorta (etiologie, prognostic)
- studiu caz- martor (durata lunga de expunere
la FR)
Studii experimentale (RCT)
http://www.consort-statement.org (2010)
 Populatia studiata
Un studiu corect va

-Descrie populatia studiata

-Explica metoda de inrolare a

pacientilor in studiu (criterii de
includere/excludere)

-Explica cum a fost stabilita

marimea lotului

-Argumenteaza marimea lotului

(puterea studiului este direct
proportionala cu marimea lotului
Gosall N. The doctors guide to
critical appraisal, 2012
studiat)
 Randomization, Enrollment, and Outcome Data.

Barrett JFR et al. N Engl J Med 2013;369:1295-1305

Bias eroarea in studii
Studiul A utilizatoare
Studiul B neutilizatoare

systematic deviation of the

results of a study from the
truth because of the way it
has been conducted,
analysed or reported
Gosall N. The doctors guide to critical appraisal, 2012
Pentru a sumariza un studiu corect
va
Explica cum au fost minimalizate bias-urile in
procesul de selectare al pacientilor
Explica tehnica de minimalizare a bias-urilor
observationale
Recunoaste greselile sau compromisurile
metodologice facute
Face sugestii privind evitarea unor greseli in
cercetari ulterioare
 Confounding factors - factori de
confuzie in studii

Variabila factor de confuzie trebuie sa fie asociata cu

-Factorul de risc, dar nu este consecinta acestuia

-Rezultatul (asociere independenta de cea cu factorul de risc)
Confounding factors - factori de
confuzie in studii
Confounding factors - factori de
confuzie in studii
Consum de cafea cancer pulmonar
Fumat
(positive confounder)

Dieta bogata in grasimi- Afectare coronariana

Exercitiul fizic
(negative confounder)
Pentru a sumariza un studiu corect
va
Enumera factorii de confuzie si va explica
impactul lor asupra oricarei relatii de
cauzalitate analizate in studiu

Descrie controlul factorilor de confuzie in

design-ul de studiu si in analiza statistica
(criterii de includere-excludere, alegerea
perechii caz-martor, randomizare)
 Studii terapeutice
parametri analizati
Absolute risk reduction (ARR) = Absolute benefit
increase cuantificarea reducerii riscului prin
interventie

Number needed to treat (NNT) nr de pacienti

tratati pentru a obtine 1 pacient vindecat = 1/ARR

Intention-to-treat analysis toti pacientii sunt

inclusi in analiza finala a rezultatelor conform alocarii
initiale, chiar daca au iesit prematur din studiu
 Per protocol analysis vs. Intention-to-treat analysis

Victor M. Montori, and Gordon H. Guyatt CMAJ

2001;165:1339-1341

2001 by Canadian Medical Association

Pentru a sumariza un studiu corect
va
Descrie metoda de randomizare utilizata/
alocare in grup de studiu
Descrie cum a fost monitorizat procesul de
alocare
Descrie tratamentul placebo utilizat
Confirma avizul comisiei de etica privind
utilizarea tratamentului placebo
Descrie monitorizarea procesului dublu-orb
 End-points definirea variabilelor
validitate (corectitudine), reproductibilitate

Gosall N. The doctors guide to critical appraisal, 2012

Pentru a sumariza un studiu corect
va
Defini end-point-urile studiului
Arata legatura intre end-point si intrebarea
clinica
Arata cum au fost masurate variabilele care
ilustreaza end-point-ul studiului
Arata corectitudinea instrumentelor statistice
folosite cu referire la studii anterioare
 Rezultate
Concordanta intre end-point si variabilele analizate (ex. valoarea
diagnostica a unui test Se, Sp, VPP, VPN)

Acuratetea prezentarii datelor statistice (descriptive, corelatii, tabele,

figuri reprezentative)

Semnificatia clinica

Semnificatia statistica a corelatiilor analizate (ex. marimea intervalului

de confidenta)

Identificarea unor variabile/corelatii utile neanalizate de autori

Aplicabilitatea rezultatelor
 Discutii
Motivatia acestui capitol este sustinuta de rezultatele obtinute?

Autorii explica relatia intre rezultatele actuale si asteptari sau

rezultate anterioare?

Studiul actual sustine sau contrazice teoriile anterioare?

Sunt corect descrise punctele tari si slabiciunile studiului?

Autorii explica clar importanta/originalitatea studiului; contributia

acestuia la cunostintele internationale pe tema vizata?
Evaluare diferentiata!
Checklists
 Checklists
Critical Appraisal Skills Programme
www.casp-uk.net

Centre for Evidence Based Medicine

www.cebm.net/index.aspx?o=1157
 Checklists
Care sunt rezultatele studiului? Sunt semnificative?

Rezultatele sunt valide (corect obtinute)? Cum s-a

realizat cercetarea?

Articolul aduce informatii noi?

Cum ma vor ajuta aceste rezultate in practica curenta

(aplicabilitate)?
 Checklists

Voi schimba conduita conform concluziilor

studiului?
 Surse de critical appraisal
Cochrane Library
(systematic review Cochrane Collaboration)
Database of Abstracts of Reviews of Effects
(critical appraisals pentru systematic reviews publicate)
Behind the Headlines
(critical appraisals pentru cercetari diseminate in media)
Critically Appraised Topics
(CATs TRIP Database)
Scrisorile catre editor
(ca raspuns la un articol deja publicat)
 Predatory open-access publishing
Beall's List
Acceptare rapida spre publicare, fara revizia
materialului trimis, fara evaluarea calitatii
articolelor

Taxa mare de publicare

Borduri editoriale false reviste fantoma

Site-uri cu nume foarte asemanatoare cu

cele ale unor jurnale bine cunoscute
Investete n oameni !
FONDUL SOCIAL EUROPEAN
Programul Operaional Sectorial Dezvoltarea Resurselor Umane 2007 2013
Axa prioritar 1 Educaia i formarea profesional n sprijinul creterii economice i
dezvoltrii societii bazate pe cunoatere
Domeniul major de intervenie1.2 Programe de studii mai bune pentru studeni i piaa
muncii
Titlul proiectului: Tehnologii moderne educationale bazate pe utilizarea
instrumentelor TIC in predarea cursului de Obstetrica-Ginecologie
Contract nr. POSDRU/156/1.2/G/140076
Beneficiar: Universitatea de Medicin i Farmacie Carol Davila din Bucureti