Warsztaty Ocena wiarygodności badania z randomizacją Ocena wiarygodności badania z randomizacją Każda grupa Wspólnie omawia odpowiedź na zadane pytanie Wybiera przedstawiciela, który w imieniu grupy przedstawia odpowiedź Wspólna dyskusja 1
Podstawowe kryteria oceny badania Czy wyniki badania są wiarygodne? Jakie są wyniki badania? Czy wyniki badania będą pomocne w mojej praktyce klinicznej? http://calder.med.miami.edu/portals/ebmfiles/ Ocena wiarygodności badania z randomizacją Czy wyniki badania są wiarygodne? Jakie są wyniki badania? Czy wyniki badania będą pomocne w mojej praktyce klinicznej? 1. Czy badanie odpowiada na precyzyjne i klinicznie sensowne pytanie (PICO)? 2. Czy to było badanie z randomizacją i czy słusznie? 3. Prawidłowość randomizacji? Utajnienie alokacji? 4. Maskowanie? 5. Follow-up >80%? Analiza intention-to-treat? 6. Takie same dodatkowe interwencje? 7. Wyliczenie wielkości próby? 8. Jakie są najważniejsze wyniki? 9. Jaka jest precyzja wyników? 10. Czy uwzględniono wszystkie istotne punkty końcowe? Czy moi pacjenci są podobni do tych w badaniu? Czy korzyści przewyższają działania niepożądane/koszty? http://calder.med.miami.edu/portals/ebmfiles/ 2
1. Did the study adress a clearly-focused question? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles/ 1. Did the study adress a clearly-focused question? Czego szukać? PICO Population Intervention Comparison Outcome Gdzie szukać? Zwykle :Tytuł, streszczenie, ostatni akapit wprowadzenia http://calder.med.miami.edu/portals/ebmfiles/ 3
1. Did the study adress a clearly-focused question? Czego szukać? PICO Population Intervention Comparison Outcome Gdzie szukać? Zwykle :Tytuł, streszczenie, ostatni akapit wprowadzenia Jeżeli nie ma poszukaj innego badania http://calder.med.miami.edu/portals/ebmfiles/ 1. Did the study address a clearly focused question? 4
2. Was the assignment of patients to treatments randomised? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 2. Was the assignment of patients to treatments randomised? 5
Rodzaje i metodyka badań klinicznych Pytanie Leczenie Diagnostyka/etiologia Etiologia/ryzyko Rokowanie Optymalna metodyka Badanie z randomizacją Badanie przekrojowe Badanie kohortowe Badanie kohortowe Guyatt, Rennie. User s guides to the medical literature. 2002 3. Where participants appropriately allocated to intervention and control groups? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles/ 6
3. Where participants appropriately allocated to intervention and control groups? Where do I find the information The Methods should tell you http://calder.med.miami.edu/portals/ebmfiles 3. Where participants appropriately allocated to intervention and control groups? 7
3. Where participants appropriately allocated to intervention and control groups? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles/ 3. Where participants appropriately allocated to intervention and control groups? 8
3. Where participants appropriately allocated to intervention and control groups? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles / 3. Where participants appropriately allocated to intervention and control groups? 9
3. Where participants appropriately allocated to intervention and control groups? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles/ 3. Where participants appropriately allocated to intervention and control groups? Where do I find the information The Results (methods) should have a table Baseline characteristics If the randomisation process worked (that is, achieved comparable groups) the groups should be similar. The more similar the groups, the better it is http://calder.med.miami.edu/portals/ebmfiles/ 10
Baseline characteristics 4. Were the participants, staff and study personnel blind to participants study group? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 11
4. Were the participants, staff and study personnel blind to participants study group? 5. Were all the participants who entered the trial accounted for at its conclusion? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 12
5. Were all the participants who entered the trial accounted for at its conclusion? 5. Were all the participants who entered the trial accounted for at its conclusion? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 13
5. Were all the participants who entered the trial accounted for at its conclusion? 5. Were all the participants who entered the trial accounted for at its conclusion? > 80 %!! 14
5. Were all the participants who entered the trial accounted for at its conclusion? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 6. Were the participants in all groups followed up and data collected in the same way? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 15
6. Were the participants in all groups followed up and data collected in the same way? Where do I find the information? Look for the Methods for the precise protocol followed for each groups (such as folllow-up schedule), permitted additional treatments) and in the Results for further information http://calder.med.miami.edu/portals/ebmfiles 7. Did the study have enough participants to minimise the play of chance? http://calder.med.miami.edu/portals/ebmfiles 16
7. Did the study have enough participants to minimise the play of chance? 8. How are the results presented and what is the main result? Yes Can t tell No http://calder.med.miami.edu/portals/ebmfiles 17
PIERWOTNY PUNKT KOŃCOWY CIĄGŁY. DYCHOTOMICZNY. Miary efektu zmienne dychotomiczne RR RRR ARR NNT CI Relative Risk Relative risk reduction Absolute risk reduction Number needed to treat Confidence interval Ryzyko względne Względne zmniejszenie ryzyka Bezwzględne zmniejszenie ryzyka Liczba pacjentów, których należy poddać leczeniu, aby zapobiec jednemu niekorzystnemu punktowi końcowemu Przedział ufności 18
Ryzyko względne Relative risk (RR) Ryzyko względne RR = Częstość występowania punktu końcowego w grupie eksperymentalnej (EER) Częstość występowania punktu końcowego w grupie kontrolnej (CER) Epizody hipoglikemii 30 25 CER RR 20 15 EER 10 5 0 DEKSTROZA 1 PLACEBO 2 19
Epizody hipoglikemii 30 25 CER RR 20 15 10 5 EER 16/ 118 29/ 119 0 DEKSTROZA 1 PLACEBO 2 Epizody hipoglikemii 30 25 CER RR EER/CER 0.57 20 15 10 5 EER 14 % 24 % 0 DEKSTROZA 1 PLACEBO 2 20
Ryzyko względne Interpretacja RR = 1 RR < 1 RR > 1 Epizody hipoglikemii 30 25 20 15 10 5 EER 14 % CER 24 % RR EER/CER 0.57 RRR 0 DEKSTROZA 1 PLACEBO 2 21
Względne zmniejszenie ryzyka Relative risk reduction (RRR) Względne zmniejszenie ryzyka RRR = 1 RR Określa jaka część ryzyka wystąpienia niekorzystnego punktu końcowego została usunięto w wyniku interwencji Względne zmniejszenie ryzyka Relative risk reduction (RRR) Względne zmniejszenie ryzyka RRR = 1 RR 1 0.57 Określa jaka część ryzyka wystąpienia niekorzystnego punktu końcowego została usunięta w wyniku interwencji 22
Epizody hipoglikemii 30 25 20 15 10 5 EER 14 % CER 24 % RR EER/CER 0.57 RRR 1 - RR 0.43 0 DEKSTROZA 1 PLACEBO 2 Epizody hipoglikemii 30 25 20 15 10 5 EER 14 % CER 24 % RR EER/CER 0.57 RRR 1 - RR 0.43 ARR 0 DEKSTROZA 1 PLACEBO 2 23
Bezwzględne zmniejszenie ryzyka Absolute risk reduction (ARR) Bezwzględne zmniejszenie ryzyka ARR = CER EER Określa bezwzględną część ryzyka, którą usunięto w wyniku interwencji Bezwzględne zmniejszenie ryzyka Absolute risk reduction (ARR) Bezwzględne zmniejszenie ryzyka ARR = CER EER 24% 14% 10% = 0.1 Określa bezwzględną część ryzyka, którą usunięto w wyniku interwencji 24
Epizody hipoglikemii 30 25 20 15 10 5 EER 14 % CER 24 % RR EER/CER 0.57 RRR 1 -RR 0.43 ARR CER - EER 0.1 0 DEKSTROZA 1 PLACEBO 2 Epizody hipoglikemii 30 25 20 15 10 5 EER 14 % CER 24 % RR EER/CER 0.57 RRR 1 -RR 0.43 ARR CER - EER 0.1 NNT 0 DEKSTROZA 1 PLACEBO 2 25
Number needed to treat (NNT) Number neededto treat NNT = 1/AAR Liczba pacjentów, których należy poddać leczeniu, aby zapobiec jednemu niekorzystnemu punktowi końcowemu Number needed to treat (NNT) Number neededto treat NNT = 1/AAR 1/0.1 Liczba pacjentów, których należy poddać leczeniu, aby zapobiec jednemu niekorzystnemu punktowi końcowemu 26
Epizody hipoglikemii 30 25 20 15 10 5 EER 14 % CER 24 % RR EER/CER 0.57 RRR 1 - RR 0.43 ARR CER - EER 0.1 NNT 1/ARR 10 0 DEKSTROZA 1 PLACEBO 2 NNT http://www.nntonline.net/visualrx/ 27
NNT http://www.nntonline.net/visualrx/ Co jest ważniejsze? Relative risk reduction (RRR) or absolute risk reduction (ARR)? 28
RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% 0.57 29
RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% 0.57 0.43 RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% 0.57 0.43 0.1 10 30
RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% 0.57 0.43 0.1 10 0.14% 0.24% RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% 0.57 0.43 0.1 10 0.14% 0.24% 0.57 0.43 31
RRR vs ARR Relative risk reduction vs Absolute risk reduction X Placebo RR RRR ARR NNT 14% 24% 0.57 0.43 0.1 10 0.14% 0.24% 0.57 0.43 0.001 1000 9. How precise are these results? http://calder.med.miami.edu/portals/ebmfiles 32
9. How precise are these results? Confidence intervals (CI) are generally more informative than p-values http://calder.med.miami.edu/portals/ebmfiles Miary efektu Zmienne dychotomiczne RR Relative risk Ryzyko względne 0.01 1 5 33
RR Miary efektu Zmienne dychotomiczne 95% CI Relative risk Ryzyko względne -5 1 5 95% CI 95% CI RR 0.57 0.33; 0.98 NNT 10 5; 107 34
10. Will the results help in carying for my patient? http://calder.med.miami.edu/portals/ebmfiles Nie ma idealnego badania! 35
Jak wykorzystać wiedzę o badaniach z randomizacją? Przy planowaniu własnego badania Do oceny badania przeprowadzonego przez innych Na koniec: 36
Na koniec: 37