Jak hodnotit vědecké důkazy v apiterapii (5)

Než se v rubrice Apiterapie pustíme do konkrétních otázek – co věda říká o mateří kašičce, jedu nebo propolisu – je potřeba vybavit se jedním nástrojem: umět přečíst a zhodnotit důkaz samotný. Tento díl je návod, jak na to.

V předchozích článcích jsme probrali, co apiterapie je, odkud pochází a jak se staví vedle moderní medicíny. V příštím díle se podíváme na to, co konkrétně věda o apiterapii říká. Než se tam ale dostaneme, je užitečné umět rozlišit, které tvrzení stojí na solidním výzkumu a které na jedné laboratorní zkumavce nebo přání autora. Titulek typu „vědci prokázali“ totiž může znamenat cokoliv od rozsáhlé metaanalýzy tisíců pacientů až po pokus na osmi myších. Rozdíl je zásadní – a poznat ho umí i laik, pokud ví, na co se ptát.

Hierarchie důkazů: ne každá studie má stejnou váhu

Ve vědecké medicíně se dlouhodobě používá takzvaná hierarchie důkazů (evidence hierarchy) – žebříček, který řadí typy studií podle toho, jak spolehlivě dokážou prokázat, že nějaká intervence skutečně funguje. Jednu z nejcitovanějších verzí vypracovalo Oxford Centre for Evidence-Based Medicine (CEBM) a dodnes se s drobnými obměnami používá v lékařských fakultách i klinických doporučeních. Novější přístup GRADE, který používá mimo jiné Cochrane, pak hodnotí nejen typ studie, ale i kvalitu jejího provedení.

Mechanismus a teoretické úvahy (nejnižší úroveň)

Na úplném dně hierarchie stojí úvahy založené na mechanismu – tedy tvrzení typu „látka X má v laboratoři antibakteriální účinek, takže by mohla pomáhat i u lidí“. Podle Oxfordského žebříčku jde o nejslabší formu důkazu, protože biologický mechanismus sám o sobě neříká nic o tom, jestli efekt nastane i v živém organismu, v jaké dávce a s jakými vedlejšími účinky.

In vitro studie

In vitro (doslova „ve skle“) studie zkoumají účinek látky na buňkách nebo v laboratorní zkumavce, mimo živý organismus. Jsou užitečné pro první orientaci – například zda propolis v laboratoři zpomaluje růst určitých bakterií – ale nedokážou zohlednit trávení, vstřebávání, metabolismus ani imunitní reakci celého těla. Přenos výsledků z laboratorní misky do klinické praxe je proto krajně nejistý.

Studie na zvířatech

Studie na zvířecích modelech jsou o krok blíž realitě, protože zapojují celý organismus, ale mezidruhové rozdíly zůstávají velkým problémem. Odborná literatura opakovaně upozorňuje, že výsledky slibné na zvířecích modelech se v lidských klinických studiích potvrdí jen v části případů – metabolismus, dávkování i vedlejší účinky se mezi druhy výrazně liší. Zvířecí studie proto slouží hlavně jako odrazový můstek k dalšímu výzkumu, ne jako důkaz účinku u lidí.

Observační studie (kohortové, případ-kontrola, kazuistiky)

Tady už jde o výzkum na lidech, ale bez zásahu do léčby – vědci pouze sledují, co se děje u lidí, kteří danou látku užívají (nebo neužívají) z vlastního rozhodnutí. Kohortové studie sledují skupinu lidí v čase, studie případ-kontrola porovnávají lidi s daným stavem s těmi bez něj a kazuistiky popisují jednotlivé pacienty. Podle Oxfordského žebříčku patří tyto typy studií do středních až nižších pater hierarchie, protože nedokážou spolehlivě oddělit skutečný účinek látky od jiných vlivů (věku, životního stylu, souběžné léčby).

Randomizovaná kontrolovaná studie (RCT)

RCT je považována za zlatý standard klinického výzkumu. Účastníci jsou náhodně rozděleni do skupiny, která dostává testovanou intervenci, a do kontrolní skupiny (často s placebem), ideálně tak, aby ani pacient, ani hodnotící lékař nevěděli, kdo dostal co („dvojité zaslepení“). Randomizace vyrovnává vliv nekontrolovaných faktorů mezi skupinami, takže rozdíl ve výsledcích lze s větší jistotou přičíst testované látce. I zde ale platí, že kvalita jedné konkrétní RCT se může výrazně lišit podle velikosti vzorku, délky sledování a metodické preciznosti.

Systematický přehled a metaanalýza (nejvyšší úroveň)

Na vrcholu hierarchie stojí systematické přehledy, které podle předem daného postupu shromáždí a zhodnotí všechny relevantní dostupné studie k danému tématu, a metaanalýzy, které navíc statisticky sloučí data z více studií do jednoho souhrnného výsledku. Cochrane, jedna z nejuznávanějších organizací v tomto oboru, definuje systematický přehled jako práci, jejímž cílem je minimalizovat zkreslení díky explicitním a reprodukovatelným metodám. Síla metaanalýzy roste s počtem a kvalitou zahrnutých studií – špatná metaanalýza deseti slabých studií pořád zůstává souhrnem slabých studií.

Co znamená kvalitní studie a čím se liší od slabé

Typ studie je jen jedna osa hodnocení. Druhá, stejně důležitá, je to, jak byla daná studie provedena – i randomizovaná studie může být špatná a observační studie naopak pečlivá. Přístup GRADE, který používá i Cochrane, proto kromě typu studie hodnotí i riziko zkreslení (bias), konzistenci výsledků napříč studiemi, přímočarost vztahu k reálné otázce a přesnost odhadu efektu.

Prakticky to znamená ptát se u každé studie:

  • Kolik lidí (nebo zvířat, nebo vzorků) se studie účastnilo? Malý vzorek znamená vysokou nejistotu a náhodné výkyvy se snadno vydávají za skutečný efekt.
  • Měla studie kontrolní skupinu? Bez srovnání nelze odlišit účinek látky od přirozeného průběhu, placebo efektu nebo jiných změn v životě účastníků.
  • Byla randomizovaná a zaslepená? Snižuje to riziko, že výsledek ovlivnilo očekávání pacienta nebo hodnotitele.
  • Jak dlouho studie trvala? Krátkodobé studie nic neříkají o dlouhodobé bezpečnosti ani udržitelnosti účinku.
  • Byla replikována? Jeden ojedinělý výsledek, který se nikomu jinému nepodařilo zopakovat, má menší váhu než konzistentní nález napříč více nezávislými týmy.

Red flags: kdy zbystřit

Některé signály by měly čtenáře vždy přimět k větší opatrnosti při interpretaci výsledků:

  • Velmi malý vzorek – studie na deseti nebo dvaceti účastnících (nebo laboratorních zvířatech) nemůže spolehlivě prokázat účinek, i kdyby výsledek vypadal impozantně.
  • Chybějící kontrolní skupina – bez srovnání nelze vyloučit, že za zlepšení může cokoliv jiného než testovaná látka.
  • Konflikt zájmů – pokud studii financoval nebo prováděl subjekt, který má finanční zájem na pozitivním výsledku, je namístě číst závěry obezřetněji. Renomovaná periodika proto vyžadují zveřejnění zdrojů financování a případných konfliktů zájmů u každé publikace.
  • Publikační bias – studie s pozitivním, „zajímavým“ výsledkem se publikují snadněji než ty, které žádný efekt nenajdou. Analýzy popsané v Catalog of Bias ukazují, že studie se statisticky významným výsledkem mají výrazně vyšší šanci na publikaci, což může celkový obraz literatury systematicky zkreslit směrem k nadhodnocení účinku.
  • Cherry-picking – citování jen těch studií, které podporují požadovaný závěr, a mlčení o těch, které mu odporují. Poznat to lze tak, že se podíváte, zda autor odkazuje na systematický přehled (který má zahrnout vše dostupné), nebo jen na hrstku vybraných prací.
  • Přeceňování mechanismu nebo zvířecích dat – věta „in vitro prokázáno“ nebo „na myších prokázáno“ není totéž jako „prokázáno u lidí“.

Jak číst abstrakt studie na PubMed jako laik

PubMed je volně dostupná databáze biomedicínské literatury provozovaná americkou National Library of Medicine a je dobrým prvním místem, kam se podívat, pokud chcete ověřit konkrétní tvrzení o apiterapii. National Center for Complementary and Integrative Health (NCCIH) doporučuje při hledání informací o doplňkových a přírodních přístupech na PubMedu zadávat konkrétní název látky nebo přístupu spolu s vyšetřovaným stavem a využívat filtry pro typ studie (například randomizované kontrolované studie) přímo v levém panelu vyhledávání.

Abstrakt (souhrn) studie obvykle obsahuje čtyři části, na které se vyplatí zaměřit:

  • Background/Objective – co studie zkoumala a proč. Pomáhá to odhalit, zda jde o studii přímo na lidech, na zvířatech, nebo o laboratorní pokus.
  • Methods – zde hledejte počet účastníků (n=), zda šlo o randomizovanou studii, jak dlouho trvala a co se přesně měřilo.
  • Results – konkrétní čísla, nikoli jen slovní hodnocení. Všímejte si, zda je uveden i statistický interval spolehlivosti nebo p-hodnota, ne jen „statisticky významné zlepšení“.
  • Conclusion – tady bývá největší riziko přehánění. Autoři někdy formulují závěr optimističtěji, než výsledky ve skutečnosti dovolují – proto je dobré závěr porovnat s tím, co skutečně stálo v části Results.

Užitečný je i typ časopisu a údaj o recenzním řízení (peer review) – recenzovaný odborný časopis prochází nezávislým posouzením jinými odborníky před publikací, což samo o sobě není zárukou kvality, ale je to základní filtr, který u blogů, tiskových zpráv nebo výrobcových materiálů chybí.

Jak se hierarchie důkazů promítá do hodnocení apiterapie

Apiterapie má jednu metodologickou specifiku: velká část dostupné literatury o včelích produktech spadá do nižších pater hierarchie – jde o in vitro testy antibakteriálních nebo protizánětlivých vlastností medu, propolisu nebo mateří kašičky, případně o studie na zvířecích modelech. Kvalitních randomizovaných studií na lidech je podstatně méně a systematických přehledů nebo metaanalýz ještě méně. To samo o sobě neznamená, že látky nefungují – znamená to jen, že současný stav důkazů je u řady tvrzení zatím na nižší úrovni jistoty, než by odpovídalo silným zdravotním tvrzením. Konkrétnímu přehledu, co věda k jednotlivým včelím produktům skutečně říká, se budeme věnovat v příštím díle této rubriky.

Co říká věda?

Věda nehodnotí tvrzení podle toho, jak přesvědčivě zní, ale podle toho, jak spolehlivě bylo prokázáno. Metodologie evidence-based medicine (medicíny založené na důkazech), kterou popisuje mimo jiné Oxford Centre for Evidence-Based Medicine a organizace Cochrane, řadí typy studií od nejméně po nejvíce spolehlivé: teoretický mechanismus a in vitro pokusy dole, zvířecí studie a observační studie uprostřed, randomizované kontrolované studie výše a systematické přehledy či metaanalýzy na vrcholu. Jedna studie – ať už s jakkoli působivým výsledkem – zpravidla nestačí k tomu, aby se z ní dalo dělat definitivní zdravotní tvrzení.

Síla důkazů? (vysvětlivka škály rubriky)

V dalších článcích této rubriky budeme u konkrétních zdravotních tvrzení používat čtyřstupňovou škálu, která shrnuje, jak silná je aktuální vědecká opora daného tvrzení:

  • 🟢 Silný důkaz – opřeno o systematické přehledy nebo více kvalitních randomizovaných studií na lidech s konzistentními výsledky.
  • 🔵 Omezený/nadějný důkaz – existuje alespoň jedna kvalitní studie na lidech nebo více menších studií, ale výsledky nejsou zatím jednotné nebo dostatečně replikované.
  • 🟠 Slabý/předběžný důkaz – opřeno převážně o in vitro nebo zvířecí studie, případně jen o observační data nebo kazuistiky u lidí.
  • 🔴 Nedostatečný/chybějící důkaz – tvrzení zatím nemá relevantní vědeckou oporu, nebo dostupné studie jsou natolik slabé (malý vzorek, chybí kontrola, vysoké riziko zkreslení), že z nich nelze vyvozovat závěry.

Tato škála hodnotí sílu důkazu, ne to, zda je daný přístup bezpečný nebo doporučovaný – bezpečnostním aspektům se věnujeme v samostatných článcích rubriky.

Na co si dát pozor

  • Záměna korelace za příčinnost. To, že lidé užívající propolis mají méně nachlazení, ještě neznamená, že to způsobil propolis – mohou za tím stát jiné návyky nebo rozdíly v životním stylu.
  • Zobecňování z laboratoře na člověka. „Prokázáno v laboratoři“ a „prokázáno u lidí“ jsou dvě zcela odlišná tvrzení.
  • Přeceňování jedné studie. I kvalitní RCT může být statistickou anomálií – vědecká jistota roste s replikací a syntézou více studií, ne s jedním výsledkem.
  • Ignorování velikosti efektu. „Statisticky významné“ neznamená totéž co „prakticky významné“ – malý, byť měřitelný rozdíl nemusí mít klinický dopad.
  • Nekritické přebírání závěrů z tiskových zpráv. Popularizační článek nebo marketingový materiál often zjednodušuje nebo vytrhává závěr z kontextu – vždy je dobré dohledat samotný abstrakt.

Praktické shrnutí

Při čtení jakéhokoli tvrzení o apiterapii (nebo o čemkoli jiném ve zdravotnictví) se ptejte: Na jakém typu studie tvrzení stojí – laboratoř, zvíře, člověk? Kolik lidí se výzkumu účastnilo a byla tam kontrolní skupina? Kdo studii financoval? Existuje víc nezávislých studií se stejným výsledkem, nebo jde o ojedinělý nález? A odpovídá závěr studie skutečně tomu, co ukazují její výsledky, nebo je „vylepšený“? Těchto pár otázek vám umožní odlišit solidní vědecký základ od marketingového příběhu – ať už jde o med, propolis, nebo cokoli jiného.

V příštím díle rubriky se na základě přesně těchto kritérií podíváme, co konkrétně současná vědecká literatura o apiterapii říká.

Časté otázky

Znamená nízká úroveň důkazu, že látka nefunguje?
Ne nutně. Znamená to, že zatím nemáme dostatečně silný důkaz, který by účinek spolehlivě potvrdil nebo vyvrátil. Řada látek s dnes prokázaným účinkem měla na počátku výzkumu jen slabé, předběžné důkazy – ty se ale postupně buď potvrdily kvalitnějšími studiemi, nebo naopak nepotvrdily.

Proč je jedna kvalitní studie méně přesvědčivá než metaanalýza?
Protože i dobře provedená jednotlivá studie může zachytit náhodný výkyv nebo se týkat specifické skupiny lidí, jejíž výsledky se nemusí zobecnit. Systematický přehled a metaanalýza slučují data z více nezávislých studií, což snižuje riziko, že závěr je jen shodou okolností.

Jak rychle poznám na PubMedu, jestli jde o kvalitní studii?
Podívejte se do abstraktu na typ studie (randomizovaná? observační? in vitro?), počet účastníků a zda je uvedena kontrolní skupina. U randomizovaných studií si můžete výsledky ověřit i filtrem přímo ve vyhledávání PubMed.

Je studie z uznávaného časopisu automaticky spolehlivá?
Recenzované periodikum je dobré vodítko, ale žádná záruka. I v renomovaných časopisech vycházejí studie s malým vzorkem nebo metodickými slabinami – proto se vždy vyplatí dívat se na konkrétní metodiku dané práce, ne jen na jméno časopisu.

Zdroje

  1. Oxford Centre for Evidence-Based Medicine (CEBM) – OCEBM Levels of Evidence. cebm.ox.ac.uk
  2. CEBM – Levels of Evidence 2011 (tabulka úrovní 1–5). cebm.net
  3. Cochrane – GRADE (metodologie hodnocení jistoty důkazů). cochrane.org
  4. Catalog of Bias – Publication bias. catalogofbias.org
  5. National Center for Complementary and Integrative Health (NCCIH) – How To Find Information About Complementary Health Approaches on PubMed. nccih.nih.gov

Tento článek je součástí seriálu Seriál Apiterapie – přehled a obsah všech dílů.

Pokračujte dalším dílem seriálu: Placebo, očekávání a apiterapie: co říká věda