Článek
Postřehy z ISPOR 2024: Hledání zlepšení v nástrojích používaných při hodnocení systematického přezkumu
Tento výzkum zkoumá metody hodnocení kvality ekonomických hodnocení zahrnutých do systematických přehledů. Autor, který čerpal z osobních zkušeností a zázemí v ekonomice zdravotnictví, zjistil minimální změny v používání kontrolních seznamů od přezkumu z roku 2019. Zdůrazňuje záměnu mezi kvalitou vykazování a metodickou kvalitou a vyzývá k lepšímu školení a jednotnému nástroji pro hodnocení kvality v systematických přehledech.
5 otázek s Fionou Stewart
Na konferenci ISPOR 2024 prezentovali členové týmu Cencora výzkumné postery na různá témata z oblasti ekonomiky zdravotnictví a výzkumu výsledků. Využili jsme příležitosti a popovídali si s nimi o jejich práci a jejím potenciálním dopadu. Zde Fi Stewart, asistentka ředitele pro generování důkazů a hodnotovou komunikaci společnosti Cencora, odpovídá na otázky týkající se plakátu "Metodologické kontrolní seznamy kvality v systematických přehledech literatury o ekonomických hodnoceních zdraví, 2022–2024". Jako spoluautorky se podílely Nicole Fusco, Evelyn Gomez-Espinosa, Nicole Szydlowski a Maria Koufopoulou.
Co bylo inspirací pro tento výzkum?
Tento výzkum byl částečně inspirován mou osobní zkušeností systematického recenzenta po mnoho let. Jsem obeznámen s metodami používanými ve standardních systematických přehledech a právě jsem začal studovat magisterský titul v oboru ekonomie zdravotnictví. Když jsem tedy zkoumal systematické přehledy v oblasti ekonomiky zdravotnictví a přehledy ekonomických hodnocení, uvědomil jsem si, že metodiky nejsou tak jasně definovány.
V této souvislosti ekonomické hodnocení zkoumá nákladovou efektivitu nového léku ve srovnání se standardní péčí. Systematický přehled ekonomických hodnocení analyzuje různá hodnocení, která posuzují stejnou problematiku. Posouzení kvality studií zahrnutých do systematických přehledů je zásadní pro interpretaci celkových zjištění. Tento proces zahrnuje nejen analýzu dat z různých ekonomických hodnocení, ale také posouzení kvality metod použitých v každém jednotlivém ekonomickém hodnocení zahrnutém do přehledu. Tato pečlivá interpretace zjištění je jedním ze zásadních kroků, díky nimž je systematický přehled tak cenný.
V rámci systematických přehledů ekonomických hodnocení jsem zkoumal současnou praxi ve srovnání se zavedenými standardy. Věděl jsem o studii provedené před několika lety, která se zabývala podobnou otázkou, a chtěl jsem zjistit, zda od té doby došlo v této oblasti ke změnám, zlepšení nebo poklesu.
V této souvislosti ekonomické hodnocení zkoumá nákladovou efektivitu nového léku ve srovnání se standardní péčí. Systematický přehled ekonomických hodnocení analyzuje různá hodnocení, která posuzují stejnou problematiku. Posouzení kvality studií zahrnutých do systematických přehledů je zásadní pro interpretaci celkových zjištění. Tento proces zahrnuje nejen analýzu dat z různých ekonomických hodnocení, ale také posouzení kvality metod použitých v každém jednotlivém ekonomickém hodnocení zahrnutém do přehledu. Tato pečlivá interpretace zjištění je jedním ze zásadních kroků, díky nimž je systematický přehled tak cenný.
V rámci systematických přehledů ekonomických hodnocení jsem zkoumal současnou praxi ve srovnání se zavedenými standardy. Věděl jsem o studii provedené před několika lety, která se zabývala podobnou otázkou, a chtěl jsem zjistit, zda od té doby došlo v této oblasti ke změnám, zlepšení nebo poklesu.
Byla nějaká hypotéza, která se výzkumem potvrdila?
Aktualizoval jsem předchozí práci publikovanou v roce 2019, která ukázala, že metody hodnocení kvality používané v systematických přehledech ekonomických hodnocení nejsou dostatečně konzistentní. Pro svůj výzkum jsem identifikoval systematické přehledy ekonomických hodnocení prohledáváním Medline a Embase, což jsou standardní bibliografické databáze, do kterých systematičtí recenzenti obvykle nahlížejí jako první kvůli jejich rozsáhlému rozsahu lékařské literatury.
Neměl jsem žádnou konkrétní hypotézu; Mou hlavní otázkou spíše bylo, zda se změnila zjištění přezkumu zveřejněného v roce 2019. Konkrétně jsem chtěl vědět, zda výzkumníci začali vhodněji používat kontrolní seznamy. Můj prvotní pocit byl, že se podmínky mohly zlepšit, a snažil jsem se tuto domněnku otestovat. Předpokládal jsem však, že změny budou významnější, než nakonec byly.
Neměl jsem žádnou konkrétní hypotézu; Mou hlavní otázkou spíše bylo, zda se změnila zjištění přezkumu zveřejněného v roce 2019. Konkrétně jsem chtěl vědět, zda výzkumníci začali vhodněji používat kontrolní seznamy. Můj prvotní pocit byl, že se podmínky mohly zlepšit, a snažil jsem se tuto domněnku otestovat. Předpokládal jsem však, že změny budou významnější, než nakonec byly.
Jaké jsou klíčové poznatky z vašeho výzkumu?
V současné době nám chybí standardizované metody pro hodnocení metodologické kvality ekonomických hodnocení, které je odlišuje od ostatních výzkumných metod. Přetrvává zmatek mezi kvalitou vykazování a kvalitou metodiky, což je trend, který se v posledních letech výrazně nezměnil.
Kontrolní seznamy se používají k posouzení kvality i metodické kvality vykazování. Kvalita vykazování se týká toho, jak dobře jsou popsány metody studie. Naproti tomu metodologická kvalita se zaměřuje na to, jak dobře byla studie navržena a provedena a zda dosahuje zamýšleného účelu. Tato diskuse o metodologické kvalitě je nezbytná pro zařazení do systematického přehledu.
Při posuzování nákladové efektivity nebo jiných typů ekonomických hodnocení je k dispozici řada kontrolních seznamů, ale není jasné, které z nich použít. Domnívám se, že poskytování školení o výzkumných metodách pro systematické přehledy by bylo velmi přínosné pro nasměrování výzkumných pracovníků k vhodným kontrolním seznamům pro jejich hodnocení.
Kontrolní seznamy se používají k posouzení kvality i metodické kvality vykazování. Kvalita vykazování se týká toho, jak dobře jsou popsány metody studie. Naproti tomu metodologická kvalita se zaměřuje na to, jak dobře byla studie navržena a provedena a zda dosahuje zamýšleného účelu. Tato diskuse o metodologické kvalitě je nezbytná pro zařazení do systematického přehledu.
Při posuzování nákladové efektivity nebo jiných typů ekonomických hodnocení je k dispozici řada kontrolních seznamů, ale není jasné, které z nich použít. Domnívám se, že poskytování školení o výzkumných metodách pro systematické přehledy by bylo velmi přínosné pro nasměrování výzkumných pracovníků k vhodným kontrolním seznamům pro jejich hodnocení.
Bylo ve výzkumu něco, co vás překvapilo, co jste nečekali?
Překvapilo mě, že kontrolní seznam reportingu byl používán mnohem častěji než metodický checklist kvality. Navíc mě překvapila rozmanitost různých používaných kontrolních seznamů. I když existovaly běžné kontrolní seznamy, mnoho dalších verzí sloužilo podobným účelům a já jsem objevil nástroje, se kterými jsem se dříve nesetkal.
Dalším neočekávaným zjištěním bylo, že některé studie používaly jak kontrolní seznam pro podávání zpráv, tak metodologický kontrolní seznam kvality, což je podle mého názoru zbytečné.
Dalším neočekávaným zjištěním bylo, že některé studie používaly jak kontrolní seznam pro podávání zpráv, tak metodologický kontrolní seznam kvality, což je podle mého názoru zbytečné.
Jaké jsou další kroky tohoto výzkumu?
Naším cílem je rozvinout tento výzkum do podoby uceleného článku, protože se zdá, že je to velmi potřebné. Rád bych vydal výzvu k akci pro akademické skupiny, které mají schopnost ovlivňovat a reformovat pokyny pro metodologickou kvalitu systematických recenzentů. Jedním z možných směrů by mohl být vývoj jednotného nástroje pro metodické hodnocení kvality ekonomických hodnocení.
Existují přesvědčivé důkazy, že tyto metody nejsou správně aplikovány. Pokud systematický přehled nebere v úvahu kvalitu studií v rámci tohoto přehledu, můžeme si být méně jisti jeho zjištěními. Musíme více přemýšlet o metodách, které používáme, a zajistit, aby byly robustní a aby výsledky, kterých dosahujeme, byly smysluplné.
Existují přesvědčivé důkazy, že tyto metody nejsou správně aplikovány. Pokud systematický přehled nebere v úvahu kvalitu studií v rámci tohoto přehledu, můžeme si být méně jisti jeho zjištěními. Musíme více přemýšlet o metodách, které používáme, a zajistit, aby byly robustní a aby výsledky, kterých dosahujeme, byly smysluplné.
Cílem tohoto článku je informovat o možnostech společnosti Cencora. Společnost Cencora však důrazně doporučuje čtenářům, aby si prostudovali zde uvedené odkazy a všechny dostupné informace týkající se zmíněných témat a spoléhali se při rozhodování s nimi na vlastní zkušenosti a odborné znalosti, protože článek může obsahovat určitá marketingová prohlášení a nepředstavuje právní poradenství.
Cencora.com poskytuje automatické překlady, které pomáhají při čtení webových stránek v jiných jazycích než v angličtině. U těchto překladů jsme vynaložili značné úsilí k zajištění jejich přesného znění, nicméně žádný automatizovaný překlad není dokonalý ani není určen k tomu, aby nahradil osobu překladatele. Tyto překlady jsou poskytovány jako služba uživatelům stránek Cencora.com a jsou poskytovány „tak, jak jsou“. Není poskytována žádná záruka jakéhokoli druhu, ani výslovná, ani předpokládaná, ohledně přesnosti, spolehlivosti nebo správnosti jakéhokoli z těchto překladů z angličtiny do jiného jazyka. Některý obsah (například obrázky, videa, Flash atd.) nemusí být přesně přeložen kvůli omezeným možnostem překladatelského softwaru.
Jakékoli nesrovnalosti nebo rozdíly vzniklé při překladu tohoto obsahu z angličtiny do jiného jazyka nejsou závazné a nemají žádný právní účinek pro dodržování předpisů, vymáhání nebo jakýkoli jiný účel. Pokud zjistíte nějaké chyby, kontaktujte nás. Pokud budete mít jakékoli dotazy týkající se přesnosti informací obsažených v těchto překladech, podívejte se na anglickou verzi stránky.