Том 28 № 1 (2024)
ОБЗОРЫ

Последовательный анализ исследований в анестезиологии и реаниматологии: систематический обзор

М.Я. Ядгаров
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область
Bio
Л.Б. Берикашвили
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область; Государственное бюджетное учреждение здравоохранения Московской области «Московский областной научно-исследовательский клинический институт им. М.Ф. Владимирского», Москва
П.А. Поляков
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область
К.К. Каданцева
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область; Государственное бюджетное учреждение здравоохранения города Москвы «Московский клинический научно-практический центр имени А.С. Логинова Департамента здравоохранения города Москвы», Москва
А.В. Смирнова
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область
И.В. Кузнецов
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область
А.А. Яковлев
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область
В.В. Лихванцев
Федеральное государственное бюджетное научное учреждение «Федеральный научно-клинический центр реаниматологии и реабилитологии», Лыткино, Московская область; Федеральное государственное автономное образовательное учреждение высшего образования Первый Московский государственный медицинский университет имени И.М. Сеченова Министерства здравоохранения Российской Федерации (Сеченовский Университет), Москва
Последовательный анализ исследований: А — зона эффективности; B — зона отсутствия статистической значимости; C — зона истинного отсутствия эффекта (внутренний клин); D — зона «вреда»

Опубликован 10.04.2024

Ключевые слова

  • анестезиология,
  • делирий,
  • летальность,
  • метаанализ,
  • последовательный анализ исследований,
  • седация,
  • систематический обзор
  • ...Показать
    Скрыть

Как цитировать

Ядгаров, М., Берикашвили, Л., Поляков, П., Каданцева, К., Смирнова, А., Кузнецов, И., Яковлев, А., & Лихванцев, В. (2024). Последовательный анализ исследований в анестезиологии и реаниматологии: систематический обзор. Патология кровообращения и кардиохирургия, 28(1), 26–40. https://doi.org/10.21688/1681-3472-2024-1-26-40

Аннотация

Актуальность. Достоверность статистического анализа и его результатов выходит на первый план научного дискурса, оттесняя вопросы статистической значимости. Систематические обзоры и метаанализы характеризуются серьезными статистическими и методологическими ограничениями, среди которых недостаточная статистическая мощность, клиническая и статистическая неоднородность, систематические ошибки, возможное низкое качество включенных исследований, ограниченная доступность данных в исследованиях и публикационное смещение. В этом контексте последовательный анализ исследований — перспективный методологический инструмент, применяемый в качестве дополнения к метаанализам с целью повышения точности и устойчивости научных выводов.
Цель. Продемонстрировать сценарии использования последовательного анализа исследований и его роль в улучшении достоверности научных выводов на примере метаанализов в российских журналах по анестезио­логии-реаниматологии, а также метаанализов авторов.
Методы. Выполнили систематический обзор без подробного описания исследований. Осуществили поиск метаанализов по ключевым словам: метаанализ, летальность, делирий, седация. Два исследователя провели независимую проверку названий и аннотаций отобранных метаанализов, а также извлекли данные. Для всех метаанализов выполнили последовательный анализ исследований с использованием программного обеспечения TSA software (Копенгаген, Дания).
Результаты. Рассмотрели 6 исследований и осуществили 7 последовательных анализов исследований. Шесть из семи оценок подтвердили выводы соответствующих метаанализов. В одном последовательном анализе кумулятивная Z-линия не достигла необходимого размера выборки, что подчеркивает необходимость в дополнительных исследованиях для окончательного подтверждения результата. В двух последовательных анализах размер выборки был недостаточен для формирования окончательных выводов. Последовательный анализ исследований в этих случаях мог бы обеспечить более обоснованные и осторожные выводы.
Заключение. Использование последовательного анализа исследований для повышения достоверности и клинической релевантности научных выводов обосновано.

Поступила в редакцию 3 февраля 2024 г. Исправлена 18 марта 2024 г. Принята к печати 20 марта 2024 г.

Финансирование
Исследование не имело спонсорской поддержки.

Конфликт интересов
Авторы заявляют об отсутствии конфликта интересов.

Вклад авторов
Концепция и дизайн работы: М.Я. Ядгаров
Сбор и анализ данных: М.Я. Ядгаров, Л.Б. Берикашвили, П.А. Поляков
Статистическая обработка данных: М.Я. Ядгаров, П.А. Поляков
Написание статьи: М.Я. Ядгаров, Л.Б. Берикашвили, К.К. Каданцева, А.В. Смирнова, И.В. Кузнецов, А.А. Яковлев
Исправление статьи: В.В. Лихванцев
Утверждение окончательного варианта статьи: все авторы

Библиографические ссылки

  1. Lee Y.H. Strengths and limitations of meta-analysis. Korean J Med. 2019;94(5):391-395. https://doi.org/10.3904/kjm.2019.94.5.391
  2. Greco T., Zangrillo A., Biondi-Zoccai G., Landoni G. Meta-analysis: pitfalls and hints. Heart Lung Vessel. 2013;5(4):219-225. PMID: 24364016; PMCID: PMC3868184.
  3. Murad M.H., Asi N., Alsawas M., Alahdab F. New evidence pyramid. Evid Based Med. 2016;21(4):125-127. PMID: 27339128; PMCID: PMC4975798. https://doi.org/10.1136/ebmed-2016-110401
  4. Pereira T.V., Ioannidis J.P.A. Statistically significant meta-analyses of clinical trials have modest credibility and inflated effects. J Clin Epidemiol. 2011;64(10):1060-1069. PMID: 21454050. https://doi.org/10.1016/j.jclinepi.2010.12.012
  5. Afshari A., Wetterslev J., Smith A.F. Can systematic reviews with sparse data be trusted? Anaesthesia. 2017;72(1):12-16. PMID: 27804113. https://doi.org/10.1111/anae.13730
  6. Turner R.M., Bird S.M., Higgins J.P.T. The impact of study size on meta-analyses: examination of underpowered studies in Cochrane reviews. PLoS One. 2013;8(3):e59202. PMID: 23544056; PMCID: PMC3609745. https://doi.org/10.1371/journal.pone.0059202
  7. Borm G.F., Donders A.R.T. Updating meta-analyses leads to larger type I errors than publication bias. J Clin Epidemiol. 2009;62(8):825-830.e10. PMID: 19136233. https://doi.org/10.1016/j.jclinepi.2008.08.010
  8. Imberger G., Thorlund K., Gluud C., Wetterslev J. False-positive findings in Cochrane meta-analyses with and without application of trial sequential analysis: an empirical review. BMJ Open. 2016;6(8):e011890. PMID: 27519923; PMCID: PMC4985805. https://doi.org/10.1136/BMJOPEN-2016-011890
  9. Wetterslev J., Thorlund K., Brok J., Gluud C. Trial sequential analysis may establish when firm evidence is reached in cumulative meta-analysis. J Clin Epidemiol. 2008;61(1):64-75. PMID: 18083463. https://doi.org/10.1016/j.jclinepi.2007.03.013
  10. Holgersson J., Meyer M.A.S., Dankiewicz J., Lilja G., Ullén S., Hassager C., Cronberg T., Wise M.P., Bělohlávek J., Hovdenes J., Pelosi P., Erlinge D., Schrag C., Smid O., Brunetti I., Rylander C., Young P.J., Saxena M., Åneman A., Cariou A., Callaway C., Eastwood G.M., Haenggi M., Joannidis M., Keeble T.R., Kirkegaard H., Leithner C., Levin H., Nichol A.D., Morgan M.P.G., Nordberg P., Oddo M., Storm C., Taccone F.S., Thomas M., Bro-Jeppesen J., Horn J., Kjaergaard J., Kuiper M., Pellis T., Stammet P., Jaeger Wanscher M., Friberg H., Nielsen N., Jakobsen J.C. Hypothermic versus normothermic temperature control after cardiac arrest. NEJM Evid. 2022;1(11):EVIDoa2200137. PMID: 38319850. https://doi.org/10.1056/evidoa2200137
  11. Groenen H., Jalalzadeh H., Buis D.R., Dreissen Y.E.M., Goosen J.H.M., Griekspoor M., Harmsen W.J., IJpma F.F.A., van der Laan M.J., Schaad R.R., Segers P., van der Zwet W.C., de Jonge S.W., Orsini R.G., Eskes A.M., Wolfhagen N., BoermeesterM.A. Incisional negative pressure wound therapy for the prevention of surgical site infection: an up-to-date meta-analysis and trial sequential analysis. EClinicalMedicine. 2023;62:102105. PMID: 37538540; PMCID: PMC10393772. https://doi.org/10.1016/J.ECLINM.2023.102105
  12. de Oliveira Ascef B., Almeida M.O., de Medeiros-Ribeiro A.C., Oliveira de Andrade D.C., de Oliveira Junior H.A., de Soárez P.C. Therapeutic equivalence of biosimilar and reference biologic drugs in rheumatoid arthritis: a systematic review and meta-analysis. JAMA Netw Open. 2023;6(5):e2315872. PMID: 37234004; PMCID: PMC10220520. https://doi.org/10.1001/jamanetworkopen.2023.15872
  13. Kitano T., Nabeshima Y., Kataoka M., Takeuchi M. Trial sequential analysis of efficacy and safety of direct oral anticoagulants and vitamin K antagonists against left ventricular thrombus. Sci Rep. 2023;13(1):13203. PMID: 37580355; PMCID: PMC10425444. https://doi.org/10.1038/s41598-023-40389-x
  14. Sharif S., Greer A., Skorupski C., Hao Q., Johnstone J., Dionne J.C., Lau V., Manzanares W., Eltorki M., Duan E., Lauzier F., Marshall J.C., Heels-Ansdell D., Thabane L., Cook D.J., Rochwerg B. Probiotics in critical illness: a systematic review and meta-analysis of randomized controlled trials. Crit Care Med. 2022;50(8):1175-1186. PMID: 35608319. https://doi.org/10.1097/CCM.0000000000005580
  15. Павлов Ч.С., Варганова Д.Л., Семенистая М.Ч., Кузнецова Е.А., Усанова А.А., Свистунов А.А. Урсодезоксихолевая кислота: эффективность и безопасность в лечении неалкогольной жировой болезни печени (метаанализ). Вестник Российской академии медицинских наук. 2018;73(5):294-305. https://doi.org/10.15690/vramn975 Pavlov С.S., Varganova D.L., Semenistaia M.C., Kuznetsova E.A., Usanova A.A., Svistunov A.A. Ursodeoxycholic acid: efficacy and safety in the treatment of nonalcoholic fatty liver disease (meta-analysis). Annals of the Russian Academy of Medical Sciences. 2018;73(5):294-305. (In Russ.) https://doi.org/10.15690/vramn975
  16. Павлов Ч.С., Варганова Д.Л., Касаца Д., Тсочатис И., Николова Д., Глуд К. Глюкокортикостероиды в лечении алкогольного гепатита (Кокрейновский метаанализ). Терапевтический архив. 2019;91(8):52-66. https://doi.org/10.26442/00403660.2019.08.000354 Pavlov C.S., Varganova D.L., Casazza G., Tsochatzis E., Nikolova D., Gluud C. Glucocorticosteroids for people with alcoholic hepatitis (Cochrane review). Therapeutic Archive. 2019;91(8):52-66. (In Russ.) https://doi.org/10.26442/00403660.2019.08.000354
  17. Ciolino J.D., Kaizer A.M., Bonner L.B. Guidance on interim analysis methods in clinical trials. J Clin Transl Sci. 2023;7(1):e124. PMID: 37313374; PMCID: PMC10260346. https://doi.org/10.1017/cts.2023.552
  18. Schüler S., Kieser M., Rauch G. Choice of futility boundaries for group sequential designs with two endpoints. BMC Med Res Methodol. 2017;17(1):119. PMID: 28789615; PMCID: PMC5549398. https://doi.org/10.1186/s12874-017-0387-4
  19. Asakura K., Hamasaki T., Evans S.R. Interim evaluation of efficacy or futility in group-sequential trials with multiple co-primary endpoints. Biom J. 2017;59(4):703-731. PMID: 27757980; PMCID: PMC6222168. https://doi.org/10.1002/bimj.201600026
  20. Wetterslev J., Jakobsen J.C., Gluud C. Trial Sequential Analysis in systematic reviews with meta-analysis. BMC Med Res Methodol. 2017;17(1):39. PMID: 28264661; PMCID: PMC5397700. https://doi.org/10.1186/s12874-017-0315-7
  21. Wald A. Contributions to the theory of statistical estimation and testing hypotheses. Ann Math Stat. 1939;10(4):299-326. https://doi.org/10.1214/aoms/1177732144
  22. McPherson C.K., Armitage P. Repeated significance tests on accumulating data when the null hypothesis is not true. J R Stat Soc Ser A Stat Soc. 1971;134(1):15-25. https://doi.org/10.2307/2343971
  23. Kang H. Trial sequential analysis: novel approach for meta-analysis. Anesth Pain Med. 2021;16(2):138-150. PMID: 33940767; PMCID: PMC8107247. https://doi.org/10.17085/apm.21038
  24. De Cassai A., Tassone M., Geraldini F., Sergi M., Sella N., Boscolo A., Munari M. Explanation of trial sequential analysis: using a post-hoc analysis of meta-analyses published in Korean Journal of Anesthesiology. Korean J Anesthesiol. 2021;74(5):383-393. PMID: 34283909; PMCID: PMC8497914. https://doi.org/10.4097/KJA.21218
  25. Лихванцев В.В., Ядгаров М.Я., Берикашвили Л.Б., Каданцева К.К., Кузовлев А.Н. Определение объема выборки. Анестезиология и реаниматология. 2020;(6):77-87. https://doi.org/10.17116/anaesthesiology202006177 Likhvantsev V.V., Yadgarov M.Ya., Berikashvili L.B., Kadantseva K.K., Kuzovlev A.N. Sample size estimation. Russian Journal of Anesthesiology and Reanimatology. 2020;(6):77‑86. (In Russ.) https://doi.org/10.17116/anaesthesiology202006177
  26. Shah A., Smith A.F. Trial sequential analysis: adding a new dimension to meta-analysis. Anaesthesia. 2020;75(1):15-20. PMID: 31106849. https://doi.org/10.1111/anae.14705
  27. Noble W.S. How does multiple testing correction work? Nat Biotechnol. 2009;27(12):1135-1137. PMID: 20010596; PMCID: PMC2907892. https://doi.org/10.1038/nbt1209-1135
  28. Bender R., Bunce C., Clarke M., Gates S., Lange S., Pace N.L., Thorlund K. Attention should be given to multiplicity issues in systematic reviews. J Clin Epidemiol. 2008;61(9):857-865. PMID: 18687287. https://doi.org/10.1016/j.jclinepi.2008.03.004
  29. O’Brien P.C., Fleming T.R. A multiple testing procedure for clinical trials. Biometrics. 1979;35(3):549-556. https://doi.org/10.2307/2530245
  30. Hu M., Cappelleri J.C., Lan K.K.G. Applying the law of iterated logarithm to control type I error in cumulative meta-analysis of binary outcomes. Clin Trials. 2007;4(4):329-340. PMID: 17848494. https://doi.org/10.1177/1740774507081219
  31. Kim K., DeMets D.L. Confidence intervals following group sequential tests in clinical trials. Biometrics. 1987;43(4):857-864. https://doi.org/10.2307/2531539
  32. Higgins J.P.T., Thompson S.G., Spiegelhalter D.J. A re-evaluation of random-effects meta-analysis. J R Stat Soc Ser A Stat Soc. 2009;172(1):137-159. PMID: 19381330; PMCID: PMC2667312. https://doi.org/10.1111/j.1467-985X.2008.00552.x
  33. IntHout J., Ioannidis J.P.A., Borm G.F. The Hartung-Knapp-Sidik-Jonkman method for random effects meta-analysis is straightforward and considerably outperforms the standard DerSimonian-Laird method. BMC Med Res Methodol. 2014;14:25. PMID: 24548571; PMCID: PMC4015721. https://doi.org/10.1186/1471-2288-14-25
  34. Kontopantelis E., Springate D.A., Reeves D. A re-analysis of the Cochrane library data: the dangers of unobserved heterogeneity in meta-analyses. PLoS One. 2013;8(7):e69930. PMID: 23922860; PMCID: PMC3724681. https://doi.org/10.1371/journal.pone.0069930
  35. Claire R., Gluud C., Berlin I., Coleman T., Leonardi-Bee J. Using Trial Sequential Analysis for estimating the sample sizes of further trials: example using smoking cessation intervention. BMC Med Res Methodol. 2020;20(1):284. PMID: 33256626; PMCID: PMC7702700. https://doi.org/10.1186/s12874-020-01169-7
  36. Likhvantsev V., Landoni G., Ermokhina N., Yadgarov M., Berikashvili L., Kadantseva K., Grebenchikov O., Okhinko L., Kuzovlev A. Halogenated anesthetics vs intravenous hypnotics for short and long term sedation in the intensive care unit: A meta-analysis. Med Intensiva (Engl Ed). 2023;47(5):267-279. PMID: 36344342. https://doi.org/10.1016/j.medine.2022.03.006
  37. Лихванцев В.В., Ядгаров М.Я., Di Piazza M., Каданцева К.К. Ингаляционная vs тотальная внутривенная анестезия: где маятник сейчас? (мета-анализ и обзор). Общая реаниматология. 2020;16(6):91-104. https://doi.org/10.15360/1813-9779-2020-6-91-104 Likhvantsev V., Yadgarov M., Di Piazza M., Kadantseva K. Inhalation vs total intravenous anesthesia in cancer surgery: where is the «pendulum» now? (meta-analysis and review). General Reanimatology. 2020;16(6):91-104. (In Russ.) https://doi.org/10.15360/1813-9779-2020-6-91-104
  38. Лихванцев В.В., Ландони Д., Субботин В.В., Каданцева К.К., Жукова Л.А., Ядгаров М.Я., Белетти А., Новиков А.А., Берикашвили Л.Б., Кузовлев А.Н. Влияние выбора метода анестезии на иммунный ответ пациенток, перенесших радикальную операцию по поводу рака молочной железы (мета-анализ сравнительных клинических исследований). Общая реаниматология. 2022;18(4):20-28. https://doi.org/10.15360/1813-9779-2022-4-20-28 Likhvantsev V.V., Landoni G., Subbotin V.V., Kadantseva K.K., Zhukova L.A., Yadgarov M.Ya., Beletti A., Novikov A.A., Berikashvili L.B., Kuzovlev A.N. Impact of anesthesia method on immune response in patients undergoing radical surgery for breast cancer (a meta-analysis of comparative clinical studies). General Reanimatology. 2022;18(4):20-28. (In Russ.) https://doi.org/10.15360/1813-9779-2022-4-20-28
  39. Лахин Р.Е., Шаповалов П.А., Щеголев А.В., Стукалов А.В., Цветков В.Г., Уваров Д.Н. Эффективность использования erector spinae plane блокады при кардиохирургических операциях: систематический обзор и метаанализ. Анестезиология и реаниматология. 2022;(6):29-43. https://doi.org/10.17116/anaesthesiology202206129 Lakhin R.E., Shapovalov P.A., Shchegolev A.V., Stukalov A.V., Tsvetkov V.G., Uvarov D.N. Effectiveness of erector spinae plane blockade in cardiac surgery: a systematic review and meta-analysis. Russian Journal of Anesthesiology and Reanimatology. 2022;(6):29‑43. https://doi.org/10.17116/anaesthesiology202206129
  40. Likhvantsev V.V., Landoni G., Berikashvili L.B., Ermokhina N.V., Yadgarov M.Ya., Kotani Yu., Kadantseva K.K., Makarevich D.M., Grechko A.V. The effects of early postoperative neurocognitive disorders on clinically relevant outcomes: a meta-analysis. Korean J Anesthesiol. 2023;76(5):490-500. PMID: 37232073; PMCID: PMC10562076. https://doi.org/10.4097/kja.23126
  41. Смирнова С.В., Сальникова Л.Е. Риск развития пневмонии и полиморфизм генов TLR2 и TLR4: мета-анализ. Общая реаниматология. 2015;11(6):6-18. https://doi.org/10.15360/1813-9779-2015-6-6-18 Smirnova S.V., Salnikova L.E. Risk for pneumonia and TLR2 and TLR4 gene polymorphisms: a meta-analysis. General Reanimatology. 2015;11(6):6-18. (In Russ.) https://doi.org/10.15360/1813-9779-2015-6-6-18
  42. Сивков А.О., Шень Н.П., Лейдерман И.Н., Сивков О.Г. Шкала mNUTRIC как предиктор летального исхода у критически больных пациентов с COVID-19: систематический обзор и метаанализ. Вестник анестезиологии и реаниматологии. 2023;20(4):54-60. https://doi.org/10.24884/2078-5658-2022-20-4-54-60 Sivkov A.O., Shen N.P., Leyderman I.N., Sivkov O.G. mNUTRIC score as a predictor of the lethal outcome in critically ill patients with COVID-19: systematic review and meta-analysis. Vestnik anesteziologii i reanimatologii = Messenger of Anesthesiology and Resuscitation. 2023;20(4):54-60. (In Russ.) https://doi.org/10.24884/2078-5658-2022-20-4-54-60
  43. Махарин О.А., Женило В.М. Влияние полиморфизма μ-опиоидного рецептора OPRM1 A118G на потребность в наркотических анальгетиках в ранний послеоперационный период (метаанализ). Вестник интенсивной терапии имени А.И. Салтанова. 2017;(3):48-52. https://doi.org/10.21320/1818-474x-2017-3-48-52 Makharin O.A., Genilo V.M. The influence of polymorphism of the μ-opioid receptor OPRM1 A118G on the doses of narcotic analgesics in the early postoperative period (meta-analysis). Annals of Critical Care. 2017;(3):48-52. (In Russ.) https://doi.org/10.21320/1818-474X-2017-3-48-52
  44. Лахин Р.Е., Шаповалов П.А., Щеголев А.В., Козлов К.В., Жданов А.Д. Эффективность использования кислородно-гелиевой смеси в интенсивной терапии пневмоний у взрослых пациентов: систематический обзор и метаанализ. Вестник интенсивной терапии имени А.И. Салтанова. 2022;(2):52-69. https://doi.org/10.21320/1818-474X-2022-2-52-69 Lakhin R.E., Shapovalov P.А., Shchegolev A.V., Kozlov K.V., Zhdanov A.D. Efficacy of using helium-oxygen mixture in the intensive care of pneumonia in adult patients: a systematic review and meta-analysis. Annals of Critical Care. 2022;(2):52-69. (In Russ.) https://doi.org/10.21320/1818-474X-2022-2-52-69
  45. Imberger G., Gluud C., Boylan J., Wetterslev J. Systematic reviews of anesthesiologic interventions reported as statistically significant: problems with power, precision, and type 1 error protection. Anesth Analg. 2015;121(6):1611-1622. PMID: 26579662. https://doi.org/10.1213/ANE.0000000000000892
  46. Doleman B., Williams J.P., Lund J. Why most published meta-analysis findings are false. Tech Coloproctol. 2019;23(9):925-928. PMID: 31240417. https://doi.org/10.1007/s10151-019-02020-y
  47. Riberholt C.G., Olsen M.H., Milan J.B., Gluud C. Major mistakes and errors in the use of Trial Sequential Analysis in systematic reviews or meta-analyses — protocol for a systematic review. Syst Rev. 2022;11(1):114. PMID: 35659769; PMCID: PMC9166392. https://doi.org/10.1186/s13643-022-01987-4