Как читать научную статью про СДВГ и не обмануться
Научную статью читают не подряд, а в порядке «аннотация — методы — таблицы результатов — обсуждение»: чтение сверху вниз почти гарантирует согласие с авторами, потому что введение подводит к их выводу, а обсуждение его закрепляет. Самая важная часть при этом — методы, и именно её пропускают чаще всего.
Разбираем рабочий порядок чтения статьи, что можно понять по аннотации за две минуты, как устроена иерархия доказательности и где её применяют механически, чем связь отличается от причины, какие три числа стоит уметь читать, где искать оригинал бесплатно и какие красные флаги выдают ненадёжный пересказ.
Содержание
- Порядок чтения: не сверху вниз
- Что смотреть в аннотации за две минуты
- Иерархия доказательности без иллюзий
- Разница между связью и причиной
- Числа: что стоит уметь читать
- Где искать оригинал и как его читать бесплатно
- Что читать в разделе методов
- Красные флаги в пересказах
- Зачем это человеку без научного образования
- Коротко: главное
- Частые вопросы
- Источники
Порядок чтения: не сверху вниз
Научную статью не читают подряд. Чтение по порядку — от введения к обсуждению — почти гарантирует, что вы согласитесь с авторами: введение подводит к их выводу, а обсуждение его закрепляет.
Рабочий порядок другой:
- Аннотация — понять, о чём вообще работа и стоит ли идти дальше.
- Методы — узнать, что именно делали. Самая важная часть и самая пропускаемая.
- Результаты, а не их пересказ — таблицы и числа, а не абзацы под ними.
- Обсуждение — только после того, как сложилось собственное впечатление.
- Введение — при необходимости, для контекста.
Причина такого порядка простая: авторы заинтересованы в том, чтобы их результат выглядел значимым. Это не обман, а нормальная человеческая склонность, и учитывать её нужно всем, включая добросовестных исследователей.
Что смотреть в аннотации за две минуты
Аннотация доступна бесплатно почти всегда, и по ней уже понятно многое.
| Что ищем | Что это меняет |
|---|---|
| Тип работы | обзор, метаанализ, РКИ, когорта, случай-контроль, описание случая |
| Число участников | 30 человек и 3000 — разный вес выводов |
| Кто участвовал | дети или взрослые, с диагнозом или из общей популяции |
| Что сравнивали | плацебо, другой метод, лист ожидания, отсутствие сравнения |
| Основной исход | симптомы по шкале, лабораторный показатель, поведение в жизни |
| Результат с интервалом | размер эффекта и доверительный интервал, а не только «значимо» |
Отдельно проверяется, о людях ли речь. Формулировки in vitro, «на модели у грызунов», «на клеточной линии» закрывают вопрос о том, применимо ли это к человеку сегодня.
Иерархия доказательности без иллюзий
Пирамида уровней доказательности известна, но применяют её механически, а это ошибка.
Порядок по убыванию силы: систематический обзор с метаанализом, рандомизированное контролируемое испытание, когортное исследование, исследование случай-контроль, серия случаев, отдельный случай, мнение эксперта.
Главная оговорка: метаанализ плохих работ остаётся плохим. Обобщение не улучшает качество исходных данных — если в обзор вошли двадцать маленьких неслепых исследований, результат унаследует их недостатки. Именно поэтому в приличных обзорах есть раздел об оценке риска систематической ошибки, и его стоит открывать: там прямо написано, насколько авторы доверяют своим источникам.
Вторая оговорка касается наблюдательных исследований. Когорта показывает связь, а не причину. Формулировка «у детей, которые чаще смотрели экраны, больше симптомов невнимательности» не отвечает на вопрос, что чему предшествовало, и не исключает третий фактор, влияющий на оба.
Разница между связью и причиной
Это место, где ошибается большинство пересказов.
Три вещи, которые могут стоять за обнаруженной связью:
Обратное направление. Не экран вызвал невнимательность, а ребёнку с невнимательностью проще даётся экран, чем длинная книга.
Третий фактор. Оба явления связаны с чем-то ещё: уровнем стресса в семье, сном, доходом, наличием диагноза у родителей.
Отбор. Люди, попавшие в исследование, отличаются от остальных. Взрослые, дошедшие до диагностики, — не то же самое, что все взрослые с симптомами.
Признаки того, что авторы работали аккуратно: они называют ограничения прямо, приводят поправки на смешивающие факторы и не переводят связь в рекомендацию. Признак обратного: слово «влияет» в тексте наблюдательного исследования без всяких оговорок.
Числа: что стоит уметь читать
Три величины закрывают большую часть вопросов.
Размер эффекта. Стандартизованная разница (её обозначают SMD, d или g) около 0,2 — малый эффект, 0,5 — средний, 0,8 — большой. Число говорит, насколько разошлись группы, а не насколько это статистически надёжно.
Доверительный интервал. Диапазон, в котором вероятно лежит истинное значение. Узкий интервал — устойчивая оценка; широкий, почти касающийся нуля, — результат, который может исчезнуть в следующем исследовании. Интервал информативнее, чем p-значение.
Абсолютная и относительная разница. «Риск вырос на 50 %» звучит тревожно, но при исходном риске 2 % это рост до 3 %. Если абсолютных чисел в тексте нет, а есть только проценты изменения, это повод насторожиться.
Ещё одна деталь: гетерогенность в метаанализе, обозначаемая I². Значение выше 75 % означает, что исследования расходятся между собой сильно, и усреднённая цифра описывает не общую истину, а среднее по разнородным работам. Такие метаанализы встречаются в темах про добавки и микроэлементы регулярно.
Где искать оригинал и как его читать бесплатно
Пересказ и статья расходятся достаточно часто, чтобы это проверять.
В новости обычно есть фамилия автора, журнал и год. По ним статья находится в PubMed — бесплатной базе Национальной медицинской библиотеки США. Аннотация открыта всегда; часть статей доступна целиком через PubMed Central.
Что делать, если полный текст закрыт: посмотреть, нет ли препринта, поискать статью по названию — авторы часто выкладывают её сами, — написать автору письмо (это нормальная практика, и отвечают чаще, чем кажется).
Что важно про препринты: это работы, не прошедшие рецензирование. Они бывают хорошими, но статус у них другой, и в новостях об этом почти никогда не пишут.
Отдельно — про клинические руководства. Рекомендации вроде NICE или международного консенсуса читаются иначе, чем отдельная статья: у них есть система оценки уровня доказательств, и разногласия внутри поля там уже разобраны. Для практических вопросов они полезнее одной свежей работы.
Разбор того, как эти же правила работают применительно к добавкам, — как читать исследование про добавку, а величина плацебо-компоненты в исследованиях при СДВГ — плацебо и ноцебо.
Что читать в разделе методов
Раздел методов написан скучно намеренно: он должен позволить повторить работу. Читать его целиком не нужно — достаточно пяти вопросов.
Как набирали участников. Объявление в интернете, направление из клиники, школьная выборка — это три разные популяции. Люди, откликнувшиеся на объявление про исследование СДВГ, отличаются от тех, кого привёл врач.
Как ставили диагноз. Клиническое интервью по критериям, скрининговый опросник или самоотчёт — разница принципиальная. Работы, где «СДВГ» установлен по короткой шкале самооценки, описывают не то же самое, что работы с клинической оценкой.
Кого исключили. Список критериев исключения показывает, на кого результат не распространяется. Если исключили всех с тревогой, депрессией и приёмом препаратов, выборка перестаёт быть похожей на реальных пациентов, у которых это встречается сплошь и рядом.
Чем измеряли исход. Шкала, заполненная родителем; шкала, заполненная учителем; компьютерный тест; объективный показатель. Величина эффекта у них будет разной даже в одном и том же исследовании.
Кто не дошёл до конца. Доля выбывших участников и что с ними стало. Если из ста человек выбыли сорок, а анализировали шестьдесят оставшихся, результат описывает тех, кому подошло, — и это совсем другой вывод.
Пятого вопроса обычно хватает, чтобы понять, доверять ли выводам. Если хотя бы на два из пяти в статье нет ясного ответа, это само по себе информация о качестве работы.
Красные флаги в пересказах
Новость о научной работе проходит через несколько рук, и на каждом этапе теряется точность.
«Учёные доказали». Одно исследование ничего не доказывает; оно добавляет свидетельство. Формулировка «доказали» почти всегда означает пересказ, а не статью.
Нет ссылки на источник. Текст, где не названы авторы, журнал и год, проверить нельзя — и обычно это сделано намеренно.
Мыши без упоминания мышей. Заголовок про людей, работа на грызунах. Один из самых частых приёмов.
Числа без базы. «В два раза выше» без исходного значения не значит ничего.
Вывод шире данных. Исследование измерило один показатель у сорока человек, а заголовок сообщает о новом методе лечения.
Комментарий вместо исследования. Иногда новость пересказывает не работу, а мнение специалиста о работе, и эти два жанра в тексте не различены.
Как это выглядит на конкретных примерах — открытое исследование: почему цифры «до и после» мало что доказывают.
Зачем это человеку без научного образования
Не для того, чтобы спорить с врачом. Для трёх практических вещей.
Первая: отличать «есть основания» от «доказано». Это меняет решения о деньгах и времени — курс метода с одной пилотной работой и метод с несколькими независимыми испытаниями стоят разного.
Вторая: понимать, почему врач не назначает то, о чём написали в новостях. Обычно причина не в консерватизме, а в том, что работа была маленькой, неслепой или проведена не на тех людях.
Третья: задавать конкретные вопросы. «Я читал про такой метод, что известно о его эффективности при СДВГ у взрослых» — разговор, а «в интернете пишут, что помогает» — нет.
Как устроен сам диагноз и на чём он основан, разбирает книга серии SDVG.PRO «СДВГ и нейробиология простым языком». Где искать надёжные обзоры и что стоит читать — книги про СДВГ у взрослых и детей.
Коротко: главное
- Порядок чтения: аннотация, методы, таблицы результатов, обсуждение и только потом введение.
- Методы — самая важная часть статьи и самая пропускаемая.
- По аннотации проверяют тип работы, число участников, группу сравнения и основной исход.
- Метаанализ плохих работ остаётся плохим: обобщение не улучшает качество исходных данных.
- Раздел об оценке риска систематической ошибки прямо говорит, насколько авторы доверяют источникам.
- Когортное исследование показывает связь, а не причину: возможны обратное направление и третий фактор.
- Размер эффекта около 0,2 считается малым, 0,5 средним, 0,8 большим.
- Доверительный интервал информативнее p-значения: широкий интервал у нуля означает неустойчивый результат.
- Гетерогенность I² выше 75 % означает, что исследования сильно расходятся между собой.
- «Учёные доказали» почти всегда означает пересказ, а не саму статью.
Частые вопросы
С чего начинать читать научную статью?
С аннотации, чтобы понять, стоит ли идти дальше, а затем сразу с раздела методов. Чтение по порядку — от введения к обсуждению — подводит читателя к выводу авторов раньше, чем он успевает составить собственное впечатление.
Что важнее всего в аннотации?
Наличие группы сравнения. Если её нет, дальше можно почти не читать: измерялась разница «до и после», куда попадают естественные колебания, эффект наблюдения и ожидание. Дальше по важности — число участников, кто участвовал и что было основным исходом.
Метаанализ всегда надёжнее отдельного исследования?
Нет. Обобщение не улучшает качество исходных работ: если в обзор вошли двадцать маленьких неслепых исследований, результат унаследует их недостатки. Поэтому в приличных обзорах есть раздел об оценке риска систематической ошибки — его стоит открывать.
Чем связь отличается от причины?
За обнаруженной связью может стоять обратное направление, третий фактор, влияющий на оба явления, или особенности отбора участников. Наблюдательное исследование не позволяет выбрать между этими объяснениями, и слово «влияет» в его пересказе — признак неаккуратности.
Что такое размер эффекта?
Величина расхождения между группами. Стандартизованная разница около 0,2 считается малой, 0,5 средней, 0,8 большой. Она не связана со статистической значимостью: значимым может быть эффект, которого человек не заметит.
Зачем смотреть доверительный интервал?
Он показывает, в каком диапазоне вероятно лежит истинное значение. Узкий интервал означает устойчивую оценку, широкий и почти касающийся нуля — результат, который может исчезнуть в следующем исследовании. Это информативнее p-значения.
Что означает I² в метаанализе?
Степень расхождения между вошедшими исследованиями. Значение выше 75 % говорит, что работы сильно различаются, и усреднённая цифра описывает среднее по разнородным данным, а не общую закономерность.
Где найти статью бесплатно?
В PubMed — базе Национальной медицинской библиотеки США: аннотации открыты всегда, часть статей доступна целиком через PubMed Central. Если полный текст закрыт, можно поискать препринт, найти выложенную авторами версию или написать автору письмо.
Можно ли доверять препринтам?
Это работы, не прошедшие рецензирование. Они бывают качественными, но статус у них другой, и в новостях об этом почти не пишут. Относиться к препринту стоит как к предварительному сообщению, а не как к установленному факту.
Зачем это человеку без научного образования?
Чтобы отличать «есть основания» от «доказано» при решениях о деньгах и времени, понимать, почему врач не назначает то, о чём написали в новостях, и задавать конкретные вопросы вместо ссылки на интернет.
Источники
- Sterne JAC et al. RoB 2: a revised tool for assessing risk of bias in randomised trials. BMJ, 2019;366:l4898 — RoB 2: инструмент оценки риска систематической ошибки
- Egger M et al. Bias in meta-analysis detected by a simple, graphical test. BMJ, 1997;315(7109):629-34 — воронкообразный график и публикационное смещение
- Ioannidis JP Why most published research findings are false. PLoS Med, 2005;2(8):e124 — почему большинство опубликованных находок не воспроизводится
- Sonuga-Barke EJ et al. Nonpharmacological interventions for ADHD: systematic review and meta-analyses of randomized controlled trials of dietary and psychological treatments. Am J Psychiatry, 2013 — как меняются выводы при слепой оценке результата
- Faraone SV et al. The World Federation of ADHD International Consensus Statement: 208 Evidence-based conclusions about the disorder. Neurosci Biobehav Rev, 2021;128:789-818 — международный консенсус: пример обобщения доказательств
Материал носит справочный характер и не заменяет консультацию врача. Решения о диагностике и лечении принимаются очно и индивидуально.
