“Если любишь – докажи”: объясняем, что такое доказательная медицина

Транспаранты и лозунги “За доказательность!” – это хорошо, но сначала нужно понять предмет дискуссии. Для этого необходимо рассказать о методологии простым языком.

1. Постоянно слышу термин «доказательная медицина». Что это такое?

Это концепция принятия решений в здравоохранении на всех уровнях: и в организации, и у постели больного. В её основе лежит простое правило – в каждой клинической ситуации решение должно приниматься на основании фактов. И этот факт – не из энциклопедии и инстаграма, а результат синтеза данных лучших рандомизированных исследований. Если нет рандомизированных, то из лучших существующих – сравнительных, наблюдательных и так далее (смотрите иерархию, пирамиду “доказательной медицины”).

1. Рандомизированные? Что это значит?

Рандомизированное контролируемое исследование (РКИ) – это золотой стандарт медицинского эксперимента. Почему? В РКИ имеется группа исследования и группа контроля, при этом пациенты случайным образом распределяются по группам. Процесс такого распределения называется рандомизацией.

Рандомизация позволяет избежать ситуации, когда одна группа имеет преимущество перед другой. РКИ позволяет минимизировать предвзятость при распределении пациентов по группам. Поэтому и является золотым стандартом исследования. Наличие правильной рандомизации – один из главных признаков качественного исследования.

1. Получается, бывают некачественные исследования?

Даже рандомизированные исследования бывают разного “сорта”. Например, не все рандомизированные исследования двойные слепые, бывают и тройные слепые, бывают и открытые.

Но даже заявленное в названии заслепление не гарантирует качества. Например, неадекватное двойное ослепление, как и его отсутствие в открытых исследованиях, приводят к изменению результата в “нужную” сторону. Такое изменение результата называется “смещением” (англ. – bias). Смещение – это ошибка, возможно и преднамеренная, которая может повлиять на результат исследования.

Многие считают, что качество исследования определяет количество участников. Нет. Качество исследования определяет количество смещений. Чем больше смещений, тем ниже качество. Это и оценивается в систематическом обзоре.

1. Что такое систематический обзор?

Это формат научной работы, когда анализируются все имеющиеся данные по конкретному клиническому вопросу. Затем, если находятся качественные исследования, происходит их статистический синтез – мета-анализ.

Мета-анализ дает ответ на вопрос – эффективно вмешательство или нет по имеющимся данным. Обычно для этого используются следующие величины – относительный риск и отношение шансов.

1. А я думал(а), что доказательная медицина – это только про статистику и математику.

Нет, это в первую очередь про качество. Исследователю нужно сделать качественную научную работу, чтобы специалист по доказательной медицине мог включить её в систематический обзор. Если качественных исследований больше одного, можно выполнить мета-анализ.

Информация о том, какого именно качества должны быть работы предварительно описывается в клиническом протоколе. Этот протокол регламентирует проведение систематического обзора, от него нельзя отступать. В протоколе прописано всё: как отбирать исследования, как считать результат, какие смещения учитываются, а какие – нет.

1. К смещениям относится только ослепление?

Нет, типов смещений больше. Есть несколько основных показателей качества по Cochrane Handbook:

1. Генерация распределения
2. Сокрытие распределения
3. Ослепление участников и персонала
4. Ослепление тех, кто оценивает конечные точки
5. Неполные данные о результатах
6. Выборочная отчетность о результатах
7. Другие смещения

Генерация распределения – пациенты должны распределиться в группы случайным образом. Для этого должны использоваться адекватные методы, на сегодняшний день это генератор случайных чисел. Хотя подходит и метод подбрасывания монетки, но это – долго и нудно. Особенно для крупных исследований – найдите сумасшедшего, который подбросит монетку 3000 раз.

Сокрытие распределения (“allocation concealment”) – это когда человек, проводящий рандомизацию, не знает, в какую группу распределяется пациент. Скрыть распределение можно даже в открытых исследованиях. Важно, чтобы  “распределитель” не сообщил врачам и пациентам о том, кого к какой группе причислили.

Ослепление участников и персонала – важное условие непредвзятости. Ни пациенты, ни врачи не должны знать, чем одни лечат других. Хотя кто-то думает, что такое должно работать и в обычной практике (ROFL).

Ослепление тех, кто оценивает конечные точки (“Blinding of outcome assessment”). Конечная точка – это параметр, по которому оценивают пользу или вред лекарства/вмешательства. Соответственно, важно ослепить “оценщиков” – вы знаете, автооценщики в государственной и частной структуре по-разному оценят вред, нанесенный автомобилю. Тут тоже самое. Поэтому важно быть хладнокровным и беспристрастно оценивать результат, вслепую, как Фемида (нет, лучше).

Выборочная отчетность о результатах (“selective outcome reporting”). Приведем пример этого понятия. Допустим, для оценки нежелательных явлений антидепрессанта описывалась тошнота, рвота и головная боль, но не оценивалась смертность от всех причин. Смертность – важный параметр безопасности, его отсутствие в публикации может говорить о смещении.

Неполные данные о результатах (“incomplete outcome data”). Это чуть сложнее и также требует примера. Если участники с худшими клиническими исходами с большей вероятностью выбывают из-за побочных эффектов, и это происходит в основном в экспериментальной группе, тогда оценка эффекта будет смещена в пользу экспериментального вмешательства.

Другие смещения включают в себя наличие конфликта интересов, потёртость (да, бывают и такие) и т.д. Выбор оцениваемых смещений лежит на авторской группе исследования. Вышеописанные – основные.

Если в исследовании нет ни одного смещения, его качество считают высоким. Если есть точно хотя бы одно – низким. Неудивительно, что доказательств “высокого качества” мало. Но это лишь означает, что надо нормально делать. Тогда и будет нормально!

1. Понятно. Но неужели количество участников вообще ни на что не влияет?

Влияет. Количество участников позволяет снизить погрешность расчётов при оценке эффекта. Также количество участников позволяет более точно выявить частоту развития нежелательных явлений при применении лекарства/вмешательства.

Идеальная ситуация, когда к качеству приложено количество. Качество + количество = лучший результат. К увеличению количеств участников в исследованиях призывал и Питер Гётше, сооснователь Кокрейн, сообщества, которое разработало современную методику проведения систематических обзоров и сотрудничает с ВОЗ.

Но если смещений много и число пациентов велико – результат может не соответствовать реальности. Смещения могут выявляться на всех уровнях исследования – от организации и до интерпретации результатов. Некачественные исследования могут спонсироваться заинтересованной стороной, и автор исследования в таком случае имеет конфликт интересов. Даже автор систематического обзора.

1. Конфликт интересов?

Это ситуация, когда автор замечен в коммерческих отношениях с компанией или органом, которым нужно получить конкретный результат. Например, доказать эффективность и безопасность своего вмешательства или неэффективность конкурента.

Конфликт интересов тщательно отслеживается в ходе анализа данных при написании систематических обзоров. Хотя есть примеры, когда в систематическом обзоре почти все исследования (34/36)  спонсировались фармацевтической промышленностью. А с другой стороны – как иначе? Добывать средства на независимые исследования очень тяжело, даже в Европе и Америке.

1. Кому тогда доверять? И кто проводит исследования?

Никому. Нужно тщательно проверять качество. Посмотрите ещё раз на пирамиду доказательств – доверие будет относиться к такому параметру, как “мнение”. Самый низ. Только проверка качества и анализ имеющейся информации.

Проводят исследования врачи, главные исследователи должны иметь пятилетний опыт, а медучреждение – соответствующую аккредитацию. Как правило, это представители академической среды – врачи с учеными степенями, работающие на кафедрах. Исполнителей находят компании, занимающиеся организацией клинических исследований. Это могут быть и организации при фармкомпаниях, и независимые от производителей компании, как Worldwide Clinical Trials. Также исследование может быть проведено отдельной группой врачей-исследователей, которые выиграли на это грант. Проведение исследований регламентируется государственным стандартом Р ИСО 14155-2014.

1. Понятно. Но что в итоге? Российская медицина – доказательная? И что, если пациент действительно спрашивает про парацетамол и исследования?

Конечно, если пациент спросит, ответ простой – переложите ответственность, если не знаете. В этом должны разбираться те, кто составляет клинические рекомендации. Вы можете сослаться на них, если не знаете ответа на конкретный вопрос. Вопрос другой, найдётся ли ответ там… Но это совсем другая история и отдельная тема для обсуждения.

Чтобы ответить на вопрос, можно ли считать отечественную медицину доказательной, надо понимать, что здравоохранение – это не производство РКИ. Доказательные данные – результат эксперимента. Как их применять решают авторы клинических рекомендаций. Вы можете найти там и систематические обзоры Кокрейн, и работы других коллективов.

Конечно, не по каждому клиническому вопросу есть РКИ. Но как мы уже говорили, существует иерархия доказательств – она включает в себя уровни доказательности и силу рекомендаций. Чем лучше качество, чем выше сила рекомендации, тем больше уверенности в принимаемом решении.

Клинические рекомендации можно и нужно постоянно улучшать и обновлять. Как именно – решать профессионалам. Этой осенью впервые в российское практике эксперты Кокрейн оценивали российские клинические рекомендации и выделили “проблемные”, по их мнению, пункты.

Резюмируя вышеизложенное.

В общем и целом доказательная медицина – уникальный инструмент для принятия решений. Обычно её противопоставляют гомеопатии и это уже совсем не интересно и не смешно – гомеопатия занимает меньше 1% рынка. Гомеопатия – это просто песчинка хайпа, а народ продолжает его разводить, и разводить, и разводить… (и так 10^19 раз).

Если мы пытаемся бороться доказательствами с гомеопатией, то китайцы решили сделать традиционную медицину… доказательной. Они активно проводят эксперименты с народными методами с прицелом на высокое качество. Стратегия довольно интересная и политически, и экономически обоснованная. Пожелаем успеха исследователям Поднебесной!

Согласитесь, следует использовать доказательную медицину для чего-то действительно важного, а не просто тренироваться в стрельбе из Тополя-М по барбарийским уткам.

Материал подготовил Глеб Краснов

Транспаранты и лозунги “За доказательность!” – это хорошо, но сначала нужно понять предмет дискуссии. Для этого необходимо рассказать о методологии простым языком.

1. Постоянно слышу термин «доказательная медицина». Что это такое?

Это концепция принятия решений в здравоохранении на всех уровнях: и в организации, и у постели больного. В её основе лежит простое правило – в каждой клинической ситуации решение должно приниматься на основании фактов. И этот факт – не из энциклопедии и инстаграма, а результат синтеза данных лучших рандомизированных исследований. Если нет рандомизированных, то из лучших существующих – сравнительных, наблюдательных и так далее (смотрите иерархию, пирамиду “доказательной медицины”).

1. Рандомизированные? Что это значит?

Рандомизированное контролируемое исследование (РКИ) – это золотой стандарт медицинского эксперимента. Почему? В РКИ имеется группа исследования и группа контроля, при этом пациенты случайным образом распределяются по группам. Процесс такого распределения называется рандомизацией.

Рандомизация позволяет избежать ситуации, когда одна группа имеет преимущество перед другой. РКИ позволяет минимизировать предвзятость при распределении пациентов по группам. Поэтому и является золотым стандартом исследования. Наличие правильной рандомизации – один из главных признаков качественного исследования.

1. Получается, бывают некачественные исследования?

Даже рандомизированные исследования бывают разного “сорта”. Например, не все рандомизированные исследования двойные слепые, бывают и тройные слепые, бывают и открытые.

Но даже заявленное в названии заслепление не гарантирует качества. Например, неадекватное двойное ослепление, как и его отсутствие в открытых исследованиях, приводят к изменению результата в “нужную” сторону. Такое изменение результата называется “смещением” (англ. – bias). Смещение – это ошибка, возможно и преднамеренная, которая может повлиять на результат исследования.

Многие считают, что качество исследования определяет количество участников. Нет. Качество исследования определяет количество смещений. Чем больше смещений, тем ниже качество. Это и оценивается в систематическом обзоре.

1. Что такое систематический обзор?

Это формат научной работы, когда анализируются все имеющиеся данные по конкретному клиническому вопросу. Затем, если находятся качественные исследования, происходит их статистический синтез – мета-анализ.

Мета-анализ дает ответ на вопрос – эффективно вмешательство или нет по имеющимся данным. Обычно для этого используются следующие величины – относительный риск и отношение шансов.

1. А я думал(а), что доказательная медицина – это только про статистику и математику.

Нет, это в первую очередь про качество. Исследователю нужно сделать качественную научную работу, чтобы специалист по доказательной медицине мог включить её в систематический обзор. Если качественных исследований больше одного, можно выполнить мета-анализ.

Информация о том, какого именно качества должны быть работы предварительно описывается в клиническом протоколе. Этот протокол регламентирует проведение систематического обзора, от него нельзя отступать. В протоколе прописано всё: как отбирать исследования, как считать результат, какие смещения учитываются, а какие – нет.

1. К смещениям относится только ослепление?

Нет, типов смещений больше. Есть несколько основных показателей качества по Cochrane Handbook:

1. Генерация распределения
2. Сокрытие распределения
3. Ослепление участников и персонала
4. Ослепление тех, кто оценивает конечные точки
5. Неполные данные о результатах
6. Выборочная отчетность о результатах
7. Другие смещения

Генерация распределения – пациенты должны распределиться в группы случайным образом. Для этого должны использоваться адекватные методы, на сегодняшний день это генератор случайных чисел. Хотя подходит и метод подбрасывания монетки, но это – долго и нудно. Особенно для крупных исследований – найдите сумасшедшего, который подбросит монетку 3000 раз.

Сокрытие распределения (“allocation concealment”) – это когда человек, проводящий рандомизацию, не знает, в какую группу распределяется пациент. Скрыть распределение можно даже в открытых исследованиях. Важно, чтобы  “распределитель” не сообщил врачам и пациентам о том, кого к какой группе причислили.

Ослепление участников и персонала – важное условие непредвзятости. Ни пациенты, ни врачи не должны знать, чем одни лечат других. Хотя кто-то думает, что такое должно работать и в обычной практике (ROFL).

Ослепление тех, кто оценивает конечные точки (“Blinding of outcome assessment”). Конечная точка – это параметр, по которому оценивают пользу или вред лекарства/вмешательства. Соответственно, важно ослепить “оценщиков” – вы знаете, автооценщики в государственной и частной структуре по-разному оценят вред, нанесенный автомобилю. Тут тоже самое. Поэтому важно быть хладнокровным и беспристрастно оценивать результат, вслепую, как Фемида (нет, лучше).

Выборочная отчетность о результатах (“selective outcome reporting”). Приведем пример этого понятия. Допустим, для оценки нежелательных явлений антидепрессанта описывалась тошнота, рвота и головная боль, но не оценивалась смертность от всех причин. Смертность – важный параметр безопасности, его отсутствие в публикации может говорить о смещении.

Неполные данные о результатах (“incomplete outcome data”). Это чуть сложнее и также требует примера. Если участники с худшими клиническими исходами с большей вероятностью выбывают из-за побочных эффектов, и это происходит в основном в экспериментальной группе, тогда оценка эффекта будет смещена в пользу экспериментального вмешательства.

Другие смещения включают в себя наличие конфликта интересов, потёртость (да, бывают и такие) и т.д. Выбор оцениваемых смещений лежит на авторской группе исследования. Вышеописанные – основные.

Если в исследовании нет ни одного смещения, его качество считают высоким. Если есть точно хотя бы одно – низким. Неудивительно, что доказательств “высокого качества” мало. Но это лишь означает, что надо нормально делать. Тогда и будет нормально!

1. Понятно. Но неужели количество участников вообще ни на что не влияет?

Влияет. Количество участников позволяет снизить погрешность расчётов при оценке эффекта. Также количество участников позволяет более точно выявить частоту развития нежелательных явлений при применении лекарства/вмешательства.

Идеальная ситуация, когда к качеству приложено количество. Качество + количество = лучший результат. К увеличению количеств участников в исследованиях призывал и Питер Гётше, сооснователь Кокрейн, сообщества, которое разработало современную методику проведения систематических обзоров и сотрудничает с ВОЗ.

Но если смещений много и число пациентов велико – результат может не соответствовать реальности. Смещения могут выявляться на всех уровнях исследования – от организации и до интерпретации результатов. Некачественные исследования могут спонсироваться заинтересованной стороной, и автор исследования в таком случае имеет конфликт интересов. Даже автор систематического обзора.

1. Конфликт интересов?

Это ситуация, когда автор замечен в коммерческих отношениях с компанией или органом, которым нужно получить конкретный результат. Например, доказать эффективность и безопасность своего вмешательства или неэффективность конкурента.

Конфликт интересов тщательно отслеживается в ходе анализа данных при написании систематических обзоров. Хотя есть примеры, когда в систематическом обзоре почти все исследования (34/36)  спонсировались фармацевтической промышленностью. А с другой стороны – как иначе? Добывать средства на независимые исследования очень тяжело, даже в Европе и Америке.

1. Кому тогда доверять? И кто проводит исследования?

Никому. Нужно тщательно проверять качество. Посмотрите ещё раз на пирамиду доказательств – доверие будет относиться к такому параметру, как “мнение”. Самый низ. Только проверка качества и анализ имеющейся информации.

Проводят исследования врачи, главные исследователи должны иметь пятилетний опыт, а медучреждение – соответствующую аккредитацию. Как правило, это представители академической среды – врачи с учеными степенями, работающие на кафедрах. Исполнителей находят компании, занимающиеся организацией клинических исследований. Это могут быть и организации при фармкомпаниях, и независимые от производителей компании, как Worldwide Clinical Trials. Также исследование может быть проведено отдельной группой врачей-исследователей, которые выиграли на это грант. Проведение исследований регламентируется государственным стандартом Р ИСО 14155-2014.

1. Понятно. Но что в итоге? Российская медицина – доказательная? И что, если пациент действительно спрашивает про парацетамол и исследования?

Конечно, если пациент спросит, ответ простой – переложите ответственность, если не знаете. В этом должны разбираться те, кто составляет клинические рекомендации. Вы можете сослаться на них, если не знаете ответа на конкретный вопрос. Вопрос другой, найдётся ли ответ там… Но это совсем другая история и отдельная тема для обсуждения.

Чтобы ответить на вопрос, можно ли считать отечественную медицину доказательной, надо понимать, что здравоохранение – это не производство РКИ. Доказательные данные – результат эксперимента. Как их применять решают авторы клинических рекомендаций. Вы можете найти там и систематические обзоры Кокрейн, и работы других коллективов.

Конечно, не по каждому клиническому вопросу есть РКИ. Но как мы уже говорили, существует иерархия доказательств – она включает в себя уровни доказательности и силу рекомендаций. Чем лучше качество, чем выше сила рекомендации, тем больше уверенности в принимаемом решении.

Клинические рекомендации можно и нужно постоянно улучшать и обновлять. Как именно – решать профессионалам. Этой осенью впервые в российское практике эксперты Кокрейн оценивали российские клинические рекомендации и выделили “проблемные”, по их мнению, пункты.

Резюмируя вышеизложенное.

В общем и целом доказательная медицина – уникальный инструмент для принятия решений. Обычно её противопоставляют гомеопатии и это уже совсем не интересно и не смешно – гомеопатия занимает меньше 1% рынка. Гомеопатия – это просто песчинка хайпа, а народ продолжает его разводить, и разводить, и разводить… (и так 10^19 раз).

Если мы пытаемся бороться доказательствами с гомеопатией, то китайцы решили сделать традиционную медицину… доказательной. Они активно проводят эксперименты с народными методами с прицелом на высокое качество. Стратегия довольно интересная и политически, и экономически обоснованная. Пожелаем успеха исследователям Поднебесной!

Согласитесь, следует использовать доказательную медицину для чего-то действительно важного, а не просто тренироваться в стрельбе из Тополя-М по барбарийским уткам.

Материал подготовил Глеб Краснов