Что надо читать и что читать не надо

Что надо читать и что читать не надо Оценка качества медицинских статей и журналов МГМСУ им. А. И. Евдокимова Кафедра внутренних болезней с/ф

500 метров Ежегодно в мире появляется более 2 миллионов медицинских статей в более, чем 20 000 медицинских журналов. Российское отделение Кокрановского Сотрудничества nzorin@inbox. ru

В ЧЕМ СУТЬ ДОКАЗАТЕЛЬНОЙ МЕДИЦИНЫ? В том, что: n существуют достоверные и недостоверные исследования и n их можно отличить друг от друга

Методическое качество статей из 20 ведущих медицинских журналов (B. Haynes. ACP Journal Club, 1993) Журнал N Engl J Med JAMA Ann Intern Med Lancet Arch Intern Med BMJ J Intern Med Diabetes Care Circulation Am J Cardiol Chest Am Rev Respir Dis J Am Coll Cardiol Am J Med Gastroenterology J Clin Epidemiol J Gen Intern Med Neurology Can Med Assoc J Spine ИТОГО Число оригинальных статей за 1992 год 254 303 246 410 262 283 157 232 541 649 780 520 407 298 494 144 71 445 70 271 6837 Число статей, удовлетворяющих критериям ACP Journal Club (%) 43 37 33 30 27 24 17 17 15 15 13 12 11 10 9 7 6 6 5 2 (16, 9) (12, 2) (13, 4) (7, 3) (10, 3) (8, 5) (10, 8) (7, 3) (2, 8) (2, 3) (1, 7) (2, 3) (2, 7) (3, 4) (1, 8) (4, 9) (8, 5) (1, 3) (7, 1) (0, 7) 339 (5, 0)

Что в России с публикациями? Число публикаций высокого качества мало n Лучшие публикации эмигрируют в международные журналы n У врачей нет доступа к лучшим журналам (по финансовым и языковым причинам) n Врачи не знают основ описания результатов испытаний и не понимают их n

КВАЛИМЕТРИЧЕСКАЯ ЧАСТЬ КАРТЫ (21 вопрос) n n n n Отражает ли название статьи, то, что в ней планировалось сделать? Разбита ли статья на разделы? Дано ли удовлетворительное объяснение почему проводилось исследование? Сформулирована ли гипотеза исследования? Сформулированы ли критерии оценки эффекта (или результата)? Адекватен ли дизайн исследования поставленной цели? Описаны ли критерии включения/исключения объектов исследования?

КВАЛИМЕТРИЧЕСКАЯ ЧАСТЬ КАРТЫ (продолжение) n Описан ли метод формирования выборки? n Дана ли характеристика включенных больных? n Есть ли указание на сопоставимость сравниваемых групп? (-должно быть статистически подтверждено). Описано ли, как больных (объекты) распределяли на группы? Было ли распределение больных на группы слепым (для РКИ). Описано ли, сколько больных наблюдалось до конца или выбыло в процессе исследования? n n Описана ли методика исследования объектов

КВАЛИМЕТРИЧЕСКАЯ ЧАСТЬ КАРТЫ (продолжение**) n Учитывались ли возможные источники систематических ошибок при планировании, анализе или обсуждении результатов? n Описаны ли побочные эффекты? (для работ о лечении). Адекватны ли методы статистического анализа? Достаточно ли полно описаны методы статистического анализа? Сформулированы ли выводы (основные положения)? Соответствуют ли формально выводы по результатам исследования заявленной цели (гипотезе)? Основаны ли выводы на полученных результатах? n n n

Вопросы, уточняющие достоверность исследований (жесткие критерии научности исследования) n n n n n Суждения о систематических ошибках Сформулированы ли критерии оценки эффекта (или результата -источник ошибок измерения)? Описаны ли критерии включения/исключения объектов исследования? Описан ли метод формирования выборки? Дана ли характеристика включенных больных? Учитывались ли возможные источники систематических ошибок при планировании, анализе или обсуждении результатов? Суждения о случайных ошибках Достаточно ли полно описаны методы статистического анализа? Адекватны ли методы статистического анализа? Логика исследования Соответствуют ли формально выводы заявленной цели (гипотезе)? Основаны ли выводы на полученных результатах?

О. Ю. Реброва n Нормальное распределение признака – параметрическая статистика n n n n Сравнение двух групп по изучаемому признаку – критерий Стьюдента Корреляционный анализ по Пирсону Сравнение двух зависимых групп (например, до и после лечения) – критерий Стьюдента Ненормальное распределение – непараметрическая статистика n n Статистический анализ медицинских данных. Сравнение двух групп по изучаемому признаку – критерий Mанна-Уитни Корреляционный анализ по Спирману Сравнение двух зависимых групп (например, до и после лечения) – критерий Вилкоксона Сравнение групп по качественному бинарному признаку – критерий Хи 2 (χ2) Многофакторный параметрический дисперсионный анализ Дискриминантный анализ, линейный регрессионный анализ

Согласно публикации А. Ю. Малого с соавт. : в 2007 г. рабочая группа по стоматологии (Cochrane Oral Health Group) провела анализ 20 тыс. публикаций в научно-практических стоматологических журналах за 1995— 2005 гг. Выяснилось, что лишь 21 (0, 1 %) из них отражает результаты рандомизированных контролируемых исследований. Большинство этих исследований касались кариеса зубов. n Доказательных исследований в области ортопедической стоматологии не удалось найти.

n Общество специалистов по доказательной медицине (ОСДМ) n Российское отделение международной научной организации «Кокрановское сотрудничество» ;

Задание студентам к зачету элективный курс «Доказательная медицина в клинической практике» 1. Найти в сети на рекомендованных сайтах, скачать и распечатать статью (Full text) классического образца– отчет о двойном слепом рандомизированном клиническом исследовании в области стоматологии (язык статьи - русский, английский или другой европейский –не имеет значения). Можно также принести метаанализ или систематический обзор. n 2. При распечатке статьи сохранить адрес сайта и дату. Не переводя статью дословно на русский язык, понять в общих чертах ее содержание: какова была гипотеза, какими путями шло исследование, каковы его результаты (латинские корни слов в медицинских текстах позволяют это сделать). По желанию можно пользоваться подстрочным переводом. n 3. Найти в тексте данные статистики, карандашом выделить известные понятия и обозначения и на обороте листа расшифровать их для дальнейшей опоры на них при «защите» статьи. n

рекомендуемые сайты: http: //www. ncbi. nlm. nih. gov/sites/ - pubmed – www. pubmed. com - статьи по всем проблемам медицины. Поиск по ключевым словам на английском языке http: //www. cochrane. org/index_ru. htm кохрановское сотрудничество. Метаанализы и обзоры по всем проблемам медицины, основанные на исследованиях, соответствующих GCP. www. cochranelibrary. com www. trialresultscenter. org www. escardio. org www. clinicaltrials. com

Единые стандарты представления результатов рандомизированных контролируемых испытаний (CONSORT — CONsolidated Standards Of Reporting Trials). n Материалы доступны для ознакомления в Интернете www. consortstatement. org.