В последние годы проблема воспроизводимости научных исследований становится всё более актуальной темой в научном мире. В частности, в биомедицинской области она приобретает критическое значение, ведь от достоверности получаемых данных напрямую зависят качества медицинской помощи и эффективность новых лекарственных средств. Недавно опубликованные результаты масштабного проекта в Бразилии показали, что менее половины проверенных исследований смогли пройти успешную репликацию, что вызвало широкий резонанс и обсуждения среди учёных и общественности. Бразильская инициатива, запущенная в 2019 году под названием Brazilian Reproducibility Initiative, стала уникальным и амбициозным предприятием в мире науки. В отличие от традиционных попыток проверить отдельные исследования, проект решил сосредоточиться на трёх самых распространённых методах, используемых в биомедицинских лабораториях страны.
Это позволило исследовать реальные проблемы, связанные с методологией, а не с конкретной областью исследования или научной значимостью публикаций. Для реализации проекта объединились более 50 лабораторий и свыше 200 ученых из различных регионов Бразилии. Совместная работа продолжалась в непростых условиях пандемии COVID-19, которая создала дополнительные сложности в координации, обеспечении доступа к лабораторному оборудованию и материалов, а также в том, чтобы стандартизировать методы проведения экспериментов среди множества участников. В проекте были отобраны три ключевые методики: анализ клеточного метаболизма, метод амплификации генетического материала и поведенческий тест с использованием лабиринта для грызунов. Эти методы широко применяются в биомедицинских исследованиях по всему миру и считаются базовыми для множества других экспериментов.
Таким образом, выбор именно их позволил максимально объективно оценить общее состояние науки в стране. Были случайным образом выбраны статьи, опубликованные между 1998 и 2017 годами, авторы которых имели бразильскую научную принадлежность. Для каждой статьи было проведено до трёх попыток воспроизведения эксперимента в разных лабораториях, после чего независимый комитет оценивал достоверность и соответствие воспроизведённых результатов оригиналу. Результаты проекта оказались тревожными: воспроизвести удавалось только около трети проведённых экспериментов, причём только 21% опытов соответствовали хотя бы половине установленных критериев воспроизводимости. Это широко согласуется с подобными масштабными исследованиями, проведёнными в других странах, и свидетельствует о наличии системной проблемы внутри мирового научного сообщества.
Кроме того, учёные заметили, что эффект от экспериментальных вмешательств в первичных публикациях зачастую был завышен — в среднем на 60% по сравнению с репликациями. Это говорит о том, что опубликованные результаты могут переоценивать значимость и степень воздействия изучаемых явлений или медикаментов. Причины такой низкой воспроизводимости, по мнению экспертов, многообразны и включают недостаточно прозрачное представление методологии, влияние статистических ошибок, наличие предвзятости публикаций и низкое качество экспериментов. В некоторых случаях протоколы исходных исследований были описаны неполно или содержали неявные детали, которые трудно было воспроизвести, а иногда вовсе отсутствовала мотивация или ресурсы для детального воспроизведения. Эти данные выдвигают на первый план необходимость реформирования научной практики в Бразилии и мире в целом.
Уже сейчас инициаторы проекта обсуждают пути для внедрения новых стандартов, повышения прозрачности исследований, обязательной регистрации протоколов и результатов экспериментов, а также стимулирования открытой науки и сотрудничества между лабораториями. Более того, результаты бразильской инициативы вызвали дискуссии на уровне государственных структур и научных учреждений. Появляется понимание, что государственная политика должна поощрять качественные и прозрачные исследования, а не только количественные показатели, такие как количество публикаций или цитирований. В ряде университетов планируются образовательные программы и тренинги по метаисследовательской грамотности и методологии воспроизводимости. Опыт Бразилии важен и для международного научного сообщества, поскольку демонстрирует реальные масштабы и последствия кризиса воспроизводимости.
Подобные проекты важны не только для оценки качества существующей базы знаний, но и для профилактики ошибок в будущем, что особенно критично в медицине, где от научных данных зависит жизнь и здоровье миллионов людей. В целом, развёрнутая работа бразильских исследователей является выразительным сигналом, что необходимо изменять отношение к научным исследованиям и создавать условия для их истинной проверки и повторения. Только так можно рассчитывать на построение устойчивой и надёжной научной базы, на которой будет опираться современная медицина и биология. Путь к повышению воспроизводимости научных данных требует сотрудничества ученых, институций и государственных органов. Внедрение новых стандартов открытости, ответственности и качества превратит научные исследования из потенциально сомнительных в по-настоящему ценные и эффективные.
Подобная трансформация может стать фундаментом для прогресса в биомедицине и многих других областях, обеспечив лучшие результаты для науки и общества в целом.
![How classic Sierra game graphics worked [video] (2022)](/images/5748E9CD-E2B4-48A1-A5E4-017635BAD011)
