В последние годы проблема воспроизводимости научных исследований привлекает все больше внимания как в мировом научном сообществе, так и среди общественности. Недавний масштабный проект, осуществленный в Бразилии, доказал, что значительная часть биомедицинских исследований не может пройти проверку на воспроизводимость. Этот факт ставит под вопрос надежность опубликованных научных результатов и заставляет по-новому взглянуть на систему научных публикаций и исследовательских практик. Бразильская инициатива по воспроизводимости, запущенная в 2019 году при поддержке Федерального университета Рио-де-Жанейро, стала беспрецедентным коллективным исследованием. Осенью 2024 года более 50 научных коллективов в различных лабораториях страны взялись за репликацию результатов биомедицинских исследований, опубликованных в период с 1998 по 2017 год.
Особенность проекта заключалась в том, что внимание уделялось не отдельным областям знаний или уровню цитирования, а трем наиболее распространенным методам, применяемым в бразильских лабораториях. Речь идет об испытании метаболизма клеток, методе амплификации генетического материала и тестах с лабиринтом, использующихся для оценки поведения грызунов. Исследователи выбрали 60 оригинальных статей, из которых было проведено 97 проверок 47 отдельных экспериментов, при этом каждый эксперимент повторялся минимум тремя независимыми лабораториями. Итоговые данные оказались разочаровывающими: всего около 21% исследований показали удовлетворительный уровень воспроизводимости согласно ряду статистических критериев. Одна из ключевых проблем, выявленных исследователями, связана с переоценкой эффекта, описанного в оригинальных работах.
В среднем, эффект по результатам повторных экспериментов оказался на 60% меньше, чем в первоначальных публикациях. Это указывает на систематическое завышение результатов, возможно вызванное как методологическими ошибками, так и публикационным смещением. Следует отметить, что исследование пока размещено в формате препринта и не прошло полноценное рецензирование, однако его значимость уже признана ведущими специалистами. Пандемия COVID-19 серьезно усложнила проведение репликационных исследований, вызвав логистические трудности и необходимость адаптации протоколов под условия ограниченного доступа к ресурсам. При этом одной из сложностей управления проектом стала координация множества независимых команд с разными подходами и практиками работы.
Руководитель проекта Олаво Бруэр Амарал сравнил процесс с попыткой превратить «гаражные группы» в единый оркестр — задача оказалась крайне непростой. Несмотря на все сложности, результаты бразильского проекта имеют важное значение не только для страны, но и для глобального научного сообщества. Они подчеркивают актуальность проблем воспроизводимости в биомедицинских исследованиях, демонстрируют системные недостатки в методологии и стимулируют обсуждение реформ в научной инфраструктуре и политике. Эксперты подчеркивают, что проблемы воспроизводимости влияют на доверие к научным данным, эффективность финансирования и качество медицинских практик. Зачастую непроверенные результаты становятся основой для последующих исследований или клинических испытаний, что может привести к значительным потерям средств и времени.
Введение стандартизированных протоколов, открытость данных и улучшение методической подготовки исследователей рассматриваются как одни из главных шагов на пути к повышению качества исследований. Кроме того, важно учитывать и более широкие социальные и культурные аспекты. Научная система должна стимулировать честность, объективность и открытость, противодействовать чрезмерному давлению на публикации и количественные показатели как единственные критерии успешности исследователя. Развитие таких инициатив, как бразильский проект воспроизводимости, помогает содействовать формированию здорового научного климата и возвращению к истинным целям науки. В заключение, ошеломляющие результаты масштабной проверки биомедицинских исследований в Бразилии обозначили серьезный вызов современной науке.
