Крупнейший проект воспроизводимости ставит под сомнение результаты биомедицинских исследований в Бразилии

Технология блокчейн Интервью с лидерами отрасли

В современном научном мире воспроизводимость результатов — это краеугольный камень, гарантирующий достоверность и ценность научных открытий. Однако, несмотря на важность этой основы научного метода, масштабное исследование, проведённое в Бразилии, выявило тревожные проблемы с воспроизводимостью большого количества биомедицинских исследований. Этот проект стал уникальным по многим параметрам, проведённым в рамках национальной инициативы, фокусирующейся не на отдельных научных дисциплинах, а на методах, используемых для получения данных. Итоги проекта заставляют задуматься о том, как устроена система научных исследований и публикаций в биомедицинской сфере, а также о необходимости глубокой реформы и повышения стандартов воспроизводимости в научном сообществе Бразилии. Проект под названием «Бразильская инициатива по воспроизводимости» объединил более 50 исследовательских команд из разных лабораторий страны.

Целью инициативы стало систематическое воспроизведение результатов, опубликованных в биомедицинских статьях, для оценки степени достоверности и надёжности этих данных. В отличие от подобных инициатив в других странах, где основной упор делался на воспроизведение экспериментов из определённых областей или по уровню цитируемости публикаций, бразильские учёные выбрали иной подход. Их внимание сосредоточилось на трёх самых распространённых в стране методах, используемых практически во всех биомедицинских лабораториях: тесты метаболизма клеток, амплификация генетического материала и тесты с использованием лабиринтов для грызунов. Выбор методов был стратегически важен: обеспечивая одинаковую оснащённость и компетенции лабораторий, проект гарантировал, что каждая из команд сможет корректно воспроизвести выбранные эксперименты. В итоге было отобрано 60 статей, опубликованных в период с 1998 по 2017 год, с условием, что минимум половина исследователей в каждой статье имела бразильскую аффиляцию.

На практике был проведён 97 экспериментов, воспроизводящих 47 изначально отобранных исследований. Результаты оказались пессимистичными. Только в 21% случаев воспроизведённые эксперименты полностью совпадали с исходными результатами хотя бы по половине выбранных критериев воспроизводимости. При этом исследователи выявили тенденцию к значительному преувеличению эффектов в изначальных публикациях — в среднем величина эффекта уменьшалась на 60% при повторных попытках. Данный факт подтверждает широко распространённую проблему искажённой оценки значимости научных открытий, что негативно сказывается на последующих применениях и развитии медицины и биологии.

Одной из главных авторов и координаторов проекта является Мариана Боэтшат де Абреу, метаисследователь из Федерального университета Рио-де-Жанейро. По её словам, полученные данные дают уникальную возможность для внутренних изменений. Необходимо пересмотреть как государственную политику в отношении науки, так и стандарты работы внутри университетов и исследовательских институтов. Для решения выявленных проблем важна комплексная модернизация научной инфраструктуры, внедрение строгих стандартов подготовки и публикации результатов, а также расширение культуры открытой науки, включающей предрегистрацию экспериментов и обязательное предоставление полных наборов данных. Однако проведение такого масштабного проекта было сопряжено с существенными трудностями.

Работы велись в условиях пандемии COVID-19, которая ограничивала доступ к лабораториям и затрудняла коммуникацию между командами, расположенными по всей стране. Кроме того, появлялись разногласия относительно степени идентичности воспроизводимых протоколов. Необходимость согласования методик между 56 лабораториями напоминала организацию оркестра из «гаражных групп», каждая из которых привыкла играть по-своему, отмечал координатор проекта Олаво Бёер Амарал. Тем не менее, совместные усилия позволили не только качественно оценить текущую ситуацию с воспроизводимостью, но и выстроить основу для дальнейших совместных проектов. Мировая научная практика уже давно сталкивается с «кризисом воспроизводимости», когда существенный процент ключевых результатов буксуют при попытках получить их снова.

Аналоги бразильской инициативы, например в США и Европе, обнаружили схожие проблемы, однако уникальность бразильского проекта состоит в междисциплинарном подходе и концентрации на методах, распространённых в стране. Это даёт шанс не только выявлять ошибки, но и разрабатывать стандартизированные методические рекомендации, адаптированные к реалиям бразильской науки. Выводы исследования побуждают к переосмыслению роли науки в обществе. Недостоверные или преувеличенные научные данные могут привести к ошибочным диагнозам, неправильному назначению медикаментов и общественным ожиданиям, которые не оправдаются. В то же время улучшение практик воспроизводимости повысит доверие к научным открытиям и обеспечит устойчивое развитие медицинской науки, что особенно важно для развивающихся стран, стремящихся занять достойное место в международном научном сообществе.

В свете представленных результатов, важно отметить и роль редакций научных журналов, которые должны ужесточить требования к опубликованным работам, особенно по части статистических методов и полной прозрачности данных. Поддержка открытой науки и обязательное воспроизводство ключевых экспериментов до публикации помогут повысить качество научных исследований. Кроме того, формирование сети сотрудничества между университетами и научными центрами для обмена опытом и критическим анализом существенно повысит общие стандарты работы. Таким образом, бразильская инициатива по воспроизводимости стала лакмусовой бумажкой для современных биомедицинских исследований в стране. Несмотря на выявленные проблемы, проект открыл новые возможности для реформирования научного процесса и повышения его качества.

Вызовы, связанные с воспроизводимостью, остаются острой темой для всего мирового научного сообщества, и успехи или неудачи в этой области напрямую влияют на будущее медицины и биологии в целом. Продвижение принципов открытости, сотрудничества и строгой проверки результатов позволит не только увеличить коллективное понимание биологических процессов, но и обеспечить надежный фундамент для разработки новых лечебных методов, лекарств и технологий. Значимость масштабных проектов подобного рода трудно переоценить, ведь именно они формируют будущее научной практики и определяют доверие общества к науке в целом.