Репликация научных исследований является одним из краеугольных камней научного метода, обеспечивая проверку достоверности результатов и повышение доверия к полученным данным. В последние годы проблемы воспроизводимости исследований стали предметом пристального внимания общества и научного сообщества во всём мире. Особенно остро эта тема стоит в биомедицинской науке, где неточности и завышение результатов могут иметь прямое влияние на последующее применение и разработки методов лечения. Недавно завершённый амбициозный проект в Бразилии, известный как Brazilian Reproducibility Initiative, показал, что ситуация с воспроизводимостью биомедицинских исследований далеко не однозначна. Проект, объединивший свыше 50 исследовательских групп, попытался проверить ряд экспериментов, опубликованных бразильскими учёными, и, к сожалению, смог воспроизвести менее половины из них.
Проект был организован учёными Федерального университета Рио-де-Жанейро, ставя своей задачей проверить результаты не в рамках определённой научной области, а исходя из наиболее часто используемых в биомедицинских исследованиях методов. Это позволило сделать выводы более универсальными и релевантными для всей биомедицинской сферы в Бразилии. Исследователи изучили статьи, опубликованные в период с 1998 по 2017 год, и выбрали три наиболее часто используемых метода: анализ клеточного метаболизма, амплификацию генетического материала и поведенческие тесты с использованием лабиринтов для грызунов. В проекте приняли участие 213 учёных из 56 лабораторий, что подчёркивает масштабность и серьёзность поставленной задачи. Организация работы была осложнена пандемией COVID-19, что привнесло трудности с координацией и проведением экспериментов.
Также возникли разногласия между лабораториями по поводу того, насколько строго необходимо придерживаться оригинальных протоколов исследований. К примеру, некоторые группы предлагали адаптировать методы под имеющееся оборудование, что могло повлиять на воспроизводимость результатов. Несмотря на это, удалось провести 97 валидных попыток репликации 47 экспериментов. Ключевым выводом проекта стало то, что воспроизводимость оказалась критически низкой: лишь около 21% исследований можно считать воспроизводимыми по крайней мере по половине установленных критериев. Помимо этого, обнаружилось, что эффект, описанный в оригинальных статьях, в среднем на 60% превышал тот, который был получен в ходе повторных экспериментов.
Такой результат указывает на систематическую тенденцию к приукрашиванию или завышению значимости выводов в публикациях, что ставит под сомнение их надёжность и практическую применимость. Низкая воспроизводимость исследований в биомедицине не является уникальной проблемой только для Бразилии. Подобные проекты в других странах и областях науки выявляли схожие тенденции, тесно связывая их с рядом факторов. В первую очередь, это недостаточно жёсткий контроль качества на этапе публикации, когда значимость результатов для науки или общества часто привлекает больше внимания, чем методологическая строгость и прозрачность. Также на качество исследований влияют публикационная предвзятость, давление на учёных с целью получения позитивных результатов, а иногда и недостаток осведомлённости о правильных статистических методах и протоколах.
Проект Brazilian Reproducibility Initiative выступил важным индикатором необходимости реформ в научной системе. Участники исследования подчёркивают, что для повышения качества и надёжности научных данных необходимо внедрять новые стандарты прозрачности экспериментов, обязательное и своевременное предоставление данных и протоколов, повышение квалификации исследователей в области репликационных исследований и статистики. Кроме того, важна роль государственных органов и научных фондов в поддержке проектов по воспроизводимости и создании условий, при которых такие исследования будут не исключением, а нормой. Американская и европейская научные сообщества уже предприняли шаги в направлении системных изменений, включая обязательное пре-регистрация исследований, публикацию отрицательных результатов и поощрение исследований, направленных именно на репликацию. Бразильский опыт даёт возможность обратиться к проблеме с учётом локальных условий и ресурсов, что поможет разработать наиболее релевантные стратегии повышения качества науки в стране.
Помимо улучшения научных подходов, проект имеет важные социальные и экономические аспекты. Биомедицинские исследования тесно связаны с разработкой лекарственных препаратов, диагностических методов и терапевтических протоколов. Если основа таких разработок построена на данных, которые невозможно воспроизвести, это может привести к серьёзным последствиям для здоровья и жизни людей, а также к значительным финансовым потерям. Также важна и роль научных журналов, редакторов и рецензентов, которые должны уделять особое внимание методологической прозрачности и требованиям к воспроизводимости публикаций. Научные издания всё чаще вводят политика открытого доступа к данным и методам, а также требуют описания всех проведённых проверок и повторений.
Это способствует формированию культуры ответственности и честности в науке. Наконец, нельзя недооценивать значение образовательных программ, направленных на подготовку исследователей к новым вызовам науки XXI века, включая работу с большими данными, критический анализ публикаций и умение организовывать масштабные коллаборации для проведения воспроизводимых экспериментов. Итогом работы Brazilian Reproducibility Initiative стала чёткая демонстрация того, что воспроизводимость исследований является непростой задачей, требующей комплексного подхода, вовлечения множества участников научного процесса и системных изменений. Только при таком подходе возможно повышение доверия к биомедицинской науке и гарантирование того, что публикации отражают действительное положение вещей, а не статистические искажения или методологические недочёты. Таким образом, результаты проекта дают мощный импульс для реформирования научной среды в Бразилии и служат примером для других стран.
Они напоминают, что качество и прозрачность исследований должны быть в приоритете, а научное сообщество должно развиваться в направлении открытости, сотрудничества и ответственности перед обществом. В конечном счёте, именно такие изменения обеспечат прогресс в медицине и повысят уровень доверия к научным результатам во всём мире.
