В современном научном мире проблема ошибок в публикациях приобретает все большую значимость. Несмотря на существование стандартных механизмов контроля качества исследований, таких как рецензирование, ошибки зачастую остаются незамеченными долгие годы и продолжают распространяться в научной литературе, влияя на дальнейшие исследования и практические применения. Проект ERROR (Estimating the Reliability & Robustness of Research) призван изменить эту ситуацию, предлагая системный и структурированный подход к выявлению и исправлению ошибок в психологии и социальных науках. Основной смысл ERROR заключается в создании механизма, напоминающего программы по поиску багов в IT-сфере, где специалисты получают вознаграждение за выявление уязвимостей или багов. Аналогично, ученые и исследователи, участвующие в проекте, проверяют опубликованные научные работы на наличие ошибок, изучая не только текст статьи, но и сопровождающие данные, программный код и методологию.
Инициатива направлена на повышение надежности научных данных и обеспечение того, чтобы исследования, лежащие в основе новых гипотез и практических рекомендаций, были максимально достоверными. Проект ERROR выдвигает ряд амбициозных целей. К ним относится изучение практических аспектов внедрения системы выявления ошибок в научной среде, оценка соотношения затрат и выгод от реализации таких мероприятий, а также сбор эмпирических данных о распространенности и видах существующих ошибок в психологических исследованиях. Кроме того, проект стремится документировать и делать доступными технологии и инструменты, используемые для обнаружения ошибок, а также развивать культуру конструктивной критики и открытого обсуждения возможных недочетов в научных публикациях. Техническая сторона проекта реализуется через привлечение экспертов-ревьюеров, которые получают задания проверять выбранные работы.
В свою очередь, авторы исследовательских статей, согласившиеся на прохождение такой проверки, не только способствуют прозрачности науки, но и получают компенсации, если их исследование подтверждается как надежное и без ошибок. Такая мотивация направлена на создание атмосферы сотрудничества и доверия между исследователями и экспертами, что является крайне важным для успешной реализации инициативы. Важным аспектом проекта является взаимодействие с академическим сообществом. Проводятся специальные опросы, которые исследуют восприятие процедуры всеми участниками научного процесса. Исследуются вопросы справедливости компенсаций, возможные опасения, связанные с репутационными рисками, а также восприимчивость к нововведениям и новым технологиям.
Этот сбор данных помогает не только адаптировать проект под нужды разных дисциплин, но и выявлять барьеры, которые могут препятствовать его успешному внедрению. Отдельного внимания заслуживает причина возникновения ошибки в науке. Наука, несмотря на все свои преимущества, остается человеческой деятельностью, поэтому ошибки неизбежны. Текущие механизмы контроля, такие как рецензирование, не имеют достаточной направленности на выявление ошибок и часто выявляют их лишь спустя длительное время, когда исследования уже широко цитируются и влияют на научное знание. ERROR предлагает сместить акцент с случайного обнаружения на системное целенаправленное выявление ошибок.
Экономический аспект проекта также тщательно прорабатывается. Сравниваются затраты на внедрение системы проверки и потенциальные потери из-за существования необнаруженных ошибок. Логично, что ошибки в исследованиях приводят к ненужным расходам, например, на гранты, основанные на неточных данных, и на исследования, которые следуют за ошибочными выводами. Проект призывает к сотрудничеству между ключевыми стейкхолдерами: научными фондами, издательствами и академическими сообществами с целью совместной ответственности за качество и надежность науки. Прозрачность и демократизация – важные элементы стратегии ERROR.
Автоматизация инструментов проверки и расширение доступа к ним позволяют большему числу ученых принимать участие в процессе выявления ошибок и повышать общий уровень научной культуры. Это делает науку более открытой, честной и эффективной. Проект планирует поэтапное развитие: старт в феврале 2024 года, набор экспертов-ревьюеров весной, и уже в августе 2024 года начнется проверка первых 25 научных публикаций. К концу года будут собраны первые отзывы, которые помогут уточнить и оптимизировать методологию. В дальнейшем планируется расширение перечня использованных инструментов и методов, что сделает процесс еще более точным и эффективным.
