Цена доверия к авторитету | Престижный Гарвард и обычный Excel
Поучительная история, которую стоит знать.
<<
- Издержки закрытой публикации: статья Рейнхард-Рогоффа
Дискуссия вокруг статьи 2010 года «Рост во время задолженности», опубликованной гарвардскими экономистами Кармен Рейнхард и Кеннетом Рогоффом в журнале American Economic Review, демонстрирует некоторые проблемы системы научных журналов.
На основании данных по росту ВВП и уровню государственного долга разных стран, авторы статьи пришли к выводу, что рост ВВП оказывается существенно медленнее в странах, где уровень задолженности превышает 90% от ВВП.
Журналисты, политики и чиновники ссылались на эту статью, чтобы обосновать снижение государственных расходов. Хотя выводы в самой статье не так прямолинейны и категоричны, Ренхард и Рогофф оказали Вашингтону услугу в деле сокращения бюджетного дефицита.
Но в апреле этого года группа учёных из Массачусетского университета в Амхерсте нашла ошибку в статье Рейнхард-Рогоффа. Как и многие другие экономисты, учёные безуспешно пытались воспроизвести результаты Рейнхард и Рогоффа. И только когда гарвардские коллеги выслали им исходные данные в таблицах Excel, в Массачусетсе поняли, почему ни у кого не удавалось воспроизвести эти результаты.
Ошибка в формуле. Пять ячеек данных не вошли в диапазон. Без этой ошибки и некоторых спорных моментов использовавшейся методики взвешивания результатов эффект Рейнхард-Рогоффа не наблюдался. Вместо уменьшения на 0,1%, страны с долгом выше 90% показывали рост ВВП на вполне приличные 2,2%.
Ошибка была найдена, но в течение двух лет на статью ссылались многие влиятельные политики и экономисты.
-- Плохие мотивы
Переход на журналы с открытым доступом увеличит доступность научного знания, но если при этом сохранится существующая сейчас преувеличенная роль научных статей, то реформа науки останется неполной.
Система журналов сильно замедляет публикацию результатов исследований. Рецензирование очень редко проходит быстрее, чем за месяц, и журналы часто просят авторов переписать часть статьи или провести дополнительные изыскания. В результате время до публикации статьи растягивается на полгода и больше. Хотя контроль качества необходим, благодаря гибкости интернета статьи теперь вовсе не обязательно приводить в полностью завершённый вид до публикации. Майкл Айзен, сооснователь Public Library of Science, говорит, что согласно его опыту «большинство серьёзных недостатков обнаруживаются только после того, как статья опубликована».
Люди приветствуют открытие новых лекарств, научных теорий и социальных феноменов. Но, если помнить о том, что процесс научного исследования состоит в том, что все возможные гипотезы просеиваются через сито эксперимента в поисках правильной, то придётся признать, что и отрицательные результаты так же важны, как и положительные.
Но журналы не могут поддерживать свой престиж, публикуя отчёты о провалившихся экспериментах.
Из-за этого научное сообщество лишено ценной информации о неподтвердившихся гипотезах. Более того, это толкает учёных на подгонку результатов и излишне оптимистичные выводы, которые не опираются на достоверные данные, и в которых даже сам автор не уверен. Пока наука не перерастёт современную журнальную систему, мы не узнаем, сколько ложных «открытий» сделано из-за желания показать хоть какой-то результат. >>
Источник: Хабр, 14.08.2013
https://habr.com/ru/post/190046