Нулевой результат
В науке нулевой результат — это результат без ожидаемого содержания: то есть предполагаемый результат отсутствует. [ 1 ] Это экспериментальный результат, который не демонстрирует ожидаемого в противном случае эффекта. Это не означает, что результат равен нулю или ничего, это просто результат, который не подтверждает гипотезу .
При проверке статистической гипотезы нулевой результат возникает, когда экспериментальный результат существенно не отличается от ожидаемого при нулевой гипотезе ; ее вероятность (при нулевой гипотезе) не превышает уровня значимости , т. е. порога, установленного до проверки отклонения нулевой гипотезы. Уровень значимости варьируется, но распространенный выбор включает 0,10, 0,05 и 0,01. [ 2 ] Однако незначительный результат не обязательно означает отсутствие эффекта. [ 3 ] [ 4 ] [ 5 ] [ 6 ]
В качестве примера в физике можно привести результаты эксперимента Майкельсона-Морли такого типа, поскольку он не обнаружил ожидаемой скорости относительно постулируемого светоносного эфира . Знаменитое неудачное обнаружение этого эксперимента, обычно называемое нулевым результатом , способствовало развитию специальной теории относительности . Похоже, что эксперимент действительно измерял ненулевой «дрейф», но это значение было слишком маленьким, чтобы объяснить теоретически ожидаемые результаты; Обычно считается, что он находится в пределах уровня шума эксперимента. [ 7 ]
Издательская предвзятость
[ редактировать ]Несмотря на схожее качество исполнения и дизайна , [ 8 ] статьи со статистически значимыми результатами имеют в три раза больше шансов быть опубликованными, чем статьи с нулевыми результатами. [ 9 ] Это неоправданно мотивирует исследователей манипулировать своей практикой для получения статистически значимых результатов, например, путем сбора данных . [ 10 ]
Многие факторы способствуют предвзятости публикаций. [ 11 ] [ 12 ] Например, как только научное открытие будет прочно обосновано, может стать достойной публикации надежных статей, которые не смогут отвергнуть нулевую гипотезу. [ 13 ] Чаще всего исследователи просто отказываются предоставлять результаты, что приводит к систематической ошибке отсутствия ответов . Исследователи также могут предположить, что они допустили ошибку, обнаружить, что нулевой результат не подтверждает известный вывод, потерять интерес к теме или ожидать, что нулевые результаты не заинтересуют других. [ 8 ]
Существует несколько научных журналов, посвященных публикации отрицательных или нулевых результатов, в том числе следующие:
- Журнал отрицательных результатов в биомедицине (несуществующий)
- Журнал фармацевтических отрицательных результатов
- Журнал нерешенных вопросов
не занимается исключительно публикацией отрицательных результатов, он Хотя BMC Research Notes также публикует отрицательные результаты в форме исследований или примечаний к данным.
См. также
[ редактировать ]Ссылки
[ редактировать ]- ^ Джунти, К.; и др. (1999). «Новый принцип упорядочения для классического статистического анализа пуассоновских процессов с фоном». Физ. Преподобный Д. 59 (5): 053001. arXiv : hep-ph/9808240 . Бибкод : 1999PhRvD..59e3001G . doi : 10.1103/PhysRevD.59.053001 . S2CID 14948954 .
- ^ Казелла, Джордж; Бергер, Роджер (2002). Статистический вывод (2-е изд.). Даксбери. п. 385. ИСБН 0-534-24312-6 .
- ^ Лейкенс, Даниэль (2017). «Тесты эквивалентности: практическое руководство по t-тестам, корреляциям и метаанализу» . Социальная психология и наука о личности . 8 (4): 355–362. дои : 10.1177/1948550617697177 . ISSN 1948-5506 . ПМК 5502906 . ПМИД 28736600 .
- ^ Гросс, Джастин Х. (2015). «Тестирование того, что важно (если вам вообще нужно тестировать): контекстно-ориентированный подход к существенной и статистической значимости» . Американский журнал политической науки . 59 (3): 775–788. дои : 10.1111/ajps.12149 . ISSN 0092-5853 .
- ^ Хартман, Эрин; Идальго, Ф. Дэниел (2018). «Эквивалентный подход к тестам баланса и плацебо» . Американский журнал политической науки . 62 (4): 1000–1013. дои : 10.1111/ajps.12387 . ISSN 0092-5853 .
- ^ Рейни, Карлайл (2014). «Аргументы в пользу незначительного эффекта» . Американский журнал политической науки . 58 (4): 1083–1091. дои : 10.1111/ajps.12102 . ISSN 0092-5853 .
- ^ «Роль экспериментов Майкельсона-Морли в принятии решений относительно конкурирующих теорий» . Архивировано из оригинала 07.11.2012 . Проверено 17 июля 2003 г.
- ^ Jump up to: а б Истербрук, П.Дж.; Берлин, JA; Гопалан, Р.; Мэтьюз, Д.Р. (1991). «Предвзятость публикаций в клинических исследованиях» . Ланцет . 337 (8746): 867–872. дои : 10.1016/0140-6736(91)90201-Y . ПМИД 1672966 . S2CID 36570135 .
- ^ Дикерсин, К .; Чан, С.; Чалмерс, TC; и др. (1987). «Предвзятость публикаций и клинические испытания». Контролируемые клинические исследования . 8 (4): 343–353. дои : 10.1016/0197-2456(87)90155-3 . ПМИД 3442991 .
- ^ Пирс, Дж; Деррик, Б. (2019). «Предварительное тестирование: дьявол статистики?» . Новое изобретение: Международный журнал студенческих исследований . 12 (2). дои : 10.31273/reinvention.v12i2.339 .
- ^ Х. Ротштейн, А. Дж. Саттон и М. Боренштейн. (2005). Предвзятость публикаций в метаанализе: предотвращение, оценка и корректировка . Уайли. Чичестер, Англия; Хобокен, Нью-Джерси.
- ^ Чопра, Феликс; Хааланд, Ингар; Рот, Кристофер; Стегманн, Андреас (2023). «Штраф за нулевой результат» . Экономический журнал . 134 (657): 193–219. дои : 10.1093/ej/uead060 . ISSN 0013-0133 .
- ^ Луиендейк, HJ; Кулман, X (май 2012 г.). «Стимул к публикации отрицательных исследований: как бета-блокаторы и депрессия застряли в цикле публикаций». Дж. Клин Эпидемиол . 65 (5): 488–92. дои : 10.1016/j.jclinepi.2011.06.022 . ПМИД 22342262 .