Группа бразильских ученых проанализировала более 3 тысяч медицинских исследований, полученных из Кокрановской базы данных систематических обзоров (Cochrane Database of Systematic Reviews, CDSR), чтобы выяснить взаимосвязь между масштабом эксперимента и значимостью полученных результатов.
Выбрав эксперименты с наиболее значимыми результатами, авторы выяснили, проводились ли в дальнейшем еще исследования, посвященные этой теме, после чего сравнили полученные в экспериментах результаты.
Оказалось, что наиболее значимые результаты были зафиксированы в исследованиях, проведенных на небольших выборках. Как правило, при проведении дополнительных экспериментов достигнуть аналогичного эффекта не удавалось, и полученные результаты не были столь впечатляющими.
При получении значимого результата важным является правильный сбор результатов и интерпретация данных. Если выборка велика, то существенно повышается вероятность ошибки или неточности при сборе и обработке полученных результатов. Все это нередко приводит к тому, что значимые результаты, полученные в экспериментах с большой выборкой, трудно воспроизвести при проведении повторных опытов.
Особо значимые результаты, подтвержденные рядом существенных доказательств, встречаются в медицинских исследованиях достаточно редко. При проведении повторных экспериментов и получении новых данных, необходимо тщательно подходить к обработке накопленных результатов. Часть данных может оказаться некорректна и введение их в общую выборку приведет к неправильной интерпретации результатов проведенного масштабного исследования.