Интеренет полюбил такую категорию людей, которых я называю "пруфолюбы" это дилетанты, обучение критическому мышлению и основам логики, и зачастую люди с высшим образованием, но не разбирающиеся в поднятом вопросе. Для таких результаты "мета-анализа" являются окончательной точкой на I. Неоспоримым доказательством точки зрения.
Проблем у такого метода исследования масса. Начнём с того, что для проведения такого исследования нужен только доступ в интернет и многие используют его как ленивый способ получения научных бонусов (индекс Хирша, степень, должность и т.д.)
Вторая проблема это субъективность отбора материалов. Теоретически, материалы должны перебираться с тщательным исследованием соответствию методологии, чего на практике не происходит. Каких только причин отказа от включения тех или иных исследований я не видел. Самая распространённая "не хватило времени". Хочется спросить чего? Ты ведь не на конвейере работаешь. Ещё бывает "отмазка" (увы, назвать это как-то по другому, как жаргонизмом - язык не поворачивается) - "не разобрались, слишком сложно". Да, пишется наукообразным языком, но общий смысл именно таков. Иногда,то или иное исследование игнорируется, что бы показать своё псевдо "первенство".
Вот мы резко подошли к третьей проблеме - иногда материалов просто НЕДОСТАТОЧНО и тогда включают в анализ ВСЕ материалы, которые найдут. Вроде работ, где врач пишет "исследование" на основании ОДНОГО практического случая.
Проблема номер 4 - попадание ошибок. Учитывая что суммируется много данных, всего пара ошибок помноженных друг на друга, могут дать уникальные результаты показывающие погоду на марсе две тысячи лет назад..
Пятая проблема. Дело в таком предмете, как статанализ. Итоги получают разными способами и естественно получают разные результаты. Какой либо стандарт отсутствует.
Шестая проблема, всё та же ангажированность, те кому "надо" "получают" те результаты, которые им хочется.
Всё это приводит к тому, что мета-анализы по одному и тому же вопросу в разные года, выполненные разными людьми, показывают противоположные результаты!
Моргот.