Фон:
Типовий метааналіз у психології може намагатися моделювати співвідношення між двома змінними X та Y. Аналіз, як правило, передбачає отримання набору відповідних кореляцій з літератури разом із розмірами вибірки. Потім формули можуть бути застосовані для обчислення середньозваженого співвідношення. Тоді можуть бути проведені аналізи, щоб побачити, чи відрізняються кореляції в різних дослідженнях більш ніж, ніж би малося на увазі простими наслідками випадкового вибірки.
Крім того, аналізи можна зробити набагато складнішими. Оцінки можуть бути скориговані на надійність, обмеження дальності та інше. Кореляції можна використовувати в поєднанні для дослідження моделювання метаструктурних рівнянь або мета регресії тощо.
Однак усі ці аналізи проводяться з використанням підсумкової статистики (наприклад, кореляції, коефіцієнти шансів, стандартизовані середні різниці) в якості вхідних даних. Це вимагає використання спеціальних формул та процедур, які приймають зведені статистичні дані.
Альтернативний підхід до метааналізу
Таким чином, я думав про альтернативний підхід до метааналізу, де вихідні дані використовуються як вхідні дані. Тобто, для кореляції вхідними даними будуть необроблені дані, що використовуються для формування кореляції. Очевидно, що в більшості метааналіз декілька, якщо не більшість фактичних вихідних даних відсутні. Таким чином, основна процедура може виглядати приблизно так:
- Зверніться до всіх опублікованих авторів, які шукають необроблені дані, і якщо вони надані, використовуйте фактичні вихідні дані .
- Для авторів, які не надають необроблених даних, моделюйте необроблені дані, щоб вони мали ідентичну підсумкову статистику, як і повідомлення. Такі симуляції також можуть включати будь-які знання, отримані з необроблених даних (наприклад, якщо відомо, що змінна є перекошеною тощо).
Мені здається, що такий підхід може мати кілька переваг:
- Для аналізу можуть бути використані статистичні засоби, які використовують вихідні дані як вхідні дані
- Принаймні отримуючи деякі фактичні необроблені дані, автори метааналізів були б змушені розглянути питання, пов'язані з фактичними даними (наприклад, аутлайнери, розповсюдження тощо).
Питання
- Чи є проблеми з виконанням досліджень з метааналізу на поєднанні правдивих необроблених даних та даних, змодельованих для того, щоб мати ідентичну підсумкову статистику з існуючими опублікованими дослідженнями?
- Чи був би такий підхід кращим за існуючі методи проведення метааналізу на підсумковій статистиці?
- Чи є наявна література, яка обговорює, виступає або критикує цей підхід?