EVERYTHING
Як повідомляє News-medical, група науковців з UC Riverside, University of Connecticut, Brown University, UCLA та Fordham University виявила серйозні проблеми з цілісністю даних в онлайн-дослідженнях. Основною загрозою для якості медичних висновків є автоматизовані відповіді, фейкові анкетування та дублювання записів, які стають особливо актуальними при залученні груп населення, що важко охопити традиційними методами, або під час надання фінансових стимулів.
Методологія перевірки в дослідженнях поведінки
У межах рандомізованого контрольованого онлайн-випробування було залучено молодих геїв та бісексуальних чоловіків у США, які використовували стимулятори. Дослідники оцінювали відеоінтервенцію для отримання інформованої згоди, проте перед основним етапом вони провели ретельний скринінг на відповідність критеріям.
Аналіз показав значну деградацію вибірки на кожному етапі фільтрації:
- Початковий відбір онлайн-скрінінгу охопив 9,321 осіб.
- Лише 2,637 учасників відповіли критеріям відповідності дослідженням.
- Після перевірки на легітимність та унікальність було підтверджено лише 251 запис.
- В результаті фінального етапу інформовану згоду дали 158 осіб, а дослідження завершили 115 учасників.
Використання автоматизованих методів виявлення шахрайства допомогло ідентифікувати більшість проблемних записів, проте для забезпечення максимальної надійності науковці додали ручний перегляд та телефонні або відеодзвінки.
Баланс між якістю даних та доступністю
Професор Brandon Brown з Department of Social Medicine у UCR School of Medicine зазначив, що онлайн-дослідження дозволяють залучати групи населення, які часто не представлені в медичних вивченнях. Проте він підкреслив: «Оскільки дослідження будуються на попередніх дослідженнях, науковцям слід розглядати процедури верифікації як основний компонент дизайну дослідження, а не як додатковий крок».
Виклик для майбутнього полягає у пошуку балансу: методи перевірки мають бути достатньо суворими, щоб захистити дані від маніпуляцій, але водночас доступними для людей, які можуть мати обмежений доступ до технологій або відчувати стигму щодо свого стану здоров'я. Автори закликають інтегрувати комбінацію автоматичних та ручних процедур у плани фінансування та кадрового забезпечення медичних проектів.