Выездная верификация: как мы перепроверяли данные на месте
Даже после лабораторного контроля качества команда
проекта выехала в повторную экспедицию, чтобы верифицировать данные «на земле».
Для этого выбрали три муниципалитета с самыми противоречивыми результатами
(например, низкие доходы при высокой субъективной удовлетворённости).
Что делали верификаторы:
1. Находили респондентов, которые участвовали в
основном опросе (по контактам, оставленным добровольно), и задавали 5 ключевых
вопросов повторно. Переспрашивали иначе формулированными вопросами.
2. Проводили короткие уличные экспресс-опросы в тех же
локациях (по 10 человек) и сравнивали распределение ответов.
Результат верификации:
· В двух районах данные совпали с точностью 93-96% —
эти массивы признаны надёжными.
· В одном районе обнаружено систематическое смещение:
все опрошенные девушки давали социально одобряемые ответы о патриотизме, а в
повторном анонимном блиц-опросе назвали «религиозное давление» и «запрет на
профессию». Этот массив помечен в отчёте как «требующий осторожной
интерпретации».
Выездная верификация стоила дополнительных средств
(около 15% от бюджета), но именно она спасла финальные выводы от ложной
уверенности.
#Росмолодёжь #Гранты #МинмолодежиРД