Заметки по методологии

Краткий справочник терминов. Личные рабочие заметки, дополняются по мере надобности.

Измерение

Валидность: Мера того, насколько инструмент измеряет именно то, что заявлено. Высокая надёжность при низкой валидности означает, что ошибка воспроизводится стабильно.
Надёжность: Воспроизводимость результата при повторном измерении в тех же условиях. Оценивается через повторное тестирование или согласованность пунктов.
Операционализация: Перевод теоретического понятия в наблюдаемую и измеримую процедуру. Разные операционализации одного конструкта нередко дают несопоставимые результаты.

Вероятностная выборка: Каждый элемент совокупности имеет известную ненулевую вероятность попасть в выборку. Только для таких выборок корректен перенос выводов на совокупность.
Смещение отбора: Систематическое расхождение между выборкой и совокупностью, возникающее на этапе отбора. Увеличение объёма выборки его не устраняет.
Мощность: Вероятность обнаружить эффект заданной величины при условии, что он существует. Рассчитывается до сбора данных, а не после.

Конфаундер: Переменная, связанная одновременно с предиктором и с исходом, из-за чего наблюдаемая связь оказывается частично или полностью ложной.
Величина эффекта: Количественная оценка силы связи, не зависящая от объёма выборки. Сообщается вместе с доверительным интервалом.
Доверительный интервал: Диапазон значений, совместимых с данными при выбранном уровне доверия. Интерпретируется как показатель точности оценки, а не как вероятность для параметра.
Предрегистрация: Фиксация гипотез и плана анализа до сбора данных. Разделяет подтверждающий и поисковый анализ.