Лекция 8. Угрозы психометрическому качеству теста

ЛЕКЦИЯ 8.УГРОЗЫ ПСИХОМЕТРИЧЕСКОМУ КАЧЕСТВУ ТЕСТА

Лекции проф. А. А. Алексеева

по психометрике

Arthur Robert Jensen

(August 24, 1923 – October 22, 2012)

ТИПЫ УСТАНОВОК НА ОТВЕТ

Установка на согласие (установка на положительный или отрицательный ответ)

Установка на крайние ответы и установка на промежуточные ответы

Установка на социальную желательность

Симуляция неблагополучия Бездумные или случайные ответы Угадывание

ОТВЕТЫ НА УТВЕРЖДЕНИЯ ИСХОДНЫХ ТЕСТОВ:1. Я ДЕЙСТВИТЕЛЬНО ДОВОЛЕН СВОЕЙ РАБОТОЙ2. РАБОТА ДАЕТ МНЕ ВОЗМОЖНОСТЬ САМОРЕАЛИЗАЦИИ3. В ЦЕЛОМ Я УДОВЛЕТВОРЕН ПОВСЕДНЕВНЫМ ХОДОМ СВОЕЙ РАБОТЫ4. Я БЫ ПОМЕНЯЛ ЛИШЬ НЕЗНАЧИТЕЛЬНЫЕ МОМЕНТЫ В МОЕЙ РАБОТЕ

УСТАНОВКА НА ВЫБОР КРАЙНИХ ОТВЕТОВ

ВОЗМОЖНЫЕ ПРИЧИНЫ УСТАНОВКИ НА СОЦИАЛЬНУЮ ЖЕЛАТЕЛЬНОСТЬ

1. Содержание теста

2.Ситуация тестирования

3. Личностные особенности

ПРИМЕР ЗАВИСИМОСТИ РЕЗУЛЬТАТОВ ИССЛЕДОВАНИЯ ОТ НАЛИЧИЯ УСТАНОВКИ НА

СОЦИАЛЬНО ЖЕЛАТЕЛЬНЫЕ ОТВЕТЫ

МЕТОДЫ БОРЬБЫ С УСТАНОВКАМИ НА ОТВЕТ

ОТВЕТЫ НА УТВЕРЖДЕНИЯ ИСХОДНЫХ ТЕСТОВ:1. Я ДЕЙСТВИТЕЛЬНО ДОВОЛЕН СВОЕЙ РАБОТОЙ2. МОЯ РАБОТА НЕ СООТВЕТСТВУЕТ МОИМ ИНТЕРЕСАМ И СКЛОННОСТЯМ3. В ЦЕЛОМ Я УДОВЛЕТВОРЕН ПОВСЕДНЕВНЫМ ХОДОМ СВОЕЙ РАБОТЫ4. Я БЫ МНОГОЕ ХОТЕЛ ПОМЕНЯТЬ В СВОЕЙ РАБОТЕ

ВИДЫ НЕОБЪЕКТИВНОСТИ ТЕСТА

Необъективность в значении теста (неадекватность конструкта)

Необъективность в использовании теста (прогностическая ошибка)

МЕТОДЫ ВЫЯВЛЕНИЯ НЕАДЕКВАТНОГО КОНСТРУКТА

Вычисление индексов дискриминативности пунктов теста

Факторный анализАнализ дифференциального

функционирования пунктов тестаРанжирование

ОПРЕДЕЛЕНИЕ ПРОГНОСТИЧЕСКОЙ ОШИБКИ: ПРИМЕР ИСПОЛЬЗОВАНИЯ ЛИНЕЙНОЙ РЕГРЕССИИ (1)

Уравнение линейной регрессии:

a = 56,03, b = 0,58, = 96,05 = 96,63

ОПРЕДЕЛЕНИЕ ПРОГНОСТИЧЕСКОЙ ОШИБКИ: ПРИМЕР ИСПОЛЬЗОВАНИЯ ЛИНЕЙНОЙ

РЕГРЕССИИ (2)

СИСТЕМАТИЧЕСКАЯ ОШИБКА СВОБОДНОГО ЧЛЕНА РЕГРЕССИИ

b = 0,58, Прогнозируемое значение критериальной

переменной для мужчин = 58,03 + 0,58(70), Прогнозируемое значение критериальной

переменной для мужчин = 98,63, Прогнозируемое значение критериальной

переменной для женщин = 54,03 + 0,58(70), Прогнозируемое значение критериальной

переменной для женщин = 94,63.

ГРАФИКИ ЛИНЕЙНОЙ РЕГРЕССИИ В ГРУППАХ МУЖЧИН И ЖЕНЩИН ПО СРАВНЕНИЮ С ГРАФИКОМ ОБЩЕГО РЕГРЕССИОННОГО УРАВНЕНИЯ (ИЛЛЮСТРАЦИЯ

СИСТЕМАТИЧЕСКОЙ ОШИБКИ СВОБОДНОГО ЧЛЕНА РЕГРЕССИИ)

ГРАФИКИ ЛИНЕЙНОЙ РЕГРЕССИИ В ГРУППАХ МУЖЧИН И ЖЕНЩИН ПО СРАВНЕНИЮ С ГРАФИКОМ ОБЩЕГО

РЕГРЕССИОННОГО УРАВНЕНИЯ

СИСТЕМАТИЧЕСКАЯ ОШИБКА УГЛОВОГО КОЭФФИЦИЕНТА РЕГРЕССИИ

a = 56,03, b = 0,58 ,

Прогнозируемое значение критериальной переменной для мужчин = 56,03 4 + 0,53(70).

Прогнозируемое значение критериальной переменной для мужчин = 93,13.

Прогнозируемое значение критериальной переменной дли женщин = 56,03 + 0,63(70).

Прогнозируемое значение критериальной переменной для женщин = 100,13.

Прогнозируемое значение критериальной переменной для мужчин = 56,03 + 0,53(60).

Прогнозируемое значение критериальной переменной для мужчин = 87,83.

Прогнозируемое значение критериальной переменной для женщин = 56,03 + 0,63(60).

Прогнозируемое значение критериальной переменной для женщин = 93,83.

ГРАФИКИ ЛИНЕЙНОЙ РЕГРЕССИИ В ГРУППАХ МУЖЧИН И ЖЕНЩИН ПО СРАВНЕНИЮ С ГРАФИКОМ ОБЩЕГО РЕГРЕССИОННОГО УРАВНЕНИЯ (ИЛЛЮСТРАЦИЯ

СИСТЕМАТИЧЕСКОЙ ОШИБКИ НАКЛОНА ЛИНИИ РЕГРЕССИИ)