Рис. 8. Квантили «высокой» и «низкой» группы на графике распределения тестовых
баллов
В некоторых случаях подобный анализ позволяет уточнить ключ для пункта: если пункт
получает значимый положительный фи-коэффициент, то ключ определяется значением «+1», ес-
ли пункт получает значимый отрицательный фи-коэффициент значением «-1». Если пункт полу-
чает незначимый фи-коэфф.ициент, то его целесообразно исключить из теста.
При ручных вычислениях фи-коэффициента удобно вначале с помощью формул (3.2.14) и
(3.2.15) определить граничное значение значимого (по модулю) фи-коэффициента. Например,
при объеме выборки в 100 человек и уровне значимости р < 0,01 пороговое значение вычисляет-
ся так:
1
Полная формула отличается от формулы (3.2.13) наличием в числителе вычитаемого (а + b + с +d)/2 - поправки с
учетом вклада, который
i
-й пункт вносит в суммарный балл:
2
Если 2
а
–Р
1
< 0, то числитель в формуле (3.2 15) выглядит так: 2
а
-Р
1
+1
A
B
C
D
68
27
.
0
100
63
,
6
2
01
,
0
n
x
(3.2.16)
При постоянном использовании компьютера при подсчете суммарных баллов ключ для
каждого пункта Q целесообразно определить в виде самого фи-коэффициента (или другого ко-
эффициента корреляции), определенного при коррелировании ответов на пункт с суммарным
баллом. Тогда тестовый балл подсчитывается по формуле
k
j
j
ij
i
C
R
x
1
,
(3.2.17)
где х
i
— суммарный балл
i
-го испытуемого;
ij
R
- ответ «верно» (+1) или «неверно» (-1)
i
-го испытуемого на
i
-й пункт;
С
i
- ключ для
i
-го пункта: С = +1 для прямого, С= -1 для обратного.
Более чувствительный коэффициент, который также применяется для дихотомических
пунктов, - это точечный бисериальный коэффициент корреляции, учитывающий амплитуду от-
клонения индивидуальных суммарных баллов от среднего балла:
i
i
x
i
n
pbi
q
p
S
x
p
x
n
r
*
1
3.2.18)
где
x* - сумма финальных баллов тех индивидов, которые дали утвердительный ответ на
i
-й пункт теста (решили
i
-ю задачу);
S
x
- стандартное отклонение для суммарных баллов всех индивидов из выборки;
i
i
q
p
- стандартное отклонение по
i
-му пункту;
x
- средний балл по всем пунктам.
А. Анастази относит критерий внутренней согласованности теста к валидности (Анастази
А., 1982, кн. 1, с. 143), однако если и можно в данном случае говорить о валидности, то только в
смысле особой внутренней валидности теста. Как правило, слишком высокая согласованность
снижает внешнюю валидность теста по критерию (см. раздел 3.3). Если проверяется согласован-
ность пунктов, составленных одним автором (одним коллективом по стандартной инструкции),
то выявление достаточного набора согласованных пунктов свидетельствует о внутренней валид-
ности (согласованности) разработанного диагностического понятия (конструкта).
В компьютерных данных факторного анализа аналогом корреляции пункта с суммарным
баллом является нагрузка пункта на ведущий фактор («факторная валидность» в терминах А.
Анастази). Если прибегать к геометрическому изображению нагрузки как проекции вектора-
пункта на ось-фактор, то структура пунктов хорошо согласованного теста предстанет в виде пуч-
ка векторов, плотно прилегающих к фактору и вытянувшихся вдоль его оси (рис. 9).
69
Do'stlaringiz bilan baham: |