Нормативные оценки методик психологического отбора

Далее устанавливается необходимый уровень доверительной вероятности (Р), который определяется целями исследования и соответствует значениям:

Наконец, задается (произвольно, на основании опыта) степень точности (D) характеристики среднего значения генеральной совокупности (допускаемая ошибка отклонения от генеральной совокупности). Расчет необходимой выборки производится по формуле

Например, необходимо установить N при разработке шкалы конкретной методики. По предварительным расчетам σ = 23, уровень доверительности вероятности Ρ = 0,99 и соответственно t = 2,58, а допускаемая ошибка Δ = 3 с. Подставляя значения в формулу, находим Ν= 352.

Увеличение или уменьшение выборки произойдет при установлении другого доверительного уровня или точности характеристики среднего значения (допускаемой ошибки). Например, при Ρ = 0,999 количество наблюдений N = 580 и т. д.

Величину допускаемой ошибки можно определить и по формуле

где n – размерность используемой шкалы; к – градация абсолютных показателей внутри каждого из 9 баллов; цифра 2 введена для учета знаков «минус» и «плюс». При определении максимально допустимого значения ошибки к не учитывается. Для более точного определения Δ градация внутри каждого балла к должна составлять 3,5 или более вариантов. Например, величина ошибки для 9-балльной шкалы методики при Ρ = 0,99 и σ = 23 и трех вариантов значений абсолютных показателей внутри каждого балла (3 с) будет составлять: Δ = 4,4 с, а максимально допустимая величина Δ = 13 с, то есть без градаций внутри каждого балла. При изменении доверительной вероятности и градаций внутри баллов будет меняться и Δ.

Правильность (не валидность) построения методик может быть проверена путем изучения фактического распределения абсолютных показателей в процентах по соответствующим баллам 9-балльной шкалы. Так, если фактическое распределение совпадает с расчетным, методика составлена правильно. Если произошел сдвиг в сторону 1 или 9 баллов, то это означает, что степень трудности, условия или время предъявления подобраны неправильно и этот недостаток необходимо устранить. Например, при выполнении методики «Часы» результаты обследования распределились по 9-балльной шкале со сдвигом к 9 баллам по отношению к расчетным. Это означает, что время на выполнение задания (12 мин) велико и большее, чем должно быть, число испытуемых успевают правильно решить все задачи. Уменьшение времени выполнения до 8 мин привело к нормальному (расчетному) распределению полученных результатов.

Для определения правильности выбора единиц измерения или градаций методики можно воспользоваться формулой Δ = 2tσ/n_k В тех случаях, когда Δ составляет часть от неделимой единицы измерения, эта единица измерения не может быть использована в качестве дифференциации данного текста. Например, в методике «Компасы» единицей измерения является задача из одного компаса, то есть он может быть учтен или нет. Эта единица измерения неделима, часть компаса не может быть учтена. Полученная часть единицы дает сведения о том, на сколько нужно увеличить (расширить) количество задач или как изменить единицу измерения. Так, например, если Δ оказалась равной 1,3 – это значит, что количество задач в тесте должно быть увеличено в 3 или более раза. С увеличением числа задач в тесте этот недостаток устраняется. Практические исследования показывают, что количество задач в тесте должно быть (при Ρ = 0,95 и максимально допустимом значении Δ) не менее 20.

B.C. Аванесов [5] приводит примерные числа высказываний для разработки вопросников: минимальное число – 10; достаточное – от 23 до 29; практически оптимальное – от 30 до 40; теоретически желаемое – свыше 41.