|
Испытуемые Балл по зада- Балл по зада- Балл по всему Бал по всему Произведение нию нию в квад- тесту тесту в квадрате баллов по зада- рате нию и по всему тесту п XX2YY2XY Способы улучшения заданий выясняются как раз на этой стадии конструирова- ния теста. Например, изменение формулировки ответа в задании с «иногда» на «все- гда» может повысить показатель эффективности. Однако эти изменения во всех вопросах (утверждениях) могут повлиять на надежность и валидность теста. Про- цедура анализа заданий дает необходимую информацию относительно параметров каждого задания. Тем не менее только исследователь может вынести решение о том, какой из критериев наиболее важен для реализации цели создаваемого теста. В начале 1980-х гг., помимо традиционных процедур анализа заданий, появ- ляются более сложные, использование которых невозможно без достаточно мощ- ного компьютерного обеспечения. К таковым прежде всего относится теория «за- дание—ответ» (item response theory, IRT). Технические приемы этой теории, не- смотря на продолжающиеся дискуссии, сегодня включаются во вновь создаваемые 3.6. Определение надежности теста 161 тесты. Однако речь идет прежде всего о тестировании способностей. Наиболее слож- ные проблемы возникают в связи с попытками приложения ITR к тестам лично- сти. Безусловно, нельзя утверждать, что процедуры из ITR неприменимы в оценке личности, однако требуется решение многих задач, прежде чем эта теория заменит традиционные процедуры анализа заданий подробнее об этой теории см. в рабо- тах П. Клайна, 1994; А. Анастази и С. Урбина, 2001; и др.). 3.6. Определение надежности теста Тест обычно считается надежным, если с его помощью получаются одни и те же показатели для каждого обследуемого при повторном тестировании. В психометрике термин надежность имеет два значения. На одном из них — на- дежности по внутренней согласованности — мы не будем останавливаться под- робно, отсылая читателя к соответствующим справочникам и руководствам1, от- метив только, что требование к внутренней согласованности теста не случайно. Вполне естественно считать, что если некоторая переменная измеряется частью теста, то другие его части, не будучи согласованными с первой, измеряют нечто другое. Для того чтобы быть валидным, тест должен быть согласованным. Суще- ствует несколько способов определения надежности. — 188 —
|