ТОП авторов и книг ИСКАТЬ КНИГУ В БИБЛИОТЕКЕ
Если размер выборки не больше утроенного
162
числа заданий теста, то обязательно необходимы повторные испыта-
ния.
В шкалах аттитюдов может присутствовать генеральный фактор:
в нашем примере это аттитюд к евреям. Однако, можно возразить,
что этот аттитюд сам зависит от таких факторов, как догматизм
(Rokeach, 1960), авторитарные черты личности (АсЗогпоидр., 1950),
или от личностных факторов, таких как фактор Кэттелла L - подо-
зрительность. Если это так, тогда факторная структура шкалы атти-
тюдов не будет явно выраженной, и любой генеральный фактор мог
бы проявляться только в факторах второго или даже более высокого
порядка. По этой причине факторный анализ как метод конструиро-
вания тестов должен использоваться только тогда, когда есть веские
основания a priori предположить наличие явно выраженного гене-
рального фактора или другой подобной структуры.
Краткий обзор и заключение
(1) Определены объективные тесты и указаны их преимущества.
(2) Предложена таксономия тестов, основывающаяся на двух па-
раметрах: стимульно-инструктивной ситуации и особенностях оце-
нивания ответов. Это позволяет разработчику тестов конструировать
разнообразные формы заданий.
(3) Проведено различие между объективными тестами способно-
стей, темперамента и динамики.
(4) Сформулированы некоторые практические советы по констру-
ированию объективных тестов, прежде всего тестов личности и моти-
вов.
(5) Обсуждены пути преодоления трудностей при разработке тес-
тов.
(6) Обсуждены специфические проблемы объективных тестов ди-
намики.
(7) Приведен список основных принципов конструирования тес-
тов мотивов, основывающийся на психологических публикациях.
(8) Обсуждены различия между тестированием силы мотивов и
целей.
(9) Описано конструирование проективных тестов, после доказа-
тельства значимости разработки таких тестов.
(10) Кратко обсуждено конструирование других тестов мотивов.
(II) Описано конструирование шкал настроений.
(12) Обсуждено конструирование тестов Лайкерта.
Глава 5. Вычисление надежности тестов
В первой главе были кратко обсуждены два основных для психо-
метрических тестов понятия - надежность и валидность. В этой
главе будут описаны методы и процедуры установления надежности
теста. Как уже отмечалось, в смысле практического применения по-
нятие надежности имеет два значения: одно связано с внутренней
согласованностью теста, а другое - с воспроизводимостью результа-
тов. Оба они важны, хотя на практике второе существенно для раз-
работки эффективных тестов, тогда как первое, связанное с внутрен-
ней согласованностью, является значением надежности, учитывае-
мым в классической теории погрешностей тестов.
Однако, с точки зрения разработчика психологических тестов,
существуют различные практические вопросы, касающиеся надеж-
ности тестов, которые следовало бы обсудить: о преимуществах и
недостатках различных способов вычисления надежности, о важно-
сти надежности по внутренней согласованности на практике, в отли-
чие от теории, а также об источниках неудовлетворительной надеж-
ности. Эти вопросы и будут рассмотрены в данной главе.
Важность надежности по внутренней согласованности
при конструировании тестов
Понятие надежности по внутренней согласованности является
центральным для теории погрешностей измерения: чем выше надеж-
ность, тем меньше погрешность и тем ближе значение показателя по
тесту к истинному показателю (см. гл. 1). Из этого делается очевид-
ный вывод: высокая внутренняя согласованность должна быть основ-
ной целью разработчиков тестов, и это точка зрения многих специа-
листов по психометрии (напр., Cronbach, 1970), отражаемая и в
обзорах тестов во многих изданиях Mental Measurement Yearbook
(Buros).
Однако, Кэттелл и его коллеги, являющиеся авторами некоторых
из наиболее известных тестов во многих областях психологических
измерений - например , Культурно-свободного теста интеллекта
(Culture-Fair Intelligence Test, CFIT; Cattell и Cattell, 1960), Шест-
надцатифакторного личностного опросника (16 PF Personality Test;
Cattell и др., 1970), Теста анализа мотивов (Motivation Analysis Test;
Cattell и др., 1970) -постоянно утверждали, что высокая внутренняя
согласованность может быть (а часто и является в таких ложных
областях, как темперамент и динамика) противоположностью высо-
кой валидности. Поскольку валидность определена как степень, в
которой тест измеряет то, для измерения чего он предназначен, то
164
достижение ее должно быть основной целью при разработке тестов.
Надежность важна лишь постольку, поскольку она может обеспечить
высокую валидность. Как же тогда могло оказаться, что Кэттелл
придерживается точки зрения, не только противоположной мнению
большинства специалистов в этой области, но и такой, которая про-
тиворечит статистическим основаниям разработки тестов?
Значение истинных показателей
В главе 1 большое внимание было уделено определению значения
истинных показателей - показателей для некоторой бесконечной
генеральной совокупности заданий - потому что это понятие явля-
ется определяющим.
Поскольку я буду утверждать здесь, что важность надежности по
внутренней согласованности была в психометрии излишне преувели-
чена (то есть я соглашаюсь с мнением Кэттелла) и что она может
быть антитезисом валидности, то существенно важно указать, что я
полностью принимаю статистические аргументы, выдвинутые ранее.
Однако то, что не было вынесено на рассмотрение при обсуждении
математических методов (и то, почему понятие истинного показате-
ля является определяющим) - это психологическая значимость ис-
тинных показателей в том виде, как они определены теоретически.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114
162
числа заданий теста, то обязательно необходимы повторные испыта-
ния.
В шкалах аттитюдов может присутствовать генеральный фактор:
в нашем примере это аттитюд к евреям. Однако, можно возразить,
что этот аттитюд сам зависит от таких факторов, как догматизм
(Rokeach, 1960), авторитарные черты личности (АсЗогпоидр., 1950),
или от личностных факторов, таких как фактор Кэттелла L - подо-
зрительность. Если это так, тогда факторная структура шкалы атти-
тюдов не будет явно выраженной, и любой генеральный фактор мог
бы проявляться только в факторах второго или даже более высокого
порядка. По этой причине факторный анализ как метод конструиро-
вания тестов должен использоваться только тогда, когда есть веские
основания a priori предположить наличие явно выраженного гене-
рального фактора или другой подобной структуры.
Краткий обзор и заключение
(1) Определены объективные тесты и указаны их преимущества.
(2) Предложена таксономия тестов, основывающаяся на двух па-
раметрах: стимульно-инструктивной ситуации и особенностях оце-
нивания ответов. Это позволяет разработчику тестов конструировать
разнообразные формы заданий.
(3) Проведено различие между объективными тестами способно-
стей, темперамента и динамики.
(4) Сформулированы некоторые практические советы по констру-
ированию объективных тестов, прежде всего тестов личности и моти-
вов.
(5) Обсуждены пути преодоления трудностей при разработке тес-
тов.
(6) Обсуждены специфические проблемы объективных тестов ди-
намики.
(7) Приведен список основных принципов конструирования тес-
тов мотивов, основывающийся на психологических публикациях.
(8) Обсуждены различия между тестированием силы мотивов и
целей.
(9) Описано конструирование проективных тестов, после доказа-
тельства значимости разработки таких тестов.
(10) Кратко обсуждено конструирование других тестов мотивов.
(II) Описано конструирование шкал настроений.
(12) Обсуждено конструирование тестов Лайкерта.
Глава 5. Вычисление надежности тестов
В первой главе были кратко обсуждены два основных для психо-
метрических тестов понятия - надежность и валидность. В этой
главе будут описаны методы и процедуры установления надежности
теста. Как уже отмечалось, в смысле практического применения по-
нятие надежности имеет два значения: одно связано с внутренней
согласованностью теста, а другое - с воспроизводимостью результа-
тов. Оба они важны, хотя на практике второе существенно для раз-
работки эффективных тестов, тогда как первое, связанное с внутрен-
ней согласованностью, является значением надежности, учитывае-
мым в классической теории погрешностей тестов.
Однако, с точки зрения разработчика психологических тестов,
существуют различные практические вопросы, касающиеся надеж-
ности тестов, которые следовало бы обсудить: о преимуществах и
недостатках различных способов вычисления надежности, о важно-
сти надежности по внутренней согласованности на практике, в отли-
чие от теории, а также об источниках неудовлетворительной надеж-
ности. Эти вопросы и будут рассмотрены в данной главе.
Важность надежности по внутренней согласованности
при конструировании тестов
Понятие надежности по внутренней согласованности является
центральным для теории погрешностей измерения: чем выше надеж-
ность, тем меньше погрешность и тем ближе значение показателя по
тесту к истинному показателю (см. гл. 1). Из этого делается очевид-
ный вывод: высокая внутренняя согласованность должна быть основ-
ной целью разработчиков тестов, и это точка зрения многих специа-
листов по психометрии (напр., Cronbach, 1970), отражаемая и в
обзорах тестов во многих изданиях Mental Measurement Yearbook
(Buros).
Однако, Кэттелл и его коллеги, являющиеся авторами некоторых
из наиболее известных тестов во многих областях психологических
измерений - например , Культурно-свободного теста интеллекта
(Culture-Fair Intelligence Test, CFIT; Cattell и Cattell, 1960), Шест-
надцатифакторного личностного опросника (16 PF Personality Test;
Cattell и др., 1970), Теста анализа мотивов (Motivation Analysis Test;
Cattell и др., 1970) -постоянно утверждали, что высокая внутренняя
согласованность может быть (а часто и является в таких ложных
областях, как темперамент и динамика) противоположностью высо-
кой валидности. Поскольку валидность определена как степень, в
которой тест измеряет то, для измерения чего он предназначен, то
164
достижение ее должно быть основной целью при разработке тестов.
Надежность важна лишь постольку, поскольку она может обеспечить
высокую валидность. Как же тогда могло оказаться, что Кэттелл
придерживается точки зрения, не только противоположной мнению
большинства специалистов в этой области, но и такой, которая про-
тиворечит статистическим основаниям разработки тестов?
Значение истинных показателей
В главе 1 большое внимание было уделено определению значения
истинных показателей - показателей для некоторой бесконечной
генеральной совокупности заданий - потому что это понятие явля-
ется определяющим.
Поскольку я буду утверждать здесь, что важность надежности по
внутренней согласованности была в психометрии излишне преувели-
чена (то есть я соглашаюсь с мнением Кэттелла) и что она может
быть антитезисом валидности, то существенно важно указать, что я
полностью принимаю статистические аргументы, выдвинутые ранее.
Однако то, что не было вынесено на рассмотрение при обсуждении
математических методов (и то, почему понятие истинного показате-
ля является определяющим) - это психологическая значимость ис-
тинных показателей в том виде, как они определены теоретически.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114