ТОП авторов и книг ИСКАТЬ КНИГУ В БИБЛИОТЕКЕ
Причина в том, что ошибки
прогноза, не влияющие на решение, несущественны для ситуации отбора.
Например, если и Смит, и Джонс-хорошие работники и оба были
приняты на основании теста, то нет белы в том. что с тестом Смит спра-
вился лучше Джонса, тогда как по работе Джонс превосходит Смита.
Роль ценностей в теории решений. Именно теория решений
позволяет оценить тесты по их эффективности в конкретной ситуации.
Такая оценка учитывает не только валидность теста как средства про-
гнозирования определенного показателя, но и ряд других параметров,
включая базовый уровень и индекс отбора. Еще одним важным парамет-
ром является относительная полезность ожидаемых последствий, оценка
их благоприятности и неблагоприятности для конечного результата. От-
сутствие адекватных систем ценностей таких результатов в единой шкале
полезностей составляет главное препятствие для применения теории ре-
шений. В промышленности полезность принимаемых решений часто
можно оценивать в долларах и центах. Однако даже десь трудно дать
денежную оценку доброй воле, социальным отношениям, моральному
духу персонала. Решения в области образования должны приниматься
с учетом целей учебного заведения, общественных ценностей и других
трудно уловимых факторов, а при выборе профессии-с учетом предпоч-
тений и системы ценностей индивида. Неоднократно отмечалось, что
теория решений не поставила проблему ценностей, а сделала ее более яв-
ной. Системы ценностей всегда играли свою роль в принятии решений,
но прежде они четко не фиксировались и не использовались с такой
методичностью.
Цель выбора стратегии в максимизации ожидаемой ее полезности,
вычисленной исходя из полезности и вероятности каждого из возможных
последствий принятого решения. Схема простой стратегии, представлен-
ная на рис. 18, поможет объяснить суть дела. На этой схеме изображена
стратегия решений по данным (рис. 17) применения теста к группе посту-
павших на работу и решениям их принятия или непринятия, сделанным
на основе нормативного показателя теста. Всего имеется четыре воз-
Рис. 18. Простая стратегия принятия решения
Стратегия
Применение теста
с нормативным
результатом
Решение
Принять
Не принять
Результат Вероятность
Правильное принятие 0,38
Ошибочное принятие
Правильное непринятие 0,33
Ошибочное непринятие ] 0,22
161
ВАЛИДНОСТЬ. ИЗМЕРБНИЕ И ИНТЕРПРЕТАЦИЯ
Тест А с двумя
нормативными
результатами
Принять
Нужны
дополнительные
данные
Не принять
Тест В
Принять
Не принять
Рис. 19. Последовательная стратегия принятия решения
можных исхода: правильное и ошибочное принятие, а также правильное
и ошибочное непринятие. Вероятность каждого исхода задается числом
лиц, соответствующих каждой из четырех частей рис. 17. Если всего
имеется 100 человек, то искомые вероятности оцениваются путем деле-
ния каждого из указанных чисел на 100 (см. рис. 18). Кроме того, нам
нужно знать полезности каждого исхода, выраженные в единой шкале.
Общую ожидаемую полезность стратегии находим, перемножая для
каждого из исходов их полезности и вероятности, складывая полученные
произведения и вычитая из суммы издержки тестирования. Последняя
величина отражает тот факт, что тест с низкой валидностью скорее най-
дет применение, если он краток, недорог, легко может проводиться
малоквалифицированным персоналом и пригоден для группового тести-
рования. Применение индивидуального теста, требующего квалифициро-
ванного экспериментатора или дорогостоящего оборудования, оправда-
но, только если его валидность достаточно высока.
Последовательные стратегии и адаптивный подход. В не-
которых ситуациях эффективность теста можно повысить, применяя бо-
лее сложные стратегии, учитывающие большее число параметров. Пре-
жде всего тест может служить для принятия промежуточного, а не
окончательного решения. В случае простой стратегии (см. рис. 17 и 18)
все решения носят окончательный характер. Напротив, на рис. 19 пока-
зана двухэтапная последовательная стратегия. В роли теста А может вы-
ступать короткий, легкий в применении, отсеивающий тест. В зависимо-
сти от его выполнения испытуемые распределяются по трем категориям:
принятые, не принятые и сомнительные. Последние подвергаются более
интенсивному обследованию тестом В, который делит эту группу на
принятых и не принятых.
Последовательное тестирование можно также применять в рамках
одного теста, что позволяет повысить эффективность использования
времени тестирования (L.J.DeWitt, D.J.Weiss, 1974; R.L. Linn,
D.A. Rock, T.A. Cleary, 1969; D.J. Weiss, N.E. Betz, 1973). Правда, в этом
случае оно лучше всего подходит для тестирования с помощью компью-
теров, но в какой-то мере его можно использовать и в групповых тестах
типа <бумага-карандаш>. Существенно, что последовательность зада-
ний или групп заданий определяется их выполнением испытуемым. На-
пример, всем вначале дается набор заданий средней трудности. Те, кто
" См. работу Дж. Виггинса (J. S. Wiggins, 1973, р. 257-274), где приводится вымыш-
162 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
с ними не справился, переводятся на более легкие задания; тем же, кто
показал хорошие результаты, даются более трудные задания. Такие
<разветвления> могут иметь место на нескольких этапах. Главный вы-
игрыш здесь в том, что каждый испытуемый получает только те задания,
которые отвечают его уровню, вместо того чтобы выполнять все зада-
ния. Модели последовательного тестирования будут рассмотрены далее
в гл.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171
прогноза, не влияющие на решение, несущественны для ситуации отбора.
Например, если и Смит, и Джонс-хорошие работники и оба были
приняты на основании теста, то нет белы в том. что с тестом Смит спра-
вился лучше Джонса, тогда как по работе Джонс превосходит Смита.
Роль ценностей в теории решений. Именно теория решений
позволяет оценить тесты по их эффективности в конкретной ситуации.
Такая оценка учитывает не только валидность теста как средства про-
гнозирования определенного показателя, но и ряд других параметров,
включая базовый уровень и индекс отбора. Еще одним важным парамет-
ром является относительная полезность ожидаемых последствий, оценка
их благоприятности и неблагоприятности для конечного результата. От-
сутствие адекватных систем ценностей таких результатов в единой шкале
полезностей составляет главное препятствие для применения теории ре-
шений. В промышленности полезность принимаемых решений часто
можно оценивать в долларах и центах. Однако даже десь трудно дать
денежную оценку доброй воле, социальным отношениям, моральному
духу персонала. Решения в области образования должны приниматься
с учетом целей учебного заведения, общественных ценностей и других
трудно уловимых факторов, а при выборе профессии-с учетом предпоч-
тений и системы ценностей индивида. Неоднократно отмечалось, что
теория решений не поставила проблему ценностей, а сделала ее более яв-
ной. Системы ценностей всегда играли свою роль в принятии решений,
но прежде они четко не фиксировались и не использовались с такой
методичностью.
Цель выбора стратегии в максимизации ожидаемой ее полезности,
вычисленной исходя из полезности и вероятности каждого из возможных
последствий принятого решения. Схема простой стратегии, представлен-
ная на рис. 18, поможет объяснить суть дела. На этой схеме изображена
стратегия решений по данным (рис. 17) применения теста к группе посту-
павших на работу и решениям их принятия или непринятия, сделанным
на основе нормативного показателя теста. Всего имеется четыре воз-
Рис. 18. Простая стратегия принятия решения
Стратегия
Применение теста
с нормативным
результатом
Решение
Принять
Не принять
Результат Вероятность
Правильное принятие 0,38
Ошибочное принятие
Правильное непринятие 0,33
Ошибочное непринятие ] 0,22
161
ВАЛИДНОСТЬ. ИЗМЕРБНИЕ И ИНТЕРПРЕТАЦИЯ
Тест А с двумя
нормативными
результатами
Принять
Нужны
дополнительные
данные
Не принять
Тест В
Принять
Не принять
Рис. 19. Последовательная стратегия принятия решения
можных исхода: правильное и ошибочное принятие, а также правильное
и ошибочное непринятие. Вероятность каждого исхода задается числом
лиц, соответствующих каждой из четырех частей рис. 17. Если всего
имеется 100 человек, то искомые вероятности оцениваются путем деле-
ния каждого из указанных чисел на 100 (см. рис. 18). Кроме того, нам
нужно знать полезности каждого исхода, выраженные в единой шкале.
Общую ожидаемую полезность стратегии находим, перемножая для
каждого из исходов их полезности и вероятности, складывая полученные
произведения и вычитая из суммы издержки тестирования. Последняя
величина отражает тот факт, что тест с низкой валидностью скорее най-
дет применение, если он краток, недорог, легко может проводиться
малоквалифицированным персоналом и пригоден для группового тести-
рования. Применение индивидуального теста, требующего квалифициро-
ванного экспериментатора или дорогостоящего оборудования, оправда-
но, только если его валидность достаточно высока.
Последовательные стратегии и адаптивный подход. В не-
которых ситуациях эффективность теста можно повысить, применяя бо-
лее сложные стратегии, учитывающие большее число параметров. Пре-
жде всего тест может служить для принятия промежуточного, а не
окончательного решения. В случае простой стратегии (см. рис. 17 и 18)
все решения носят окончательный характер. Напротив, на рис. 19 пока-
зана двухэтапная последовательная стратегия. В роли теста А может вы-
ступать короткий, легкий в применении, отсеивающий тест. В зависимо-
сти от его выполнения испытуемые распределяются по трем категориям:
принятые, не принятые и сомнительные. Последние подвергаются более
интенсивному обследованию тестом В, который делит эту группу на
принятых и не принятых.
Последовательное тестирование можно также применять в рамках
одного теста, что позволяет повысить эффективность использования
времени тестирования (L.J.DeWitt, D.J.Weiss, 1974; R.L. Linn,
D.A. Rock, T.A. Cleary, 1969; D.J. Weiss, N.E. Betz, 1973). Правда, в этом
случае оно лучше всего подходит для тестирования с помощью компью-
теров, но в какой-то мере его можно использовать и в групповых тестах
типа <бумага-карандаш>. Существенно, что последовательность зада-
ний или групп заданий определяется их выполнением испытуемым. На-
пример, всем вначале дается набор заданий средней трудности. Те, кто
" См. работу Дж. Виггинса (J. S. Wiggins, 1973, р. 257-274), где приводится вымыш-
162 ПРИНЦИПЫ ПСИХОЛОГИЧЕСКОГО ТЕСТИРОВАНИЯ
с ними не справился, переводятся на более легкие задания; тем же, кто
показал хорошие результаты, даются более трудные задания. Такие
<разветвления> могут иметь место на нескольких этапах. Главный вы-
игрыш здесь в том, что каждый испытуемый получает только те задания,
которые отвечают его уровню, вместо того чтобы выполнять все зада-
ния. Модели последовательного тестирования будут рассмотрены далее
в гл.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171