ГЛАВА 6 ПСИХОЛОГИЧЕСКОЕ ИЗМЕРЕНИЕ - Учебное пособие рекомендовано Министерством общего и профессионального образования...
.RU

ГЛАВА 6 ПСИХОЛОГИЧЕСКОЕ ИЗМЕРЕНИЕ - Учебное пособие рекомендовано Министерством общего и профессионального образования...


^ ГЛАВА 6 ПСИХОЛОГИЧЕСКОЕ ИЗМЕРЕНИЕ

Содержание. Основания теории измерений, классическая теория психологических измерений. Типы шкал и виды допустимых пре­образований. Виды шкальных преобразований. Психологическое тестирование, обобщенная модель теста. Основные виды психоло­гических измерений, их классификация. Классическая статистичес­кая теория теста. Измерительные качества теста и их оценка. Сто­хастическая теория тестов (теория выбора ответа) и ее модифика­ции: модели Лазарсфельда, Раша, Бирнбаума. Оценка трудности за­даний и градуировка теста.

^ Основные понятия. Измерение, шкалы, числовая система с отно­шениями, эмпирическая система с отношениями, отображение, по­рядок, номинация, метрика, свойство, шкалограмма, тест, валид-ность, надежность, гомогенность, прогностичность, тестовые нор­мы, латентно-структурный анализ, латентная переменная, логит, трудность задания, дискриминантность задания.

^ 6.1. Элементы теории психологических измерений

Измерение может быть самостоятельным исследовательским ме­тодом, но может выступать как компонент целостной процедуры эксперимента.

Как самостоятельный метод, он служит для выявления индиви­дуальных различий поведения субъекта и отражения им окружаю­щего мира, а также для исследования адекватности отражения (тра­диционная задача психофизики) и структуры индивидуального опы­та.

Измерение включается в контекст эксперимента как метод реги­страции состояния объекта исследования и соответственно измене­ния этого состояния в ответ на экспериментальное воздействие. /^

Исследования, проводимые по плану временных проб, зачастую сводятся лишь к измерениям особенностей поведения испытуемых

179

через различные промежутки времени. Время выступает в этом слу­чае как единственная переменная, воздействующая на объект.

На основе теории измерения строятся психологические тесты. Тест — сокращенная по времени и упрощенная процедура психоло­гического измерения, применяемая для решения практических (иногда — исследовательских) задач.

В чем же заключается суть психологического измерения?

В психологии различают три основные процедуры психологичес­кого измерения. Основанием для различения является объект изме­рения. Во-первых, психолог может измерять особенности поведения людей для того, чтобы определить, чем один человек отличается от другого с точки зрения выраженности тех или иных свойств, нали­чия того или иного психического состояния или для отнесения его к определенному типу личности. Психолог, измеряя особенности по­ведения, определяет сходства или различия людей. Психологичес­кое измерение становится измерением испытуемых.

Во-вторых, исследователь может использовать измерение какза-дачу испытуемого, в ходе выполнения которой он измеряет (класси­фицирует, ранжирует, оценивает и т.п.) внешние объекты: других людей, стимулы или предметы внешнего мира, собственные состоя­ния. Часто эта процедура оказывается измерением стимулов. Поня­тие "стимул" используется в широком смысле, а не вузкопсихофи-зическом или поведенческом. Под стимулом понимается любой шкалируемый объект.

В-третьих, существует процедура так называемого совместного измерения (или совместного шкалирования) стимулов и людей. При этом предполагается, что "стимулы" и "испытуемые" могут быть расположены на одной оси. Поведение испытуемого рассматрива­ется как проявление взаимодействия личности и ситуации. Подоб­ная процедура применяется при тестировании знаний и задач по Кумбсу, Гуттману или Рашу.

Внешне процедура психологического измерения ничем не отли­чается от процедуры психологического эксперимента. Более того, в психологической исследовательской практике "измерение" и "экс­перимент" часто используются как синонимы. Однако при проведе­нии психологического эксперимента нас интересуют причинные связи между переменными, а результатом психологического изме­рения является всего лишь отнесение испытуемого либо оценивае­мого им объекта к тому или иному классу, точке шкалы или про­странству признаков.

В строгом смысле слова психологическим измерением можно назвать лишь измерение поведения испытуемых, т.е. измерение в

180

первом значении этого понятия.

Психологическое измерение стимулов является задачей, которую выполняет не экспериментатор, а испытуемый в ходе обычного пси­хологического (точнее — психофизического) эксперимента. В этом случае измерение используется только как методический прием на­ряду с другими методами психологического исследования; испытуе­мый же "играет роль" измерительного прибора. Поскольку резуль­таты такого рода "измерений" интерпретируются на основе той же модели измерений, а обрабатываются с применением тех же мате­матических процедур, что и результаты измерения поведения испы­туемых, в психологии принято употреблять понятие "психологичес­кое измерение" в двух различных смыслах.

Процедура психологического измерения состоит из ряда этапов, аналогичных этапам экспериментального исследования.

Основой психологических измерений является математическая теория измерений — раздел психологии, интенсивно развивающий­ся параллельно и в тесном взаимодействии с развитием процедур психологического измерения. Сегодня это — крупнейший раздел ма­тематической психологии.

С математической точки зрения измерением называется опера­ция установления взаимно однозначного соответствия множества объектов и символов (как частный случай — чисел). Символы (чис­ла) приписываются вещам по определенным правилам.

Правила, на основании которых числа приписываются объектам, определяют шкалу измерения.

Измерительная шкала — основное понятие, введенное в психо­логию в 1950 г. С.С.Стивенсом; его трактовка шкалы и сегодня ис­пользуется в научной литературе.

Итак, приписывание чисел объектам создает шкалу. Создание шкалы возможно, поскольку существует изоморфизм формальных систем и систем действий, производимых над реальными объекта­ми.

Числовая система является множеством элементов с реализован­ными на нем отношениями и служит моделью для множества изме­ряем ых объектов.

"Различают несколько типов таких систем и соответственно не­сколько типов шкал. Операции, а именно — способы измерения объ­ектов, задают тип шкалы. Шкала в свою очередь характеризуете^ видом преобразований, которые могут быть отнесены к результатам измерения. Если не соблюдать это правило, то структура шкалы на­рушится, а данные измерения нельзя будет осмысленно интерпре­тировать.

181

Тип шкалы однозначно определяет совокупность статистических методов, которые могут быть применены для обработки данных из­мерения.

Шкала (лат. scala — лестница) в буквальном значении есть изме­рительный инструмент.

П.Суппес и Дж. Зиппес дали классическое определение шкалы:

"ПустьА—эмпирическая система с отношениями (ЭСО), R— пол­ная числовая система с отношениями (ЧСО), f— функция, которая гомоморфно отображает А в подсистему R (если в области нет двух разных объектов с одинаковой мерой, что является отображением изоморфизма). Назовем шкалой упорядоченную тройку ".

Обычно в качестве числовой системы R выбирается системадей-ствительных чисел или ее подсистема. Множество А — это сово­купность измеряемых объектов с системой отношений, определен­ной на этом множестве. Отображение f— правило приписывания каждому объекту определенного числа.

В настоящее время определение Суппеса и Зиппеса уточнено. Во-первых, в определение шкалы вводится G — группа допустимых пре­образований. Во-вторых, множество А понимается не только как числовая система, но и каклюбая формальная знаковая система, ко­торая может быть поставлена в отношение гомоморфизма с эмпи­рической системой. Таким образом, шкала — это четверка <А; R; f;

G>. Согласно современным представлениям, внутренней характе­ристикой шкалы выступает именно группа G, а f является лишь при­вязкой шкалы к конкретной ситуации измерения.

В настоящее время под измерением понимается конструирова­ние любой функции, которая изоморфно отображает эмпирическую структуру в символическую структуру. Как уже отмечено выше, со­всем не обязательно такой структурой должна быть числовая. Это может быть любая структура, с помощью которой можно измерить характеристики объектов, заменив их другими, более удобными в обращении (в том числе — числами).

Подробнее математические основания теории психологических измерений изложены в монографии А.Д.Логвиненко "Измерения в психологии: математические основы" (1993).

Существуют следующие основные типы шкал: наименований, порядка, интервалов, отношений. Ряд специалистов выделяют так­же абсолютную шкалу и шкалу разностей.

Рассмотрим особенности каждого типа шкал.

^ Шкала наименований Шкала наименований получается путем присвоения "имен" объ-

182

ектам. При этом нужно разделить множество объектов на непересе­кающиеся подмножества.

Иными словами, объекты сравниваются друг с другом и опреде­ляется их эквивалентность — неэквивалентность. В результате про­цедуры образуется совокупность классов эквивалентности. Объек­ты, принадлежащие одному классу, эквивалентны друг другу и от­личны от объектов, относящихся к другим классам. Эквивалентным объектам присваиваются одинаковые имена.

Операция сравнения является первичной для построения любой шкалы. Для построения такой шкалы нужно, чтобы объект был ра­вен или подобен сам себе (х=хдля всех значений х), т.е. на множе­стве объектов должно быть реализовано отношение рефлексивнос­ти. Для психологических объектов, например испытуемых или пси­хических образов, это отношение реализуемо, если абстрагировать­ся от времени. Но поскольку операции попарного (в частности) срав­нения множества всех объектов эмпирически реализуются неодно­временно, то в ходе эмпирического измерения даже это простейшее условие не выполняется.

Следует запомнить: любая шкала есть идеализация, модель ре­альности, даже такая простейшая, как шкала наименований.

На объектах должно быть реализовано отношение симметрии (R (X=Y) -> R (Y=X)) и транзитивности R (X=Y, Y=Z) -> R (X=Z). Но на множестве результатов психологических экспериментов эти условия могут нарушаться.

Кроме того, многократное повторение эксперимента (накопле­ние статистики) приводит к "перемешиванию" состава классов: в лучшем случае мы можем получить оценку, указывающую на веро­ятность принадлежности объекта к классу.

Таким образом, нет оснований говорить о шкале наименований (номинативной шкале или шкале строгой классификации) как про­стейшей шкале, начальном уровне измерения в психологии.

Существуют более "примитивные" (с эмпирической, но не с ма­тематической точки зрения) виды шкал: шкалы, основанные на от­ношениях толерантности; шкалы "размытой" классификации и т.п.

О шкале наименований можно говорить в том случае, когда эм­пирические объекты просто "метятся" числом. Примером являются номера на майках футболистов: цифру " 1" по традиции получает вра­тарь, и это указывает на то, что по своей функции он отличен от всех остальных ифоков; но его функция на футбольном поле эквивалент­на функции других вратарей, если не учитывать качество игры.

В принципе вместо чисел при использовании шкалы наименова­ний необходимо применять другие символы, ибо числовая шкала

183

(натуральный ряд чисел) характеризуется разными системами опе­раций.

Итак, если объекты в каком-то отношении эквивалентны, то мы имеем право отнести их к одному классу. Главное, как говорил Сти­вене, не приписывать один и тот же символ разным классам или раз­ные символы одному и тому же классу.

Для этой шкалы допусти мол юбое взаимно однозначное преоб­разование.

Несмотря на тенденцию "завышать" мощность шкалы, психоло­ги очень часто применяют шкалу наименований в исследованиях. "Объективные" измерительные процедуры при диагностике личнос­ти приводят ктипологизации: отнесению конкретной личности к тому или иному типу. Примером такой типологии являются класси­ческие темпераменты: холерик, сангвиник, меланхолик и флегматик.

В "субъективной" психологии измерения используются также классификации. Примеры: сортировка объектов по Гарднеру, метод константных стимулов в психофизике и т.д.

Исследователь, пользующийся шкалой наименований, может применять следующие инвариантные статистики: относительные частоты, моду, корреляции случайных событий, критерий^2.

^ Шкала порядка

Порядковая шкала образуется, если на множестве реализовано одно бинарное отношение — порядок (отношения "не больше" и "меньше"). Построение шкалы порядка — процедура более слож­ная, чем создание шкалы наименований.

На шкале порядка объект может находиться "между" двумя дру­гими, причем если а "больше" b, b "больше" с, то а "больше" с (пра­вило транзитивности отношений).

Классы эквивалентности, выделенные при помощи шкалы наиме­нований, могут быть упорядочены по некоторому основанию. Раз­личают шкалу строгого порядка (строгая упорядоченность) и шкалу слабого порядка (слабая упорядоченность). В первом случае на эле­ментах множества реализуются отношения "не больше" и "меньше", а во втором — "не больше или равно" и "меньше или равно".

Шкала порядка сохраняет свои свойства при изотонических пре­образованиях. Все функции, которые не имеют максимума (моно­тонные), отвечают этой группе преобразований.

Значения величин можно заменять квадратами, логарифмами, нормализовать и т.д. При таких преобразованиях значений величин, определенных по шкале порядка, место объектов на шкале не изме­няется, т.е. не происходит инверсий.

184

Еще Стивене высказывал точку зрения, что результаты большин­ства психологических измерений в лучшем случае соответствуют лишь шкалам порядка.

Шкалы порядка широко используются в психологии познаватель­ных процессов, экспериментальной психосемантике, социальной психологии: ранжирование, оценивание, в том числе педагогичес­кое, дают порядковые шкалы. Классическим примером использова­ния порядковых шкал является тестирование личностных черт, а также способностей. Большинство же специалистов в области тес­тирования интеллекта полагают, что процедура измерения этого свойства позволяет использовать интервальную шкалу и даже шкалу отношений.

Как бы то ни было, эта шкала позволяет ввести линейную упоря­доченность объектов на некоторой оси признака. Тем самым вво­дится важнейшее понятие — измеряемое свойство, или линейное свойство, тогда как шкала наименований использует "вырожденный" вариант интерпретации понятия "свойство": "точечное" свойство (свойство есть — свойства нет).

Переходным вариантом шкалы можно считать дихотомическую классификацию, проводимую по принципу "есть свойство — нет свойства" (I; 0) при 1 > 0. Дихотомическое разбиение множества позволяет применять не только порядок, но и метрику. Для интер­претации данных, полученных посредством порядковой шкалы, можно использовать более широкий спектр статистических мер (в дополнение к тем, которые допусти мы для шкалы наименований).

В качестве характеристики центральной тенденции можно ис­пользовать медиану, а в качестве характеристики разброса — про-центили. Для установления связи двух измерений допустима поряд­ковая корреляция (т-Кэнделла ир-Спирмена).

Числовые значения порядковой шкалы нельзя складывать, вы­читать, делить и умножать.

^ Шкала интервалов

Шкала интервалов является первой метрической шкалой. Собст­венно, начиная с нее, имеет смысл говорить об измерениях в узком смысле этого слова — о введении меры на множестве объектов. Шкала интервалов определяет величину различий между объектами в про­явлении свойства. С помощью шкалы интервалов можно сравнивать два объекта. При этом выясняют, на сколько более или менее выра­жено определенное свойство у одного объекта, чем у другого.

Шкала интервалов очень часто используется исследователями. Классическим примером применения этой шкалы в физике являет-

185

ся измерение температуры по Цельсию. Шкала интервалов имеет масштабную единицу, но положение нуля на ней произвольно, по­этому нет смысла говорить, во сколько раз больше или меньше ут­ренняя температура воздуха, измеренная шкалой Цельсия, чем днев­ная.

Значения интервальной шкалы инвариантны относительно груп­пы аффинных преобразований прямой. То есть мы имеем право из­менять масштаб шкалы, умножая каждое значение на константу, и производить ее сдвиг относительно произвольно выбранной точки на любое расстояние вправо или влево (прибавлять или отнимать константу).

Интервальная шкала позволяет применять практически всю пара­метрическую статистику для анализа данных, полученных с ее по­мощью. Помимо медианы и моды для характеристики центральной тенденции используется среднее арифметическое, а для оценки раз­броса—дисперсия. Можно вычислять коэффициенты асимметрии и эксцесса и другие параметры распределения. Для оценки величи­ны статистической связи между переменными применяется коэф­фициент линейной корреляции Пирсона и т.д.

Большинство специалистов по теории психологических измере­ний полагают, что тесты измеряют психические свойства с по­мощью шкалы интервалов. Прежде всего это касается тестов интел­лекта и достижений. Численные значения одного теста можно пере­водить в численные значения другого теста с помощью линейного преобразования: х' = ах + Ь.

Ряд авторов полагают, что относить тесты интеллекта к шкалам интервалов нет оснований. Во-первых, каждый тест имеет "нуль" — любой индивид может получить минимальный балл, если не решит ни одной задачи в отведенное время. Во-вторых, тест имеет макси­мум шкалы — балл, который испытуемый может получить, решив все задачи за минимальное время. В-третьих, разница между отдель­ными значениями шкалы неодинакова. По крайней мере, нет ника­ких теоретических и эмпирических оснований утверждать, что 100 и 120 баллов по шкале IQ отличаются на столько же, на сколько 80 и 100 баллов.

Скорее всего, шкала любого теста интеллекта является комби­нированной шкалой, с естественным минимумом и\или максимумом, но порядковой. Однако эти соображения не мешают тестологам рас­сматривать шкалу IQ как интервальную, преобразуя "сырые" значения в шкальные с помощью известной процедуры "нормализации" шкалы.

186

^ Шкала отношений

Шкала отношений — наиболее часто используемая в физике. По крайней мере, идеалом измерительной процедуры является получе­ние таких данных о выраженности свойств объектов, когда можно сказать, во сколько раз один объект больше или меньше другого.

Это возможно лишь тогда, когда помимо определения равенства, рангового порядка, равенства интервалов известно равенство отно­шений. Шкала отношений отличается от шкалы интервалов тем, что на ней определено положение "естественного" нуля. Классический пример — шкала температур Кельвина.

В психологии шкалы отношений практически не применяются. Одним из исключений являются шкалы оценки компетентности, основанные на модели Раша (о ней пойдет речь позже). Действи­тельно, вполне можно представить уровень "нулевой" осведомлен­ности испытуемого в какой-то области знаний (например, знание автором этого учебника эскимосского языка) или же "нулевой" уро­вень владения каким-либо навыком. Авторы стохастической теории теста доказывают, что, введя единую шкалу "трудности задачи — спо­собности испытуемого", можно измерить во сколько раз одна зада­ча труднее другой или же один испытуемый компетентнее другого.

Значения шкалы отношений инвариантны относительно преоб­разования вида: х' = ах.

Значения шкалы можно умножать на константу. К ним приме­нимы любые статистические меры.

Измерения массы, времени реакции и выполнения тестового за­дания — области применения шкалы отношений.

Отличием этой шкалы от абсолютной является отсутствие "есте­ственной" масштабной единицы.

^ Другие шкалы

а. Дихотомическая классификация часто рассматривается как ва­риант шкалы наименований. Это верно, за исключением одного слу­чая, когда мы измеряем свойство, имеющее всего лишь два уровня выраженности: "есть — нет", так называемое "точечное" свойство. Примеров таких свойств много: наличие или отсутствие у испытуе­мою какой-либо наследственной болезни (дальтонизм, болезньДау-на, гемофилия и др.), абсолютного слуха и др. В этом случае иссле­дователь имеет право проводить "оцифровку" данных, присваивая каждому из типов цифру "1" или "О", и работать с ними, как со зна­чениями шкалы интервалов.

В ряде пособий неверно утверждается, что шкала наименований различает предметы по проявлению свойства, но не различает их по

187

уровню проявления свойства. Шкала наименований вообще не ос­нована на понятии "свойство", которое вводится, лишь начиная со шкалы порядка, а базируется на представлении о "типе" — множе­стве эквивалентных объектов. Для того, чтобы ввести понятие "свой­ство", требуется ввести отношения не между объектами, а между классами (типами) эквивалентных объектов (которые, конечно, мо­гут содержать всего лишь один объект).

б. Шкала разностей, в отличие от шкалы отношений, не имеет естественного нуля, но имеет естественную масштабную единицу из­мерения. Ей соответствует аддитивная группа действительных чисел. Классическим примером этой шкалы является историческая хронология. Она сходна со шкалой интервалов. Разница лишь в том, что значения этой шкалы нельзя умножать (делить) на константу. Поэтому считается, что шкала разностей — единственная с точ­ностью до сдвига. Некоторые исследователи полагают, что Иисус Христос родился за четыре года до общепринятого начала нашего христианского летосчисления. Сдвиг на четыре года назад ничего не изменит в хронологии. Можно использовать мусульманское ле-тосчисление или же от сотворения мира. Кому как нравится.

В психологии шкала разностей используется в методиках парных сравнений.

в. Абсолютная шкала является развитием шкалы отношений и от­личается от нее тем, что обладает естественной единицей измере­ния. В этом ее сходство со шкалой разностей. Число решенных задач ("сырой" балл), если задачи эквивалентны, — одно из проявлений абсолютной шкалы.

В психологии абсолютные шкалы не используются. Данные, по­лученные с помощью абсолютной шкалы, не преобразуются, шкала тождественна сама себе. Любые статистические меры допустимы.

г. В литературе, посвященной проблемам психологических из­мерений, упоминаются и другие типы шкал: ординальная (порядко­вая) с естественным началом, лог-интервальная, упорядоченная мет­рическая и др. О свойствах порядковой шкалы с естественным нача­лом упоминалось в данном разделе.

Все написанное выше относится к одномерным шкалам. Шкалы могут быть и многомерными: шкалируемый признак в этом случае имеет ненулевые проекции на два (или более) соответствующих пара­метра. Векторные свойства, в отличие от скалярных, являются много­мерными.

Шкальныепреобразования Возможны два варианта шкальных преобразований:

188

1) повышение мощности шкалы;

2) понижение мощности шкалы.

Вторая из процедур является тривиальной. Поскольку все воз­можные процедуры преобразований, которые приемлемы для более мощной шкалы (например, шкалы интервалов), допустимы и для менее мощной (например, шкалы порядка), то у нас есть право рас­сматривать данные, полученные с помощью интервальной шкалы, как порядковые или, допустим, порядковую шкалу — в качестве но­минальной.

Другое дело, если (по каким-либо соображениям) у нас возника­ет потребность перейти от шкалы наименований к шкале порядка и т.д. Для этого требуется вводить необъективные (с позиций матема­тической теории измерений) допущения и эмпирические приемы, базирующиеся лишь на интуиции и правдоподобных рассуждениях. Но в большинстве случаев производится эмпирическая проверка: в какой мере данные, полученные с помощью "слабой" шкалы, удов­летворяют требованиям более "мощной" шкалы.

Рассмотрим переход от шкалы наименований к порядковой шка­ле. Естественно, для этого нужно упорядочить классы по некоторо­му основанию. Предположим, что принадлежность объекта к неко­торому классу есть случайная функция. Тогда переход от номина­тивной шкалы к шкале порядка возможен в том случае, если суще­ствует упорядоченность классов. Во-первых, для каждого элемента существует модальный класс, вероятность принадлежности к кото­рому значимо больше, чем к другим классам. Во-вторых, для каж­дого элемента существует только одна функция вероятностной при­надлежности к множеству классов, такая, что эти классы можно упо­рядочить единственным образом. Проще говоря, каждый класс дол­жен иметь только двух соседей: "слева" и "справа", а порядок сосед­ства определяется эмпирической частотой попадания элементов в различные классы. В "свой" класс элемент попадает чаще, в сосед­ние со "своим" — реже и в отдаленные — еще реже. При обработке данных осуществляется эмпирическая проверка каждой тройки клас­сов на стохастическую транзитивность. Преобразование шкалы по­рядка в шкалу интервалов — более частый вариант. Он подробно описан в литературе, посвященной теории психологических изме­рений, в частности в теории тестов.

^ 6.2. Виды психологических измерений

В психологии используется множество конкретных измеритель­ных методик. Удобную классификацию психологических измерений дал С.С. Паповян. Будем придерживаться ее вдальнейшем изложе­нии.

Методы психологических измерений могут быть классифициро­ваны по различным основаниям:

1) процедуре сбора "сырых" данных;

2) предмету измерения;

3) виду используемой шкалы;

4) типу шкалируемого материала;

5) моделям шкалирования;

6) числу мерностей (одномерные и многомерные);

7) мощности метода сбора данных (мощные или слабые);

8)типу ответа индивида;

9) какими они являются: детерминистскими или вероятностны­ми.

Для психолога-экспериментатора главными основаниями явля­ются процедура сбора данных и предмет измерения.

Чаще всего применяются следующие процедуры субъективного шкалирования:

^ Метод ранжирования. Все объекты представляются испытуемо­му одновременно, он должен их упорядочить по величине измеряе­мого признака.

Метод парных сравнений. Объекты предъявляются испытуемому попарно (число предъявлении равно числу сочетаний (п)). Испы­туемый оценивает сходства—различия между членами пар.

^ Метод абсолютной оценки. Стимулы предъявляются по одному. Испытуемый дает оценку стимула в единицах предложенной шка­лы.

Метод выбора. Индивиду предлагается несколько объектов (сти­мулов, высказываний и т.д.), из которых он должен выбрать те, ко­торые соответствуют заданному критерию.

По предмету измерения все методики делятся на а) методики шкалирования объектов; б) методики шкалирования индивидов и в) методики совместного шкалирования объектов и индивидов.

Методики шкалирования объектов (стимулов, высказываний и др.) встраиваются в контекст экспериментальной или измеритель­ной процедуры. По своей сути они не являются задачей исследова­теля, а представляют собой экспериментальную задачу испытуемо­го. Исследователь использует эту задачу для выявления поведения

190

испытуемого (в данном случае — реакций, действий, вербальных оце­нок и др.), чтобы знать особенности его психики. Поэтому нет ос­нований причислять эти техники к методам психологического из­мерения поведения, если под измерением понимать только задачу экспериментатора.

При субъективном шкалировании испытуемый выполняет функ­ции измерительного прибора, а экспериментатор мало интересуется особенностями "измеряемых" испытуемым объектов и исследует сам "измерительный прибор".

Парадигма субъективного шкалирования перешла в другие об­ласти психологии из психофизики, где классификация задач испы­туемого в эксперименте очень хорошо разработана. Этого нельзя сказать о других областях психологии.

Но по укоренившейся традиции методики и модели субъектив­ного шкалирования рассматриваются в одном разделе с техниками и моделями измерения поведения. Традиция эта связана с тем, что и при "шкалировании объектов", и при "шкалировании индивидов" в ходе обработки и интерпретации данных используется сходный ма­тематический аппарат.

Процедуре одномерного и многомерного субъективного шкали­рования посвящена обширная научная и учебная литература (см. "Списоклитературы").

Остановимся на моделях совместного шкалирования объектов и испытуемых. Модели делятся на два вида: детерминистические и вероятностные. Суть этих моделей в том, что и объекты, и индиви­ды, которые высказывают суждения об объектах, "отображаются" на одну шкалу на основании обработки данных поведенческого из­мерения либо субъективного шкалирования.

Основными детерминистическими моделями являются метод раз­вертывания К.Кумбса и шкалограммный анализ Л. Гуттмана. К ве­роятностным моделям относится латентно-структурный анализ IRT (item response theory) (см. разд. 6.5). Здесь же мы кратко остановим­ся на детерминистических моделях.

Метод развертывания Кумбса исходит из предположения, что объекты и индивиды могут быть размещены на шкале одномерного признака. Индивид может предпочитать один объект другому. Су­ществует "идеальная точка" индивида — субъективный эталон. Ин­дивид предпочитает тот стимул, который "ближе" к субъективному эталону.

Процедура измерения состоит в следующем. Испытуемому предъ­являются пары стимулов, которые он сравнивает. Формируется мат-рица частоты предпочтений стимулов размером m х п (т — стиму-

191

лы, n — индивиды). В клеточках матрицы — относительные частоты предпочтений.

Шкалограммный анализ Гуттмана используется для построения опросников. Наиболее часто применяется при дихотомической оцен­ке ответа испытуемого ("да" — "нет", "решил" — "не решил").

Предполагается следующее: принятие индивидом пункта (реше­ние задачи, ответ "да" и т.д.) означает то, что его шкальное значение не меньше величины пункта. Если индивид решает данную задачу, то он решает любую другую (болеелегкую) задачу. Принятие инди­видом пункта опросника или правильное решение задачи обознача­ется как " 1", неприятие пункта или неверное решение — "О".

В ходе обработки строки и столбцы исходной матрицы данных переставляются так, чтобы она соответствовала "совершенной" шка-лограмме: матрица выше диагонали, т.е. верхняя правая часть мат­рицы должна состоять из единиц, а нижняя левая — включать толь­ко нули. Порядок индивидов по строкам должен соответствовать порядку заданий по столбцам по величине выраженности свойства.

Задачи




1

2

3

4 5

1

1

1

1

1 1

2

0

1

1

1 1

Индивиды з

0

0

1

1 1

4

0

0

0

1 1

5

0

0

0

0 1


Практически никогда идеальная шкалограмма не получается. Оценка одномерности признака предложена Гуттманом и назы­вается коэффициентом воспроизводимости-.

R = I - e/nk,

где

е — число "ошибок" в откликах испытуемых, n — количество испытуемых, k — число заданий.

Существует также модификация модели Гуттмана, описывающая процедуру с несколькими вариантами ответов.

^ 6.3. Тестирование и теория измерений

Тестирование (в частности, психологическое) является разновид­ностью процедуры измерения свойств объекта. Свойство — фило-

192

софская категория, выражающая такую сторону предмета, которая обусловливает его различия и общность с другими предметами и об­наруживается в его отношении к ним.

В логике под свойством понимается одноместный предикат вида Р(х): например, х-город — в отличие от отношения, которое также является одноместным предикатом. Свойство может быть много­местным предикатом, а отношение — одноместным, например:

"Петр любит самого себя". Свойство ограничивает область объек­тов, которым оно приписывается. В результате операции приписы­вания свойства объектов становится меньше, чем было до этого. От­ношение же всегда образует новые объекты, например, Р (х, у, z), где х — мужчины,у — женщины, z — дети; если Р — генетическое отношение, то связанные этим отношением х, у и z дают новый объект — человечество.

Отсюда ясно, что, вводя понятие "свойство", мы выделяем класс психических сущностей, которые этим свойством обладают.

Свойства классифицируются по наличию интенсивности и ее из­менениям. При этом различают три основных типа свойств:

а) точечные;

б) линейные;

в) многомерные.

Рассмотрим первый тип: точечные свойства. Человек может быть:

либо мертвым, либо живым; или мужчиной, или женщиной; или холериком, или сангвиником. Ни одна женщина не может быть чуть-чуть беременной. Существуют свойства, которые не имеют интен­сивности и могут рассматриваться как точечные или "свойства ну­левого измерения". Такие свойства обладают определенностью, ка­чественной, но не количественной.

Второй тип свойств образуют линейные свойства (одномерные свойства). Последний термин, с нашей точки зрения, более удачен. Другие линейные свойства, присущие предмету, всегда имеют оп­ределенную интенсивность, причем могут изменяться лишь в на­правлении уменьшения или увеличения этой интенсивности. Тако­вы масса, упругость, вязкость, мощность, температура, физическая сила человека, его рост и т.д. Отметим, что большинство психичес-ких'свойств относится традиционно к этому типу. В частности, фак­торная теория интеллекта вводит понятия: "общий интеллект", "кре­ативность", "дивергентное мышление", основываясь на том, что эти свойства являются одномерными (линейными).

Одномерные (линейные) свойства помимо качественной опре­деленности обладают также количественной. Обычно вводится по­нятие интервала интенсивности, под которым понимается вся сово-,

7 Экспериментальная психологи 193

купность интенсивностей данного свойства (диапазон интенсивнос­ти). Физические свойства такого рода называются скалярами.

Примером двухмерных свойств являются векторные величины. Двухмерные свойства можно представить как комбинацию одномер­ных (разложение вектора на плоскости — комбинация скалярных ве­личин: величины угла и длины отрезка). Их обобщением являются многомерные свойства, которые можно определить как свойства, способные изменяться вп-отношениях: пространственные векторы в математике, тензоры в физике и т.д.

Между точечными, линейными и многомерными свойствами су­ществует простое отношение сводимости: многомерное свойство может быть представлено как совокупность линейных свойств, али-нейное — как множество точечных свойств. Соответственно набор точечных свойств можно представить в качестве псевлолинейного свойства, а набор линейных — как псевдомногомерное свойство.

Можно теоретически предусмотреть 4-й случай, когда свойство качественно не определено. Это парадоксально только на первый взгляд. Возможен вариант: есть некое число, но неясно, представля­ет ли оно какое-либо свойство.

Таким образом, можно ввести следующую типологию свойств:

1) свойство не определено;

2)точечное свойство;

3) линейное свойство;

4) многомерное свойство.

Рассмотрим на качественном уровне общую структуру психоло­гического тестирования — применение теста, призванного измерить определенное свойство.

Психологический тест включает в себя некоторую совокупность заданий, инструкции: испытуемому— правило работы с тестом, экс­периментатору — правило организации работы испытуемого с тес­том и правило работы с данными, а также теоретическое описание с указанием свойств, измеряемых тестом, шкал (топологии свойства) и метода введения шкальной оценки. Указываются также психомет­рические параметры теста.

С теоретической точки зрения для измерения свойства и интерпрета­ции тестового балла следует описать типичную структуру и процедуры тес­тирования с позиций взаимодействия испытуемого и экспериментатора.

Испытуемые, обладающий свойством (Р,), должен выполнить (f|) задания теста (Z), дать ряд ответов (J). Экспериментатор должен этот ряд ответов (J) отобразить (F^) на "модели совокупности испытуе­мых", т.е. совокупности измеряемых свойств (Р), чтобы получить некоторый результат тестирования.

194

Тем самым существуют два типа процедур: собственно тестиро­вание — взаимодействие испытуемого с тестом и интерпретация — "взаимодействие" данных испытуемого с "моделью совокупности испытуемых". Получаем два отображения — F:P->JuF:J^P. Идеальная обобщенная модельтеста, возникающая из процедуры тес­тирования, тем самым должна включать в себя:

1) описание вида отображений F, и F^ (они должны быть тожде­ственными);

2) описание топологии свойства;

/ ' л л

3) характеристику индикаторов (ответов испытуемого) J и задач Z. Индикаторы являются поведенческими признаками и также, как свойства, могут быть: 1) не определены; 2) дискретны; 3) линейны;

4) многомерны. В обычном случае мы имеем дискретные индикато­ры: отдельные поведенческие акты. Искусственным методом (сум­мируя индикаторы) мы образуем при интерпретации псевдолиней­ное свойство, получая "сырой" балл. Возникает проблема: в каких случаях можно это делать? Кроме того, существуют некоторые от­ношения на множествах испытуемых и индикаторов.

Если свойство не определено, то единственное отношение, которое можно установить на множестве испытуемых, — это отношение сходства.

Если свойство является точечным, то на множестве испытуемых можно ввести отношения эквивалентности (обладает свойством), неэквивалентности (не обладает свойством) и применить дихотоми­ческую классификацию.

Наконец, если свойство линейное или многомерное, то испытуе­мых можно шкалировать по их положению налинейном континуу­ме или в пространстве.

Поступаем так и в отношении индикаторов. Они могут быть эк­вивалентны или неэквивалентны, определены или не определены, шкалированы или не шкалированы.

Следовательно, в зависимости от вида отношений, которые мы вводим на множестве испытуемых (определяется природой свойст­ва) или индикаторов (определяется описанием поведения и заданий), получаем разные модели теста. Кроме того, необходимо учесть вид отображений — f| и Fy которые представляют собой решающие пра­вила соотнесения индикаторов со свойством. Они зависят от интер­претации процедуры тестирования. Ниже мы рассмотрим некото­рые возможные модели.

Итак, возможны следующие модели теста, основанные на раз­личной топологии измеряемого свойства.

1. Если свойство не определено, то необходимо рассматривать отношение различия на множестве людей. Это отношение порожда-

7* 195

ет новый класс объектов. Отсюда — тест выявляет меру сходства каж­дого человека с "человеком-эталоном".

2. Если свойство качественно определено, то оно рассматривает­ся как точечное, что позволяет ограничить класс объектов — выде­лить людей, обладающих свойством, и людей, им не обладающих.

Тест позволяет в этом случае произвести дихотомическую клас­сификацию.

3. Если свойство линейное или многомерное, то можно выявить величину свойства, характеризующую каждого человека.

Тест позволяет измерить свойство количественно.

Существует множество конкретных тестовых методик, которые можно классифицировать по самым разным основаниям. В настоя­щее время психологический тест рассматривается как набор зада­ний, т.е. измерительный инструмент, обнаруживающий свойство. Общее название для заданий — пункты теста. Испытуемому предла­гаются варианты ответа по отношению к каждой задаче. Ответ реги­стрируется и считается индикатором (признаком), обнаруживающим свойство. Варианты ответа могут быть разными, но чаще использу­ются такие: "да" — "нет", "решил" — "перешил" и др. Каждый ин­дикатор, сочетание пунктов — ответ, соотносится с ключом, кото­рый приписывает индикатор определенному свойству.

В основе подобной процедуры лежит модель, предложенная еще К.Левиным, — поведение есть функция личности и ситуации: В = =f(P, S). Решается иная задача: восстановить свойство личности по поведению в ситуации: ситуацией является пункт теста, а поведени­ем — ответ испытуемого: Р = f(B, S). Таким образом, каждый инди­катор свойства есть соединение поведения и ситуации: J = В & S. Тем самым личность есть производное от совокупности индикато­ров: P=f(J).

Многомерный тест измеряет не одно, а несколько свойств лич­ности, поэтому в общем случае имеется матрица вида J х Р, каждый индикатор соотносится со свойством.

Процедура обнаружения свойств, к которой сводится тестовое измерение, завершается выводом суммарного балла. Такое отноше­ние между индикаторами и тестом называется кумулятивно-аддитив­ной моделью. "Сырой" балл считается оценкой, характеризующей испытуемого.

Наиболее часто эту оценку считают оценкой "интенсивности" свойства.Тем самым явно или неявно принимается гипотеза о том, что относительная частота обнаружения свойства прямо пропорци­ональна "интенсивности" свойства: у = k (m/n) + С, где m/n — от­ношение числа обнаруженных признаков к общему числу испыта-

196

ний, у — "интенсивность" свойства, а k и С — некоторые константы. Очевидно, что неявным образом для измерения психологических особенностей индивидов применяется интервальная шкала.

Гипотезу о наличии подобной связи называют также гипотезой эквивалентности интенсивности и экстенсивности проявления свой­ства.

Кумулятивную гипотезу проверяют путем корреляции результа­тов применения различных методик. В частности, при измерении мотивации в качестве базовой методики используется предложен­ный Мюрреем Тест тематической апперцепции (ТАТ). Он состоит из нескольких картинок с изображением людей в определенных си­туациях. Испытуемому предлагается составить рассказ по поводу каждой ситуации. Его высказывания анализируются. Выявляется по известным ключевым признакам связь высказываний с определен­ной мотивацией. Число высказываний, относящихся к тому или иному мотиву, характеризует величину его интенсивности. Куму­лятивная гипотеза является в этом случае переводом на математи­ческий язык известной поговорки: "У кого что болит, тот о том и говорит". Считается, что количество "речевых продуктов" пропор­ционально силе мотива. Число признаков психологического свой­ства при этом не фиксировано, а может быть только соотнесено со средним значением по выборке. Опросники, разработанные для диаг­ностики мотивации, сопоставляются с методикой ТАТ. При нали­чии высокого положительного коэффициенталинейной корреляции результатов кумулятивно-аддитивная модель принимается и для об­работки данных личностного опросника.

Критическую оценку применения кумулятивно-аддитивной мо­дели дал Р.Мейли. Он полагал, что и методика типа ТАТ, и опрос-ники (особенно — на самооценку) измеряют только вероятность на­личия у испытуемого того или иного психологического свойства.

Критика, с которой выступает Мейли, носит только качествен­ный характер и не имеет математического или эмпирического обо­снования.

Процедура суммирования баллов сама по себе не плоха и не хо­роша: важно выявить природу итоговой оценки. Суммарный балл мо^ет характеризовать близость испытуемого к некоторому эталону испытуемого, вероятность его принадлежности к конкретному типу, а с помощью оценки определяется его место на шкале порядка или интервалов. Вид интерпретации тестового балла зависит от приня­той разработчиком модели.

Традиционные обобщенные измерительные модели теста явля­ются математическими, описывающими взаимодействие измеритель-

197 с

ного инструмента (теста) и объекта измерения (человека). Основная особенность этих моделей: они применялись для обоснования мето­да обработки данных тестирования в целях выявления латентного свойства.

В отношении психологического свойства можно сделать следую­щие теоретические предположения. Первое, наиболее простое, за­ключается в том, что нам неизвестно, есть свойство или нет. Утверж­дение кажется парадоксальным, однако дело в том, что психическое свойство — некоторое теоретическое допущение, и, если у нас нет достаточных оснований пользоваться этим понятием для объясне­ния поведения, лучше к нему не прибегать. Второй вариант допу­щения состоит в том, что свойство есть, но нам неизвестна его топо­логия: неясно, является ли это свойство точечным, линейным, многомерным и т.д. Третье возможное утверждение: нам известна топология свойства. Свойство — одномерный континуум (непрерыв­ный) и может быть измерено некоторой порядковой или метричес­кой шкалой (шкала наименований не является шкалой в строгом смысле этого слова).

По отношению к взаимодействию испытуемого и теста возмож­ны два допущения:

1) появление признака строго детерминированно и соответственно детерминирован тип ответа;

2) взаимодействие испытуемого и задания определяет вероятность получения того или иного ответа. Чаще применяется вероятностная модель.





Валидность признаков 198

Множество свойств имеет определенную структуру. Традицион­но полагается, что тестируемые свойства должны бытьлинейно не­зависимы, хотя в общем случае это условие необязательно.

Каждое свойство имеет определенную топологию: она может быть не определена, а свойство — точечно, линейно, многомерно.

I. Тест измеряет свойства некоторых объектов, принадлежащих определенному множеству 0-совокупности потенциальных испы­туемых. В руководстве к тесту оговариваются характеристики мно­жества испытуемых, для которых он предназначен. Тем самым оп­ределено некоторое множество О с отношениями между его элемен­тами. Эти отношения связаны с топологией свойства. Если тополо­гия свойства не определена, то на множестве испытуемых можно вводить только отношения сходства, не соответствующего правилу транзитивности отношений. Если свойство является точечным, то, согласно его определению, оно позволяет отделить испытуемых, об­ладающих свойством, от испытуемых, им не обладающих. То есть на множестве испытуемых можно ввести отношения эквивалентности— неэквивалентности, свидетельствующие о степени обладания свой­ством. Наконец, если свойстволинейное, то испытуемых можно рас­положить на линейном континууме и ввести метрику.

2. Тест включает в себя множество заданий (Z) и вариантов отве­тов испытуемого (R), которые оговорены в предлагаемой ему ин­струкции (решил—не решил, да—нет, хорошо—средне—плохо и т.д.). Декартово произведение Zx R = J дает нам множество индикаторов (признаков) измеряемого свойства. Индикаторы могут быть отно­сительно свойства разнородны, однородны (т.е. на них могут быть введены отношения эквивалентности), шкалированы (область раз­ной "силы").

Отношения на множестве индикаторов независимы от отноше­ний на множестве испытуемых, т.е. от топологии свойства. Это пра­вило соответствует принципу объективности метода измерения:

свойства прибора (в нашем случае — тестовых заданий) не зависят от свойств объекта.

а л

3. Между множествами испытуемых (О), индикаторов (J) и свойств (Р) существуют определенные отношения, которые можно разбить на отношения измерения и интерпретации. Измерение — это творческий подход испытуемого (испытуемых) к работе с тес­том, "порождение" ответов на задания (признаков).

Интерпретация заключается в том, что на основе этих признаков экспериментатор при работе с "ключом" теста выявляет свойства испытуемого и относит его к определенной категории (подмноже­ству множества испытуемых).

199

Отношения измерения:

1. Отображение множества свойств на множество испытуемых вида F,: Р-> 6 дает представление об отношении измеряемых свойств к испытуемым. Например: испытуемые могут обладать или не обла­дать той или иной интенсивностью свойства и т.д.

Каждое свойство характеризуется вектором вида <0^,0у ..., 0^>, где О — величина, показывающая на принадлежность свойства Р испытуемому 0^.

Обычно Р. характеризует распределение испытуемых, на кото­рых апробировался тест, по отношению к пространству свойств.

2. Отображение F^: P—>J определяет процесс измерения. Каждое свойство характеризуется вектором , где i^—величина, определяющая, в какой мере свойство Р детерминирует индикатор J^. Если описание теста сопровождается данными факторного или латентно-структурного анализа, то эта величина отражает "нагруз­ку" фактора на пункт теста.

3. Отображение Fy 6 —> Р позволяет оценить результат измере­ния и определить, какие признаки проявил испытуемый при выпол­нении теста. Каждый испытуемый характеризуется вектором , где i^ — величина, указывающая, в какой мере испытуемый О, проявил признак !у Обычно признаки проявляются дихотоми­чески: решил — не решил, да — нет; иногда привлекаются непре­рывные величины: время решения задания, шкальная оценка и т.д.

Этот вектор характеризует ответы испытуемого на тест и подвер­гается процедуре интерпретации.

Отношения интерпретации:

1. Отображение множества J на множество О вида ^ Fy J —> О дает представление о первичной структуре данных.

Каждый индикатор характеризуется вектором <0,, Оу ..., 0^>. При тестировании способностей этот вектор позволяет определить, какие испытуемые решили те или иные задачи.^

2. Отображение множества J на множество Р вида F^.: J —> Р ука­зывает на процесс интерпретации тестового балла, точнее — вектора обнаруженных признаков. Каждый индикатор характеризуется век­тором <р.|, Р.,, Рз,..., Р.д>, где Р, — величина, определяющая "вес" индикатора по отношению к свойству. В инструкции к тесту "вес" индикатора используется для подсчета накопленного балла. Он со­ответствует "нагрузке" фактора на пункт теста. По отображению F^ можно говорить о процедуре подсчета "сырого"^балла.

3. Отображение множества О на множество Р вида F^,: О —> Р ха­рактеризует интерпретацию — приписывание свойства или опреде­ленного уровня его интенсивности конкретному испытуемому (груп-

200

пе испытуемых). Каждый испытуемый характеризуется вектором <Р^, Ру, ..., Ру>, где Р — величина, определяющая, в какой мере свойство Р выражено у испытуемого О.. Эта величина является ито­гом процесса интерпретации — "психологическим портретом" ис­пытуемого. С позиции обобщенной модели основное требование к тесту заключается втом, чтобы процедуры интерпретации и измере­ния были тождественными. Иными словами, тождественными долж­ны быть обратные отображения F, и f|., F^ и F^,, F^ и F^.. В против­ном случае результаты интерпретации будут расходиться с результа­тами измерения (тестирования).

Описания множеств О, J, Р, Z, Ки видов отображения F,,, F^., F.,. определяются в ходе разработки теста и включаются в теоретическое описание теста и в инструкцию экспериментатора.

Поскольку тест направлен на измерение психического свойства (в частности, способности), вид конкретной модели, описывающей тест, определяется топологией свойства.

Рассмотрим варианты нормативной обобщенной модели теста для одномерного случая, когда измеряется только одно свойство:

(.Свойство не определено.

Если топология свойства не определена, то это означает, что мно­жество испытуемых нельзя (в соответствии с определением понятия "свойство") разбить на подмножества, обладающие или не обладаю­щие свойством. Иначе: на множестве испытуемых нельзя ввести от­ношения эквивалентности—неэквивалентности. Однако на множе­стве испытуемых можно ввести отношения толерантности (сходст­ва). Это отношение рефлексивно, симметрично, но не транзитивно. Множество индикаторов J нельзя характеризовать по отнесенности к свойству, так как Р — множество свойств, качественно не опреде­ленных. Следовательно, каждый испытуемый характеризуется лишь структурой своих ответов.

Единственно возможный способ интерпретации таких результа­тов — выделение из множества испытуемых "эталонного испытуе­мого" (например, решившего все задачи теста). После этого произ­водится подсчет коэффициентов сходства всех испытуемых с "эта­лоном".

"Назовем этот вариант модели "моделью сходств". В психологи­ческих исследованиях она применяется редко. Очевидно, свою роль ифает стремление исследователей максимально повысить мощность интерпретации данных.

2. Свойство качественно определено. Топология свойства определена: оно является точечным. На мно­жестве испытуемых можно ввести отношение эквивалентности—не-

201

эквивалентности (рефлексивное, симметричное, транзитивное), ука­зывающее на наличие или отсутствие у них свойства. Следователь­но, отображение F.: О —> Р является отображением множества на точку. Вектор значений Р характеризует индивидуальную меру вы­раженности свойства (в вероятностной интерпретации — вероятность его наличия) у испытуемого. Соответственно определены все ото­бражения F„, F-., F^. (и обратные им). Если испытуемые обладают/ не обладают свойством, то их можно разбить на основании резуль­тата тестирования на классы, имеющие и не имеющие свойства. При интерпретации данных используется следующий алгоритм: фикси­руются индикаторы, проявленные испытуемым, подсчитывается ин­дивидуальный показатель наличия или отсутствия у него свойства и принимается решение о его принадлежности к одному из дихотоми­ческих классов — А и А (обладающих и не обладающих свойством).

Назовем эту модель моделью дихотомической классификации. Она использована в опросникахЛичко,опросникахУНП и ряде других.

3. Свойство качественно и количественно опре-д е л е н о.

Свойство является линейным континуумом, следовательно, на нем определена метрика. Отображение F,: О -> Р указывает на меру принадлежности испытуемых к той или иной градации свойства (точ­ке линейного континуума).

В этом случае для подсчета величины, характеризующей принад­лежность испытуемого к определенной интенсивности свойства, применяют кумулятивно-аддитивную модель: число признаков, про­явленных при выполнении заданий теста (с учетом "весов"), прямо пропорционально интенсивности свойства, которым обладает испы­туемый. 3i а модель есть отображение Fy: Р-> 6. Тем самым приме­няется следующая интерпретация: фиксируются ответы испытуемо­го; вычисляется "сырой" балл; испытуемый обладает определенной интенсивностью свойства на основе отображения "сырого" балла на шкалу, характеризующую свойство. Эта модель — модель латентно­го континуума — является наиболее распространенной при тестиро­вании психических свойств.

Индикаторы свойства также могут быть однородными и разно­родными. В последнем случае они шкалируются или не шкалируют­ся. Если индикаторы однородны, то они выявляют свойство или уро­вень его интенсивности с равной вероятностью. Если индикаторы разнородны, то они выявляют свойство или уровень его интенсив­ности с разной вероятностью. На множестве индикаторов может быть введена некоторая мера — "сила" признака: чем сильнее признак, тем с большей вероятностью он выявляет свойство или определен-

202

ный уровень его интенсивности. В этом случае для описания теста мы получаем так называемую модель Раша.

^ 6.4. Классическая эмпирико-статистическая теория теста

Классическая теория теста лежит в основе современной диффе­ренциальной психометрики.

Описание оснований этой теории содержится во многих учебни­ках, пособиях, практических руководствах, научных монографиях. Количество изданных учебников, излагающих эмпирико-статисти-ческую теорию теста, особенно выросло за последние 5—Улет. Вместе с тем в учебнике, посвященном методам психологического исследо­вания, нельзя хотя бы вкратце не упомянуть основные положения теории психологического тестирования.

Конструирование тестов для измерения психологических свойств и состояний основано на шкале интервалов. Измеряемое психичес­кое свойство считается линейным и одномерным. Предполагается также, что распределение совокупности людей, обладающих данным свойством, описывается кривой нормального распределения.

В основе тестирования лежит классическая теория погрешности измерений; она полностью заимствована из физики. Считается, что тест такой же измерительный прибор, как вольтметр, термометр или барометр, и результаты, которые он показывает, зависят от величи­ны свойства у испытуемого, а также от самой процедуры измерения ("качества" прибора, действий экспериментатора, внешних помех и т.д.). Любое свойство личности имеет "истинный" показатель, а по­казания по тесту отклоняются от истинного на величину случайной погрешности. На показания теста влияет и "систематическая" по­грешность, но она сводится к прибавлению (вычитанию) константы к "истинной" величине параметра, что для интервальной шкалы значения не имеет.

Если тест проводить много раз, то среднее будет характеристи­кой "истинной" величины параметра^ Отсюда вводится понятие ре-тестовой надежности: чем теснее коррелируют результаты началь­ного и повторного проведения теста, тем он надежнее. Стандартная погрешность измерения:

203



где

о^ — стандартное отклонение,

г„ — коэффициент корреляции тест—ретест.

Предполагается, что существует множество заданий, которые мо­гут репрезентировать измеряемое свойство. Тест есть лишь выборка заданий из их генеральной совокупности. В идеале можно создать сколько угодно эквивалентных форм теста. Отсюда — определение надежности теста методами параллельных форм и расщепление его на эквивалентные равные части.

Задания теста должны измерять "истинное" значение свойства. Все задания одинаково скоррелированы друг с другом. Корреляция задания с истинным показателем:

а2 — дисперсия для гсего теста.

Для определения надежности методом расщепления использует­ся формула Спирмена— Брауна.

В принципе классическая теория теста касается лишь проблемы надежности. Вся она базируется натом, чю результаты выполнения разных заданий можно суммировать с учетом весовых коэффициен­тов. Так получался "сырой'' балл.

У=Хд\ +с,

где

х_ — результат выполнения i-ro задания,

а — весовой коэффициент огвета,

с — произвольная константа.

По поводу того, откуда возникают "ответы", в классической тео­рии не говорится ни слова.

Несмотря на то что проблеме валидности в классической теории теста уделяется много внимания, теоретически она никак не реша­ется. Приоритет отдан надежности, что и выражено в правиле: ва-лидность теста не может быть больше его надежности.

Валидность означает пригодность теста измерять то свойство, для измерения которого он предназначен. Следовательно, чем больше па результат выполнения теста или отдельного задания влияет изме­ряемое свойство и чем меньше — другие переменные (в том числе внешние), тем тест валидной и, добавим, надежнее, поскольку вли­яние помех на деятельность испытуемого, измеряемую валидным тестом, минимально.

Но это противоречит классической теории теста, которая осно­вана не на деятельностном подходе к измерению психических свойств, а на бихевиористской парадигме: стимул — ответ. Если же рассматривать тестирование как активное порождение испытуемым о гвегов на задания, то надежное! ь теста будет функцией, производ­ной от валидности.

Тест валиден (и надежен), если на его результаты влияет лишь измеряемое свойство.

- Тест невалиден (\\ ненадежен), если результаты тестирования определяются влиянием нерелевантных переменных.

Каким же образом определяется валидность? Все многочислен­ные способы доказательства валидности теста называются разными ее видам и.

1. Очевидная валидность. Тест считается валидным, если у испы­туемых складывается впечатление, что он измеряет то, что должен

205







где

r, — корреляция i-ro задания с истинным показателем t, r — средняя корреляция i-ro задания с другими. Поскольку в реальном монометрическом тесте число заданий ог­раничено (не более 100), то оценка надежности теста всегда прибли­зительна.

Так, определяемая надежность теста связана с однородностью, которая выражается в корреляциях между заданиями. Надежность возрастает с увеличением одномерности теста и числа его заданий, причем довольно быстро. Стандартная надежность 0,02 соответст­вует тесту дли ной в 10 заданий, а при 30 заданиях она равна 0,007. Оценка стандартной надежности:

где

or— стандартная погрешность оценивания r ,

о — стандартное отклонение корреляций заданий в тесте,

к — число заданий в тесте.

Для оценок надежности используется ряд показателей.

Наиболее известна формула Кронбаха:

где

к — число заданий в тесте,

£o2 — сумма дисперсий заданий,

204

измерять.

2. ^ Конкретная валидность, или конвергентная—дивергентная. Тест должен хорошо коррелировать с тестами, измеряющими конкрет­ное свойство либо близкое ему по содержанию, и иметь низкие кор­реляции с тестами, измеряющими заведомо иные свойства.

3. ^ Прогностическая валидность. Тест должен коррелировать с от­даленными по времени внешними критериями: измерение интел­лекта в детстве должно предсказывать будущие профессиональные успехи.

4. Содержательная валидность. Применяется для тестов дости­жений: тест должен охватывать всю область изучаемого поведения.

5. ^ Конструктная валидность. Предполагает:

а) полное описание измеряемой переменной;

б) выдвижение системы гипотез о связях ее с другими перемен­ными;

в) эмпирическое подтверждение (не опровержение) этих гипо­тез.

С теоретической точки зрения единственным способом установ­ления "внутренней" валидности теста и отдельных заданий являет­ся метод факторного анализа (и аналогичные), позволяющий:

а) выявлять латентные свойства и вычислять значение "фактор­ных нагрузок" — коэффициенты детерминации свойством тех или иных поведенческих признаков;

б) определять меру влияния каждого латентного свойства на ре­зультаты тестирования.

К сожалению, в классической теории теста не выявлены причин­ные связи факторных нагрузок и надежности теста.

Дискриминативность задания является еще одним параметром, внутренне присущим тесту. Тест должен хорошо "различать" испы­туемых с разными уровнями выраженности свойства. Считается, что больше 9—10 градаций использовать не стоит.

Тестовые нормы, полученные входе стандартизации, представ­ляют собой систему шкал с характеристиками распределения тесто­вого балла для различных выборок. Они не являются "внутренним" свойством теста, а лишь облегчают его практическое применение.

^ 6.5. Стохастическая теория тестов (IRT)

Наиболее общая теория конструирования тестов, опирающаяся на теорию измерения, — Item Response Theory (IRT). Онаосновыва-

206

ется на теории латентно-структурного анализа (ЛСА), созданной \ П.Лазарсфельдом и его последователями. 1 Латентно-структурный анализ создан для измерения латентных (в том числе психических) свойств личности. Он является одним из вариантов многомерного анализа данных, к которым принадлежат факторный анализ в его различных модификациях, многомерное шкалирование, кластерный анализ и др.

Теория измерения латентных черт предполагает, что:

1. Существует одномерный конти нуум свойства — латентной пере­менной (х); на этом континууме происходит вероятностное распре­деление индивидов с определенной плотностью цх).

2. Существует вероятностная зависимость ответа испытуемого на задачу (пункт теста) от уровня его психического свойства, которая называется характеристикой кривой пункта. Если ответ имеет две градации ("да — нет", "верно — не верно"), то эта функция есть ве­роятность ответа, зависящая от места, занимаемого индивидом на континууме (х).

3. Ответы испытуемого не зависят друг от друга, а связаны только через латентную черту. Вероятность того, что, выполняя тест, испы­туемый даст определенную последовательность ответов, равна про­изведению вероятностей ответов на отдельные задания.

Конкретные модели ЛСА, применяемые для анализа эмпиричес­ких данных, основаны надополнительныхдопущенияхо плотности распределения индивидов на латентном континууме или о форме функциональной связи уровня выраженности свойства у испытуе­мого и ответа на пункт теста.

В модели латентного класса функция плотности распределения индивидов является точечно-дискретной: все индивиды относятся к разным непересекающимся классам. Измерение производится но­минальной шкалой.

В модели латентной дистанции постулируется, что вероятность ответа индивида на пункт теста является мультипликативной функ­цией от параметров задачи и величины свойства:

где

Р,(х) — вероятность ответа "да" на i-й пункт,

а — ''дифференцирующая сила" задания,

х — величина свойства,

Р,— "трудность" задания.

207



Вероятность ответа на пункт теста описывается функцией, изо Сраженной на графике.



где

F(x) — величина i-ro задания, Р^(х) — вероятность ответа на i-e задание.

Модель нормальной огивы есть обобщение модели латентной дис­танции. В ней вероятность ответа на задание такова:



где

-L(x) — плотность нормального распределения. В логистической модели вероятность ответа на задание описыва­ется следующей зависимостью:



распределения.

Логистическая модель используется наиболее широко, так как она специально предназначена для тестов, где свойство измеряется сум­мированием баллов, полученных за выполнение каждого задания с учетом их весов.

Логистическая функция и функция нормального распределения тесно связаны:

/ Ф(x)-\V(^,7x) \<0,01

(здесьф(х) — кумулятивная функция нормального распределения). Развитием ЛСАявляются различные модификации Item Response Theory. В IRT распределения переменных на оси латентного свой-208

ства считаются непрерывными, т.е. модель латентного класса не ис­пользуется.

База для IRT— это модель латентной дистанции. Предполагает­ся, что и индивидов, и задания можно расположить на одной оси "способность — трудность", или "интенсивность свойства — сила пункга". Каждому испытуемому ставится в соответствие только од но значение латентного параметра ("способности").

В общем виде вероятность ответа зависит от множества свойств испытуемого, но в моделях IRT рассматривается лишь одномерный случай.

^ Главное отличие IRT от классической теории теста в том, что в ней не ставятся и не решаются фундаментальные проблемы эмпирической валидности и надежности теста: задача априорно соотносится лишь с одним свойством, т.е. тест заранее считается валидным. Вся проце­дура сводится к получению оценок параметров трудности задания и к измерению "способностей" испытуемых (образованию "характе­ристических кривых").

В классической теории теста индивидуальный балл (уровень свой­ства) считается некоторым постоянным значением. В IRT латент­ный параметр трактуется как непрерывная переменная.

Первично моделью в IRT стала модель латентной дистанции, предложенная Г.Рашем: разность уровня способное ги и трудносчи Tecia х^ —р^, где х^ — положение i-ro испытуемого на шкале, ар— положение j-ro задания на той же шкале. Расстояние (х^ — р^) харак­теризует отставание способности испытуемого от уровня сложности задания. Если разница велика и отрицательна, то задание не может быть выполнено, так как для данного испытуемого оно слишком сложно. Если же разница велика и положительна, то задание также не информативно, ибо испытуемый заведомо легко и правильно его решит.

Вероятность правильного решения задания (или ответа "да") i-м испытуемым:

Р,(^)=Г(х-Р,) Вероятность выполнения j-ro задания группой испытуемых:

Р^(х-Р^).

В IRT функции (х) и f(P) называются функциями выбора пункта. Соответственно первая является характеристической функцией ис­пытуемого, а вторая — характеристической функцией задания.

209







Считается, что латентные переменные х и (3 нормально расиреде лены, поэтому для характеристических функций выбирают либоло-гистическую функцию, либо интегральную функцию нормирован ного нормального распределения (как мы уже отмегилн выше, от, мало отличаются друг от друга).

Поскольку логистическую функцию проще аналитически зада вать, ее используют чаще, чем функцию нормальною распределс ния.

Кроме "свойства" и "силы пункта" (она же — трудность задания 1 в аналитическую модель IRT могут включаться и другие перемен ные. Все варианты IRT классифицируются по числу используемых i, них переменных.

Наиболее известны однопараметрическая модель Г.Раша. двух­параметрическая модельА.Бирнбаума и трехпараметрическая модель А.Бирнбаума.

В однопараметрической модели Pauia предполагается, чтоотвеч испытуемого обусловлен только индивидуальной величиной изме­ряемого свойства (й^) и "силой" тестового задания ([3). Следователь­но, для верного ответа ("да")

и для неверного ответа ("нет")



Наиболее распространена модель Раша с логистической функцией отклика.

Для тестового задания:



Естественно, чем выше уровень свойства (способности), тем ве­роятнее получить правильный ответ ("ключевой" огвет — "да"). Следовательно, функция Р (9) является монотонно возрастающей.

В точке "перегиба" характеристической кривой i-ro задания тес­та "способность" равна "трудности задания", следовательно, "веро­ятность его решения" равна 0,5.

210



ичевидно, что индивидуальная кривая испытуемого, характе­ризующая вероятность решить то или иное задание (дать ответ "да"), будет монотонно убывающей функцией.



В точке на шкале, где "трудность" равна "индивидуальной спо­собности испытуемого", происходит "перегиб" функции. С ростом "способности" (развитием психологического свойства) кривая сдви­гается вправо.

Главной задачей IRT является шкалирование пунктов теста и ис­пытуемых.

Упростим исходную формулу модели, введя параметр V= e91-^:





Шанс на успех i-ro испытуемого при решении j-ro задания опре­деляется отношением:





211

Если сравнить шансы двух испытуемых решить одно и то жej-е задание, то это отношение будет следующим:



Следовательно, разница в успешности решения задания испыту емыми не зависит от сложности задания и определяется лишь уров нем способности.

Нетрудно заметить, что в модели Раша отношение трудности за­даний не зависит от способности испытуемых. Для того, чтобы убе­диться в этом, достаточно проделать аналогичные простейшие пре образования, сравнивая вероятности ответов группы на два пункта, теста, а не вероятности ответов разных испытуемых.



где

Р,^— вероятность ответа на k-e задание для i-го испытуемого,U==

ев.-р,

и для неправильного ответа



Следовательно,



Для сравнения шансов на успех i-ro испытуемого решить зада­ния k и п берем отношение:



Тем самым отношение шансов испытуемого решить два разных задания определяется лишь трудностью этих заданий.

Обратим внимание, что шкала Раша (в теории) является шкалой отношений.

Теперь у нас есть возможность ввести единицу измерения спо­собности (в общем виде — свойства). Если взять натуральный лога-

21?

рифм от е1'" -pk или е9' -ет, то получается единица измерения "логит" (термин ввел Г.Раш), которая позволяет измерить и "силу пункта" (трудность задания), и величину свойства (способность испытуемо­го) в одной шкале.

Эмпирически эта процедура производится следующим образом. Предполагается, что данные тестирования и значения латентных переменных характеризуются нормальным распределением. Уровень "способности" испытуемого в "логитах" определяется на шкале ин­тервалов с помощью формулы:



где

п — число испытуемых,

р^ — доля правильных ответов i-ro испытуемого на задания теста,

q^ — доля неправильных ответов,

Р,+Я,=1-

Для первичного определения трудности задания в логитах исполь­зуют оценку

Р"= In ——, j=l,2,..„ п, Р,

где п — число заданий,

р, — доля правильных ответов для испытуемых группы Haj-e за­дание, q —доля неправильных ответов,

P+Q-1-

Хотя параметры (3 и 6 изменяются от "плюса" до "минуса". io при Р б с заданием не сможет справиться ни один испытуемый, точнее — вероятность дать "ключевой" ответ ниччожна.

Рекомендуется рассматривать лишь интервалы от — 3 до + 3 как для Р (трудности), так и для 6 (способность).

Второй этап шкалирования испытуемых и заданий сводится к тому, что шкалы преобразуются в единую путем "уничтожения" вли­яния трудности задания на результат индивидов. И наоборот, эли-

213







минируется влияние индивидуальных способностей на решение за­даний различной трудности. Для шкалы испытуемых:



где

(3 — среднее значение логитов трудности заданий теста, W — стандартное отклонение распределения начальных значений

параметра (3, n — число испытуемых. Для шкалы заданий:





6 — среднее значение логитов уровней способностей,

V — стандарное отклонение распределения начальных значений "способности",

n — число заданий в тесте.

Эти эмпирические оценки используются в качестве окончатель­ных характеристик измеряемого свойства и самого измерительного инструмента (заданий теста).

Если перед исследователем стоит задача конструирования теста, то он приступает к получению характеристических кривых заданий теста. Характеристические кривые могут накладываться одна на другую. В этом случае избыточные задания выбраковываются. На определенных участках оси 9 ("способность") характеристические кривые заданий могут вовсе отсутствовать. Тогда разработчик теста должен добавить задания недостающей трудности, чтобы равномерно заполнить ими весь интервал шкалы логитов от —6 до +6. Заданий средней трудности долж­но быть больше, чем на "краях" распределения, чтобы тест обладал необходимой дифференцирующей (различающей) силой.

Вся процедура эмпирической проверки теста повторяется не­сколько раз, пока разработчик не останется доволен результатом ра­боты. Естественно, чем больше заданий, различающихся по уровню

214

трудности, предложил разработчик для первичного варианта теста, тем меньше итераций он будет проводить.

Главным недостатком модели Раша теоретики считают пренебре­жение "крутизной" характеристических кривых: "крутизна" их по­лагается одинаковой.

Задания с более "крутыми" характеристическими кривыми по­зволяют лучше "различать" испытуемых (особенно в среднем диа­пазоне шкалы способности), чем задания с более "пологими" кри­выми.

Параметр, определяющий "крутизну" характеристических кри­вых заданий, называют дифференцирующей силой задания. Он ис­пользуется в двухпараметрической модели Бирнбаума.

Модель Бирнбаума аналитически описывается формулой



Параметра определяет "крутизну" кривой в точке ее перегиба;

его значение прямо пропорционально тангенсу угла наклона каса­тельной к характеристической кривой задания теста в точкеЭ = (^.



Интервал изменения параметра а от—с^до +оо. Если значения а близки к 0 (для заданий разной трудности), то испытуемые, разли­чающиеся по уровню выраженности свойства, равновероятно дают "ключевой" ответ на это задание теста. При выполнении такого за­дания у испытуемых не обнаруживается различий.

Парадоксальный вариант получаем при а < 0. В этом случае бо­лее способные испытуемые отвечают правильно с меньшей вероят­ностью, а менее способные — с большей вероятностью. Опытные пси­ходиагносты знают, что такие случаи встречаются в практике тести­рования очень часто.

Ф.Лорди М.Р.Новик в своей классической работе приводят фор­мулы оценки параметра а. При а = 1 задание соответствует одно-215

параметрической модели Раша. Практики рекомендуют использо­вать задания, характеризующие значение а в интервале от 0.5 до 3.

Все психологические тесты можно разделить в зависимости oi формального типа ответов испытуемого на "открытые" и "закры­тые". В тестах с "открытым" ответом, к которым относятся tcctwais Д.Векслераили методикадополнения предложений, испытуемый са\' порождает ответ. Тесты с "закрытыми" заданиями содержат вари­анты ответов. Испытуемый может выбрать один или несколько ва­риантов из предлагаемого множества. В тестах способностей (тес'1 Д.Равена, GABT и др.) предусмотрено несколько вариантов непра­вильного решения и один правильный. Испытуемый может приме­нить стратегию угадывания. Вероятность угадывания ответа:



где

n — число вариантов.

Результаты эмпирических исследований показали, что относи­тельные частоты решения "закрытых" заданий отклоняются от тео­ретически предсказанных вероятностей двухпараметрической модели Бирнбаума. Чем ниже уровень способностей испытуемого (низкие значения параметра 6), тем чаще он прибегает к стратегии угадыва­ния. Аналогично, чем труднее задание, тем больше вероятность того, что испытуемый будет пытаться угадать правильный ответ, а не ре­шать задачу.

Бирнбаум предложил трехпараметрическую модель, которая по­зволила бы учесть влияние угадывания на результат выполнения теста.

Трехпараметрическая модель Бирнбаума выглядит так:



Соответственно оценка "силы" пункта (трудности задания) вло-гистической форме модели



С характеризует вероятность правильного ответа на задание j в том случае, если испытуемый угадывал ответ, а не решал задание, т.е. при 9 —> 0. Для заданий с пятью вариантами ответов С = 0,2, с четырьмя вариантами — С = 0,25 и т.д.

Нетрудно заметить, что характеристическая кривая задания при учете параметра С становится более пологой, так как 0 < С < 1,но

216

при всех С = 0 кривая поднимается над осью 9 на величину С^. Тем самым даже самый неспособный испытуемый не может показать нулевой результат. Дифференцирующая сила тестового задания при введении параметра С снижается. Из этого следует нетривиальный вывод: тесты с "закрытыми" заданиями (вынужденным выбором от­вета) хуже дифференцируют испытуемых по уровням свойства, чем тесты с "открытыми" заданиями.

Модель Бирнбаума не объясняет парадоксального, но встречаю­щегося в практике тестирования феномена: испытуемый может реже выбирать правильный ответ, чем неправильный. Таким образом, час­тота решения некоторых заданий может не соответствовать предска­заниям модели Р < С, тогда как, согласно модели Бирнбаума, в пре­деле Р = С.

Рассмотрим еще одну модель, которую предложил В.С.Аванесов. Как мы уже заметили, в IRT не решается проблема валидности: ус­пешность решения задачи зависит в моделях IRT только от одного свойства. Иначе говоря, каждое задание теста считается априорно валидным.

Аванесов обратил внимание на это обстоятельство и ввел допол­нительный, четвертый, параметр, который можно обозначить как внутреннюю валидность задания. Успешность решения задания оп­ределяется не только "основной" способностью (9), но и множест­вом условий, нерелевантных заданию, однако влияющих надеятель-ность испытуемого.

Четырехпараметрическая модель представляет, по мнению ряда исследователей, лишь теоретический интерес:



где

у — валидность тестового задания.

Если у < 1, то тест не является абсолютно валиднным. Следова­тельно, вероятность решения задания не только определяется тео­ретически выделенным свойством, но и зависит от других психи­ческих особенностей личности.

Бирнбаум считает, что количество информации, обеспеченное j-м заданием теста, при оценивании 9 является величиной, обратно про­порциональной стандартной ошибке измерения данного значения 6 j-м заданием. Более подробно вычисление информационной функ­ции рассмотрено в работе М.Б.Челышковой.

Многие авторы, в частности Пол Клайн, отмечают, что IRT об­ладает множеством недостатков. Для того, чтобы получить надеж-

217

ную и независимую от испытуемых шкалу свойств, требуется про­вести тестирование большой выборки (не менее 1000 испытуемых) Тестирован недостижений показывает, что существу ют значитель­ные расхождения между предсказаниями модели и эмпирическими данными.

В 1978 г. Вуд доказал, чтолюбые произвольные данные могутбыть приведены всоогветствиес моделью Раша. Кроме того, существуе! очень высокая корреляция шкал Раша с классическими тестовыми шкалами (около 0,90).

Шкалирование, по мнению Раша, способно привести к образо­ванию бессмысленных шкал. Например, попытка применить его мо­дель к опроснику EPQ Айзенка породила смесь шкал N, Е, Р и L.

Главный же недостаток IRT — игнорирование проблемы валид-ности. В психологической практике не наблюдается случаев, когда ответы на задания теста были бы обусловлены лишь одним факто­ром. Даже при тестировании общего интеллекта модели 1'R.T непри­менимы.

Клайн рекомендует использовать модели IRT для коротких тес­тов с валидными заданиями (факторно простые тесты).

В пособии Клайна "Справочное руководство по конструирова­нию тестов" (Киев, 1994) приведен алгоритм конструирования тес­тов на основе модели Раша.

В заключение рассмотрим вероятностную модель тестов "уров­ня" Ф.М.Юсупова, аспиранта лаборатории психологии способнос­тей Института психологии РАН. Его модель разработана для тестов с "закрытыми" заданиями (выбором ответов из множества), разли­чающимися по уровню трудности. В "закрытых" тестах испытуемый может применить стратегию "угадывания" ответа. Вероятность уга­дывания



где

m — число альтернатив.

Сложность тестового задания



где

n — число испытуемых, способных решить задание, N — общее количество испытуемых в выборке валидизации. При W< P невозможно определить, решена задача случайно или за-

218

кономерно. Полагается, что биноминальное распределение вероят­ности успешного выполнения тестового задания при больших N апп­роксимируется нормальным. Должны выполняться следующие условия:

1. Правильный ответ выбирается неслучайно, если:

его экспериментально полученная частота больше 1/т;

это превышение статистически значимо;

оценить его можно с помощью t-критерия Стьюдента.

2. Все ложные варианты ответов должны выбираться не чаще, чем случайные:



где

n — частота выбора неверного ответа.

Тем самым тестовое задание стимулирует испытуемого к выбору правильного ответа.

3. В тестах "уровня" диапазон изменения показателя сложности О < W S 1 должен быть уменьшен "слева" на величину W, значимо отличающуюся от W, в которой t = t^ (t — критерий Стьюдента). Чем больше вариантов ответов в тесте, тем меньше W и шире об­ласть допустимых значений показателя сложности тестового зада­ния. Например, для N = 100, а = 0,05 (t^ = 1,90) и 10 > m > 3 расчет показывает, что уже при m > 6 скорость расширения области значе­ний показателя сложности значимо замедляется. Поэтому рекомен­дуется выбирать 6— 10 вариантов ответа.

В тесте "уровня" число градаций сложности и число заданий свя­зано. Чем точнее оценка свойства, тем больше число градаций. Но это влечет снижение достоверности измерения, так как длина теста (число задан и и) ограниченна. Уменьшение числа градаций приве­дет к нивелированию различий между испытуемыми.

Предельно возможное число заданий в тесте выбирается при ус­ловии, что различие в уровне их сложности гарантируется с выбран­ной вероятностью.

Поскольку дисперсия биноминального распределения максималь­на в центре интервала 0 — 1 и уменьшается к периферии до 0, шаг градаций сложности на разных участках этого интервала будет раз­личным: на периферии он должен стремиться к нулю.

Удобно принять в качестве шага градации сложности 1/10 интер­вала. Для а = 0,05, N = 100 получается 7 значений показателя слож­ности, что при шаге, равном 0,1, гарантирует различение между уров­нями с вероятностью 0,9.

219

Если учесть условие минимизации случайного выбора правиль­ного ответа, то число градаций сложности должно быть еще мень­ше. Например, при б вариантах ответа число заданий разного уров­ня сложности не может быть больше 6.

Эти выводы верны в том случае, если биноминальное распреде­ление аппроксимируется нормальным распределением. При боль­шом числе испытуемых такая аппроксимация возможна.

Расчеты показывают, что минимально необходимый объем вы­борки для апробации тестовых заданий не так уж и велик — 56 чело­век при достоверности 0,9.

Следовательно, исходя из вероятностной модели теста и не при­бегая к допущениям о моделях тестирования, можно рассчитать пара­метры теста как предельные характеристики, обеспечивающие до­стоверность измерения.

Литература

Психологические измерения. М.: Мир, 1976. Наповян С. С. Математические методы в социальной психологии.

М.: Наука, 1983. Клайн П. Справочное руководство по конструированию тестов.

Киев,1994. ДюкВ.А. Компьютерная психодиагностика. СПб.: Братство, 1994.

Вопросы

1. Какие основные типы шкалы используются в психологических исследованиях?

2. В чем состоят отличия классической модели теста от теории выбора ответа (IRT)?

3. Что гакое "логит"?

4. Каким должно быть число уровней трудности заданий в тесте?

5. В каких случаях применяется шкалограммный анализ?


eti-voprosi-uzhe-podnimalis-v-specialnom-doklade-upolnomochennogo-v-2007-godu-o-soblyudenii-prav-detej-v-moskovskoj-oblasti.html
eticheskaya-problema-hasaj-magomedovich-aliev-vidayushijsya-dagestanskij-uchenij-vrach-psiholog-i-filosof-otkrivshij.html
eticheskie-i-pravovie-osnovi-deyatelnosti-5-6-noyabrya-200-9-g-sbornik-tezisov-tashkent-2009-mundarizha.html
eticheskie-normi-i-principi-v-restorane.html
eticheskie-normi-reklami-v-internete.html
eticheskie-principi-i-pravila-raboti-prakticheskogo-psihologa.html
  • assessments.bystrickaya.ru/bolshoj-malij-zadachi-detej-indigo-na-planete-chtob-vera-v-boga-u-lyudej-bila-silnej.html
  • prepodavatel.bystrickaya.ru/tehnicheskie-trebovaniya-montazhnie-k-proektirovaniyu-obektov-neftepererabativayushej-i-neftehimicheskoj-promishlennosti-s-primeneniem-blokov-sistemi-avtomatizacii.html
  • crib.bystrickaya.ru/kniga-adresovana-arheologam-i-istorikam-medievistam-studentam-istoricheskih-fakultetov-visshih-uchebnih-zavedenij-uchitelyam-istorii-stranica-7.html
  • crib.bystrickaya.ru/i-na-solnishko-lyubimie-uchebnie-posobiya.html
  • writing.bystrickaya.ru/japanese-martial-arts-essay-research-paper-the.html
  • institute.bystrickaya.ru/glava-4-pravila-tehnicheskoj-ekspluatacii-zheleznih-dorog-rossijskoj-federacii-v-red-prikazov-mps-ot-03-07-2001.html
  • zadachi.bystrickaya.ru/metodicheskie-ukazaniya-po-kursovoj-rabote-buhgalterskij-uchet-i-1s-buhgalteriya.html
  • klass.bystrickaya.ru/76-soloncovo-gostinichnij-kompleks-abramcevo-5-park-otel-atlas-6-pansionat-akvareli-7.html
  • letter.bystrickaya.ru/ob-utverzhdenii-gosudarstvennogo-doklad.html
  • textbook.bystrickaya.ru/informacionnij-byulleten-20-iyunya-2012-goda.html
  • composition.bystrickaya.ru/oscillyacii-magnitotermoeds-cinka-legirovannogo-indiem.html
  • bukva.bystrickaya.ru/metodicheskie-rekomendacii-po-sozdaniyu-slajd-filma.html
  • gramota.bystrickaya.ru/vremya-i-prostranstvo-robert-e-svoboda-aghora-ii-kundalini.html
  • credit.bystrickaya.ru/otkrili-detskij-centr-etot-i-drugie-voprosi-stali-temoj-obsuzhdenij-uchastnikov-kruglogo-stola-pod-nazvaniem-tverskaya.html
  • gramota.bystrickaya.ru/vvedenie-ezhekvartalnij-otchet-otkritogo-akcionernogo-obshestva-silovie-mashini-ztl-lmz-elektrosila-energomasheksport.html
  • abstract.bystrickaya.ru/1-proekt-federalnogo-zakona-o-normativnih-pravovih-aktah-rossijskoj-federacii.html
  • school.bystrickaya.ru/agronewsru-21042009-monitoring-smi.html
  • books.bystrickaya.ru/doklad-na-ixmezhdunarodnoj-nauchnoj-konferencii-modernizaciya-ekonomiki-i-globalizaciya.html
  • universitet.bystrickaya.ru/tematicheskij-plan-kursa-koncepcii-sovremennogo-estestvoznaniya-uchebno-metodicheskij-kompleks-dlya-studentov-specialnosti.html
  • thescience.bystrickaya.ru/izveshenie-o-provedenii-zaprosa-kotirovok-zapros-kotirovochnoj-ceni-2.html
  • uchebnik.bystrickaya.ru/uchebno-vospitatelnogo-stranica-12.html
  • predmet.bystrickaya.ru/slava-bogu-obogativshemu-velikuyu-rossiyu-stranica-18.html
  • shkola.bystrickaya.ru/problema-velikogo-molchaniya-vnezemnih-civilizacij-chast-3.html
  • knigi.bystrickaya.ru/seminar-trening-sovremennie-tehnologii-razrabotki-individualnih-programm-fitnes-treninga.html
  • upbringing.bystrickaya.ru/lvov-mukachevo-hust-nizhnie-selisha-kolochava-mezhgore-volovec-lvov.html
  • shpargalka.bystrickaya.ru/vlasti-yugri-planiruyut-podpisat-soglashenie-s-minsporta-12-201-1-soderzhanie-glavnie-novosti-sporta-5.html
  • bukva.bystrickaya.ru/moskva-v-carstvovanie-mihaila-feodorovicha-romanova-chast-3.html
  • desk.bystrickaya.ru/pleyadeanskaya-istoriya-chelovechestva-amora-guan-in-pleyadeanskaya-istoriya-chelovechestva-venera-mars-maldek-zemlya.html
  • upbringing.bystrickaya.ru/l-semina-i-fesunenko-yu-chertkova-pravo-na-kazhdij-den-dva-slova-dlya-nachala.html
  • institute.bystrickaya.ru/gosduma-i-pravitelstvo-dostigli-dogovorennosti-po-vsem-principialnim-popravkam-zakonoproekta-o-lgotnih-viplatah.html
  • tasks.bystrickaya.ru/1-16-otchet-o-samoobsledovanii-osnovnoj-obrazovatelnoj-programmi-po-specialnosti-240502-tehnologiya.html
  • nauka.bystrickaya.ru/vnutrennij-chelovek-v-russkoj-yazikovoj-kartine-mira-chast-13.html
  • urok.bystrickaya.ru/povishenie-kachestvennoj-produktivnosti-nasazhdenij-na-lesovodstvennoj-osnove-06-03-01-lesnie-kulturi-selekciya-semenovodstvo-06-03-03-lesovedenie-i-lesovodstvo-lesnie-pozhari-i-borba-s-nimi.html
  • assessments.bystrickaya.ru/effekti-lsd.html
  • institut.bystrickaya.ru/tema-uroka-ravnini-sushi.html
  • © bystrickaya.ru
    Мобильный рефератник - для мобильных людей.