Глава 1. МЕТОД БАЛЛЬНЫХ ОЦЕНОК 


Излагаемые в данной главе процедуры (ranking procedures, Шарф, 1975) относятся к наиболее распространенным методам порядкового шкалирования. В отечественной литературе они получили общее название метода балльных оценок, хотя, как будет видно из излагаемого материала, они не ограничиваются только числовыми оценками стимулов. В некоторых случаях метод балльных оценок может дать более “сильную” шкалу, чем порядковая. Однако это счастливое исключение из правила, связанное более с измерительным опытом наблюдателя и характеристиками оцениваемых объектов, чем с особенностями самой измерительной процедуры.
В первой части этой главы рассматриваются основные принципы метода балльной оценки и приводятся наиболее распространенные алгоритмы построения шкал балльных оценок. Во второй части анализируются основные артефакты измерения, связанные с построением шкалы балльных оценок. Будут рассмотрены также некоторые специальные условия, которые рекомендуется соблюдать при использовании метода балльных оценок.
Из всех методов психологических измерений, в которых используются оценочные суждения человека, процедура шкалирования, основанная на балльных оценках, наиболее популярна в силу своей простоты. Распространенность этого метода связана с прикладными разделами психологии, но не менее широко он используется и в академических исследованиях, например, в психодиагностике при оценке различий испытуемых или в психофизике при психологической оценке стимулов.
Наиболее распространенные разновидности метода балльных оценок делятся на пять больших классов: класс числовых методов, графических и шкалирование с использованием
стандартов, кумулятивных и методов вынужденного выбора (Гилфорд, 1954). Все эти классы связаны с распределением объектов (стимулов) либо вдоль непрерывного континуума, либо в виде упорядоченных дискретных категорий. Все методы похожи тем, что конечным результатом является приписывание чисел стимулам в соответствии с порядком их распределения по континууму, а различаются они либо процедурой распределения стимула, либо способом различения стимулов и количеством вспомогательных операций, необходимых испытуемому. Существуют и некоторые другие аспекты, по которым они различаются, но в связи с их частным характером эти аспекты будут рассмотрены по ходу описания каждого класса в отдельности. В данной главе будут описаны первые три класса методов, поскольку оии наиболее часто используются в психологических измерениях.
§ 1. Графические шкалы
Наиболее распространенным типом шкалы балльных оценок является, вероятно, графическая шкала. В общем случае она представляет собой прямую линию, на которой определенным образом размечены признаки, характеризующие исследуемый класс объектов-стимулов. Линия может быть разделена на отрезки или непрерывна. Если она разделена на отрезки, то число отрезков может быть различным. Она может быть расположена горизонтально или вертикально. Пример непрерывной графической шкалы для балльной оценки скорости мышления отдельных индивидов приведен на рис. 1.
Крайне Инертный              Мыслит              Живой              Чрезвычайно
медленно              тугодум              с обычной              ум              быстрое
мыслит              скоростью              мышление
Рис. 1. Пример графической шкалы для оценки скорости мышления
Испытуемый в этом случае выносит суждение в форме отметки на графической шкале. Признаки, расположенные вдоль шкалы, помогают ему сделать суждение более точным.
Параллельные графические шкалы. Другая форма графической шкалы балльных оценок, названная шкалой балльных оценок поведения, была разработана Чемпне- ем (1940) для оценки некоторых характеристик окружающей ребенка домашней среды. Пример такой шкалы приведен на рис. 2.
В данном примере инструкция испытуемому была такова: “Оцените родительское стремление проявить сверхзаботу о детском благополучии. Действительно ли родители паникуют в зависимости от степени важности ситуации, или есть родители относительно спокойные, холодные или беззаботные к своему ребенку даже в критических ситуациях?”. Кроме того, подчеркивалось, что поведение родителей рассматривается независимо от стоящих за ним мотивов, и в оценку включается только то поведение, которое потенциально направлено на ребенка и которое касается его физического н психического здоровья и комфорта.
Основная особенность этой шкалы состоит в том, что линии балльных оценок располагаются вдоль вертикальной линии. Дело в том, что на горизонтальной линии можно предусмотреть место только для очень коротенького описання признака. Подробное многословное описание здесь уже не поместится. Кроме того, на горизонтальной линии признак труднее локализовать в определенной точке, он оказывается как бы распространен вдоль линии, и поэтому точное положение его на шкале не совсем ясно. При использовании вертикальных линий этн трудности легко устранить. Признаки могут быть достаточно подробными для того, чтобы быть более значащими, в то же время их можно точнее локализовать в точках шкалы.
Еще одна положительная особенность этой шкалы заключается в том, что на каждой странице оценивается только одна характеристика поведения (в данном примере — “озабоченность — беспечность”).
Объекты — стимулы 123456789 10
Предрасположен к строгости, иррациональной тревожности, в значительной степени на иррациональной
основе.
)
Постоянное тревожное напряжение по поводу ребенка, но скорее “нервное”, чем паника
Склонен видеть опасность там, где ее реально нет.
Проявляет значительное беспокойство, ио редко теряет разумный контроль над собой.
Заботливый, но склонен преуменьшать опасность. Очень часто сверхвнимателен, но ситуацию оценивает правильно, не теряет перспективы.
Редко обеспокоен или озабочен теми аспектами поведения, которые выходят за пределы непосредственной ситуации и ответственности. Социальная установка похожа на установку учителя или няни.
Беззаботный и, по-видимому, беспечный даже при важных делах. Настолько беззаботный, что оказывается невнимательным и безответствен ны м.
Рис. 2. Пример графической шкалы балльных оценок поведения родителей по характеристике "озабоченный — беспечный” (Гилфорд, 1954)
Общеизвестно, что более адекватные оценки дают процедуры, в которых испытуемый имеет возможность оценить всех членов группы по одной характеристике, а потом уже переходить к другой. Однако эта процедура дает удовлетворительные результаты, если в ней контролируется хорошо известный “гало-эффект” (см. ниже). Отметим также, что с помощью параллельных линий балльных оценок одной и той же характеристики можно сделать оценки сразу для многих объектов.
Обшие рекомендации к построению графических шкал. Есть определенные эмпирические правила, соблюдение которых способствует эффективности графических балльных оценок (Гилфорд, 1954). Не все из них достаточно бесспорны и убедительны, но исследователю нужно о них помнить:
  1. Все объекты должны быть оценены по одной характеристике, и только потом можно переходить к следующей характеристике.
  2. Линии должны быть по крайней мере 15 см длиной, но не намного длиннее. Линия должна быть достаточно длинной, чтобы учитывать самые точные количественные различия, которые могут дать испытуемые. Но при очень длинных линиях единство континуума для испытуемого прерывается. Длинные линии часто заставляют испытуемого локально сгущать оценки, а не распределять их непрерывно.
  3. Линии не должны иметь разрывов и делений. Но единого мнения о том, какую из двух видов линий использовать, непрерывную или дискретную, нет. Непрерывная линия подчеркивает непрерывность шкалируемой характеристики. Дискретная линня может предполагать разрывность или скачкообразные качественные изменения оцениваемой переменной. Непрерывная линия может быть разделена на любое число единиц, и деления могут быть размешены в соответствии с предпочтением испытуемого.
  4. Для “неиспорченных” и необученных испытуемых “хорошая” оценка обычно связана с началом линии сле
    ва илн сверху. В вертикальных шкалах "хорошую” оценку располагают вверху — это естественно для всех. В горизонтальных же шкалах наличие “хорошей” оценки противоречит обычной практике математической системы координат. Но, тем не менее, испытуемые обычно предпочитают помещать положительные значения оцениваемой характеристики в начале линии, слева.
  5. Описательные фразы н признаки должны быть сконцентрированы по возможности у точек на шкале. Это очень легко сделать для вертикальных шкал. Для горизонтальных шкал полезно использовать слова, располагающиеся в колонке одно над другим.
  6. Необходимые признаки обычно равномерно расставляются вдоль линнн; но это можно делать, только если они одинаково различны. В противном случае сами признаки должны быть прошкалированы какой-то отдельной психологической процедурой и тогда их локализация будет обусловливаться уже этой шкалой. Иногда между признаками промежутки специально искажаются, чтобы противодействовать общим смещениям (байесам) в балльных оценках. Например, чтобы противодействовать ошибке “смягчения” (см. ниже), признаки на предпочитаемой стороне шкалы располагают с более широкими интервалами, чем признаки на непредпочнтаемой стороне. Чтобы противодействовать тенденции образовывать сгущения балльных оценок к середине шкалы (эффект центрацин), промежутки между средними признаками можно немного увеличить.
  7. Конечные признаки не должны быть такими крайними по содержанию, что испытуемые очевидно никогда не будут нмн пользоваться. Положение конечных признаков должно быть близко к концам лннни.
  8. В случае биполярных характеристик нейтральный или индифферентный признак находится обычно в центре линии, если не вводятся модификации, например, типа правила 6.
  9. В процессе шкалирования можно использовать трафарет, который разделяет каждую линню на секции, где, в свою очередь, могут использоваться числовые оценки. Деления могут быть неравными, они могут быть измене
    ны с тем, чтобы помочь противодействовать систематическим байесам в балльных оценках или нормализовать распределения шкал.

Оценка графических шкал. У графических шкал много достоинств и сравнительно мало недостатков. Среди наиболее существенных преимуществ — простота н легкая управляемость. Эти шкалы интересны и не требуют сильной дополнительной мотивации, процедура шкалирования быстро выполняется испытуемым, не требует от него числовых операций. С точки зрения теории измерения, графическая шкала обеспечивает возможность такого точного различения, на которое испытуемый вообще способен, т.е. графическая шкала может обладать “силой” шкалы интервалов или отношений, хотя чаще всего она представляет собой шкалу порядка. 

Источник: Гусев А.Н., «Измерение в психологии общий психологический практикум. Общ. психол. практикум. - М.: Смысл. - 281 с.» 1987

А так же в разделе « Глава 1. МЕТОД БАЛЛЬНЫХ ОЦЕНОК  »