Мне хотелось уменьшить разницу между оценками, изменив еще не

Записанный результат, и с большим трудом удавалось придерживаться

Простого правила не поддаваться этому искушению. В моих оценках ответов

одного и того же студента часто наблюдался значительный разброс.

Отсутствие когерентности раздражал о и вызывало во мне неуверенность.

Я стал менее доволен и менее уверен в своих оценках, однако понимал, что

Это служило хорошим знаком, свидетельствовало о том, что новый метод

Лучше. Радовавшее меня прежде сходство оценок оказалось ложным и давало

Ощущение когнитивной легкости; моя Система 2 с безмятежной радостью

Принимала окончательную оценку. Позволив оценке первого ответа влиять на

Оценку всех остальных, я не замечал несоответствия, проявлявшегося в

отличных ответах студента на одни вопросы и плохих – на другие.

Раздражающая несообразность, обнаружившаяся при переходе на новую

Процедуру выставления оценок, как выяснилось, существует в

действительности: она отражала и то, что ____________единичный ответ не может служить

адекватной мерой знаний студента, и то, что мои оценки ненадежны.

Мой метод уменьшения эффекта ореола сводится к общему принципу:

избавляйтесь от корреляции ошибок! Чтобы понять, как работает этот

Принцип, представьте, что множеству и спытуемых показывают стеклянные

Банки, заполненные монетками, и просят оценить количество мелочи в

Каждой банке. Как объяснил Джеймс Шуровьески (James Surowiecki) в своей

замечательной книге «Мудрость толпы», с такими заданиями участники, как

Правило, справляются плохо, но если объединить все единичные суждения, то

Результат будет неожиданно хорошим. Кто-то переоценивает настоящее

Количество, кто-то – недооценивает, но если все оценки усреднить, то

Результат выходит довольно точным. Механизм прост: все смотрят на одну и

Ту же банку, у всех оценок – одна основа, и все же ошибки каждого

Испытуемого не зависят от ошибок других и (в отсутствие систематических

Искажений) усредняются до нуля. Вдобавок магия уменьшения ошибки

Срабатывает только в том случае, когда наблюдения взаимно независимы, а

Ошибки не коррелируют. Если испытуемые находятся под влиянием общего

Для них предубеждения, то агрегация оценок его не уменьшит. По сути, если

Позволить наблюдателям влиять друг на друга, то размер в ыборки

Уменьшится, а с ним уменьшится и точность групповой оценки.

Для получения полезной информации из множественных источников следует

Обеспечить их независимость друг от друга. Это правило широко используют в

Полицейских расследованиях: многочисленным свидетелям происшествия не

Разрешают обсуждать его до дачи показаний. Цель не только в том, чтобы

Предотвратить сговор между злоумышленниками, но и в том, чтобы

Непредубежденные свидетели не повлияли друг на друга. Те, кто обмениваются

Впечатлениями, впоследствии будут склонны делать одинаковые ошибки в

Показаниях, уменьшая общую ценность предоставляемых ими сведений.

Избавляйтесь от избыточности в ваших источниках.

Этот принцип независимости суждений и декоррелированных ошибок могут

С успехом применять руководители компаний во время проведения совещаний

И всевозможных встреч. Следует соблюдать простое правило: все участники

Записывают краткое изложение своей точки зрения до обсуждения, и, та ким

Образом, эффективно используется все разнообразие знаний и мнений внутри

Группы. При стандартном открытом обсуждении слишком большой вес

Получают мнения тех, кто говорит раньше и убедительнее других, вынуждая

Остальных присоединяться.

Что ты видишь, то и есть (WYSIATI)

Размышляя о первых годах совместной работы с Амосом, я неизбежно

вспоминаю его любимую шутку. Ловко пародируя одного из университетских

⇐ Предыдущая20212223242526272829Следующая ⇒

Поделиться: