- •Часть I
- •Снижение уровня шума при назначении наказаний
- •К разговору о шуме при вынесении приговоров
- •Лотерея, создающая шум
- •Ревизия шумовых помех выявляет системный шум
- •Нежелательный разброс против желаемого разнообразия
- •Иллюзия согласия
- •К разговору о системном шуме в страховой компании
- •Уникальные или типовые
- •Шум в уникальных решениях
- •Как контролировать шум в уникальных решениях
- •К разговору об уникальных решениях
- •Процесс вынесения суждения: пример
- •Цель суждения: внутренний сигнал
- •Как оценивается суждение: результат и процесс
- •Оценочные суждения
- •В чем проблема с шумом
- •Нежелательный, но поддающийся измерению
- •К разговору о профессиональных суждениях
- •Нужно ли компании GoodSell сокращать уровень шума?
- •Среднеквадратические значения
- •Уравнения расчета погрешности
- •Цена шума
- •Ревизия шумовых помех при назначении наказаний
- •Средний срок приговора
- •Лотерея при вынесении приговоров
- •Некоторые судьи особенно суровы: межэкспертный шум
- •Не все судьи одинаковы: внутриэкспертный шум
- •Составляющие шума
- •К разговору об анализе шума
- •Вторая лотерея
- •Измерение уровня ситуативного шума
- •Один в поле воин
- •Источники ситуативного шума
- •Определение масштабов ситуативного шума
- •Ситуативный шум, внутренние причины
- •К разговору о ситуативном шуме
- •Шум в музыке
- •Не только скачивание музыки
- •Каскады
- •Групповая поляризация
- •К разговору о групповых решениях
- •Часть III
- •Суждение или формула?
- •Пол Мил: оптимальная модель одерживает над вами верх
- •Голдберг: ваша модель одерживает над вами верх
- •К разговору об оценках и моделях
- •Больше простоты: грубые и прекрасные
- •Еще больше простоты: простые правила
- •Больше сложности: методы машинного обучения
- •Освобождение под залог: оптимальные решения
- •Почему мы не так часто используем правила?
- •Объективная неосведомленность
- •Излишне самоуверенные эксперты
- •Беспомощные эксперты и немногим лучшие модели
- •Отрицание неведения
- •К разговору об объективной неосведомленности
- •Прогнозирование жизненного пути
- •Понимание и прогнозирование
- •Каузальное мышление
- •Понимание в долине правдоподобности
- •Взгляд изнутри и взгляд со стороны
- •К разговору о границах понимания
- •Часть IV
- •Диагностика искажений
- •Подстановка
- •Предопределенность вывода
- •Избыточная когерентность
- •Психологические искажения как причина шума
- •К разговору об эвристике, искажениях и шуме
- •Сравнение и когерентность
- •Сравнение интенсивности
- •Искажения в сравнительных прогнозах
- •Шум в сравнительных прогнозах: пределы абсолютных оценок
- •К разговору о сравнениях
- •Гипотеза о возмущении
- •«Шумные» шкалы
- •Доллары и якорение
- •Неутешительные выводы
- •К разговору о шкалах
- •Задачи трудные и задачи легкие
- •Внутриэкспертный шум: постоянный или временный
- •Аналогия с чертами характера человека
- •К разговору о внутриэкспертном шуме
- •Компоненты шума
- •Систематизация компонентов шума
- •Объяснение ошибок
- •Шум как статистическое явление
- •К разговору об источниках шума
- •Эксперты и лидеры мнений
- •Интеллектуальные способности
- •Когнитивные стили
- •К разговору о «лучших судьях»
- •Предупреждать или исправлять?
- •Ограничения методов устранения искажений
- •Наблюдатель за процессом принятия решений
- •Снижение уровня шума: гигиена принятия решений
- •Отпечатки пальцев
- •Ситуативный шум в дактилоскопии
- •Насколько шум чреват ошибками?
- •Прислушиваясь к шуму
- •Управление информационным потоком
- •К разговору об управлении информационным потоком
- •Улучшение качества прогнозов
- •Проект «Верное суждение»
- •Вечная бета-версия
- •Шум и смещение в прогнозировании
- •В каких случаях срабатывают методы отбора и обобщения
- •К разговору об отборе и агрегировании
- •Общий обзор
- •Значение методических рекомендаций: снижение шума в медицине
- •Психиатрия – удручающий пример
- •К разговору о методических рекомендациях в медицине
- •Требуется суждение…
- •Старая проблема: в поисках решения
- •Аргументы в пользу суждений относительного характера
- •Ранжируем без принуждения
- •Что же дальше?
- •К разговору об определении шкалы оценки профессиональной эффективности
- •Риски интервью
- •Шум при собеседованиях
- •Психология интервьюера
- •Структурирование как метод оптимизации подбора персонала
- •К разговору о структурировании процесса найма персонала
- •Первая встреча: согласование подхода
- •Вторая встреча: определение факторов для промежуточных оценок
- •Команда аналитиков
- •Решающее совещание
- •Протокол промежуточных оценок при типовых решениях
- •Перемены, которые вносит протокол
- •К разговору о протоколе промежуточных оценок
- •Меньше шума – больше ошибок?
- •«Бесшумные» предвзятые алгоритмы
- •К разговору о цене снижения шума
- •Изменение системы ценностей
- •Обман системы и обход правил
- •Предупреждение правонарушений Аппетит к риску
- •Творческое начало, моральный настрой и свежие идеи
- •К разговору о достоинстве
- •Неоднородность и неосведомленность
- •Боссы и контроль над подчиненными
- •Возврат вытесненного
- •Обоснование концепции
- •Объявим шум вне закона?
- •К разговору о правилах и стандартах
- •Суждения
- •Ошибки: смещение и шумовые помехи
- •Измерение смещения и шума
- •Шум – серьезная проблема
- •Разновидности шума
- •Психология суждений и влияние шума
- •Шум – «вещь в себе»
- •Как снизить уровень шума и влияние искажений
- •Допустимое количество шума
- •Подготовка материалов исследования
- •Предварительная встреча с руководством компании
- •Проведение исследования
- •Анализ и выводы
- •Чек-лист для выявления искажений
- •Выражение признательности
- •Об авторах
- •Примечания
личий, а взаимодействий: различные судьи взаимодействуют с конкретными обвиняемыми, учителя со школьниками, социальные работники с семьями, руководители со своими конкретными планами на будущее. Шум – это в основном побочный продукт нашей уникальности, нашей «шумной натуры». Сокращение межэкспертного шума – достойная цель, но преследование только одной этой цели оставит без решения бóльшую часть возникающих из-за системного шума проблем.
Объяснение ошибок
Мы рассказали о шуме много нового, однако эта тема почти полностью выпадает из общественного сознания и дискуссий о суждениях и ошибках. Несмотря на доказательства присутствия шума и множество причин его возникновения, шум редко упоминается как основной фактор при вынесении суждений. Как такое возможно? Почему мы никогда не ссылаемся на шум, чтобы объяснить несостоятельность суждений, а по привычке обвиняем во всем искажения? Почему в шуме так редко видят причину ошибок, невзирая на его повсеместное проникновение во все суждения?
Ключ к разгадке в том, что, хотя средняя погрешность (смещение) и вариативность ошибок (шум) равновесны в уравнении расчета погрешности, умом мы воспринимаем их совершенно по-разному. И наш обычный способ познания
окружающего мира не оставляет нам практически никакой возможности осознать роль шума.
Выше мы заметили, что задним числом легко найти причину любому событию, хотя предугадать его заранее было невозможно. В долине правдоподобности события закономерны и легко объяснимы.
То же самое можно сказать и о суждениях. Как и прочие события, решения принимаются в основном в долине правдоподобности и обычно нас не удивляют. Во всяком случае, суждения, имеющие удовлетворительные последствия, воспринимаются как должное и редко оспариваются. Когда стрелок поражает цель, когда операция на сердце проходит успешно, а стартап удается, мы предполагаем, что тот, кто принимал решение, сделал правильный выбор. Ведь он оказался прав! Подобно другим обыкновенным историям, истории успеха становятся само собой разумеющимися, едва все узнают результат.
Однако у нас возникает потребность объяснить и неординарные события: как плохие, так подчас и на удивление хорошие – к примеру, крайне рискованный бизнес-проект, который неожиданно окупился. Объяснения, ссылающиеся на чьи-то оплошности или особое чутье, намного популярнее, чем они того заслуживают, поскольку, когда известен исход дела, любая изначально рискованная авантюра легко превращается в воплощенный замысел гения или сумасшедшего. Хорошо задокументированные психологические иска-
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
жения, называемые фундаментальными ошибками атрибу-
ции, – это упорная тенденция приписывать вину или заслугу факторам, которые проще объяснить везением или сложившимися обстоятельствами. Другое искажение – ретроспективный взгляд – деформирует оценки до такой степени, что исходы, которые невозможно было предвидеть, задним числом производят впечатление легко предсказуемых.
Объяснения таким ошибкам найти не трудно; подобрать доводы для обоснования суждения куда легче, чем выяснить причину событий. Всегда можно сослаться на мотивы людей, делающих заключения. Если этого недостаточно, можно обвинить их в некомпетентности. А в последние десятилетия стало популярным и другое объяснение некачественным суждениям: психологические искажения.
Исследования в области психологии и поведенческой экономики задокументировали большой список психологических искажений: ошибка в планировании, излишняя самоуверенность, неприятие потерь, эффект владения, сохранение статус-кво, игнорирование будущего («ориентация на настоящее») и многие другие, в том числе, конечно, предубеждения в отношении определенных категорий людей. Мы многое знаем об условиях, при которых каждое из этих искажений с большой вероятностью влияет на оценки и решения, а также о способах, позволяющих проконтролировать и распознать искаженное мышление в реальном времени.
Психологическое искажение – вразумительное и логичное объяснение погрешностям в суждениях при условии, что искажение было предсказуемо или выявлено в реальном времени. Но и психологическим искажениям, обнаруженным лишь по факту, можно найти полезное, хотя и осторожное применение, если их объяснение пригодится на будущее. Например, поразительный отказ женщине – сильному кандидату на должность может стать поводом для выдвижения гипотезы о наличии гендерных предубеждений, которую будущие назначения, рассмотренные той же комиссией, подтвердят либо опровергнут. Сравните это с якобы причинно-след- ственным объяснением единичному случаю в стиле «раз человек потерпел неудачу, значит, был слишком самоуверен». Утверждение абсолютно бессодержательно, однако дает иллюзию понимания и уже этим доставляет удовольствие. Преподаватель школы бизнеса Фил Розенцвейг убедительно до-
казал195, что подобные пустые объяснения с псевдонаучным упоминанием искажений далеко не редкость в дискуссиях о бизнесе. Их популярность свидетельствует о насущной потребности выдумывать придающие смысл событиям истории о причинах и следствиях.
Шум как статистическое явление
Как мы заметили в главе 12, наш естественный способ мышления является каузальным. Что бы ни произошло,
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
мы сосредотачиваемся на частностях, изобретая логичные и подчиняющиеся законам причины и следствия сюжеты, в которых неудачи часто приписывают ошибкам, а ошибки объясняются искажением. Легкость, с которой мы интерпретируем ошибочные суждения, не оставляет в анализе ошибок никакого места шуму.
Невидимость шума – прямое следствие каузального мышления. Шум по своей сути явление статистическое: он становится видимым лишь тогда, когда мы рассматриваем с точки зрения статистики множество сходных суждений. И вот тогда его уже трудно не заметить! Это статистические данные, которые постфактум свидетельствуют о расхождениях в вынесении приговоров и назначении страховых выплат. Это разнообразие вариантов при прогнозировании вероятности успеха. Это разброс попаданий на мишени. С точки зрения причины и следствия шума нигде нет; с точки зрения статистики он повсюду.
К несчастью, не так просто обрести статистическое мышление. Мы без усилий отыскиваем причины событий, которые наблюдаем, однако тому, чтобы смотреть на них с точки зрения статистики, нужно учиться и прилагать к этому много усилий. Причины находятся сами по себе; статистика дается с трудом.
В результате мы имеем примечательный дисбаланс во взглядах на смещение и шум как на источники ошибок. Если вы изучали основы психологии, то, вероятно, видели