- •Часть I
- •Снижение уровня шума при назначении наказаний
- •К разговору о шуме при вынесении приговоров
- •Лотерея, создающая шум
- •Ревизия шумовых помех выявляет системный шум
- •Нежелательный разброс против желаемого разнообразия
- •Иллюзия согласия
- •К разговору о системном шуме в страховой компании
- •Уникальные или типовые
- •Шум в уникальных решениях
- •Как контролировать шум в уникальных решениях
- •К разговору об уникальных решениях
- •Процесс вынесения суждения: пример
- •Цель суждения: внутренний сигнал
- •Как оценивается суждение: результат и процесс
- •Оценочные суждения
- •В чем проблема с шумом
- •Нежелательный, но поддающийся измерению
- •К разговору о профессиональных суждениях
- •Нужно ли компании GoodSell сокращать уровень шума?
- •Среднеквадратические значения
- •Уравнения расчета погрешности
- •Цена шума
- •Ревизия шумовых помех при назначении наказаний
- •Средний срок приговора
- •Лотерея при вынесении приговоров
- •Некоторые судьи особенно суровы: межэкспертный шум
- •Не все судьи одинаковы: внутриэкспертный шум
- •Составляющие шума
- •К разговору об анализе шума
- •Вторая лотерея
- •Измерение уровня ситуативного шума
- •Один в поле воин
- •Источники ситуативного шума
- •Определение масштабов ситуативного шума
- •Ситуативный шум, внутренние причины
- •К разговору о ситуативном шуме
- •Шум в музыке
- •Не только скачивание музыки
- •Каскады
- •Групповая поляризация
- •К разговору о групповых решениях
- •Часть III
- •Суждение или формула?
- •Пол Мил: оптимальная модель одерживает над вами верх
- •Голдберг: ваша модель одерживает над вами верх
- •К разговору об оценках и моделях
- •Больше простоты: грубые и прекрасные
- •Еще больше простоты: простые правила
- •Больше сложности: методы машинного обучения
- •Освобождение под залог: оптимальные решения
- •Почему мы не так часто используем правила?
- •Объективная неосведомленность
- •Излишне самоуверенные эксперты
- •Беспомощные эксперты и немногим лучшие модели
- •Отрицание неведения
- •К разговору об объективной неосведомленности
- •Прогнозирование жизненного пути
- •Понимание и прогнозирование
- •Каузальное мышление
- •Понимание в долине правдоподобности
- •Взгляд изнутри и взгляд со стороны
- •К разговору о границах понимания
- •Часть IV
- •Диагностика искажений
- •Подстановка
- •Предопределенность вывода
- •Избыточная когерентность
- •Психологические искажения как причина шума
- •К разговору об эвристике, искажениях и шуме
- •Сравнение и когерентность
- •Сравнение интенсивности
- •Искажения в сравнительных прогнозах
- •Шум в сравнительных прогнозах: пределы абсолютных оценок
- •К разговору о сравнениях
- •Гипотеза о возмущении
- •«Шумные» шкалы
- •Доллары и якорение
- •Неутешительные выводы
- •К разговору о шкалах
- •Задачи трудные и задачи легкие
- •Внутриэкспертный шум: постоянный или временный
- •Аналогия с чертами характера человека
- •К разговору о внутриэкспертном шуме
- •Компоненты шума
- •Систематизация компонентов шума
- •Объяснение ошибок
- •Шум как статистическое явление
- •К разговору об источниках шума
- •Эксперты и лидеры мнений
- •Интеллектуальные способности
- •Когнитивные стили
- •К разговору о «лучших судьях»
- •Предупреждать или исправлять?
- •Ограничения методов устранения искажений
- •Наблюдатель за процессом принятия решений
- •Снижение уровня шума: гигиена принятия решений
- •Отпечатки пальцев
- •Ситуативный шум в дактилоскопии
- •Насколько шум чреват ошибками?
- •Прислушиваясь к шуму
- •Управление информационным потоком
- •К разговору об управлении информационным потоком
- •Улучшение качества прогнозов
- •Проект «Верное суждение»
- •Вечная бета-версия
- •Шум и смещение в прогнозировании
- •В каких случаях срабатывают методы отбора и обобщения
- •К разговору об отборе и агрегировании
- •Общий обзор
- •Значение методических рекомендаций: снижение шума в медицине
- •Психиатрия – удручающий пример
- •К разговору о методических рекомендациях в медицине
- •Требуется суждение…
- •Старая проблема: в поисках решения
- •Аргументы в пользу суждений относительного характера
- •Ранжируем без принуждения
- •Что же дальше?
- •К разговору об определении шкалы оценки профессиональной эффективности
- •Риски интервью
- •Шум при собеседованиях
- •Психология интервьюера
- •Структурирование как метод оптимизации подбора персонала
- •К разговору о структурировании процесса найма персонала
- •Первая встреча: согласование подхода
- •Вторая встреча: определение факторов для промежуточных оценок
- •Команда аналитиков
- •Решающее совещание
- •Протокол промежуточных оценок при типовых решениях
- •Перемены, которые вносит протокол
- •К разговору о протоколе промежуточных оценок
- •Меньше шума – больше ошибок?
- •«Бесшумные» предвзятые алгоритмы
- •К разговору о цене снижения шума
- •Изменение системы ценностей
- •Обман системы и обход правил
- •Предупреждение правонарушений Аппетит к риску
- •Творческое начало, моральный настрой и свежие идеи
- •К разговору о достоинстве
- •Неоднородность и неосведомленность
- •Боссы и контроль над подчиненными
- •Возврат вытесненного
- •Обоснование концепции
- •Объявим шум вне закона?
- •К разговору о правилах и стандартах
- •Суждения
- •Ошибки: смещение и шумовые помехи
- •Измерение смещения и шума
- •Шум – серьезная проблема
- •Разновидности шума
- •Психология суждений и влияние шума
- •Шум – «вещь в себе»
- •Как снизить уровень шума и влияние искажений
- •Допустимое количество шума
- •Подготовка материалов исследования
- •Предварительная встреча с руководством компании
- •Проведение исследования
- •Анализ и выводы
- •Чек-лист для выявления искажений
- •Выражение признательности
- •Об авторах
- •Примечания
знаменитом исследовании доносит до нас отрезвляющую весть о разнице между пониманием и прогнозом. Программа FFCWS оказалась настоящим сокровищем для социологии, и, как мы увидели, собранные в ходе ее проведения данные использованы весьма плодотворно. Ученые, которые проводили эти исследования, несомненно ощущали уверенность, что их работа будет способствовать пониманию проблем, с которыми сталкиваются уязвимые семьи. К несчастью, ощущение прорыва не может соперничать со способностью делать дискретные прогнозы отдельных событий в жизни отдельных людей. Вступление к статье об эксперименте с базой данных программы FFCWS содержит грозное предостереже-
ние: «Исследователи должны согласовывать148 свои фантазии насчет понимания людских судеб с тем фактом, что ни один из прогнозов не окажется достаточно точным».
Понимание и прогнозирование
Логика, лежащая в основе столь пессимистичного вывода, требует некоторого уточнения. Когда авторы эксперимента с программой FFCWS приравняли понимание к прогнозированию (скорее отсутствие одного к невозможности другого), они использовали термин понимание в особом смысле. У этого слова есть и другие значения: понимание математической формулы или сущности любви не наделяет вас способностью делать конкретные прогнозы.
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
Тем не менее в социологических исследованиях и повседневных разговорах утверждение о том, что мы понимаем какие-то вещи, равносильно заявлениям о том, что нам понятны их причины. Социологи, подбиравшие и изучавшие тысячи переменных при работе с программой FFCWS, искали причины наблюдаемых событий. Врачи, которые понимают, что именно беспокоит пациента, заявляют: причиной наблюдаемых симптомов является диагностированная ими
патология. Понять – значит описать причинную цепочку149. Способность делать прогнозы является мерой того, правильно ли была идентифицирована такая цепочка. А корреляция как мера точности прогнозов – это мера того, сколько причинных связей мы можем объяснить.
Последнее утверждение может вас удивить, если вы попали под чары элементарной статистики и запомнили часто повторяющееся предупреждение: «корреляция не подразумевает причинно-следственной связи». Рассмотрим, например, корреляцию между размером обуви и математическими способностями детей: вполне очевидно, что одна переменная не зависит от другой. А корреляция возникает ввиду того, что и размер обуви, и познания в математике увеличиваются с возрастом. Эта корреляция реальна и подкрепляет прогноз: если вам известно, что у конкретного ребенка большой размер стопы, вы можете спрогнозировать и больший уровень его познаний в математике; а тот ребенок, у которого маленький размер стопы, знает меньше. Однако из этой
корреляции вам не следует делать выводы о причинной связи.
Тем не менее мы должны помнить: несмотря на то, что корреляция не подразумевает причинной связи, причинная связь подразумевает корреляцию. Где есть причинная связь, там ищите и корреляцию. Если вы не обнаружили корреляцию между возрастом и размером обуви у взрослых людей, можно с уверенностью заключить: после определенного возраста размер стопы больше не связан с количеством прожитых лет, и искать объяснение тому, что людям требуется обувь разного размера, следует в чем-то другом.
Итак, если есть причинно-следственная связь, то есть и корреляция. Из этого вытекает, что там, где есть причин- но-следственная зависимость, мы способны прогнозировать
– причем корреляция, точность нашего прогноза, является мерой того, насколько верно мы понимаем причинно-след- ственную зависимость. Отсюда и выводы принстонских ученых: пределы, которыми ограничена возможность прогнозирования таких событий, как выселение из квартиры (вспомним корреляцию 0,22!), являются признаком того, насколько много – или насколько мало – социологи понимают, как может сложиться в будущем жизнь этих семей. Объективная неосведомленность устанавливает верхний предел не только нашим прогнозам, но и нашему пониманию.
Что же тогда имеют в виду большинство профессионалов, с уверенностью заявляя – они все понимают в своей области?
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
Как можно убедительно говорить о том, что именно вызвало пневмонию у больного, и давать уверенные прогнозы течения болезни? Короче говоря, почему профессионалы – да и все мы – явно недооценивают свою объективную неосведомленность о происходящем в нашем мире?
Каузальное мышление
Если, читая начало этой главы, вы задавались вопросами, какие обстоятельства привели к выселению из квартиры и к другим событиям в жизни уязвимых семей, вы использовали тот же самый тип мышления, что и исследователи, чьи работы мы описали. Вы обрели статистическое мышление, а именно задумались об общих категориях: уязвимые семьи как социальная группа и статистические данные, которые эту группу описывают, включая средние значения, статистические отклонения, корреляцию и тому подобное. На частных случаях вы не сосредотачивались.
Другой способ мышления, более естественный для наше-
го разума150, мы назовем здесь каузальным мышлением, то есть выражающим связь причины и следствия. Каузальное мышление изобретает сюжеты, в которых отдельные события, люди и объекты оказывают друг на друга воздействие. Чтобы проникнуться каузальным мышлением, представьте себя социальным работником, который курирует много семей с низким доходом. Вы только что узнали, что семью
Джонсов выселили из квартиры. Ваша реакция на событие вызвана тем, что вам известно о Джонсах. А известно вам следующее: Джессика Джонс, единственный кормилец семьи, несколько месяцев назад была уволена. Найти другую работу она не смогла и поэтому оказалась неспособна вносить арендную плату в полном объеме. Она вносила частичную оплату, несколько раз умоляла управляющего домом об отсрочке и даже просила вас вмешаться (и вы вмешались, однако он остался непреклонным). С учетом обстоятельств выселение Джонсов для вас событие прискорбное, но вполне ожидаемое. По сути это стало логическим завершением цепочки событий, неизбежной развязкой предопределенной трагедии.
Когда мы проникаемся чувством неизбежности, то упускаем из виду, что обстоятельства легко могли сложиться иначе – подобно тому, как на каждой развилке дороги фортуна могла выбрать иной путь. Джессика могла сохранить свою работу или быстро найти другую. Ей мог помочь ктото из родственников. Вы как социальный работник могли более успешно защитить ее. Управляющий домом мог оказаться более отзывчивым и дать семье отсрочку на несколько недель, что позволило бы Джессике найти работу и погасить долги по арендной плате.
Альтернативные сценарии так же правдоподобны, как и основной – при условии, что исход известен. Каким бы ни был исход (выселение состоялось или семья сохранила квар-
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/