- •Часть I
- •Снижение уровня шума при назначении наказаний
- •К разговору о шуме при вынесении приговоров
- •Лотерея, создающая шум
- •Ревизия шумовых помех выявляет системный шум
- •Нежелательный разброс против желаемого разнообразия
- •Иллюзия согласия
- •К разговору о системном шуме в страховой компании
- •Уникальные или типовые
- •Шум в уникальных решениях
- •Как контролировать шум в уникальных решениях
- •К разговору об уникальных решениях
- •Процесс вынесения суждения: пример
- •Цель суждения: внутренний сигнал
- •Как оценивается суждение: результат и процесс
- •Оценочные суждения
- •В чем проблема с шумом
- •Нежелательный, но поддающийся измерению
- •К разговору о профессиональных суждениях
- •Нужно ли компании GoodSell сокращать уровень шума?
- •Среднеквадратические значения
- •Уравнения расчета погрешности
- •Цена шума
- •Ревизия шумовых помех при назначении наказаний
- •Средний срок приговора
- •Лотерея при вынесении приговоров
- •Некоторые судьи особенно суровы: межэкспертный шум
- •Не все судьи одинаковы: внутриэкспертный шум
- •Составляющие шума
- •К разговору об анализе шума
- •Вторая лотерея
- •Измерение уровня ситуативного шума
- •Один в поле воин
- •Источники ситуативного шума
- •Определение масштабов ситуативного шума
- •Ситуативный шум, внутренние причины
- •К разговору о ситуативном шуме
- •Шум в музыке
- •Не только скачивание музыки
- •Каскады
- •Групповая поляризация
- •К разговору о групповых решениях
- •Часть III
- •Суждение или формула?
- •Пол Мил: оптимальная модель одерживает над вами верх
- •Голдберг: ваша модель одерживает над вами верх
- •К разговору об оценках и моделях
- •Больше простоты: грубые и прекрасные
- •Еще больше простоты: простые правила
- •Больше сложности: методы машинного обучения
- •Освобождение под залог: оптимальные решения
- •Почему мы не так часто используем правила?
- •Объективная неосведомленность
- •Излишне самоуверенные эксперты
- •Беспомощные эксперты и немногим лучшие модели
- •Отрицание неведения
- •К разговору об объективной неосведомленности
- •Прогнозирование жизненного пути
- •Понимание и прогнозирование
- •Каузальное мышление
- •Понимание в долине правдоподобности
- •Взгляд изнутри и взгляд со стороны
- •К разговору о границах понимания
- •Часть IV
- •Диагностика искажений
- •Подстановка
- •Предопределенность вывода
- •Избыточная когерентность
- •Психологические искажения как причина шума
- •К разговору об эвристике, искажениях и шуме
- •Сравнение и когерентность
- •Сравнение интенсивности
- •Искажения в сравнительных прогнозах
- •Шум в сравнительных прогнозах: пределы абсолютных оценок
- •К разговору о сравнениях
- •Гипотеза о возмущении
- •«Шумные» шкалы
- •Доллары и якорение
- •Неутешительные выводы
- •К разговору о шкалах
- •Задачи трудные и задачи легкие
- •Внутриэкспертный шум: постоянный или временный
- •Аналогия с чертами характера человека
- •К разговору о внутриэкспертном шуме
- •Компоненты шума
- •Систематизация компонентов шума
- •Объяснение ошибок
- •Шум как статистическое явление
- •К разговору об источниках шума
- •Эксперты и лидеры мнений
- •Интеллектуальные способности
- •Когнитивные стили
- •К разговору о «лучших судьях»
- •Предупреждать или исправлять?
- •Ограничения методов устранения искажений
- •Наблюдатель за процессом принятия решений
- •Снижение уровня шума: гигиена принятия решений
- •Отпечатки пальцев
- •Ситуативный шум в дактилоскопии
- •Насколько шум чреват ошибками?
- •Прислушиваясь к шуму
- •Управление информационным потоком
- •К разговору об управлении информационным потоком
- •Улучшение качества прогнозов
- •Проект «Верное суждение»
- •Вечная бета-версия
- •Шум и смещение в прогнозировании
- •В каких случаях срабатывают методы отбора и обобщения
- •К разговору об отборе и агрегировании
- •Общий обзор
- •Значение методических рекомендаций: снижение шума в медицине
- •Психиатрия – удручающий пример
- •К разговору о методических рекомендациях в медицине
- •Требуется суждение…
- •Старая проблема: в поисках решения
- •Аргументы в пользу суждений относительного характера
- •Ранжируем без принуждения
- •Что же дальше?
- •К разговору об определении шкалы оценки профессиональной эффективности
- •Риски интервью
- •Шум при собеседованиях
- •Психология интервьюера
- •Структурирование как метод оптимизации подбора персонала
- •К разговору о структурировании процесса найма персонала
- •Первая встреча: согласование подхода
- •Вторая встреча: определение факторов для промежуточных оценок
- •Команда аналитиков
- •Решающее совещание
- •Протокол промежуточных оценок при типовых решениях
- •Перемены, которые вносит протокол
- •К разговору о протоколе промежуточных оценок
- •Меньше шума – больше ошибок?
- •«Бесшумные» предвзятые алгоритмы
- •К разговору о цене снижения шума
- •Изменение системы ценностей
- •Обман системы и обход правил
- •Предупреждение правонарушений Аппетит к риску
- •Творческое начало, моральный настрой и свежие идеи
- •К разговору о достоинстве
- •Неоднородность и неосведомленность
- •Боссы и контроль над подчиненными
- •Возврат вытесненного
- •Обоснование концепции
- •Объявим шум вне закона?
- •К разговору о правилах и стандартах
- •Суждения
- •Ошибки: смещение и шумовые помехи
- •Измерение смещения и шума
- •Шум – серьезная проблема
- •Разновидности шума
- •Психология суждений и влияние шума
- •Шум – «вещь в себе»
- •Как снизить уровень шума и влияние искажений
- •Допустимое количество шума
- •Подготовка материалов исследования
- •Предварительная встреча с руководством компании
- •Проведение исследования
- •Анализ и выводы
- •Чек-лист для выявления искажений
- •Выражение признательности
- •Об авторах
- •Примечания
Аналогично развиваются и методические рекомендации по диагностике рака молочной железы. В данном случае врачу помогает «Система анализа и протоколирования результатов лучевых исследований молочной железы» (BIRADS), снижая уровень шума при интерпретации маммограмм. Проводилось исследование, позволившее выяснить,
что BI-RADS328 увеличивает степень межэкспертного согласия. Таким образом, методические рекомендации эффективно устраняют шумовые помехи в области, для которой характерен существенный разброс мнений. Неоднократные (и вполне успешные) попытки применения методических ре-
комендаций отмечены также в патологической анатомии 329.
Психиатрия – удручающий пример
Психиатрия – наглядный пример сильнейшего воздействия шума. Обследуя одного и того же пациента с использованием различных критериев диагностики, психиатры нередко расходятся во мнениях. Именно по этой причи-
не подавление шума330 стало одним из главных приоритетов сообщества врачей-психиатров еще с 1940-х годов. Мы с вами убедимся в том, что, несмотря на постоянное совершенствование в этом направлении, методические рекомендации приносят весьма скромный эффект.
В 1964 году проводилось исследование, в котором участ-
вовали 91 пациент331 и десять опытных психиатров. В итоге выяснилось, что вероятность согласия двух специалистов составляет лишь 57 %. Вспомним и более ранний эксперимент, охвативший 426 пациентов муниципальных больниц, которых независимо друг от друга обследовали два психиатра. Тогда процент согласия в диагностике разновидности заболевания был отмечен всего лишь в половине случаев. Исследование, проведенное еще раньше (153 амбулаторных пациента), выявило 54 % межэкспертного согласия. Конкретный источник шума в ходе данных экспериментов обнаружить так и не удалось. Интересный факт: установлено, что некоторые психиатры регулярно склонялись к одним и тем же диагнозам, – например, одни врачи из раза в раз определяли депрессию, другие же упорно диагностировали у пациентов тревожные состояния.
Продвигаясь дальше, мы убедимся, что уровень шума в психиатрии продолжает находиться на высокой отметке. В чем причина? Специалисты затрудняются дать однозначный ответ (то есть даже в самих объяснениях феномена содержится немало шума). Наверняка одним из факторов является большое количество диагностических категорий. В по-
пытках332 добраться до сути проблемы исследователи просили одного из психиатров провести беседу с пациентом. Через некоторое время с аналогичной просьбой обращались ко второму специалисту. Затем врачи общались между собой и, если не удавалось прийти к единому мнению, обсуждали
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
причину разногласий.
Чаще всего важным фактором признавали несовместимость: психиатры принадлежали к разным школам, обладали разным уровнем подготовки и клиническим опытом, а также придерживались противоположных стилей при беседе с пациентом. «Клинический специалист – сторонник кон-
цепции влияния психологических травм333 – объяснял галлюцинации пациента посттравматическими эффектами пережитого ранее насилия». Другой врач, «относящийся к биомедицинскому направлению, считал галлюцинации неотъемлемой составляющей шизофрении». Подобные расхождения мнений являются примером внутриэкспертного шума.
Впрочем, главной причиной шумовых помех, помимо принадлежности специалистов к различным школам, все же считается «неадекватность действующей номенклатуры заболеваний». Прискорбные результаты исследований наряду с глобальной неудовлетворенностью психиатров действующей номенклатурой привели в 1980 году к пересмотру и утверждению третьей редакции «Руководства по диагностике и статистическому учету психических расстройств» (DSM – III). В документ впервые включили четкие и подробные критерии диагностики психических заболеваний, что стало первым шагом на пути внедрения методических рекомендаций.
Третья редакция DSM – III привела к существенному334 росту количества исследований, посвященных вопросам шу-
ма в диагностике. Повлиял новый документ и на снижение степени шума. И все же успех «Руководства…» высоко оце-
нивать335 пока не стоит. Даже в 2000 году, после серьезно-
го пересмотра документа336 и утверждения четвертой редакции (проект DSM – IV был опубликован еще в 1994-м), исследования показали, что шум все еще остается на высоком уровне. С одной стороны, Ахмед Аборайя и его коллеги вынесли заключение, что «использование диагностических критериев психических расстройств повысило надеж-
ность диагностики»337. С другой – по-прежнему отмечают-
ся серьезные риски338: «…в ходе обследования одного и того же пациента врачи могут поставить несколько разных диагнозов».
Новая версия «Руководства…»339, DSM – V, увидела свет
в 2013 году. Ассоциация американских психиатров340 рассчитывала, что DSM – V снизит уровень шума, поскольку современная редакция опиралась на более объективные и четко структурированные критерии. Тем не менее в со-
обществе психиатров по-прежнему отмечается341 серьезный шумовой фон. Самуэль Либлих с коллегами выяснили, что
«психиатры ожесточенно спорят342, пытаясь определить, в каком случае следует диагностировать у пациента депрессивное расстройство личности». Полевые испытания DSM
– V показали343, что в данном вопросе присутствует лишь
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/
«минимальная степень согласия», что означает: «психиатры высокой квалификации в условиях эксперимента единодушно приходили к выводу, что пациент страдает депрессивным расстройством, минимум в 4, максимум в 15 случа-
ях из ста». Упомянутые нами полевые эксперименты344 позволили установить, что DSM – V лишь ухудшило текущее положение, наглядно показав рост шума «во всех важнейших областях, в частности в диагностике расстройств тре- вожно-депрессивного спектра… Степень ненадежности такова, что применение «Руководства…» на практике выглядит совершенно бессмысленным».
Основной причиной скромного345 успеха методических рекомендаций представляется очевидный факт: «в психиатрии диагностические критерии до сих пор расплывчаты, практическое применение их затруднено». Некоторые виды методических рекомендаций уменьшают шум за счет разложения суждения на отдельные критерии, в отношении каждого из которых степень несогласия снижается. И все же, учитывая, в какой степени подобные критерии относительно неконкретны, вероятность возникновения шума остается. Данные аргументы заставили известных психиатров предложить дальнейшую стандартизацию методических указаний по диагностике. Их рекомендации включают, во пер-
вых, прояснение346 диагностических критериев, устранение неконкретики, во вторых, введение справочных определе-
ний симптомов и степени их тяжести. Врачи говорят о том, что «если специалисты пришли к согласию по поводу наличия симптомов заболевания, им уже проще принять единое решение о диагнозе». И в третьих, психиатры настаивают на использовании четко структурированных интервью с пациентами, в отличие от беседы произвольного характера. В один из проектов подобного интервью инициаторы включили двадцать четыре стандартных вопроса, дающих более надежную основу для постановки диагноза пациентам с тревожными состояниями, депрессией и расстройствами пищевого поведения.
Принимаемые меры выглядят многообещающе. Насколько они способны подавить шум? Вопрос остается откры-
тым. Один из аналитиков заметил347, что «учет субъективных симптомов пациента, их интерпретация клиническими специалистами и отсутствие объективного метода измерения (подобного анализу крови) сеют зерна ненадежности при диагностике психических расстройств». В этом смысле психиатрия вполне может оказаться устойчивой ко всем попыткам снижения уровня шума.
Время для уверенных прогнозов пока не настало. Понятно одно: если говорить о медицине в глобальном смысле, то методические рекомендации доказали свою эффективность в деле устранения смещения и шума. Подобного рода документы помогают и врачам, и медицинским сестрам, и пациентам, способствуют улучшению здоровья общества, и ме-
Рекомендовано к покупке и изучению сайтом МедУнивер - https://meduniver.com/