- •Препринт
- •Часть 1. Общие обзоры темы 6
- •Часть 2. Оценка вероятности глобальной катастрофы 201
- •Часть 3. Глобальные риски и новые технологии 374
- •Часть 4. Глобальные риски, связанные с природными катастрофами 545
- •Предисловие
- •Часть 1. Общие обзоры темы глобальных рисков Билл Джой. Почему мы не нужны будущему
- •Вернор Виндж. Технологическая Сингулярность
- •Ник Бостром. Угрозы существованию: Анализ сценариев человеческого вымирания и других подобных опасностей.
- •Введение
- •Типология рисков
- •Риски существованию
- •Уникальность проблемы угроз существованию
- •4. Классификация рисков существованию
- •5. Взрывы
- •5.1. Преднамеренное злоупотребление нанотехнологиями
- •5.2. Ядерный холокост
- •5.3. Мы живем в симуляции, и она выключается
- •5.5. Генетически сконструированный биологический объект
- •5.6. Ошибочное применение опасных нанотехнологий («серая слизь»).
- •5.7. Нечто непредвиденное
- •5.8. Катастрофы в результате физических экспериментов
- •5.9. Естественно возникшее заболевание
- •5.10. Столкновение с астероидом или кометой
- •5.11. Неудержимое глобальное потепление
- •6. Сужения
- •6.1. Истощение ресурсов или разрушение экологии
- •6.2. Сбившееся с курса мировое правительство или другое неподвижное социальное равновесие остановит технологический прогресс
- •6.3. Давление «вырождения»
- •6.4. Технологическая остановка
- •7. Скрипы
- •7.2. Сверхинтеллект с ошибкой
- •7.3. Глобальный репрессивный тоталитарный режим
- •7.4. Нечто непредвиденное1
- •8. Всхлипы
- •8.1. Наш потенциал и даже наши базовые ценности разъедаются развитием в ходе эволюции
- •8.2 Уничтожение внеземной цивилизацией
- •9.2 Парадокс Ферми
- •9.3 Эффекты наблюдательной селекции
- •9.4 Рассуждение о Симуляции
- •9.5 Когнитивные искажения
- •9.6 Оценка собранных данных
- •10. Рекомендации, касающиеся стратегии и этики
- •10.1. Поднимать известность проблемы рисков существованию
- •10.2 Создать структуру для международных действий
- •10.3 Сохранять готовность к превентивному действию в качестве последнего средства
- •10.4 Регулирование скорости развития технологий
- •10.5 Программы, направленные на прямое уменьшение конкретных угроз существованию
- •10.6. Максипок: эмпирическое правило для этичных поступков
- •Выражения признательности
- •Приложение: очерк эволюционного «всхлипа»
- •Библиография
- •Елиезер Юдковски. Когнитивные искажения, влияющие на оценку глобальных рисков
- •Введение
- •1. Доступность информации
- •2. Когнитивные искажения, связанная со знанием «задним числом».
- •3. Черные лебеди
- •4. Ошибочное включение лишнего элемента
- •5. Ошибочность рассуждений, вызванная эффектом подтверждения
- •6. Якорение, настройка и загрязнение
- •7. Рассуждения, обусловленные аффектом
- •8. Пренебрежение масштабом
- •9. Калибровка и сверхуверенность
- •10. Апатия прохожего
- •Последнее предупреждение
- •Заключение
- •Рекомендуемое чтение
- •Библиография
- •Дэвид Брин. Сингулярность и кошмары
- •А.А. Кононов.Идеологические начала общей теории неуничтожимости человечества
- •Угрозы уничтожения человечества
- •Неуничтожимость как главная сверхзадача цивилизации
- •Качества неуничтожимой цивилизации
- •О необходимости разработки теоретических основ решения задач неуничтожимости человечества
- •Робин Хансен. Катастрофа, социальный коллапс и человеческое вымирание
- •Алексей Турчин. Процессы с положительной обратной связью как основной механизм глобальных катастроф
- •Часть 2. Оценка вероятности глобальной катастрофы Ник Бостром1, Макс Тегмарк2. Насколько невероятна катастрофа судного дня?
- •Ник Бостром. Рассуждение о Конце Света для начинающих
- •Ник Бостром. Doomsday Argument жив и брыкается
- •Ник Бостром Доказательство симуляции
- •1.Введение
- •2. Предположение о независимости от носителя
- •3.Технологические пределы вычислений
- •4. Ядро доказательства о симуляции
- •5. Мягкий принцип равнозначности
- •6. Интепретация
- •7. Заключение
- •Введение: угрозы существованию и эффекты наблюдательной селекции
- •«Карманная» модель антропного искажения1
- •Обобщение модели
- •Антропное искажение: недооценка естественных угроз
- •Какие угрозы существованию подвержены антропной тени?
- •Антропные тени и риски физических экспериментов
- •Заключение
- •Приложение: словарь
- •Благодарности
- •Алексей Турчин. Природные катастрофы и антропный принцип
- •Введение
- •1. Антропный принцип. Эффект наблюдательной селекции. Результаты Бострома и Тегмарка
- •2. Природные катастрофы
- •3. Применение антропного принципа для анализа частоты природных катастроф
- •4. Нарушение устойчивости природных систем, находящихся на грани равновесия, в связи с человеческой деятельностью
- •5. Быстрая эволюция разума в периоды высокой интенсивности природных катастроф
- •6. Заключение
- •Приложение a. Плотность наблюдателей во вселенной, частота катастроф и антропный принцип
- •Литература:
- •Тоби Орд, Рафаела Хиллербранд, Андрес Сандберг. Проверяя непроверяемое: методологические вызовы в оценке рисков с низкой вероятностью и высокими ставками
- •Введение
- •Оценка вероятностей
- •3. Теории, модели и вычисления
- •4. Применение нашего анализа к рискам экспериментов на ускорителях
- •5. Заключение
- •Эдриан Кент. Критический обзор оценок рисков глобальных катастроф
- •Часть 3. Глобальные риски и новые технологии Eлиезер Юдковски. Искусственный интеллект как позитивный и негативный фактор глобального риска
- •1. Систематическая ошибка, связанная с антропоморфизмом
- •1.1: Широта пространства возможных устройств ума
- •2: Предсказание и устройство
- •4: Способности и мотивы
- •4.1: Процессы оптимизации
- •4.2: Наведение на цель
- •5: Дружественный ии
- •6: Техническая неудача и философская неудача
- •6.1: Пример философской ошибки
- •6.2: Пример технической неудачи
- •7: Темпы усиления интеллекта
- •8: Оборудование
- •9: Угрозы и перспективы
- •10: Локальные стратегии и стратегии большинства
- •11: Ии и усиление человеческого интеллекта
- •12: Взаимодействие ии и других технологий
- •13: Ход прогресса в области Дружественного ии
- •Роберт Фрейтас. Проблема Серой Слизи
- •Crn. Опасности молекулярного производства
- •М. Вассер, р.Фрайтас. Проект «Нанощит»
- •Алексей Карнаухов. Парниковая катастрофа.
- •Милан Чиркович, Ричард Каткарт. Гео-инженерия, пошедшая насмарку: новое частное решение парадокса Ферми
- •1. Введение
- •2. Макроинженерия и сценарий катастрофы
- •3. Миссия к центру Земли
- •4.Начало процесса вымирания
- •5.Применение сказанного к проблемам астробиологии
- •6. Культурологические и климатологические аспекты
- •7.Заключение
- •Ричард Керригэн. Следует ли обеззараживать сигналы seti?
- •А.В.Турчин. Глобальные риски, связанные с программой seti
- •1. История вопроса
- •2. Сценарий возможной атаки
- •3. Анализ возможных целей атаки
- •4. Возражения
- •П.Д. Смит. Кобальтовая бомба (отрывок из книги «Люди судного дня»)
- •Часть 4. Глобальные риски, связанные с природными катастрофами Владислав Пустынский. Последствия падения на Землю крупных астероидов
- •Уильям Нейпьер. Опасность комет и астероидов
- •1. Нечто вроде огромной горы
- •2.Как часто по нам бьют?
- •2.1 Ударные кратеры
- •2.2. Поиск околоземных объектов
- •2.3. Динамический анализ
- •3. Эффекты столкновения
- •4. Роль пыли
- •5. Наземная проверка?
- •6. Неопределённости
- •Майкл Рампино. Супервулканизм и другие катастрофические геофизические процессы
- •3. Вулканическая зима
- •4. Возможные последствия сверхизвержения для окружающей среды
- •5. Сверх-извержения и человеческая популяция
- •6. Частота сверхизвержений
- •7. Влияние сверхизвержения на цивилизацию
- •8. Сверхизвержения и жизнь во Вселенной
- •Арнон Дар. Влияние сверхновых, гамма-всплесков, солнечных вспышек и космических лучей на земную окружающую среду
- •1. Введение
- •2. Радиационные угрозы
- •2.1 Достоверные угрозы
- •2.2. Солнечные вспышки
- •2.3. Солнечная активность и глобальное потепление
- •2.4 Вымирание в результате солнечной активности
- •2.5 Излучение от взрывов сверхновых
- •2.6 Гамма-всплески
- •3. Угрозы от космических лучей.
- •3.1 Изменения магнитного поля Земли
- •3.2 Солнечная активность, космические лучи и глобальное потепление
- •3.3 Прохождение через галактические спиральные рукава
- •3.4 Космические лучи от недалёкой сверхновой
- •3.5. Космические лучи от гамма-всплесков.
- •4. Причины крупнейших массовых вымираний
- •5. Парадокс Ферми и массовые вымирания
П.Д. Смит. Кобальтовая бомба (отрывок из книги «Люди судного дня»)
Перевод: А.В.Турчин
Когда Бете закончил говорить, глаза Сциларда внезапно ярко вспыхнули. Он ждал этого момента. Он начал с того, что не согласился с мнением Бете об угрозе радиоактивности. «Потребуется очень большое количество бомб, чтобы жизнь оказалось под угрозой от водородных бомб, – сказал Сцилард. – Но, – продолжил он, – очень просто усилить водородную бомбу таким образом, чтобы она произвела очень опасное количество радиоактивности». Затем он дал своим слушателям, как находящимся за столом в студии, так и по всей Америке, урок о том, как сконструировать бомбу судного дня.
В начале он объяснил, как атомный взрыв создаёт опасные радиоактивные элементы. «Большинство встречающихся в природе элементов становятся радиоактивными, когда поглощают нейтроны», – сказал он. Всё, что вам нужно сделать, это подобрать подходящий элемент и организовать так, чтобы этот элемент захватывал все нейтроны. В этом случае вы имеете очень опасную ситуацию. Я сделал вычисления на этот случай. Предположим, что мы создаём радиоактивный элемент, который будет жить пять лет, и которому мы просто позволим выделиться в воздух. В течение следующих лет он будет постепенно осаждаться и покроет всё Землю пылью. Я спросил себя: сколько нейтронов или сколько тяжёлого водорода мы должны взорвать, чтобы убить каждого на Земле этим способом?»
Сцилард остановился и посмотрел вокруг стола, как если бы он ожидал ответа. «Я пришёл к выводу, что 50 тонн нейтронов будет достаточно, чтобы убить каждого, что означает примерно 500 тонн дейтерия. Харрисон Браун внимательно смотрел на Сциларда, пытаясь понять значение того, что он говорил… «Вы имеете в виду, – сказал Браун, – что если вы взорвёте 500 тонн тяжёлого водорода, и затем позволите этим нейтронам быть поглощёнными другим элементом с целью порождения радиоактивной субстанции, то все люди на Земле будут убиты?»
Сцилард ответил: «Если это долгоживущий элемент, который постепенно, в течение нескольких лет, осаждается, формируя слой пыли на поверхности Земли, то тогда все люди до одного будут убиты».
Специализацией Брауна была геологическая химия, в частности, внеземных образований. Журнал «Тайм» незадолго до этого момента изобразил его держащим в руках метеорит. И теперь он выбрал геологическую аналогию, которая была ему знакома: «То есть тогда вы можете себе представить нечто вроде взрыва Кракатау, когда вы организовываете один большой взрыв или серию маленьких взрывов. Пыль поднимается высоко в воздух, как было в случае этого конкретного взрыва, циркулирует вокруг Земли в течение многих, многих месяцев и даже лет, и затем постепенно выпадет на поверхность Земли?»
Сцилард откинулся назад в своём кресле и выразительно развёл руками: «Я согласен с вами». Аналогия с вулканом была хороша. Сциларду она нравилась. Он ясно выразил свою точку зрения. Оружие судного дня было рождено.
Ганс Бете слушал Сциларда с растущим раздражением. Хотя его лицо всё ещё несло мягкую улыбку, которая привычно обитала у него на губах, его брови наморщились. Дело было не в том, что он научно был не согласен с тем, что Сцилард говорил, скорее, его раздражал типично сцилардовский полёт фантазии. Не было необходимости обострять текущую ситуацию. Водородная бомба должна была быть и так достаточно плоха – зачем пугать людей тем, что может придти за ней.
«Вы можете спросить, – сказал Сцилард, предвосхищая своих критиков, – кто захочет убить всех на земле?» Любая страна, которая хочет быть непобедима на войне, был его драматичный ответ. Это будет преимуществом, которое обретёт любая страна, овладевшая оружием конца света – водородной бомбой, усиленной таким образом, как он описал, цинком, или, как он позднее предложил, кобальтом.
«Давайте предположим, – объяснил он, – что мы участвуем в войне и находимся на грани победы в войне с Россией, после борьбы, которая, скажем, длилась десять лет. Русские могут сказать: «Дальше это границы вы не пойдёте. Вы не вторгнетесь в Европу, и вы не будете сбрасывать на нас обычные атомные бомбы, или мы детонируем наши водородные бомбы и убьём всех». Столкнувшись с такой угрозой, я думаю, мы не сможем продолжать. Я думаю, что Россия будет непобедимой».
Харрисон Браун явным образом страдал от осознания последствий того, что только что сказал Сцилард. «Неужели какая-либо нация, – спросил он, – решиться уничтожить всех вместо того, чтобы потерпеть поражение?» Сцилард честно признался, что он не знает ответа на этот вопрос. Но он добавил следующее пугающее завершение: «Я думаю, что мы можем угрожать это сделать, и русские могут угрожать это сделать. И кто тогда возьмёт на себя риск не принимать эту угрозу всерьёз?»
В публичной лекции в следующем месяце Браун сказал аудитории, что он теперь убеждён, что существуют люди, которые были бы готовы уничтожить всю жизнь на Земле, если бы им не уступили дорогу. «Можем ли мы сомневаться, – спросил он, – что Гитлер, в отчаянии от поражения, уничтожил бы весь мир, если бы он имел власть это сделать?»
Тем февральским вечером дискуссия за круглым столом переместилась к обсуждению возможности того, что огромные водородные бомбы будут доставляться на кораблях. Если он будут взорваны в Тихом океане, радиоактивность от таких чудовищных устройств проплывёт над Америкой благодаря преобладающим западным ветрам, отравляя землю и людей. Это было новой и пугающей угрозой для Америки. Страх кораблей-бомб будет порождать заголовки газет до конца десятилетия, в то время как Америка и Россия будут стремиться переплюнуть друг друга в создании всё больших водородных бомб. Но, как указал Сцилард, такую радиоактивность невозможно контролировать. Ужасной иронией является то, добавил Харрисон Браун, что «проще убить всех людей на Земле, чем только часть из них». «Так оно и есть», – согласился Сцилард. …
Осенью 1950 года страхи Сциларда о кобальтовой бомбе получили независимую научную поддержку. Доктор Джеймс Арнольд из института ядерных исследований в Чикаго решил исследовать, насколько такое оружие технически возможно. Согласно Ньюсвик, «блестящий молодой (27 лет) физик начал с того, чтобы, с логарифмической линейкой в руках, разрушить аргументы Сциларда. Но закончил он согласием по многим аспектам».
Вычисления Арнольда показали, что машина судного дня, описанная Лео Сцилардом, должна быть гигантским устройством «возможно, в два с половиной раза тяжелее линкора Миссури (70,000 тонн водоизмещения – А.Т.)» Дейтерий, который должен наполнять эту бомбу, должен стоить столько же, сколько весь Манхеттенский проект, 2 миллиарда долларов. Кроме того, по крайней мере, 10 000 тонн кобальта потребуются для создания смертельного радиоактивного изотопа, кобальта-60, когда бомба взорвётся. Большинство предположений Сциларда о кобальтовой бомбе были подтверждены чикагским учёным. В действительности, единственным моментом неопределённости был вопрос о том, будет ли радиоактивная пыль от такой бомбы конца света равномерно распределяться по всему миру.
Хотя Арнольд пришёл к выводу, что человеческая раса не находится в опасности сейчас, поскольку создание такого устройства потребует «полномасштабных усилий большой страны в течение многих лет», он был убеждён, что «подавляющее большинство людей могут быть убиты таким способом». Единственным лучом надежды, который смог найти Ньюсвик, было то, что «те, кто захотят использовать это оружия для убийства, должны принять суицид как условие сделки».
Будучи местом рождения атомной эры и кобальтовой бомбы, Университет Чикаго был домом для наиболее важного журнала по атомным проблемам – «Бюллетень учёных атомщиков». Именно этот Бюллетень поручил Джеймсу Арнольду исследовать предсказания Лео Сциларда о машине судного дня.