Книга Ника Бострома посвящена одной из самых серьезных угроз для человечества — возможному появлению искусственного интеллекта, который значительно превзойдет человеческий разум. Автор ставит проблему контроля над будущим сверхразумом, сопротивляться которому у людей не будет никакой возможности.
В первой части книги Бостром рассматривает историю развития вычислительных систем и показывает, как быстро меняются технологии. Он анализирует различные пути достижения сверхразума, включая создание искусственного интеллекта, полную эмуляцию мозга, улучшение биологических способностей человека и развитие коллективного интеллекта.
Особое внимание автор уделяет динамике взрывного развития интеллекта. По его мнению, после того как машины достигнут уровня человеческого мышления, начнется процесс рекурсивного самосовершенствования, который приведет к появлению сверхразума за очень короткое время. Это создает серьезные риски для человечества.
Бостром подробно разбирает концепцию решающего стратегического преимущества. Проект, который первым создаст сверхразум, сможет получить абсолютную власть над миром и сформировать новый мировой порядок, исключив любую конкуренцию.
Автор подчеркивает, что проблема контроля над искусственным интеллектом требует совместных усилий в общемировом масштабе. Если человечество не сможет решить эту задачу заблаговременно, появление сверхразума может стать последним вызовом в его истории.