Вторая эра машин. Работа, прогресс и процветание в эпоху новейших технологий - Эндрю Макафи, Эрик Бриньолфсон (2014)

До сравнительно недавнего времени наш биологический вид не обладал возможностями для полного самоуничтожения. Теперь они у нас появились. Более того, по мере того как технологии становятся одновременно и всё более мощными, и всё более дешевыми (а, следовательно, общедоступными), такие возможности могут оказаться и у отдельных людей. Не все эти люди будут психически здоровы, не все они будут действовать из добрых побуждений. Как уже отмечали Билл Джой и другие исследователи, генная инженерия и искусственный интеллект способны создавать самовоспроизводящиеся сущности.[425] Это значит, что некий умелец в своей спрятанной под землей лаборатории вполне может овладеть одной из таких технологий, чтобы выпустить на волю разрушительные силы, способные повлиять на всю планету. Те же самые научные прорывы в области секвенирования генома, которые используются для лечения заболеваний, могут использоваться и для создания боевой разновидности вируса оспы.[426] Компьютерные программы также могут самовоспроизводиться, превращаясь в цифровые вирусы, – и та же самая глобальная Сеть, посредством которой распространяются хорошие идеи и инновации, станет инструментом разрушения. Физический объем ущерба, который теоретически способен нанести всего один человек или небольшая группа, становится все больше и больше. Будет ли наш прогресс в деле противодействия деструктивной стороне технологий по меньшей мере столь же быстрым, как и само развитие технологий? Этот вопрос в будущем обретет большую важность.

Джордж Оруэлл, Уильям Гибсон и другие авторы описывали в своих антиутопиях утрату свободы и использование технологий для укрепления деспотизма и полного контроля информационных потоков. Эрик Шмидт и Джаред Коэн описывают некоторые из этих технологий, а также способы противодействия им в своей книге «Новый цифровой мир» (The New Digital Age). Те же самые инструменты, которые позволяют нам все более детально изучать мир, дают и правительству, и его врагам возможность следить за тем, что мы делаем и с кем общаемся. Существует вполне естественный конфликт между расширением наших способностей к познанию и нашим нежеланием, чтобы другие могли узнать о нас что-то, чего мы не хотели бы о себе рассказывать. Когда информация была по большей части аналоговой и локальной, сами законы физики автоматически обеспечивали зону частной жизни. В цифровом мире конфиденциальность требует очень определенных институтов, стимулов, законов, технологий и норм, которые регулировали бы, какие информационные потоки должны быть разрешены, а какие – запрещены, какие следует поощрять, а какие – затруднять.

Технологии могут порождать мириады побочных эффектов, начиная от игромании и цифровой прокрастинации до «балканизации интернета» – распада всемирной Сети на отдельные враждующие между собой части, – от социальной самоизоляции до деградации окружающей среды.[427] Даже самые человеколюбивые изобретения – например, какая-нибудь технология, позволяющая значительно продлить человеческую жизнь, – могут повлечь огромные социальные потрясения.[428]

Далеко ли до сингулярности?