Вышедший из-под контроля сверхчеловеческий интеллект – наше обозримое будущее?

Вокруг светаHi-Tech

Бог из машины

Первый роман о захвативших мир разумных машинах был написан еще в XIX веке. Все следующее столетие фантасты пугали нас восстанием роботов. Но что, если вышедший из-под контроля сверхчеловеческий интеллект – уже обозримое будущее. Каким оно может быть?

Текст: Анатолий Глянцев

В 1993 году математик и писатель Вернор Виндж опубликовал статью «Грядущая технологическая сингулярность: как выжить в постчеловеческую эпоху». В ней он заявил: «Мы на грани перемен, сравнимых с появлением на Земле человека. Точная причина этих перемен заключается в том, что развитие техники неизбежно ведет к созданию сущностей с интеллектом, превышающим человеческий».

Виндж видел несколько путей к сверхразуму. Возможно, искусственный интеллект превзойдет человеческий. Или биологи научатся улучшать мозг и сращивать его с компьютером. Тогда сверхразумными станут сами люди – если, конечно, их все еще можно будет назвать людьми. А может быть, компьютерные сети и человеческое общество сольются в единый сверхразумный организм, где каждый отдельный мозг будет винтиком огромной системы.

Любой из этих сценариев изменит жизнь на Земле до неузнаваемости. «Такое событие аннулирует за ненадобностью весь свод человеческих законов, возможно, в мгновение ока», – пишет Виндж. Весь опыт прошлого окажется бесполезен, перемены станут молниеносными, непредсказуемыми и неуправляемыми.

Подобное состояние общества Виндж назвал сингулярностью, позаимствовав термин у физиков. В физике сингулярность – это состояние пространства и времени, в котором будущее теряет связь с прошлым и становится принципиально непредсказуемым.

Вернор Виндж (род. 1944 г.) – математик, писатель-фантаст и футуролог. Один из авторов идеи технологической сингулярности

Позже красивое слово подхватил Рэймонд Курцвейл и другие трансгуманисты. Для них сингулярность – это радикальное улучшение человеческой природы, обретение вечной молодости и сверхчеловеческих способностей. Эти киборги с чипами в мозге, улучшенной ДНК и ремонтными наноботами в артериях, безусловно, будут умнее нас. Но в целом они останутся людьми, только куда более могущественными и счастливыми. Сингулярность Курцвейла – это технологический Эдем, счастливый исход прогресса.

Виндж не разделяет подобного оптимизма. Он предупреждает: сверхразум будет кем угодно, только не человеком. «Натуральные» люди окажутся ему не нужны и не интересны. Вполне возможно, что наши личности растворятся и разрушатся в сверхразумных человеко-компьютерных сетях. Или «бог из машины» уничтожит нас – чтобы не путались под ногами или даже случайно, без злого умысла.

Алан Тьюринг, один из основоположников информатики, в 1950 г. высказал идею машины, которая становится умнее по мере обучения

Когда же появится сверхчеловеческий разум, несущий с собой грозную эпоху сингулярности? «Я удивлюсь, если это случится до 2005 года или после 2030 года» – пишет Виндж в 1993 г., и спустя десять лет не меняет своего мнения.

Теперь еще несколько дат. 2020 год. Ученые обучают нейронную сеть обманывать человека. Компьютер играет с пользователем в простенькую экономическую игру. Задача искусственного интеллекта – подтолкнуть игрока к бесполезному решению, создав иллюзию выгоды. Система преуспевает в этом в 70% случаев. Это обычная, не очень мощная нейросеть, очень далекая от полноценного разума. Одни программы пишут картины, другие переводят тексты, почему бы третьим не манипулировать людьми? Эксперимент показал, что ИИ способен этому обучиться. Умение не сложнее любого другого.

2023 год. Исследовательская группа OpenAI презентует нейронную сеть GPT-4. Перед запуском проверяют, не склонен ли ИИ размножаться, как компьютерный вирус. Удостоверяются, что нейросеть не нанимает людей через интернет и ничего им не поручает. Разумеется, систему никто не учил подобным вещам. Но что, если… она додумается до них сама? Ведь к «человеческим» экзаменам на профессиональные знания ее тоже никто специально не готовил. Однако нейросеть на равных конкурировала с людьми и даже превосходила их. «Мне кажется, что руководство OpenAI понимает, что AGI (искусственный интеллект, равный человеческому – прим. ред.) уже не за горизонтом, а на расстоянии одного условного «Манхэттенского проекта» или чуть больше. По мере движения к AGI деталей о таких проектах мы будем знать все меньше и меньше. Возможно, о релизе GPT 5 вы и вовсе не узнаете», – пишет в Telegram известный специалист по искусственному интеллекту Сергей Марков после релиза GPT-4.

Манхэттенский проект, как известно, продолжался шесть лет и закончился созданием атомной бомбы.

Тропа самосовершенствования

По мнению многих экспертов, самый опасный путь развития искусственного интеллекта – дать ему совершенствовать самого себя. Умная система будет становиться еще умнее, и так без конца. Процесс ускоряет сам себя, как снежная лавина или цепная реакция.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Парус, лыжи, кошки, спиннинг… Парус, лыжи, кошки, спиннинг…

В кратер вулкана на лыжах и неделя «вне зоны действия сети»

Вокруг света
Как хранить новогодние украшения: 8 советов организаторов пространства Как хранить новогодние украшения: 8 советов организаторов пространства

Как создать удобную систему для хранения новогодних украшений

VOICE
Национальная бритва Национальная бритва

Как во Франции смертная казнь уровняла все сословия и преступления

Дилетант
Время реакции водителя: что это в ПДД, какое среднее, от чего зависит Время реакции водителя: что это в ПДД, какое среднее, от чего зависит

На что влияет время реакции водителя?

РБК
Сначала было слово Сначала было слово

Художник, который сделал автографы на стенах чем-то большим

Вокруг света
Муравьи по запаху нашли раненых и полечили противомикробным секретом Муравьи по запаху нашли раненых и полечили противомикробным секретом

Как именно муравьи лечат своих раненых товарищей после набегов на термитники

N+1
Зонд Неймана Зонд Неймана

Серая слизь: сценарий апокалипсиса

Вокруг света
Свежевыжатые фруктовые соки связали с избыточным весом у детей Свежевыжатые фруктовые соки связали с избыточным весом у детей

Как чистые фруктовые соки влияют на здоровье детей?

N+1
Гитлер. Поход во власть Гитлер. Поход во власть

Человек, создавший Третий рейх, был, несомненно, злым гением

Дилетант
Выученная беспомощность: почему мы думаем, что от нас ничего не зависит Выученная беспомощность: почему мы думаем, что от нас ничего не зависит

Насколько мы способны повлиять на свою жизнь?

Psychologies
Был ли аншлюс ГДР? Был ли аншлюс ГДР?

Читаем новый единый учебник всеобщей истории для 11 класса

Дилетант
Ученые создали чрезвычайно многообещающее средство для похудения на дрожжах Ученые создали чрезвычайно многообещающее средство для похудения на дрожжах

Ядовитая виноградная лоза может стать мощным средством против ожирения

ТехИнсайдер
Установка соединения Установка соединения

Зачем сращивать мозг с компьютером?

Вокруг света
Как в СССР изобрели беспохмельную водку Как в СССР изобрели беспохмельную водку

На закате Советского Союза профессор Брехман изобрел водку, уменьшавшую похмелье

Maxim
Человек улучшенный Человек улучшенный

Самые знаменитые предсказания и проекты усовершенствования человечества

Вокруг света
Почему мы не смеемся, когда щекочем сами себя: любопытный факт о нашем теле Почему мы не смеемся, когда щекочем сами себя: любопытный факт о нашем теле

Почему люди боятся щекотки?

ТехИнсайдер
Покидая Генотопию Покидая Генотопию

С тех пор каждый человек фактически живет в двух параллельных мирах...

Вокруг света
Статус обязывает Статус обязывает

Бюро Officina Italiana ответственно за дизайн всех яхт Riva c 1994 года

Y Magazine
Несущая смерть Несущая смерть

Как Горгона обращала людей в камень и могло ли существовать подобное «биооружие»

Вокруг света
Садат и Асад Садат и Асад

Война Судного дня планировалась властями Сирии и Египта как реванш

Дилетант
Полиглот, революционерка, посол Полиглот, революционерка, посол

Александра Коллонтай — женщина-миф русской революции

Дилетант
Перинатальную депрессию связали с повышенным риском смерти Перинатальную депрессию связали с повышенным риском смерти

Перинатальная депрессия может серьезно угрожать жизни женщины

N+1
Опять двадцать пять Опять двадцать пять

Какие тренды будут изменять жизнь во второй четверти XXI века

Men Today
Всё есть, а не радует Всё есть, а не радует

Почему в эпоху доступности всего мы перестали получать удовольствие

Лиза
«Да все вы одинаковые!»: откуда берется мужская обида на женщин «Да все вы одинаковые!»: откуда берется мужская обида на женщин

Кто и как наносит мужчинам обиду на женщин?

Psychologies
Вредные рецепты Вредные рецепты

Домашние маски, которые не принесут пользу или сделают даже хуже

Лиза
Играй, «Маэстро»: каким получился байопик Брэдли Купера про выдающегося дирижера Бернстайна Играй, «Маэстро»: каким получился байопик Брэдли Купера про выдающегося дирижера Бернстайна

«Маэстро» — кинематографичную арию про боль, жизнь и любовь

Правила жизни
Раз – и на Кузбасс Раз – и на Кузбасс

Кузбасс: уникальная природа Шерегеша и гостеприимство шорцев

Лиза
Как правильно «прикурить» автомобиль, чтобы не навредить его здоровью? Как правильно «прикурить» автомобиль, чтобы не навредить его здоровью?

Что значит «прикурить» автомобиль, и какие провода для этого выбрать?

CHIP
Аннелиза Мишель: вся правда о первом в мире задокументированном случае изгнания дьявола Аннелиза Мишель: вся правда о первом в мире задокументированном случае изгнания дьявола

Аннелиза сражалась с демонами большую часть своей жизни

ТехИнсайдер
Открыть в приложении