Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Как Голливуд разочаровался в Мэрилин Монро, но пытался найти ее почти в каждой актрисе Как Голливуд разочаровался в Мэрилин Монро, но пытался найти ее почти в каждой актрисе

Почему привычка социума и массмедиа навешивать ярлыки не ушла вместе с Монро

Esquire
Лёгкая импровизация Лёгкая импровизация

Лёгкий и мягкий интерьер, в котором много воздуха и света

Идеи Вашего Дома
11 известных актеров, которые одинаково блестяще сыграли как злодеев, так и положительных героев 11 известных актеров, которые одинаково блестяще сыграли как злодеев, так и положительных героев

Настоящие универсальные солдаты киноиндустрии!

Playboy
Пол Гетти: история бережливого миллиардера, который отказывался платить выкуп за похищенного внука Пол Гетти: история бережливого миллиардера, который отказывался платить выкуп за похищенного внука

Рассказываем историю одного из самых богатых и жадных людей планеты

ТехИнсайдер
Игра на повышение Игра на повышение

У Софьи Шидловской два события в декабре – премьера «Чайки» и «Первый номер»

Grazia
5 признаков того, что ваши отношения функциональны, но лишены любви 5 признаков того, что ваши отношения функциональны, но лишены любви

Кажется, что в ваших отношениях чего-то не хватает?

Psychologies
Эмоциональное техно Эмоциональное техно

Как можно описать стиль эмоциональной архитектуры?

ТехИнсайдер
Игорь Тарасов. Я — Сноб: директор Национальной оперной премии «Онегин» Игорь Тарасов. Я — Сноб: директор Национальной оперной премии «Онегин»

Артист Игорь Тарасов — об отдыхе без музыки и примере, который подает ему сын

СНОБ
Время все начать с нуля: почему зрелость — лучший период вашей жизни Время все начать с нуля: почему зрелость — лучший период вашей жизни

Середина жизни — это время, чтобы начинать заново

Psychologies
Назад в будущее: почему IT-гиганты стали инвестировать миллиарды в атомную энергию Назад в будущее: почему IT-гиганты стали инвестировать миллиарды в атомную энергию

Почему корпорации ищут спасение «старом» атоме и причем тут ИИ?

Forbes
Робот с революционным запалом Робот с революционным запалом

Как челябинскому Заводу роботов совершил революцию в отрасли робототехники

Монокль
Почему слепые люди защищены от шизофрении? Вас поразят эти факты и результаты исследований! Почему слепые люди защищены от шизофрении? Вас поразят эти факты и результаты исследований!

Почему рожденные слепыми люди никогда не сталкиваются с шизофренией

ТехИнсайдер
Подарок со звёздочкой Подарок со звёздочкой

Как родителям справиться с подарками для ребёнка — советует многодетная мама

Новый очаг
Всё это приключилось Всё это приключилось

Реальные истории о самых странных и счастливых праздниках

Новый очаг
«Он совершенно чокнутый»: как гипнотизер проклял «Манчестер Сити» и его тренера «Он совершенно чокнутый»: как гипнотизер проклял «Манчестер Сити» и его тренера

Почему футбольный клуб «Манчестер Сити» переживает самый глубокий кризис

Forbes
На худой конец На худой конец

Как быть при осечке в сексе

Men Today
В кругу друзей В кругу друзей

Новый год – самое время, чтобы исправить ошибки и наладить контакт с окружающими

Лиза
Снял с языка Снял с языка

Матвей Лыков — о кино и жизни

Men Today
Тонкая материя Тонкая материя

Как инновационные и экоткани меняют индустрию моды

РБК
Твой идеальный отдых Твой идеальный отдых

Пройди тест и узнай, какой вид релаксации подходит именно тебе

Лиза
Переплавка Луны омолодила ее на пару сотен миллионов лет Переплавка Луны омолодила ее на пару сотен миллионов лет

Планетологи заново оценили возраст Луны, теперь он составляет 4,43–4,53 млрд лет

N+1
Легенда о старце Легенда о старце

Конспирологическая теория о связи старца Феодора Кузьмича и Александра I

Дилетант
Синдром отчуждения родителя: что это, основные признаки и в чем опасность Синдром отчуждения родителя: что это, основные признаки и в чем опасность

Как понять, что партнер настраивает сына или дочь против вас?

Psychologies
Зеленое поколение: экологическая тревожность и аллергия на гиперпотребление Зеленое поколение: экологическая тревожность и аллергия на гиперпотребление

Почему для альфа и зумеров забота о планете стала обычной рутиной?

Forbes
Укрощение рубля Укрощение рубля

Как Россия в очередной раз справилась с американскими санкциями

Деньги
«В русской литературе финалом по большей части является тоска» «В русской литературе финалом по большей части является тоска»

Любовь Аркус о том, что делает финалы великими

Weekend
Слепая правота Слепая правота

Ни в чем не сомневающиеся герои и что с ними не так

Weekend
Волшебный мотив Волшебный мотив

Шампанское и креветки, классический новогодний дуэт, камертон праздничного стола

Добрые советы
8 заветных желаний 8 заветных желаний

Как же заставить силу воображения работать? Надо превратить мечты в планы

Лиза
Строительство нового жилья: «Судьба льготной ипотеки определит будущее отрасли» Строительство нового жилья: «Судьба льготной ипотеки определит будущее отрасли»

Как можно ускорить строительство новых многоквартирных домов?

ФедералПресс
Открыть в приложении