Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

10 удивительных фактов об Эми Уайнхаус — спорим, ты не знала 10 удивительных фактов об Эми Уайнхаус — спорим, ты не знала

Эми Уайнхаус не всегда хотела быть певицей, а первую татуировку сделала в 14 лет

VOICE
Методом пропп Методом пропп

Хтоническая подоплека классических русских сказок

Правила жизни
Переплавка Луны омолодила ее на пару сотен миллионов лет Переплавка Луны омолодила ее на пару сотен миллионов лет

Планетологи заново оценили возраст Луны, теперь он составляет 4,43–4,53 млрд лет

N+1
Большая история маленького самолета. Часть 1 Большая история маленького самолета. Часть 1

Через призму суперджета смотрим на российский авиапром в новейшем времени

Наука и техника
О происхождении реликтового излучения О происхождении реликтового излучения

Что собой представляет реликтовое излучение?

Зеркало Мира
Богатую микофлору носа связали с повышенным риском астмы и аллергического ринита Богатую микофлору носа связали с повышенным риском астмы и аллергического ринита

Богатая микофлора носа повышает вероятность развития аллергии и  астмы

N+1
Проклятье малой серии Проклятье малой серии

Как российскому автопрому нарастить производство?

Монокль
Окно в Сибирь Окно в Сибирь

Сибирь: чем так притягивает туристов этот суровый край?

Лиза
Здравствуй, Дедушка Мороз! Здравствуй, Дедушка Мороз!

А нужно ли поддерживать в сыне или дочке веру в сказочного деда?

Лиза
8 самых популярных персонажей в кино и литературе! Узнайте про архетипы и как их используют 8 самых популярных персонажей в кино и литературе! Узнайте про архетипы и как их используют

Как эффективно использовать архетипы для развития вашей истории?

ТехИнсайдер
Болезнь от поцелуев Болезнь от поцелуев

Вирус Эпштейна–Барр: чем он опасен и как его вовремя распознать?

Лиза
«Наука о чужих. Как ученые объясняют возможность жизни на других планетах» «Наука о чужих. Как ученые объясняют возможность жизни на других планетах»

Как инопланетян начали искать с помощью радиотелескопов

N+1
Цикламены зажигают огни Цикламены зажигают огни

Среди зимнецветущих комнатных растений цикламен занимает одно из первых мест

Наука и жизнь
Как стать лучше: 5 маленьких шагов к большим переменам Как стать лучше: 5 маленьких шагов к большим переменам

Поговорим о пяти привычках, которые помогут вам день ото дня становиться лучше

Psychologies
Егор Кончаловский: «Для хороших отношений с родными нужно иметь возможность их не видеть» Егор Кончаловский: «Для хороших отношений с родными нужно иметь возможность их не видеть»

Егор Кончаловский: каково это — родиться в самой известной киносемье России

Maxim
Вечность пахнет нефтью Вечность пахнет нефтью

«Лэндмен»: нефтедобытчики куют американскую мечту

Weekend
«Собеседник на вашей стороне»: как преодолеть страх
при общении на иностранном языке «Собеседник на вашей стороне»: как преодолеть страх
при общении на иностранном языке

Как воспринимать общение на иностранном языке не как суд и пытку?

Forbes
Первому «Аватару» 15 лет. Как создавался революционный проект Джеймса Кэмерона Первому «Аватару» 15 лет. Как создавался революционный проект Джеймса Кэмерона

Какую роль «Аватара» занял в истории кино и наших сердцах?

Правила жизни
Вытер в голове Вытер в голове

Что не так с нашей психикой?

Men Today
Анна Ковальчук: «Убедилась, что для меня настоящий новогодний праздник возможен только дома» Анна Ковальчук: «Убедилась, что для меня настоящий новогодний праздник возможен только дома»

По-моему, театр — это детский сад для взрослых

Коллекция. Караван историй
Юрий и Валентина (часть первая) Юрий и Валентина (часть первая)

Как забота о детях отражается на семейных отношениях партнеров? Личная история

СНОБ
История с продолжением История с продолжением

Изящный респектабельный интерьер в стиле современной классики

SALON-Interior
Болезнь начинается раньше, чем мы думаем: как узнать о деменции за годы до ее проявлений Болезнь начинается раньше, чем мы думаем: как узнать о деменции за годы до ее проявлений

4 симптома, которые могут с высокой вероятностью указать на развитие деменции

Psychologies
Радужные перспективы Радужные перспективы

Увидеть радугу посреди зимы – добрая примета. Но что именно она сулит?

Лиза
Полный привод Torque Vectoring и кабина истребителя: мы «полетали» на обновленном кроссовере JAECOO J7 Полный привод Torque Vectoring и кабина истребителя: мы «полетали» на обновленном кроссовере JAECOO J7

Чем примечателен «крутой охотник» JAECOO J7?

Maxim
Волшебный мотив Волшебный мотив

Шампанское и креветки, классический новогодний дуэт, камертон праздничного стола

Добрые советы
Быстро, удобно и вкусно Быстро, удобно и вкусно

Прогноз развития food-сегмента до 2030 года

Агроинвестор
На худой конец На худой конец

Как быть при осечке в сексе

Men Today
Первая наставница Первая наставница

Анжелика Балабанова: наставница Муссолини в самом начале пути к власти

Дилетант
Старик и хикикомори Старик и хикикомори

Как и почему молодые японцы прячутся от общества в выдуманных мирах

Правила жизни
Открыть в приложении