Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Сделать красиво Сделать красиво

Марина Ермошкина знает, как сделать так, чтобы о тебе заговорила страна

OK!
«Голос поэта» «Голос поэта»

О проекте «Голос Поэта» прямо как в лучшие годы, когда стихи печатали в журналах

OK!
Может ли секс без обязательств перерасти в отношения: 4 мнения мужчин — узнайте правду Может ли секс без обязательств перерасти в отношения: 4 мнения мужчин — узнайте правду

Что мужчины думают о сексе без обязательств?

Psychologies
Как подводить итоги года правильно: 5 пунктов, которые поднимут вашу самооценку и мотивируют на движение Как подводить итоги года правильно: 5 пунктов, которые поднимут вашу самооценку и мотивируют на движение

Итоги года: как сделать этот процесс наполняющим, а не разочаровывающим?

Psychologies
Искусственный интеллект: история ошибок Искусственный интеллект: история ошибок

Как советская бюрократия тормозила развитие технологий обработки больших данных

Монокль
Спикер ЗС Красноярского края Алексей Додатко: «Краевой парламент — площадка для общественного диалога» Спикер ЗС Красноярского края Алексей Додатко: «Краевой парламент — площадка для общественного диалога»

Как сегодня выстроены отношения депутатов с краевым правительством?

ФедералПресс
«Девчонка из Белово точно не станет популярной» «Девчонка из Белово точно не станет популярной»

Певица Асия о вдохновении, отношениях и самооценке

OK!
10 весомых фактов 10 весомых фактов

Ученые открыли немало способов, помогающих легко держать вес под контролем

Лиза
Покоритель вершин: как прошел тест-драйв кроссовера WEY 07 по Приэльбрусью Покоритель вершин: как прошел тест-драйв кроссовера WEY 07 по Приэльбрусью

Стоит ли обращать свое внимание на китайский гибридный кроссовер WEY 07

Forbes
Переплавка Луны омолодила ее на пару сотен миллионов лет Переплавка Луны омолодила ее на пару сотен миллионов лет

Планетологи заново оценили возраст Луны, теперь он составляет 4,43–4,53 млрд лет

N+1
Писательница Чухе Ким — о правках, тиграх и Анне Карениной Писательница Чухе Ким — о правках, тиграх и Анне Карениной

Южно-корейская писательница Чухе Ким — о своей любви к Толстому и животным

РБК
8 заветных желаний 8 заветных желаний

Как же заставить силу воображения работать? Надо превратить мечты в планы

Лиза
Relax, Take It Easy Relax, Take It Easy

Что самое важное в совместном отдыхе для Алексея и Лейсан Чадовых

OK!
Со времен Александра Невского Со времен Александра Невского

Пять московских достопримечательностей с удивительной историей

Зеркало Мира
Око за око, или секреты человеческого глаза Око за око, или секреты человеческого глаза

Хорошо ли мы знаем, как работает наше зрение?

Зеркало Мира
9 самых быстрых внедорожников AMG 2025 года 9 самых быстрых внедорожников AMG 2025 года

Внедорожники Mercedes-AMG, которые покорят вас своей максимальной скоростью

4x4 Club
«Мерило успеха — это время»: музыкант Boulevard Depo о новом альбоме и русском рэпе «Мерило успеха — это время»: музыкант Boulevard Depo о новом альбоме и русском рэпе

Boulevard Depo — об отношении к успеху и вдохновении

Forbes
От ситцевой до бриллиантовой: как называются разные годовщины свадеб и откуда взялись такие названия От ситцевой до бриллиантовой: как называются разные годовщины свадеб и откуда взялись такие названия

Годовщины свадьбы: с чем связаны их названия и какие не принято отмечать?

ТехИнсайдер
Само спокойствие Само спокойствие

Городская релакс-вилла в Пекине

SALON-Interior
От копеечной свечи От копеечной свечи

Всё началось с того, что осенью 1664 года в небе над Англией была видна комета

Дилетант
Как получить ЭПСМ на снегоход и квадрицикл – и избежать ошибки, которую делают 70% владельцев Как получить ЭПСМ на снегоход и квадрицикл – и избежать ошибки, которую делают 70% владельцев

Какие основные шаги надо проделать, чтобы получить ЭПСМ

ТехИнсайдер
Фудблогинг Фудблогинг

Среди разнообразия страниц соцсетей блоги о еде пользуются особой популярностью

Здоровье
Спасти самое дорогое Спасти самое дорогое

Многоразовые транспортные космические системы сегодняшнего дня

Зеркало Мира
В мире животных В мире животных

10 мест на родных просторах, куда можно отправиться, чтобы увидеть животных

Добрые советы
Прошёл год Прошёл год

Юлия Снигирь — об особенном знакомстве, которое изменило её жизнь

Новый очаг
Черная-черная пятница: как нас подсаживают на иглу бесконтрольного шопинга и при чем тут скидки и маркетплейсы Черная-черная пятница: как нас подсаживают на иглу бесконтрольного шопинга и при чем тут скидки и маркетплейсы

Шопоголизм: как распознать в себе зависимость и избавиться от нее?

Psychologies
Сорт-гигант: откуда в магазинах появился виноград без косточек, размером с мяч для пинг-понга Сорт-гигант: откуда в магазинах появился виноград без косточек, размером с мяч для пинг-понга

В чем секрет размеров гигантского винограда сорта «Шайн Мускат»?

ТехИнсайдер
«Ангел с черным крылом»: роман о воровке, которая учится спасать жизни «Ангел с черным крылом»: роман о воровке, которая учится спасать жизни

Отрывок из авантюрного романа Аманды Скенандор «Ангел с черным крылом»

Forbes
Миф нового года Миф нового года

Что делать с «неидеальностью» и как встретить Новый год с истинным удовольствием

Grazia
Как ИИ копирует голоса и помогает мошенникам вымогать деньги Как ИИ копирует голоса и помогает мошенникам вымогать деньги

Как мошенники используют уникальную способность нейросетей к копированию голоса

Inc.
Открыть в приложении