Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Миф о красоте Миф о красоте

Стереотипы против женщин

kiozk originals
Кочек нет – но рессоры нужны. Тележки локомотивов и вагонов Кочек нет – но рессоры нужны. Тележки локомотивов и вагонов

Подробно о рессорах, колесных парах и тележках электровозов

Наука и техника
Гастрономический ликбез Гастрономический ликбез

Идеальное меню новогоднего вечера

Playboy
Давайте жить дружно Давайте жить дружно

Как избежать предновогодних и новогодних конфликтов с семьей

Лиза
Снова всегда Снова всегда

Как Чарли Кауфман сводит все концы со всеми началами

Weekend
Роза пустыни в нашем доме Роза пустыни в нашем доме

Мода на так называемые бутылочные деревья принесла нам маленькое чудо — адениум

Наука и жизнь
Современное состояние ВТС России и Китая Современное состояние ВТС России и Китая

Сотрудничество Москвы и Пекина носит выраженный «антиамериканский» характер

Обозрение армии и флота
Скорая бьюти-помощь Скорая бьюти-помощь

Как привести себя в порядок после вечеринки

Лиза
Людмила Бабушкина: «Мы обязаны держать планку на высочайшем уровне» Людмила Бабушкина: «Мы обязаны держать планку на высочайшем уровне»

Как обстоят дела с реализацией социальных программ в Свердловской области?

ФедералПресс
«Наше оружие — это разговоры»: почему тюрьмы в Норвегии считаются лучшими в мире «Наше оружие — это разговоры»: почему тюрьмы в Норвегии считаются лучшими в мире

Что произойдет, если мы начнем относиться к преступникам как к обычным людям?

Psychologies
Как в лучших домах Как в лучших домах

Выбираем качественную икру для праздничного стола

Лиза
«Мы просто друзья»: почему у многих пар отношения начинаются с дружбы «Мы просто друзья»: почему у многих пар отношения начинаются с дружбы

Насколько распространены отношения, выросшие из дружбы?

Psychologies
Get ready with me: в чем смысл тренда и почему люди показывают, как готовятся выйти из дома Get ready with me: в чем смысл тренда и почему люди показывают, как готовятся выйти из дома

Почему видеоролики, в которых блогеры одеваются, становятся вирусными?

Psychologies
Менкипинг: как жены становятся «бесплатными психологами» для мужей и почему так происходит Менкипинг: как жены становятся «бесплатными психологами» для мужей и почему так происходит

Почему мужчины обращаются к своим женам, а не к психологам?

Psychologies
Ускользающая простота Ускользающая простота

Как Геннадий Шпаликов не нашел себе места в застое

Weekend
Ангелина Вовк: «Мечтала идти по стопам отца, летать на самолетах, а судьба привела на телевидение» Ангелина Вовк: «Мечтала идти по стопам отца, летать на самолетах, а судьба привела на телевидение»

Жизнь советской телеведущей — это не слава, не гламур

Коллекция. Караван историй
Секреты расшифровки Секреты расшифровки

Как прочесть берестяную грамоту?

Вокруг света
Древнейшую синагогу назвали частью еврейского квартала Фанагории Древнейшую синагогу назвали частью еврейского квартала Фанагории

Российские археологи продолжили раскопки района Фанагории

N+1
Порно и предубеждение Порно и предубеждение

«Соперники»: чисто английские 1980-е

Weekend
Почему локальные марки парфюма не смогли занять рынок после ухода иностранных игроков Почему локальные марки парфюма не смогли занять рынок после ухода иностранных игроков

Почему отечественные компании не смогли занять освободившееся место в парфюмерии

Forbes
Как из анекдотов: 5 типов тещ, которые могут разрушить любую семью Как из анекдотов: 5 типов тещ, которые могут разрушить любую семью

Пять характерных типажей свекрови и как с ними бороться?

Psychologies
Как отучить себя осуждать других людей и почему при этом вам станет легче Как отучить себя осуждать других людей и почему при этом вам станет легче

Зачем люди осуждают друг друга?

Psychologies
Эдуард Ратников — о театре «Одеон» и жизни без больших концертов Эдуард Ратников — о театре «Одеон» и жизни без больших концертов

Эдуард Ратников и его путь от стадионных шоу до мюзиклов

Правила жизни
Обзор Geely Tugella: плюсы и минусы, комплектации, фото Обзор Geely Tugella: плюсы и минусы, комплектации, фото

Купе-кроссовер Geely Tugella: что стоит знать о нем

РБК
«Я терпеливо жду в засаде» «Я терпеливо жду в засаде»

Маргарита Чинкова — о том, как заработать на офертах, допэмиссиях и ликвидациях

Монокль
День открытых дверей День открытых дверей

Какими нестандартными решениями поражает электрический минивэн Zeekr Mix

Автопилот
5 советов по защите иммунной системы в преддверии зимы 5 советов по защите иммунной системы в преддверии зимы

Тренировки на больничном: что делать, если вы чувствуете себя не на все сто?

Men Today
Найди меня Найди меня

Зачем люди ищут свои корни и почему готовы платить за это огромные деньги

Grazia
«Голдфингер-2» «Голдфингер-2»

Трансфигурации Aston Martin DB12 и Rolls-Royce Phantom в третьем тысячелетии

Автопилот
Изменения к лучшему: каким получился обновленный кросс-купе Exeed RX Flagship Изменения к лучшему: каким получился обновленный кросс-купе Exeed RX Flagship

Чем кросс-купе Exeed RX Flagship отличается от своего «старшего брата»

Forbes
Открыть в приложении