Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Неочевидные минусы СССР Неочевидные минусы СССР

Старшее поколение уже не помнит, а молодежь еще не знает

Maxim
Морская прогулка Морская прогулка

Интерьер в эклектичном стиле, вдохновленный островом Санторини

SALON-Interior
7 лучших научно-фантастических романов с историей, охватывающей целые эпохи 7 лучших научно-фантастических романов с историей, охватывающей целые эпохи

Несколько фантастических историй продолжительностью в многие века и тысячелетия

ТехИнсайдер
В стиле джапанди В стиле джапанди

Неординарное пространство — в стиле джапанди, комфортное и уютное

Идеи Вашего Дома
Рацион cтройности Рацион cтройности

Диета, которая точно пригодится до и после новогодних праздников

Лиза
Выдворение китайских студентов из СССР Выдворение китайских студентов из СССР

После смерти Сталина между СССР и Китаем стали нарастать противоречия

Дилетант
К духам воды К духам воды

Шаманизм — важная составляющая жизни бурят. Каждый обряд проходит по-разному

Seasons of life
Привезите мне на Новый год санкционку в подарок Привезите мне на Новый год санкционку в подарок

Какими путями в страну попадает импорт и какие препятствия стоят у него на пути

Монокль
Древние джентльмены удачи Древние джентльмены удачи

Анархисты и разбойники Древнего мира – хапиру

Знание – сила
«Доверие Александра Македонского к врачу Филиппу» «Доверие Александра Македонского к врачу Филиппу»

Во время похода в Персию Александр Ма­кедонский тяжело заболел

Дилетант
Что делать, когда один из супругов оказался в долгах: разбор частых ситуаций и мнения юриста и психолога Что делать, когда один из супругов оказался в долгах: разбор частых ситуаций и мнения юриста и психолога

Как обсуждать с близкими людьми непростые ситуации, касающиеся денег?

Psychologies
Давид против Голиафа Давид против Голиафа

«Изобретение концлагеря» начиналось в стране буров...

Знание – сила
Дмитрий Чеботарев: «Мой персонаж не пыльный» Дмитрий Чеботарев: «Мой персонаж не пыльный»

Дмитрий Чеботарев рассказал о погружении в физику и секретных объектах

Grazia
Об очередях и амбулаторных картах. Отрывок из книги «Пациентология» Об очередях и амбулаторных картах. Отрывок из книги «Пациентология»

Как устроена очередь в российской больнице

СНОБ
Георгий Милляр Георгий Милляр

Правила жизни советского актера Георгия Милляра

Правила жизни
Вот сбитень! Вот горячий! Вот сбитень! Вот горячий!

Сбитень-сбитенёк — пьёт его щеголёк, пьёт-попивает, сам похваливает…

Наука и жизнь
Как найти общие ценности в отношениях: советы психолога Как найти общие ценности в отношениях: советы психолога

Как сделать так, чтобы собственные принципы не помешали гармонии в паре?

Psychologies
Бот из машины Бот из машины

Как биороботы оживают и меняют мир технологий

РБК
Валерий Сухих: «Время требует от депутатов оперативности и профессионализма» Валерий Сухих: «Время требует от депутатов оперативности и профессионализма»

Какие традиции и принципы остаются неизменными в работе заксобрания Прикамья?

ФедералПресс
«Гулливер» ставит на многофактурность: в одежде и в бизнесе «Гулливер» ставит на многофактурность: в одежде и в бизнесе

Как участники рынка детской розницы справляются с рыночной турбулентностью

Монокль
Пряничная избушка Пряничная избушка

Рассказ Павла Пепперштейна о пряниках и сказках

Правила жизни
9 неожиданных вещей, которые можно и нужно мыть в посудомоечной машине 9 неожиданных вещей, которые можно и нужно мыть в посудомоечной машине

Посудомоечная машина способна мыть не только посуду

ТехИнсайдер
«Крым» – первый советский супертанкер «Крым» – первый советский супертанкер

Разработка проекта первого советского супертанкера водоизмещением 182 тыс. т

Наука и техника
Космический прогресс и коммунизм во всем мире: как в советское время люди представляли себе XXI век Космический прогресс и коммунизм во всем мире: как в советское время люди представляли себе XXI век

Самые интересные представления о XXI веке от людей прошлого

ТехИнсайдер
Как подводить итоги года правильно: 5 пунктов, которые поднимут вашу самооценку и мотивируют на движение Как подводить итоги года правильно: 5 пунктов, которые поднимут вашу самооценку и мотивируют на движение

Итоги года: как сделать этот процесс наполняющим, а не разочаровывающим?

Psychologies
Спорт после перерыва Спорт после перерыва

Руководство по предотвращению травм для тех, кто делал паузу в тренировках

Лиза
Чем могли бы болеть принцессы Disney? Вот что скрывают знаменитые мультики! Чем могли бы болеть принцессы Disney? Вот что скрывают знаменитые мультики!

Болезни принцесс Disney: от болезней легких у Золушки до травм у Покахонтас

ТехИнсайдер
Like, подписка, миллион: топ-10 YouTube-каналов для предпринимательского вдохновения и саморазвития Like, подписка, миллион: топ-10 YouTube-каналов для предпринимательского вдохновения и саморазвития

YouTube-каналы для тех, кто хочет начать путь в предпринимательстве

Inc.
Среди своих Среди своих

Загородный дом для отдыха с уникальными решениями

SALON-Interior
В определенных обстоятельствах В определенных обстоятельствах

Светлана Иванова с дочерьми Полиной и Мирой впервые снималась для глянца!

OK!
Открыть в приложении