С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Другой дом»: отрывок из романа американского классика Генри Джеймса «Другой дом»: отрывок из романа американского классика Генри Джеймса

Отрывок из драматического романа с элементами детектива от Генри Джеймса

Forbes
Почему всем нравится совершенно разная еда: оказалось, проблема в генетике Почему всем нравится совершенно разная еда: оказалось, проблема в генетике

Почему одним людям нравятся брокколи и улитки, а другим нет?

ТехИнсайдер
Как уйти от психологии бедняка: 4 лайфхака Как уйти от психологии бедняка: 4 лайфхака

Разбираемся, как перестать нищебродствовать и начать жить

Maxim
Как сохранить желание: интервью с сексологом Как сохранить желание: интервью с сексологом

Можно ли сохранять сексуальный аппетит на протяжении долгого времени?

Psychologies
Как защитить детей от сексуализированного насилия: инструкция для родителей Как защитить детей от сексуализированного насилия: инструкция для родителей

Почему важно говорить о сексуализированном насилии над детьми?

Psychologies
Смертоносные цветы куноити: кем были женщины-ниндзя в японской истории Смертоносные цветы куноити: кем были женщины-ниндзя в японской истории

Какими были куноити в Японии и почему так сложно изучать женскую историю?

Forbes
Поворот сюжета Поворот сюжета

История лесничего Ивана Рейнмана

Дилетант
6 деталей, которые сделают любой образ безвкусным и «дешевым»: мнение жены миллионера 6 деталей, которые сделают любой образ безвкусным и «дешевым»: мнение жены миллионера

Какие детали могут испортить самый дорогой образ?

VOICE
Тяга к алкоголю у женщин чаще превращается в зависимость Тяга к алкоголю у женщин чаще превращается в зависимость

Связь между плохим настроением и желанием выпить может привести к зависимости

ТехИнсайдер
Экспериментальный антибиотик уничтожил устойчивые грамотрицательные бактерии Экспериментальный антибиотик уничтожил устойчивые грамотрицательные бактерии

Американские исследователи разработали новый антибиотик

N+1
Деплатформинг структур. Почему кристаллохимикам все труднее доверять друг другу Деплатформинг структур. Почему кристаллохимикам все труднее доверять друг другу

Почему кристаллохимикам все труднее доверять друг другу

N+1
Почему ты должен платить за воздух Почему ты должен платить за воздух

Прогресс привел к загрязнению атмосферы, но дал нам очистители воздуха для дома

Maxim
Эмили Ратаковски, Шакира и другие роскошные женщины, которым изменили мужья Эмили Ратаковски, Шакира и другие роскошные женщины, которым изменили мужья

Даже звезды порой сталкиваются с циничным обманом

VOICE
«Дживс и Вустер» и много олигархов: пять фильмов и сериалов о жизни богатых людей «Дживс и Вустер» и много олигархов: пять фильмов и сериалов о жизни богатых людей

Художественный и документальные фильмы о жизни олигархов

Forbes
Свободные женщины 1920-х: как японские модан гару бросали вызов традиционалистам Свободные женщины 1920-х: как японские модан гару бросали вызов традиционалистам

Кем были модан гару и как они расшатали японское общество?

Forbes
Трагедия лишней хромосомы: ущербность мужчины и сложность женщины Трагедия лишней хромосомы: ущербность мужчины и сложность женщины

Интимные проблемы половых хромосом

СНОБ
Ловушка парентификации: как «стакан воды» превращается в травму на всю жизнь Ловушка парентификации: как «стакан воды» превращается в травму на всю жизнь

Нейропсихолог и психотерапевт Алена Ванченко — о травме парентификации

Forbes
Как работает лазерная навигация в роботах-пылесосах и зачем она нужна Как работает лазерная навигация в роботах-пылесосах и зачем она нужна

Что такое лидар в роботах-пылесосах и как он работает?

CHIP
Если родители были токсичными: 5 защитных механизмов психики Если родители были токсичными: 5 защитных механизмов психики

Как сделать свою взрослую жизнь и отношения счастливее?

Psychologies
Все испортили? Почему дизайнеры наняли моделей плюс-сайз и все равно не угодили девушкам Все испортили? Почему дизайнеры наняли моделей плюс-сайз и все равно не угодили девушкам

Что не так с современной модой для плюс-сайз девушек?

VOICE
Жители эллинистической Береники разнообразно использовали ракушки от съеденных моллюсков Жители эллинистической Береники разнообразно использовали ракушки от съеденных моллюсков

Морские ресурсы играли важную роль в жизни эллинистической Береники

N+1
Кто придумал знаменитые советские конструкторы: ты удивишься, когда узнаешь! Кто придумал знаменитые советские конструкторы: ты удивишься, когда узнаешь!

Все, кто родился в СССР, помнят этот популярный конструктор. Но кто его создал?

VOICE
Как рэпер 50 Сent помог продавать воду дорого и заработал на этом $100 млн Как рэпер 50 Сent помог продавать воду дорого и заработал на этом $100 млн

Отрывок из книги «Hustle Harder, Hustle Smarter» о жизни 50 Сent

Forbes
«Лавка Болотова». Как металлург из Тулы стал поставщиком помидоров в White Rabbit, Selfie и рестораны Новикова «Лавка Болотова». Как металлург из Тулы стал поставщиком помидоров в White Rabbit, Selfie и рестораны Новикова

Можно ли бросить всё, сделать ставку на продажу овощей и выиграть?

Inc.
Машинное обучение предсказало толщину нейтронной кожи свинца Машинное обучение предсказало толщину нейтронной кожи свинца

Физики рассчитали толщину нейтронной оболочки в ядре изотопа свинца-208

N+1
«16 эссе об истории искусства». Как описывать и анализировать предметы искусства и культуры «16 эссе об истории искусства». Как описывать и анализировать предметы искусства и культуры

Глава из «16 эссе об истории искусства» — как маски стали музейными экспонатами

N+1
Как подростки снимали фильм «Дух сейда» для проекта «Кинолаборатория» Как подростки снимали фильм «Дух сейда» для проекта «Кинолаборатория»

«Сноб» поговорил с командой фильма «Дух сейда» о том, что дал им этот проект

СНОБ
Серьги жертвы подарил матери: история бердского маньяка, державшего в страхе весь город Серьги жертвы подарил матери: история бердского маньяка, державшего в страхе весь город

Два года все женщины Бердска выходили на улицу, сжавшись от страха

VOICE
Что такое тест Бекдел-Уоллес и зачем кинематографу нетипичные женские персонажи Что такое тест Бекдел-Уоллес и зачем кинематографу нетипичные женские персонажи

Интересные самостоятельные героини — выгодное вложение для киностудий

Forbes
6 признаков того, что в вашей интимной жизни есть проблемы, и как это исправить 6 признаков того, что в вашей интимной жизни есть проблемы, и как это исправить

6 признаков того, что у вас что-то разладилось — и способы все починить

VOICE
Открыть в приложении