С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Темные звезды: почему токсичные сотрудники подрывают работу и как этому противостоять Темные звезды: почему токсичные сотрудники подрывают работу и как этому противостоять

Стоит ли закрывать глаза на агрессию, если человек приносит компании прибыль?

Forbes
От Насти Рыбки до Тинькова и Минфина США: девять судов Олега Дерипаски От Насти Рыбки до Тинькова и Минфина США: девять судов Олега Дерипаски

Дерипаска судится часто, с кем, почему и с каким результатом он это делает?

Forbes
Скрытые подтексты: зачем инвестировать в искусство? Скрытые подтексты: зачем инвестировать в искусство?

Почему предметы искусства — перспективный объект для вложения капитала

Inc.
Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке» Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке»

Глава из книги «О чем молчит Ласточка» — о рефлексии юношеской любви

СНОБ
Менкипинг: как жены становятся «бесплатными психологами» для мужей и почему так происходит Менкипинг: как жены становятся «бесплатными психологами» для мужей и почему так происходит

Почему мужчины обращаются к своим женам, а не к психологам?

Psychologies
«Мы не говорим, что когда-то будет лучше, мы делаем, чтобы каждый год становилось лучше» «Мы не говорим, что когда-то будет лучше, мы делаем, чтобы каждый год становилось лучше»

Заместитель генерального директора РЖД — о перспективах развития железных дорог

Эксперт
Какие из российских яблок самые вкусные, надо ли чистить яблоки и еще 10 вопросов о главной фруктовой скрепе Какие из российских яблок самые вкусные, надо ли чистить яблоки и еще 10 вопросов о главной фруктовой скрепе

Такой привычный с детства фрукт, как яблоко, вопросов вроде бы не вызывает

Maxim
6 Изобретений Золотого века, которые изменили мир 6 Изобретений Золотого века, которые изменили мир

Без этих изобретений Золотого века наш мир был бы совсем другим

ТехИнсайдер
«Другой папа». Как построить новые отношения женщине с детьми «Другой папа». Как построить новые отношения женщине с детьми

Женщина второй раз выходит замуж. Как в этом случае вести себя с ребенком?

СНОБ
«Джеймс Уэбб» обнаружил кандидата в древнейшую известную галактику «Джеймс Уэбб» обнаружил кандидата в древнейшую известную галактику

Астрономы обнаружили очередного кандидата в древнейшую галактику

N+1
Квантовые блуждания атомов помогли искать с оракулом Квантовые блуждания атомов помогли искать с оракулом

Экспериментально реализовали квантовые блуждания нейтральных атомов стронция-88

N+1
Не край света: почему вам нужно съездить во Владивосток Не край света: почему вам нужно съездить во Владивосток

Почему бы не отправиться на Дальний Восток?

Правила жизни
Метаповерхности излучили запутанные фотоны с переменной длиной волны Метаповерхности излучили запутанные фотоны с переменной длиной волны

Тонкие метаповерхности, состоящие из массивов кремниевых нанорезонаторов

N+1
Почему вы просыпаетесь уставшим: 8 причин Почему вы просыпаетесь уставшим: 8 причин

Многие люди часто не просто не высыпаются, а встают разбитыми и уставшими

ТехИнсайдер
Воронка истощения: что это такое и как из нее выбраться Воронка истощения: что это такое и как из нее выбраться

Вроде бы все в порядке — семья, работа. Но в то же время совсем не в порядке...

Psychologies
Почему может сломаться шаровая опора и как водителю за ней следить Почему может сломаться шаровая опора и как водителю за ней следить

Шаровая опора в подвеске не самая крупная деталь. Но от нее так много зависит!

РБК
Женщина с молотом: почему фильм «Тор: любовь и гром» не смог преодолеть неравенство Женщина с молотом: почему фильм «Тор: любовь и гром» не смог преодолеть неравенство

Смогли ли Marvel внедрить супергеройское кино в феминистский контекст?

Forbes
Как мы дошли до спотифая? Краткая история звукозаписи Как мы дошли до спотифая? Краткая история звукозаписи

Звучащая речь из 19 века преодолела свой путь в 21 век силами не одного ученого

ТехИнсайдер
Собрание сочинений Собрание сочинений

Светлый и изящный интерьер в стиле галерейного пространства

SALON-Interior
«Его считают трусом, но он был храбрее всех»: краткая биография Михаила Горбачева «Его считают трусом, но он был храбрее всех»: краткая биография Михаила Горбачева

Как жил и чем запомнится первый и единственный президент СССР

СНОБ
Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок

Как оценивать потенциально новый рынок Китая?

Forbes
От Голды Меир до Индиры Ганди: как женщины становились премьер-министрами От Голды Меир до Индиры Ганди: как женщины становились премьер-министрами

Женщины, которые, несмотря на трудности, реализовали свои политические амбиции

Forbes
Эмоциональное выгорание: модное поветрие или реальная проблема? Эмоциональное выгорание: модное поветрие или реальная проблема?

Эмоциональное выгорание: несколько слов о болезни века и ее ранних симптомах

Psychologies
Как перестать пускать деньги на ветер: 4 работающих совета Как перестать пускать деньги на ветер: 4 работающих совета

Если постараться, перевоспитать можно даже отъявленного транжиру!

VOICE
Оказалось, что бактерии-коммунисты ненавидят нахлебников и сами избавляются от тех, кто не трудится на благо колонии Оказалось, что бактерии-коммунисты ненавидят нахлебников и сами избавляются от тех, кто не трудится на благо колонии

Колонии бактерий не выдерживают «бактерий-халявщиков» в своих рядах

ТехИнсайдер
Дайте «Оскар» этой богине! Дайте «Оскар» этой богине!

В мире более 70 пород кошек, и выделить самых красивых очень сложно

Лиза
Экономные наши! Звезды, которым не стыдно дважды надевать одно и то же Экономные наши! Звезды, которым не стыдно дважды надевать одно и то же

Некоторые звезды без проблем носят одни и те же вещи по два, три, пять раз!

VOICE
Форсаж американского истребителя F-15: диски Маха в небесах Форсаж американского истребителя F-15: диски Маха в небесах

Как из турбореактивных двигателей истребителя F-15 Eagle выходят диски Маха

ТехИнсайдер
Мужские гаремы и женская дружба: как устроены отношения полов в дикой природе Мужские гаремы и женская дружба: как устроены отношения полов в дикой природе

Натуралист Евгения Тимонова: о борьбе полов, феминизме, бодипозитиве — у зверей

Forbes
Милиция его не искала: история «тольяттинского потрошителя», который убивал и насиловал детей Милиция его не искала: история «тольяттинского потрошителя», который убивал и насиловал детей

Во время убийств он испытывал «высшее наслаждение»

VOICE
Открыть в приложении