С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

От Трампа до Дидди: как именитые судебные художницы работали на громких процессах От Трампа до Дидди: как именитые судебные художницы работали на громких процессах

Судебные художницы: истоки профессии и самые известные процессы

Forbes
Опасные люди: как их распознать, если они кажутся «нормальными» Опасные люди: как их распознать, если они кажутся «нормальными»

Опаснее всего не явные тираны, а те, кто поначалу кажутся нормальными

Psychologies
Как нейросети помогают (или мешают) искать работу: мнение экспертов Как нейросети помогают (или мешают) искать работу: мнение экспертов

Какие риски могут возникнуть при собеседовании с ИИ?

ТехИнсайдер
О чем на самом деле думают мужчины? Разбираемся, стоит ли это угадывать О чем на самом деле думают мужчины? Разбираемся, стоит ли это угадывать

Что ОН хотел этим сказать, о чем ОН думает, почему ОН так поступил

VOICE
5 сверхспособностей, которые станут доступны людям уже через 5 лет по версии футурологов 5 сверхспособностей, которые станут доступны людям уже через 5 лет по версии футурологов

Какие «суперспособности» станут реальностью уже к 2030 году — и какой ценой?

Maxim
Охота на ведьм и поиски козла отпущения: как работают механизмы коллективного насилия Охота на ведьм и поиски козла отпущения: как работают механизмы коллективного насилия

Почему на протяжении всей истории человечества одни сообщества преследуют другие

Forbes
Чем противобуксовочная система отличается от ESP: факты, которые удивят даже опытных автовладельцев Чем противобуксовочная система отличается от ESP: факты, которые удивят даже опытных автовладельцев

Разбираемся в системах активной безопасности авто

ТехИнсайдер
6 крутых функций Telegram, о которых вы могли не знать 6 крутых функций Telegram, о которых вы могли не знать

Некоторые малоизвестные функции мессенджера Telegram могут вас удивить

ТехИнсайдер
Макс-фактор Макс-фактор

О том, почему Pro Max в итоге не промах

Автопилот
Потепление угрожает таежным лесам — самой крупной экосистеме России Потепление угрожает таежным лесам — самой крупной экосистеме России

Как потепление климата сказывается на таежных лицах?

ТехИнсайдер
Ангел смерти: история медсестры Дженин Джонс, которая убивала детей, чтобы ее похвалили Ангел смерти: история медсестры Дженин Джонс, которая убивала детей, чтобы ее похвалили

С детьми происходило странное: одни переставали дышать, другие конвульсировали

VOICE
«Пускай родится мальчик»: зачем девочкам дают имена-заклинания «Пускай родится мальчик»: зачем девочкам дают имена-заклинания

Как живут девочки, которым дают имена-заклинания на рождение мальчика?

Forbes
«Истории о женщинах в дефиците»: Василиса Кузьмина о пути в режиссуре и фильме «Ника» «Истории о женщинах в дефиците»: Василиса Кузьмина о пути в режиссуре и фильме «Ника»

Сложно ли женщине прийти в режиссуру, которую многие считают мужским делом

Forbes
Шеф-повар Мирко Дзаго — о штрафбате и мишленовских проектах Шеф-повар Мирко Дзаго — о штрафбате и мишленовских проектах

Шеф-повар Мирко Дзаго — о работе в мишленовских проектах и своем видении кухни

РБК
«Пока не сыграл в ящик»: как составить список самых важных дел «Пока не сыграл в ящик»: как составить список самых важных дел

Как составить bucket list и при этом избежать ошибок?

Psychologies
20 любопытных фактов о пингвинах: жизнь в смокинге 20 любопытных фактов о пингвинах: жизнь в смокинге

Что еще вы знаете о пингвинах?

ТехИнсайдер
Яна Сексте: Яна Сексте:

Бомба замедленного действия — Яна Сексте

Караван историй
Что значит смерть Михаила Горбачева для россиян: комментарий психолога Что значит смерть Михаила Горбачева для россиян: комментарий психолога

Смерть Михаила Горбачева — новая перестройка, но уже в сознании?

Psychologies
От горячего шоколада до спелой сливы: 7 классных вариантов маникюра для подготовки к осени От горячего шоколада до спелой сливы: 7 классных вариантов маникюра для подготовки к осени

Подборка нейл-дизайнов в самых трендовых оттенках осени

VOICE
Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке» Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке»

Глава из книги «О чем молчит Ласточка» — о рефлексии юношеской любви

СНОБ
«Обидчивый маньяк»: история Николая Дудина, который убивал всех, кто ему грубил «Обидчивый маньяк»: история Николая Дудина, который убивал всех, кто ему грубил

Николай Дудин поставил печальный рекорд по количеству жертв

VOICE
Никита Ковтунов — об учебе у Брусникина и преподавании в Gogol School Никита Ковтунов — об учебе у Брусникина и преподавании в Gogol School

Никита Ковтунов — об универсальности артиста и русской литературе

РБК
Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать! Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать!

Маникюр с акцентом на один-два ногтя

VOICE
«Советская Атлантида»: как сохраняют память об ушедших под воду городах «Советская Атлантида»: как сохраняют память об ушедших под воду городах

Как потомки жителей затопленных городов и деревень восстанавливают память о них

Forbes
8 способов похудеть для очень занятых людей 8 способов похудеть для очень занятых людей

Мы составили самую простую и быструю программу похудения

Psychologies
Знай свою норму: от чего зависит, как быстро ты пьянеешь и как плохо тебе будет наутро? Знай свою норму: от чего зависит, как быстро ты пьянеешь и как плохо тебе будет наутро?

Почему некоторых развозит сразу, а кто-то вдруг перепьет здоровых мужиков

Maxim
Страх и ненависть в лесу: «Бойся темноты» как пародия на фильм ужасов Страх и ненависть в лесу: «Бойся темноты» как пародия на фильм ужасов

«Бойся темноты» — несостоятельный сценарий и блеклая актерская игра

Forbes
«Живой»: честный документальный фильм об очевидцах Великой Отечественной войны «Живой»: честный документальный фильм об очевидцах Великой Отечественной войны

Как документалисту удалось снять историю о жертвах Великой Отечественной войны

Forbes
Елена Яковлева: Елена Яковлева:

Я здесь абсолютно спокойно себя чувствую. Это мое место

Караван историй
Как правильно искать (и находить!) грибы Как правильно искать (и находить!) грибы

Вернуться с «тихой охоты» пустым обидно и унизительно

Maxim
Открыть в приложении