С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Мужская и царская болезнь: пять мифов о гемофилии, которые давно опровергнуты наукой Мужская и царская болезнь: пять мифов о гемофилии, которые давно опровергнуты наукой

О главных мифах, связанных с гемофилией

Forbes
Смертоносные цветы куноити: кем были женщины-ниндзя в японской истории Смертоносные цветы куноити: кем были женщины-ниндзя в японской истории

Какими были куноити в Японии и почему так сложно изучать женскую историю?

Forbes
Революция зарплат неизбежна: почему компаниям в России не хватает сотрудников Революция зарплат неизбежна: почему компаниям в России не хватает сотрудников

В России, вероятно, происходит «революция зарплат»

Forbes
Как вычислить плохого мастера по наращиванию ресниц: главные признаки- Как вычислить плохого мастера по наращиванию ресниц: главные признаки-

Определить плохого лашмейкера не так-то просто, однако эти "маяки" помогут

VOICE
Разводиться или нет? 5 вопросов, чтобы принять решение Разводиться или нет? 5 вопросов, чтобы принять решение

Стоит ли решаться на развод? Чтобы все взвесить, ответьте себе на эти вопросы

Psychologies
Как обустроить гостиную и не разориться. Советы от эксперта Как обустроить гостиную и не разориться. Советы от эксперта

Гостиная – место встречи всех членов семьи и друзей. Как ее обустроить?

Лиза
«Становится все абсурднее»: Александр Хант о фильме «Межсезонье» и самоцензуре в кино «Становится все абсурднее»: Александр Хант о фильме «Межсезонье» и самоцензуре в кино

Режиссер Александр Хант — о новом поколении, свободе и новой цензуре

Forbes
В арктических водах поймали рыбу с настоящим В арктических водах поймали рыбу с настоящим

Арктическая рыба с телом, очень устойчивым к низким температурам

ТехИнсайдер
Как отпустить умершего человека: 3 совета, чтобы начать двигаться вперед Как отпустить умершего человека: 3 совета, чтобы начать двигаться вперед

Чтобы отпустить умершего, потребуется пройти через несколько стадий горевания

Psychologies
Как должна вести себя настоящая женщина: советы и наблюдения со страниц дневника таинственной японки Мурасаки Как должна вести себя настоящая женщина: советы и наблюдения со страниц дневника таинственной японки Мурасаки

Как девушке сохранять достоинство, занимая высокое положение в обществе?

VOICE
Правда ли, что искусственный интеллект научился выявлять рак точнее рентгенолога: прорыв в диагностике онкологии Правда ли, что искусственный интеллект научился выявлять рак точнее рентгенолога: прорыв в диагностике онкологии

Может ли искусственный интеллект выявить рак? Как это поможет врачам?

ТехИнсайдер
«Вещная жизнь: материальность позднего социализма». «Вещная жизнь: материальность позднего социализма».

Отрывок из книги «Вещная жизнь» — о том, как железо в СССР было связано с силой

N+1
«Это недопустимо»: нейл-мастер рассказала о самой опасной ошибке при наращивании ногтей «Это недопустимо»: нейл-мастер рассказала о самой опасной ошибке при наращивании ногтей

«Самые кошмарные ногти, которые она когда-либо видела»

VOICE
На изящном: древнегреческий «Холостяк», или Какой миф лежит в основе картины художника школы Рубенса «Несс и Деянира» На изящном: древнегреческий «Холостяк», или Какой миф лежит в основе картины художника школы Рубенса «Несс и Деянира»

Что стоит за картиной учеников Рубенса «Несс и Деянира»?

Правила жизни
«Слишком хороший сын»: мой мужчина чрезмерно заботится о матери «Слишком хороший сын»: мой мужчина чрезмерно заботится о матери

Как мужчина относится к своей матери, так он будет относиться к своей жене?

Psychologies
Дети диктатуры: как в Румынии несколько поколений обрекли на жизнь в приютах Дети диктатуры: как в Румынии несколько поколений обрекли на жизнь в приютах

Зачем диктатор Николае Чаушеску запустил систему приютов в Румынии?

Forbes
Помогите первокласснику Помогите первокласснику

Десять правил, которые помогут ребенку (и его родителям) подготовиться к учебе

Лиза
Парадокс русского языка: реветь белугой или все таки белухой? Да кто это вообще и причем тут Парадокс русского языка: реветь белугой или все таки белухой? Да кто это вообще и причем тут

Почему если реветь, то белугой? Или белухой?

ТехИнсайдер
Два фактора ожирения, о которых мало говорят: мнение эксперта Два фактора ожирения, о которых мало говорят: мнение эксперта

Факторы, которые постоянно упускаются при лечении ожирения

ТехИнсайдер
Открывая тайны Открывая тайны

Русскому географическому обществу исполняется 177 лет

Отдых в России
Как узнать, подойдет ли игра на ПК? Два простых метода Как узнать, подойдет ли игра на ПК? Два простых метода

Способы, которые помогут понять, подходит ли игра по системным требованиям

CHIP
«Тошнит от школы». Почему дети болеют перед контрольными «Тошнит от школы». Почему дети болеют перед контрольными

О том, как на самом деле взаимодействует психическое и телесное

СНОБ
На службе у зла: кто составлял «серую зону» между нацистами и их жертвами На службе у зла: кто составлял «серую зону» между нацистами и их жертвами

Как Третий рейх вовлекал в преступления тех, кто сам страдал от нацистов

Forbes
Калорийность рациона: зачем нужны белки и жиры Калорийность рациона: зачем нужны белки и жиры

Чем определяется калорийность рациона?

РБК
Тяга к алкоголю у женщин чаще превращается в зависимость Тяга к алкоголю у женщин чаще превращается в зависимость

Связь между плохим настроением и желанием выпить может привести к зависимости

ТехИнсайдер
Почему нам все время снятся кошмары и что можно с этим сделать Почему нам все время снятся кошмары и что можно с этим сделать

Как найти причину кошмаров и справиться с этой проблемой?

Psychologies
7 способов повысить интеллект ребенка 7 способов повысить интеллект ребенка

Несколько простых советов, которые помогут улучшить работу детского мозга

Лиза
Как жара влияет на организм Как жара влияет на организм

Врач объяснил, что происходит с нашим телом под воздействием высокой температуры

Psychologies
История одной вещи: орешки со сгущенкой — один из самых любимых советских десертов История одной вещи: орешки со сгущенкой — один из самых любимых советских десертов

Рассказываем о орешках со сгущенкой из СССР и делимся рецептом

Правила жизни
«Разовая выплата 12 окладов»: как IT-компании нанимают персонал после «спецоперации» «Разовая выплата 12 окладов»: как IT-компании нанимают персонал после «спецоперации»

Количество вакансий в IT-компаниях России в июле 2022 года снизилось на 9%

Forbes
Открыть в приложении