Policy & Data Quality Specialist (Contract)

Мы ищем высококвалифицированного и внимательного к деталям специалиста по политике и качеству данных, который присоединится к нашей команде в качестве временного работника (контракт). Успешный кандидат будет отвечать за обучение передовых моделей ИИ, которые строго соответствуют политикам, обеспечение качества и точности решений, создание эталонных наборов данных (golden sets), калибровку сайтов поставщиков и управление отношениями с поставщиками.

Это отличная возможность для тех, кто увлечен анализом политики и обеспечением качества, внести значимый вклад в нашу организацию. Опыт модерации контента ценен, но не обязателен.

Эта роль предполагает столкновение с потенциально неприемлемым контентом, включая, но не ограничиваясь, графическими изображениями, видео и текстами, оскорбительными или уничижительными выражениями и другими потенциально неприемлемыми материалами, такими как эксплуатация детей, графическое насилие, жестокое обращение с животными, самоповреждение и другой контент, который может быть сочтен оскорбительным или тревожным.

КЛЮЧЕВЫЕ ОБЯЗАННОСТИ

• Обеспечение качества политики и данных: Анализ и оценка решений, принятых экспертными моделями и поставщиками, для обеспечения точности, последовательности и соответствия политике и руководящим принципам.

• Создание эталонных наборов данных (Golden Sets): Разработка и поддержка эталонных наборов данных для тестирования и калибровки экспертных моделей и производительности поставщиков, гарантируя, что они соответствуют нашим стандартам качества.

• Калибровка сайтов поставщиков: Сотрудничество с сайтами поставщиков для выявления областей, требующих улучшения, предоставления обратной связи и внедрения планов калибровки для повышения их производительности.

• Управление поставщиками: Построение и поддержание прочных отношений с поставщиками, предоставление руководства, поддержки и метрик производительности для обеспечения соответствия нашим ожиданиям по качеству.

• Совершенствование процессов и политики: Выявление возможностей для улучшения политик и процессов, рабочих процессов и инструментов, а также сотрудничество с внутренними заинтересованными сторонами для внедрения изменений.

• Анализ данных: Анализ данных и метрик для выявления тенденций, закономерностей и инсайтов, которые информируют стратегии обеспечения качества и производительность поставщиков.

• Коммуникация: Эффективное взаимодействие с внутренними заинтересованными сторонами, включая операционные команды, команды по политике, инженерные команды и руководство, для обеспечения согласованности и сотрудничества по инициативам в области обеспечения качества.

• Обучение и развитие: Участие в программах обучения и развития для поддержания актуальности знаний о политиках, процедурах и лучших отраслевых практиках.

ТРЕБОВАНИЯ

• Более 4 лет опыта в области технологического консалтинга, модерации контента, обеспечения качества или смежной области.

• Глубокое понимание разработки политики, процедур модерации и руководящих принципов.

• Опыт разработки оценок (evals) и эталонных наборов данных (golden sets).

• Желательно знакомство с инструментами анализа и отчетности по данным.

• Высокая внимательность к деталям и способность поддерживать точность в быстро меняющейся среде.

• Отличные аналитические навыки, навыки решения проблем и коммуникативные навыки.

• Способность работать самостоятельно и в команде.

• Опыт работы с поставщиками или внешними партнерами является ценным.

ПРЕИМУЩЕСТВА

• Опыт работы с платформами и инструментами модерации контента.

• Знание лучших отраслевых практик и стандартов модерации контента и обеспечения качества.

• Сертификация в области модерации контента, разработки оценок ИИ (AI evals) или смежной области.

УСЛОВИЯ РАБОТЫ:

• Гибридный формат работы в офисе.

• Необходимо уметь работать в быстро меняющейся среде с множеством приоритетов и сроков.

• Ожидается, что в ходе выполнения этой роли придется сталкиваться с неприемлемым контентом и взаимодействовать с ним.