Руководитель программ, операции с человеческими данными (Юта)
AI Safety - Human Data - Юта (Удаленно)
О mpathic
mpathic создает будущее надежного ИИ. Основываясь на поведенческой науке и человеко-ориентированном дизайне, мы предоставляем инфраструктуру для создания безопасных, согласованных и эмоционально интеллектуальных систем ИИ.
Основываясь на нашей работе в таких областях, как RL gyms, red teaming и бенчмаркинг, мы создаем основу для надежного, проверяемого и масштабируемого обучения, исследования и измерения передовых систем ИИ.
Обзор позиции
mpathic ищет Руководителя программ, операции с человеческими данными, для руководства выполнением сложных задач в области безопасности ИИ, оценки, человеческих данных и red teaming для ведущих компаний в сфере ИИ. Вы будете подчиняться непосредственно соучредителю/директору по инновациям. Эта роль отвечает за сквозную реализацию проектов в кросс-функциональных проектных командах и несет ответственность за выполнение проектов, качество, коммуникацию с заинтересованными сторонами и результаты для клиентов.
Идеальный кандидат имеет значительный опыт управления крупномасштабными операциями по предоставлению услуг, включая распределенные команды экспертов, аннотаторов, рецензентов, специалистов по red teaming, подрядчиков и сотрудников отдела контроля качества. Они комфортно чувствуют себя в быстро меняющейся стартап-среде, где приоритеты быстро меняются, а успешная реализация требует проактивной коммуникации, операционной точности и сильного суждения.
Вы будете выступать в качестве связующего звена между службами данных, QA, инжинирингом, AI/ML, продуктом, наукой о данных и командами, работающими с клиентами, — преобразуя неясные потребности клиентов и операционные задачи в надежную реализацию и поддерживая вовлеченных людей в понимании того, что мы строим и почему.
Это роль как исполнения, так и лидерства. Вы должны быть так же комфортно координировать распределенные рабочие процессы экспертов и управлять ожиданиями клиентов, как и создавать системы, улучшающие видимость проектов, качество и пропускную способность. Вы начнете как активный индивидуальный участник, управляющий своим «подом» (небольшой командой) доставки, с возможностью формировать масштабирование управления программами по мере роста команды.
Что вы достигнете
В первые 60–90 дней вы будете…
- Получите глубокое понимание человеческих данных mpathic, безопасности ИИ, red teaming, оценки, аннотации, QA и рабочих процессов отчетности, а также четкое представление о том, как работа проходит от передачи контракта до окончательной поставки.
- Будете наблюдать, а затем возьмете на себя ответственность за одну или несколько активных клиентских программ — управляя сроками, отслеживанием результатов, координацией персонала, управлением рисками и коммуникацией с заинтересованными сторонами.
- Освоите системы, инструменты, трекеры, механизмы отчетности и коммуникационные рабочие процессы, используемые в проектах.
- Установите доверительные рабочие отношения с руководством, исполнительными командами, клиентами и заинтересованными сторонами внутри и вне компании.
- Начнете выявлять операционные узкие места, пробелы в процессах и возможности для улучшения.
В первый год вы будете…
- Отвечать за сквозное планирование, подбор персонала, выполнение, управление качеством и отчетность по нескольким одновременным клиентским проектам.
- Координировать кросс-функциональные проектные группы, состоящие из экспертов, аннотаторов, рецензентов, специалистов по red teaming, сотрудников QA, исследователей, инженеров и специалистов по данным.
- Создавать масштабируемые системы, улучшающие видимость проектов, качество, пропускную способность или операционную эффективность.
- Сотрудничать с руководителями и функциональными лидерами для прогнозирования мощностей и поддержки роста бизнеса.
- Вносить вклад в возможности расширения клиентской базы за счет исключительной реализации и управления заинтересованными сторонами.
- Помогать определить, как управление программами будет масштабироваться в mpathic по мере роста платформы и команды.
В этой роли вы будете преуспевать, если…
- Вы переводите неопределенность в действия: вы можете взять сложную, развивающуюся клиентскую программу и превратить ее в четкий план проекта, модель подбора персонала и путь доставки с управлением рисками.
- Вы обладаете операционной точностью и сильным суждением, можете проактивно выявлять риски до того, как они повлияют на обязательства по поставкам.
- Вы разрабатывали или управляли рабочими процессами аннотации, процессами QA или программами, основанными на данных экспертов, и понимаете, что необходимо для создания надежных операций с человеческими данными в масштабе.
- Вы понимаете современные концепции оценки ИИ, red teaming и human-in-the-loop, а также как их операционализировать в повторяемые, измеримые рабочие процессы.
- Вы комфортно работаете с высокорискованным, конфиденциальным материалом, таким как безопасность ИИ, red teaming и trust & safety, и проявляете заботу как о клиентах, так и о командах, выполняющих работу.
- Вы четко общаетесь по проектным планам, статусам и путям эскалации, и можете согласовывать распределенные команды вокруг владения и сроков, не полагаясь на авторитет.
- Вы заряжаетесь энергией от того, что являетесь связующим звеном между командами Human Data, QA, Engineering, Product, Research и Customer Success.
- Вы реализовали крупномасштабные программы в сложных операционных условиях, что подтверждается вашими достижениями, а не годами в резюме. Опыт в области безопасности ИИ, оценки LLM или операций trust & safety является большим плюсом.
Что вы будете делать
Управление выполнением проектов, от передачи контракта до окончательной поставки (Основное)
- Быть единым операционным руководителем для под-команд доставки, которыми вы управляете, ведя каждую программу от приема до подбора персонала, выполнения, проверки качества и утверждения клиентом.
- Создавать и координировать проектные команды.
- Разрабатывать планы проектов, модели подбора персонала, графики, регламенты коммуникации и планы по снижению рисков.
- Контролировать производительность проекта, загрузку ресурсов, пропускную способность, метрики качества и бюджет.
Управление отношениями с клиентами и этапами доставки
- Управлять ожиданиями клиентов и этапами доставки на протяжении всего жизненного цикла проекта.
- Руководить внутренними проектными совещаниями, обзорами статуса и регулярными отчетами для клиентов.
- Определять возможности для расширения и сообщать о предложениях по операционному улучшению руководству.
Создание систем качества и операционных систем
- Определять, что означает «хорошее» для управляемых вами программ, и контроли, процессы QA, которые это измеряют.
- Устанавливать стандарты качества аннотаций и человеческих данных, которые являются последовательными, проверяемыми и гуманными по отношению к людям, выполняющим работу.
- Создавать масштабируемые операционные системы, улучшающие видимость проектов, качество или пропускную способность команды Human Data.
Сбор информации от клиентов и команд доставки
- Сотрудничать с командами предпродажной подготовки и клиентского сервиса для преобразования требований клиентов в планы реализации.
- Предоставлять информацию с передовой линии для планирования мощностей и операционного улучшения.
- Превращать полученные знания в системные улучшения, а не в разовые решения.
Быть связующим звеном
- Обеспечивать согласованность между командами Human Data, QA, Engineering, Product, Research и Customer Success в отношении того, что поставляется и почему.
- Выступать посредником между операционными, техническими и коммерческими точками зрения, чтобы принимались правильные компромиссные решения.
О команде
Вы будете тесно сотрудничать с:
- Руководством Human Data и руководителями QA: для подбора персонала, координации и выполнения высококачественных программ.
- Engineering, AI/ML и Research: для устранения технических блокировок и интеграции инструментов в рабочие процессы.
- Sales и Customer Success: для согласования того, что мы поставляем, с потребностями клиентов, ожиданиями и возможностями расширения.
- Мы ценим операционное совершенство, системное мышление и высокие стандарты качества, ясности и проверяемости.
Требуемый опыт
- 5+ лет опыта в управлении программами, выполнении проектов, руководстве операциями или аналогичном опыте.
- Подтвержденный опыт управления крупномасштабными человеческими данными, аннотациями, оценкой, trust & safety, исследовательскими операциями или рабочими процессами, основанными на данных экспертов.
- Опыт руководства распределенными командами подрядчиков, рецензентов, аннотаторов, экспертов или сотрудников QA.
- Опыт управления программами, ориентированными на клиента, с участием руководства.
- Опыт работы в стартапах или быстрорастущих компаниях.
Предпочтительные квалификации
- Сертификация PMP, PgMP, CAPM, Agile, Scrum, Lean или эквивалентная сертификация в области управления проектами является большим преимуществом.
- Опыт работы в области безопасности ИИ, оценки LLM, red teaming, систем human-in-the-loop или операций trust & safety.
- Опыт создания масштабируемых операционных систем и процессов управления качеством.
Подавайте заявку, даже если вы не соответствуете всем требованиям
Если вы заинтересованы в применении клинического суждения, совершенства обучения и систем качества к работе по оценке безопасности ИИ — и хотите помочь обеспечить безопасность и надежность эмоционально обоснованных систем ИИ — мы будем рады услышать от вас.
Местоположение
Юта (Удаленно)
Отдел
AI Safety - Human Data
Тип занятости
Полная занятость
Компенсация
$120 000 - $150 000
