Member of Technical Staff, Data Flywheel

Title: Member of Technical Staff, Data Flywheel Location: New York, NY / San Francisco, CA / London / OnSite

НАША МИССИЯ

Reflection — это исследовательская лаборатория, которая делает интеллект открытым и доступным для всех, чтобы его можно было использовать, настраивать и развивать. Мы создаем открытые модели, которые позволяют каждому контролировать свой интеллект и помогают формировать будущее ИИ. Наша миссия: сделать интеллект открытым и доступным для всех.

ОБЗОР РОЛИ

Команда Data Flywheel устраняет разрыв между производительностью на эталонных тестах и реальной производительностью в реальном мире. Мы выявляем и создаем сигналы, данные и циклы обратной связи, которые превращают использование моделей в строгие оценки, целевые обучающие данные и измеримые улучшения в будущих поколениях моделей.

Это практическая техническая роль на стыке исследований и внедрения. Вы будете заниматься решением неоднозначных моделей поведения, от первоначального наблюдения до измерения, вмешательства и подтвержденного улучшения, работая над оценкой, человеческими и синтетическими данными, инфраструктурой, пост-тренингом и внедрением в реальном времени. Вы будете тесно сотрудничать с исследователями и инженерами по всей компании, а также с клиентами, партнерами, поставщиками и сообществом open-source.

ЧТО ВЫ БУДЕТЕ ДЕЛАТЬ

• Определять ценные источники данных и возможности партнерства, глубоко понимать лежащие в их основе варианты использования и преобразовывать их в репрезентативные оценки.

• Вводить в эксплуатацию новые источники данных, от первоначальных переговоров с партнерами и определения объема данных до проверки качества и интеграции в конвейеры оценки и обучения в производственной среде, где это уместно.

• Разрабатывать и создавать оценки, грейдеры и циклы обратной связи, которые делают приоритетное поведение моделей в реальном мире измеримым.

• Анализировать производительность моделей и режимы сбоев, а затем преобразовывать полученные данные в целевые наборы данных, сигналы вознаграждения и обучающие вмешательства.

• Разрабатывать стратегии использования человеческих и синтетических данных для возможностей, где существующие данные недостаточны, включая проектирование и проведение программ оценки и сбора данных с поставщиками.

• Создавать инфраструктуру и конвейеры, необходимые для надежного приема, проверки, версионирования и оценки данных в масштабе.

• Тесно сотрудничать с командами pre-training, post-training, applied и partnership, чтобы превратить новые сигналы в измеримые улучшения моделей.

ЧТО МЫ ИЩЕМ

• Степень (BS, MS или PhD) в области компьютерных наук, машинного обучения или смежной дисциплины, или эквивалентный практический опыт.

• Глубокое техническое понимание обучения и оценки LLM, с практическим опытом в таких областях, как дизайн оценки, курирование данных, обучение с подкреплением или дизайн вознаграждений.

• Сильные навыки разработки программного обеспечения и опыт создания автоматизированных конвейеров данных/оценки или крупномасштабных ML-систем.

• Опыт самостоятельного ведения высокоэффективных проектов от начала до конца, умение ориентироваться в неоднозначных ситуациях и быстро адаптироваться к меняющимся приоритетам.

• Высокоориентированный на сотрудничество, ориентированный на действия подход и энтузиазм в определении того, как новая передовая лаборатория измеряет и ускоряет прогресс моделей.

• Высокая инициативность и умение работать в быстро меняющейся стартап-среде; приоритет — результат, а не процесс.

• Удовольствие от сотрудничества в областях исследований, инженерии, операций и продукта.

ЧТО МЫ ПРЕДЛАГАЕМ:

Мы считаем, что для того, чтобы сделать интеллект открытым и доступным для всех, нужно начинать с фундамента. Присоединение к Reflection означает построение с нуля в составе команды высококлассных специалистов. Вы будете определять наше будущее как компании и будущее открытых фундаментальных моделей.

Мы хотим, чтобы вы выполнили самую значимую работу в своей карьере, будучи уверенными, что вы и ваши близкие получат поддержку.

• Топовая компенсация: зарплата и опционы, структурированные таким образом, чтобы признавать и удерживать наши таланты по всему миру.

• Опционы на акции: каждый, кто присоединяется и вносит вклад в успех Reflection, получает долю в прибыли через опционы на акции.

• Здоровье и благополучие: комплексное медицинское, стоматологическое, офтальмологическое и страхование жизни, с ежегодным пособием на оздоровление.

• Питание: обед и ужин предоставляются в офисе ежедневно.

• Жизнь и семья: 22 недели оплачиваемого отпуска по уходу за ребенком для всех новых родителей (биологических и небиологических), включая усыновителей и суррогатных матерей.

• Дни отпуска: неограниченное количество оплачиваемых выходных в США и 30 дней в Великобритании.

• Визовая поддержка: мы спонсируем визы, чтобы помочь выдающимся талантам присоединиться к нашей команде, и поддерживаем долгосрочные иммиграционные пути, где это применимо.

• Тимбилдинг: у нас регулярно проводятся выездные мероприятия, вечеринки и празднования команды.

Уведомление о контроле над экспортом: эта должность может потребовать доступа к технологиям или исходному коду, подпадающим под действие правил экспортного контроля США. Любое предложение о работе на эту должность может быть обусловлено способностью Компании предоставить кандидату доступ к таким технологиям или исходному коду в соответствии с применимыми законами США о контроле над экспортом, что может потребовать от Компании получения разрешения правительства.

Уведомление о конфиденциальности кандидата и сотрудника: мы собираем и обрабатываем персональные данные заявителей для целей, описанных в нашем Уведомлении о конфиденциальности кандидата и сотрудника.