НАША МИССИЯ
Reflection — это исследовательская лаборатория, которая делает интеллект открытым и доступным для всех, чтобы его можно было использовать, настраивать и развивать. Мы создаем открытые модели, которые позволяют любому контролировать свой интеллект и помогают формировать будущее ИИ. Наша миссия: сделать интеллект открытым и доступным для всех.
О РОЛИ
Данные играют все более важную роль на переднем крае инноваций в области ИИ. Многие из наиболее значимых достижений последних лет были достигнуты не за счет новых архитектур, а за счет лучших данных.
Будучи членом команды данных, ваша миссия — обеспечить, чтобы данные, используемые для обучения и оценки наших моделей, соответствовали высоким стандартам качества, надежности и влияния на последующие этапы. Вы будете напрямую влиять на то, как наши модели работают в критически важных областях — использовании инструментов агентами, долгосрочном рассуждении и надежном согласовании безопасности.
Работая с исследователями мирового класса в наших посттренинговых командах, вы поможете превратить расплывчатые понятия «хороших данных» в конкретные, измеримые стандарты, масштабируемые для больших кампаний по работе с данными. Мы ищем инженеров, которые сочетают сильные инженерные основы с глубоким любопытством к качеству данных и его влиянию на поведение моделей.
Работая в тесном сотрудничестве с нашими посттренинговыми командами, вы будете:
- Отвечать за качество входных данных для посттренинга и оценки LLM, анализируя наборы данных, разработанные экспертами, и внедряя стандарты качества для рассуждений, согласования и случаев использования агентов.
- Тесно сотрудничать с исследовательскими и посттренинговыми командами для преобразования требований в измеримые сигналы качества и предоставления действенных отзывов внешним поставщикам данных.
- Разрабатывать, проверять и масштабировать автоматизированные методы QA, включая фреймворки LLM-as-a-Judge, для надежного измерения качества данных в рамках крупных кампаний.
- Создавать повторно используемые конвейеры QA, которые надежно поставляют высококачественные данные посттренинговым командам для обучения и оценки моделей.
- Отслеживать и отчитываться о качестве данных с течением времени, стимулируя непрерывную итерацию стандартов качества, процессов и критериев приемки.
О ВАС
- Сильные инженерные основы с опытом создания конвейеров данных, систем QA или рабочих процессов оценки для посттренинговых данных и агентных сред.
- Внимательность к деталям и аналитический склад ума, способность выявлять сбои, несоответствия и тонкие проблемы, влияющие на качество данных.
- Глубокое понимание того, как качество данных влияет на обучение (SFT и RL) и оценку, с возможностью преобразования проблем качества в конкретные сигналы, решения и обратную связь.
- Опыт проектирования и валидации автоматизированных проверок качества, включая системы на основе правил, статистические методы или подходы с помощью моделей, такие как LLM-as-a-Judge.
- Уверенность в самостоятельной работе, решение проблем от начала до конца и эффективное сотрудничество с исследователями, инженерами и партнерами по операционной деятельности.
НАВЫКИ И КВАЛИФИКАЦИЯ
- Владение Python и создание рабочих процессов ML / LLM. Должны быть уверены в отладке и написании масштабируемого кода.
- Опыт работы с большими наборами данных и автоматизированными системами оценки или проверки качества.
- Знакомство с принципами работы LLM и способность описывать, как модели обучаются и оцениваются.
- Отличные коммуникативные навыки, способность четко излагать сложные технические концепции в командах.
ЧТО МЫ ПРЕДЛАГАЕМ:
Мы считаем, что для того, чтобы сделать интеллект открытым и доступным для всех, нужно начать с основ. Присоединяясь к Reflection, вы будете строить все с нуля в составе высококвалифицированной команды. Вы поможете определить наше будущее как компании и будущее открытых фундаментальных моделей.
Мы хотим, чтобы вы выполняли самую значимую работу в своей карьере, будучи уверенными, что вы и ваши близкие получают поддержку.
- Топовая компенсация: зарплата и опционы структурированы так, чтобы признавать и удерживать наши таланты по всему миру.
- Опционы на акции: каждый, кто присоединяется и способствует успеху Reflection, разделяет прибыль через опционы на акции.
- Здоровье и благополучие: комплексное медицинское, стоматологическое, офтальмологическое и страхование жизни с ежегодным пособием на оздоровление.
- Питание: обеды и ужины предоставляются в офисе ежедневно.
- Жизнь и семья: 22 недели оплачиваемого отпуска по уходу за ребенком для всех новых родителей (биологических и небиологических), включая усыновление и суррогатное материнство.
- Дни отпуска: неограниченное количество оплачиваемых дней отпуска в США и 30 дней в Великобритании.
- Поддержка в получении визы: мы спонсируем визы, чтобы помочь исключительным талантам присоединиться к нашей команде, и при необходимости поддерживаем долгосрочные иммиграционные пути.
- Командообразование: у нас регулярно проводятся выездные мероприятия, вечеринки и празднования команды.
Уведомление о контроле за экспортом: эта должность может требовать доступа к технологиям или исходному коду, подпадающему под действие Правил экспортного администрирования США. Любое предложение о работе на эту должность может быть обусловлено способностью Компании предоставить кандидату доступ к таким технологиям или исходному коду в соответствии с применимыми законами США о контроле за экспортом, которые могут потребовать от Компании получения государственного разрешения.
Уведомление о конфиденциальности кандидата и сотрудника: мы собираем и обрабатываем персональные данные заявителей для целей, описанных в нашем Уведомлении о конфиденциальности кандидата и сотрудника.
