Member of Technical Staff, Data Ingestion Engineer

Reflection — это исследовательская лаборатория, делающая искусственный интеллект открытым и доступным для всех, чтобы им могли пользоваться, настраивать и развивать. Мы создаем открытые модели, которые позволяют любому человеку контролировать свой интеллект и формировать будущее ИИ. Наша миссия: сделать интеллект открытым и доступным для всех.

Данные играют все более важную роль на переднем крае инноваций в области ИИ. Многие из самых значительных достижений последних лет были достигнуты не за счет новых архитектур, а за счет лучших данных.

В составе команды данных ваша миссия — создавать и эксплуатировать системы приема данных, которые преобразуют открытый веб и другие крупномасштабные источники данных в надежные, хорошо структурированные корпуса для обучения передовых моделей. Вы будете управлять механизмами, которые собирают, извлекают, нормализуют, версионируют и доставляют данные в наши конвейеры предварительного обучения. Вы будете работать напрямую с исследователями мирового уровня, чтобы замкнуть цикл между тем, что мы собираем, и тем, как это влияет на производительность модели.

Эта роль идеально подходит для инженеров, которые любят создавать надежные распределенные системы, но также хотят проводить эксперименты, рассуждать о компромиссах при сборе данных и быстро итерировать на основе измеримого эффекта.

Мы считаем, что для того, чтобы сделать интеллект открытым и доступным для всех, нужно начинать с основ. Присоединение к Reflection означает создание с нуля в составе команды, состоящей из высококвалифицированных специалистов. Вы поможете определить наше будущее как компании и будущее открытых фундаментальных моделей.

Мы хотим, чтобы вы выполнили самую важную работу в своей карьере, будучи уверенными, что вы и ваши близкие люди окружены поддержкой.

Работая в тесном сотрудничестве с нашими командами предварительного обучения и качества данных, вы будете:

• Создавать и эксплуатировать крупномасштабные системы приема данных для предварительного обучения, включая веб-сканирование, извлечение и доставку наборов данных
• Проводить эксперименты для оценки стратегий сканирования, методов извлечения и компромиссов при приеме данных
• Анализировать принятые данные для выявления пробелов, избыточности и областей для улучшения
• Создавать конвейеры приема данных, которые надежно масштабируются в ходе крупных кампаний по работе с данными
• Разрабатывать специализированные сканеры для приоритетных источников данных
• Проводить обзор кода, отлаживать производственные проблемы и постоянно улучшать инфраструктуру приема данных

• Проявляете любопытство к тому, как обучающие данные влияют на возможности модели, и можете быстро итерировать на основе измеримого последующего воздействия
• Способны тесно сотрудничать между различными функциями: исследователями, инфраструктурой, операциями и внешними партнерами
• Вам нравится работать в гибридной исследовательской и инженерной роли

НАВЫКИ И КВАЛИФИКАЦИЯ:

• Опыт создания систем веб-сканирования, приема данных или крупномасштабного сбора данных с использованием Ray, Beam, Spark или аналогичных технологий
• Знакомство с тем, как обучаются и оцениваются LLM, и интуитивное понимание того, что делает данные полезными для обучения
• Уверенное владение очень большими наборами данных (от мульти-ТБ до ПБ) и создание наблюдаемых, тестируемых и поддерживаемых систем
• Уверенное проектирование экспериментов и использование данных для улучшения систем
• Отличные коммуникативные навыки. Вы можете объяснить поведение системы. Вы четко обдумываете и сообщаете о компромиссах

• Превосходная компенсация: зарплата и опционы структурированы так, чтобы признавать и удерживать наши таланты по всему миру
• Опционы на акции: каждый, кто присоединяется и вносит вклад в успех Reflection, получает долю в прибыли через опционы на акции
• Здоровье и благополучие: комплексное медицинское, стоматологическое, офтальмологическое страхование и страхование жизни, а также ежегодный бюджет на оздоровление
• Питание: обеды и ужины предоставляются в офисе ежедневно
• Жизнь и семья: 22 недели оплачиваемого отпуска по уходу за ребенком для всех новых родителей (рожающих и нерожающих), включая усыновителей и суррогатных матерей
• Отпускные дни: неограниченное количество оплачиваемых отпусков в США и 30 дней в Великобритании
• Визовая поддержка: мы спонсируем визы, чтобы помочь исключительным талантам присоединиться к нашей команде, и поддерживаем долгосрочные иммиграционные пути, где это применимо
• Тимбилдинг: мы проводим регулярные выездные мероприятия, вечеринки и праздники команды