Вознаграждение: $100K - $230K в год
О HUD
Миссия HUD — создание надежной, справедливой и открытой инфраструктуры для данных ИИ. Мы хотим, чтобы данные были ценными для людей, которые их создают, и вызывали доверие у лабораторий, которые их используют для обучения. Наша команда — быстрорастущая группа исследователей, инженеров и операторов, создающих экономику, которая формирует будущее ИИ. Поддерживаемая $16 млн от ведущих венчурных фондов и YC (W25), наша торговая площадка и платформа используются стартапами, компаниями из списка Fortune 500 и передовыми лабораториями.
О РОЛИ
Мы ищем инженеров-исследователей для автоматизации контроля качества (QC) обучающих данных, созданных компаниями с использованием инфраструктуры HUD. Вы будете создавать системы, которые масштабируют качество, чтобы помочь нам удовлетворить наш неизменно высокий спрос.
ОБЯЗАННОСТИ
- Создание систем QC, основанных на реальном понимании и человеческой оценке, без чрезмерной зависимости от LLM
- Определение и обеспечение стандартов качества для обучающих данных
- Разработка экспериментов и метрик для оценки результатов работы агентов
- Сотрудничество с поставщиками данных для отладки проблем с качеством и диагностики режимов сбоя агентов, предоставления действенной обратной связи и улучшения их процессов генерации данных
- Трансляция выводов QC в системы для аудита наборов данных, сгенерированных поставщиками, включая стратегии выборки, конвейеры валидации (основанные на правилах и с помощью моделей) и циклы обратной связи
- Непрерывная интеграция выводов QC в инструменты инфраструктуры и портал поставщика данных для уменьшения аномалий, несоответствий и граничных случаев
ОПЫТ
Вы можете быть подходящим кандидатом, если у вас есть:
- Опыт работы с Python, Docker и в среде Linux
- Глубокое понимание того, что означает «хорошие данные» и как это измерить
- Искреннее любопытство к различным областям и умение задавать вопросы для их понимания
- Создание масштабируемых конвейеров валидации данных и автоматизированных систем QA/QC «под ключ» без полностью предписанной дорожной карты
- Опыт работы с бенчмарками и оценками — вы можете рассуждать о том, что делает задачу реалистичной, рубрику надежной, среду пригодной для использования, а траекторию полезной для обучения RL
- Опыт работы в стартапе на ранней стадии с возможностью работать самостоятельно в быстро меняющейся среде
Сильные кандидаты также могут:
- Иметь знания в области статистики
- Обладать сильными навыками письменного и устного общения для сотрудничества с нашими партнерами и членами команды в разных часовых поясах
- Быть комфортными в разработке метрик, экспериментов и процессов QA/QC, а не только в их выполнении
- Иметь опыт работы с существующими бенчмарками и уметь рассуждать о том, как конструировать задачи в новых оценках
- Преуспевать в неструктурированных проблемных областях
Мы отдаем приоритет техническим способностям и потенциалу к обучению, а не годам опыта. Мотивированным кандидатам предлагается подавать заявки, даже если они не соответствуют всем критериям.
КОМАНДА И ДЕТАЛИ КОМПАНИИ
- Размер команды: около 25 человек в настоящее время, в основном штатные сотрудники, работающие в офисе, но есть и удаленные.
- Наша команда: в нашей команде 4 медалиста Международных олимпиад (IOI, ILO, IPhO), бывший игрок №1 в мире по Catan, серийные основатели стартапов в области ИИ и исследователи с публикациями на ICLR, NeurIPS и т. д.
- Стадия компании: у нас 8-значное финансирование, и мы масштабируемся прибыльно и быстро, чтобы удовлетворить очень высокий спрос.
ЛОГИСТИКА
- Занятость: Полная.
- Местоположение: У нас есть офисы в Сан-Франциско или Сингапуре, но мы открыты для удаленных кандидатов, которые могут работать в часы, совпадающие на 70-80% с часовыми поясами Сан-Франциско или Сингапура.
- Визовая поддержка: Мы предоставляем поддержку при переезде и визах для сильных штатных кандидатов в США или Сингапур.
- Сроки: Прием заявок ведется постоянно. Процесс состоит из 2 технических собеседований и 2-3-дневного рабочего испытания.
ЧТО МЫ ПРЕДЛАГАЕМ
- Конкурентное вознаграждение
- 100% покрытие лучших медицинских, стоматологических и офтальмологических услуг (сотрудники в США и Сингапуре)
- Обед и ужин для сотрудников, работающих в офисе
- Общая компания праздничная пауза (с Сочельника до Нового года) в дополнение к PTO и оплачиваемым праздникам
- 401k с соответствием 4%
- Другие льготы, включая членство в Equinox и транспортные льготы (сотрудники в США) и стипендию на здоровье/благополучие (сотрудники в Сингапуре)
- Неограниченный* доступ к токенам для ChatGPT, Claude Code, Cursor и т. д. *Под неограниченным мы подразумеваем, что никто в нашем рейтинге использования токенов никогда не достигал лимита. Поэтому мы понятия не имеем, что это за лимит.
- Два офиса на верхних этажах в Union Square (Сан-Франциско) и Raffles Place (Сингапур)
- Ежегодный бюджет на поездки для посещения любого из офисов
ВОЗНАГРАЖДЕНИЕ
Фактические предложения корректируются в зависимости от опыта и местоположения, но наши базовые зарплатные диапазоны следующие:
- Сан-Франциско (и другие крупные города США): $135 000 - $230 000
- Сингапур: $100 000 - $175 000
- Остальной мир: $100 000 - $175 000
Из-за большого объема мы можем не отвечать на каждую заявку, но вы можете связаться с нами по адресу контакт рекрутера или в других местах, если мы пропустили вашу заявку!
