AI Engineer - Quality and Post-Training

Название: Инженер по ИИ — Качество и Пост-тренинг Местоположение: Маунтин-Вью, Калифорния / Сан-Франциско, Калифорния / Сан-Франциско Бэй Ареа

О Glean: Glean — это платформа Work AI, которая помогает всем работать умнее с помощью ИИ. То, что начиналось как самый передовой корпоративный поиск в отрасли, превратилось в полномасштабную экосистему Work AI, обеспечивающую интеллектуальный поиск, ИИ-ассистента и масштабируемых ИИ-агентов на одной безопасной, открытой платформе. Имея более 100 корпоративных коннекторов SaaS, гибкий выбор LLM и надежные API, Glean предоставляет организациям инфраструктуру для управления, масштабирования и настройки ИИ во всем бизнесе — без привязки к поставщику или дорогостоящих циклов внедрения.

По сути, Glean переопределяет, как предприятия находят, используют и действуют на основе знаний. Его Enterprise Graph и Personal Knowledge Graph отображают связи между людьми, контентом и действиями, предоставляя глубоко персонализированные, контекстно-зависимые ответы для каждого сотрудника. Эта основа обеспечивает агентные возможности Glean — ИИ-агентов, которые автоматизируют реальную работу в командах, получая доступ к самому широкому спектру данных в отрасли: корпоративным и мировым, структурированным и неструктурированным, историческим и в реальном времени. Результат: измеримое бизнес-воздействие за счет более быстрого ввода в должность, получение часов продуктивности каждую неделю и принятие более умных, безопасных решений на каждом уровне.

Признанная Fast Company одной из самых инновационных компаний мира (Топ-10, 2025), CNBC’s Disruptor 50, Bloomberg’s AI Startups to Watch (2026), Forbes AI 50 и Gartner’s Tech Innovators in Agentic AI, Glean продолжает ускорять свое глобальное влияние. Имея клиентов в 50+ отраслях и более 1000 сотрудников в более чем 25 странах, мы помогаем крупнейшим организациям мира сделать каждого сотрудника ИИ-грамотным и превратить сверхинтеллектуальное предприятие из концепции в реальность.

Если вы хотите изменить то, как работает мир, вы поможете создавать системы, которые ежедневно используются в Microsoft Teams, Zoom, ServiceNow, Zendesk, GitHub и многих других. Вы будете глубоко погружены в то, где люди делают свою работу. Вы будете внедрять агентные возможности на открытом, расширяемом стеке, с мастерством и заботой, необходимыми для корпоративного доверия, поскольку мы приносим Work AI каждому сотруднику, в каждой компании.

О роли: Узким местом в создании надежных и полезных ИИ-агентов больше не является написание кода. Это понимание того, что такое «хорошо», измерение этого и постоянное сокращение разрыва. Glean создает следующее поколение корпоративных ИИ-ассистентов и автономных агентов, которые рассуждают, планируют и действуют в сложных многошаговых рабочих процессах. Эта роль работает на стыке прикладных исследований, качества и продуктового инжиниринга, чтобы улучшить эти системы.

Основное внимание уделяется улучшению качества моделей Glean и аппаратных средств для агентов. Это означает «подъем на холм» с помощью оценок (evals), развитие наборов оценок (evalsets) и верификаторов агентов, пост-тренинг моделей для таких случаев использования, как маршрутизация моделей, и обучение моделей для конкретных задач для корпоративных рабочих процессов. Это также означает внедрение новейших исследований в продукт и тесное сотрудничество с продуктовыми командами и клиентами, превращение уроков, извлеченных из оценок и производственного использования, в лучшие результаты за счет улучшения качества.

Что вы будете делать:

• Использовать результаты оценок и производственные трассировки для улучшения всего стека, включая аппаратное обеспечение агента, маршрутизацию моделей, промпты и извлечение, взвешивая качество против задержки и стоимости.
• Работать над пост-тренингом моделей с использованием контролируемого тонкой настройки (SFT) и оптимизации на основе предпочтений или вознаграждений (например, DPO, PPO, GRPO), включая генерацию данных для обучения.
• Создавать среды для обучения с подкреплением (RL) для симуляции корпоративных рабочих процессов, включая соответствующие наборы оценок, поддержку аппаратного обеспечения и верификаторы на основе LLM для «подъема на холм» и для внутреннего и внешнего бенчмаркинга.
• Улучшать качество репрезентативных наборов оценок, LLM-судей и верификаторов агентов, а также калибровать их по отношению к оценщикам-людям, чтобы оценкам можно было доверять при принятии решений о выпуске и обучении моделей.
• Работать с продуктовыми, платформенными и исследовательскими командами Glean для внедрения улучшений качества в производство.

О вас:

• 5+ лет опыта работы в индустрии в области ИИ или машинного обучения.
• Практический опыт пост-тренинга LLM, включая адаптацию моделей с открытым весом к специализированным задачам.
• Опыт создания оценок для систем ИИ-ассистентов и агентов, включая генерацию наборов оценок, верификаторов LLM-как-судьи, калибровку офлайн- и онлайн-сигналов в сочетании с хорошим суждением о том, когда метрика отражает улучшения качества.
• Отличные навыки программирования на Python и/или Go (TypeScript — плюс), владение выбранным вами фреймворком машинного обучения и опыт внедрения производственных ML-систем.
• Ориентированность на продукт, способность превратить расплывчатую проблему в конкретный эксперимент, и успешная работа в тесной, межфункциональной команде.

Местоположение: Эта должность предполагает гибридный формат работы (4 дня в неделю в нашем офисе в Маунтин-Вью или Сан-Франциско).

Компенсация и льготы: Стандартный диапазон базовой заработной платы для этой должности составляет от 200 000 до 280 000 долларов США в год. Предлагаемая компенсация будет определяться такими факторами, как местоположение, уровень, знания, навыки и опыт, связанные с работой. Некоторые должности могут иметь право на переменную компенсацию, акции и льготы.

Мы предлагаем комплексный пакет льгот, включая конкурентную компенсацию, медицинское, стоматологическое и офтальмологическое страхование, щедрую политику отпусков и возможность внести свой вклад в план 401k для поддержки ваших долгосрочных целей. Присоединившись к нам, вы получите пособие на обустройство домашнего офиса, а также ежегодные пособия на образование и оздоровление для поддержки вашего роста и благополучия. Мы развиваем яркую корпоративную культуру посредством регулярных мероприятий и ежедневно предоставляем здоровые обеды, чтобы вы оставались энергичными и сосредоточенными.

Мы стремимся создавать и поддерживать разнообразную, инклюзивную рабочую среду. Мы стремимся привлекать и удерживать людей с широким спектром происхождения, опыта и взглядов, и мы не дискриминируем по признаку пола, этнической принадлежности, сексуальной ориентации, религии, гражданского или семейного положения, возраста, инвалидности или расы.

AI-First Mindset в Glean: В Glean ИИ-грамотность является основой нашей работы, и мы стремимся обеспечить, чтобы каждый новый сотрудник чувствовал себя уверенно, интегрируя ИИ в свою повседневную работу. В рамках процесса собеседования вы выполните краткое упражнение или обсуждение, ориентированное на ИИ, чтобы мы могли понять, как вы думаете, проектируете и используете ИИ для достижения результатов в вашей роли. Не стесняйтесь упоминать любые инструменты, платформы или рабочие процессы, которые вы используете сегодня — предыдущий опыт работы в Glean не требуется.