Machine Learning Engineer, Voice Agents

Инженер машинного обучения, голосовые агенты

В Hugging Face мы работаем над демократизацией хорошего ИИ. Мы создаем самую быстрорастущую платформу для разработчиков ИИ с более чем 11 миллионами пользователей, которые совместно поделились более чем 3 миллионами моделей, 1 миллионом наборов данных и 1,47 миллиона приложений. Наши библиотеки с открытым исходным кодом имеют более 600 тысяч звезд на Github.

О роли

Мы создаем стек открытых голосовых агентов для Hugging Face и ищем старшего инженера, который возьмет на себя большую часть этой работы. Две вещи находятся в центре этой роли. Первая — это speech-to-speech, наша библиотека с открытым исходным кодом для голосовых агентов в реальном времени. Вторая — hf-voice, новый продукт, который позволит любому разработчику создавать и развертывать голосовых агентов с помощью своей учетной записи Hugging Face.

Библиотека уже используется в парке устройств Reachy Mini, и есть публичная демонстрация, работающая на Spaces, так что вы не начнете с чистого листа. Но почти все, что касается того, как это станет продуктом, на который будут полагаться разработчики, еще открыто, и вы будете иметь прямое влияние на это.

Ваши задачи:

- Владение библиотекой с открытым исходным кодом:

• Архитектурное владение большими частями speech-to-speech: дизайн конвейера, бюджет задержки и надежность цикла реального времени.
• Интеграция новых моделей ASR, TTS и сквозных речевых моделей по мере их появления и поддержание чистоты абстракций, пока ландшафт моделей продолжает меняться.
• Просмотр PR сообщества, сортировка проблем, выпуск релизов и рост группы контрибьюторов вокруг проекта.

- Выпуск hf-voice:

• Проектирование API для разработчиков и протокола потоковой передачи: жизненный цикл сеанса, транспорт (WebSockets/WebRTC), аутентификация, семантика ошибок, версионирование.
• Создание серверной части: вывод в реальном времени на GPU, параллелизм, автоматическое масштабирование, наблюдаемость и стоимость за сеанс.
• Работа с командами Hub и inference, чтобы рабочий голосовой агент легко интегрировался в продукты и демонстрации.
• Перевод продукта из демонстрации в производство: нагрузочное тестирование, SLO, плавное снижение производительности при сбое модели или сетевого пути.

- Работа в открытом доступе:

• Написание документации, примеров и шаблонов, которые позволят разработчику от нуля до работающего агента за считанные минуты.
• Поддержка развертываний, уже полагающихся на стек, начиная с парка устройств Reachy Mini.
• Публичное обсуждение проделанной работы, если вам это нравится: статьи в блогах, демонстрации, выступления на конференциях. Мы покрываем расходы на поездки и время подготовки.

Требования

Что мы ищем

• Старший инженер, способный взять на себя существенную часть архитектуры и автономно продвигать ее вперед.
• Опыт создания инфраструктуры для разработчиков в компании, занимающейся ИИ или инструментами для разработчиков: API для вывода, инфраструктура агентов или что-то сопоставимое.
• Значительный вклад в открытый исходный код библиотеки Python. Уверенное владение асинхронным Python и распределенными системами, включая их сбои.
• Вы создавали что-то в реальном времени: потоковую передачу, WebSockets или WebRTC, аудио- или видеоконвейеры, вывод в прямом эфире.
• Практический опыт работы с LLM или мультимодальными моделями в производственной среде. Четкая письменная коммуникация и привычка асинхронного и публичного сотрудничества.
• Мотивация к работе в области голосового ИИ и разговорного ИИ.

Бонусные баллы, если у вас есть

• Вклад в фреймворки голосовых агентов, такие как speech-to-speech, pipecat, LiveKit Agents, Vocode или TEN.
• Вклад в llama.cpp или другой низкоуровневый рантайм для вывода.
• Практический опыт работы с моделями ASR, TTS или сквозными речевыми моделями, включая оценку компромиссов между задержкой и качеством.
• Опыт работы с GPU serving, квантованием или выводом на устройстве.
• Знание аудиоконвейеров: VAD, подавление эха, джиттер-буферы, обнаружение вторжений и поворотов.
• Опыт развертывания на встраиваемых или роботизированных платформах.
• Публичный послужной список: выступления, статьи в блогах, демонстрации.

О вас

Если вы заинтересованы в присоединении к нам, но не соответствуете всем вышеперечисленным требованиям, мы все равно призываем вас подать заявку! Мы создаем разнообразную команду, навыки, опыт и происхождение которой дополняют друг друга. Мы будем рады рассмотреть, где вы можете оказать наибольшее влияние.

Еще кое-что

В Hugging Face мы считаем, что великий ИИ не требует массивного кластера, мы создаем для всех, особенно для тех, у кого мало GPU. И поскольку мы читаем каждое заявление, вот небольшой знак того, что вы прочитали это тоже: начните свой ответ на первый вопрос заявления со слов «GPU-poor and proud» 🤗. Никаких подвохов, просто чтобы мы знали, что на другом конце реальный человек.

Преимущества

Подробнее о Hugging Face

Мы активно работаем над созданием культуры, которая ценит разнообразие, равенство и инклюзивность. Мы сознательно строим рабочее место, где люди чувствуют себя уважаемыми и поддерживаемыми — независимо от того, кто вы и откуда родом. Мы считаем, что это основа для построения великой компании и сообщества. Hugging Face является работодателем с равными возможностями, и мы не дискриминируем по признаку расы, религии, цвета кожи, национального происхождения, пола, сексуальной ориентации, возраста, семейного положения, статуса ветерана или статуса инвалидности.

Мы ценим развитие. Вы будете работать с одними из самых умных людей в нашей отрасли. Мы — организация, которая ориентирована на результат и постоянно бросает вызов себе для непрерывного роста. Мы предоставляем всем сотрудникам возмещение расходов на соответствующие конференции, обучение и образование.

Мы заботимся о вашем благополучии. Мы предлагаем гибкий график работы и удаленные варианты. Мы предлагаем медицинское страхование, стоматологическое страхование и страхование зрения для сотрудников и их иждивенцев. Мы также предлагаем отпуск по уходу за ребенком и гибкий оплачиваемый отпуск.

Мы поддерживаем наших сотрудников, где бы они ни находились. Хотя у нас есть офисы в Нью-Йорке и Париже, мы очень распределены, и все удаленные сотрудники имеют возможность посетить наши офисы. При необходимости мы также оборудуем ваше рабочее место, чтобы обеспечить ваш успех.

Мы хотим, чтобы наши коллеги были акционерами. Все сотрудники получают долю в компании в рамках своего компенсационного пакета. Если мы добьемся успеха и станем ведущей платформой в области машинного обучения и искусственного интеллекта, каждый получит выгоду.

Мы поддерживаем сообщество. Мы считаем, что крупные научные достижения являются результатом сотрудничества в данной области. Присоединяйтесь к сообществу, поддерживающему сообщество ML/AI.