Research Scientist - Interactive Avatars

Название: Научный сотрудник — Интерактивные аватары Компания: Synthesia Местоположение: Европа / Лондон / Мюнхен / Цюрих / Удаленно

Synthesia — ведущая в мире платформа для создания видео с использованием ИИ для бизнеса, которой пользуются более 90% компаний из списка Fortune 100. Основанная в 2017 году, компания имеет штаб-квартиру в Лондоне, а также офисы и команды по всей Европе и США.

Поскольку ИИ продолжает формировать то, как мы живем и работаем, Synthesia разрабатывает продукты для улучшения визуальной коммуникации и развития корпоративных навыков, помогая людям работать лучше и оставаться в центре успешных организаций.

После нашего недавнего раунда финансирования серии E, в ходе которого мы привлекли 200 миллионов долларов, наша оценка составила 4 миллиарда долларов. Общий объем финансирования превышает 530 миллионов долларов от ведущих инвесторов, включая Accel, NVentures (венчурное подразделение Nvidia), Kleiner Perkins, GV и Evantic Capital, а также основателей и операторов Stripe, Datadog, Miro и Webflow.

О РОЛИ

В качестве научного сотрудника вы присоединитесь к команде из более чем 40 исследователей и инженеров в нашем отделе НИОКР, работающих на переднем крае генеративного ИИ с акцентом на диффузионные модели для интерактивного видео с аватарами.

Это уникальная возможность для экспертов в области машинного обучения и диффузионных моделей сформировать будущее видеоагентов на базе ИИ, которые слушают, реагируют и отвечают, как люди. В составе нашей команды Interactive Avatars вы будете создавать модели, которые ведут естественные диалоги в реальном времени: понимают, что говорит пользователь и как он это говорит, а затем отвечают соответствующими очередями, обратной связью, взглядом, а также лицевыми и телесными реакциями. Вы присоединитесь к команде, которая быстро развивается, часто итерирует и превращает прорывные исследования в продукт, который выходит на рынок.

ЧТО ВЫ БУДЕТЕ ДЕЛАТЬ

• Вносить вклад в направление исследований по моделированию диалоговых взаимодействий и решать четко определенные исследовательские задачи от начала до конца.
• Продвигать передовые достижения в области перцептивного слоя интерактивных агентов, включая понимание аудио- и видеоданных пользователя и генерацию контекстно-соответствующих реакций.
• Пост-обучать мультимодальные модели для генерации богатых, естественных диалоговых взаимодействий на основе входных аудио- и видеоданных пользователя.
• Адаптировать диффузионные модели к новым управляющим сигналам, таким как состояние диалога, очередность реплик, и сигналы слушателя.
• Создавать надежные системы оценки и наборы тестов для непрерывного отслеживания качества взаимодействия.
• Сотрудничать с нашей командой данных для определения потребностей в данных и формирования высококачественных наборов данных.
• Проводить строгие эксперименты и делиться результатами, которые информируют технические решения команды.

ЧТО МЫ ИЩЕМ

• Глубокие знания в области ML и практический опыт работы с диффузионными моделями, желательно для генерации видео или аватаров.
• Публикации на ведущих площадках (например, CVPR, ICCV, ECCV, NeurIPS, ICML, ICLR, SIGGRAPH) в таких областях, как мировые модели, диалоговые взаимодействия или диффузия видео, или эквивалентное продемонстрированное влияние.
• Опыт воплощения исследовательских идей в рабочие реализации и мотивация довести их до стадии производства.
• Владение PyTorch и современными ML-инструментами для крупномасштабного обучения.
• Четкая коммуникация гипотез, экспериментов и результатов.

ПРИЯТНО ИМЕТЬ

• Опыт работы с генерацией в реальном времени или потоковой передачей, включая авторегрессивную диффузию видео.
• Дистилляцию или другие методы для низколатентного вывода.
• Моделирование движений лица, жестов или всего тела на основе аудио.
• Моделирование диалогов, такое как очередность реплик, обратная связь или генерация ответов слушателя.
• Опыт наставничества студентов или младших исследователей.

ПОЧЕМУ СТОИТ ПРИСОЕДИНИТЬСЯ К НАМ?

• Создавайте модели фундамента видео в производственном масштабе в быстрорастущей компании, занимающейся генеративным ИИ.
• Работайте над созданием видео, ориентированного на человека, с реальным влиянием.
• Решайте сложные задачи масштабирования, стабильности и управляемости.
• Влияйте на направление развития синтетических человеческих технологий следующего поколения.
• Присоединяйтесь к высокотехничной среде с высокой степенью ответственности, где ваша работа выходит на рынок.

Если вы хотите работать над передовыми генеративными моделями видео и видеть, как ваши исследования используются в реальных продуктах, мы будем рады с вами поговорить.

Наша культура

В Synthesia мы увлечены созданием, а не разговорами, планированием или политикой. Мы стремимся нанимать самых умных, добрых и неумолимых людей и позволяем им делать свою лучшую работу без отвлечений. Наши рабочие принципы служат нашей хартией о том, как мы принимаем решения, даем обратную связь и структурируем нашу работу, чтобы дать каждому возможность двигаться как можно быстрее. Вы можете узнать больше об этих принципах здесь.

СОБСТВЕННАЯ ИИ-ТЕХНОЛОГИЯ

С 2017 года мы продвигаем достижения в области генеративного ИИ. Наша ИИ-технология разрабатывается собственными силами командой мирового класса исследователей и инженеров в области ИИ. Узнайте больше о нашей лаборатории ИИ-исследований и команде, стоящей за ней.

БЕЗОПАСНОСТЬ, ЭТИКА И ЗАЩИТА ИИ

Безопасность, этика и защита ИИ являются основополагающими для нашей миссии. Хотя полный охват влияния искусственного интеллекта на наше общество еще не определен, наша позиция ясна: Люди прежде всего. Всегда. Узнайте больше о наших обязательствах в области этики, безопасности и защиты ИИ.