Название: Научный сотрудник, генерация видео в реальном времени Компания: Cantina Labs Местоположение: Европа

О CANTINA

Cantina Labs — это социальная AI-компания, разрабатывающая набор передовых моделей реального времени, которые расширяют границы выразительности, индивидуальности и реализма. Мы оживляем персонажей, трансформируя то, как люди рассказывают истории, общаются и творят. Мы создаем и поддерживаем экосистемы. Cantina, наша флагманская социальная AI-платформа, — это только начало.

Если вас волнует потенциал ИИ в формировании человеческого творчества и социальных взаимодействий, присоединяйтесь к нам в создании будущего!

О РОЛИ

Мы работаем над генерацией видео в реальном времени для интерактивных персонажей, охватывая реалистичных людей, стилизованных персонажей и нечеловеческих личностей. Мы хотим, чтобы эти персонажи ощущались присутствующими: говорили, реагировали и выражали себя через лицо, жесты и язык тела.

Это объединяет набор тесно связанных исследовательских задач. Персонажу требуется последовательный внешний вид, выразительное и связное движение, а также естественная связь между речью и движением. Модель также должна быстро реагировать и надежно продолжать генерацию по мере разворачивания взаимодействия. Качество, управляемость и эффективность — все имеет значение.

Вы будете работать над потоковой генерацией, тонкой настройкой, дистилляцией, оптимизацией инференса и данными. Некоторые задачи потребуют нового подхода к обучению; другие будут сведены к лучшим примерам, более полезной оценке или пониманию узкого места в реализации. Часть работы заключается в определении того, какое вмешательство стоит предпринять.

У вас будет значительная свобода предлагать направления, исследовать незнакомые идеи и формировать то, над чем мы будем работать дальше. Мы ищем того, кто ценит эту свободу и может превратить ее в последовательную череду полезных экспериментов.

НАД ЧЕМ ВЫ БУДЕТЕ РАБОТАТЬ

• Генерация в реальном времени и потоковая генерация. Разработка моделей, поддерживающих отзывчивое взаимодействие при сохранении визуального качества и согласованности во времени. Исследование задержки, непрерывности и того, как поведение модели меняется во время более длительной генерации.

• Выразительность и движения персонажа. Исследование того, как внешний вид, мимика, жесты и движения тела объединяются в целостного персонажа. Улучшение связи между речью и движением для различных личностей и визуальных стилей.

• Тонкая настройка и постобучение. Адаптация видеомоделей к новым данным, поведению и возможностям. Исследование целей обучения и методов кондиционирования, а также отслеживание многообещающих идей до реализации и оценки.

• Дистилляция и оптимизация инференса. Ускорение и повышение эффективности генерации. Работа над подходами на уровне модели и улучшениями времени выполнения, измерение их влияния на качество, задержку и потребление памяти.

• Разработка данных. Уделение значительного времени фактическим обучающим примерам. Выявление отсутствующего охвата и повторяющихся режимов сбоев, улучшение отбора и выборки, а также разработка данных, которые помогают моделям изучить желаемое поведение.

• Оценка. Создание сравнений, которые делают прогресс видимым, а сбои — понятными. Комбинирование количественных измерений с тщательным анализом сгенерированного видео и опыта взаимодействия с моделью.

• Исследования и сотрудничество. Чтение соответствующей литературы, воспроизведение и адаптация полезных идей, а также обмен ранними экспериментами, демонстрациями и результатами. Помощь команде в принятии решений о том, что заслуживает большего времени и вычислительных ресурсов.

ЧТО ВЫ ПРИВнесете

• Опыт обучения или тонкой настройки видео или связанных генеративных моделей.

• Способность быстро изучать незнакомые методы и превращать идеи в полезные эксперименты.

• Хорошее экспериментальное суждение, ответственность и четкая коммуникация.

У вас будет свобода исследовать новые подходы. Мы ожидаем быстрой итерации и раннего обмена результатами.

ВОЗНАГРАЖДЕНИЕ

При определении вознаграждения будет учитываться ряд факторов, включая навыки, опыт, объем работы, местоположение и рыночные данные по конкурентным вознаграждениям.

Льготы для должностей в США:

• Конкурентоспособная заработная плата и щедрые опционы компании

• Медицинское, стоматологическое и офтальмологическое страхование — 99,99% страховых премий покрывается Cantina

• 42 дня оплачиваемого отпуска, включая:

  • 15 дней PTO
  • 10 дней больничного
  • 15 праздничных дней компании
  • 2 плавающих выходных дня

• Щедрый отпуск по уходу за ребенком и поддержка фертильности

• План пенсионных накоплений 401(k)

• Счет расходов на образ жизни — 500 долларов США в месяц, которые можно использовать по своему усмотрению

• Бесплатные обеды и закуски для сотрудников в офисе

• Членство в One Medical и многое другое!