Member of Technical Staff, Data Analysis and Evaluation

Название: Специалист технического отдела, анализ и оценка данных Компания: Cohere Местоположение: Лондон / Сан-Франциско / Нью-Йорк / Париж / Торонто / Монреаль / Удаленно

Кто мы?

Cohere — ведущая компания в области корпоративного ИИ с упором на безопасность. Мы создаем передовые фундаментальные ИИ-модели и комплексные продукты, разработанные для решения реальных бизнес-задач.

Мы обучаем и развертываем передовые модели для предприятий, создающих ИИ-системы. Мы верим, что наша работа играет ключевую роль в широком внедрении ИИ, и ищем людей, которые хотят стать частью этого.

Мы одержимы тем, что создаем. Каждый из нас отвечает за повышение возможностей наших моделей и ценности, которую они приносят нашим клиентам. Cohere — это команда исследователей, инженеров, дизайнеров и других специалистов, увлеченных своим делом.

Cohere — глобальная технологическая компания со штаб-квартирой в Торонто и ключевыми офисами в Лондоне, Нью-Йорке, Сан-Франциско, Монреале, Париже, Берлине и Сеуле. Присоединяйтесь к нам!

Обзор роли:

В качестве специалиста технического отдела по анализу и оценке данных вы будете играть ключевую роль в обеспечении качества, надежности и производительности наших больших языковых моделей (LLMs). Вашим основным направлением будет разработка и проведение задач по сбору данных, оценка качества наборов данных, а также анализ надежности и обобщающей способности наших моделей. Вы будете тесно сотрудничать с междисциплинарными командами, включая исследователей, инженеров и аннотаторов данных, для принятия решений на основе данных и повышения общей эффективности наших ИИ-систем.

Эта роль сочетает в себе экспертизу в статистике, проектировании экспериментов (включая работу с людьми-аннотаторами) и машинном обучении, чтобы гарантировать, что наши модели обучаются на высококачественных данных и надежно работают в различных сценариях. Вы внесете вклад в миссию Cohere по развитию ИИ, обеспечивая надежность, масштабируемость и эффективность наших систем.

Обратите внимание: у нас есть офисы в Лондоне, Париже, Торонто, Сан-Франциско и Нью-Йорке, но мы также приветствуем удаленную работу! Для этой роли нет никаких ограничений по местоположению.

Основные обязанности:

• Разработка и контроль задач по сбору данных, включая поддержку людей-аннотаторов и обеспечение качества данных.
• Разработка и применение статистических методов для оценки качества и надежности наборов данных.
• Анализ и оценка обобщающей способности и надежности ML-систем в различных сценариях использования.
• Сотрудничество с командами для улучшения качества наборов данных и производительности моделей.
• Обучение и дообучение больших языковых моделей (LLMs) на распределенных вычислительных инфраструктурах.
• Проведение экспериментов для оценки производительности моделей и выявления областей для улучшения.

Квалификация:

• Чрезвычайно сильные навыки в области разработки программного обеспечения.
• Глубокая экспертиза в проектировании и проведении задач по сбору данных, включая работу с людьми-аннотаторами.
• Сильные статистические навыки и опыт оценки научных экспериментов, связанных со сбором данных и производительностью моделей.
• Опыт анализа наборов данных с точки зрения их качества, предвзятости и пригодности для обучения ML-моделей.
• Практический опыт обучения больших языковых моделей (LLMs) на распределенных вычислительных инфраструктурах.
• Знакомство с оценкой и улучшением обобщающей способности и надежности ML-систем.
• Свободное владение языками программирования, такими как Python, и ML-фреймворками (например, PyTorch, TensorFlow, JAX).
• Отличные коммуникативные навыки для эффективного сотрудничества с междисциплинарными командами и представления результатов.
• Одна или несколько публикаций на ведущих площадках (таких как NeurIPS, ICML, ICLR, AIStats, MLSys, JMLR, AAAI, Nature, COLING, ACL, EMNLP).

• Это не исчерпывающий и не обязательный набор атрибутов. Даже если ни один из них не применим к вам, но вы считаете, что сможете внести свой вклад в Cohere, пожалуйста, свяжитесь с нами. Мы ценим разнообразный опыт и точки зрения в Cohere.

Рабочее местоположение: Эта должность может быть удаленной или базироваться в одном из наших офисов, перечисленных в описании вакансии — минимальных требований к присутствию в офисе нет. Мы в первую очередь заинтересованы в найме выдающихся специалистов независимо от их местоположения, однако, пожалуйста, проверьте местоположение, указанное в объявлении, для получения информации о требуемом часовом поясе или графике работы.

ПОЛНОСТИЧНЫЕ СОТРУДНИКИ COHERE ПОЛУЧАЮТ СЛЕДУЮЩИЕ ПРЕИМУЩЕСТВА:

• Еженедельная стипендия на обед в размере 75 долларов США/75 фунтов стерлингов или эквивалент в местной валюте.
• Полное медицинское и стоматологическое страхование, включая отдельный бюджет на психическое здоровье.
• Совпадение взносов RRSP, 401K, пенсионный план.
• 100% оплачиваемый отпуск по уходу за ребенком до 6 месяцев для любого из родителей.
• Ежегодные льготы на обогащение:
  • Культура и искусство, фитнес/оздоровление, качественное времяпрепровождение и кредит на улучшение рабочего пространства.
  • Стипендия на обучение (конференции, курсы, коучинг).
• 6 недель оплачиваемого отпуска (30 рабочих дней!)
• Бюджет на поездки в другие офисы (для удаленных сотрудников) плюс ежегодные корпоративные мероприятия.

КАК И ГДЕ МЫ РАБОТАЕМ:

• Cohere приветствует удаленную работу, но у нас также есть офисы в Торонто, Лондоне, Нью-Йорке, Сан-Франциско, Монреале, Париже, Берлине и Сеуле, и скоро откроются новые.
• Для тех, кто работает в офисе: ежедневная программа обедов, много закусок и регулярные общественные мероприятия.
• Для тех, кто находится не рядом с офисом: льготы по коворкингу, чтобы вы могли работать вместе с другими людьми в вашем городе.
• Каждый сотрудник получает 500 долларов США на обустройство домашнего рабочего места.

Если что-то из вышеперечисленного не полностью соответствует вашему опыту, мы все равно призываем вас подать заявку.

Мы стремимся создать инклюзивную рабочую среду для всех; мы приветствуем соискателей из всех слоев общества и стремимся предоставлять равные возможности. Если вам требуются какие-либо приспособления в процессе найма, пожалуйста, подайте форму запроса на приспособления, и мы вместе поработаем над удовлетворением ваших потребностей.

Мы можем использовать инструменты с поддержкой ИИ для отбора и оценки кандидатов на соответствие критериям этой должности. Это помогает нашим рекрутерам выявлять потенциально квалифицированных кандидатов, но не ограничивает список кандидатов, которые могут быть рассмотрены.

Остерегайтесь мошенничества: Cohere никогда не будет запрашивать оплату или услуги третьих сторон (например, написание резюме) в рамках нашего процесса найма. Все легитимные вакансии перечислены только на странице карьеры Cohere и в LinkedIn, а вся переписка от сотрудников Cohere будет поступать с адреса электронной почты @cohere.com или @cw.cohere. Если вакансии просматриваются на других сайтах, пожалуйста, проверьте их через нашу официальную страницу карьеры.