Инженер-программист Kubernetes Platform

Компания: Anthropic
Местоположение: Лондон, Великобритания

О компании Anthropic

Миссия Anthropic — создавать надежные, интерпретируемые и управляемые системы ИИ. Мы стремимся к тому, чтобы ИИ был безопасным и полезным для наших пользователей и общества в целом. Наша команда — это быстрорастущая группа преданных своему делу исследователей, инженеров, экспертов по политике и бизнес-лидеров, которые работают вместе над созданием полезных систем ИИ.

О вакансии

Мы управляем одним из крупнейших в отрасли парков вычислительной техники для ИИ, охватывающим несколько облачных провайдеров и центров обработки данных, для обучения, исследований и обслуживания передовых моделей ИИ. Эти парки работают на Kubernetes, а команда Kubernetes Platform отвечает за управляющий контур, который обеспечивает их работу.

Мы работаем в таком масштабе, что стандартные решения перестают работать. Мы отвечаем за планировщик и расширяем его для размещения топологически-зависимых ML-нагрузок одновременно на тысячах ускорителей. Мы масштабируем сам управляющий контур — apiserver, etcd, контроллеры — чтобы он оставался отзывчивым по мере роста количества объектов и узлов на порядки. И мы создаем основные сервисы кластера, от которых зависит каждая рабочая нагрузка, такие как обнаружение сервисов, чтобы они выдерживали такое же давление.

Мы гарантируем, что управляющий контур будет быстрым, корректным и всегда доступным. Ваша работа будет напрямую определять, сможет ли Anthropic надежно и безопасно обучать передовые модели по мере роста нашей вычислительной мощности.

Ключевые обязанности

• Владеть, эксплуатировать и расширять планировщик Kubernetes для парков ускорителей Anthropic, включая пользовательские плагины планирования и политики для пакетного планирования (gang scheduling), топологической осведомленности и вытеснения.
• Масштабировать управляющий контур Kubernetes (apiserver, etcd, controller-manager) для поддержки кластеров, значительно превышающих типичные пределы, и находить следующую узкую точку, прежде чем она найдет нас.
• Проектировать, создавать и эксплуатировать основные сервисы кластера, такие как обнаружение сервисов, от которых зависит каждая рабочая нагрузка в парке.
• Создавать и поддерживать пользовательские контроллеры, операторы и CRD.
• Сотрудничать с отделами исследований, обучения и инференса для понимания характера рабочих нагрузок и преобразования их требований в возможности платформы.
• Взаимодействовать с облачными провайдерами по требуемым функциям и эскалациям.
• Участвовать в дежурствах, руководить реагированием на инциденты и разрабатывать процессы (разборы пост-мортемов, runbooks, SLO), которые помогают команде избегать повторения сбоев.

Минимальные требования

• Значительный опыт разработки программного обеспечения в области создания и эксплуатации распределенных систем в производственной среде.
• Владение как минимум одним системно-ориентированным языком программирования (например, Go, Python, Rust или C++).
• Глубокий практический опыт работы с Kubernetes (значительно больше, чем "пользователь") в области планировщика, контроллеров, apiserver или эксплуатации больших многопользовательских кластеров.
• Подтвержденная способность отлаживать сложные проблемы во всем стеке, от поведения API до корневых причин на уровне узла и сети.
• Опыт проектирования систем с учетом надежности, корректности и четкой семантики сбоев, на которые полагаются другие инженеры.
• Сильные навыки письменного и устного общения; комфорт в достижении консенсуса с внутренними заинтересованными сторонами.

Предпочтительные квалификации

• Опыт работы с внутренними компонентами Kubernetes или вклад в них: kube-scheduler / scheduling framework, apiserver, etcd, client-go, controller-runtime или аналогичные.
• Опыт создания или эксплуатации планировщиков кластеров или пакетных систем (например, Kueue, Volcano, Slurm или внутренних аналогов).
• Опыт масштабирования управляющих контуров или систем координации (etcd, ZooKeeper, Consul или крупных развертываний DNS/service-mesh).
• Знакомство с инфраструктурой ML: GPU, TPU или Trainium; пакетное планирование; топологически-осведомленное размещение; коллективные сетевые взаимодействия, такие как NCCL.
• Опыт работы с GCP и/или AWS, включая внутренние компоненты GKE/EKS и Infrastructure as Code.
• Опыт работы с низкоуровневыми системами, такими как настройка ядра Linux, cgroups или eBPF.
• 12+ лет соответствующего отраслевого опыта, включая опыт руководства крупными, неоднозначными инфраструктурными проектами.

Годовой диапазон компенсации для этой должности указан ниже.

Для ролей, связанных с продажами, указанный диапазон относится к "Целевому доходу" (OTE) для данной должности, что означает, что диапазон включает как целевые комиссионные/бонусы за продажи, так и годовой базовый оклад для данной должности.

Годовой оклад:
£325,000 — £485,000 GBP

Логистика

• Минимальное образование: степень бакалавра или эквивалентная комбинация образования, обучения и/или опыта.
• Требуемая область обучения: область, относящаяся к вакансии, подтвержденная курсовой работой, обучением или профессиональным опытом.
• Минимальный опыт работы: Требуемый опыт работы будет коррелировать с требованиями к внутреннему уровню должности.
• Гибридная политика на основе местоположения: В настоящее время мы ожидаем, что все сотрудники будут находиться в одном из наших офисов как минимум 25% времени. Однако для некоторых должностей может потребоваться больше времени в наших офисах.
• Спонсорство виз: Мы спонсируем визы! Однако мы не можем успешно спонсировать визы для каждой должности и каждого кандидата. Но если мы сделаем вам предложение, мы приложим все разумные усилия, чтобы получить для вас визу, и для этого мы привлекаем иммиграционного юриста.

Мы призываем вас подавать заявку, даже если вы считаете, что не соответствуете всем указанным требованиям. Не все сильные кандидаты соответствуют всем перечисленным требованиям. Исследования показывают, что люди, относящиеся к недопредставленным группам, более склонны испытывать синдром самозванца и сомневаться в силе своей кандидатуры, поэтому мы настоятельно призываем вас не исключать себя преждевременно и подать заявку, если вас интересует эта работа. Мы считаем, что системы ИИ, подобные тем, которые мы создаем, имеют огромные социальные и этические последствия. Мы считаем, что это делает представительство еще более важным, и мы стремимся включать в нашу команду разнообразные точки зрения.

Ваша безопасность имеет для нас значение. Чтобы защитить себя от потенциального мошенничества, помните, что рекрутеры Anthropic связываются с вами только с адресов электронной почты @anthropic.com. В некоторых случаях мы можем сотрудничать с проверенными рекрутинговыми агентствами, которые представятся как работающие от имени Anthropic. Будьте осторожны с письмами с других доменов. Легитимные рекрутеры Anthropic никогда не будут запрашивать деньги, сборы или банковскую информацию до вашего первого дня. Если вы когда-либо будете сомневаться в каком-либо сообщении, не нажимайте на ссылки — переходите напрямую на сайт с подтвержденными вакансиями.

Чем мы отличаемся

Мы считаем, что наиболее влиятельные исследования в области ИИ будут относиться к "большой науке". В Anthropic мы работаем как единая сплоченная команда над несколькими крупномасштабными исследовательскими проектами. И мы ценим влияние — продвижение наших долгосрочных целей по созданию управляемого, надежного ИИ — а не работу над мелкими и более конкретными задачами. Мы рассматриваем исследования в области ИИ как эмпирическую науку, которая имеет столько же общего с физикой и биологией, сколько с традиционными направлениями в информатике. Мы чрезвычайно ориентированная на сотрудничество группа, и мы проводим частые исследовательские обсуждения, чтобы гарантировать, что мы занимаемся наиболее влиятельной работой в любой данный момент времени. Как таковые, мы высоко ценим коммуникативные навыки.

Самый простой способ понять наши исследовательские направления — прочитать наши последние исследования. Эти исследования продолжают многие из направлений, над которыми наша команда работала до Anthropic, включая: GPT-3, Circuit-Based Interpretability, Multimodal Neurons, Scaling Laws, AI & Compute, Concrete Problems in AI Safety и Learning from Human Preferences.

Присоединяйтесь к нам!

Anthropic — это корпорация, действующая в общественных интересах, со штаб-квартирой в Сан-Франциско. Мы предлагаем конкурентоспособную компенсацию и льготы, добровольное сопоставление пожертвований акциями, щедрый отпуск и отпуск по уходу за ребенком, гибкий рабочий график и прекрасное офисное пространство для сотрудничества с коллегами. Руководство по использованию ИИ кандидатами: Ознакомьтесь с нашей политикой использования ИИ в процессе подачи заявок.