Engineering Manager, Scheduler and Fleet Efficiency

Вознаграждение (годовой оклад): 405 000 – 485 000 долларов США в год

О Anthropic Миссия Anthropic — создавать надежные, интерпретируемые и управляемые системы ИИ. Мы хотим, чтобы ИИ был безопасным и полезным для наших пользователей и общества в целом. Наша команда — быстрорастущая группа преданных своему делу исследователей, инженеров, экспертов по политике и бизнес-лидеров, работающих вместе над созданием полезных систем ИИ. О роли Вычислительный кластер Anthropic является одним из крупнейших и наиболее разнообразных в мире, и все, что мы делаем, от обучения передовых моделей до обслуживания Claude, зависит от того, чтобы правильная работа выполнялась на правильном оборудовании в нужное время. Наша команда планировщика решает эту проблему. Мы создаем слой планирования для кластера Kubernetes Anthropic, инструменты, которые исследователи и инженеры используют для запуска и управления своими заданиями, а также системы, которые обеспечивают максимально эффективное использование кластера. Когда исследователь запускает выполнение, планировщик решает, где оно будет размещено и как быстро; когда спрос превышает предложение, он решает, кто будет ждать. Эта команда предоставляет готовую инфраструктуру, которая позволяет всем в Anthropic получать вычислительные ресурсы, когда они им нужны, не становясь экспертом в нижележащей инфраструктуре. Мы ищем инженера-менеджера, который возглавит эту команду. Планировщик находится на критическом пути для почти всех вычислительных ресурсов Anthropic, и его задачи быстро расширяются: обеспечение бесперебойной работы планирования в растущем, гетерогенном кластере; повышение утилизации при сохранении быстрой инициализации заданий; обеспечение предсказуемости и объяснимости решений системы для людей, которые от нее зависят; и создание такого пользовательского опыта при запуске заданий, о котором исследователям редко приходится думать. Вы будете руководить командой, создающей инфраструктуру, от которой зависит вся исследовательская и продуктовая организация, и тесно сотрудничать с командами по планированию мощностей, исследованиям, выводу и продуктам для эффективного использования кластера. Ключевые обязанности Руководить и развивать команду инженеров, создающих платформу планирования Anthropic, инструменты запуска заданий и системы эффективности кластера, отвечая за планирование, выполнение и доставку в соответствии с ключевыми этапами. Определять техническое направление для планирования, размещения, постановки в очередь и квотирования в вычислительном кластере Anthropic. Сотрудничать с командами по планированию мощностей, исследованиям, выводу и продуктам для интеграции рабочих нагрузок в готовую инфраструктуру и принятия эффективных решений по планированию. Разрабатывать дорожную карту для возможностей планировщика, утилизации кластера и пользовательского опыта при запуске и управлении заданиями. Определять и отслеживать метрики, измеряющие эффективность кластера и качество планирования (утилизация, время ожидания в очереди, задержка запуска задания и т. д.) и добиваться их выполнения командой. Обеспечивать ясность для команды и заинтересованных сторон в неоднозначной, быстро меняющейся среде, где спрос на вычислительные ресурсы постоянно превышает предложение. Применять инклюзивный, справедливый подход к найму, коучингу и развитию карьеры, а также поддерживать высокопроизводительную, здоровую команду. Представлять команду в инженерной организации и участвовать в общеинженерных инициативах в качестве члена группы инженерного менеджмента Anthropic. Минимальные требования Опыт управления и развития команды инженеров-программистов. Практический опыт работы в качестве инженера-программиста до перехода на руководящую должность. Опыт создания или эксплуатации крупномасштабных распределенных или инфраструктурных систем в производственной среде. Рабочее знание Kubernetes и концепций планирования кластеров, таких как запросы и ограничения ресурсов, привязка, приоритет и вытеснение, а также пользовательские планировщики или контроллеры. Отличные навыки письменного и устного общения, включая способность обеспечивать ясность между командами. Предпочтительные квалификации 5+ лет опыта работы в инженерном менеджменте, включая руководство командами по инфраструктуре, платформе или вычислениям. Опыт управления кластерным планировщиком, системой оркестрации заданий или менеджером ресурсов в большом масштабе. Опыт планирования ML-нагрузок на ускорителях и компромиссы между утилизацией, справедливостью и задержкой. Опыт создания инструментов для разработчиков, на которые другие инженеры полагаются ежедневно. Опыт работы в области наблюдаемости или реагирования на инциденты для систем управляющего контура и опыт улучшения производственной надежности. Опыт построения культуры принадлежности и инженерного совершенства. Низкое эго, высокая эмпатия и привычка подавать пример. Годовой диапазон компенсации для этой роли указан ниже. Для ролей в продажах указанный диапазон является диапазоном целевого заработка («OTE»), что означает, что диапазон включает в себя как целевые комиссионные/бонусы за продажи, так и годовой базовый оклад для данной роли. Годовой оклад: $405 000 — $485 000 USD Логистика Минимальное образование: Степень бакалавра или эквивалентная комбинация образования, обучения и/или опыта. Требуемая область обучения: Область, относящаяся к роли, подтвержденная курсовой работой, обучением или профессиональным опытом. Минимальное количество лет опыта: Количество лет требуемого опыта будет коррелировать с требованиями к уровню внутренней должности для данной позиции. Гибридная политика на основе местоположения: В настоящее время мы ожидаем, что все сотрудники будут находиться в одном из наших офисов не менее 25% времени. Однако некоторые роли могут требовать больше времени в наших офисах. Визовая поддержка: Мы предоставляем визовую поддержку! Однако мы не можем успешно оказывать визовую поддержку для каждой роли и каждого кандидата. Но если мы сделаем вам предложение, мы приложим все разумные усилия для получения визы, и мы привлекаем иммиграционного адвоката для помощи в этом. Мы призываем вас подавать заявку, даже если вы не соответствуете всем указанным квалификациям. Не все сильные кандидаты будут соответствовать всем перечисленным квалификациям. Исследования показывают, что люди, идентифицирующие себя как представители недостаточно представленных групп, чаще испытывают синдром самозванца и сомневаются в своей кандидатуре, поэтому мы настоятельно призываем вас не исключать себя преждевременно и подавать заявку, если вы заинтересованы в этой работе. Мы считаем, что системы ИИ, подобные тем, которые мы строим, имеют огромные социальные и этические последствия. Мы считаем, что это делает представительство еще более важным, и мы стремимся включать в нашу команду разнообразные точки зрения. Ваша безопасность имеет для нас значение. Чтобы защитить себя от потенциальных мошенничеств, помните, что рекрутеры Anthropic связываются с вами только с адресов электронной почты @anthropic.com. В некоторых случаях мы можем сотрудничать с проверенными рекрутинговыми агентствами, которые заявят, что работают от имени Anthropic. Будьте осторожны с письмами с других доменов. Легитимные рекрутеры Anthropic никогда не будут запрашивать деньги, сборы или банковскую информацию до вашего первого дня. Если вы когда-либо сомневаетесь в сообщении, не нажимайте на ссылки — перейдите непосредственно на anthropic.com/careers , чтобы узнать о подтвержденных вакансиях. Чем мы отличаемся Мы считаем, что самые влиятельные исследования в области ИИ будут масштабными научными проектами. В Anthropic мы работаем как единая слаженная команда над несколькими крупномасштабными исследовательскими проектами. И мы ценим влияние — продвижение наших долгосрочных целей по созданию управляемого, надежного ИИ — а не работу над мелкими и более специфическими задачами. Мы рассматриваем исследования в области ИИ как эмпирическую науку, которая имеет столько же общего с физикой и биологией, сколько с традиционными областями информатики. Мы очень ориентированная на сотрудничество группа, и мы проводим частые исследовательские дискуссии, чтобы убедиться, что мы занимаемся наиболее влиятельной работой в любой данный момент. Как таковые, мы очень ценим коммуникативные навыки. Самый простой способ понять наши исследовательские направления — прочитать наши последние исследования. Эти исследования продолжают многие направления, над которыми наша команда работала до Anthropic, включая: GPT-3, Circuit-Based Interpretability, Multimodal Neurons, Scaling Laws, AI & Compute, Concrete Problems in AI Safety, и Learning from Human Preferences. Присоединяйтесь к нам! Anthropic — это корпорация, действующая в общественных интересах, со штаб-квартирой в Сан-Франциско. Мы предлагаем конкурентоспособную компенсацию и льготы, опциональное соответствие пожертвований акциями, щедрый отпуск и отпуск по уходу за ребенком, гибкий график работы и прекрасное офисное пространство для сотрудничества с коллегами. Руководство по использованию кандидатами ИИ: Узнайте о нашей политике использования ИИ в процессе подачи заявления.