Software Engineer, Compute Infrastructure

Вознаграждение: $230K - $405K в год

О команде:

Compute Infrastructure создает платформу, которая превращает огромные объемы вычислительных ресурсов в надежный движок для передовых ИИ. Мы проектируем, предоставляем, планируем, эксплуатируем и оптимизируем системы, которые объединяют ускорители, ЦП, сети, хранилища, центры обработки данных, оркестрационное ПО, агентскую инфраструктуру, инструменты для разработчиков и средства наблюдения в единый слаженный опыт для исследователей и продуктовых команд.

Наша работа охватывает весь стек: планирование мощностей и жизненный цикл кластера, автоматизация bare-metal, распределенные системы, Kubernetes и планирование, глубокая оптимизация систем, высокопроизводительные сети, хранилища, состояние парка оборудования, надежность, профилирование рабочих нагрузок, бенчмаркинг и опыт разработчика, который позволяет командам уверенно использовать огромные вычислительные системы. В таком масштабе небольшие улучшения в коммуникации, планировании, эффективности аппаратного обеспечения или рабочих процессах отладки могут привести к значительной скорости исследований. Мы нанимаем в подразделение Compute Infrastructure, а не в одну узкую команду, и используем эту вакансию для подбора сильных инженеров на задачи, где они смогут оказать наибольшее влияние.

О вакансии

Мы ищем инженеров, которые хотят создавать вычислительную платформу, лежащую в основе исследований и продуктов OpenAI. Возможно, вы не являетесь самым сильным специалистом в низкоуровневых системах, высокопроизводительных вычислениях, распределенной инфраструктуре, надежности, CaaS, агентской инфраструктуре, платформах для разработчиков, инструментах или пользовательском опыте, связанном с инфраструктурой. Важно, чтобы вы могли тщательно анализировать сложные системы, писать надежное программное обеспечение и повышать качество и скорость работы окружающих вас людей.

В зависимости от вашего опыта и интересов, вы можете работать в тесной связке с аппаратным обеспечением, с пользователями, над CaaS и агентской инфраструктурой, или над плоскостями управления и данных между ними. Вы можете помочь ввести в эксплуатацию новые суперкомпьютерные мощности, оптимизировать обучающие рабочие нагрузки по трассам профилирования и бенчмаркам, улучшить поведение NCCL и коллективной связи, анализировать работу GPU, NIC, топологии, прошивки, тепловые режимы и режимы сбоев, или разрабатывать абстракции, которые делают гетерогенные кластеры единой слаженной платформой.

Мы не ожидаем, что каждый кандидат работал на каждом уровне. Одни инженеры будут глубоко погружаться в производительность систем, поведение ядра или среды выполнения, крупномасштабные сетевые протоколы, RDMA, NCCL, поведение аппаратного обеспечения GPU, бенчмаркинг, планирование или надежность оборудования; другие сделают платформу более удобной для использования с помощью API, инструментов, рабочих процессов и опыта разработчика. Общая черта — сильное инженерное суждение и энтузиазм в отношении того, чтобы сделать огромные вычислительные системы быстрее, надежнее и проще в использовании.

Это общая вакансия для Compute Infrastructure. Мы рассмотрим кандидатов для команд по всему подразделению Compute Infrastructure и подберем вас в зависимости от ваших сильных сторон, задач, которые вас мотивируют, и там, где потребности в инфраструктуре наиболее высоки.

Где вы можете работать

• Compute Foundations: Создание низкоуровневых примитивов платформы, которые делают гетерогенное оборудование, поставщиков и центры обработки данных повторяемыми, автоматизируемыми и управляемыми в масштабе.

• Fleet / Orchestration: Превращение сырых мощностей в надежные, эффективные кластеры и системы планирования, которые исследователи и продуктовые команды могут использовать с минимальными затруднениями и отличным опытом.

• Core Network Engineering: Создание и эксплуатация высокопроизводительных сетевых фабрик, протоколов и средств наблюдения, необходимых для крупнейших обучающих и обслуживающих рабочих нагрузок.

• Hardware Health and Observability: Обнаружение, диагностика, устранение и предотвращение проблем с оборудованием и состоянием парка оборудования, чтобы usable compute оставалось высоким у поставщиков и поколений ускорителей.

• Storage: Создание масштабируемых, производительных, надежных абстракций хранилищ, которые предотвращают превращение перемещения данных и доступа к хранилищам в узкое место для исследований или продуктов.

• Agent Infrastructure: Создание изолированной инфраструктуры выполнения для агентских рабочих нагрузок в исследованиях и производстве, с сильной изоляцией, надежностью и масштабируемостью.

В этой роли вы будете:

• Создавать и глубоко оптимизировать надежное системное программное обеспечение для крупномасштабных вычислительных систем, на которых выполняются некоторые из самых требовательных в мире ИИ-нагрузок

• Проектировать и эксплуатировать инфраструктуру, охватывающую ускорители, ЦП, NIC, коммутаторы, сетевые протоколы, хранилища, центры обработки данных, оркестрацию кластера, планирование и состояние парка оборудования

• Профилировать, бенчмаркать и оптимизировать обучающие рабочие нагрузки по узким местам в вычислениях, памяти, хранилищах, сетях, NCCL и коллективной связи, а также в планировании кластера

• Создавать аппаратное автоматическое управление, которое ускоряет и делает менее подверженными ошибкам предоставление ресурсов, обновления прошивок и драйверов, реагирование на инциденты и повседневные операции

• Создавать CaaS, агентскую инфраструктуру, средства профилирования, наблюдения, бенчмаркинга и платформенные инструменты, которые помогают исследователям, инженерам продуктов и операторам запускать, отлаживать и оптимизировать рабочие нагрузки с меньшими затруднениями

• Превращать операционные выводы в лучшие системы, более сильные абстракции и более четкие границы ответственности между командами

• Сотрудничать с командами исследований, инженерии, безопасности, сетей, оборудования и центров обработки данных, чтобы сделать вычислительные мощности более мощными и простыми в использовании

Вам может подойти эта роль, если вы:

• Создавали или эксплуатировали распределенные системы, платформы инфраструктуры, среды высокопроизводительных вычислений, крупномасштабные сетевые системы, кластеры Kubernetes, инструменты для разработчиков или производственные системы с высокими требованиями к надежности

• Любите работать на разных уровнях стека и комфортно перемещаетесь между программным обеспечением, оборудованием, сетями, производительностью систем, надежностью и потребностями пользователей

• Заботитесь о том, чтобы сложная инфраструктура была понятной, наблюдаемой и удобной для людей, которые от нее зависят

• Способны диагностировать сложные проблемы под реальным операционным давлением, при этом продолжая инвестировать в долгосрочное качество инженерных решений

• Любите создавать рычаги воздействия для других, будь то через API, автоматизацию, инструменты отладки, примитивы CaaS и агентской инфраструктуры, улучшения рабочих процессов или лучшие платформенные абстракции

• Мотивированы масштабом, эффективностью, надежностью и дисциплинированным измерением с помощью бенчмарков, профилей и производственных данных

• Четко общаетесь, берете на себя ответственность и хорошо работаете с командами, чьи ограничения и цели отличаются от ваших

Квалификация

• Сильные навыки инженера-программиста и опыт создания, эксплуатации или улучшения производственных инфраструктурных систем

• Опыт в одной или нескольких соответствующих областях, таких как распределенные системы, операционные системы, сетевые протоколы, RDMA, NCCL или коллективная связь, хранилища, Kubernetes, планирование, наблюдение, инженерия надежности, высокопроизводительные вычисления, инфраструктура GPU, CaaS, агентская инфраструктура, аппаратная оптимизация производительности, бенчмаркинг, опыт разработчика или инструменты инфраструктуры

• Способность отлаживать сложное поведение систем на уровнях программного обеспечения, оборудования, сетей и рабочих нагрузок, а затем превращать находки в надежные улучшения

• Комфортное отношение к неопределенности, сильное чувство ответственности и склонность к практичным, долговечным решениям

• Интерес к работе над инфраструктурой, которая напрямую способствует передовым исследованиям ИИ и влиянию на продукты

О OpenAI

OpenAI — это компания, занимающаяся исследованиями и развертыванием ИИ, призванная обеспечить, чтобы общий искусственный интеллект приносил пользу всему человечеству. Мы расширяем границы возможностей ИИ-систем и стремимся безопасно развертывать их в мире через наши продукты. ИИ — это чрезвычайно мощный инструмент, который должен создаваться с учетом безопасности и потребностей человека в его основе, и для достижения нашей миссии мы должны охватывать и ценить множество различных точек зрения, голосов и опыта, которые составляют полный спектр человечества.

Мы являемся работодателем, предоставляющим равные возможности, и мы не дискриминируем по признаку расы, религии, цвета кожи, национального происхождения, пола, сексуальной ориентации, возраста, статуса ветерана, инвалидности, генетической информации или других применимых законодательно защищенных характеристик.

Дополнительную информацию см. в Заявлении о политике позитивных действий и равных возможностей трудоустройства OpenAI.

Проверка биографических данных кандидатов будет проводиться в соответствии с применимым законодательством, и квалифицированные кандидаты с судимостью или арестами будут рассматриваться для трудоустройства в соответствии с этими законами, включая Ордонанс о справедливых шансах Сан-Франциско, Ордонанс о справедливых шансах для работодателей округа Лос-Анджелес и Калифорнийский закон о справедливых шансах для кандидатов из США. Для работников округа Лос-Анджелес, не имеющих регистрации: мы разумно полагаем, что криминальное прошлое может иметь прямую, неблагоприятную и негативную связь с указанными должностными обязанностями, что потенциально может привести к отзыву условного предложения о трудоустройстве: защита компьютерного оборудования, доверенного вам, от кражи, утери или повреждения; возврат всего компьютерного оборудования, находящегося в вашем распоряжении (включая содержащиеся в нем данные), по окончании срока трудоустройства или завершении задания; и сохранение конфиденциальности проприетарной, конфиденциальной и непубличной информации. Кроме того, должностные обязанности требуют доступа к безопасным и защищенным информационным технологическим системам и связанным с этим обязательствам по безопасности данных.

Чтобы уведомить OpenAI о том, что, по вашему мнению, это объявление о вакансии не соответствует требованиям, отправьте отчет через эту форму. Ответы на запросы, не связанные с соответствием объявления о вакансии требованиям, предоставляться не будут.

Мы стремимся предоставлять разумные приспособления для кандидатов с ограниченными возможностями, и запросы можно сделать по этой ссылке.

Политика конфиденциальности OpenAI Global Applicant Policy.

В OpenAI мы верим, что искусственный интеллект способен помочь людям решать огромные глобальные проблемы, и мы хотим, чтобы преимущества ИИ были широко распространены. Присоединяйтесь к нам в формировании будущего технологий.