Software Engineer, Workload Enablement

Заголовок: Инженер-программист, обеспечение нагрузок Компания: OpenAI Местоположение: Сан-Франциско / Сиэтл / Гибрид

Компенсация: $293 000 - $385 000 в год

О команде

Команда Scaling отвечает за архитектурную и инженерную основу инфраструктуры OpenAI. Мы проектируем и поставляем передовые системы, которые поддерживают развертывание и эксплуатацию передовых моделей ИИ. Наша работа охватывает системное программное обеспечение, сети, архитектуру платформы, мониторинг на уровне парка и оптимизацию производительности.

О роли

Мы нанимаем инженера-программиста для обеспечения производственных нагрузок и сквозного тестирования на новых платформах. Эта роль будет включать создание новых тестовых фреймворков и эталонных тестов производительности платформы, портирование существующих нагрузок инференса и обучения на новые, иногда ранние, системы/оборудование, анализ производительности и узких мест, а также характеристику сквозного поведения новых систем (вычислительные ресурсы, коммуникации, хранилища, плоскость управления и режимы сбоев).

Основные обязанности

• Портирование и проверка ключевых нагрузок инференса и обучения на новых платформах/SKU по мере их поступления; обеспечение корректности, производительности и стабильности до внутреннего уровня готовности.

• Создание набора эталонных тестов и стресс-тестов, которые отражают реальное сквозное поведение наших нагрузок, путем задействования всех аспектов системы, включая ЦП, ГП, подсистему памяти, фронтенд, сетевые подключения типа scale-up и scale-out (включая трафик WAN, NVlink и коллективные операции RDMA), хранилища, тепловые режимы и любые другие соответствующие части.

• Глубокий анализ производительности распределенного обучения/инференса:

  • Производительность коллективных операций и их настройка (в NCCL/RCCL и внутренних библиотеках)
  • Перекрытие вычислений/коммуникаций, узкие места на уровне ядра, пропускная способность памяти и эффекты планирования

• Создание повторяемых тестовых фреймворков, которые работают в средах CI/лаборатории и выдают действенные результаты (пройдено/не пройдено, показатель производительности, обнаружение регрессий).

• Партнерство с инженерами по системному обеспечению и вводу в эксплуатацию парка для обеспечения того, чтобы платформа была не только стабильной и производительной, но и операционно пригодной и масштабируемой (контейнеризация, интеграция с K8s, хуки телеметрии, циклы диагностики неисправностей).

• Кросс-функциональная работа с поставщиками и внутренними заинтересованными сторонами путем предоставления четких отчетов об ошибках, минимальных воспроизводимых примеров и приоритетных списков проблем.

Квалификация

• BS в области CS/EE (или эквивалентный практический опыт).

• 5+ лет в одной или нескольких из следующих областей: ML-системы, инженерия производительности, распределенные системы или HPC.

• Значительный практический опыт работы с:

  • PyTorch и современными стеками обучения/инференса LLM
  • Концепциями крупномасштабного распределенного обучения (параллелизм данных/модели/конвейера, коллективные коммуникации)
  • Опыт работы с RDMA и отладкой/оптимизацией коммуникационных библиотек (NCCL или RCCL) и их взаимодействием с оборудованием/сетью

• Свободное владение Python и уверенное чтение/написание критически важного с точки зрения производительности кода (C++/CUDA/HIP является плюсом).

• Сильные навыки профилирования/отладки (например, Nsight, rocprof, perf, flamegraphs; способность анализировать трассировки/счетчики).

Предпочтительные навыки

• Опыт создания эталонных тестов, сформированных под нагрузку, и стресс/отказоустойчивых тестов, которые коррелируют с производственным поведением (а не только синтетические циклы или микробенчмарки).

• Знакомство с RDMA-сетями и настройкой транспортных протоколов; понимание того, как сетевая топология и перегрузка влияют на коллективные операции.

• Опыт запуска и проверки нагрузок в Kubernetes, а также преобразования «исследовательского кода» в надежную, повторяемую инфраструктуру.

• Практический лабораторный опыт работы с ранним оборудованием (новые сетевые карты, новые ГП/ускорители, ранние стойки).

О OpenAI

OpenAI — это компания, занимающаяся исследованиями и внедрением в области ИИ, призванная обеспечить, чтобы универсальный искусственный интеллект приносил пользу всему человечеству. Мы расширяем границы возможностей систем ИИ и стремимся безопасно внедрять их в мир посредством наших продуктов. ИИ — это чрезвычайно мощный инструмент, который должен создаваться с учетом безопасности и потребностей человека в основе, и для достижения нашей миссии мы должны охватывать и ценить множество различных точек зрения, голосов и опыта, которые составляют полный спектр человечества.

Мы являемся работодателем, предоставляющим равные возможности, и мы не дискриминируем по признаку расы, религии, цвета кожи, национального происхождения, пола, сексуальной ориентации, возраста, статуса ветерана, инвалидности, генетической информации или других применимых законодательно защищенных характеристик.

Дополнительную информацию см. в Заявлении о политике позитивных действий и равных возможностей OpenAI.

Проверка биографии кандидатов будет проводиться в соответствии с применимым законодательством, а квалифицированные кандидаты с информацией об арестах или судимостях будут рассматриваться для трудоустройства в соответствии с этими законами, включая Ордонанс о честных возможностях Сан-Франциско, Ордонанс о честных возможностях для работодателей округа Лос-Анджелес и Калифорнийский закон о честных возможностях, для кандидатов из США. Для работников, не являющихся юридическими лицами в округе Лос-Анджелес: мы разумно полагаем, что криминальное прошлое может иметь прямую, неблагоприятную и отрицательную связь с указанными должностными обязанностями, потенциально приводя к отзыву условного предложения о трудоустройстве: защита компьютерного оборудования, вверенного вам, от кражи, потери или повреждения; возврат всего компьютерного оборудования, находящегося в вашем распоряжении (включая содержащиеся в нем данные), по окончании срока трудоустройства или выполнения задания; и сохранение конфиденциальности проприетарной, конфиденциальной и непубличной информации. Кроме того, должностные обязанности требуют доступа к защищенным информационным технологическим системам и связанных с этим обязательств по обеспечению безопасности данных.

Чтобы уведомить OpenAI о том, что вы считаете, что данное объявление о вакансии не соответствует требованиям, отправьте отчет через эту форму. Ответы на запросы, не связанные с соответствием объявления о вакансии, предоставлены не будут.

Мы стремимся предоставлять разумные приспособления для кандидатов с ограниченными возможностями, и запросы можно сделать по этой ссылке.

Политика конфиденциальности OpenAI Global Applicant Privacy Policy

В OpenAI мы верим, что искусственный интеллект обладает потенциалом помочь людям решать огромные глобальные проблемы, и мы хотим, чтобы преимущества ИИ были широко распространены. Присоединяйтесь к нам в формировании будущего технологий.