Senior Software Engineer - Infrastructure Storage

Название: Старший инженер-программист — инфраструктурное хранилище Местоположение: Офис в Сан-Франциско (Фремонт-стрит) / Офис в Сан-Хосе (Первая улица) / Офис в Бельвью / Гибридный

Вознаграждение: 266 000 — 395 000 долларов США в год

Lambda, облако Superintelligence, является лидером в области облачной инфраструктуры для ИИ, обслуживая десятки тысяч клиентов. Наши клиенты — от исследователей в области ИИ до предприятий и гиперскейлеров. Миссия Lambda — сделать вычисления такими же повсеместными, как электричество, и дать каждому силу супер интеллекта. Один человек, один GPU.

Если вы хотите создать лучшее в мире облако для ИИ, присоединяйтесь к нам.

*Примечание: Эта должность требует присутствия в нашем офисе в Сан-Франциско, Сан-Хосе или Бельвью 4 дня в неделю; назначенный день работы из дома в Lambda в настоящее время — вторник.

В мире распределенного обучения и инференса ИИ «сырая» вычислительная мощность GPU и CPU — это лишь часть истории. Высокопроизводительные сети и системы хранения данных — критически важные компоненты, которые обеспечивают и объединяют эти системы, делая возможным новаторское обучение и инференс ИИ.

Организация инфраструктурного инжиниринга Lambda создает основу высокопроизводительных кластеров ИИ, объединяя новейшие системы хранения данных для ИИ, сетевое оборудование, GPU и CPU.

Наша экспертиза находится на пересечении:

• Высокопроизводительные распределенные решения и протоколы хранения данных: мы разрабатываем протоколы и системы, которые обслуживают огромные наборы данных со скоростью, требуемой современными кластеризованными GPU.

• Динамичные сети: мы проектируем передовые сети, обеспечивающие многопользовательскую безопасность и интеллектуальную маршрутизацию без ущерба для производительности, используя новейшее сетевое оборудование для ИИ.

• Кластеризация и виртуализация вычислений: мы обеспечиваем передовую виртуализацию и кластеризацию, позволяя исследователям и инженерам в области ИИ сосредоточиться на рабочих нагрузках ИИ, а не на инфраструктуре ИИ, раскрывая полную вычислительную пропускную способность кластеризованных GPU.

Обучение и инференс ИИ зависят от петабайтов данных, размещенных на больших, высокопроизводительных массивах хранения. В Lambda команда инфраструктурного хранения данных отвечает за то, чтобы данные, обеспечивающие работу ИИ, были быстрыми, производительными и доступными через различные протоколы доступа (пригодными для конкретной цели).

Мы ищем опытного старшего инженера-программиста для присоединения к нашей команде по хранению данных. Вы присоединитесь к команде, ответственной за разработку и внедрение программного обеспечения для хранения данных для наших решений хранения данных нового поколения на месте. Эта роль требует опыта работы с распределенными системами и глубокого понимания протоколов хранения файлов, блоков и объектов. Вы будете работать над созданием масштабируемых и отказоустойчивых сервисов хранения данных, которые обеспечивают нашу инфраструктуру ИИ и машинного обучения.

Что вы будете делать:

• Проектировать, разрабатывать и поддерживать программное обеспечение для систем хранения данных, уделяя особое внимание производительности, масштабируемости и надежности.

• Реализовывать и оптимизировать API протоколов хранения для доступа к файлам (например, NFS, SMB), блокам (например, iSCSI, Fibre Channel) и объектам (например, S3).

• Разрабатывать распределенные системы для управления и оркестрации ресурсов хранения данных в различных решениях хранения и резервных массивах.

• Сотрудничать с архитекторами оборудования и систем для интеграции программного обеспечения с различными решениями хранения данных, включая NVMe и GPU-direct storage.

• Устранять и отлаживать сложные проблемы в производственной среде дата-центра.

• Вносить вклад в полный жизненный цикл разработки программного обеспечения, от сбора требований и проектирования до развертывания и обслуживания.

У вас есть:

• Степень бакалавра или магистра в области компьютерных наук или смежной области.

• 5+ лет опыта разработки программного обеспечения для систем хранения данных.

• Подтвержденный опыт программирования распределенных систем и концепций, таких как балансировщики нагрузки, отказоустойчивость данных, алгоритмы консенсуса, отказоустойчивость и согласованность данных.

• Сильные навыки программирования на таких языках, как C, C++, Go или Python.

• Глубокое понимание протоколов хранения данных, включая:

  • Файловые: NFS, SMB, Lustre
  • Блочные: iSCSI, Fibre Channel
  • Объектные: S3, Swift

• Опыт работы с внутренними компонентами ядра Linux и системным программированием.

• Знакомство с технологиями контейнеризации, такими как Docker и Kubernetes, и развертыванием производственных рабочих нагрузок в этих средах.

• Знакомство с практиками CI/CD и QA для сред разработки распределенных систем.

Желательно иметь

• Опыт работы с рабочими нагрузками ИИ/МО и связанными с ними уникальными проблемами хранения данных.

• Знание сетевых технологий дата-центров и высокоскоростных интерконнектов (например, InfiniBand, RoCE).

• Опыт настройки и оптимизации производительности систем хранения данных.

• Знакомство с технологиями аппаратного ускорения, особенно GPU и DPU.

Информация о диапазоне заработной платы

На основе рыночных данных и других факторов, годовой диапазон заработной платы для этой должности составляет. Однако зарплата выше или ниже этого диапазона может быть уместной для кандидата, чья квалификация существенно отличается от указанной в описании вакансии.

О Lambda

• Основана в 2012 году, более 500 сотрудников, быстро растет

• Среди наших инвесторов: TWG Global, US Innovative Technology Fund (USIT), Andra Capital, SGW, Andrej Karpathy, ARK Invest, Fincadia Advisors, G Squared, In-Q-Tel (IQT), KHK & Partners, NVIDIA, Pegatron, Supermicro, Wistron, Wiwynn, Gradient Ventures, Mercato Partners, SVB, 1517 и Crescent Cove.

• Наши исследовательские работы приняты на ведущих конференциях по машинному обучению и графике, включая NeurIPS, ICCV, SIGGRAPH и TOG.

• Наши ценности доступны публично: lambda.ai/careers

• Мы предлагаем щедрое вознаграждение наличными и акциями

• Медицинское, стоматологическое и офтальмологическое страхование для вас и ваших иждивенцев

• Стипендии на оздоровление и проезд для отдельных должностей

• План 401k с 2% корпоративным соответствием (сотрудники из США)

• Гибкий план оплачиваемого отпуска, которым мы все действительно пользуемся

Работодатель, предоставляющий равные возможности

Lambda является работодателем, предоставляющим равные возможности. Кандидаты рассматриваются независимо от расы, цвета кожи, религии, вероисповедания, национального происхождения, возраста, пола, гендера, семейного положения, сексуальной ориентации и идентичности, генетической информации, статуса ветерана, гражданства или любых других факторов, запрещенных местным, государственным или федеральным законодательством.