Software Engineer, Data Infrastructure

Компенсация: 266 000–445 000 долларов США в год

О команде

Платформа данных в OpenAI отвечает за фундаментальный стек данных, обеспечивающий критически важные рабочие процессы продуктов, исследований и аналитики. Мы управляем одними из крупнейших вычислительных кластеров Spark в эксплуатации; проектируем и создаем озера данных и системы метаданных на базе Iceberg и Delta с прицелом на архитектуру эксабайтного масштаба; запускаем потоковые платформы с высокой пропускной способностью на Kafka и Flink; обеспечиваем оркестрацию с помощью Airflow; и поддерживаем инструменты для разработки признаков ML, такие как Chronon. Наша миссия — обеспечить надежный, безопасный и эффективный доступ к данным в масштабе и ускорить интеллектуальные, управляемые ИИ рабочие процессы обработки данных.

Присоединяйтесь к нам, чтобы создавать и эксплуатировать эти основные платформы, которые лежат в основе продуктов, исследований и аналитики OpenAI.

Мы не просто масштабируем инфраструктуру — мы переопределяем, как люди взаимодействуют с данными. Наше видение включает интеллектуальные интерфейсы и рабочие процессы с поддержкой ИИ, которые делают работу с данными быстрее, надежнее и интуитивно понятнее.

О вакансии

Эта роль фокусируется на создании и эксплуатации инфраструктуры данных, поддерживающей массовые вычислительные кластеры и системы хранения, спроектированные для высокой производительности и масштабируемости. Вы будете участвовать в проектировании, создании и эксплуатации следующего поколения инфраструктуры данных в OpenAI. Вы будете масштабировать и укреплять платформы больших данных для вычислений и хранения, создавать и поддерживать потоковые системы с высокой пропускной способностью, создавать и эксплуатировать системы приема данных с низкой задержкой, обеспечивать безопасный и управляемый доступ к данным для ML и аналитики, а также проектировать системы для обеспечения надежности и производительности в экстремальных масштабах.

Вы будете нести полную ответственность за жизненный цикл: архитектуру, внедрение, эксплуатацию в производственной среде и участие в дежурствах.

Вы поддерживали Spark, Kafka, Flink, Airflow, Trino или Iceberg в качестве платформ. Вы хорошо разбираетесь в инструментах инфраструктуры, таких как Terraform, имеете опыт отладки крупномасштабных распределенных систем и заинтересованы в решении проблем инфраструктуры данных в области ИИ.

Эта вакансия находится в Сан-Франциско, Калифорния. Мы используем гибридную модель работы (3 дня в офисе в неделю) и предлагаем помощь в переезде новым сотрудникам.

В этой роли вы будете:

• Проектировать, создавать и поддерживать системы инфраструктуры данных, такие как распределенные вычисления, оркестрация данных, распределенное хранение, потоковая инфраструктура, инфраструктура машинного обучения, обеспечивая масштабируемость, надежность и безопасность.
• Обеспечивать масштабирование нашей платформы данных на порядки, сохраняя при этом надежность и эффективность.
• Повышать продуктивность компании, предоставляя вашим коллегам-инженерам и членам команды отличные инструменты и системы для работы с данными.
• Сотрудничать с командами продуктов, исследований и аналитики для создания технических основ и возможностей, которые открывают новые функции и возможности.
• Нести ответственность за надежность созданных вами систем, включая участие в дежурствах для реагирования на критические инциденты.

Вам может подойти эта роль, если вы:

• Имеете 4+ года опыта в инженерии инфраструктуры данных ИЛИ
• Имеете 4+ года опыта в инженерии инфраструктуры с большим интересом к данным
• Гордитесь созданием и эксплуатацией масштабируемых, надежных, безопасных систем
• Комфортно чувствуете себя в условиях неопределенности и быстрых изменений
• Имеете внутреннее желание учиться и восполнять недостающие навыки, а также одинаково сильный талант к четкому и лаконичному обмену знаниями с другими.

Эта вакансия находится исключительно в нашем головном офисе в Сан-Франциско. Мы предлагаем помощь в переезде новым сотрудникам.

О OpenAI

OpenAI — это компания, занимающаяся исследованиями и внедрением ИИ, целью которой является обеспечение того, чтобы универсальный искусственный интеллект приносил пользу всему человечеству. Мы расширяем границы возможностей систем ИИ и стремимся безопасно развертывать их в мире через наши продукты. ИИ — чрезвычайно мощный инструмент, который должен создаваться с упором на безопасность и потребности человека, и для достижения нашей миссии мы должны охватывать и ценить множество различных точек зрения, голосов и опыта, которые составляют полный спектр человечества.

Мы являемся работодателем, предоставляющим равные возможности, и мы не дискриминируем по признаку расы, религии, цвета кожи, национального происхождения, пола, сексуальной ориентации, возраста, статуса ветерана, инвалидности, генетической информации или других применимых законодательно защищенных характеристик.

Дополнительную информацию можно найти в Политике OpenAI в отношении позитивных действий и равных возможностей при трудоустройстве.

Проверки биографических данных соискателей будут проводиться в соответствии с применимым законодательством, а квалифицированные соискатели с судимостью или арестом будут рассматриваться для трудоустройства в соответствии с этими законами, включая Постановление Сан-Франциско о справедливых возможностях, Постановление округа Лос-Анджелес о справедливых возможностях для работодателей и Калифорнийский закон о справедливых возможностях для кандидатов из США. Для некорпоративных работников округа Лос-Анджелес: мы разумно полагаем, что криминальная история может иметь прямую, неблагоприятную и негативную связь с выполнением следующих должностных обязанностей, потенциально приводящую к отзыву условного предложения о трудоустройстве: защита компьютерного оборудования, вверенного вам, от кражи, потери или повреждения; возврат всего компьютерного оборудования, находящегося в вашем распоряжении (включая содержащиеся в нем данные), после прекращения трудовых отношений или окончания срока задания; и поддержание конфиденциальности проприетарной, конфиденциальной и непубличной информации. Кроме того, должностные обязанности требуют доступа к защищенным информационным системам и связанных с ними обязательств по обеспечению безопасности данных.

Чтобы уведомить OpenAI о том, что вы считаете, что это объявление о вакансии не соответствует требованиям, пожалуйста, отправьте отчет через назначенную форму отчета о соответствии. Ответы на запросы, не связанные с соответствием объявлению о вакансии, не будут предоставлены.

Мы стремимся предоставлять разумные условия для соискателей с ограниченными возможностями, и запросы могут быть сделаны через назначенную форму запроса на предоставление условий.

Политика конфиденциальности OpenAI для глобальных соискателей.

В OpenAI мы верим, что искусственный интеллект имеет потенциал помочь людям решить огромные глобальные проблемы, и мы хотим, чтобы преимущества ИИ были широко распространены. Присоединяйтесь к нам в формировании будущего технологий.