Название: Ведущий инженер-программист, инфраструктура потоковой передачи данных Компания: Airbnb Местоположение: США

Компенсация (Диапазон оплаты): 204 000 – 255 000 долларов США в год

Airbnb зародился в 2007 году, когда два хозяина приняли трех гостей в своем доме в Сан-Франциско, и с тех пор вырос до более чем 5 миллионов хозяев, которые приняли более 2 миллиардов гостей почти во всех странах мира. Каждый день хозяева предлагают уникальное проживание и впечатления, которые позволяют гостям более аутентично связываться с сообществами.

Сообщество, к которому вы присоединитесь

Организация Data Infrastructure в Airbnb создает платформы, которые обеспечивают работу данных по всей компании. В ее рамках направление Data Movement & Transformation (DMT) создает платформу, которая перемещает данные между системами хранения данных Airbnb и преобразует их по пути.

Сегодня данные перемещаются через множество специализированных, разовых конвейеров, которые построены и поддерживаются по-разному каждой командой. Мы заменяем их единой декларативной платформой. Вы определяете данные один раз, и они реплицируются везде, где это необходимо. Эта работа лежит в основе инициативы Airbnb "Данные как услуга".

Вы присоединитесь к команде, которая отвечает за три взаимосвязанных уровня этой платформы:

Control plane (плоскость управления): уровень, который преобразует декларативные определения данных в работающие конвейеры, включая предоставление ресурсов, выбор среды выполнения и управление жизненным циклом.
Schema (схема): как схемы определяются, отслеживаются и безопасно эволюционируют во всех системах и движках.
Realtime Data Infrastructure (RTDI) (инфраструктура потоковой передачи данных в реальном времени): Kafka и транспортный уровень потоковой передачи, через который проходят потоки данных в реальном времени.

В качестве ведущего инженера-программиста вы будете определять техническое направление по этим уровням и оставаться активно вовлеченным в написание кода.

Примеры того, какое влияние вы окажете

Разработать и развивать плоскость управления, которая автоматически предоставляет ресурсы для тем Kafka, регистрирует схемы и развертывает конвейеры на основе декларативного определения.
Создать систему управления схемами, которая обеспечивает безопасную эволюцию и обратную совместимость в системах потоковой передачи данных, хранения данных и хранилищах данных.
Повысить надежность, масштабируемость и экономическую эффективность RTDI и Kafka в масштабах Airbnb, включая управление мощностями, многопользовательский режим и обработку сбоев.
Заменить разрозненные инструменты конвейеров общими, самообслуживаемыми абстракциями платформы, которые принимаются другими командами.
Руководить проверками дизайна и последующими действиями после инцидентов, а также повышать инженерный и операционный уровень для команды.

Ваш опыт

9+ лет опыта в разработке программного обеспечения, включая значительный опыт создания и эксплуатации распределенных систем в большом масштабе, в идеале — платформ данных, событийно-ориентированных систем или инфраструктуры потоковой передачи данных.
Практический опыт работы с Kafka или аналогичной распределенной системой журналов или обмена сообщениями, с хорошим пониманием секционирования, семантики доставки, пропускной способности и операционных компромиссов.
Опыт проектирования систем схем или контрактов данных, таких как реестры схем, форматы сериализации, такие как Avro или Protobuf, а также стратегии совместимости и эволюции.
Опыт создания плоскостей управления или API платформ, таких как декларативная конфигурация, согласование, оркестрация рабочих процессов или предоставление ресурсов, в идеале на базе Kubernetes.
Знакомство с потоковой обработкой (например, Flink) или захватом изменений данных (Change Data Capture) является плюсом.
Опыт руководства неоднозначными, многоквартальными проектами, от проектирования до внедрения в производственной среде.
Способность определять техническое направление, писать четкие проектные документы и согласовывать работу нескольких команд, а также наставлять и развивать других инженеров.
Опыт эксплуатации крупномасштабных систем в производственной среде, включая дежурства, реагирование на инциденты и анализ первопричин.
Пишет чистый, тестируемый, поддерживаемый код.
Сильные навыки сотрудничества и коммуникации в удаленной рабочей среде.

Ваше местоположение

Эта позиция доступна для удаленной работы в США. Роль может включать периодическую работу в офисе Airbnb или участие в выездных мероприятиях по согласованию с вашим менеджером. Хотя позиция доступна для удаленной работы, вы должны проживать в штате, где Airbnb, Inc. имеет зарегистрированное юридическое лицо. Нажмите здесь, чтобы ознакомиться с актуальным списком исключенных штатов. Этот список постоянно обновляется, поэтому, пожалуйста, свяжитесь с нами снова, если штат, в котором вы проживаете, находится в списке исключений. Если ваша позиция связана с другой организацией Airbnb, ваш рекрутер сообщит вам, из каких штатов вы можете работать.

Наша приверженность инклюзивности и принадлежности

Airbnb стремится работать с самым широким кадровым резервом. Мы верим, что разнообразные идеи стимулируют инновации и вовлеченность, и позволяют нам привлекать творчески ориентированных людей и разрабатывать лучшие продукты, услуги и решения. Все квалифицированные кандидаты приглашаются к участию.

Мы также стремимся обеспечить инклюзивный процесс подачи заявок и собеседований для людей с ограниченными возможностями. Если вы являетесь кандидатом с ограниченными возможностями и вам требуются разумные меры для подачи заявки, пожалуйста, свяжитесь с нами по адресу: контакт рекрутера. Пожалуйста, укажите ваше полное имя, должность, на которую вы претендуете, и необходимые меры для оказания вам помощи в процессе найма.

Мы просим вас обращаться к нам только в том случае, если вы являетесь кандидатом, чьи ограниченные возможности мешают вам заполнить нашу онлайн-заявку.

Равные возможности трудоустройства

Airbnb ценит разнообразие и принадлежность и гордится тем, что является работодателем, предоставляющим равные возможности трудоустройства. Все лица, ищущие работу в Airbnb, рассматриваются без учета расы, цвета кожи, религии, национального происхождения, возраста, пола, семейного положения, родословной, физических или умственных недостатков, статуса ветерана, гендерной идентичности, гендерного выражения, сексуальной ориентации или любых других характеристик, защищенных законом.

Как мы позаботимся о вас

Наши названия должностей могут охватывать несколько карьерных уровней. Фактическая базовая оплата зависит от многих факторов, таких как обучение, передаваемые навыки, опыт работы, потребности бизнеса и рыночный спрос. Диапазон базовой оплаты подлежит изменению и может быть изменен в будущем. Эта роль также может претендовать на бонусы, акции, льготы и кредиты на путешествия для сотрудников.

Диапазон оплаты

204 000 — 255 000 долларов США

Разумные меры

Мы стремимся предоставлять разумные меры на протяжении всего процесса найма для кандидатов с ограниченными возможностями. Если вам нужна помощь или меры, пожалуйста, сообщите об этом своему рекрутеру, как только с вами свяжутся по поводу вакансии.

Примечание о мошенничестве при найме

Мошенники иногда выдают себя за рекрутеров Airbnb, чтобы получить деньги или личную информацию от кандидатов. Несколько вещей, которые всегда будут верны для процесса найма Airbnb: наши открытые вакансии публикуются на странице карьеры Airbnb по адресу careers.airbnb.com, и наши рекрутеры общаются только с адресов электронной почты @airbnb.com или @ext.airbnb.com. Наши рекрутеры никогда не будут запрашивать ваш номер социального страхования, данные банковского счета, паспорт или информацию о платежных приложениях во время собеседования. Мы также никогда не будем просить вас оплатить комиссию, отправить деньги, внести или обналичить чек, или приобрести рабочее оборудование (например, корпоративный ноутбук) в процессе собеседования. Мы призываем кандидатов проявлять бдительность в отношении этих мошеннических схем при найме и не делиться конфиденциальной информацией, если вы не уверены, что человек действительно связан с Airbnb.

Staff Software Engineer, Streaming Infrastructure