Staff Data Engineer, Enterprise Core Datasets, Tech Foundations

Airbnb появился в 2007 году, когда два хозяина приняли трех гостей в своем доме в Сан-Франциско, и с тех пор вырос до более чем 5 миллионов хозяев, которые приняли более 2 миллиардов гостей почти во всех странах мира. Каждый день хозяева предлагают уникальное проживание и впечатления, которые позволяют гостям более аутентично общаться с сообществами.

Ведущий инженер по обработке данных, основные корпоративные наборы данных, технологические основы

Сообщество, к которому вы присоединитесь

В Airbnb надежные данные помогают принимать бизнес-решения, внедрять инновации в продукты и обеспечивать операционную эффективность. Команда Enterprise Core Datasets создает технические основы данных, которые помогают Airbnb понять, как работает бизнес, куда инвестируются ресурсы и как новые технологии создают ценность. Наш охват охватывает наборы данных с высоким уровнем воздействия по всей организации: измерение принятия, использования и стоимости ИИ; понимание доходов, расходов и прибыльности с помощью Unit Economics; интеграция неплатформенных данных из Jira и других корпоративных приложений; и предоставление критически важных для компании метрик, таких как валовая стоимость бронирования и доход. Вы присоединитесь к команде, которая ценит продуманную архитектуру, инженерную строгость и операционную ответственность. Мы сотрудничаем с инженерными, продуктовыми, аналитическими, финансовыми и бизнес-командами, чтобы превращать сложные требования в надежные, повторно используемые наборы данных. Мы приветствуем сильных инженеров, любопытных к бизнесу и стремящихся решать проблемы в различных областях.

Разница, которую вы внесете

В качестве ведущего инженера по обработке данных вы будете осуществлять практическое техническое руководство по наборам данных, которые формируют решения в Airbnb. Ваша работа поможет организации измерять внедрение и расходы на ИИ, понимать экономику своих продуктов и связывать данные корпоративных приложений со значимыми бизнес- и операционными инсайтами. Вы будете руководить сложными инициативами от определения проблемы и архитектурного проектирования до реализации, валидации и эксплуатации в производственной среде. Вы будете создавать расширяемые основы данных, которые могут вмещать новые инструменты ИИ, продукты, категории затрат и корпоративные системы, сохраняя при этом четкие определения, прослеживаемость и надежные исторические данные. Работая в экосистеме, включающей наборы данных петабайтного масштаба, вы будете улучшать точность, актуальность, производительность и экономическую эффективность. Вы разработаете повторно используемые фреймворки, которые упростят ввод новых источников, уменьшат дублирование логики и сделают критически важные данные более доступными и удобными в использовании. Благодаря наставничеству и вкладу в общие инструменты и стандарты инжиниринга данных Airbnb, ваше влияние распространится на все сообщество данных.

Типичный день

• Руководство архитектурой, реализацией и эксплуатацией высокоэффективных конвейеров данных по использованию и затратам на ИИ, Unit Economics, корпоративным приложениям и критически важным финансовым показателям.
• Сотрудничество с заинтересованными сторонами для определения способов измерения принятия, потребления и расходов на ИИ в организации и создания согласованных моделей данных, поддерживающих эти определения.
• Развитие наборов данных Unit Economics для связи доходов и разнообразных факторов затрат, позволяя командам понимать прибыльность продуктов и эффективность ресурсов.
• Создание надежных конвейеров приема и преобразования данных для неплатформенных систем, таких как Jira и других корпоративных приложений BizTech.
• Преобразование неоднозначных требований в четкие контракты источников, повторно используемые модели фактов и измерений, а также технические проектные решения.
• Разработка конфигурируемых конвейеров и общих компонентов, упрощающих ввод новых источников данных, продуктов и бизнес-требований.
• Настройка автоматизированного тестирования, сверки, обнаружения аномалий и мониторинга для защиты точности, полноты и доступности данных.
• Руководство безопасными миграциями и историческими дозагрузками посредством анализа зависимостей, валидации, контролируемых переключений и планирования восстановления.
• Оптимизация распределенной обработки, хранения и производительности запросов для улучшения актуальности и снижения затрат на вычисления.
• Обеспечение надежности производственной среды посредством участия в дежурствах, реагирования на инциденты и внесения долгосрочных улучшений в системы и руководства.
• Формирование технической дорожной карты, проведение обзоров проектных решений, наставничество инженеров и внесение улучшений в Data Engineering Paved Path Airbnb.

Ваш опыт

• 9+ лет соответствующего отраслевого опыта со степенью бакалавра или магистра в области компьютерных наук, электротехники или смежной области, или эквивалентный практический опыт; или 6+ лет соответствующего опыта со степенью PhD.
• Опыт руководства сложными проектами по инжинирингу данных от неоднозначных требований через архитектуру, поставку и устойчивую эксплуатацию.
• Глубокие знания SQL и сильные навыки программирования на Python или Scala, с опытом создания поддерживаемых, хорошо протестированных систем данных.
• Обширный опыт работы с технологиями распределенной обработки, такими как Apache Spark, и крупномасштабными системами аналитического хранения данных.
• Сильные навыки моделирования данных, включая проектирование фактов и измерений, медленно меняющиеся измерения, инкрементальную обработку и управление историческими данными.
• Опыт интеграции гетерогенных источников, включая API, корпоративные приложения, данные событий и транзакционные системы, при управлении изменениями схемы и надежностью источников.
• Подтвержденная способность создавать надежные конвейеры и выполнять миграции и дозагрузки, сохраняя при этом корректность и совместимость с последующими системами.
• Опыт внедрения средств контроля качества данных, наблюдаемости, отслеживания происхождения данных, управления ими и эффективной практики восстановления после инцидентов.
• Сильные навыки в области оптимизации производительности, включая диагностику узких мест и оптимизацию распределенных вычислений, хранения и выполнения запросов.
• Способность согласовывать интересы заинтересованных сторон из инженерных и бизнес-подразделений, обсуждать компромиссы в архитектуре и принимать решения, выходящие за рамки команд.
• Подтвержденное техническое лидерство посредством наставничества, архитектурного руководства и улучшений в общих инженерных практиках.
• Любознательность и здравый смысл при изучении новых областей и балансировании между потребностями немедленной поставки и долгосрочным состоянием системы.
• Опыт измерения использования или стоимости ИИ, распределения затрат на облачные вычисления, Unit Economics, данных корпоративных приложений или финансовых и платежных наборов данных является плюсом. Также ценятся знакомство с оркестровкой рабочих процессов, фреймворками трансформации SQL и современными форматами таблиц, такими как Apache Iceberg.

Ваше местоположение

Эта позиция доступна для удаленной работы в США. Работа может включать в себя редкие посещения офиса Airbnb или участие во внеофисных мероприятиях по согласованию с вашим менеджером. Хотя позиция доступна для удаленной работы, вы должны проживать в штате, где Airbnb, Inc. имеет зарегистрированное юридическое лицо. Нажмите здесь, чтобы получить актуальный список исключенных штатов. Этот список постоянно меняется, поэтому, пожалуйста, возвращайтесь к нам, если ваш штат проживания находится в списке исключений. Если вы трудоустроены другой компанией Airbnb, ваш рекрутер сообщит вам, в каких штатах вы можете работать.

Обоснованные приспособления

Мы стремимся предоставлять обоснованные приспособления на протяжении всего процесса набора для кандидатов с ограниченными возможностями. Если вам нужна помощь или приспособление, пожалуйста, сообщите об этом своему рекрутеру, как только он свяжется с вами по поводу вакансии.

Примечание о мошенничестве при найме

Мошенники иногда выдают себя за рекрутеров Airbnb, чтобы получить деньги или личную информацию от кандидатов. Несколько вещей, которые всегда будут верны для процесса найма Airbnb: наши открытые вакансии публикуются на странице карьеры Airbnb по адресу careers.airbnb.com, и наши рекрутеры общаются только с адресов электронной почты @airbnb.com или @ext.airbnb.com. Наши рекрутеры никогда не будут запрашивать ваш номер социального страхования, банковские реквизиты, паспорт или платежные данные при проведении собеседования. Мы также никогда не будем просить вас оплатить сбор, отправить деньги, внести или обналичить чек, или приобрести рабочее оборудование (например, рабочий ноутбук) в процессе собеседования. Мы призываем кандидатов проявлять бдительность в отношении этих мошеннических схем при найме и не делиться конфиденциальной информацией, если вы не считаете, что человек действительно связан с Airbnb.