Lead Data Engineer

Мы вступили на амбициозный путь. Присоединяйтесь к нам!

Будучи Arrive, мы ведем клиентов и сообщества к светлому будущему и более пригодным для жизни городам. Это вызов, который под силу не каждому. К счастью, у нас есть то, что помогает нам добиться этого. Наши люди и наши ценности. Мы Arrive с любопытством, сосредоточенностью и вместе. Точно так же, как весь наш бренд вдохновлен Полярной звездой — сияющим светом, ведущим путешественников к их пунктам назначения с незапамятных времен, — наши ценности направляют нас. Они помогают нам быть лучшими. Для наших клиентов. Для городов и сообществ, которым мы служим. Для самих себя. Как глобальная команда, мы трансформируем городскую мобильность. Давайте расти лучше, вместе.

В Arrive вы, как ведущий инженер по данным (Lead Data Engineer), являетесь техническим краеугольным камнем нашего нового центра данных в Бангалоре и одним из основателей команды. Вы не просто создаете модели — вы проектируете шаблоны и стандарты, которые определяют, как Arrive превращает необработанные данные в надежные источники истины. Работая с архитектурой Medallion (Bronze, Silver, Gold) поверх общей платформы данных (Snowflake, dbt, Fivetran Airflow, AWS), вы будете руководить развитием наших моделей данных, преобразуя сложные потоки данных из разрозненных исходных систем — многие из которых были унаследованы в результате приобретений — в унифицированные наборы данных с высокой степенью целостности.

В Arrive данными владеют доменные команды, которые их производят; ваша роль заключается в поддержке этих производителей и создании слоев моделирования, на которые полагается вся организация. Вы будете сочетать практическую инженерную работу с наставничеством коллег и формированием культуры технического совершенства. Отстаивая ясность вместо контроля и проявляя подлинное любопытство к унаследованным системам, вы гарантируете, что данные Arrive станут стратегическим катализатором будущего городской мобильности.

Основные обязанности:

• Проектирование Medallion: Руководство разработкой и развитием наших глобальных моделей данных (Bronze, Silver, Gold). Вы определяете шаблоны dbt, макросы и наборы тестов, которые гарантируют, что наш уровень Gold является окончательным глобальным источником истины.

• Наставничество и развитие: Выступать в качестве технического наставника для инженеров по данным в Бангалоре. Вы подаете пример посредством высококачественных обзоров кода, парного программирования и обмена знаниями — воплощая «Arrive Together» в своей работе.

• Целенаправленная модернизация: Возьмите на себя ответственность за сложные существующие модели данных, унаследованные от глобальных приобретений. Вы разбираетесь в унаследованной логике преобразования и перерабатываете ее в масштабируемые, хорошо документированные модели, не нарушая работу последующих потребителей.

• Поддержка производителей данных: Работайте с доменными инженерными командами над улучшением качества данных в источнике. Вы помогаете производителям понять, как их данные проходят через уровни Medallion, и что означает «хорошее качество».

• Разрешение неоднозначности: Выступать в качестве технического консультанта для менеджеров по продуктам и заинтересованных сторон бизнеса. Вы переводите высокоуровневые бизнес-задачи в масштабируемые подходы моделирования, гарантируя, что мы строим правильные вещи правильным способом.

• Обеспечение превосходства в производственных процессах: Определите стандарты для моделей данных «Always-On». Вы внедряете автоматизированное тестирование, проверки качества данных и лучшие практики CI/CD, которые устанавливают планку для всей команды.

• Пионерское внедрение ИИ-инструментов: Руководство практическим внедрением ИИ-инструментов и агентских рабочих процессов для ускорения документирования данных, проверки качества и производительности моделирования.

• Сотрудничество с командой платформы: Тесно сотрудничайте с командой платформы данных (которая управляет инфраструктурой Snowflake, Airflow, Fivetran и AWS), чтобы гарантировать, что ваша работа по моделированию эффективно использует платформу и передает обратно требования.

Требуемые навыки:

• Опыт: 8+ лет профессионального опыта в области инженерии данных с акцентом на моделирование и преобразование данных.

• Программирование: Высокий уровень владения SQL и Python для обработки данных и разработки конвейеров.

• Платформы данных: Практический опыт работы с Snowflake, dbt и современными облачными хранилищами данных.

• Моделирование данных: Глубокий опыт работы с dbt и современными практиками моделирования данных. Глубокое понимание процессов ELT и архитектурных шаблонов, таких как архитектура Medallion.

• Платформы данных: Практический опыт работы с Snowflake или сопоставимыми облачными хранилищами данных.

• Оркестрация рабочих процессов: Опыт работы с Apache Airflow или аналогичными инструментами оркестрации.

• Контроль версий и CI/CD: Опыт использования GitHub для контроля версий, рабочих процессов CI/CD и автоматизированного тестирования моделей данных и конвейеров.

• Облачные платформы: Знакомство с сервисами AWS, такими как S3, и облачной инфраструктурой данных.

• Коммуникация: Отличные письменные и устные коммуникативные навыки, способность эффективно сотрудничать с учетом разных часовых поясов и культур. Комфорт работы в среде, где нет иерархии, но есть принцип «не согласен — компромисс».

О КОМПАНИИ ARRIVE

Arrive, включая такие бренды, как EasyPark, Flowbird, RingGo, ParkMobile и Parkopedia, является ведущей глобальной платформой мобильности. Присутствующая более чем в 90 странах и 20 000 городах, компания помогает людям и лицам, принимающим решения, принимать более обоснованные решения о городской мобильности и упрощать опыт путешествий по всему миру. Arrive предоставляет уникальное сочетание основных ингредиентов для повышения пригодности городов для жизни: от умных платежей и оптимизированных парковок до сокращения трафика на основе данных и поддержки реинвестирования в общественный транспорт и зеленые зоны. Дело не только в функциональности, а в экономии времени и упрощении путешествий для всех. Путешествие — это больше, чем просто поездка, это то, как вы прибываете (Arrive).