Заголовок: Senior/Lead Data Engineer
Компания: N-iX
Местоположение: Европа / Украина / Румыния
N-iX ищет Senior/Lead Data Engineer для присоединения к команде
О клиенте
Наш клиент — ведущий европейский онлайн-рынок автомобилей, соединяющий покупателей и продавцов автомобилей по всему континенту. Платформа обслуживает более 30 миллионов пользователей в месяц и работает в 18 странах, что делает ее одной из крупнейших и наиболее надежных цифровых торговых площадок для автомобилей в Европе.
О роли
Мы ищем Data / Analytics Engineer для поддержки команды клиента. Эта роль находится в тесном взаимодействии с аналитиками данных и бизнес-стейкхолдерами, с основным упором на поддержание и расширение конвейеров данных и моделей данных, которые обеспечивают аналитику и отчетность. Основной стек включает SQL, Airflow, Athena, AWS Data Lake и инструменты инжиниринга с поддержкой ИИ, такие как Codex.
В настоящее время клиент мигрирует с DBT и Snowflake на собственную платформу данных. Целевое облачное и платформенное решение уже существует и функционирует, а сама миграция будет осуществляться другой командой — поэтому это не роль инженера по инфраструктуре или платформам. Вместо этого нам нужен инженер, который может понимать аналитические сценарии использования, переводить бизнес-требования в надежные решения для работы с данными и работать самостоятельно, чтобы внедрять эти решения в продакшн. Помимо технических навыков, мы ищем человека с сильным чувством ответственности и инженерным суждением: человека, который не просто выполняет задачу или принимает блокиратор как есть, а активно проясняет неясные требования, исследует проблемы, предлагает альтернативы, когда очевидный подход не работает, и привлекает нужных людей, когда требуются решения.
Обязанности:
- Поддерживать, устранять неполадки и улучшать существующие конвейеры данных, а также создавать новые конвейеры и наборы данных на основе требований аналитики и бизнеса.
- Проектировать и поддерживать аналитические модели данных, включая факт-модели и дименсиональные модели.
- Принимать и интегрировать данные из различных исходных систем в AWS Data Lake.
- Создавать, развертывать, проверять, отслеживать и, при необходимости, выполнять обратную загрузку конвейеров данных.
- Сотрудничать с аналитиками данных для понимания их требований и предоставления надежных, простых в использовании наборов данных.
- Прояснять требования у бизнес-стейкхолдеров, а не выполнять неоднозначные запросы как есть.
- Обеспечивать качество данных с помощью соответствующей валидации и тестирования, исследовать проблемы с данными и конвейерами и брать на себя ответственность за поиск прагматичных решений от начала до конца.
- Эффективно использовать инструменты разработки с поддержкой ИИ, критически проверяя и проверяя сгенерированные решения.
Требования:
- Практический опыт работы в области инженерии данных, создания и эксплуатации производственных конвейеров данных, в идеале в средах, ориентированных на аналитику.
- Отличные навыки SQL.
- Опыт моделирования данных для аналитики, включая таблицы фактов и измерений.
- Опыт оркестровки рабочих процессов, предпочтительно Airflow.
- Опыт работы с облачными средами данных AWS, в частности Athena и AWS Data Lake.
- Опыт валидации, тестирования и устранения неполадок данных.
- Сильное чувство ответственности и инженерное суждение: умение работать с неполными требованиями, проактивно искать контекст, оспаривать предположения при необходимости и искать практические решения, а не останавливаться на первом же препятствии.
- Отличное владение английским языком (устным и письменным), с четкой коммуникацией с аналитиками данных, инженерами и бизнес-стейкхолдерами.
Желательно иметь
- Опыт работы с архитектурами data mesh или работа в среде data mesh.
- Опыт работы с данными маркетплейсов, веб/мобильных приложений или цифровой аналитики.
- Опыт работы с DBT и/или Snowflake.
- Знакомство с инструментами инжиниринга с поддержкой ИИ, такими как Codex
Мы предлагаем*:
- Гибкий формат работы — удаленно, в офисе или гибкий
- Конкурентоспособная заработная плата и хороший компенсационный пакет
- Персонализированный карьерный рост
- Инструменты профессионального развития (программа наставничества, технические семинары и тренинги, центры компетенций и др.)
- Активные технические сообщества с регулярным обменом знаниями
- Компенсация обучения
- Памятные подарки к юбилеям
- Корпоративные мероприятия и тимбилдинги
- Другие преимущества, специфичные для конкретного местоположения
*не применимо для фрилансеров
