Senior Data Engineer

Заголовок: Старший инженер по обработке данных Местоположение: DKCPH55 - Копенгаген - Esplanaden 50

Местоположение: DKCPH55 - Копенгаген - Esplanaden 50 Рабочее место: На объекте Занятость: Полная A.P. Moller - Maersk — это интегрированная компания по контейнерным перевозкам и член A.P. Moller Group. Объединяя и упрощая торговлю, чтобы помочь нашим клиентам расти и процветать. С преданной командой из более чем 80 000 человек, работающих в 130 странах; мы делаем все возможное, чтобы обеспечить мировую торговлю для растущего мира. Мы используем передовые технологии для оптимизации операций, улучшения качества обслуживания клиентов и стимулирования роста бизнеса. Мы ищем Старшего инженера по обработке данных, который присоединится к нашей команде и сыграет ключевую роль.

О роли

В Maersk мы переосмысливаем глобальную логистику с помощью данных, инжиниринга платформ и инноваций, основанных на ИИ. В рамках этого путешествия мы создаем масштабируемые платформы и интеллектуальные системы, которые обеспечивают более быстрое принятие решений, операционную эффективность и бесшовную интеграцию по всему предприятию. В качестве Старшего инженера по обработке данных, Данных и ИИ вы будете проектировать, создавать и эксплуатировать масштабируемые продукты данных, конвейеры и аналитические основы, которые обеспечивают бизнес-инсайты, критически важные бизнес-возможности и принятие решений на основе ИИ.

Вы будете работать в области инжиниринга данных, обеспечения аналитики, визуализации и инжиниринга ИИ/МО, внося вклад в надежные конвейеры данных, управляемые наборы данных, фреймворки оркестрации и продукты данных, которые обеспечивают самообслуживающую аналитику и интеллектуальную автоматизацию по всему предприятию. Роль требует практического решения проблем, способного сотрудничать с бизнес-стейкхолдерами и продуктовыми командами для понимания требований, преобразования потребностей бизнеса в практические решения данных, быстрого создания прототипов, где это полезно, и развития проверенных решений в готовые к производству продукты данных и ИИ.

Ключевые обязанности:

1. Инжиниринг данных, конвейеры и оркестрация Проектирование, создание и оптимизация масштабируемых пакетных и потоковых конвейеров данных с использованием современных шаблонов инжиниринга данных Разработка надежных рабочих процессов оркестрации для надежного сбора данных, их преобразования, проверки качества и последующего потребления Применение сильных навыков SQL, Python и PySpark для преобразования сложных данных в надежные, повторно используемые и производительные продукты данных

2. SQL, моделирование данных и обеспечение аналитики Создание хорошо смоделированных, доверенных наборов данных, которые поддерживают отчетность, визуализацию, расширенную аналитику и случаи использования ИИ/МО Обеспечение самообслуживаемого доступа к данным и управляемого потребления путем создания четких контрактов на данные, документации и средств контроля качества Вклад в интегрированные основы данных, которые предоставляют последовательные, повторно используемые данные по доменам бизнеса и платформам

3. Визуализация, BI и доставка продуктов данных Сотрудничество с командами аналитики и продуктов для доставки высококачественных наборов данных, панелей мониторинга и семантических слоев, готовых к визуализации Преобразование бизнес-требований в масштабируемые модели данных и шаблоны потребления для операционных и управленческих инсайтов Поддержка принятия продуктов данных путем обеспечения производительности, удобства использования, надежности и четкой прослеживаемости от источника до инсайта

4. Обеспечение инжиниринга ИИ/МО Создание конвейеров данных и наборов данных, готовых к использованию в машинном обучении, ИИ и GenAI Сотрудничество с специалистами по данным и инженерами ИИ для производства моделей, автоматизации обновления данных и повышения повторяемости Применение инженерных практик для мониторинга, тестирования, версионирования и эксплуатации рабочих процессов данных и МО

5. Кросс-функциональная доставка и архитектура Работа с продуктовыми, аналитическими, платформенными, научно-исследовательскими командами, командами ИИ и бизнес-стейкхолдерами для уточнения требований и предоставления прагматичных комплексных решений для данных Преобразование бизнес-требований, отзывов пользователей и постановки проблем в модели данных, рабочие прототипы, технические проекты и планы реализации Участие в обсуждении архитектуры данных и обеспечение соответствия корпоративным стандартам, ожиданиям в области безопасности и управления Поддержка интеграции между облачными и корпоративными экосистемами данных

6. Операционное совершенство Обеспечение надежности, масштабируемости, производительности, безопасности и готовности к производству решений для данных Мониторинг, устранение неполадок и постоянное улучшение производительности конвейеров, качества данных и стабильности платформы Стимулирование автоматизации, наблюдаемости и поддержки решений для данных, аналитики и ИИ/МО

Наш идеальный кандидат:

Солидный опыт работы в области инжиниринга данных с практической реализацией масштабируемых конвейеров данных, продуктов данных и основ аналитики Продвинутые навыки SQL с возможностью проектирования производительных запросов, моделей данных и логики преобразования Практические знания Python и PySpark для крупномасштабной обработки данных и автоматизации Любознательный, практический решатель проблем, который может взаимодействовать с бизнес-стейкхолдерами для понимания реальных требований и достижения практических результатов Комфортное перемещение между быстрой разработкой прототипов и инжинирингом данных производственного класса в зависимости от потребностей бизнеса Опыт обеспечения визуализации, BI, ИИ/МО или расширенной аналитики с помощью надежных и хорошо управляемых основ данных Знакомство с облачными платформами данных, инструментами оркестрации и распределенными шаблонами обработки данных Сильный менталитет владельца и способность эффективно работать в кросс-функциональных командах

Требуемые навыки/опыт:

Магистр или бакалавр компьютерных наук или в области науки/инженерии Более 6 лет опыта работы в области инжиниринга данных, аналитического инжиниринга или предоставления платформ данных Требуется глубокое знание SQL, Python и PySpark Опыт проектирования и эксплуатации конвейеров ETL/ELT, рабочих процессов оркестрации, проверок качества данных и производственных продуктов данных Опыт работы с облачными платформами данных, распределенной обработкой, моделированием данных и шаблонами потребления для аналитики/BI Знакомство с практиками инжиниринга ИИ/МО, конвейерами признаков, производством моделей, приложениями на основе LLM или агентными моделями ИИ будет дополнительным преимуществом Опыт работы с практиками DevOps и DataOps, включая CI/CD, мониторинг, наблюдаемость и поддержку инцидентов

Maersk стремится к созданию разнообразной и инклюзивной рабочей среды, и мы приветствуем различные стили мышления. Maersk является работодателем, предоставляющим равные возможности, и приветствует кандидатов независимо от расы, цвета кожи, пола, возраста, религии, вероисповедания, национального происхождения, родословной, гражданства, семейного положения, сексуальной ориентации, физических или психических нарушений, состояния здоровья, беременности или отпуска по уходу за ребенком, статуса ветерана, гендерной идентичности, генетической информации или любой другой характеристики, защищенной применимым законодательством. Мы будем рассматривать кандидатов с судимостью в соответствии со всеми юридическими требованиями.

Мы будем рады поддержать ваши потребности в любых корректировках в процессе подачи заявок и найма. Если вам требуется особая помощь или адаптация для использования нашего веб-сайта, подачи заявки на вакансию или выполнения работы, пожалуйста, свяжитесь с нами по электронной почте контакт рекрутера.