Senior Data Engineer

Название: Старший инженер по работе с данными Местоположение: Великобритания / гибрид

В Kpler мы стремимся помогать нашим клиентам с легкостью ориентироваться в сложных рынках. Упрощая информацию о глобальной торговле и предоставляя ценные сведения, мы даем организациям возможность принимать обоснованные решения в сферах сырьевых товаров, энергетики и морского транспорта.

С момента нашего основания в 2014 году мы сосредоточены на предоставлении первоклассной аналитики через удобные платформы. Наша команда из более чем 850 экспертов из 69 стран неустанно работает над преобразованием сложной информации в действенные стратегии, гарантируя, что наши клиенты остаются впереди на динамичном рыночном ландшафте. Присоединяйтесь к нам, чтобы использовать передовые инновации для достижения значимых результатов и получить беспрецедентную поддержку на пути к успеху.

О роли

В качестве старшего инженера по работе с данными, присоединившегося к нашей новой инициативе в области морского страхования, вы будете играть центральную роль в формировании систем, которые обеспечивают работу платформы Kpler для анализа мировых рынков. Вы будете руководить комплексным проектированием и внедрением сложных конвейеров данных и облачной инфраструктуры, получая, обрабатывая и предоставляя большие объемы данных нашим глобальным клиентам. Выступая в качестве технического лидера, вы будете определять направления архитектуры данных и наставлять инженеров-коллег, обеспечивая надежное масштабирование нашей платформы по мере расширения наших наборов данных и продуктовых предложений.

Основные обязанности

• Проектирование и владение конвейерами данных от начала до конца: Создание, развертывание и эксплуатация производственных конвейеров данных и инфраструктуры от первоначальной архитектуры до развертывания, мониторинга и обслуживания.
• Развертывание контейнеризированных сервисов AWS: Разработка и контейнеризация приложений в AWS с использованием Python, Docker, Kubernetes, Airflow и Infrastructure as Code (Terraform).
• Обеспечение целостности данных и потоковой передачи событий: Проектирование надежных структур баз данных PostgreSQL и потоков событий (Kafka/Flink) для обеспечения бесперебойного потока и целостности данных.
• Определение технического направления и стандартов: Руководство сложным проектированием конвейеров, обзор кода, а также разработка систем логирования, мониторинга и оповещения для обеспечения устойчивости конвейеров.
• Межфункциональное взаимодействие и наставничество коллег: Тесное сотрудничество с инженерами, продакт-менеджерами и специалистами по данным, а также наставничество инженеров для повышения уровня мастерства и технического развития команды.
• Оценка новых инструментов для работы с данными: Исследование и внедрение современных улучшений инфраструктуры данных и фреймворков для постоянного повышения возможностей платформы Kpler.

Опыт и образование

Что вам понадобится (Обязательно)

• Опыт работы с конвейерами данных в больших масштабах: 5+ лет опыта проектирования, эксплуатации и владения производственными конвейерами данных и инфраструктурой.
• Глубокое знание основного технологического стека: Отличные навыки работы с Python, практический опыт работы с Docker, Kubernetes, AWS, Airflow и реляционными базами данных, такими как PostgreSQL.
• Потоковая передача данных, IaC и наблюдаемость: Практический опыт работы с потоковой передачей событий (Kafka/Flink), Infrastructure as Code (Terraform), практиками CI/CD и системами логирования/мониторинга в производственной среде.
• Техническое лидерство и инструменты для написания кода с ИИ: Демонстрируемая способность руководить архитектурными обсуждениями, наставлять инженеров и использовать инструменты для написания кода с помощью ИИ (Copilot, Cursor, Claude) с сильным техническим суждением.
• Методологии и коммуникация: Опыт работы в Agile-среде с отличными навыками сотрудничества и свободным владением письменным и устным английским языком.

Желательно

• Платформы аналитики в больших масштабах: Опыт создания систем обработки больших данных или аналитических платформ.
• Кросс-командные инициативы: Опыт руководства техническими инициативами в нескольких командах.
• Знание предметной области: Знакомство с данными товарных рынков, судоходства, энергетики или морского страхования.

Мы — динамичная компания, призванная укреплять связи и разрабатывать инновационные решения для решения рыночных проблем. Если вы стремитесь к удовлетворенности клиентов и воплощению идей в реальность, то вы нашли свое идеальное место. Готовы ли вы отправиться в это захватывающее путешествие вместе с нами?

Мы добиваемся результатов

Мы действуем решительно и целенаправленно, делая все возможное.

Мы строим вместе

Мы налаживаем отношения и разрабатываем творческие решения для решения рыночных задач.

Мы здесь, чтобы помочь

Мы доступны и поддерживаем коллег и клиентов, дружелюбно подходя к делу.

Наша клятва сотрудникам

Не соответствуете всем требованиям? Исследования показывают, что женщины и представители цветных расы реже, чем другие, подают заявки, если чувствуют, что не соответствуют 100% требований вакансии. Не позволяйте неуверенности в себе встать на вашем пути, мы будем рады услышать от вас! Мы понимаем, что опыт может принимать самые разные формы, и стремимся привнести новые точки зрения в команду.

Kpler стремится создавать справедливую, инклюзивную и разнообразную рабочую среду. Мы верим, что разные точки зрения приводят к лучшим идеям, а лучшие идеи позволяют нам лучше понимать потребности и интересы нашего разнообразного мирового сообщества. Мы приветствуем людей с разным происхождением, опытом, способностями и взглядами и являемся работодателем, предоставляющим равные возможности.

Подавая заявку, я подтверждаю, что прочитал и принимаю Уведомление о конфиденциальности сотрудников