Senior Data Engineer

2 months ago

Details

Grade

Senior

Work format

Remote

A cover letter for this job

An email or a Telegram message to the recruiter

About the role

Remote

We are looking for a Senior Data Engineer for a product team that develops corporate data platforms and data products for the Trading & Supply division.

Responsibilities

▫️Design, development, and support of scalable data pipelines and data products. ▫️Development of backend services and REST API on FastAPI. ▫️Working with Databricks, Python, PySpark, SQL Server, and cloud technologies. ▫️Interaction with business customers, Product Owner, architects, and development teams. ▫️Participation in the entire SDLC: design, development, testing, deployment, monitoring, and support. ▫️Configuration and support of CI/CD processes, automated testing, and code quality control. ▫️Development and support of containerized applications (Docker, Kubernetes). ▫️Implementation of best engineering practices: code review, testing, security, monitoring, and observability. ▫️Monitoring, performance optimization, incident resolution, and ensuring service reliability.

Requirements

▫️Python, PySpark, Databricks, SQL Server ▫️FastAPI, REST API ▫️Azure, Docker, Kubernetes, GitOps, CI/CD

Will be important ▫️Experience in building modern data platforms and data products. ▫️Understanding of data architecture, data modeling, and data governance principles. ▫️Experience working with cloud solutions and cloud-native architecture. ▫️Experience in configuring CI/CD and DevOps practices (GitHub Actions or similar tools). ▫️Strong analytical skills and experience in solving complex technical problems. ▫️Experience working in Agile/Product teams.

Remote

Ищем Senior Data Engineer для продуктовой команды, которая разрабатывает корпоративные data-платформы и data-продукты для направления Trading & Supply.

Основные задачи ▫️Проектирование, разработка и поддержка масштабируемых data pipelines и data products. ▫️Разработка backend-сервисов и REST API на FastAPI. ▫️Работа с Databricks, Python, PySpark, SQL Server и облачными технологиями. ▫️Взаимодействие с бизнес-заказчиками, Product Owner, архитекторами и командами разработки. ▫️Участие во всем SDLC: дизайн, разработка, тестирование, деплой, мониторинг и поддержка. ▫️Настройка и поддержка CI/CD процессов, автоматизированного тестирования и контроля качества кода. ▫️Разработка и поддержка контейнеризированных приложений (Docker, Kubernetes). ▫️Внедрение лучших инженерных практик: code review, тестирование, безопасность, мониторинг и observability. ▫️Мониторинг, оптимизация производительности, устранение инцидентов и обеспечение надежности сервисов.

Обязательные навыки ▫️Python, PySpark, Databricks, SQL Server ▫️FastAPI, REST API ▫️Azure, Docker, Kubernetes, GitOps, CI/CD

Будет важным ▫️Опыт построения современных data platforms и data products. ▫️Понимание архитектуры данных, моделирования данных и принципов data governance. ▫️Опыт работы с облачными решениями и cloud-native архитектурой. ▫️Опыт настройки CI/CD и DevOps-практик (GitHub Actions или аналогичные инструменты). ▫️Сильные аналитические навыки и опыт решения сложных технических задач. ▫️Опыт работы в Agile/Product-командах.