#DE #dataengineer #senior #remoteEU #vacancy #job

✅ Senior Data Engineer (ADB + Python)

Компания: Forrards Местоположение: только удаленно в ЕС Зарплата: 3-4 тыс. евро/мес.

Описание Мы ищем мотивированного Senior Data Engineer (ADB + Python) для участия в новом проекте с использованием современного технологического стека.

Технологический стек проекта Azure Cloud, Архитектура микросервисов, .NET 8, ASP. NET Core services, Python, MongoDB, Azure SQL, Angular 18, Kendo, GitHub Enterprise с Copilot, LangGraph, LangChain, RAG Pipelines, Multi-modal LLMs.

Обязанности • Определять и обеспечивать соблюдение лучших практик и стандартов кодирования в рамках проекта. • Проводить тщательные обзоры кода для обеспечения соответствия установленным правилам и поддержания высокого качества кода. • Работать как самостоятельно, так и в тесном сотрудничестве с членами команды. • Четко доносить инструкции до членов команды и помогать в управлении ежедневными рабочими процессами. • Поддерживать регулярное общение с клиентом. • Проектировать, разрабатывать и поддерживать надежные и масштабируемые Spark-приложения. • Писать чистый, поддерживаемый и эффективный код в соответствии с лучшими практиками и стандартами кодирования. • Оптимизировать код для производительности и масштабируемости, чтобы обеспечить эффективную обработку данных. • Тесно сотрудничать с кросс-функциональными командами для предоставления высококачественных программных решений. • Выявлять и устранять технические проблемы для обеспечения надежности и производительности приложений. • Создавать и поддерживать всеобъемлющую документацию по коду, процессам и рабочим процессам.

Квалификация • Более 5 лет практического опыта в разработке программного обеспечения. • Обширный опыт работы с Apache Spark, включая платформы, такие как Databricks и/или Azure Synapse/Fabric. • Знание Python, с сильными навыками манипулирования данными с использованием Pandas, Polars и подобных библиотек. • Глубокое понимание колоночных форматов хранения данных, особенно Parquet, с практическим опытом использования Delta Tables. • Подтвержденный опыт в рабочих процессах обработки, анализа и трансформации данных. • Сильные аналитические способности и навыки решения проблем с вниманием к деталям. • Практический и прагматичный подход к балансировке стандартизированных процессов с гибкостью, необходимой для эффективного достижения целей проекта. • Отличные организационные навыки, включая способность к самоорганизации, приоритизации задач, структурированию рабочей нагрузки и соблюдению сжатых сроков. • Глубокое понимание архитектуры микросервисов и ее реализации в масштабируемых системах.

Предпочтительная квалификация • Опыт работы с сервисами Azure Cloud (или другими основными облачными платформами), включая Service Bus, Data Lake, Blob Storage и Redis. • Знакомство с FastAPI. • Опыт работы с инструментами контейнеризации и оркестрации, такими как Docker

• Требование к языку: Английский на уровне Intermediate+