Middle Data Engineer

Title: Middle Data Engineer Location: São Paulo / br / Remote

• Проектировать, разрабатывать и поддерживать ETL/ELT конвейеры

• Создавать и оптимизировать трансформации данных для поддержки аналитики и отчетности

• Разрабатывать и поддерживать модели данных, наборы данных и интеграционные решения

• Обеспечивать качество, согласованность и надежность данных посредством тестирования и мониторинга

• Устранять и решать проблемы конвейеров данных и производительности

• Сотрудничать с аналитиками, инженерами и бизнес-стейкхолдерами для предоставления решений, основанных на данных

• Участвовать в разработке и поддержке облачных платформ данных

• Участвовать в ревью кода и технических обсуждениях

• Создавать и поддерживать техническую документацию для реализованных решений

• Постоянно улучшать существующие процессы обработки данных и производительность платформы

• 3+ года опыта работы в Data Engineering или Software Engineering

• Английский язык на уровне Upper-Intermediate

• Отличные навыки SQL и понимание реляционного и многомерного моделирования данных

• Практический опыт работы с Python для обработки данных и автоматизации

• Опыт создания и поддержки ETL/ELT конвейеров

• Практический опыт работы с Databricks и Apache Spark

• Опыт работы с Snowflake

• Понимание концепций хранилищ данных и современных платформ данных

• Опыт работы с облачными средами, предпочтительно AWS

• Знакомство с CI/CD, Git и лучшими практиками программной инженерии

• Отличные аналитические, навыки устранения неполадок и коммуникативные навыки

БУДЕТ ПЛЮСОМ

• Опыт работы с обработкой потоковых данных
• Знание инструментов оркестрации, таких как Airflow или Dagster
• Опыт работы с практиками Infrastructure as Code
• Знакомство с фреймворками качества данных и наблюдаемости
• Опыт работы с крупномасштабными распределенными системами данных
• Опыт работы в Agile средах

ЛИЧНЫЙ ПРОФИЛЬ

• Сильный аналитический склад ума
• Внимательность к деталям и ориентация на качество
• Проактивный и коллаборативный подход
• Хорошие коммуникативные навыки и навыки командной работы
• Готовность учиться и развиваться в современных Data Engineering средах
• Способность работать самостоятельно в удаленных командах

Вам нравится создавать масштабируемые решения для данных, которые позволяют анализировать, отчитываться и использовать бизнес-аналитику? Мы ищем Middle Data Engineer, который присоединится к удаленной команде, работающей над современными облачными платформами данных и распределенными системами обработки данных.

В этой роли вы будете участвовать в разработке и оптимизации ETL/ELT конвейеров, моделей данных и облачных архитектур данных с использованием таких технологий, как Databricks, Apache Spark, Snowflake и AWS. Эта возможность идеально подходит для инженеров, которые хотят углубить свой опыт в современных практиках Data Engineering, работая над значимыми бизнес-решениями.

В Sigma Software мы ценим сотрудничество, непрерывное обучение и техническое совершенство. Присоединение к нашей команде означает работу в поддерживающей инженерной среде с возможностями для профессионального роста, обмена знаниями и долгосрочного развития карьеры.

CUSTOMER Наш клиент работает в современной среде, ориентированной на данные, с фокусом на аналитику, отчетность и принятие операционных решений. Экосистема платформы сочетает в себе облачные технологии, фреймворки распределенной обработки и масштабируемую инфраструктуру для поддержки надежных и высокопроизводительных решений для данных.

PROJECT Проект сосредоточен на создании и поддержке масштабируемых облачных платформ данных, которые поддерживают инициативы в области аналитики и бизнес-аналитики. Команда разрабатывает ETL/ELT конвейеры, оптимизирует трансформации данных и улучшает современные архитектуры данных, используя технологии распределенной обработки данных и облачную инфраструктуру.

Key Technologies: Python, SQL, Apache Spark, Databricks, Snowflake, AWS, ETL/ELT, CI/CD