Data Engineer

5 days ago

Details

Grade

Middle

Experience

from 3 years

Work format

Remote

A cover letter for this job

An email or a Telegram message to the recruiter

Some conditions are hidden to comply with employment law

About the role

Design and development of data processing pipelines, support and development of DWH/ETL processes, code refactoring, analytics and migration of data sources in reporting.

Requirements

General commercial development experience of 3+ years. MSSQL: strong proficiency (T-SQL, query optimization, stored procedures). Python: 2+ years. Airflow: 1+ year (DAG construction and maintenance, scheduling, monitoring). Understanding of ETL/ELT pipeline construction principles, working with large data volumes, ensuring fault tolerance and idempotency of loads. Git, strong SQL proficiency. Experience in designing and developing data pipelines from scratch, participation in architectural decisions. Experience in refactoring existing code, optimizing query performance, improving fault tolerance. Ability to understand unfamiliar code, independent development of technical solutions, decomposition of complex tasks. Incident management experience. Experience with analytical tasks on changing data sources in reporting (switching from one master system to another), data reconciliation, validation of migration results.

Task and documentation management systems: Jira, Confluence, GitLab.

Nice to have

E-commerce experience.

Benefits

Duration: long-term Salary range: 170-190 Work format: remote Location, RF citizenship required

Длительность: долгосрок Вилка: 170-190 Формат работы: удаленный Локация РФ

Проектирование и разработка пайплайнов обработки данных, поддержка и развитие DWH/ETL-процессов, рефакторинг кода, аналитика и миграция источников данных в отчетности.

Требования: Общий опыт коммерческой разработки от 3 лет. MSSQL: уверенное владение (T-SQL, оптимизация запросов, хранимые процедуры). Python: от 2 лет. Airflow: от 1 года (построение и сопровождение DAG, планирование, мониторинг). Понимание принципов построения ETL/ELT-пайплайнов, работы с большими объемами данных, обеспечения отказоустойчивости и идемпотентности загрузок. Git, уверенное владение SQL. Опыт проектирования и разработки пайплайнов данных с нуля, участие в архитектурных решениях. Опыт рефакторинга существующего кода, оптимизации производительности запросов, повышения отказоустойчивости. Умение разбираться в чужом коде, самостоятельная проработка технических решений, декомпозиция сложных задач. Опыт работы с инцидентами. Опыт аналитических задач по изменению источников данных в отчетности (переключение с одной мастер-системы на другую), сверка данных, валидация результатов миграции.

Будет плюсом: Опыт работы в e-com.

Системы учета задач и документации: Jira, Confluence, GitLab.

Резюме нужно прислать сегодня В резюме должен быть отражен опыт, указанный в вакансии