• Connecting data sources (databases, files, CDC), incremental loads
• Transformations between storage layers and designing analytical marts
• Developing and supporting pipelines in the orchestrator
• Data quality control: tests, completeness, idempotency of loads
• Performance optimization: partitioning, table formats, execution plans
• Code review, CI/CD, documentation, data lineage
Requirements
• Data Engineer experience in industrial projects from 2 years
• Advanced SQL, Python for data processing
• Spark or similar: partitions, shuffle, execution plans
• dbt and Airflow or similar
• Iceberg, Delta or Hudi; CDC loads
• Data modeling: star, snowflake
• Git, CI/CD
• Fluent Russian, English for reading documentation
Nice to have
banking sector or payment systems, IOMETE, Databricks, Trino, Data Vault 2.0, Kubernetes, Great Expectations or Soda, BI (Qlik, Tableau, Power BI)
Benefits
📍 Tashkent, Uzbekistan | Office, full-time
Data Engineer
📍 Ташкент, Узбекистан | Офис, полная занятость
ЗАДАЧИ
• Подключение источников данных (БД, файлы, CDC), инкрементальные загрузки
• Трансформации между слоями хранилища и проектирование аналитических витрин
• Разработка и поддержка пайплайнов в оркестраторе
• Контроль качества данных: тесты, полнота, идемпотентность загрузок
• Оптимизация производительности: партиционирование, форматы таблиц, планы выполнения
• Code review, CI/CD, документация, data lineage
ТРЕБОВАНИЯ
• Опыт Data Engineer в промышленных проектах от 2 лет
• Продвинутый SQL, Python для обработки данных
• Spark или аналоги: партиции, shuffle, планы выполнения
• dbt и Airflow или аналоги
• Iceberg, Delta или Hudi; CDC-загрузки
• Моделирование данных: звезда, снежинка
• Git, CI/CD
• Русский свободный, английский для чтения документации
Будет плюсом: банковская сфера или платёжные системы, IOMETE, Databricks, Trino, Data Vault 2.0, Kubernetes, Great Expectations или Soda, BI (Qlik, Tableau, Power BI)
