Ставка: 2200–2600 ₽/ч, заказчик под NDA.
Тип занятости: CONTRACTOR
Отрасль: ИТ
Требования
- Опыт работы Data Engineer от 5 лет
- Знание методологии Data Vault 2.0
- Уверенные знания Python/Scala/Java для разработки ETL/ELT-процессов и сервисов обработки данных
- Отличное знание SQL, опыт оптимизации сложных запросов и работы с большими объемами данных
- Опыт проектирования и разработки промышленного Data Warehouse, Data Lake или Lakehouse решений
- Практический опыт работы с Apache Spark
- Опыт работы с Apache Airflow, Apache Kafka
- Опыт работы с системами потоковой обработки данных
- Опыт работы с распределенными файловыми системами и форматами хранения данных: HDFS, Parquet, Avro
- Опыт работы с экосистемой Hadoop/Apache Iceberg или современными платформами хранения и обработки данных
- Опыт работы с реляционными СУБД (PostgreSQL, Oracle, Clickhouse, Greenplum)
- Уверенное владение Git и понимание процессов CI/CD
- Опыт работы с системами управления задачами и документацией (Jira, Confluence или аналоги)
- Понимание принципов построения отказоустойчивых и масштабируемых решений
- Опыт использования dbt для построения трансформационных слоев данных
- Практика внедрения Data Quality решений (Great Expectations, Soda и др.)
- Опыт работы с Data Catalog и Data Governance инструментами
Навыки
SQL, Data Vault 2.0, DWH, Power BI, Apache Spark, Python, Hadoop
