Формат: remote Оформление: b2b Занятость: full-time Английский: B2+ Мы ищем DevOps инженера (с фокусом на Data) для усиления нашей команды Data Engineering. Эта роль заключается в создании и поддержке надежной, масштабируемой и наблюдаемой инфраструктуры данных, которая обеспечивает работу наших систем торговых исследований и производства. Обязанности • Проектирование, внедрение и поддержка DevOps инструментов для data pipelines и data platforms. • Поддержка и автоматизация ETL workflows (например, Spark, Airflow). • Создание и управление мониторингом и наблюдаемостью для качества данных (DBT), data pipelines и систем хранения. • Внедрение и поддержка инфраструктуры хранения данных в AWS (S3, EC2, networking). • Интеграция и поддержка Project Nessie в качестве транзакционного каталога для Data Lakes с семантикой Git-like. • Тесное взаимодействие с Data Engineers для обеспечения бесперебойного развертывания, версионирования и масштабирования data jobs и pipelines. • Автоматизация процессов развертывания и CI/CD с использованием GitLab CI/CD. • Обеспечение лучших практик безопасности при обработке конфиденциальных данных. • Написание скриптов автоматизации инфраструктуры с использованием Python/Bash/Ansible. • Документирование систем, pipelines и DevOps процессов. Квалификации • 5+ лет опыта работы в роли DevOps / IT Ops / DataOps с практическим опытом в инфраструктуре, связанной с данными. • Глубокие знания Linux (networking, kernel tuning, performance optimization). • Практический опыт работы с Airflow, ClickHouse, DBT, Spark и Project Nessie. • Отличное знание сервисов AWS (S3, EC2, IAM, networking). • Владение скриптовыми языками и автоматизацией (Python, Bash, Ansible). • Опыт работы с CI/CD pipelines (GitLab). • Опыт работы с системами мониторинга (Prometheus, Grafana, ELK). • Знакомство с контейнеризацией и оркестрацией (Docker, Kubernetes). • Понимание концепций управления данными (data governance). • Отличные коммуникативные навыки и проактивный подход, ориентированный на результат. Nice-to-Have • Опыт работы с потоковой передачей данных в реальном времени (real-time data streaming). • Знание инфраструктуры как кода (Infrastructure as Code, Terraform). • Знакомство с безопасностью в data engineering (IAM, encryption, access control). • Опыт работы с высокопроизводительными системами или в торговых средах.