Инженер данных
Мы ищем Инженера данных, который присоединится к нашей команде и будет создавать надежные конвейеры данных для текущих и будущих аналитических проектов. Вы будете работать с Python, Apache Airflow, ClickHouse, PostgreSQL, AWS S3 и Nextcloud, чтобы предоставлять чистые, достоверные наборы данных для BI/отчетности и операционных дашбордов.
В дополнение к основной работе по ETL/ELT, нам нужен сильный подход к агентной инженерии данных: автоматизация рутинных задач DE (создание шаблонов конвейеров, проверка данных, сортировка инцидентов и документация) с помощью рабочих процессов с поддержкой ИИ при соблюдении четких правил качества и безопасности.
Требования:
- Опыт работы инженером данных от 3 лет
- Отличные навыки Python для конвейеров данных и автоматизации
- Уверенный опыт работы с Apache Airflow (проектирование DAG, планирование, мониторинг, устранение неполадок)
- Продвинутый SQL и практический опыт работы с ClickHouse и/или PostgreSQL
- Опыт работы с AWS S3, Nextcloud и приемом данных из файлов/API
- Понимание шаблонов ETL/ELT, инкрементальных загрузок, идемпотентности и секционирования
- Опыт работы с проверками качества данных, логированием и оповещением
- Опыт (или сильный практический интерес) в агентной/ИИ-ассистированной инженерии для автоматизации повторяющихся рабочих процессов
- Хорошие навыки работы с Git и навыки сотрудничества
- Английский язык: intermediate+ (письменный и устный)
Обязанности:
- Проектирование, разработка и поддержка Airflow DAG для пакетных конвейеров данных
- Создание и улучшение приема данных из S3, Nextcloud, API и реляционных баз данных
- Моделирование и оптимизация таблиц в ClickHouse для производительности и аналитических сценариев
- Внедрение и поддержка проверок качества/сверки данных
- Мониторинг состояния конвейеров, устранение производственных проблем и повышение надежности
- Сотрудничество с аналитиками/BI-стейкхолдерами для предоставления витрин данных и наборов данных для отчетности
- Документирование логики конвейеров, зависимостей и операционных руководств
- Выявление повторяющихся задач DE и внедрение агентных автоматизаций для сокращения ручных усилий при сохранении строгих средств контроля надежности
Приветствуется:
- Опыт работы с пользовательскими операторами/плагинами Airflow
- Знание интеграций оповещений Slack/Telegram
- Опыт работы в доменах с большим объемом данных (fintech, gaming, e-commerce)
- Понимание CI/CD для рабочих процессов данных и инфраструктуры как кода
- Опыт работы с Docker/Kubernetes
- Практический опыт работы с API LLM/агентными фреймворками для внутренних инструментов данных (с оценкой, наблюдаемостью и управлением с участием человека)
Что мы предлагаем:
- Конкурентный компенсационный пакет с поощрениями, основанными на результативности
- Компенсация медицинской страховки
- Спортивные бонусы
- 21 рабочий день оплачиваемого отпуска в год
- 25 оплачиваемых дней больничного в год — без необходимости предоставления больничного листа
- 3 дополнительных оплачиваемых выходных дня в год для личного пользования
- Частичная компенсация сессий психологической поддержки
- Ежегодный образовательный бюджет в размере 600 долларов США
- Оплачиваемые командировки в наш офис на Кипре
Подайте заявку сейчас