Senior Data Engineer

Название: Старший Инженер по Данным (Senior Data Engineer) Местоположение: Варшава / пл / Удаленно

Проектирование и создание масштабируемых облачных нативных платформ данных от нуля до продакшена Проектирование и внедрение конвейеров приема данных в режиме почти реального времени с использованием событийно-ориентированных паттернов Определение и применение стандартов платформы данных, включая принципы Data Lake и Lakehouse, медальонную архитектуру и контракты данных Рефакторинг, оптимизация и модернизация скриптов Spark и PySpark для повышения производительности и поддерживаемости Внедрение лучших практик качества кода, тестирования и CI/CD для конвейеров данных Стимулирование внедрения ИИ-инструментов и агентских рабочих процессов в команде Инженеров по Данным Обеспечение качества данных, наблюдаемости, масштабируемости и надежности на всех платформах и конвейерах Проектирование и предоставление инструментов самообслуживания и микросервисов, упрощающих использование платформы Сотрудничество с кросс-функциональными заинтересованными сторонами, включая команды Product, Machine Learning и Data Science Участие в принятии архитектурных решений и инициативах в области технических исследований и разработок

5+ лет профессионального опыта в области Инженерии Данных Сильные навыки разработки на Python и SQL Практический опыт работы с Apache Spark и PySpark, включая оптимизацию запросов и настройку производительности Опыт работы с Databricks или Snowflake Практический опыт работы с как минимум одним основным облачным провайдером, таким как Azure, AWS или GCP Опыт работы с технологиями потоковой обработки, включая Kafka или Spark Structured Streaming Глубокое понимание паттернов ETL/ELT, моделирования данных и концепций хранилищ данных Опыт работы с инструментами оркестрации, такими как Apache Airflow или Azure Data Factory Знание инструментов Infrastructure as Code, включая Terraform Понимание производственных систем, включая наблюдаемость, масштабируемость, надежность и производительность Способность самостоятельно руководить техническими инициативами от концепции до реализации Сильные коммуникативные навыки и навыки сотрудничества Уровень английского языка Upper-Intermediate или выше БУДЕТ ПЛЮСОМ Знакомство с проектированием конвейеров RAG и паттернами интеграции LLM Знание фреймворков и инструментов управления данными, таких как Unity Catalog или Apache Atlas Опыт работы с dbt для трансформации и моделирования данных Знакомство с MLflow, Feature Stores или интеграциями ML-платформ

ЛИЧНЫЙ ПРОФИЛЬ Проактивный и самостоятельный образ мышления Сильное аналитическое и архитектурное мышление Способность работать самостоятельно и брать на себя ответственность за технические решения Страсть к инновациям и современным инженерным практикам Ориентация на обмен знаниями и командный подход Сильные навыки решения проблем

Мы ищем Старшего Инженера по Данным (Senior Data Engineer) в нашу команду Data Engineering, который возьмет на себя ответственность за перспективные, совершенно новые проекты в области данных. Вы будете работать над созданием современных облачных нативных платформ данных, миграцией локальных устаревших систем в облако и созданием архитектурного фундамента для инфраструктуры данных, готовой к ИИ. В этой роли вы будете тесно сотрудничать с командами Machine Learning, Data Science и Product, выступая в качестве ключевого технического сотрудника и лидера мнений. Вы также будете стимулировать исследовательские и опытно-конструкторские работы в области архитектуры агентного ИИ, событийно-ориентированных систем и конвейеров данных, готовых к LLM – превращая архитектурные концепции в производственные решения.