Старший инженер по работе с данными
Ritesh Kumar · США · SENIOR
О роли
Мы ищем Старшего инженера по работе с данными, который присоединится к нашей команде и займется разработкой и оптимизацией конвейеров данных с использованием таких решений, как Apache Hudi, Apache Trino и Azure ADLS.
Ключевые обязанности
- Разработка и оптимизация конвейеров данных с использованием таких решений, как Apache Hudi, Apache Trino, Azure ADLS
- Кросс-функциональное сотрудничество с командами продуктов, аналитики и ИИ для обеспечения того, чтобы данные были стратегическим активом
- Определение технического направления и наставничество инженеров при создании сложных, масштабируемых решений
- Внедрение устойчивых конвейеров с низкой задержкой с глубоким пониманием событийно-ориентированных архитектур и распределенных систем
- Обеспечение надежности и масштабируемости в пакетных и потоковых средах
Требования
- Минимум 10 лет профессионального опыта в области разработки программного обеспечения или работы с данными
- Минимум 4 года опыта работы с конвейерами данных (пакетными и потоковыми)
- Отличный практический опыт работы с Python
- Практический опыт работы с облачными платформами (AWS, Azure или GCP)
- Свободное владение практиками обеспечения качества данных и интеграцией CI/CD
- Прочные знания в области управления данными и оптимизации производительности
- Опыт работы с архитектурами Lakehouse и связанными с ними технологиями
- Отличные навыки сотрудничества и коммуникации
