Старший инженер данных
Удалённо
Мы ищем старшего инженера данных с глубокими знаниями Python и SQL. Вы будете проектировать, реализовывать и оптимизировать конвейеры данных и ETL-процессы, обеспечивая высокую производительность, масштабируемость и надёжность. Это полностью удалённая позиция с гибкими условиями труда.
Обязанности
- Разработка и оптимизация ETL-рабочих процессов с использованием Python и SQL.
- Проектирование и реализация масштабируемых конвейеров данных для обработки различных источников данных.
- Работа с реляционными базами данных (например, PostgreSQL, Oracle) для обеспечения эффективного хранения и извлечения данных.
- Оптимизация SQL-запросов и скриптов Python для повышения производительности и удобства сопровождения.
- Внедрение надёжной обработки ошибок, логирования и мониторинга для конвейеров обработки данных.
- Сотрудничество с кросс-функциональными командами для интеграции и управления источниками данных.
Требования
- Более 5 лет опыта работы в области инженерии данных.
- Экспертные знания Python и SQL — способность писать эффективный, масштабируемый и поддерживаемый код.
- Значительный опыт проектирования ETL-процессов и работы с большими наборами данных.
- Глубокое понимание оптимизации производительности баз данных и запросов.
- Опыт моделирования данных и проектирования схем.
- Знакомство с облачными решениями для хранения данных (Azure, AWS или GCP).
- Сильные навыки решения проблем и способность работать самостоятельно.
Желательно:
- Опыт работы с PySpark, оркестраторами и знание CI/CD для автоматизации процессов развёртывания.
Преимущества
Velvetech входит в ТОП-5 разработческих компаний Иллинойса, США. Вас ждут гибкие условия труда и кооперативная среда. Конкурентная заработная плата. Множество сложных и интересных проектов с новыми возможностями и возможностями для роста, улучшения навыков и компетенций, а также профессиональной сертификации. Внутрифирменное обучение (английский язык, разработка ПО / DevOps / Управление проектами / Дизайн / Бизнес)
