Data Engineer Lead

Мы ищем ведущего инженера по работе с данными (Lead Data Engineer) с глубокими знаниями SQL, dbt и Athena, а также с опытом создания современных решений для трансформации данных и ELT. Опыт работы с сервисами данных AWS будет плюсом, но основной упор будет сделан на разработку и оптимизацию SQL-запросов Athena и рабочих процессов dbt.

Это руководящая должность, предполагающая непосредственное взаимодействие с клиентами, идеально подходящая для инженеров, которые сочетают глубокие технические знания с отличными коммуникативными навыками и проактивным подходом. Вы будете играть ключевую роль в создании надежных, масштабируемых и высококачественных конвейеров данных, которые поддерживают критически важные бизнес-процессы и аналитические рабочие процессы.

Blend — ведущий поставщик услуг в области искусственного интеллекта, стремящийся к совместному созданию значимого влияния для своих клиентов с помощью науки о данных, ИИ, технологий и людей. Миссия Blend — подпитывать смелые видения, решая значимые задачи путем беспрепятственного согласования человеческого опыта с искусственным интеллектом. Компания стремится раскрыть ценность и стимулировать инновации для своих клиентов, используя лучших в своем классе специалистов и стратегию, основанную на данных. Мы верим, что сила людей и ИИ может оказать значительное влияние на ваш мир, создавая более полноценную работу и проекты для наших сотрудников и клиентов.

• Руководить проектированием и внедрением решений по приему и трансформации данных с использованием SQL и dbt, обеспечивая масштабируемость, надежность и удобство сопровождения
• Отвечать за разработку комплексных ELT-конвейеров с использованием dbt и Athena для трансформации и обработки данных из различных источников
• Проектировать и обеспечивать соблюдение фреймворков качества данных, включая правила валидации, стратегии тестирования и мониторинг
• Применять и продвигать лучшие практики Medallion Architecture (Bronze, Silver, Gold) в конвейерах данных
• Разрабатывать и оптимизировать SQL-запросы Athena и модели dbt для поддержки масштабируемой трансформации данных и аналитических рабочих процессов
• Разрабатывать и улучшать фреймворки валидации и приема данных, включая компоненты пользовательского интерфейса (на базе Streamlit), при необходимости
• Выступать в качестве технического лидера, направляя лучшие практики в области SQL, dbt, инженерии данных, управления данными и надежности конвейеров
• Проактивно выявлять риски, узкие места и проблемы с качеством данных, а также внедрять стратегии их устранения до того, как они повлияют на результат
• Продвигать документирование и постоянное совершенствование процессов платформы данных

Что мы ищем?

• Опыт работы в сфере инженерии данных более 5 лет (ожидается сильный опыт на уровне senior или опыт лидера)
• Глубокий практический опыт работы с SQL (Обязательно)
• Глубокий практический опыт работы с dbt (Обязательно)
• Богатый опыт создания ELT-конвейеров и решений для трансформации данных
• Богатый опыт работы с AWS Athena и написания сложных SQL-запросов
• Прочное понимание моделирования данных и обработки больших объемов данных
• Опыт работы с сервисами и платформами данных AWS (Плюс)
• Опыт работы с такими инструментами, как Glue, S3, EMR, Lambda, Terraform или CloudFormation (Плюс)

📚 Возможности обучения:

• Сертификация AWS (мы являемся партнерами AWS), Databricks и Snowflake
• Доступ к AI-курсам для ознакомления с новейшими технологиями
• Учебные планы, курсы и дополнительные сертификаты, разработанные специально для вашей роли
• Доступ к Udemy Business, предлагающему тысячи курсов для развития ваших технических и гибких навыков
• Уроки английского языка для поддержки вашего профессионального общения

🛫 Возможности поездок для посещения отраслевых конференций и встреч с клиентами.

👩‍🏫 Наставничество и развитие:

• Планы карьерного роста и программы наставничества, которые помогут вам проложить свой путь

🎁 Праздники и поддержка:

• Подарки к особым датам для празднования дней рождения, годовщин работы и других личных событий
• Оборудование, предоставляемое компанией
• Гибкие варианты работы, которые помогут вам найти правильный баланс

Другие преимущества могут варьироваться в зависимости от вашего местоположения в LATAM. Подробную информацию о преимуществах, применимых к вашему конкретному местоположению, можно получить у одного из наших рекрутеров.