Senior Data Engineer (Databricks), Brazil

В CI&T мы помогаем крупным компаниям преобразовывать потенциал ИИ в реальное влияние на бизнес с помощью внедрения ИИ, нативной для ИИ разработки и технологических бизнес-решений.

Обладая 30-летним опытом технологических преобразований, мы ускоряем инновации благодаря экспертизе в области agentic SDLC, модернизации приложений, Data & AI, martech и бизнес-стратегии.

Мы — 8000 CI&Ters в более чем 25 странах, сотрудничающих для создания решений с реальным влиянием. ИИ уже является частью того, как мы работаем, развиваемся и внедряем инновации каждый день.

Важно: если вы проживаете в столичном регионе Кампинаса, ваше присутствие в офисах города будет обязательным, в соответствии с действующей политикой посещаемости.

Мы ищем Старшего инженера данных для работы над стратегическим проектом с высоким уровнем влияния, направленным на создание и развитие масштабной и критически важной платформы данных.

На этой должности вы будете отвечать за структурирование и поддержку аналитического слоя данных, разработку надежных конвейеров, моделирование показателей эффективности и обеспечение того, чтобы информация всегда была актуальной, надежной и готовой для поддержки стратегических решений бизнеса.

Обязанности:

• Разработка скриптов и конвейеров для загрузки данных в слой Gold, обеспечивая качество, согласованность и отслеживаемость консолидированной информации;
• Структурирование таблиц с показателями эффективности, использования и доступности платформы, создание аналитических моделей, оптимизированных для потребления бизнес-подразделениями и управленческой командой;
• Обеспечение стандартов качества, версионирования и документирования разработанных конвейеров и моделей данных;
• Тесное взаимодействие с командами продукта, операций и управления, переводя бизнес-потребности в эффективные решения в области инженерии данных.

Требования для этого вызова:

• Значительный опыт в области инженерии данных и создания конвейеров в экосистеме Azure;
• Владение расширенным SQL для манипулирования, трансформации и анализа данных;
• Опыт работы с Python и/или PySpark для разработки скриптов приема и трансформации данных;
• Опыт работы с Azure Databricks (Spark, PySpark и Spark SQL);
• Опыт работы с Azure Data Factory (ADF) для оркестрации и автоматизации конвейеров;
• Опыт работы с KPI и показателями в финансовом секторе (банковское дело);
• Опыт работы с многоуровневой архитектурой (Bronze, Silver, Gold / Medallion) и Delta Lake;
• Знание моделирования данных для аналитики (Star Schema, OBT, таблицы фактов/измерений);
• Знакомство со средами Data Lakehouse и операциями MERGE/UPSERT;
• Опыт работы с качеством и управлением данными.

Преимущества:

• Углубленное знание Delta Lake (time travel, schema evolution, оптимизация производительности);
• Опыт работы с Azure Purview или другими инструментами каталогизации и управления данными;
• Опыт работы с CI/CD для данных (например, Azure DevOps);
• Опыт работы со стримингом данных (Spark Structured Streaming или Azure Event Hubs);
• Опыт работы над крупномасштабными и критически важными проектами;
• Опыт работы с инструментами BI (например, Power BI, Metabase) для проверки показателей;
• Опыт работы с командами growth marketing, поддержка анализа привлечения, активации и удержания клиентов;
• Соответствующие сертификаты Azure (например, DP-203, Databricks Certified Data Engineer);
• Опыт работы с гибкими методологиями.

Наши преимущества:

• Медицинское и стоматологическое страхование;

• Ваучеры на питание и обед;

• Пособие на ребенка (детский сад);

• Расширенный отпуск по уходу за ребенком;

• Партнерство с фитнес-клубами и специалистами по здоровью и благополучию через Wellhub (Gympass) TotalPass;

• Участие в прибыли и результатах (PLR);

• Страхование жизни;

• Платформа непрерывного обучения (CI&T University);

• Клуб скидок;

• Бесплатная онлайн-платформа, посвященная укреплению физического, психического здоровья и благополучия;

• Курс для беременных и ответственного родительства;

• Партнерство с платформами онлайн-курсов;

• Платформа для изучения языков;

• И многие другие

Более подробную информацию о наших преимуществах можно найти здесь:

В CI&T инклюзивность начинается с первого контакта. Если вы человек с ограниченными возможностями, важнопредъявить свою медицинскую справку в ходе отборочного процесса. Узнайте, какие данные должны содержаться в справке, нажав здесь.Таким образом, мы сможем гарантировать поддержку и адаптации, которых вы заслуживаете.Если у вас еще нет справки, подтверждающей инвалидность, не беспокойтесь: мы можем помочь вам ее получить.

У нас есть выделенная команда по охране здоровья и благополучию, специалисты по инклюзивности и группы по интересам, которые будут сопровождать вас на всех этапах. Рассчитывайте на нас, чтобы пройти этот путь вместе.