Engenheiro(a) de Dados Mid

Название: [Job - 31856] Mid Data Developer (Azure + Databricks), Бразилия Компания: CI&T Местоположение: Бразилия / удаленно

В CI&T мы помогаем крупным компаниям превращать потенциал ИИ в реальное бизнес-влияние с помощью развертывания ИИ, нативной ИИ-разработки и технологических бизнес-решений. Обладая 30-летним опытом в области технологических трансформаций, мы ускоряем инновации благодаря опыту в области agentic SDLC, модернизации приложений, Data & AI, martech и бизнес-стратегии. Нас 8000 CI&Ters в более чем 25 странах, сотрудничающих над созданием решений с реальным влиянием. ИИ уже является частью того, как мы работаем, развиваемся и внедряем инновации каждый день. Важно: если вы проживаете в столичном регионе Кампинас, ваше присутствие в офисах города будет обязательным, согласно действующей политике посещаемости.

Мы ищем инженера данных среднего уровня (Mid Data Engineer) для работы над созданием современных решений для данных, внося вклад в разработку масштабируемых и ориентированных на продукты архитектур. Мы ищем профессионала с большим опытом в области инженерии данных, распределенной обработки и облачных архитектур, способного руководить техническими инициативами и поддерживать развитие платформы данных.

Обязанности:

• Конвейеры и ETL/ELT: Создание, поддержка и оптимизация надежных конвейеров данных с акцентом на низкую задержку, отказоустойчивость и лучшие практики Data Quality и наблюдаемости.
• Big Data и распределенная обработка: Разработка масштабируемых путей данных с использованием Apache Spark / PySpark и Databricks, обеспечение эффективных стратегий секционирования и оптимизации затрат.
• Моделирование и хранение: Работа над структурированием и управлением данными с использованием SQL Server и Delta Lake.
• Культура DevOps: Применение версионирования с помощью Git, создание процедур CI/CD для автоматизации развертываний и проведение постоянного мониторинга процедур в производственной среде.
• Решение инцидентов: Исследование сбоев, проведение анализа первопричин и работа над постоянным улучшением производственных процедур.

Технические требования:

• Опыт работы в инженерии данных.
• Опыт работы в производственных средах.
• Опыт работы с большими объемами данных.
• Участие в проектах миграции, модернизации или создания озер данных (data lakes).
• Способность исследовать инциденты и проводить анализ первопричин.

Преимущество:

• Опыт работы над проектами ИИ и автоматизации конвейеров.
• Знание архитектур, ориентированных на данные, и лучших практик управления данными (data governance).
• Знакомство с Databricks MLflow для управления моделями.
• Опыт работы в средах Data Lake и Data Warehouse.

Наши преимущества:

• Медицинская и стоматологическая страховка;
• Ваучеры на питание и обед;
• Пособие на ребенка;
• Расширенный отпуск по уходу за ребенком;
• Партнерство с фитнес-клубами и специалистами по здоровью и благополучию через Wellhub (Gympass) TotalPass;
• Участие в прибыли и результатах (PLR);
• Страхование жизни;
• Платформа непрерывного обучения (CI&T University);
• Клуб скидок;
• Бесплатная онлайн-платформа, посвященная продвижению физического и психического здоровья, а также благополучия;
• Курс для беременных и ответственного родительства;
• Партнерство с платформами онлайн-курсов;
• Платформа для изучения языков;
• И многое другое

Подробнее о наших преимуществах здесь:

В CI&T инклюзивность начинается с первого контакта. Если вы человек с ограниченными возможностями, важно представить медицинское заключение во время процесса отбора. Ознакомьтесь с тем, какие данные должны быть в заключении, нажав здесь. Таким образом, мы можем гарантировать поддержку и адаптации, которых вы заслуживаете. Если у вас еще нет классифицирующего заключения, не беспокойтесь: мы можем помочь вам его получить.

У нас есть выделенная команда по здоровью и благополучию, специалисты по инклюзии и группы по интересам, которые будут с вами на всех этапах. Рассчитывайте на нас, чтобы пройти этот путь вместе.