Название: [Job-31663] Senior Data Developer (Azure/Databricks), Бразилия
Компания: CI&T
Местоположение: Бразилия / удаленно
В CI&T мы помогаем крупным компаниям превращать потенциал ИИ в реальное бизнес-влияние с помощью внедрения ИИ, нативной реализации ИИ и технологически интегрированных бизнес-решений.
Обладая 30-летним опытом в области технологических преобразований, мы ускоряем инновации благодаря опыту в agentic SDLC, модернизации приложений, Data & AI, martech и бизнес-стратегии.
Нас 8 000 CI&Ters в более чем 25 странах, сотрудничающих для создания решений с реальным влиянием. ИИ уже является частью того, как мы работаем, развиваемся и внедряем инновации каждый день.
Важно: если вы проживаете в столичном регионе Кампинас, ваше присутствие в офисах города будет обязательным, согласно действующей политике посещаемости.
Мы ищем человека на должность инженера по данным, который будет отвечать за обеспечение целостности, согласованности и эффективности моделей данных во всей экосистеме, проводя структурные обзоры, определяя стандарты и обеспечивая управление.
Обязанности:
- Разработка и поддержка конвейеров данных (ETL/ELT) в среде Azure с использованием Databricks для обработки и интеграции.
- Круговая перспектива (например, понимание проекта в целом, понимание того, какое влияние конкретное решение может оказать на проект).
- Внедрение практик CI/CD для автоматизации развертывания и версионирования кода в GitHub.
- Моделирование и развитие таблиц в Unity Catalog с применением лучших практик именования и версионирования схем.
- Проектирование и оптимизация моделей данных для обеспечения масштабируемости, производительности и управления.
- Поддержка проектов миграции в облако, обеспечение безопасности, качества и целостности данных.
- Сотрудничество с бизнес-подразделениями и командами по науке о данных для развертывания моделей ИИ в облачной среде.
- Обеспечение качества и согласованности данных с применением методов профилирования данных и мониторинга.
- Документирование процессов, архитектур и лучших практик инженерии данных.
Технические требования:
- Солидный опыт работы с Azure Data Services и Databricks.
- Опыт работы с Databricks с использованием PySpark.
- Опыт работы с архитектурой «медальон».
- Владение Python и SQL для манипулирования и преобразования данных.
- Знания в области CI/CD и версионирования с GitHub.
- Знания в области моделирования аналитических данных (слои приема, подготовки и потребления).
- Опыт работы в проектах миграции в облако.
- Опыт работы с ETL/ELT и интеграцией больших объемов данных.
- Опыт развертывания моделей ИИ и использования таких инструментов, как Azure ML.
- Опыт работы в проектах ИИ и автоматизации конвейеров.
Преимущества:
- Знания в области архитектур, ориентированных на данные, и лучших практик управления.
- Опыт работы в проектах в финансовом контексте.
- Участие в инициативах MDM (Master Data Management).
- Знакомство с Databricks MLflow для управления моделями.
- Работа в средах Data Lake и Data Warehouse.
Наши преимущества:
- Медицинская и стоматологическая страховка;
- Ваучеры на питание и обед;
- Пособие на ребенка;
- Расширенный родительский отпуск;
- Партнерство с фитнес-клубами и специалистами по здоровью и благополучию через Wellhub (Gympass) TotalPass;
- Участие в прибыли и результатах (PLR);
- Страхование жизни;
- Платформа непрерывного обучения (CI&T University);
- Клуб скидок;
- Бесплатная онлайн-платформа, посвященная укреплению физического, психического здоровья и благополучия;
- Курс для беременных и ответственного родительства;
- Партнерство с платформами онлайн-курсов;
- Платформа для изучения языков;
- И многие другие
Подробнее о наших преимуществах здесь:
В CI&T инклюзивность начинается с первого контакта. Если вы являетесь человеком с ограниченными возможностями, важно предоставить медицинское заключение в процессе отбора. Проконсультируйтесь, какие данные должны содержаться в заключении, нажав здесь. Таким образом, мы можем гарантировать поддержку и адаптацию, которых вы заслуживаете. Если у вас еще нет заключительного медицинского заключения, не волнуйтесь: мы можем помочь вам его получить.
У нас есть специальная команда по здоровью и благополучию, специалисты по инклюзии и группы по интересам, которые будут сопровождать вас на всех этапах. Рассчитывайте на нас, чтобы пройти этот путь вместе.
