Должность: GCP Data Engineer | BPCE-SI
Местоположение: Португалия / pt
Natixis в Португалии в настоящее время ищет инженеров данных Google Cloud Platform (GCP) для присоединения к команде BPCE SI (BPCE Solutions Informatiques) в департаменте ИТ (информационные технологии) для работы в гибридной модели в офисе в Порту или Лиссабоне.
Обязанности
Миграция данных и баз данных:
- Активное участие в проектировании и выполнении стратегии миграции данных и ETL-процессов из SQL Server в GCP.
- Разработка и оптимизация скриптов и конвейеров для эффективной передачи и преобразования данных в BigQuery.
Проектирование и разработка конвейеров данных в GCP:
- Проектирование, разработка и поддержка надежных и высокопроизводительных ETL/ELT-конвейеров в GCP, замена или перестройка существующих потоков.
- Оркестрация и планирование этих конвейеров с использованием Google Cloud Composer (или Apache Airflow) для обеспечения надежной миграции и операционализации.
Управление базами данных и оптимизация в GCP:
- Разработка и оптимизация сложных SQL-запросов для BigQuery с учетом специфики миграции с SQL Server на BigQuery (например, оптимизация партиционирования, кластеризации).
- Участие в проектировании и внедрении оптимизированных схем данных для BigQuery, адаптированных к новым облачным архитектурам.
Разработка и автоматизация:
- Использование Python для разработки скриптов автоматизации задач миграции, преобразования данных и интеграции с другими сервисами GCP.
- Внедрение процессов для обеспечения качества и целостности данных во время и после миграции.
Сотрудничество и поддержка:
- Тесное сотрудничество с текущими командами (администраторы SQL Server, аналитики) для понимания существующей среды и облегчения перехода.
- Обмен информацией с конечными пользователями (бизнес-подразделения, специалисты по данным) для понимания их потребностей и обеспечения соответствия новой платформы их ожиданиям.
- Участие в обзорах кода, лучших практиках разработки и стратегиях тестирования для новой платформы.
- Обеспечение мониторинга, отладки и устранения инцидентов, связанных с конвейерами данных, на этапе перехода и после развертывания в продакшене.
Технологический обзор и оптимизация:
- Быть в курсе лучших практик миграции и последних разработок в Google Cloud Platform.
- Предлагать улучшения и оптимизации для новой платформы данных в GCP.
Hard skills (Технические навыки):
- Владение Google Cloud Platform (GCP): BigQuery: Значительный опыт в проектировании схем, написании сложных запросов (SQL), оптимизации производительности и управлении затратами в облачном контексте.
- Cloud Composer / Apache Airflow: Прочный опыт в создании, планировании, мониторинге и отладке DAG для оркестрации потоков данных, особенно для процессов миграции и интеграции.
- SQL: Отличное владение языком SQL. Опыт работы с SQL Server является плюсом, но, что более важно, способность адаптировать и оптимизировать SQL для BigQuery.
- Python: Глубокое владение языком Python для разработки скриптов (миграция, автоматизация, преобразование данных) и взаимодействия с API GCP.
- Миграция данных: Опыт или глубокое понимание проблем и методологий миграции баз данных из локальной среды (SQL Server) в облачную среду (GCP).
- Аналитические навыки и навыки решения проблем: Способность анализировать существующие системы (SQL Server), понимать потребности бизнеса, проектировать решения на GCP и решать сложные проблемы, связанные с миграцией и работой конвейеров.
- Хорошие коммуникативные навыки на английском языке (требуется уровень B2).
Дополнительные навыки (Желательно):
- Прямое знание SQL Server (архитектура, T-SQL, базовое администрирование).
- Опыт работы с другими сервисами GCP, связанными с миграцией и интеграцией данных (Storage, Dataflow и т. д.).
- Знание специфических инструментов и стратегий миграции GCP (например, Database Migration Service).
- Опыт работы с инструментами визуализации данных (Power BI).
- Понимание концепций Data Warehousing и моделирования данных (Data Vault).
- Опыт работы с системами контроля версий.
Soft skills (Гибкие навыки):
- Автономность, тщательность, организаторские способности, умение работать в команде, техническое любопытство и способность адаптироваться к новой среде.
Мы будем рассматривать только резюме на английском языке.
Наше рабочее место отражает живой дух наших локаций, благодаря таким инициативам, как Бюджет на Зеленый Транспорт, электровелосипеды и гибкая Гибридная Политика Работы. Мы заботимся о благополучии с помощью Honolulu Wellness Club, молельной комнаты, комнаты для кормящих матерей и тематических зон, вдохновляющих на творчество и сотрудничество. Благодаря нашим стратегиям ESG и DEI, мы стремимся быть инклюзивными, заботливыми и справедливыми, гарантируя, что каждый голос будет услышан и оценен.
Natixis в Португалии — это Центр Экспертизы, чья миссия — трансформировать традиционное банковское дело путем разработки инновационных решений для бизнеса, операций и рабочей культуры Groupe BPCE по всему миру.
Будучи частью международного подразделения Groupe BPCE, Natixis в Португалии разрабатывает и поставляет решения для двух своих основных направлений — Корпоративного и Инвестиционного Банкинга, а также Управления Активами и Капиталом, — а также сквозные услуги, поддерживающие все подразделения Группы.
Команды, насчитывающие более 3000 сотрудников, представляющих 46 национальностей, работают в сферах информационных технологий, вспомогательной банковской деятельности и соответствия нормативным требованиям, интегрировано, инклюзивно и межфункционально, поддерживая все направления бизнеса и платформы Группы.
Разрушительный образ мышления и культура близости и гибкости определяют команду Natixis в Португалии и отражают миссию компании по преобразованию традиционного банковского дела в глобальном масштабе: идеальное соответствие динамике и предпринимательской экосистеме Португалии.
