Sr. Data Engineer

Должность: Старший инженер по обработке данных

Местоположение: Шарлотт, Северная Каролина

Местоположение: Шарлотт, Северная Каролина Занятость: Полная занятость

О нас В Synechron мы верим в силу цифровых технологий для улучшения бизнеса. Наша глобальная консалтинговая фирма сочетает креативность и инновационные технологии для предоставления ведущих в отрасли цифровых решений. Прогрессивные технологии и стратегии оптимизации Synechron охватывают сквозные решения в области искусственного интеллекта, консалтинга, цифровых технологий, облачных вычислений и DevOps, обработки данных и разработки программного обеспечения, обслуживая ряд известных компаний в сфере финансовых услуг и технологий. Благодаря инициативам в области исследований и разработок в наших FinLabs мы разрабатываем решения для модернизации, от моделей искусственного интеллекта и блокчейна до моделей науки о данных, цифрового андеррайтинга, мобильных приложений и многого другого. За последние 20+ лет наша компания получила множество наград как работодатель, признающих нашу приверженность нашим талантливым командам. Обладая первоклассными клиентами, Synechron насчитывает более 17 000 сотрудников по всему миру и имеет 58 офисов в 22 странах на ключевых мировых рынках.

Наша задача Мы ищем высококвалифицированного Старшего инженера по обработке данных для проектирования, разработки, оптимизации и поддержки крупномасштабных корпоративных решений по интеграции и хранению данных. Идеальный кандидат должен иметь большой опыт в разработке ETL/ELT, моделировании данных, работе с базами данных, облачными платформами данных и современных методах обработки данных. Эта роль будет включать сотрудничество с бизнес-стейкхолдерами, аналитиками данных, архитекторами данных и командами разработчиков приложений для предоставления надежных, масштабируемых, безопасных и высокопроизводительных конвейеров данных и аналитических решений, особенно для сред финансовой отчетности и корпоративной отчетности.

Дополнительная информация* Базовая заработная плата для этой должности будет варьироваться в зависимости от географии и других факторов. В соответствии с законодательством, базовая заработная плата для этой должности, если она будет заполнена в Шарлотт, Северная Каролина, составляет $110 000 - $120 000 в год + льготы (см. ниже).

Должность

Обязанности: Проектирование и внедрение масштабируемых, безопасных и управляемых конвейеров данных для финансовой аналитики и корпоративной отчетности. Создание и поддержка архитектур Lakehouse с использованием уровней данных Bronze, Silver и Gold. Разработка высокопроизводительных процессов приема и преобразования данных в корпоративном масштабе. Создание и оптимизация пакетных и почти в реальном времени конвейеров данных. Разработка масштабируемых решений по интеграции данных с использованием инструментов ETL/ELT и облачных технологий. Выполнение профилирования, очистки, валидации, сверки данных и оценки качества данных. Проектирование и внедрение моделей данных, включая схемы «звезда» и «снежинка». Оптимизация SQL-запросов, производительности баз данных, обработки данных и рабочих процессов ETL для сред с высоким объемом данных. Интеграция данных из реляционных баз данных, API, файлов, SaaS-приложений и других корпоративных источников данных. Сотрудничество с бизнес-пользователями, аналитиками данных, архитекторами и командами разработчиков для понимания требований к отчетности и аналитике. Преобразование бизнес-требований в технические решения по данным и многократно используемые конвейеры данных. Внедрение механизмов мониторинга, логирования, оповещения и операционной поддержки для конвейеров данных. Установление и обеспечение соблюдения стандартов управления данными, безопасности, контроля доступа, конфиденциальности и соответствия требованиям. Устранение сбоев конвейеров данных, проблем с производительностью, расхождений в данных и производственных инцидентов. Ведение технической документации, словарей данных, спецификаций преобразования данных источник-приемник и спецификаций проектирования конвейеров. Участие в обзорах кода, тестировании, развертывании и непрерывном совершенствовании процессов обработки данных.

Требования: Степень бакалавра в области компьютерных наук, информационных технологий, инженерии, науки о данных или смежной области. Опыт работы в области обработки данных, разработки ETL/ELT, хранилищ данных или смежной области. Отличное знание SQL и опыт работы с реляционными базами данных. Практический опыт разработки конвейеров данных с использованием таких технологий, как: Apache Spark Python SQL Платформы ETL/ELT Инструменты оркестрации рабочих процессов Опыт работы с облачными платформами данных, такими как: Microsoft Azure Amazon Web Services Google Cloud Platform Опыт проектирования и внедрения хранилищ данных, озер данных и архитектур Lakehouse. Глубокое понимание концепций моделирования данных, включая многомерное моделирование, таблицы фактов и измерений, медленно меняющиеся измерения, схемы «звезда» и «снежинка». Опыт работы с пакетной обработкой и конвейерами данных в режиме почти реального времени или потоковой передачи. Знание практик управления качеством данных, валидации данных, сверки, метаданных и управления данными. Опыт работы с системами контроля версий, такими как Git. Осведомленность о CI/CD, автоматизированном тестировании, конвейерах развертывания и автоматизации инфраструктуры. Сильные аналитические способности, навыки устранения неполадок, коммуникации и решения проблем. Опыт работы с облачными службами данных, такими как: Databricks Azure Data Factory Azure Synapse Analytics Amazon Redshift AWS Glue Amazon EMR Google BigQuery Google Cloud Dataflow Опыт работы с Delta Lake, Apache Iceberg или Apache Hudi. Знание Apache Kafka, Azure Event Hubs, Amazon Kinesis или других потоковых технологий. Опыт работы с Airflow, Azure Data Factory, Dagster, Prefect или аналогичными инструментами оркестрации. Осведомленность о dbt или других современных фреймворках ELT. Опыт работы с Power BI, Tableau или другими платформами бизнес-аналитики. Знание технологий контейнеризации и развертывания, таких как Docker и Kubernetes. Осведомленность о практиках DevOps и принципах безопасности облачных вычислений. Опыт работы с финансовыми, бухгалтерскими, банковскими или нормативными данными является плюсом.

Мы предлагаем: Высококонкурентный пакет вознаграждения и льгот. Международная организация с 58 офисами в 22 странах и возможностью работы за границей. 10 дней оплачиваемого ежегодного отпуска (плюс больничные и государственные праздники). Планы отпуска по уходу за ребенком для матери и отца. Комплексный страховой план, включающий медицинское страхование, стоматологическое страхование, страхование зрения, страхование жизни, а также страхование от временной/постоянной нетрудоспособности (планы варьируются в зависимости от региона). Планы пенсионных накоплений. Политика сертификации высшего образования. Коммутационные льготы (варьируются в зависимости от региона). Широкие возможности для обучения, с акцентом на навыки, предметные знания и личное развитие. Доступ к Udemy for Business по запросу для всех сотрудников Synechron с бесплатным доступом к более чем 5000 отобранным курсам. Возможности наставничества с опытными коллегами из наших групп Financial Innovation Labs (FinLabs) и Center of Excellences (CoE). Передовые проекты в ведущих мировых банках первого уровня, финансовых учреждениях и страховых компаниях. Плоская и доступная организация. По-настоящему разнообразная, веселая и глобальная рабочая культура.

ЗАЯВЛЕНИЕ SYNECHRON О РАЗНООБРАЗИИ И ВКЛЮЧЕНИИ Разнообразие и инклюзивность являются основой нашей культуры, и Synechron гордится тем, что является работодателем с равными возможностями и соблюдает политику позитивных действий. Наша инициатива в области разнообразия, равенства и инклюзивности (DEI) «Same Difference» направлена на создание инклюзивной культуры, содействие равенству, разнообразию и уважительной среде для всех. Мы твердо верим, что разнообразный кадровый состав помогает строить более сильные, успешные предприятия как глобальная компания. Мы призываем кандидатов из различных слоев общества, рас, этнической принадлежности, религии, возраста, семейного положения, пола, сексуальной ориентации или инвалидности подавать заявки. Мы расширяем возможности наших сотрудников по всему миру, предлагая гибкие условия труда, наставничество, внутреннюю мобильность, программы обучения и развития и многое другое. Все решения о найме в Synechron основаны на потребностях бизнеса, требованиях к работе и квалификации отдельных лиц, независимо от пола кандидата, гендерной идентичности, сексуальной ориентации, расы, этнической принадлежности, инвалидности или статуса ветерана, или любой другой характеристики, защищенной законом.

Уведомление о подаче заявления кандидатом