Data Quality Engineer

О чем эта позиция? Мы ищем инженера по качеству данных (Data Quality Engineer) с большим опытом работы с Azure и Databricks для обеспечения качества, надежности и согласованности данных на современных платформах данных. Эта роль сосредоточена на проверке конвейеров данных, внедрении автоматизированных проверок качества и тесном сотрудничестве с командами Data Engineering и бизнес-командами для гарантии точности и готовности к производству наборов данных. Разрабатывать и внедрять фреймворк качества данных в слоях Bronze, Silver и Gold — определяя правила проверки, допустимые отклонения и стандарты оповещения. Создавать и поддерживать автоматизированные проверки качества данных в конвейерах Databricks — подсчет строк, проверки на NULL, ссылочную целостность, проверку схемы и утверждения бизнес-правил. Отвечать за сверку данных между исходными системами и слоями Databricks — обеспечивая точное попадание исходных данных и ожидаемые результаты преобразований. Проверять результаты разрешения идентификации в слое Silver — анализируя коэффициенты совпадения, исследуя ложноположительные и ложноотрицательные результаты и гарантируя правильное присвоение идентификаторов предприятия различным группам исходных данных. Выполнять сквозное тестирование конвейеров — проверяя, что данные корректно проходят от загрузки до слоя Gold, и что последующие отчеты отражают точные данные. Сотрудничать с инженерами данных для определения критериев приемки для конвейера каждого спринта и результатов модели данных перед их продвижением в производство. Поддерживать UAT с бизнес-стейкхолдерами клиента — помогая им проверять, что результаты слоя Gold соответствуют их требованиям к отчетности. Документировать все процессы QA, результаты тестирования и выводы о качестве данных в формате, который может быть передан команде клиента по завершении проекта. Отслеживать состояние конвейера после развертывания — исследуя и классифицируя инциденты с качеством данных и работая с инженерами над быстрым устранением коренных причин.

Опыт работы с платформами данных на базе Azure, включая Databricks. Глубокое понимание фреймворков качества данных и методологий тестирования конвейеров данных. Опыт проверки процессов ETL/ELT и работы со слоистыми архитектурами (Bronze, Silver, Gold). Уверенные навыки SQL и опыт анализа больших наборов данных. Опыт внедрения автоматизированных процессов проверки данных и сверки. Знакомство с мониторингом конвейеров данных, оповещением и устранением неполадок. Способность к сотрудничеству с инженерами данных и бизнес-стейкхолдерами. Сильное аналитическое мышление и внимание к деталям. Опыт документирования процессов QA и результатов в структурированном виде.

Что насчет языков? Английский: Продвинутый (требуется для эффективного общения с глобальными командами). Какой у меня должен быть опыт? 3+ года опыта работы в областях Data Quality, Data Engineering или Data Analysis.

Наши преимущества и льготы: 📚 Обучающие возможности: Сертификация AWS (мы партнеры AWS), Databricks и Snowflake. Доступ к курсам по ИИ для изучения новейших технологий. Учебные планы, курсы и дополнительные сертификации, соответствующие вашей роли. Доступ к Udemy Business, предлагающему тысячи курсов для развития ваших технических и гибких навыков. Уроки английского языка для поддержки вашего профессионального общения. 👨🏽‍💻 Возможности для поездок для участия в отраслевых конференциях и встреч с клиентами. 👩‍🏫 Менторство и развитие: Планы карьерного развития и программы наставничества для формирования вашего пути. 🎁 Праздники и поддержка: Награды к особым датам для празднования дней рождения, годовщин работы и других личных вех. Оборудование, предоставляемое компанией. ⚖️ Гибкие варианты работы, чтобы помочь вам найти правильный баланс. Другие льготы могут варьироваться в зависимости от вашего местоположения в LATAM. Для получения подробной информации о льготах, применимых к вашему конкретному местоположению, проконсультируйтесь с одним из наших рекрутеров.

Итак, каковы следующие шаги? Наша команда очень хочет узнать о вас! Отправьте нам свое резюме или профиль LinkedIn ниже, и мы рассмотрим возможность сотрудничества!

Blend — ведущий поставщик услуг в области ИИ, стремящийся совместно создавать значимое влияние для своих клиентов с помощью науки о данных, ИИ, технологий и людей. Имея миссию воплощать в жизнь смелые видения, Blend решает значительные проблемы, беспрепятственно согласовывая человеческий опыт с искусственным интеллектом. Компания стремится раскрывать ценность и способствовать инновациям для своих клиентов, используя первоклассных специалистов и стратегию, основанную на данных. Мы верим, что сила людей и ИИ может оказать значительное влияние на ваш мир, создавая более полную работу и проекты для наших сотрудников и клиентов. Для получения дополнительной информации посетите Blend360. Мы ищем инженера по качеству данных (Data Quality Engineer) для внесения вклада в наш следующий уровень роста и расширения.