DataOps Engineer

The Wow

Эта роль посвящена эксплуатационному обслуживанию, управлению и жизненному циклу поставки активов данных. В отличие от ролей, ориентированных на инфраструктуру, инженер DataOps отвечает за предоставление доступа пользователям, управление разрешениями на платформе данных, выпуск релизов аналитических конвейеров и наблюдаемость сервисов (мониторинг/оповещение) для обеспечения доступности и соответствия данных без управления базовой облачной или сетевой архитектурой.

Эта роль включает в себя активный мониторинг, разрешение инцидентов, разработку планов предотвращения инцидентов и работу с запросами данных, при этом постоянно совершенствуя наши процессы и системы обработки данных, предоставляя необходимую поддержку, обеспечивающую оптимальное качество данных.

Краткое описание того, чем вы будете заниматься:

Доступ и предоставление ресурсов: Управление и аудит служебных учетных записей, политик AWS IAM для конвейеров данных, схем управления доступом на основе ролей (RBAC), а также управление ролями и разрешениями в Snowflake.

Управление релизами: Выполнение и автоматизация выпусков кода конвейеров данных, логики оркестрации и схем баз данных.

Наблюдаемость приложений: Настройка, мониторинг и оптимизация пороговых значений оповещений конвейеров в Amazon CloudWatch и Coralogix для регистрации сбоев выполнения задач и задержек доставки данных.

Оркестрация приложений: Управление рабочими процессами, расписаниями задач и разрешениями среды с помощью Apache Airflow.

Предотвращение инцидентов: Активная разработка и внедрение стратегий превентивных операций, анализ тенденций системы, узких мест конвейеров и сбоев заданий для устранения системных рисков до нарушения SLA.

Продвинутая инженерия мониторинга и оповещения: Формулирование и поддержка сложных шаблонов наблюдаемости, создание панелей мониторинга в реальном времени и оповещений на основе пороговых значений в Coralogix для сигнализации о задержках, исчерпании ресурсов или аномалиях.

Целостность данных и первоначальная реакция: Выполнение анализа первопричин аномалий конвейеров во время выполнения и сложных ошибок потока данных, сотрудничество с командами инженерии аналитики для разработки постоянных, масштабируемых операционных решений.

Проведение строгих расследований качества данных, выявление несоответствий и внедрение корректирующих действий в сотрудничестве с другими командами.

Сотрудничество в инициативах по инженерии данных, уделяя особое внимание улучшению существующих процессов и разработке новых решений для повышения общего рабочего процесса обработки данных.

Участие в мониторинге и разрешении инцидентов, при необходимости эскалация более сложных проблем во вторую линию поддержки.

Оптимизация ресурсов: Мониторинг времени выполнения запросов и метрик потребления вычислительных ресурсов для выявления неиспользуемых ресурсов, предложение оптимизаций для поддержания технического совершенства и экономической эффективности.

Управление инцидентами и выполнение дежурств по соответствующим технологиям, требуемым для данной роли.

Стимулирование инноваций в Data Operations с помощью ИИ: Проактивное выявление возможностей для использования ИИ, интеллектуальных агентов и автоматизации для оптимизации операций, ускорения расследований инцидентов и повышения надежности платформы. Экспериментирование с новыми технологиями и превращение перспективных идей в практические, эффективные решения.

Кого мы ищем

Обязательно:

Хороший опыт настройки структур безопасности, привилегий интеграции сервисов и управления RBAC в корпоративных уровнях данных (например, Snowflake и AWS IAM).

Подтвержденный опыт управления, развертывания рабочих процессов и устранения сбоев выполнения задач в Apache Airflow.

Продвинутые навыки в инженерии облачных правил мониторинга, логгирования метрик и автоматизированных структур оповещения с использованием Amazon CloudWatch и Coralogix.

Высокая квалификация в написании сложных SQL-запросов для анализа наборов данных и отслеживания метаданных.

Сильные навыки скриптинга на Python или в средах shell для автоматизации операционных чек-листов, административных задач и аудита соответствия.

Желательно:

Знакомство с современными средами обработки данных (AWS Glue, S3, Athena и Redshift).

Опыт работы с концепциями наблюдаемости данных и механизмами контрактов данных.

Хороший опыт анализа данных для выявления тенденций и отслеживания проблем с качеством данных.

Отличное владение английским языком (устно и письменно).

Сильные межличностные и коммуникативные навыки с клиентоориентированным подходом; способность строить позитивные отношения с внутренними клиентами (инженерами по данным, аналитиками и бизнес-стейкхолдерами) и переводить сложные технические операционные проблемы в четкие, действенные обновления.

Сильное стремление к самообучению: высокопроактивный специалист, стремящийся самостоятельно изучать новые технологии, документацию и лучшие отраслевые практики для постоянного развития своих навыков.

Способность расставлять приоритеты, предвидеть риски и работать в режиме многозадачности под давлением.

Владение SQL для запросов и управления наборами данных.

Опыт работы со скриптовыми языками для автоматизации и оптимизации задач.

Знакомство с инструментами мониторинга и методологиями разрешения инцидентов.

Надежность и высокая ответственность при управлении операциями с данными и поддержке командных целей.

Проактивный подход к решению проблем с большим вниманием к деталям.

Приверженность поддержанию высоких стандартов качества и целостности данных.

Наличие действующего сертификата AWS, ориентированного на операции/поддержку (например, AWS Certified SysOps Administrator).

Наличие действующего сертификата Snowflake (например, Snowflake SnowPro Core Certification) для демонстрации глубоких, проверенных знаний платформы и управления данными.

Что мы предлагаем

Подобно американским горкам, жизнь в Betsson иногда может быть молниеносно быстрой, с поворотами и виражами, но всегда ВЕСЕЛОЙ! В конце концов, чего еще ожидать от компании, в которой 75% сотрудников — миллениалы, а всего 1700 человек, представленных в 7 офисах, причем 900 из них находятся только в нашем штаб-квартире на Мальте! Мы признаем, что это может быть не для слабонервных, но если вы инициативны, предприимчивы и ищете острых ощущений, всегда стремясь раздвигать границы и бросать себе вызов, то вы отлично впишетесь.

Принимаете вызов?

Подавая заявку, вы понимаете, что ваши личные данные будут обрабатываться в соответствии с нашей Политикой конфиденциальности