Старший Инженер по Данным – Финансовые Данные
Местоположение: Грузия
Тип занятости: Полный рабочий день
О Роли
Мы ищем Старшего Инженера по Данным, который присоединится к нашей растущей команде по работе с данными и возьмет на себя ответственность за наше хранилище финансовых данных, платформу обработки данных в реальном времени и инициативы по управлению данными.
Вы будете работать над архитектурой DWH, потоковой обработкой данных в реальном времени, качеством данных и моделированием финансовых данных, поддерживая критически важные сценарии использования, связанные с рисками, транзакциями и бизнес-аналитикой.
Ключевые Обязанности
- Проектирование и разработка хранилища финансовых данных, охватывающего уровни ODS, DWD, DWS и ADS.
- Создание масштабируемых моделей данных для доменов пользователей, транзакций, погашений и рисков.
- Проектирование и разработка конвейеров данных в реальном времени с использованием Kafka и Flink.
- Поддержка функций оценки рисков в реальном времени, мониторинга транзакций и операционных панелей управления.
- Обеспечение согласованности между пакетными и потоковыми данными в реальном времени посредством унифицированных архитектур.
- Создание Единого Источника Правды (SSOT) для ключевых бизнес-KPI.
- Создание фреймворков для управления данными, метаданными и контроля качества данных.
- Внедрение автоматизированного мониторинга и проверок качества для пакетных и потоковых конвейеров.
Требования
- 5+ лет опыта работы в области Инженерии Данных / Big Data.
- Глубокий практический опыт работы с Hive, Spark и Flink.
- Глубокое понимание архитектуры DWH и многоуровневого подхода ODS / DWD / DWS / ADS.
- Опыт работы в производственной среде с Kafka, Flink или аналогичными потоковыми технологиями.
- Опыт работы с управлением состоянием, обработкой exactly-once и обработкой запаздывающих данных.
- Значительный опыт в ETL, моделировании данных и оптимизации.
- Опыт построения фреймворков для управления данными и контроля качества данных.
- Обязательно: Значительный опыт работы в банковской сфере, финтехе, платежах, кредитовании, кредитном скоринге или управлении финансовыми рисками.
- Хорошее понимание процессов выдачи кредитов, погашений, просрочек и данных о рисках.
