Місцезнаходження: Львів / ua / Remote
Обов'язки
- Керувати технічним дизайном та архітектурою сучасної корпоративної платформи даних
- Визначати масштабовані потоки даних від сховища подій на основі Iceberg до аналітичних та операційних продуктів даних
- Оцінювати та вибирати технології для оркестрації, трансформації, запитів, обслуговування та зберігання
- Розробляти багаторазові канонічні сутності та моделі даних у доменах реклами, кампаній, інвентарю, білінгу та клієнтів
- Впроваджувати масштабовані інженерні патерни для пакетної обробки та обробки майже в реальному часі
- Створювати надійні та спостережувані конвеєри даних для високонавантажених AdTech завдань
- Впроваджувати можливості якості даних, відстеження походження даних, спостережуваності та узгодження
- Співпрацювати з командами Platform Engineering для впровадження контрактів даних, примусово застосованих CI, та стандартів управління
- Визначати стратегії ізоляції орендарів, контролю доступу та регіональних меж даних
- Встановлювати стандарти для тестування, автоматизації розгортання, еволюції схем та версіонування
- Оптимізувати продуктивність платформи, масштабованість та витрати на інфраструктуру
- Наставляти інженерів та сприяти досконалості інженерії в команді
- Тісно співпрацювати з керівництвом та міжфункціональними зацікавленими сторонами
Вимоги
- 8+ років досвіду проектування та експлуатації платформ даних виробничого класу
- Глибокі знання розподілених систем даних та архітектур з високим обсягом подій
- Глибоке розуміння сучасних архітектур lakehouse та Apache Iceberg
- Розширені навички SQL та досвід роботи з Python, Java, Scala або подібними мовами у виробничих середовищах
- Досвід роботи з технологіями розподіленої обробки та запитів, такими як Spark, Flink або Trino
- Глибокі знання моделювання даних, стратегій партиціонування та оптимізації продуктивності
- Підтверджений досвід створення пакетних конвеєрів даних та конвеєрів майже в реальному часі
- Практичний досвід роботи з хмарною інфраструктурою AWS
- Глибоке розуміння конвеєрів CI/CD, Infrastructure as Code та виробничої спостережуваності
- Досвід впровадження контрактів даних, еволюції схем та фреймворків якості даних
- Здатність приймати прагматичні архітектурні рішення в середовищах greenfield
- Рівень англійської Upper-Intermediate або вище
- Сильні комунікативні навички та навички технічного лідерства
Буде плюсом
- Досвід роботи в AdTech або інших доменах обробки великої кількості подій
- Досвід проектування багатокористувацьких SaaS архітектур даних
- Знайомство з технологіями семантичного рівня
- Досвід підтримки як аналітичних, так і ML/AI навантажень
- Розуміння правил конфіденційності та вимог до місцезнаходження даних
Як виглядає успіх протягом перших шести місяців
- Перша виробнича основа даних працює.
- Прийнято та задокументовано чіткі архітектурні рішення.
- Події, що надходять на платформу даних, мають обов'язкові контракти.
- Існують та протестовані основні канонічні сутності.
- Якість даних та відстеження походження даних є спостережуваними.
- Інші інженери можуть робити внесок, не потребуючи розуміння кожної деталі реалізації.
Приєднуйтесь до greenfield ініціативи, спрямованої на створення платформи даних наступного покоління з пріоритетом AI для глобальної екосистеми AdTech. Ми шукаємо Principal/Staff Data Platform Engineer, який буде керувати архітектурними рішеннями, встановлювати інженерні стандарти та формувати основу для масштабованих аналітичних та AI можливостей.
Як частина Sigma Software, ви будете співпрацювати з досвідченими інженерними командами та робити внесок у платформу, розроблену на основі незмінної архітектури, керованої подіями, керованих контрактів даних та сучасних принципів lakehouse. Ця роль ідеально підходить для інженера рівня Principal, який любить вирішувати складні завдання розподілених систем та впливати на стратегію платформи з першого дня.
Ми пропонуємо можливість працювати над великомасштабними міжнародними продуктами, співпрацювати з висококваліфікованими фахівцями та робити внесок у технічно амбітне середовище з довгостроковим потенціалом зростання.
Замовник
Наш Замовник – це шведська AdTech компанія, що спеціалізується на передових платформах самообслуговування реклами, які автоматизують прямі транзакції між рекламодавцями та основними світовими видавцями. Їхні рішення підвищують прозорість та операційну ефективність у цифровій рекламі, і їм довіряють всесвітньо відомі бренди, включаючи TripAdvisor, Bloomberg, The Washington Post, Opera та Dow Jones. Компанія обробляє мільйони рекламних транзакцій по всьому світу і активно інвестує в AI-керовані можливості даних.
Проект
Проект зосереджений на створенні сучасної платформи даних з нуля з акцентом на незмінні потоки подій, керовані канонічні моделі, семантичні рівні та масштабовану інфраструктуру аналітики. Платформа підтримуватиме аналітичні навантаження, операційні продукти даних, AI-додатки та майбутні взаємодії з даними, орієнтовані на клієнта.
Як Principal / Staff Data Platform Engineer, ви будете відповідати за ключові архітектурні рішення, визначати масштабовані інженерні стандарти та допомагати впроваджувати першу версію платформи, готову до виробництва, у високомасштабному AdTech середовищі.
Ключові технології
Apache Iceberg, Spark, Flink, Trino, AWS, Python, Scala, Java, CI/CD, Infrastructure as Code
