Principal Data Platform Engineer (Swedish Ad Platform)

Название: Principal Data Platform Engineer (Swedish Ad Platform) Местоположение: Краков / PL / Удаленно

Руководить техническим проектированием и архитектурой современной платформы данных корпоративного масштаба Определять масштабируемые потоки данных из хранилища событий на основе Iceberg в аналитические и операционные продукты данных Оценивать и выбирать технологии для оркестрации, трансформации, запросов, обслуживания и хранения данных Разрабатывать повторно используемые канонические сущности и модели данных для доменов рекламы, кампаний, инвентаря, биллинга и клиентов Создавать масштабируемые инженерные шаблоны для пакетной и почти реалтайм обработки Создавать надежные и наблюдаемые конвейеры данных для высоконагруженных AdTech-систем Внедрять возможности контроля качества данных, отслеживания происхождения данных, наблюдаемости и сверки Сотрудничать с командами Platform Engineering для внедрения контрактов на данные, контролируемых CI, и стандартов управления данными Определять стратегии изоляции арендаторов, контроля доступа и региональных границ данных Устанавливать стандарты для тестирования, автоматизации развертывания, эволюции схем и версионирования Оптимизировать производительность платформы, масштабируемость и затраты на инфраструктуру Менторить инженеров и способствовать инженерному совершенству команды Тесно сотрудничать с руководством и кросс-функциональными заинтересованными сторонами

8+ лет опыта в проектировании и эксплуатации производственных платформ данных Глубокие знания распределенных систем обработки данных и высоконагруженных событийно-ориентированных архитектур Глубокое понимание современных озерно-складских (lakehouse) архитектур и Apache Iceberg Продвинутые навыки SQL и производственный опыт работы с Python, Java, Scala или аналогичными языками Опыт работы с технологиями распределенной обработки и запросов, такими как Spark, Flink или Trino Глубокие знания моделирования данных, стратегий партиционирования и оптимизации производительности Подтвержденный опыт создания пакетных и почти реалтайм конвейеров данных Практический опыт работы с облачной инфраструктурой AWS Глубокое понимание CI/CD конвейеров, Infrastructure as Code и производственной наблюдаемости Опыт внедрения контрактов на данные, эволюции схем и фреймворков контроля качества данных Способность принимать прагматичные архитектурные решения в новых проектах (greenfield) Английский язык на уровне Upper-Intermediate или выше Сильные коммуникативные навыки и навыки технического лидерства БУДЕТ ПЛЮСОМ Опыт работы в AdTech или других высоконагруженных доменах обработки событий Опыт проектирования многопользовательских SaaS-архитектур данных Знакомство с технологиями семантического слоя Опыт поддержки аналитических и ML/AI нагрузок Понимание нормативных требований к конфиденциальности и требований к резидентности данных

Как будет выглядеть успех в первые шесть месяцев: Запущена первая производственная основа платформы данных. Приняты и задокументированы четкие архитектурные решения. События, поступающие на платформу данных, имеют принудительные контракты. Существуют основные канонические сущности, и они протестированы. Качество данных и отслеживание происхождения данных наблюдаемы. Другие инженеры могут вносить вклад, не вникая во все детали реализации.

Присоединяйтесь к новому проекту, ориентированному на создание платформы данных нового поколения на основе ИИ для глобальной экосистемы AdTech. Мы ищем Principal/Staff Data Platform Engineer, который будет принимать архитектурные решения, устанавливать инженерные стандарты и формировать основу для масштабируемых аналитических возможностей и возможностей ИИ. В составе Sigma Software вы будете сотрудничать с опытными инженерными командами и участвовать в разработке платформы, построенной на основе неизменяемой событийно-ориентированной архитектуры, управляемых контрактов на данные и современных принципов lakehouse. Эта роль идеально подходит для инженера уровня Principal, который любит решать сложные задачи распределенных систем и влиять на стратегию платформы с первого дня. Мы предлагаем возможность работать над крупномасштабными международными продуктами, сотрудничать с высококвалифицированными специалистами и вносить вклад в технически амбициозную среду с долгосрочным потенциалом роста. КЛИЕНТ Наш Клиент — AdTech-компания из Швеции, специализирующаяся на передовых платформах самообслуживаемой рекламы, которые автоматизируют прямые транзакции между рекламодателями и крупными мировыми издателями. Их решения повышают прозрачность и операционную эффективность в цифровой рекламе, и им доверяют всемирно известные бренды, включая TripAdvisor, Bloomberg, The Washington Post, Opera и Dow Jones. Компания обрабатывает миллионы рекламных транзакций по всему миру и активно инвестирует в возможности обработки данных на основе ИИ. ПРОЕКТ Проект фокусируется на создании современной платформы данных с нуля с акцентом на неизменяемые потоки событий, управляемые канонические модели, семантические слои и масштабируемую инфраструктуру аналитики. Платформа будет поддерживать аналитические нагрузки, операционные продукты данных, приложения ИИ и будущие клиентские данные. В качестве Principal / Staff Data Platform Engineer вы будете отвечать за ключевые архитектурные решения, определять масштабируемые инженерные стандарты и помогать в выпуске первой производственной версии платформы в высокомасштабируемой среде AdTech. Ключевые технологии: Apache Iceberg, Spark, Flink, Trino, AWS, Python, Scala, Java, CI/CD, Infrastructure as Code