Principal Data Platform Engineer (Swedish Ad Platform)

Должность: Ведущий инженер платформы данных (Шведская рекламная платформа) Местоположение: Вроцлав / Польша / Удаленно

Руководить техническим дизайном и архитектурой современной платформы данных корпоративного масштаба Определять масштабируемые потоки данных из хранилища событий на базе Iceberg в аналитические и операционные продукты данных Оценивать и выбирать технологии для оркестрации, трансформации, запросов, обслуживания и хранения данных Разрабатывать повторно используемые канонические сущности и модели данных для доменов рекламы, кампаний, инвентаря, биллинга и клиентов Создавать масштабируемые инженерные шаблоны для пакетной обработки и обработки в режиме, близком к реальному времени Создавать надежные и наблюдаемые конвейеры данных для высокообъемных рабочих нагрузок AdTech Реализовывать возможности контроля качества данных, отслеживания происхождения данных, наблюдаемости и сверки Сотрудничать с командами Platform Engineering для внедрения контрактов на данные, обеспечиваемых CI, и стандартов управления данными Определять стратегии изоляции арендаторов, контроля доступа и региональных границ данных Создавать стандарты для тестирования, автоматизации развертывания, эволюции схем и версионирования Оптимизировать производительность платформы, масштабируемость и затраты на инфраструктуру Менторить инженеров и способствовать инженерному совершенству в команде Тесно сотрудничать с руководством и кросс-функциональными заинтересованными сторонами

8+ лет опыта в проектировании и эксплуатации производственных платформ данных Глубокие знания распределенных систем данных и архитектур, управляемых событиями с высоким объемом трафика Глубокое понимание современных озерных архитектур (lakehouse) и Apache Iceberg Продвинутые навыки SQL и производственный опыт работы с Python, Java, Scala или аналогичными языками Опыт работы с технологиями распределенной обработки и запросов, такими как Spark, Flink или Trino Глубокие знания моделирования данных, стратегий партиционирования и оптимизации производительности Подтвержденный опыт создания пакетных конвейеров данных и конвейеров данных, близких к реальному времени Практический опыт работы с облачной инфраструктурой AWS Глубокое понимание конвейеров CI/CD, Infrastructure as Code и производственной наблюдаемости Опыт внедрения контрактов на данные, эволюции схем и фреймворков контроля качества данных Способность принимать прагматичные архитектурные решения в условиях "зеленого поля" (greenfield) Английский язык на уровне Upper-Intermediate или выше Сильные коммуникативные навыки и навыки технического лидерства

БУДЕТ ПЛЮСОМ Опыт работы в AdTech или других областях обработки событий с высоким объемом трафика Опыт проектирования многопользовательских SaaS-архитектур данных Знакомство с технологиями семантического слоя Опыт поддержки как аналитических, так и ML/AI рабочих нагрузок Понимание нормативных требований к конфиденциальности и требований к местоположению данных

Как выглядит успех в течение первых шести месяцев: Запущена первая производственная основа данных. Приняты и задокументированы четкие архитектурные решения. События, поступающие на платформу данных, имеют принудительные контракты. Существуют основные канонические сущности, и они протестированы. Качество данных и их происхождение наблюдаемы. Другие инженеры могут вносить свой вклад, не вдаваясь в каждую деталь реализации.

Присоединяйтесь к проекту "зеленого поля", ориентированному на создание платформы данных нового поколения на основе ИИ для глобальной экосистемы AdTech. Мы ищем ведущего/старшего инженера платформы данных, который будет принимать ключевые архитектурные решения, устанавливать инженерные стандарты и формировать основу для масштабируемых аналитических возможностей и возможностей ИИ. В составе Sigma Software вы будете сотрудничать с опытными инженерными командами и вносить вклад в платформу, разработанную на основе неизменяемой событийно-ориентированной архитектуры, управляемых контрактов на данные и современных озерных принципов. Эта роль идеально подходит для инженера уровня Principal, который любит решать сложные задачи в области распределенных систем и влиять на стратегию платформы с первого дня. Мы предлагаем возможность работать над крупномасштабными международными продуктами, сотрудничать с высококвалифицированными специалистами и вносить свой вклад в технически амбициозную среду с потенциалом долгосрочного роста.

ЗАКАЗЧИК Наш Заказчик – шведская AdTech-компания, специализирующаяся на передовых рекламных платформах с самообслуживанием, которые автоматизируют прямые транзакции между рекламодателями и крупными мировыми издателями. Их решения повышают прозрачность и операционную эффективность в цифровой рекламе, и им доверяют всемирно известные бренды, включая TripAdvisor, Bloomberg, The Washington Post, Opera и Dow Jones. Компания обрабатывает миллионы рекламных транзакций по всему миру и активно инвестирует в возможности работы с данными на основе ИИ.

ПРОЕКТ Проект сосредоточен на создании современной платформы данных с нуля, с акцентом на неизменяемые потоки событий, управляемые канонические модели, семантические слои и масштабируемую инфраструктуру аналитики. Платформа будет поддерживать аналитические рабочие нагрузки, операционные продукты данных, приложения ИИ и будущие клиентские возможности работы с данными. В качестве ведущего/старшего инженера платформы данных вы будете отвечать за ключевые архитектурные решения, определять масштабируемые инженерные стандарты и помогать в доставке первой версии платформы, готовой к производству, в высокомасштабируемой среде AdTech.

Ключевые технологии: Apache Iceberg, Spark, Flink, Trino, AWS, Python, Scala, Java, CI/CD, Infrastructure as Code