Детали

Грейд

Senior

Опыт работы

от 8 лет

Уровень английского

B2, выше среднего

Сопроводительное письмо к вакансии

Письмо на почту или сообщение рекрутеру в Telegram

О вакансии

BlackStone eIT ищет опытного Старшего инженера по платформам данных для руководства проектированием, разработкой и обслуживанием наших корпоративных платформ данных. В этой роли вы будете обеспечивать масштабируемость, надежность и оптимизацию нашей инфраструктуры данных для поддержки передовой аналитики и усилий в области бизнес-аналитики. Вы будете тесно сотрудничать с инженерами данных, специалистами по данным и ИТ-командами для разработки надежных платформ данных, обеспечивающих беспрепятственное получение, обработку, хранение и доступность данных. Это возможность внести значительный вклад в стратегию данных и технологическое развитие BlackStone eIT.

Задачи

Проектирование, создание и обслуживание масштабируемых платформ данных для поддержки различных рабочих нагрузок данных. Разработка и оптимизация ETL/ELT конвейеров для обеспечения эффективного перемещения и преобразования данных. Сотрудничество с кросс-функциональными командами для преобразования бизнес-требований в технические решения. Обеспечение безопасности, управления и соответствия платформы данных соответствующим нормам. Мониторинг производительности платформы, устранение проблем и внедрение улучшений. Обеспечение технического лидерства и наставничества младшим инженерам данных. Быть в курсе последних тенденций и технологий в области инженерии платформ данных.

Архитектура платформы: шаблоны проектирования конвейеров, стратегия оркестрации, инфраструктура как код, стек мониторинга
Корпоративное извлечение данных: SAP FI/CO (бюджет, фактические данные, обязательства через OData/RFC), Microsoft Graph API (SharePoint, M365), SuccessFactors OData API — вы отвечаете за подход к извлечению и самостоятельно создаете первые конвейеры
Проектирование уровня промежуточного хранения: схема промежуточного хранения PostgreSQL, шаблоны преобразования данных из необработанных в очищенные, стратегии обновления
Наблюдаемость при приеме данных: стандарты журналирования, оповещение о сбоях, панели мониторинга для отслеживания состояния конвейеров
Фреймворк качества данных: определение проверок качества, решение о том, что приостанавливает конвейер, а что вызывает предупреждение
Применение классификации: работа с руководителем по управлению данными для встраивания автоматического тегирования классификации в каждый конвейер
Техническое наставничество: установление стандартов и проверка работы для Старшего инженера по платформам данных

Требования

Степень бакалавра или магистра в области компьютерных наук, информационных технологий или смежной области. 8+ лет опыта в инженерии данных с акцентом на архитектуру и разработку платформ данных. Глубокие знания SQL и опыт работы с реляционными базами данных и NoSQL. Практический опыт работы с облачными платформами данных, такими как AWS, Azure или Google Cloud. Опыт работы с технологиями больших данных, такими как Hadoop, Spark, и решениями для хранилищ данных. Знание стандартов управления данными, безопасности и соответствия требованиям. Отличные навыки решения проблем и коммуникации. Подтвержденная способность руководить техническими проектами и обучать членов команды. Требуемые навыки и технологии

Извлечение данных SAP: OData services, RFC/BAPI, SAP Data Services или CDS views — практический опыт получения данных из модулей SAP FI/CO
Python — асинхронные конвейеры данных, фоновые задания, запланированные задачи
PostgreSQL — проектирование схемы, миграции (Alembic), оптимизация запросов, секционирование
Azure Data Lake Storage + Synapse Analytics
Microsoft Graph API — SharePoint, M365, организационные данные
Apache Airflow или Azure Data Factory
dbt или эквивалент для преобразования и тестирования качества
Redis — управление очередями, TTL, инвалидация кэша
Наблюдаемость — структурированное журналирование, Azure Monitor или Prometheus/Grafana
Docker — контейнеризированные конвейерные задания
Инфраструктура как код (Terraform или эквивалент)

Условия

Оплачиваемый отпуск Бонус за производительность Обучение и развитие

BlackStone eIT is seeking an experienced Senior Data Platform Engineer to lead the design, development, and maintenance of our enterprise data platforms. In this role, you will ensure that our data infrastructure is scalable, reliable, and optimized to support advanced analytics and business intelligence efforts. You will work closely with data engineers, data scientists, and IT teams to develop robust data platforms that facilitate seamless data ingestion, processing, storage, and accessibility. This is an opportunity to make significant contributions to BlackStone eIT’s data strategy and technological advancement. Key Responsibilities Design, build, and maintain scalable data platforms to support diverse data workloads. Develop and optimize ETL/ELT pipelines to ensure efficient data movement and transformation. Collaborate with cross-functional teams to translate business requirements into technical solutions. Ensure data platform security, governance, and compliance with relevant regulations. Monitor platform performance, troubleshoot issues, and implement improvements. Provide technical leadership and mentorship to junior data engineers. Stay updated with the latest trends and technologies in data platform engineering.

Platform architecture: pipeline design patterns, orchestration strategy, infrastructure-as-code, monitoring stack
Enterprise data extraction: SAP FI/CO (budget, actuals, commitments via OData/RFC), Microsoft Graph API (SharePoint, M365), SuccessFactors OData API — you own the extraction approach and build the first pipelines yourself
Staging layer design: PostgreSQL staging schema, raw-to-clean transformation patterns, refresh strategies
Ingestion observability: logging standards, alerting on failures, monitoring dashboards for pipeline health
Data quality framework: defining quality checks, deciding what pauses a pipeline vs. what triggers a warning
Classification enforcement: working with the Governance Lead to embed automated classification tagging into every pipeline
Technical mentorship: setting standards and reviewing work for the Senior Data Platform Engineer Requirements Bachelor’s or Master’s degree in Computer Science, Information Technology, or related field. 8+ years of experience in data engineering, with a focus on data platform architecture and development. Strong proficiency in SQL and experience with relational and NoSQL databases. Hands-on experience with cloud data platforms such as AWS, Azure, or Google Cloud. Experience with big data technologies like Hadoop, Spark, and data warehousing solutions. Knowledge of data governance, security, and compliance standards. Excellent problem-solving and communication skills. Proven ability to lead technical projects and mentor team members. Required Skills & Technologies
SAP data extraction: OData services, RFC/BAPI, SAP Data Services, or CDS views — hands-on experience pulling data from SAP FI/CO modules
Python — async data pipelines, background jobs, scheduled tasks
PostgreSQL — schema design, migrations (Alembic), query optimization, partitioning
Azure Data Lake Storage + Synapse Analytics
Microsoft Graph API — SharePoint, M365, organizational data
Apache Airflow or Azure Data Factory
dbt or equivalent for transformation and quality testing
Redis — queue management, TTL, cache invalidation
Observability — structured logging, Azure Monitor or Prometheus/Grafana
Docker — containerized pipeline jobs
Infrastructure-as-code (Terraform or equivalent) Benefits Paid Time Off Performance Bonus Training & Development

Подходит ли тебе эта вакансия?

Сравним навыки, грейд, формат работы и зарплату

Ключевые навыки

SQL
ETL
ELT
Python
PostgreSQL
NoSQL
AWS
Azure
Cloud
Hadoop
Spark
Data warehousing
SAP FICO
OData
RFC/BAPI
SAP Data Services
CDS Views
Azure Data Lake Storage
Azure Synapse Analytics
Microsoft Graph API
Airflow
Azure Data Factory
dbt
Redis
Azure Monitor
Prometheus
Grafana
Docker
Terraform
Alembic
Infrastructure as Code

Оценка зарплаты

25 800AEDв месяц

Чаще всего от 20 900 до 34 900