Описание вакансии: Старший инженер по облачным данным
Обзор позиции:
Мы ищем опытного и инновационного Старшего инженера по облачным данным, который будет руководить нашими клиентами в проектировании, разработке и обслуживании облачных решений для данных. Как ключевой член нашей команды инженеров данных, вы будете отвечать за проектирование и разработку надежных конвейеров данных, оптимизацию рабочих процессов с данными и обеспечение доступности и надежности облачной платформы данных наших клиентов.
Ключевые обязанности:
- Проектирование сквозных конвейеров данных, которые эффективно собирают, обрабатывают, преобразуют и загружают данные из различных источников в нашу облачную среду.
- Сотрудничество с архитекторами данных и другими заинтересованными сторонами для обеспечения масштабируемости, надежности и производительности конвейеров данных.
- Разработка сложной логики преобразования данных для подготовки необработанных данных для целей анализа и отчетности.
- Создание и оптимизация процессов Extract, Transform, Load (ETL) для обеспечения качества и целостности данных.
- Сотрудничество с заинтересованными сторонами клиента для понимания требований к данным и предоставления действенных выводов.
- Руководство командой инженеров данных, предоставление технического руководства, наставничества и fostering культуры инноваций и сотрудничества.
- Быть в курсе последних достижений в области облачных технологий и практик инженерии данных.
Квалификация:
- Степень бакалавра или магистра в области компьютерных наук, инженерии или смежной области.
- Подтвержденный опыт (5+ лет) работы в качестве инженера данных с акцентом на облачные решения.
- Глубокие знания Microsoft Azure, включая практический опыт работы с соответствующими сервисами.
- Data Platforms (Azure Databricks, Azure SQL Database и Azure Synapse Analytics)
- Spark Programming (Python, PySpark и SparkSQL)
- Orchestration and Automation (Azure Data Factory и Logic Apps)
- Storage (Azure Data Storage Gen2)
- Event Processing (Kafka и Azure Event Hubs)
- Владение моделированием данных, процессами ETL/ELT и концепциями хранилищ данных.
- Знание баз данных SQL и NoSQL, а также фреймворков обработки данных (например, Apache Spark).
- Отличные навыки решения проблем и способность устранять сложные проблемы инженерии данных.
- Сильные лидерские качества, способность руководить и наставлять младших членов команды.
- Соответствующие сертификаты Microsoft Azure по данным являются плюсом.
О Nimble Gravity
Nimble Gravity — это команда энтузиастов активного отдыха, любителей адреналина и опытных growth hackers. Мы любим решать сложные задачи и верим, что правильные данные могут трансформировать и ускорить рост любой организации.
Nimble Gravity является работодателем, предоставляющим равные возможности, и рассматривает кандидатов на работу независимо от расы, цвета кожи, религии, пола, сексуальной ориентации, национального происхождения, возраста, инвалидности, генетических данных или любой другой основы, запрещенной федеральным, государственным или местным законодательством. Nimble Gravity рассматривает всех квалифицированных кандидатов.
Мы не спонсируем визы H1B.