Databricks Data Engineer

Мы — Microsoft Data Platform Competence Center, ведущие эксперты в области технологий обработки данных Microsoft. У нас есть реальный опыт работы со всеми трендами в области технологий обработки данных, такими как Azure Data Factory, Microsoft Fabric, Databricks, Power BI, Purview, SQL Database, Palantir, Oracle и другими. Мы постоянно изучаем новые функции и оттачиваем наши методы, тем самым постоянно совершенствуясь, тестируя и внедряя новые инновации в области данных и искусственного интеллекта. Наши люди — это ключ к нашему успеху. Нас уже 40 человек в команде, и мы работаем как в Чехии, так и в Швейцарии. Мы ищем Data Engineer уровня Mid или Senior со знанием Databricks, который будет поддерживать крупное финансовое учреждение в проектировании, оптимизации и эксплуатации решений для обработки больших данных. Это практическая роль, подходящая для опытного специалиста, который может работать самостоятельно и брать на себя ответственность за конвейеры данных. Вы станете частью команды по работе с данными, ориентированной на масштабируемые, готовые к производству решения с использованием Databricks, PySpark и Delta Lake, с упором на автоматизацию, CI/CD и лучшие практики DevOps / MLOps. Что вас ждет: Проектирование, разработка и оптимизация конвейеров данных на Databricks с использованием PySpark и Delta Lake Разработка и поддержка надежных и масштабируемых решений для обработки больших данных с упором на производительность и надежность Поддержка автоматизации и оркестровки рабочих процессов обработки данных с использованием Jenkins Применение принципов DevOps / MLOps для беспрепятственного развертывания и эксплуатации в производственной среде Участие в оптимизации производственной эксплуатации, включая экономическую эффективность (FinOps) Работа с Databricks Asset Bundles для стандартизированных и повторяемых развертываний Тесное сотрудничество с заинтересованными сторонами, активное уточнение требований и конструктивная постановка под сомнение неясных задач Мониторинг, решение проблем и постоянное улучшение существующих конвейеров данных Как мы вас видим: Практический опыт работы с Databricks. Глубокое практическое знание PySpark и Delta Lake Хорошее понимание обработки больших данных, конвейеров данных и производственного data engineering Опыт работы с конвейерами CI/CD и Jenkins Знание подходов DevOps / MLOps в контексте data engineering Способность работать самостоятельно, брать на себя ответственность и четко коммуницировать в сложной среде Сильное аналитическое мышление и способность решать проблемы Преимущество: Опыт работы в банковской сфере или финансовых услугах Знание FinOps или оптимизации затрат в облачных платформах Сертификация Databricks (Associate или Professional) Узнали себя? Отлично! Мы предоставим вам поддержку во всем, что вам нужно, и возможность проявить себя! Что мы предлагаем: Возможность работать из дома или офиса, как вам удобно (без ограничений) До 30 дней отпуска для личного и профессионального развития, обучение по вашему выбору (сертификация MS, зарубежные конференции, тренинги...) Бюджет на развитие Современный, просторный офис в центре Праги с террасой, грилем и собственным пивным краном, а также возможность использовать террасу в личных целях и для мероприятий Эргономично оборудованное рабочее место (регулируемый стол, удобное кресло, большой или два монитора), рабочее место в тихой комнате или open space, по вашим предпочтениям Мультиспорт карта Кроме того, мы предоставим вам подписку Microsoft Visual Studio Enterprise (MPN), включая около $100 в месяц на эксперименты в среде Azure Полная лицензия RedGate SQL Toolbelt Без переработок Корпоративная библиотека Мобильная связь Угощения всегда доступны (фрукты, кофе, чай, безалкогольные напитки, шоколад, орехи, пиво...) Заинтересовались? Отлично, мы рады. Пришлите нам свое резюме, и Юстына или Мартина свяжутся с вами как можно скорее и договорятся о онлайн-встрече. Ждем вас!