Senior Data Engineer with Python and Databricks

Работайте вместе с дата-сайентистами и аналитиками, чтобы понимать потребности в данных и создавать эффективные конвейеры данных. Проектирование, внедрение и поддержка конвейеров данных для приема, обработки и трансформации данных с использованием облачных сервисов и других технологий. Создание и поддержка решений для работы с данными в Azure с использованием следующих инструментов: Data Factory, Synapse, Databricks/Spark, Polars/Pandas, Fabric. Внедрение процедур проверки и очистки данных обеспечит качество, целостность и надежность данных. Повышение масштабируемости, эффективности и экономической целесообразности конвейеров данных. Мониторинг и устранение проблем с конвейерами данных, обеспечение согласованности и доступности данных.

Отличное знание Python и SQL. Знание принципов хорошего дизайна данных (концепции, такие как Kimball и Star Schema), концепций хранилищ данных и моделирования данных. Значительный опыт работы с реляционными и, в идеале, NoSQL базами данных. Глубокое понимание процессов ETL/ELT. Опыт работы с инструментами мониторинга и наблюдаемости данных. Релевантный опыт работы с событийно-ориентированной архитектурой (Event-Driven Architecture). Хорошее понимание гибких методологий работы (Agile).

Узнайте о некоторых глобальных преимуществах, которые помогают нашим сотрудникам стать лучшей версией себя: Финансы: Конкурентоспособный пакет заработной платы, программа акций, премии по результатам работы компании, премии за признание заслуг, бонус за рекомендацию; Карьерное развитие: Карьерный коучинг, глобальные карьерные возможности, нелинейные карьерные пути, внутренние программы развития для управленческого и технического лидерства; Возможности для обучения: Сложные проекты, ротация, внутренние технические сообщества, тренинги, сертификации, коучинг, подписки на онлайн-платформы обучения, сессии "передай опыт", мастер-классы, конференции; Баланс между работой и личной жизнью: Гибридная работа и гибкий график работы, программа помощи сотрудникам; Здоровье: Глобальная внутренняя программа благополучия, доступ к приложениям для благополучия; Сообщество: Глобальные внутренние технические сообщества, клубы по интересам и группы по интересам, программы инклюзивности и разнообразия, мероприятия и праздники. В Endava мы стремимся создавать открытую, инклюзивную и уважительную среду, в которой каждый чувствует себя в безопасности, ценится и имеет возможность реализовать свой потенциал. Мы приветствуем заявки от людей любого происхождения, опыта и взглядов — потому что мы знаем, что инклюзивные команды помогают нам предоставлять более умные и инновационные решения для наших клиентов. Решения о найме основаны на заслугах, навыках, квалификации и потенциале. Пожалуйста, сообщите нам, если вам потребуются корректировки или поддержка в процессе подбора.

Технологии — это наш способ. А люди — наша причина. Более двух десятилетий мы используем технологии для внесения значимых изменений. Сочетая инженерные решения мирового класса, отраслевой опыт и ориентированный на людей подход, мы консультируем ведущие бренды из различных отраслей и сотрудничаем с ними для создания динамичных платформ и интеллектуальных цифровых решений, которые стимулируют инновации и трансформируют бизнес. От прототипа до реального воздействия — станьте частью глобальных перемен, выполняя важную работу.