Данные лежат в основе каждого цифрового продукта, аналитического рабочего процесса и инициативы в области искусственного интеллекта. Поскольку компании внедряют все больше этих возможностей в производство, интеграции, которые перемещают и раскрывают эти данные, должны быть надежными. Datashift ищет инженера по данным (Data Engineer), который будет создавать и владеть этими интеграциями.
Обладаете ли вы сильными навыками Python, настоящим DevOps-мышлением и послужным списком внедрения решений, которые выдерживают производственные нагрузки? Чувствуете ли вы себя как дома в области разработки программного обеспечения, инженерии данных и эксплуатации?
Вы — практичный инженер, который гордится тем, что работает в производственной среде. Вас заботит надежность, безопасность и создание API, на которые могут рассчитывать другие команды.
Обязанности
- Полный жизненный цикл интеграции данных. Создавайте их на Python с использованием Databricks, Azure Function Apps и других служб Azure, преобразуя требования в чистый, поддерживаемый код;
- Поддерживайте API в готовом к эксплуатации состоянии. Производительность, безопасность, контроль доступа, наблюдаемость и стоимость — все это входит в вашу зону ответственности;
- Перенесите устаревшие API данных на текущие архитектурные стандарты платформы и добавьте структурированное ведение журналов и оповещение, чтобы проблемы выявлялись до того, как их заметят пользователи;
- Возьмите на себя настройку CI/CD в Azure DevOps. Создавайте конвейеры, которые переносят код через тестирование и развертывание без ручных шагов;
- Сотрудничайте с командой Data Engineering & Platform и инженерами из разных команд и стран для формирования, внедрения и документирования интеграций от начала до конца;
- Поддерживайте команду задачами инженерии данных по мере необходимости.
Квалификация
- Минимум 3 года опыта работы с Python и подтвержденный опыт внедрения API и серверных служб. Чистый, тестируемый код — это ваша норма.
- У вас есть реальный опыт работы с dbt, и вы используете его для создания хорошо структурированных, поддерживаемых моделей данных. SQL — само собой разумеющееся.
- Вы разбираетесь в проектировании API, конвейерах CI/CD и тестировании. Обеспечение наблюдаемости и стабильности производственных систем — это то, что вы делали раньше.
- Azure — знакомая территория. Вы работали с Function Apps, Key Vault, VNets, частными конечными точками, NSG и безопасным раскрытием API в производственной среде.
- Комфортно работаете в Agile-среде, ежедневно взаимодействуя с инженерами данных, инженерами платформы и бизнес-заинтересованными сторонами.
- Интерес к тому, что появится на платформе Databricks, особенно к Lakebase и Databricks Apps.
Почему стоит присоединиться к Datashift в Нидерландах?
- Возможность стратегического влияния — присоединяйтесь к быстрорастущей команде консультантов по данным, расширяйте свои навыки и работайте с организациями высшего уровня в качестве клиентов — и все это, пользуясь опытом и поддержкой нашей признанной практики в Бельгии.
- Конкурентоспособный пакет — получите комплексный план вознаграждения и льгот, разработанный с учетом вашего опыта и потенциала.
- Отмеченное наградами рабочее место — мы находимся в CIC Rotterdam (одном из ведущих стартап-хабов Европы по версии Financial Times), где расположены более 150 молодых компаний, буквально рядом с культовой Центральной станцией. Отличная транспортная доступность гарантирована.
Заинтересованы?
Не стесняйтесь подать заявку по ссылке ниже!