Инженер данных

Команда: Данные Местоположение: Казахстан Тип занятости: Полный рабочий день

Salmon — технологическая финансовая компания, создающая банковскую и кредитную платформу в Юго-Восточной Азии, начиная с Филиппин.

Мы сочетаем глобальный опыт в сфере финтеха с глубоким знанием местного рынка, чтобы сделать финансовые услуги простыми, доступными и полезными для миллионов людей в регионе.

Более 7 млн загрузок приложений. Более 2 млн активных пользователей в месяц. Более 7000 партнерских магазинов. Привлечено более 310 млн долларов США от ведущих мировых инвесторов.

Штаб-квартира в Маниле, глобально распределенная команда и гибридный формат — наша команда охватывает более 45 стран.

Если вы хотите решать сложные задачи в больших масштабах и влиять на то, как миллионы людей получают доступ к деньгам и управляют ими, присоединяйтесь к нам.

Момент взлета финтеха в Юго-Восточной Азии начинается здесь.

О роли

Вы будете создавать и управлять конвейерами данных и архитектурой lakehouse, которые преобразуют необработанные данные в надежные входные данные для продуктов, используемых миллионами людей.

Что вы будете делать

• Проектировать и запускать пакетные и потоковые конвейеры на Databricks и Apache Spark в AWS, получая данные из баз данных, API и потоков событий.
• Формировать нашу архитектуру lakehouse на S3 и Delta Lake, включая слои medallion (Bronze / Silver / Gold) и оптимизацию хранения.
• Работать напрямую с командами аналитики, инженерии и продуктов, чтобы превращать необработанные данные в надежные, пригодные для использования входные данные для бизнеса.

За что вы будете отвечать

• Полностью управлять проектами — от согласования с заинтересованными сторонами и обзора дизайна до внедрения, запуска и постоянной поддержки.
• Создавать решения для самостоятельного обслуживания данных, которые позволят другим командам удовлетворять свои потребности в данных, разработанные для простого масштабирования и расширения по мере добавления новых источников и вариантов использования.
• Создавать и поддерживать масштабируемые конвейеры ETL/ELT, устойчивые к сбоям и оптимизированные по затратам.
• Оптимизировать задачи Spark от начала до конца — размеры кластера, кэширование, объединения, перемешивание, секционирование и форматы хранения (Parquet, Delta).
• Управлять Databricks Workflows, задачами, конфигурациями кластеров и базовой инфраструктурой — политиками безопасности, ресурсами и доступом — реагируя на сбои и проблемы с производительностью.
• Внедрять управление данными и контроль доступа с помощью Unity Catalog в разных учетных записях и средах, включая обработку PII.

Что делает вас подходящим кандидатом

• Практический опыт работы с Databricks и глубокие знания Apache Spark (PySpark и/или Scala).
• Сильное знание Python для инженерии данных, плюс SQL и Spark SQL для трансформации и аналитики.
• Опыт работы с Delta Lake и архитектурами lakehouse, включая оптимизацию производительности.
• Подтвержденный опыт владения проектами — вы управляли проектами, зная их слабые стороны, собирали отзывы и делали свои решения легко масштабируемыми и поддерживаемыми.
• Опыт написания чистого, тестируемого, поддерживаемого кода с использованием системы контроля версий на основе Git.
• Опыт работы с инфраструктурой как кодом (infrastructure-as-code), такой как Terraform или Ansible, будет плюсом — не требуется, легко освоить в процессе работы.

Что мы предлагаем

Создавайте будущее финтеха Юго-Восточной Азии.

Владение и гибкость

• План опционов на акции — вестинг в течение четырех лет с 25% клиффом после первого года.
• Гибридный формат с возможностью полной удаленной работы для соответствующих ролей и основными часами совместной работы с 12:00 до 19:00 по манильскому времени (UTC+8).
• Предоставляемые компанией инструменты и оборудование.
• Офис в Bonifacio Global City, Манила — современный, удобный для прогулок район в центре растущей технологической сцены Филиппин.

Здоровье и время отдыха

• Поддержка медицинского страхования для вас и вашей семьи путем софинансирования или возмещения расходов, в зависимости от вашего местоположения и в пределах лимитов политики.
• Доступ к штатному специалисту по поддержке психического здоровья.
• 22 дня отпуска, государственные праздники Филиппин и 15 дней больничного.
• 105 дней оплачиваемого отпуска по беременности и родам и до 14 дней оплачиваемого отпуска по уходу за ребенком для сотрудников, переезжающих в Манилу.

Поддержка при переезде и для семьи

• Поддержка при переезде для вас и вашей семьи — включая авиабилеты, двухнедельное проживание, визы, оформление документов и логистику.
• Возмещение расходов на переезд домашних животных.
• 2500 долларов США в год на авиабилеты домой.
• Пособия на детей и семью для сотрудников, переезжающих в Манилу: 1000 долларов США в месяц на каждого ребенка до двух лет и 500 долларов США в месяц на каждого ребенка в возрасте от двух до 18 лет.

Рост и опыт работы в команде

• Возможности для обучения и обмена опытом через внутренние встречи экспертов, внешние конференции, выступления и публикации в отраслевых изданиях.
• Поездки в Манилу, спонсируемые компанией, для личной встречи и работы с вашей командой.
• Регулярные выездные мероприятия команды, спортивные мероприятия и командные события.
• Высокопроизводительные команды могут получить неделю отдыха на пляже в Юго-Восточной Азии