Data Engineer

Title: Data Engineer Location: Brasília / br / Remote

Разработка, создание и поддержка масштабируемых ETL/ELT конвейеров. Создание и оптимизация решений по обработке данных с использованием Python и Apache Spark. Разработка и поддержка приложений для потоковой передачи данных в реальном времени с использованием Kafka. Проектирование и внедрение корпоративных решений по работе с данными с использованием Snowflake. Создание облачных архитектур и сервисов данных на AWS. Обеспечение качества, надежности, масштабируемости и производительности данных в экосистеме данных. Устранение неполадок, мониторинг и оптимизация производственных конвейеров данных. Участие в технических дискуссиях, проверках кода и инициативах по передовым инженерным практикам. Сотрудничество с кросс-функциональными командами для поддержки инициатив бизнеса, основанных на данных.

4+ года профессионального опыта в качестве инженера данных. Обширный опыт разработки на Python. Практический опыт работы с Apache Spark. Глубокое знание Snowflake. Опыт создания и поддержки ETL/ELT конвейеров. Опыт работы с Apache Kafka и событийно-ориентированными архитектурами. Опыт работы с облачными сервисами AWS. Понимание концепций моделирования данных и хранилищ данных. Сильные аналитические навыки, навыки решения проблем и коммуникативные навыки. Способность эффективно работать в распределенных командах. Уровень английского языка Upper-Intermediate или выше. БУДЕТ ПЛЮСОМ Опыт работы с крупномасштабными e-commerce платформами. Знакомство с системами аналитики в реальном времени. Знание практик автоматизации инфраструктуры и CI/CD. Опыт оптимизации конвейеров обработки больших объемов данных. Понимание концепций распределенных систем.

ЛИЧНЫЙ ПРОФИЛЬ Сильное чувство ответственности. Внимание к деталям. Проактивные коммуникативные навыки. Ориентация на сотрудничество и командную работу. Способность работать самостоятельно в удаленных условиях.

Вам нравится создавать масштабируемые платформы данных, которые лежат в основе принятия критически важных бизнес-решений? Мы ищем инженера данных, который присоединится к влиятельному e-commerce проекту, ориентированному на обработку и оптимизацию крупномасштабных потоков данных для миллионов пользователей. Это полная занятость, удаленная работа в Бразилии. В Sigma Software мы разрабатываем современные цифровые решения для глобального бизнеса и создаем среду, в которой инженеры могут расти, внедрять инновации и влиять на технические решения. На этой должности вы будете работать с современными облачными технологиями, системами потоковой передачи данных в реальном времени и крупномасштабными архитектурами данных в сотрудничестве с опытными кросс-функциональными командами. Почему стоит присоединиться к нам? Вы внесете свой вклад в клиент-ориентированную e-commerce платформу, будете работать с передовыми технологиями Data Engineering и получите возможности для профессионального роста в международной среде с упором на удаленную работу. КЛИЕНТ Наш клиент — ведущий маркетплейс, специализирующийся на товарах для домашних животных, с сильным присутствием в интернете и крупномасштабной экосистемой цифровой коммерции. Компания предлагает обширный каталог продуктов для владельцев домашних животных, включая корма, аксессуары и решения для ухода за здоровьем. Ориентируясь на удовлетворенность клиентов и инновации, организация продолжает расширять свои возможности в области электронной коммерции, чтобы обеспечить бесперебойный опыт покупок для миллионов пользователей. ПРОЕКТ Проект сосредоточен на создании масштабируемых и надежных решений для данных для высокотрафиковой e-commerce платформы, обслуживающей миллионы пользователей. Команда разрабатывает современные конвейеры данных, потоковые системы и облачные архитектуры для поддержки аналитики, операционных процессов и принятия бизнес-решений. Среда сочетает в себе крупномасштабную обработку данных с технологиями потоковой передачи в реальном времени и современной облачной инфраструктурой. Ключевые технологии: Python, Apache Spark, Snowflake, Apache Kafka, AWS, ETL/ELT конвейеры, Data Warehousing, Event-driven Architecture