Data Engineer Senior

Описание вакансии

Мы ищем ведущего инженера по обработке данных (Lead Data Engineer) для поддержки проектирования, разработки и оптимизации решений для обработки данных в рамках важной корпоративной инициативы. Эта роль будет сосредоточена на подготовке и обеспечении данных Snowflake, необходимых для пилотного проекта (Proof of Concept — POC) агента Dataiku PO.

Идеальный кандидат обладает значительным практическим опытом работы с Snowflake, SQL, моделированием данных и проверкой качества данных. Вы будете отвечать за надлежащий сбор, преобразование, стандартизацию и структурирование данных для поддержки POC и связанных с ним аналитических рабочих процессов.

Вы будете тесно сотрудничать с техническими и бизнес-стейкхолдерами для предоставления надежных, высококачественных наборов данных и масштабируемых конвейеров данных, отвечающих требованиям инициативы.

Что вы будете делать?

• Подготавливать, структурировать и обеспечивать данные Snowflake, необходимые для поддержки POC агента Dataiku PO.
• Проектировать, разрабатывать и поддерживать конвейеры данных для сбора, преобразования, нормализации и подготовки данных из нескольких источников.
• Проектировать и внедрять рабочие процессы сбора данных в Snowflake, обеспечивая масштабируемость, надежность и поддерживаемость.
• Разрабатывать и поддерживать модели данных, поддерживающие аналитические сценарии использования и требования POC.
• Внедрять проверки качества данных и правила валидации для обеспечения точности, согласованности, полноты и надежности данных.
• Использовать SQL и Python для эффективной обработки, преобразования и проверки больших наборов данных.
• Выявлять и устранять несоответствия в данных, аномалии и структурные проблемы, которые могут повлиять на последующее потребление.
• Поддерживать ETL-процессы и рабочие процессы обработки файлов для структурированных и полуструктурированных данных.
• Сотрудничать с бизнес-стейкхолдерами и техническими специалистами для понимания требований к данным и их преобразования в надежные решения для обработки данных.
• Участвовать в разработке технической документации и постоянно совершенствовать процессы обработки данных, стандарты и практики проверки.

Что мы ищем?

• Опыт работы на позициях Data Engineer или Data Analytics от 5 лет с сильным инженерным уклоном.
• Значительный практический опыт работы с Snowflake (обязательно).
• Отличные навыки работы с SQL, включая преобразование данных, запросы и валидацию.
• Опыт моделирования данных и подготовки наборов данных для аналитических и последующих приложений.
• Подтвержденный опыт проверки качества данных, включая внедрение проверок для обеспечения точности, согласованности и полноты.
• Опыт создания и поддержки ETL-конвейеров и рабочих процессов сбора данных.
• Практический опыт работы с Python для обработки и преобразования данных.
• Высокое внимание к деталям и ориентация на надежность и качество данных.
• Способность эффективно сотрудничать с техническими и бизнес-стейкхолдерами.

Желательно:

• Опыт интеграции или подключения Snowflake к Dataiku.
• Знакомство с инициативами, основанными на ИИ или агентах, в рамках пилотных проектов.

Наши преимущества и бонусы:

📚 Обучение:

• Сертификация AWS (мы являемся партнерами AWS), Databricks и Snowflake.

• Доступ к образовательным программам по ИИ для изучения новейших технологий.

• Индивидуальные планы обучения, курсы и дополнительные сертификации, соответствующие вашей роли.

• Доступ к Udemy Business с тысячами курсов для развития ваших технических и софт-скиллов.

• Уроки английского языка для поддержки профессионального общения.

• 🛫 Возможности для командировок для участия в отраслевых конференциях и встреч с клиентами.

👩‍🏫 Менторство и развитие:

• Планы карьерного развития и программы наставничества для помощи в формировании вашего пути.

🎁 Праздники и поддержка:

• Подарки в особые дни для празднования дней рождения, годовщин работы и других личных достижений.
• Оборудование, предоставляемое компанией.
• ⚖️ Гибкие условия работы для достижения баланса.

Другие преимущества могут варьироваться в зависимости от вашего местоположения в LATAM. Для получения подробной информации о преимуществах, применимых к вашему конкретному местоположению, проконсультируйтесь с одним из наших рекрутеров.

Blend — ведущий поставщик услуг в области ИИ, стремящийся совместно создавать значимый эффект для своих клиентов с помощью науки о данных, ИИ, технологий и людей. Миссия Blend — подпитывать смелые видения, решая значительные задачи путем беспрепятственного согласования человеческого опыта с искусственным интеллектом. Компания стремится раскрывать ценность и способствовать инновациям для своих клиентов, используя лучшие кадры и стратегию, основанную на данных. Мы верим, что сила людей и ИИ может оказать значительное влияние на ваш мир, создавая более полноценную работу и проекты для наших сотрудников и клиентов. Для получения дополнительной информации посетите