Data Engineer, Основные данные (Golden Record)

Должность: Data Engineer, Основные данные (Golden Record) Местоположение: полностью

Teralco Group была основана в 2002 году и в 2024 году стала CONVOTIS Iberia. С тех пор мы стремимся помогать компаниям повышать их производительность и эффективность за счет использования инновационных технологий. Обладая более чем 20-летним опытом, мы помогли многочисленным компаниям внедрить технологические решения. В CONVOTIS вы дополняете нас своим опытом и навыками, вы важны для принятия нами решений, и вы выбираете путь своего профессионального развития.

Как проходит день в CONVOTIS Iberia? Ваш рабочий день гибок, поэтому вы можете настроить свой график в пределах определенного диапазона, который будет для вас наиболее удобным. Если вы отработали сверх нормы в один день или ушли раньше по личным причинам, вы без проблем компенсируете это в другой день. Кроме того, вы можете решить, хотите ли вы работать из офиса или из дома. В офисе вас ждут кофе, конфеты и настольный футбол, где можно расслабиться и хорошо провести время с коллегами. У нас также есть медицинская страховка и гибкая система оплаты труда. В течение года вы сможете участвовать во внутренних мероприятиях, активностях на свежем воздухе, развлекательных днях и турнирах по падел-теннису. Мы хотим, чтобы вы наслаждались своим временем и имели отпуск, когда вам это нужно, всегда в окружении близкой и дружной команды. Что касается вашего профессионального развития, мы поддерживаем ваш рост: у вас будет доступ к обучению, урокам английского языка и сертификации. Мы ценим ваше обучение и ваши стремления. Все это является частью нашей философии CONVOTISLife. Мы растем вместе с вами.

Требования В CONVOTIS Iberia мы ищем Data Engineer для команды Основных данных. Вы будете сочетать инженерию данных с функциональным видением: ваша миссия будет заключаться в интеграции информации из различных систем, применении необходимых правил для идентификации правильной сущности и создании единых, надежных и пригодных для повторного использования основных данных для всей организации. Нам важен опыт, но прежде всего ваша самостоятельность, ваше умение работать с неоднозначной информацией и ваша способность создавать процессы, которые другие смогут понять и поддерживать.

Что вы будете делать?

• Проектировать и разрабатывать DAGs в Airflow для интеграции данных с внутренними и внешними API
• Получать информацию из различных источников, трансформировать ее, проверять и загружать в корпоративные основные данные
• Разрабатывать и развивать процессы сопоставления, дедупликации, консолидации и генерации золотых записей
• Работать с процессом утверждения изменений, обеспечивая отслеживаемость, контроль и последовательное применение модификаций
• Определять средства контроля качества, бизнес-правила и механизмы наблюдаемости для выявления инцидентов до того, как они повлияют на потребителей
• Исследовать расхождения между источниками и сотрудничать с бизнесом и другими командами данных для определения достоверной информации
• Документировать интеграции, правила и решения, чтобы решения были поддерживаемыми, а знания оставались в команде

Основной стек: Airflow, dbt, PostgreSQL, API и Snowflake

Кого мы ищем?

• Приблизительно 4 года опыта в области инженерии данных, интеграций или основных данных (мы также ценим более короткий стаж, если он демонстрирует эквивалентный уровень старшинства, самостоятельности и влияния)
• Хорошее владение Python, dbt и SQL для разработки интеграций, трансформаций, проверок и процессов контроля качества
• Опыт разработки и поддержки DAGs в Airflow в производственных средах
• Опыт работы с API: аутентификация, пагинация, управление ошибками, повторные попытки и отслеживаемость
• Знания моделирования данных, нормализации, дедупликации, сопоставления и консолидации сущностей
• Аналитические способности для исследования происхождения данных, сопоставления источников и преобразования бизнес-правил в техническую логику
• Хорошие практики Git, тестирования, документации, наблюдаемости и CI/CD

Познакомьтесь с нами в следующем видео

Равные возможности трудоустройства В CONVOTIS Iberia мы твердо привержены обеспечению равных возможностей трудоустройства, создавая инклюзивную и уважительную среду для всех людей, независимо от их расы, национальности, этнической принадлежности, цвета кожи, религии, пола, сексуальной ориентации, возраста, гражданства, семейного положения, инвалидности, гендера, гендерной идентичности или самовыражения, или статуса ветерана. Кроме того, в соответствии с положениями Королевского декрета 1026/2024 и нашим стремлением к высочайшим стандартам разнообразия и инклюзивности, мы устанавливаем четкие и конкретные критерии для обеспечения процесса отбора и найма, который отдает приоритет обучению и пригодности каждого человека для данной должности. Мы уделяем особое внимание недопущению дискриминации по признаку сексуальной ориентации, гендерной идентичности или гендерного самовыражения. В CONVOTIS Iberia мы верим, что разнообразие обогащает наши команды и ведет нас к более справедливому, равноправному и инклюзивному будущему.