Используем cookie для работы сайта и статистики. «Хорошо» разрешит ещё и запись сессий.
Version 1
Дублин, Ирландия13 дней назад
Грейд
Senior
Формат работы
Удалённо, Гибрид
Уровень английского
B2, выше среднего
Письмо на почту или сообщение рекрутеру в Telegram
Мы ищем опытного старшего инженера по данным (Senior Data Engineer) для присоединения к команде, реализующей инновационные решения в области данных и искусственного интеллекта в сложной корпоративной среде. Эта роль будет отвечать за проектирование и внедрение современных платформ данных, рабочих процессов ИИ и решений генеративного ИИ с использованием технологий Databricks и Azure. Успешный кандидат будет сочетать сильные знания в области инженерии данных с практическим опытом создания производственных решений ИИ, включая конвейеры RAG (Retrieval Augmented Generation), многоагентные рабочие процессы и возможности MLOps. Мы ищем инженера, который сможет преодолеть разрыв между современными инженерными решениями в области данных и инновациями в области ИИ. Вы должны быть готовы создавать готовые к производству решения, сотрудничать с различными командами и позволять организациям масштабировать свои возможности в области ИИ с помощью надежных инженерных практик.
Version 1 отпраздновала 30 лет успешной деятельности и продолжает быть надежным партнером мировых брендов в предоставлении технологических решений и трансформаций, которые способствуют успеху клиентов. Наш глубокий опыт позволяет нашим клиентам ориентироваться в быстро меняющемся технологическом ландшафте. Мы развиваем прочные партнерские отношения с мировыми технологическими лидерами, включая Microsoft, AWS, Oracle, Red Hat, OutSystems, Snowflake, гарантируя, что нашим клиентам предоставляются высококачественные решения и услуги. Мы являемся отмеченным наградами работодателем, отражающим, что наши сотрудники находятся в самом центре всего, что мы делаем: Ведущий партнер AWS, Microsoft и Oracle в Великобритании и Ирландии Более 3300 сотрудников, бизнес с оборотом 350 млн евро/300 млн фунтов стерлингов Более 10 лет как «Отличное место для работы» в Ирландии и Великобритании Лучшее место для работы для женщин в Великобритании и Ирландии по версии GPTW Лучшее место для работы по благополучию в Великобритании по версии GPTW Мы — компания, основанная на ключевых ценностях; мы нанимаем людей, которые разделяют наши ценности, и мы вознаграждаем тех, кто их демонстрирует и развивает, это глубоко укоренилось в нашей ДНК. Инвестируйте в нас, и мы инвестируем в вас!.
Проектирование и создание масштабируемых ETL/ELT и конвейеров ИИ с использованием Databricks, PySpark, Delta Lake и SQL. Разработка и поддержка архитектур Lakehouse с использованием уровней данных Bronze, Silver и Gold. Создание и оптимизация Delta Live Tables, Databricks Workflows и процессов оркестрации заданий. Разработка и внедрение производственных решений генеративного ИИ и решений на основе агентов. Создание и поддержка конвейеров RAG и фреймворков ИИ-агентов. Поддержка MLOps, включая обучение моделей и конвейеры вывода с использованием MLflow. Внедрение мониторинга качества данных, элементов управления управлением данными и управления метаданными через Unity Catalog. Разработка событийно-ориентированных интеграций с использованием облачных сервисов Azure. Сотрудничество с межфункциональными командами для создания хранилищ признаков и наборов данных для обучения ИИ. Интеграция Databricks с более широкими сервисами Azure, включая ADLS Gen2, Azure Data Factory, Azure Key Vault и Azure DevOps. Вклад в разработку лучших практик инженерии данных и инициатив центра передового опыта. Менторство и поддержка инженерных команд в области технологий и возможностей ИИ.
Значительный опыт работы инженером данных, инженером ИИ, инженером машинного обучения или на аналогичной должности. Практический опыт создания и развертывания производственных версий: Многоагентные рабочие процессы ИИ Решения Retrieval Augmented Generation (RAG) Фреймворки ИИ-агентов Решения конвейеров данных в Databricks Сильные навыки программирования на Python и SQL. Опыт работы с Apache Spark и распределенной обработкой данных. Опыт внедрения решений генеративного ИИ в Databricks Workflows и Jobs. Глубокое знание архитектуры Databricks Lakehouse. Практический опыт работы с: Delta Lake Unity Catalog Databricks Workflows MLflow Опыт внедрения событийно-ориентированных интеграций с использованием: Azure Service Bus (обязательно) Azure Functions (обязательно) Azure Databricks (обязательно) Понимание моделирования данных и архитектуры Medallion/Lakehouse. Опыт работы с системой контроля версий на основе Git и практиками CI/CD. Глубокое понимание конвейеров ИИ/МО, включая подготовку данных, инжиниринг признаков и развертывание моделей. Отличное владение английским языком.
Опыт работы с PyTorch и/или TensorFlow. Опыт работы с Event Hub и Logic Apps. Опыт проектирования корпоративных платформ ИИ. Опыт наставничества инженерных команд или руководства техническими инициативами. Опыт работы в сфере финансовых услуг или в строго регулируемых средах. Опыт создания продвинутых возможностей LLMOps, включая отслеживание подсказок, логирование трассировок и регрессионное тестирование. Технологический стек Databricks PySpark Delta Lake Unity Catalog MLflow Python SQL Apache Spark Azure Databricks Azure Service Bus Azure Functions Azure Data Factory Azure Data Lake Storage Gen2 Azure Key Vault Azure DevOps Git PyTorch / TensorFlow
В Version 1 мы верим в предоставление нашим сотрудникам комплексного пакета льгот, который ставит в приоритет их благополучие, профессиональный рост и финансовую стабильность. Разделите наш успех с нашей схемой квартального распределения прибыли в зависимости от результатов деятельности, где сотрудники коллективно получают долю прибыли нашей компании. Сильное карьерное развитие и коучинг по наставничеству в рамках наших схем Strength in Balance & Leadership с выделенной программой развития карьеры Pathways, проводимой ежеквартально. Гибкий/удаленный график работы: Version 1 прекрасно понимает жизненные события и индивидуальные обстоятельства людей и предлагает гибкость для достижения здорового баланса между работой и личной жизнью. Инициативы по финансовому благополучию, включая: пенсионные накопления, медицинское страхование, страхование жизни, финансовые консультации и схему скидок для сотрудников. Инициативы по благополучию сотрудников, включая скидки на посещение спортзала, программу Bike to Work, фитнес-классы, семинары по осознанности, программу помощи сотрудникам и многое другое. Щедрое количество дней отпуска, расширенный отпуск по беременности и родам/уходу за ребенком, отпуск по случаю бракосочетания/гражданского партнерства и специальные политики отпусков. Образовательная поддержка, стимулируемые сертификации и аккредитации, включая AWS, Microsoft, Oracle и Red Hat. Схемы вознаграждения, включая ежегодные награды Version 1 за превосходство (Annual Excellence Awards) и награды Star Awards. Инициативы «Среда, Социальная ответственность, Сообщество» (Environment, Social and Community First) позволяют вам участвовать в местных благотворительных акциях и возможностях развития в рамках наших схем по обеспечению разнообразия, инклюзивности и принадлежности. И многие другие интересные преимущества… свяжитесь с нами, чтобы узнать больше.
Overview We are seeking an experienced Senior Data Engineer to join a high-impact team delivering innovative data and AI solutions within a complex enterprise environment. This role will be responsible for designing and implementing modern data platforms, AI workflows, and Generative AI solutions using Databricks and Azure technologies. The successful candidate will combine strong data engineering expertise with hands-on experience building production-grade AI solutions, including Retrieval Augmented Generation (RAG) pipelines, multi-agent workflows, and MLOps capabilities. Key Responsibilities Design and build scalable ETL/ELT and AI pipelines using Databricks, PySpark, Delta Lake and SQL. Develop and maintain Lakehouse architectures using Bronze, Silver and Gold data layers. Build and optimise Delta Live Tables, Databricks Workflows and job orchestration processes. Develop and deploy production-grade Generative AI and agent-based solutions. Create and maintain RAG pipelines and AI agent frameworks. Support MLOps activities, including model training and inference pipelines using MLflow. Implement data quality monitoring, governance controls and metadata management through Unity Catalog. Develop event-driven integrations using Azure cloud services. Collaborate with cross-functional teams to create feature stores and AI training datasets. Integrate Databricks with wider Azure services including ADLS Gen2, Azure Data Factory, Azure Key Vault and Azure DevOps. Contribute to the development of data engineering best practices and centre of excellence initiatives. Mentor and support engineering teams in AI technologies and capabilities.
Essential Skills & Experience Strong experience as a Data Engineer, AI Engineer, Machine Learning Engineer, or similar role. Hands-on experience building and deploying production-grade: Multi-agent AI workflows Retrieval Augmented Generation (RAG) solutions AI agent frameworks Data pipeline solutions within Databricks Strong programming skills in Python and SQL. Experience with Apache Spark and distributed data processing. Experience implementing Generative AI solutions within Databricks Workflows and Jobs. Strong knowledge of Databricks Lakehouse architecture. Hands-on experience with: Delta Lake Unity Catalog Databricks Workflows MLflow Experience implementing event-driven integrations using: Azure Service Bus (essential) Azure Functions (essential) Azure Databricks (essential) Understanding of data modelling and Medallion/Lakehouse architecture. Experience with Git-based version control and CI/CD practices. Strong understanding of AI/ML pipelines, including data preparation, feature engineering and model deployment. Excellent English communication skills. Desirable Skills Experience with PyTorch and/or TensorFlow. Experience with Event Hub and Logic Apps. Experience designing enterprise-scale AI platforms. Experience mentoring engineering teams or leading technical initiatives. Exposure to financial services or highly regulated environments. Experience building advanced LLMOps capabilities including prompt tracking, trace logging and regression benchmarking. Technology Stack Databricks PySpark Delta Lake Unity Catalog MLflow Python SQL Apache Spark Azure Databricks Azure Service Bus Azure Functions Azure Data Factory Azure Data Lake Storage Gen2 Azure Key Vault Azure DevOps Git PyTorch / TensorFlow What We're Looking For We are looking for an engineer who can bridge the gap between modern data engineering and AI innovation. You should be comfortable delivering production-ready solutions, collaborating across teams, and enabling organisations to scale their AI capabilities through robust engineering practices.
Why Version 1?
At Version 1, we believe in providing our employees with a comprehensive benefits package that prioritises their wellbeing, professional growth, and financial stability.
Share in our success with our Quarterly Performance-Related Profit Share Scheme, where employees collectively benefit from a share of our company's profits
Strong Career Progression & mentorship coaching through our Strength in Balance & Leadership schemes with a dedicated quarterly Pathways Career Development programme
Flexible/remote working, Version 1 is tremendously understanding of life events and people’s individual circumstances and offer flexibility to help achieve a healthy work life balance
Financial Wellbeing initiatives including; Pension, Private Healthcare Cover, Life Assurance, Financial advice and an Employee Discount scheme
Employee Wellbeing schemes including Gym Discounts, Bike to Work, Fitness classes, Mindfulness Workshops, Employee Assistance Programme and much more. Generous holiday allowance, enhanced maternity/paternity leave, marriage/civil partnership leave and special leave policies
Educational assistance, incentivised certifications, and accreditations, including AWS, Microsoft, Oracle, and Red Hat
Reward schemes including Version 1’s Annual Excellence Awards & Star Awards.
Environment, Social and Community First initiatives allow you to get involved in local fundraising and development opportunities as part of fostering our diversity, inclusion and belonging schemes.
And many more exciting benefits… drop us a note to find out more.
Version 1 is an equal opportunities employer.
We are committed to building a diverse, inclusive and respectful workplace where everyone feels valued and able to thrive. We welcome applications from people of all backgrounds, identities and lived experiences, and we value the different perspectives people bring including those shaped by disability and neurodiversity.
We want every candidate to have a positive and accessible recruitment experience. If you need reasonable adjustments at any stage of the process, please contact your recruiter at Version 1. We will consider all requests carefully, respectfully and confidentially.
Video links: https://www.youtube.com/watch?v=F_d3ELTH5zo
Version 1 has celebrated 30 years in business and continues to be trusted by global brands to deliver technology and transformation solutions that drive customer success. Our deep expertise enables our customers to navigate the rapidly evolving technology landscape. We foster strong partnerships with global technology leaders including Microsoft, AWS, Oracle, Red Hat, OutSystems, Snowflake, ensuring that our customers are provided with the highest quality solutions and services. We’re an award-winning employer reflecting how our employees are at the very heart of what we do: UK & Ireland's premier AWS, Microsoft & Oracle partner 3300+ strong, €350/£300m revenue business 10+ years as a Great Place to Work in Ireland & UK Best Workplace for Women in the UK & Ireland by GPTW Best Workplace for Wellbeing in the UK by GPTW We’re a core values driven company, we hire people who share our values, and we reward those who display and foster them, it’s deeply embedded within our DNA. Invest in us and we’ll invest in you!.
Сравним навыки, грейд, формат работы и зарплату
Чаще всего от 63 400 до 82 700