Data Engineer H/F

Title: Инженер данных (м/ж) Местоположение: гибридный формат / Сен-Дени / Франция

Кто мы?…

Контекст

Наши данные, в основном состоящие из нормативных документов в форматах PDF и XML, а также их метаданных, питают несколько цифровых и искусственных сервисов Группы.

Наши специалисты по данным разрабатывают сервисы обогащения, анализа и поиска, основанные, в частности, на семантическом поиске и архитектурах RAG. Эти сервисы интегрированы в коммерческие продукты и эксплуатируются в производственной среде.

Таким образом, ваш технический выбор напрямую влияет на их надежность, производительность, масштабируемость и эксплуатационные расходы. Вы будете работать в гибридной среде, между локальной инфраструктурой и облаком.

Должность сочетает в себе проектирование архитектуры и конкретную реализацию: вы будете проектировать, разрабатывать и внедрять на Python и SQL конвейеры обработки, которые питают эти сервисы.

Команда расширяется в связи с новыми задачами: интеграция международных коллекций, эволюция моделей данных, масштабирование сервисов ИИ и внедрение конвейеров обработки.

Ваши задачи

• Проектировать, разрабатывать и внедрять ингестию нормативных коллекций (PDF, XML) и их метаданных, в том числе от международных партнеров. • Автоматизировать отслеживание изменений в исходных репозиториях и сокращать время интеграции новых коллекций. • Гарантировать качество, прослеживаемость и версионирование данных.

Разработка и оркестрация конвейеров обработки

• Проектировать, разрабатывать и внедрять на Python и SQL конвейеры, питающие наши сервисы искусственного интеллекта в производстве. • Оркестрировать обработки: извлечение, парсинг, трансформация, вызовы API обогащения, разработанных специалистами по данным, затем загрузка и индексация. • Гарантировать надежность конвейеров: восстановление после ошибок, повторный запуск, идемпотентность и управление зависимостями. • Инструментировать обработки и автоматизировать контроль качества данных.

Архитектура и внедрение ИИ

• Проектировать и развивать архитектуру конвейеров данных, питающих наши продукты и сервисы ИИ, балансируя между производительностью, надежностью, масштабируемостью и контролем затрат. • Моделировать базы данных и определять интерфейсные контракты между компонентами: схемы, API и форматы обмена. • Определять с специалистами по данным контракты интеграции их сервисов обогащения и критерии вывода в производство. • Участвовать во внедрении применений ИИ: семантический поиск, векторные базы данных и архитектуры RAG. • Документировать основополагающие решения в виде Architecture Decision Records (ADR).

Референт по данным в центре

• Продвигать вопросы, связанные с данными, среди архитекторов ИТ-департамента, отдела безопасности и эксплуатации. • Обеспечивать техническую координацию с международными партнерами для интеграции их коллекций. • Анализировать влияние изменений данных, API и сервисов на потребительские приложения.

Чем эта должность НЕ является

Это не исключительно должность архитектора: вы останетесь напрямую вовлечены в проектирование, разработку, тестирование и внедрение конвейеров обработки.

Вы не будете разрабатывать модели или алгоритмы обогащения: это роль специалистов по данным, с которыми вы определяете контракты интеграции.

Вы не будете обеспечивать операционный мониторинг или анализ логов, что находится в ведении выделенного сотрудника. Вы будете работать с ним, чтобы конвейеры были наблюдаемыми.

Вы не будете отвечать за общую ИТ-архитектуру Группы или за управление поставками продукции.

Развитие должности

Эта должность предлагает естественную траекторию к роли Архитектора Данных, с постепенным повышением ответственности за архитектурные решения, технические стандарты и целевое видение области данных.

Профиль:

Высшее образование в области информатики или данных, минимум 3 года опыта в качестве инженера данных, включая опыт проектирования архитектуры данных.

• Владение Python и SQL, и как минимум одним оркестратором (Airflow, Dagster, Prefect или эквивалент). • Моделирование реляционных данных, проектирование и использование API. • Способность формализовать и отстаивать технические решения перед различными собеседниками, как техническими, так и нетехническими. • Требуется профессиональный английский язык (международные партнеры).

Желательно: Опыт работы с платформой, питающей продукты ИИ (RAG, векторные базы данных), практика инструментирования OpenTelemetry или интеграции с Elastic, основы качества данных и происхождения данных (data quality и data lineage)

Почему стоит присоединиться к нам

Стимулирующая среда: миссия, имеющая общественное значение, преданный коллектив, признанная экспертиза, сильное влияние на государственную и промышленную политику.

Баланс между работой и личной жизнью: удаленная работа, гибкий график, семейная медицинская страховка, программы поддержки и т. д.

Возможности для развития: программы обучения, внутренняя мобильность, индивидуальное сопровождение.

Ответственный работодатель: амбициозная политика КСО, инклюзивность, равенство, доступность.

Динамичная командная жизнь: мероприятия, культурные и спортивные мероприятия через активно работающий комитет сотрудников (CSE).

Дополнительная информация

Должность базируется в Ла-Плен-Сен-Дени (RER B, линия 14)

Предлагаемая заработная плата от 55 000 до 70 000 евро брутто в год в зависимости от профиля