Senior Data Engineer (AI/ML)

Заголовок: Senior Data Engineer (AI/ML) Местоположение: Удаленная работа - Индия / Индия (Удаленно)

Эта должность предполагает 100% удаленную работу в Индии. О OpenTable С миллионами посетителей, более чем 70 000 партнерами-ресторанами и более чем 25-летним опытом OpenTable, являясь частью Booking Holdings, Inc. (NASDAQ: BKNG), — лидер отрасли, страстно желающий помочь ресторанам процветать. Наши технологии мирового класса позволяют ресторанам сосредоточиться на самом важном — их команде, гостях и прибыли, — в то время как посетители могут находить и бронировать идеальный ресторан для любого случая. Каждый сотрудник OpenTable оказывает реальное влияние на то, что мы делаем и как мы это делаем. Вы также станете частью глобальной команды и ее портфеля брендов метапоиска. Гостеприимство — это забота о других, и это определяет нашу культуру. О вакансии Мы ищем старшего инженера по данным — AI/ML, который поможет построить инфраструктуру данных и искусственного интеллекта, лежащую в основе нашего следующего поколения интеллектуальных продуктов и опыта. Эта роль сочетает в себе современную инженерию данных с генеративным ИИ. Вы будете проектировать масштабируемые платформы и конвейеры данных, одновременно создавая производственные решения с использованием LLM, RAG, эмбеддингов, векторного поиска и ИИ-агентов. Вы будете тесно сотрудничать с специалистами по данным, инженерами машинного обучения, инженерами-программистами и командами по продуктам, чтобы превращать возможности ИИ в надежные, масштабируемые производственные системы. Что вы будете делать Проектировать и создавать конвейеры данных для AI/LLM, поддерживающие рабочие нагрузки по обучению, инференсу, оценке, эмбеддингам и извлечению. Создавать производственные RAG-системы, включая индексацию, сегментирование, генерацию эмбеддингов, индексирование, извлечение, переранжирование и построение контекста. Разрабатывать приложения на основе ИИ, используя LLM, структурированные выводы, вызовы функций/инструментов и агентные рабочие процессы. Создавать и оптимизировать системы семантического поиска и векторного извлечения. Разрабатывать фреймворки для оценки LLM, мониторинга, трассировки, измерения качества, оптимизации задержки и стоимости. Проектировать масштабируемые пакетные и потоковые конвейеры с использованием Databricks, Apache Spark, Delta Lake, Snowflake и Airflow. Создавать продукты и платформы данных, которые делают структурированные и неструктурированные корпоративные данные доступными для приложений ИИ. Разрабатывать надежные конвейеры ETL/ELT и оптимизировать распределенные рабочие нагрузки большого масштаба для повышения производительности и снижения затрат. Внедрять практики обеспечения качества данных, управления данными, отслеживания происхождения данных, безопасности и наблюдаемости. Сотрудничать с командами ML и инженерии приложений для переноса прототипов ИИ в готовые к производству системы. Требуемые квалификации 5+ лет опыта работы в области инженерии данных, инженерии программного обеспечения, распределенных систем или смежных областях. Сильные навыки программирования на Python и/или Scala/Java и продвинутый SQL. Практический опыт работы с Databricks, Snowflake, Apache Spark, Delta Lake и Airflow. Значительный опыт работы с облачными платформами данных, такими как Snowflake и/или Databricks. Практический опыт создания приложений с использованием LLM или генеративного ИИ. Глубокое понимание RAG-архитектур, эмбеддингов, векторных баз данных, семантического поиска и систем извлечения. Знакомство с концепциями LLM, включая промптинг, структурированные выводы, вызовы инструментов и оценку моделей. Опыт проектирования масштабируемых, надежных и наблюдаемых производственных систем данных. Предпочтительные квалификации Глубокий опыт проектирования крупномасштабных платформ данных, распределенных систем обработки и сложных рабочих процессов обработки данных. Значительный опыт работы с архитектурами потоковой передачи данных в реальном времени, включая Kafka, Spark Structured Streaming или аналогичные технологии. Опыт создания конвейеров данных с низкой задержкой и событийно-ориентированных архитектур. Опыт проектирования сложных многоэтапных ETL/ELT и рабочих процессов оркестрации данных с использованием Airflow или аналогичных платформ. Опыт оптимизации рабочих нагрузок Spark/Databricks, включая партиционирование, кластеризацию, кеширование, объединение и оптимизацию вычислений. Опыт создания платформ данных, поддерживающих как пакетные, так и потоковые рабочие нагрузки AI/ML. Опыт работы с фреймворками оценки LLM и ИИ, включая автоматические оценки, офлайн/онлайн оценки, метрики качества и экспериментирование. Опыт создания наборов данных для оценки и конвейеров для измерения качества, точности, релевантности, задержки и стоимости LLM/RAG/агентов. Опыт работы с наблюдаемостью и трассировкой ИИ, включая использование токенов, производительность модели, задержку, сбои и мониторинг в производстве. Опыт работы с LangGraph, LangChain, LlamaIndex или аналогичными фреймворками оркестрации ИИ. Опыт работы с векторными базами данных, такими как Qdrant, Pinecone, Weaviate или Databricks Vector Search. Опыт работы с Kafka, MLflow, Unity Catalog, Databricks Mosaic AI или платформами развертывания моделей. Опыт создания фреймворков для обеспечения качества данных, отслеживания происхождения данных, управления данными и наблюдаемости данных/ИИ. Глубокое понимание распределенных систем, облачной архитектуры, API, CI/CD и производственных операций. Влияние Вы поможете построить основу данных и ИИ для интеллектуальных продуктов, объединив крупномасштабную инженерию данных, потоковые системы и современный генеративный ИИ для предоставления надежных, масштабируемых, измеримых и готовых к производству систем ИИ. Преимущества Работайте (почти) откуда угодно до 20 дней в год Фокус на психическом здоровье и благополучии: Оплачиваемые компанией сеансы терапии через SpringHealth Оплачиваемая компанией подписка на Headspace Еженедельный выходной для всей компании — вся команда полностью отдыхает (и возвращается без накопления работы!) Оплачиваемый отпуск по уходу за ребенком Щедрый оплачиваемый отпуск + выходной в день рождения Оплачиваемое время для волонтерства Фокус на вашем карьерном росте: Деньги на развитие Лидерское развитие Доступ к тысячам электронных курсов по запросу Скидки на путешествия Группы поддержки сотрудников Ежеквартальные выездные мероприятия команды Варианты оптимизации налогов Щедрое медицинское страхование Пенсионный фонд Рабочая среда и гибкость В OpenTable мы гордимся тем, что создаем глобальную и динамичную рабочую среду. Как член команды, вы получите преимущество от графика, адаптированного для обеспечения работы глобальной рабочей силы в различных часовых поясах. Хотя большинство ваших обязанностей могут соответствовать обычным рабочим часам, будут случаи, когда вам придется управлять коммуникациями — через звонки, сообщения Slack или электронные письма — вне обычных рабочих часов, чтобы эффективно сотрудничать с международными коллегами, отвечать партнерам-ресторанам и/или решать срочные вопросы. OpenTable всегда будет соблюдать местные законы и нормативные акты. Инклюзивность Мы стремимся создать рабочее место, где каждый чувствует себя желанным и может преуспевать. Мы знаем, что лучшие идеи возникают, когда мы объединяем разные голоса, поэтому мы строим команду, столь же динамичную, как и посетители и рестораны, которым мы служим, и создаем культуру, в которой каждый чувствует себя желанным, чтобы быть собой. Если вам нужны условия для прохождения собеседования или трудоустройства, или на рабочем месте, мы готовы помочь вам. Пожалуйста, свяжитесь с вашим рекрутером, чтобы запросить любые условия.