О Nebius:

Nebius возглавляет новую эру в облачной инфраструктуре для глобальной экономики ИИ. Мы создаем полнофункциональную облачную платформу ИИ, которая поддерживает разработчиков и предприятия на всех этапах: от данных и обучения моделей до развертывания в производственной среде, без затрат и сложности создания крупной внутренней инфраструктуры ИИ/МО.

Создано инженерами для инженеров. От оркестрации GPU в крупном масштабе до оптимизации инференса — мы решаем сложные задачи, связанные с вычислительными ресурсами, хранением данных, сетевыми технологиями и прикладным ИИ.

Компания зарегистрирована на Nasdaq (NBIS) со штаб-квартирой в Амстердаме, имеет глобальное присутствие с R&D центрами в Европе, Великобритании, Северной Америке и Израиле. В нашей команде из более чем 1500 человек сотни инженеров с глубокой экспертизой в области аппаратного, программного обеспечения и исследований в области ИИ.

Продукт:

В быстро меняющемся мире доверие к ИИ зависит от того, насколько ИИ-агенты основаны на свежих, проверенных реальных данных. Поиск — это основа, которая делает это возможным.

Мы создаем платформу поиска, ориентированную на агентов, разработанную специально для систем ИИ, а не для людей. Наш продукт предоставляет программные API поиска с низкой задержкой и наблюдаемостью, которые ИИ-агенты используют для получения, фильтрации и обработки информации из реального мира в больших масштабах.

За каждым поисковым запросом стоит богатый поток сигналов: шаблоны запросов, решения о выдаче результатов, исходы сканирования, качество ранжирования, события использования и доходов. Превращение этого потока в надежную, доступную для запросов платформу данных позволяет улучшать продукт, измерять бизнес-показатели и обучать модели.

Роль:

Мы ищем руководителя команды инженеров по обработке данных (Data Engineering Team Lead), который возглавит нашу платформу данных — как данные, лежащие в основе качества поиска и конвейеров МО, так и аналитику, которая определяет решения по продукту и бизнесу.

На этой должности вы будете руководить командой инженеров по обработке данных и отвечать за полный жизненный цикл данных: от сбора данных из производственных сервисов, помощи в моделировании и архитектуре нашего хранилища данных, до предоставления очищенных, хорошо документированных данных исследователям, инженерам и аналитикам по всей компании.

Платформа охватывает десятки терабайт и получает данные из десятков собственных и сторонних источников — наша поисковая система и ее компоненты, CRM, биллинг, идентификация и аналитика продуктов в многорегиональных производственных средах. Ежедневно на нее полагаются около 100 внутренних пользователей.

Вы будете руководить нашей платформой данных, нанимать и развивать команду, а также оставаться достаточно вовлеченным, чтобы проектировать и рецензировать системы, которые выпускает ваша команда.

В рамках этой должности ваша ответственность будет заключаться в следующем:

• Руководство и архитектура платформы данных Tavily — от потоковой обработки данных до медальонных слоев хранилища данных и наборов данных и панелей мониторинга для конечных пользователей.
• Руководство, найм, наставничество и развитие команды инженеров по обработке данных; установление инженерных стандартов для качества кода, тестирования, документации и дежурств.
• Тесное сотрудничество с инженерами по всей компании для обеспечения правильного выполнения пакетных и потоковых конвейеров.
• Определение и внедрение средств наблюдения за платформой данных: проверка качества данных, мониторинг актуальности, отслеживание происхождения данных, эволюция схем и контроль затрат.
• Взаимодействие с исследователями, инженерами, аналитиками, менеджерами по финансам и продуктам для предоставления надежных наборов данных для аналитики продуктов и GTM.
• Определение объектов, сущностей и отношений, которые моделируют домен поиска Tavily — входные данные агента, URL-адреса, фрагменты, сеансы агента, сканирования и связи между ними — и преобразование этой ментальной модели в чистую, доступную для запросов модель данных, с которой остальная часть компании может работать.
• Управление данными: обеспечение высочайших стандартов качества, целостности и безопасности данных во всех средах.

Вы можете нам подойти, если:

• Опыт работы в Data Engineering более 5 лет, с акцентом на проектирование и внедрение масштабируемых моделей данных, готовых к аналитике, и облачных хранилищ данных (например, BigQuery, Snowflake).
• Имеете практический опыт работы со Snowflake (или сопоставимым облачным хранилищем данных) и глубокое понимание архитектуры хранилищ данных, предпочтительно с использованием схемы "медальон".
• Глубокое знание баз данных (проектирование схем, оптимизация запросов) и знакомство со сценариями использования NoSQL.
• Экспертиза в современных фреймворках оркестрации и трансформации данных (например, Airflow, DBT).
• Надежное понимание облачных служб данных (например, AWS, GCP) и потоковых платформ (например, Kafka, Pub/Sub).
• Имеете практический опыт работы с парадигмой Spark / MapReduce и понимаете, когда распределенная обработка является правильным инструментом.
• Свободно владеете Python и SQL для работы с производственными данными.
• Работали с системами данных в производственной среде: отлаживали их под давлением, восстанавливались после инцидентов с данными и понимаете, что означает повторное заполнение поврежденной таблицы.

Преимущества и льготы:

• Конкурентоспособная заработная плата
• Возможности карьерного роста и обучения
• Гибкость и баланс между работой и личной жизнью
• Сотрудничество и инновационная культура
• Возможность работать над значимыми проектами в области ИИ
• Международная среда и талантливые команды

Что такое работа в Nebius:

Быстрое развитие — Смелое мышление — Постоянный рост — Значимое влияние — Доверие и реальная ответственность — Возможность формировать будущее ИИ

Заявление о равных возможностях:

Nebius является работодателем, предоставляющим равные возможности. Мы стремимся создавать инклюзивную и разнообразную рабочую среду и предоставлять равные возможности трудоустройства во всех аспектах занятости. Мы не дискриминируем по признаку расы, цвета кожи, религии, пола (включая беременность), национального происхождения, родословной, возраста, инвалидности, генетической информации, семейного положения, статуса ветерана, сексуальной ориентации, гендерной идентичности или самовыражения, а также любой другой характеристики, защищенной применимым законодательством.

Соискатели должны иметь разрешение на работу в стране, в которой они подают заявление, и должны будут предоставить доказательство соответствия требованиям к трудоустройству в качестве условия найма.

Если вам требуются какие-либо приспособления в процессе подачи заявления, пожалуйста, сообщите нам.