Описание

Наша команда — часть Data Platform. Мы создаем сервисы для таблиц Iceberg в Data Lake House. Наша миссия — обеспечить надежное и оптимальное хранение Iceberg-таблиц и управлять их жизненным циклом.

Мы отвечаем за каталог, резервное копирование, оптимизацию хранения, планировщик, сборщик мусора и экспорт статистики. Объем данных в DLH — более 30 ПБ.

В команду ищем инженеров, которым интересны системы данных, многозадачность и производительность. Откликайтесь, если вам нравится решать сложные задачи в распределенных системах и базах данных.

Стек технологий: Java 21, S3, Postgres, Iceberg, Spark, Spring, опционально — C++.

Обязанности

• Разрабатывать архитектуру нагруженных отказоустойчивых систем
• Тщательно прорабатывать решения с точки зрения архитектуры, структур данных и алгоритмов
• Писать качественный, но при этом простой код
• Работать со Spark, Iceberg и S3
• Оптимизировать память и throughput, работать с многозадачностью
• Писать части кода на C++ при необходимости

Требования

• Знаете современный язык Java
• Отлично разбираетесь в алгоритмах и структурах данных
• Умеете строить распределенные системы
• Умеете работать с многозадачностью
• Знаете SQL и основные принципы работы баз данных — OLAP/OLTP
• Умеете оптимизировать системы
• Будет плюсом опыт работы с таблицами Iceberg и колоночными форматами, Spark, Trino или другими SQL-движками, S3, Kafka
• Опыт разработки на Java от 3 лет

Мы предлагаем

• Работу в офисе или гибридный формат — по договоренности с руководителем
• Возможность работы в аккредитованной ИТ-компании
• ДМС со стоматологией, включая чекапы, компенсацию покупки лекарств и льготные условия страхования для близких. Еще — страховка от несчастных случаев и болезней