#вакансии #работа #Data #Engineer #Инженер #Россия #РФ #Java #Groovy #BigData #Hadoop #ETL #DWH #удаленка #Senior
Senior Data инженер
Ставка в час: 2000-2700 руб. гросс.
Локация: удаленная работа из РФ, РБ.
Проект: ритейл
Компания: Omega Solutions
Требования
- Владение одним из языков программирования (Java, Groovy), знание принципов ООП, умение читать чужой код;
- Опыт сборки проекта, компиляции и деплоя в Rancher (Docker);
- Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке технологий BigData;
- Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов);
- Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.);
- Умение работать с Git в консоли;
- Знания специфики работы ETL инструментов (Apache Nifi, Airflow, интеграционные шины SAP BW, Talend, Informatica, SAS и т.п.);
- Опыт работы с Hadoop;
- Понимание устройства HDFS, форматов данных;
- Опыт работы с Hive или любым другим хранилищем на основе Hadoop;
- Опыт использования систем ведения проектов и документации;
- Умение работы с архитектурными схемами;
- Понимание принципов построения и хранения данных - DWH и DataLake.
Дополнительные требования
- Желателен опыт администрирования Unix/Linux или Hadoop (HDFS , Yarn, Ranger , Spark, Zookeeper), Zabbix, Ansible;
- Понимание диагностических и трейc‑файлов SAP HANA: структура, назначение, базовая интерпретация событий;
- Уверенный Python/Go/Java/C++/Rust для парсинга логов и бинарных форматов, опыт написания утилит для разбора файлов;
- Опыт работы с SAP HANA как источником данных: SQL‑диалект HANA, типы данных, форматы экспорта (CSV/бинарный), базовая администрация полезна;
- Умение превращать разобранные данные в формат Iceberg/Paimon (таблицы, события, JSON) и выгружать в Apache Kafka (или любой другой подходящий источник);
- Практика в data engineering/observability/SRE: автоматизация анализа логов/трейсов, расследование инцидентов производительности и ошибок.
Задачи:
• Разработка и поддержка интеграций
• Выбор технологий и решение сложных задач
• Контроль качества и документации
• Развитие архитектуры и процессов (CI/CD)
Условия
- Оформление по ИП
- Дружелюбная атмосфера внутри компании
- Развитие через реальные задачи, а не формальные курсы
- Возможность предлагать идеи и видеть, как они внедряются
- Гибкий график работы и возможность удаленной работы
- Оплата за фактически отработанное время
- Участие в интересных проектах без лишнего микроменеджмента
Контакт: @CodeVal
