Data Engineer

Solvd Inc. — быстрорастущая консалтинговая и технологическая компания, основанная на ИИ, предоставляющая услуги по трансформации предприятий в областях облачных вычислений, данных, инжиниринга программного обеспечения и искусственного интеллекта. Мы сотрудничаем с ведущими организациями отрасли для проектирования, создания и внедрения технологических решений, которые обеспечивают измеримые бизнес-результаты.

После приобретения Tooploox, ведущей компании в области ИИ и разработки продуктов, Solvd теперь предлагает полный спектр услуг — от стратегического консультирования и проектирования решений до разработки ИИ по индивидуальному заказу и внедрения в масштабах предприятия. Наши центры компетенций объединяют глубокие технические знания, проверенные методологии реализации и отраслевые знания для быстрого и эффективного решения сложных бизнес-задач.

Solvd ищет высококвалифицированного инженера по работе с данными (Data Engineer), который поможет в проектировании и создании современных платформ данных для поддержки крупномасштабных инициатив по управлению рисками и соблюдению нормативных требований для корпоративных клиентов. В этой роли вы будете разрабатывать архитектуру и внедрять масштабируемые системы данных, конвейеры обработки данных в реальном времени и аналитические возможности, которые преобразуют сложные наборы данных в практические выводы.

Вы будете сотрудничать с межфункциональными командами — включая специалистов по данным (data scientists), инженеров-программистов и заинтересованных сторон продукта — для предоставления надежных, высококачественных решений по работе с данными. Эта роль требует глубоких технических знаний в области технологий больших данных (big data), сервисов AWS и распределенных систем, а также способности понимать потребности бизнеса и участвовать в принятии стратегических решений.

Архитектура данных и разработка платформ

• Проектировать, создавать и оптимизировать масштабируемую инфраструктуру данных для рабочих нагрузок, связанных с рисками и соблюдением нормативных требований
• Разрабатывать пакетные и потоковые конвейеры с использованием современных технологий больших данных
• Внедрять надежные рабочие процессы ETL и ELT для различных структурированных и неструктурированных источников данных

Облачный инжиниринг данных

• Активно использовать сервисы AWS, включая EMR, Redshift, S3, Glue, Lambda, Kinesis, и связанные с ними инструменты для работы с данными
• Создавать системы с высокой пропускной способностью и низкой задержкой, которые поддерживают принятие решений в реальном времени или близком к реальному времени

Сотрудничество и реализация

• Сотрудничать со специалистами по данным, аналитиками и инженерными командами для предоставления надежных и хорошо документированных наборов данных
• Преобразовывать бизнес-требования в технические спецификации и масштабируемые решения по работе с данными
• Наставлять членов команды и вносить вклад в лучшие практики и повторно используемые фреймворки в Solvd

Автоматизация и непрерывное совершенствование

• Оптимизировать процессы отчетности, аналитики и подготовки данных
• Заменять ручные рабочие процессы автоматизированными, повторяемыми системами
• Поддерживать постоянную настройку производительности, мониторинг и оптимизацию платформы

• Степень бакалавра в области компьютерных наук, инженерии, математики или смежных дисциплин
• 3 или более лет практического опыта в области инжиниринга данных или смежных областях
• Уверенное владение SQL и моделированием данных для аналитики и хранения данных (data warehousing)
• Опыт создания конвейеров ETL или ELT в масштабе
• Опыт работы с технологиями больших данных, такими как Hadoop, Hive, Spark, HBase или EMR
• Знание распределенных систем и принципов хранения данных
• Базовые навыки написания скриптов на Python или Scala
• Знакомство с концепциями машинного обучения

Присоединившись к Solvd, вы будете…

• Участвовать в реальных проектах на основе ИИ в ключевых отраслях, работая с клиентами от инновационных стартапов до корпоративных трансформаций
• Станете частью глобальной команды с равными возможностями для сотрудничества на разных континентах и в разных культурах
• Развиваться в инклюзивной среде, которая ставит во главу угла непрерывное обучение, инновации и этические стандарты в области ИИ