Senior Data Engineer (Databricks)

Solvd Inc. — это быстрорастущая компания, специализирующаяся на консалтинге и технологических услугах в области ИИ, предоставляющая услуги по трансформации предприятий в сфере облачных вычислений, данных, инжиниринга программного обеспечения и искусственного интеллекта. Мы сотрудничаем с ведущими отраслевыми организациями для разработки, создания и внедрения технологических решений, которые обеспечивают измеримые бизнес-результаты.

После приобретения Tooploox, ведущей компании в области ИИ и разработки продуктов, Solvd теперь предлагает комплексные решения «под ключ» — от стратегического консультирования и проектирования решений до разработки пользовательских ИИ-решений и внедрения в масштабах предприятия. Наши центры компетенций объединяют глубокую техническую экспертизу, проверенные методологии реализации и отраслевые знания для быстрого и эффективного решения сложных бизнес-задач.

Мы ищем высококвалифицированного и клиентоориентированного Старшего инженера по данным (Senior Data Engineer) с опытом работы с Databricks, который присоединится к нашей команде.

Что вы будете делать

В качестве инженера по данным вы будете обеспечивать техническое руководство и направлять клиентов к успешной реализации проектов в области больших данных, от архитектуры и проектирования до инжиниринга данных и развертывания моделей. Вы будете руководить клиентами при миграциях и проектировать решения от концепции до продакшена. Вы будете оказывать структурированную менторскую поддержку другим членам команды и техническую поддержку для предпродажных мероприятий.

Что вы принесете с собой

• Опыт руководства проектированием и сквозной разработкой распределенных решений на базе Databricks, включая архитектуры Lakehouse, ETL-конвейеры, потоковую и пакетную обработку, а также интеграцию с корпоративными системами клиентов в облаке и локально.
• Практический опыт создания конвейеров для больших данных.
• Практический опыт программирования на Python.
• Экспертные знания SQL, Spark (или PySpark), включая сбор данных из различных источников, таких как API, реляционные базы данных и т. д.
• Практический опыт использования dbt в экосистеме Databricks.
• Глубокое понимание управления данными, безопасности и соответствия требованиям.
• Практический опыт оптимизации платформы: настройка кластеров, стратегии секционирования, кэширование, автомасштабирование и оркестрация заданий.
• Способность четко излагать основные концепции Databricks и объяснять их практическое применение.
• Степень бакалавра в области компьютерных наук, информационных систем, инжиниринга или эквивалентный опыт работы.
• Сертификация Databricks (очень желательно)

Приятно иметь

• Опыт работы с DevOps с использованием Terraform.
• Опыт проектирования и развертывания масштабируемых конвейеров машинного обучения на Databricks с использованием MLflow и Delta Lake.
• Опыт развертывания Databricks в Azure, AWS или GCP.
• Опыт развертывания Databricks для государственных клиентов.
• Опыт разработки интерактивных панелей и отчетов с использованием BI-инструментов, таких как Power BI.
• Опыт программирования на Scala.

Присоединившись к Solvd, вы будете…

• Участвовать в реальных проектах на базе ИИ в ключевых отраслях, работая с клиентами от стартапов до крупных предприятий.
• Станете частью глобальной команды с равными возможностями для сотрудничества на разных континентах и в разных культурах.
• Будете развиваться в инклюзивной среде, которая ставит во главу угла непрерывное обучение, инновации и этические стандарты ИИ.

Готовы внести свой вклад?

Если вы горите желанием создавать значимые вещи, отстаивать ответственный ИИ и развиваться вместе с самыми проницательными умами индустрии. Подайте заявку сегодня, и давайте создавать инновации вместе.

Solvd — работодатель, предоставляющий равные возможности.