Senior Data Engineer

Нью-Йорк, Нью-Йорк; Майами, Флорида; Удаленно (США)

О Компании

Gemini — это глобальная платформа для работы с криптовалютой и Web3, основанная Кэмероном и Тайлером Уинклвоссами в 2014 году. Мы предлагаем широкий спектр простых, надежных и безопасных криптопродуктов и услуг для частных лиц и учреждений в более чем 70 странах. Наша миссия — открыть следующую эру финансовой, творческой и личной свободы, предоставляя надежный доступ к децентрализованному будущему. Мы предвидим мир, в котором криптовалюта изменит мировую финансовую систему, интернет и деньги, создавая больше выбора, независимости и возможностей для всех — соединяя традиционные финансы с развивающейся криптоэкономикой таким образом, чтобы это было более открыто, справедливо и безопасно. Будучи публичной компанией, Gemini готова ускорить реализацию этого видения, расширяя масштабы, охват и влияние.

Департамент: Данные

В Gemini наша команда по работе с данными — это движущая сила, обеспечивающая получение информации, инновации и доверие во всей компании. Мы объединяем инженеров мирового класса, специализирующихся на данных, платформенных инженеров, инженеров машинного обучения, инженеров аналитики и специалистов по данным — все работают в гармонии, преобразуя необработанную информацию в безопасные, надежные и действенные сведения. От создания масштабируемых конвейеров и платформ до обеспечения передового машинного обучения и гарантии управления и экономической эффективности — мы закладываем основу для принятия более обоснованных решений и создания прорывных продуктов. Мы процветаем на стыке криптовалют, технологий и финансов, и нас объединяет общая миссия: раскрыть весь потенциал данных Gemini для стимулирования роста, повышения эффективности и воздействия на клиентов.

Должность: Senior Data Engineer

Команда по работе с данными отвечает за проектирование и эксплуатацию инфраструктуры данных, которая обеспечивает получение информации, отчетность, аналитику и машинное обучение во всем бизнесе. В качестве Senior Data Engineer вы будете участвовать в принятии архитектурных решений, наставничать младших инженеров и создавать высокомасштабируемые системы, которые окажут значительное влияние на вашу команду и команды, с которыми вы сотрудничаете. Вы будете отвечать за сквозную реализацию продуктов данных в своей области и тесно сотрудничать с командами по продуктам, аналитике, машинному обучению, финансам, операциям и разработке, чтобы надежно перемещать, трансформировать и моделировать данные с учетом наблюдаемости, отказоустойчивости и гибкости.

Обязанности:

• Проектировать, создавать и поддерживать инфраструктуру данных и конвейеры, охватывающие как пакетные, так и потоковые рабочие нагрузки в режиме реального времени/стриминга, участвуя в принятии архитектурных решений по ходу работы.
• Создавать и поддерживать масштабируемые, эффективные и надежные ETL/ELT конвейеры, используя языки и фреймворки, такие как Python, SQL, Spark, Flink, Beam или их эквиваленты.
• Работать над решениями для обработки данных в режиме реального времени или почти в реальном времени (например, CDC, стриминг, микро-пакетная обработка) для случаев использования, требующих своевременных данных.
• Сотрудничать с специалистами по данным, инженерами машинного обучения, аналитиками и продуктовыми командами для понимания требований к данным, определения SLA и предоставления согласованных продуктов данных, которые другие смогут использовать самостоятельно.
• Создавать фреймворки для обеспечения качества данных, валидации, наблюдаемости и мониторинга (аудит данных, оповещение, обнаружение аномалий, отслеживание происхождения данных).
• Исследовать и устранять сложные производственные проблемы: анализ первопричин, узкие места в производительности, целостность данных, отказоустойчивость.
• Документировать потоки данных, словари данных, архитектурные шаблоны и операционные руководства.

Минимальные требования:

• Опыт работы в сфере инженерии данных (или аналогичных) ролях более 5 лет.
• Значительный опыт в проектировании, внедрении и оптимизации ETL/ELT конвейеров.
• Глубокие знания Python и SQL для написания производственного, поддерживаемого, тестируемого кода.
• Опыт работы с крупномасштабными хранилищами данных (например, Databricks, BigQuery, Snowflake).
• Прочное знание основ программной инженерии, структур данных и системного мышления.
• Практический опыт моделирования данных (размерностное моделирование, нормализация, проектирование схемы).
• Опыт создания систем с использованием данных в реальном времени или потоковых данных (например, Kafka, Kinesis, Flink, Spark Streaming) и знакомство с фреймворками CDC.
• Опыт работы с фреймворками оркестрации / рабочих процессов (например, Airflow).
• Знакомство с практиками управления данными, отслеживания происхождения данных, метаданных, каталогизации и качества данных.

Предпочтительные квалификации:

• Опыт работы с криптовалютами, финансовыми услугами, трейдингом, рынками или биржевыми системами.
• Опыт работы с данными блокчейна, криптовалют, Web3 — например, блоки, транзакции, вызовы контрактов, переводы токенов, модели UTXO/аккаунтов, индексация в сети, API блокчейна и т. д.
• Опыт работы с инфраструктурой как кодом, контейнеризацией и CI/CD конвейерами.
• Практический опыт управления и оптимизации Databricks на AWS.

Здесь выгодно работать

Пакет вознаграждений и льгот для этой должности включает:

• Конкурентоспособная стартовая зарплата.
• Дискреционный годовой бонус.
• Долгосрочные стимулы в виде предоставления новых акций.
• Комплексные планы медицинского страхования.
• 401K с соответствием со стороны компании.
• Оплачиваемый отпуск по уходу за ребенком.
• Гибкий график отпусков.

Диапазон заработной платы: Базовая заработная плата для этой должности составляет от 126 000 до 180 000 долларов США в штате Нью-Йорк. Этот диапазон не включает наш дискреционный бонус или пакет акций. При определении компенсации кандидата учитывается ряд факторов, включая набор навыков, опыт, объем работы и текущие рыночные данные.

В Соединенных Штатах мы предлагаем гибридный подход к работе в наших офисах, сочетая преимущества совместной работы в офисе с гибкостью удаленной работы. Ожидания могут различаться в зависимости от местоположения и должности, поэтому кандидатам рекомендуется связаться со своим рекрутером, чтобы узнать больше о конкретной политике для данной должности. Сотрудники, которые не проживают рядом с одним из наших офисов, являются частью нашей удаленной рабочей силы. Однако все сотрудники обязаны пройти первичную адаптацию лично в одном из наших офисов.

В Gemini мы стремимся создавать разнообразные команды, которые отражают людей, которых мы хотим расширить возможности с помощью наших продуктов, и мы стремимся к равному трудоустройству независимо от расы, цвета кожи, происхождения, религии, пола, национальности, сексуальной ориентации, возраста, гражданства, семейного положения, инвалидности, гендерной идентичности или статуса ветерана. Равные возможности — это закон, и Gemini гордится тем, что является рабочим местом с равными возможностями. Если у вас есть конкретная потребность, требующая адаптации, пожалуйста, сообщите об этом члену команды по работе с персоналом.