Senior Backend Engineer - Data Core

Привет, я Андрей. Я ищу Старшего Backend-инженера в команду Data Core в Modash. Modash помогает брендам находить, понимать и работать с инфлюенсерами в Instagram, TikTok и YouTube. Более 2700 компаний (включая Stanley 1913, Sennheiser и NordVPN) используют нас для управления и масштабирования партнерских отношений с инфлюенсерами. Каждый из этих продуктов зависит от свежих, надежных данных об инфлюенсерах. Data Core владеет системами, которые собирают и поддерживают профили более 400 миллионов инфлюенсеров на различных социальных платформах, обрабатывают миллиарды точек данных и снабжают остальную часть Modash необходимым сырьем. Вот где вы вступаете в игру.

Почему мы нанимаем Data Core — это не команда внутренней поддержки. Она владеет инфраструктурой сбора данных, от которой зависит весь продукт Modash (и каждая последующая команда, работающая с данными). Сбор данных из социальных сетей в таком масштабе — это сложная проблема распределенных систем. API меняются без предупреждения. Поставщики становятся ненадежными. Платформы ограничивают запросы. Данные устаревают. Незначительная неэффективность становится дорогостоящей, когда повторяется сотни миллионов раз. Нам нужен старший инженер, который сможет проектировать отказоустойчивые сервисы, делать осознанный выбор между охватом, актуальностью, надежностью и стоимостью, а также переводить критически важные для продакшена системы из стадии идеи в надежную эксплуатацию. Вы присоединитесь к специализированной команде Data Core и будете тесно сотрудничать с Data Search, Data Insights, продуктовыми командами и руководством компании. У вас будет реальное право собственности, но вы не будете работать в изоляции. Если вы хотите понять, как мы подходим к разработке программного обеспечения, ознакомьтесь с нашим блогом об инженерии.

За что вы будете нести ответственность

1. Обеспечение потока данных об инфлюенсерах в огромном масштабе. Вы будете создавать и развивать системы, которые собирают и поддерживают более 400 миллионов профилей инфлюенсеров в Instagram, TikTok и YouTube, поддерживая миллиарды точек данных достаточно свежими для поиска, аналитики, API и клиентских продуктов.
2. Обеспечение устойчивости сбора данных, когда внешний мир этого не делает. Вы будете проектировать сервисы, которые справляются с нестабильностью сторонних API, ограничениями скорости, сбоями поставщиков, изменениями платформ и частичными отказами, не превращая каждое нарушение в инцидент для клиента.
3. Улучшение экономической эффективности сбора данных. В таком масштабе важен каждый запрос, каждый вызов прокси, каждая повторная попытка, каждое решение о хранении и каждый цикл вычислений. Вы улучшите охват и актуальность, сохраняя финансовую устойчивость системы.
4. Ответственность за продакшен, а не только за код. Вы будете формировать проблему, проектировать архитектуру, писать и рецензировать код, выпускать его, отслеживать и улучшать. Вы создадите средства мониторинга и операционной защиты, которые выявляют пробелы и регрессии раньше, чем это сделают клиенты.

Как выглядит повседневная работа Вот что может включать типичная неделя: Понедельник. Поведение социальной платформы изменилось за ночь. Успех сбора данных снизился, но только для части трафика. Вы отследите закономерность сбоя, защитите актуальность данных для последующих этапов и разработаете отказоустойчивое решение, а не хрупкий патч. Вторник. Время для глубокой концентрации. Вы перепроектируете часть системы подписки, которая определяет, каких инфлюенсеров собирать, когда и как часто, балансируя ценность для клиента с затратами на запросы и вычисления. Среда. Совместная работа с инженером Data Search над зависимостью индексации. Вместе вы согласуете более чистый контракт, который улучшит актуальность данных, не связывая системы двух команд. Четверг. Вы рецензируете новый подход к маршрутизации запросов через прокси-провайдеров. Вы смоделируете пропускную способность, режимы отказа и юнит-экономику перед запуском небольшого производственного эксперимента. Пятница. Обзор наблюдаемости выявляет медленную регрессию охвата, которую пропустили существующие оповещения. Вы улучшите проверки качества данных, чтобы команда выявила следующую регрессию до того, как она достигнет клиентов. Мы проводим целенаправленные совещания и выделяем время для глубокой работы. У вас будет короткий стендап, тесное сотрудничество, когда это необходимо, и достаточно пространства для проектирования, создания, укрепления и эксплуатации систем.

Требования Что вы делали раньше Создавали крупномасштабные backend- или data-системы. У вас есть солидный опыт работы с высоконагруженными сервисами, где важны надежность, пропускная способность, задержка и стоимость. Выпускали системы от концепции до продакшена. Вы отвечали за определение масштаба, архитектуру, реализацию, выпуск, эксплуатацию и итерации, а не только за один уровень решения. Проектировали распределенные системы. Вы можете четко рассуждать о частичных сбоях, повторных попытках, идемпотентности, обратном давлении, масштабировании и операционных компромиссах. Создавали отказоустойчивые интеграции. Вы работали со сторонними API или другими внешними зависимостями, которые имеют ограничения по скорости, нестабильны или подвержены изменениям. Работали с управлением прокси или маршрутизацией запросов. Вы понимаете практические проблемы маршрутизации высокочастотного трафика и ответственного управления системами защиты от ботов в масштабе. Брали на себя операционную ответственность. Вы заботитесь о наблюдаемости, оповещениях, руководствах по эксплуатации и о том, что происходит после развертывания, а не только о том, слился ли код. Самостоятельно решали неоднозначные задачи. Вы знаете, как собирать требования, задавать полезные вопросы и добиваться прогресса, не дожидаясь идеально специфицированной задачи. Четко общались между командами. Вы можете объяснять компромиссы, давать прямую обратную связь и сотрудничать, не создавая излишних процессов. Бонусные баллы, если вы работали с API социальных сетей, фреймворками качества данных, крупномасштабными системами сбора данных или мониторингом актуальности и охвата. Любопытство к экономике влияния также поможет, но мы вас всему научим.

Наш стек AWS с Pulumi для инфраструктуры как кода TypeScript и Node.js как основные языки Aurora Limitless/Postgres для состояния подписки и сбора данных S3 для хранения сырых данных в data-lake CloudWatch для наблюдаемости и оповещений Сети прокси и пользовательские слои маршрутизации ECS, SQS, Athena и другие сервисы AWS Slack, GitHub, Linear, Notion и Cursor

Процесс собеседования Мы работаем быстро и можем завершить процесс менее чем за неделю: Вводная беседа Coding-интервью Интервью по системному дизайну Командное интервью Беседа о культуре и соответствии с нашим CEO, Эвери Шрейдером

Преимущества Что мы предлагаем Полностью удаленная работа в Европе 🏠 Работайте там, где вы лучше всего справляетесь, с некоторым перекрытием по GMT+3. Компенсация. Ваша компенсация состоит из зарплаты и опционов на акции. Поскольку мы быстро растем, пакет опционов на акции особенно значителен. Годовой диапазон зарплаты составляет 80 000–110 000 евро для этой должности. Мы нанимаем сотрудников по всей Европе, поэтому точная сумма зависит от вашего местоположения, типа занятости, навыков и опыта. Гибкий график ⏱ Мы ценим результаты, а не время вашего входа в систему. Неограниченный оплачиваемый отпуск 🌴 Если вы отдохнули и счастливы, вы работаете лучше. Берите столько, сколько вам нужно. Поддержка личного развития 🧠 Курсы, книги и конференции за наш счет, когда они помогают вам расти. Реальное право собственности 💡 Получите критически важную для продакшена инфраструктуру от идеи до эксплуатации без слоев ненужных процессов. Регулярные выездные мероприятия ✈️ Мы работаем удаленно, но находим время для личного общения, сотрудничества и веселья.

И немного больше о нас... Основанная в 2018 году человеком, бросившим школу, и канадцем (да, мы тоже удивлены, что все идет так хорошо), Modash создает набор инструментов, которые помогают брендам масштабировать партнерские отношения с онлайн-инфлюенсерами. Более 2700 компаний, таких как Stanley 1913, Sennheiser и NordVPN, уже используют Modash для управления и масштабирования своей работы в области инфлюенсер-маркетинга. И мы только начинаем. В течение следующих десяти лет инвестиции брендов в инфлюенсеров будут продолжать расти, и Modash будет в центре всего этого. Modash намерен остаться. У нас есть 8-значные показатели ARR по двум продуктам, инвестиции серии А в размере 12 миллионов долларов, и мы «default alive». Мы строим компанию, которая будет существовать еще 20 лет, а не спешить к выходу. Нас почти 100 человек, распределенных по 20+ странам, работающих в быстром, асинхронном режиме. Если вы присоединитесь к Modash, вы будете окружены людьми, которые действительно хотят быть лучшими в своем деле. Людьми, которые делают вас лучше. Интересными людьми, которые занимались всем: от строительства солнечных автомобилей до общения с Metallica и Bon Jovi. Присоединяйтесь к нам. Будьте великими, делайте великие дела, создавайте великие воспоминания, и при этом оказывайте огромное влияние. Сделайте это.