Senior Data Engineer - Recommendations

Присоединяйтесь к Truecaller – месту, где инновации встречаются с реальными результатами! Миссия Truecaller – построить доверие в коммуникациях, сделав их безопаснее, умнее и эффективнее. Основано в Швеции, пользуется доверием во всем мире, и вот почему мы выделяемся: Нам доверяют более 500 миллионов активных пользователей каждый месяц в 190+ странах Мы идентифицируем более 15 миллиардов звонков ежедневно, помогая пользователям избегать спама и мошенничества Нас поддерживает команда из более чем 400 сотрудников из 45+ национальностей Мы всегда ищем людей, которые проявляют инициативу, берут на себя ответственность за свою работу и постоянно повышают планку. Предпринимательский склад ума здесь важен, особенно когда он превращает смелые идеи в реальные действия. Мы остаемся сплоченными и сосредоточенными, всегда ища более умные пути вперед. Если вы хотите оказать влияние и расти вместе с командой, которая вдохновляет миллионы, вы отлично впишетесь. Роль: В качестве старшего инженера по работе с данными в наших командах Recommendations и adVantage вы будете создавать и владеть основой данных для систем рекомендаций и рекламы Truecaller. Это означает конвейеры признаков, обработку потоковых событий, наборы данных для обучения и предоставление признаков в режиме реального времени, которые обеспечивают работу моделей поиска, ранжирования и контекстных бандитов, определяющих, что видят сотни миллионов пользователей. Это практическая роль на платформе, где крупномасштабная инженерия данных встречается с производственным машинным обучением.

Создавать и владеть конвейерами признаков и данных для обучения для наших моделей поиска, ранжирования и контекстных бандитов, преобразуя необработанные события в готовые для модели признаки. Проектировать потоковые конвейеры, которые замыкают цикл между предоставлением и обучением, собирая показы, клики и конверсии почти в реальном времени, чтобы модели переобучались на свежих сигналах. Создавать и поддерживать хранилище признаков в режиме реального времени, чтобы признаки оставались согласованными между оффлайн-обучением и низколатентным онлайн-инференсом. Владеть основой данных событий рекламы и атрибуции: чистые, согласованные конвейеры для партнеров по доставке, биллингу и сторонней атрибуции. Напрямую сотрудничать с специалистами по данным для переноса моделей из ноутбука в продакшн, владея контрактами данных, SLA по свежести и происхождением, от которых они зависят. Создавать повторно используемые, настраиваемые фреймворки, чтобы новые модели и кампании могли быть запущены без необходимости каждый раз выполнять индивидуальную работу над конвейером. Поддерживать надежность платформы в масштабе: миллиарды событий ежедневно в рамках установленных SLA, подкрепленные мониторингом, проверками качества данных и надежными исправлениями. Устанавливать лучшие практики и процессы, связанные с проектированием конвейеров, тестированием и моделированием данных во всей команде.

Сильные навыки программирования на Python и Spark, с подтвержденным опытом создания сложных крупномасштабных ETL/ELT конвейеров. Практический опыт работы с инструментом оркестрации, таким как Airflow, для обеспечения работы ML или аналитических рабочих нагрузок в продакшне. Опыт работы с большими наборами данных у крупного облачного провайдера (предпочтительно GCP; AWS или Azure также подходят). Основы надежной разработки программного обеспечения: тестирование, CI/CD с использованием Git и Jenkins или аналогичных инструментов, а также код, который вы будете рады поддерживать. Комфорт в работе плечом к плечу со специалистами по данным и ML-инженерами, а также четкое понимание того, что требуется от данных для производственного ML – признаки, свежесть, согласованность и происхождение. Отличные навыки решения проблем и коммуникации, а также самомотивация для решения проблем от начала до конца.

Мы поддерживаем рост с помощью обучающих ресурсов, программ лидерства, наставничества и реальной практической работы. Люди могут перемещаться между командами и проектами, чтобы приобретать новые навыки и сохранять интерес. Мы предлагаем четкую внутреннюю мобильность и прозрачный путь развития, с руководителями, которые остаются вовлеченными и предоставляют руководство в течение всего года. Кроме того, вы получите: Комплексный пакет вознаграждения: Мы предлагаем конкурентную заработную плату, 30 дней оплачиваемого отпуска, частную медицинскую страховку, доплату к родительскому отпуску, пенсионное обеспечение и взносы на оздоровление. Современные инструменты для вашей лучшей работы: Выберите предпочитаемый компьютер и телефон в рамках нашего бюджета, чтобы вы могли работать комфортно и эффективно. Ориентированная на людей офисная культура: Мы ценим личное взаимодействие и придерживаемся модели, ориентированной на офис, с некоторой гибкостью. Наши офисы предлагают оживленную атмосферу с возможностями для обучения, общения и восстановления сил, от завтраков, обедов и хорошо укомплектованных станций закусок, до тихих зон и командных мероприятий, таких как киновечера, технические миторинги и культурные мероприятия. Здесь есть что-то для каждого. «Лабораторные дни» Truecaller – пространство для воображения: 5 раз в год по 3 дня, когда все отвлекаются от своих обычных задач, чтобы исследовать новые, смелые идеи и создавать то, что они всегда хотели. Это пространство, где любопытство ведет вперед, а прототипы обретают форму. Некоторые концепции даже переходят в продакшн, а несколько выросли в реальные функции, используемые миллионами сегодня. Лабораторные дни позволяют вам быть креативными, быстро учиться и помогать формировать будущее Truecaller. Приходите как есть: Truecaller стремится построить разнообразную и инклюзивную команду. Мы верим, что широкий спектр происхождения, точек зрения и опыта укрепляет наши продукты и нашу культуру. Независимо от того, откуда вы родом, на каком языке говорите или как себя идентифицируете, мы ценим то, что делает вас уникальным, и будем рады с вами познакомиться. Познакомьтесь с жизнью в Truecaller – За кулисами кода: