Название: Инженер данных – интеграция облачных сервисов и SaaS
Компания: DoiT
Местоположение: Удаленно, EMEA / Удаленно, Израиль
Местоположение
Наш инженер данных станет неотъемлемой частью нашей команды R&D. Эта должность предполагает удаленную работу на полную ставку в Великобритании, Ирландии, Эстонии, Нидерландах, Швеции и Израиле. Мы также открыты для сотрудничества с подрядчиками из Восточной Европы и Португалии.
Кто мы
DoiT — глобальная технологическая компания, которая помогает облачным организациям использовать облачные технологии для стимулирования роста бизнеса и инноваций. Мы объединяем данные, технологии и человеческий опыт, чтобы наши клиенты работали в хорошо спроектированном и масштабируемом состоянии — от планирования до производства.
Предоставляя DoiT Cloud Intelligence, единственное решение, которое объединяет передовые технологии с человеческим интеллектом, мы помогаем нашим клиентам решать сложные многооблачные проблемы и повышать эффективность.
Обладая многолетним опытом работы с многооблачными средами, мы специализируемся на Kubernetes, GenAI, CloudOps и многом другом. Являясь отмеченным наградами стратегическим партнером AWS, Google Cloud и Microsoft Azure, мы работаем с более чем 4000 клиентами по всему миру.
Возможность
Расходы на облачные сервисы — это уже не только AWS, Google Cloud и Azure. Наши клиенты теперь тратят значительную и растущую часть своих средств на технологии через SaaS-платформы, облака данных и поставщиков ИИ — каждый со своим собственным API биллинга, своей моделью ценообразования и своим представлением о том, что означает «строка детализации». Фреймворк интеграций DoiT превращает это в единую, надежную картину затрат.
Мы нанимаем инженера данных, который возьмет на себя ответственность за работу с данными. Ваша задача — расширение видимости: включение в платформу большего объема расходов клиентов от большего числа поставщиков с таким уровнем качества, на основе которого люди могут принимать финансовые решения. Ландшафт поставщиков постоянно меняется, поэтому это реальная, постоянная ответственность с коротким путем от вашей работы до того, что видят клиенты.
Вы будете работать с использованием ИИ с первого дня. Мы ожидаем, что вы будете использовать ИИ во всем своем рабочем процессе, а не просто как случайный автокомплит, и будете иметь собственное мнение о том, где он действительно приносит пользу.
Обязанности
- Расширение охвата поставщиков. Это основная часть работы. Создавайте новые интеграции с API биллинга и использования сторонних сервисов, чтобы сделать видимыми в платформе больше расходов наших клиентов. Поддерживайте актуальность существующих интеграций по мере того, как поставщики меняют свои API и модели ценообразования — а они меняются постоянно. Снижайте предельные затраты на следующую интеграцию, чтобы охват масштабировался быстрее.
- Работа с использованием ИИ. Ежедневно используйте ИИ во всем объеме своей работы — исследуйте незнакомые кодовые базы и сторонние API, прототипируйте подходы, генерируйте и рецензируйте код, отлаживайте, пишите тесты и создавайте документацию. Изучайте возможности инструментария для этой кодовой базы и используйте здравый смысл, чтобы определить, где ИИ повышает скорость работы, а где человек все еще должен поддерживать уровень качества.
- Правильность и полнота данных. Отвечайте за качество данных, производимых нашими интеграциями: дублирование, пробелы и условия гонки при приеме и повторной обработке, дедупликацию расходов, которые также поступают через маркетплейсы облачных сервисов, и поддержку согласованных с клиентами тарифов, а не общедоступных прайс-листов. Создавайте проверки и сверки, которые позволят нам доказать правильность цифр, а не надеяться на это.
- Нормализация по поставщикам. Проектируйте и создавайте модели, которые делают десятки различных форматов счетов от поставщиков сопоставимыми — согласованные единицы измерения, валюты, временная гранулярность, таксономии ресурсов и услуг, а также категории затрат.
- Владение конвейерами. Полностью отвечайте за оркестрацию, планирование и механизмы обратной загрузки конвейеров приема данных — включая превращение обратной загрузки в рутинную, безопасную операцию самообслуживания.
- Сотрудничество и решение проблем. Работайте с продуктовой командой, службой поддержки и инженерами, которые используют эти данные, чтобы понять, где возникают проблемы. Предлагайте работу, которую, по вашему мнению, следует выполнить; вы здесь не для того, чтобы ждать спецификации.
Квалификация
- Более 3 лет профессионального опыта в области инженерии данных или в бэкэнд-роли с интенсивной работой с данными, с производственной ответственностью за конвейеры, от которых зависят другие люди.
- Отличное знание SQL — вы можете писать, читать и анализировать производительность нетривиальных аналитических запросов.
- Практический опыт создания и эксплуатации конвейеров данных с использованием фреймворка оркестрации. Dagster или Airflow очень желательны; эквивалентный опыт работы с Prefect, dbt или аналогичным инструментом будет актуален, если вы готовы работать с Dagster/Airflow.
- Отличное знание Python или другого языка, которым вы свободно владеете для работы с данными.
- Опыт работы с облачным хранилищем данных или аналитическим хранилищем (BigQuery, ClickHouse, Snowflake, Redshift или аналогичное).
- Опыт интеграции сторонних REST API, включая работу с реальными условиями: пагинация, ограничения скорости, частичные сбои, запаздывающие и пересмотренные данные, а также поставщики, чья документация неверна.
- Реальное понимание корректности данных. Вы — тот инженер, который сверяет итоги, ставит под сомнение число, которое выглядит правдоподобно, и создает проверки, а не полагается на предположения.
- Стиль работы с использованием ИИ — вы уже используете инструменты ИИ в своем рабочем процессе инженера и можете конкретно рассказать, что вы получили от них.
- Опыт разработки решений в облаке и/или использования облачных сервисов.
- Отличные коммуникативные навыки на английском языке, как в письменной, так и в устной форме.
- Самоорганизованность, целеустремленность и мотивация; уверенность, тщательность и настойчивость.
Дополнительные преимущества
- Опыт работы с данными о биллинге облачных сервисов или SaaS — экспорт данных о затратах и использовании AWS/GCP/Azure, биллинг маркетплейса или спецификация FOCUS.
- Знакомство с Go, который мы используем в наших бэкэнд-сервисах.
- Опыт работы с системами, требующими финансовой корректности или корректности аудита — выставление счетов, учет потребления, сверка доходов или биллинговые движки.
- Опыт работы с практиками FinOps или продуктами управления облачными финансами.
- Степень бакалавра/магистра или эквивалентный практический опыт.
Вы — Делатель?
Будьте собой. Работайте на своих условиях. Меняйте мир.
Мы объединяем команду талантливых специалистов со всего мира, которые работают удаленно и имеют гибкость в планировании рабочего времени, чтобы сбалансировать работу и личную жизнь. Мы поддерживаем профессиональное и личное развитие ваших навыков.
Что значит быть Делателем? Мы за предпринимательство, стремление к знаниям и веселье! Нажмите здесь, чтобы узнать больше о наших основных ценностях.
Звучит слишком хорошо, чтобы быть правдой? Посмотрите нашу страницу на Glassdoor.
Мы тоже так думали, но мы здесь и рады, что нажали кнопку «Применить».
Льготы для штатных сотрудников включают:
- Неограниченный отпуск
- Гибкие варианты работы
- Медицинская страховка
- Отпуск по уходу за ребенком
- План опционов для сотрудников
- Компенсация расходов на домашний офис
- Стипендия на профессиональное развитие
- Программа признания заслуг коллег
Много Делателей, Одна Команда DoiT объединяет нас как «Много Делателей, Одна Команда», где разнообразие — это больше, чем цель, это наша сила. Мы активно культивируем инклюзивную, справедливую рабочую среду, признавая, что каждая уникальная точка зрения способствует нашим инновациям. Празднуя различия, мы создаем среду, в которой каждый человек чувствует себя ценным, внося вклад в наш общий успех.