Заголовок: Инженер данных — облачные интеграции и SaaS
Компания: DoiT
Местоположение: Удаленно EMEA / Удаленно Эстония
Местоположение
Наш инженер данных станет неотъемлемой частью нашей команды R&D. Эта должность предполагает удаленную работу в качестве штатного сотрудника в Великобритании, Ирландии, Эстонии, Нидерландах, Швеции и Израиле. Мы также открыты для привлечения подрядчиков из Восточной Европы и Португалии.
О нас
DoiT — глобальная технологическая компания, которая сотрудничает с облачными организациями, чтобы использовать облачные технологии для стимулирования роста бизнеса и инноваций. Мы объединяем данные, технологии и человеческий опыт, чтобы наши клиенты работали в хорошо спроектированном и масштабируемом состоянии — от планирования до производства.
Предоставляя DoiT Cloud Intelligence, единственное решение, которое объединяет передовые технологии и человеческий интеллект, мы помогаем нашим клиентам решать сложные мультиоблачные проблемы и повышать эффективность.
Обладая многолетним опытом работы с мультиоблачными технологиями, мы специализируемся на Kubernetes, GenAI, CloudOps и многом другом. Являясь отмеченным наградами стратегическим партнером AWS, Google Cloud и Microsoft Azure, мы работаем с более чем 4000 клиентами по всему миру.
Возможности
Расходы на облачные услуги — это больше не только AWS, Google Cloud и Azure. Наши клиенты теперь тратят значительную и растущую долю своих технологических расходов через SaaS-платформы, облака данных и поставщиков ИИ — каждый со своим собственным API биллинга, своей моделью ценообразования и своим представлением о том, что означает «строка счета». Интеграционная структура DoiT превращает это в единую, надежную картину затрат.
Мы ищем инженера данных, который будет отвечать за эту сторону работы с данными. Ваша задача — расширение видимости — включение большего объема расходов клиента в платформу, от большего числа поставщиков, с таким уровнем качества, на основе которого люди могут принимать финансовые решения. Ландшафт поставщиков постоянно меняется, поэтому это реальная, постоянная ответственность с коротким путем от вашей работы до того, что видят клиенты.
С первого дня вы будете работать с использованием ИИ. Мы ожидаем, что вы будете использовать ИИ во всем рабочем процессе, а не только как периодическое автодополнение, и будете иметь реальные мнения о том, где он занимает свое место.
Обязанности
- Расширение охвата поставщиков. Это ядро роли. Создание новых интеграций с API сторонних поставщиков биллинга и использования, чтобы сделать больше расходов наших клиентов видимыми в платформе. Поддержание актуальности существующих интеграций по мере того, как поставщики постоянно меняют свои API и модели ценообразования. Снижение предельной стоимости следующей интеграции, чтобы охват масштабировался быстрее.
- Работа с использованием ИИ. Ежедневное использование ИИ во всем объеме вашей работы — изучение незнакомых кодовых баз и сторонних API, прототипирование подходов, создание и проверка кода, отладка, написание тестов и создание документации. Развивайте возможности инструментария для этой кодовой базы и проявляйте суждение о том, где ИИ повышает скорость работы, а где человек все еще должен поддерживать уровень качества.
- Корректность и полнота данных. Ответственность за качество данных, которые производят наши интеграции: дублирование, пробелы и условия гонки при приеме и переработке данных, дедупликация расходов, которые также поступают через облачные маркетплейсы, и поддержка согласованных клиентами ставок, а не общедоступных цен. Создание проверок и сверки, которые позволяют нам доказать правильность цифр, а не надеяться на это.
- Нормализация по поставщикам. Разработка и создание моделей, которые делают десятки различно структурированных счетов поставщиков сопоставимыми — согласованные единицы измерения, валюты, временная гранулярность, таксономии ресурсов и услуг, а также категории затрат.
- Владение конвейером. Ответственность за оркестрацию, планирование и механику резервного копирования конвейеров приема данных от начала до конца — включая превращение резервного копирования в рутинную, безопасную операцию самообслуживания.
- Сотрудничество и решение проблем. Работайте с продуктовым отделом, службой поддержки и инженерами, которые работают поверх этих данных, чтобы понять, где существуют пробелы. Предлагайте работу, которую, по вашему мнению, следует выполнить; вы здесь не для того, чтобы ждать спецификации.
Квалификация
- Более 3 лет профессионального опыта в области инженерии данных или на бэкенд-позиции с большим объемом данных, с производственной ответственностью за конвейеры, от которых зависят другие люди
- Отличное знание SQL — вы можете писать, читать и рассуждать о производительности нетривиальных аналитических запросов
- Практический опыт создания и эксплуатации конвейеров данных с использованием фреймворка оркестрации. Dagster или Airflow очень желательны; эквивалентный опыт работы с Prefect, dbt или сопоставимым инструментом будет релевантен, если вы готовы работать с Dagster/Airflow
- Отличное знание Python или другого языка, которым вы свободно владеете для работы с данными
- Опыт работы с облачным хранилищем данных или аналитическим хранилищем (BigQuery, ClickHouse, Snowflake, Redshift или аналогичные)
- Опыт интеграции сторонних REST API, включая работу с реальными условиями: пагинация, ограничения скорости, частичные сбои, поздно поступающие и повторно заявленные данные, а также поставщики, чья документация некорректна
- Реальное понимание корректности данных. Вы — тот тип инженера, который сверяет итоги, ставит под сомнение число, которое кажется правдоподобным, и создает проверки, а не предполагая
- Рабочий стиль с использованием ИИ — вы уже используете инструменты ИИ в своем рабочем процессе инженера и можете конкретно рассказать о том, что вы от них получили
- Опыт разработки решений в облаке и/или использования облачных сервисов
- Отличные коммуникативные навыки на английском языке, как письменные, так и устные
- Самоорганизованность, целеустремленность и мотивация; уверенность, тщательность и упорство
Бонусные баллы
- Опыт работы с данными биллинга облачных услуг или SaaS — экспорт затрат и использования AWS/GCP/Azure, биллинг маркетплейса или спецификация FOCUS
- Знакомство с Go, который мы используем в наших бэкенд-сервисах
- Опыт работы с системами, требующими финансовой корректности или корректности аудита — выставление счетов, учет использования, сверка выручки или биллинговые движки
- Опыт работы с практиками FinOps или продуктами управления облачными финансами
- Степень бакалавра/бакалавра наук или эквивалентный практический опыт
Вы — Исполнитель?
Будьте собой. Работайте на своих условиях. Вносите изменения.
Мы являемся домом для глобальной команды невероятных талантов, которые работают удаленно и имеют гибкость в составлении графика, который уравновешивает вашу рабочую и личную жизнь. Мы принимаем и поддерживаем повышение ваших навыков профессионально и лично.
Что значит быть Исполнителем? Мы делаем ставку на предпринимательство, стремление к знаниям и получение удовольствия!
Звучит слишком хорошо, чтобы быть правдой? Посетите нашу страницу на Glassdoor.
Мы тоже так думали, но мы здесь и рады, что нажали кнопку «Применить».
Льготы для штатных сотрудников включают:
- Неограниченный отпуск
- Гибкие варианты работы
- Медицинское страхование
- Отпуск по уходу за ребенком
- План опционов сотрудников
- Пособие на домашний офис
- Стипендия на профессиональное развитие
- Программа признания коллег
Множество Исполнителей, Одна Команда DoiT объединяется как «Множество Исполнителей, Одна Команда», где разнообразие — это больше, чем цель, это наша сила. Мы активно культивируем инклюзивную, справедливую рабочую среду, признавая, что каждая уникальная перспектива обогащает наши инновации. Празднуя различия, мы создаем среду, в которой каждый человек чувствует себя ценным, внося свой вклад в наш общий успех.
