Старший инженер по обработке данных

Это полная занятость для звездного инженера по данным/ML из LATAM. Будет проведена личная проверка.

IDT Corporation — глобальная телекоммуникационная компания, основанная в 1990 году со штаб-квартирой в Ньюарке, Нью-Джерси. Мы являемся лидерами отрасли в области предоплаченных коммуникационных и платежных услуг и одним из крупнейших международных поставщиков голосовой связи. Мы котируемся на NYSE, насчитываем более 1800 сотрудников в 20 странах, а наши доходы превышают 1,5 миллиарда долларов.

IDT — это не «еще одна большая IT-корпорация» — мы поощряем и поддерживаем внутренних предпринимателей в развитии их идей в бизнес-действия.

Наш флагманский бренд BOSS Revolution предлагает услуги денежных переводов, международных звонков и пополнения мобильного счета, поддерживая миссию IDT по предоставлению людям возможности оставаться на связи и делиться ресурсами с семьей и друзьями по всему миру.

Мы ищем опытного инженера по данным/ML, который присоединится к нашей команде BI и будет активно участвовать в проектировании, создании и поддержке сквозного конвейера данных, архитектуры и дизайна, который обеспечивает работу нашего хранилища данных, приложений на основе LLM и BI на основе ИИ. Если вы ищете компанию, которая предоставит вам максимальную гибкость в выборе места работы, эта возможность для вас!

Обязанности:

• Проектировать, разрабатывать и поддерживать масштабируемые конвейеры данных для поддержки приема, преобразования и доставки в централизованные хранилища признаков, рабочие процессы обучения моделей и службы вывода в реальном времени.
• Создавать и оптимизировать рабочие процессы для извлечения, хранения и извлечения семантических представлений неструктурированных данных для обеспечения расширенного поиска и шаблонов извлечения.
• Архитектурно проектировать и реализовывать легкие аналитические решения и инструменты для создания информационных панелей, которые обеспечивают взаимодействие с запросами на естественном языке и аналитические данные на основе ИИ.
• Определять и выполнять процессы для управления методами инжиниринга подсказок, рабочими процессами оркестрации и процедурами тонкой настройки моделей для поддержки разговорных интерфейсов.
• Осуществлять надзор за хранилищами векторных данных и разрабатывать эффективные методологии индексации для поддержки рабочих процессов генерации с дополненным извлечением (RAG).
• Сотрудничать с заинтересованными сторонами в области данных для сбора требований к инициативам в области языковых моделей и их преобразования в масштабируемые решения.
• Создавать и поддерживать исчерпывающую документацию для всех процессов обработки данных, рабочих процессов и процедур развертывания моделей.
• Быть готовым к информированию и изучению новых методологий в области инжиниринга данных, MLOps и операций с LLM.

Требования:

• 8+ лет опыта работы инженером по обработке данных.
• Подтвержденный опыт использования Python для задач инжиниринга данных, включая преобразование, продвинутую обработку данных и крупномасштабную обработку данных.
• Практический опыт работы с технологиями больших данных, включая Apache Spark, Hadoop и Kafka, для распределенной обработки и приема данных в реальном времени.
• Опыт проектирования сложных конвейеров данных, извлекающих данные из RDBMS, JSON, API и простых файлов.
• Подтвержденные навыки программирования SQL и PLSQL с продвинутым владением методологиями Business Intelligence и хранилищ данных, а также практический опыт работы с одной или несколькими реляционными базами данных и облачными базами данных, такими как Snowflake/Redshift.
• Понимание принципов программной инженерии и навыки работы с операционными системами Unix/Linux/Windows, а также опыт работы с гибкими методологиями.
• Владение системами контроля версий, опыт управления репозиториями кода, ветвлением, слиянием и совместной работой в распределенной среде разработки.
• Интерес к бизнес-операциям и полное понимание того, как надежные системы BI способствуют корпоративной прибыльности, позволяя принимать решения на основе данных и получать стратегические инсайты.
• Эффективные устные и письменные навыки владения английским языком для общения с командой BI и сообществом пользователей.

Плюсы

• Опыт работы с векторными базами данных, такими как DataStax AstraDB, и разработка приложений на основе LLM с использованием популярных фреймворков с открытым исходным кодом, таких как LangChain и LlamaIndex — включая инжиниринг подсказок, генерацию с дополненным извлечением (RAG) и оркестрацию интеллектуальных рабочих процессов.
• Знакомство с оценкой и интеграцией фреймворков LLM с открытым исходным кодом — таких как Hugging Face Transformers/LLaMA-4 в сквозных рабочих процессах, включая тонкую настройку и оптимизацию вывода.
• Знание инструментов MLOps и конвейеров CI/CD для управления версиями моделей и автоматизированным развертыванием.

Что мы предлагаем:

• Возможность удаленной работы!
• B2B Employment ($, gross).
• Стабильная работа с перспективой долгосрочного роста в окружении талантливых людей.
• Действительно хорошее оборудование.
• Отличные возможности для обучения и роста.
• Компенсация профессионального обучения, семинаров и конференций.
• Реферальная программа — получайте вознаграждение за помощь в расширении команды талантливыми людьми.
• Корпоративные курсы английского языка для повышения вашего профессионального роста.

Пожалуйста, приложите резюме на английском языке. Интервью будет проводиться на английском языке.

Будет проведена личная проверка. Поддельные профили будут сообщены.

Принимаются только заявители из LATAM.