Software Engineer 3 - Linux/Bash/Python/Apache Airflow/SQL/Jupyter Notebook/NumPy/JSON

Создавайте то, чем можно гордиться. Captivation заработала репутацию поставщика именно того, что нужно клиентам, в нужные сроки. Наша команда инженеров гордится тем, что разрабатывает, и постоянно внедряет инновации для предоставления наилучших решений. Captivation ищет разработчиков программного обеспечения, которые могут добиваться результатов, внося вклад в миссию по защите нашей страны. Description Captivation Software ищет инженера-программиста старшего уровня, который должен обладать обширными знаниями в области проектирования потоков данных, механизмов передачи данных и распределенной обработки на базе Apache Spark. В этой роли инженер-программист будет отвечать за проектирование, реализацию и оптимизацию путей поступления/вывода данных для обеспечения эффективной, масштабируемой и надежной обработки аналитических рабочих нагрузок организации. Requirements Security Clearance: Должен иметь действующий допуск к секретной информации U.S. Government (Top Secret/SCI) с положительным заключением полиграфа, поэтому все кандидаты должны быть гражданами США. Minimum Qualifications: Степень магистра в области компьютерных наук или смежной дисциплины, полученная в аккредитованном колледже или университете, плюс пять (5) лет опыта работы в качестве SWE (инженера-программиста) в программах и контрактах аналогичного масштаба, типа и сложности. Степень бакалавра в области компьютерных наук или смежной дисциплины, полученная в аккредитованном колледже или университете, плюс семь (7) лет опыта работы в качестве SWE (инженера-программиста) в программах и контрактах аналогичного масштаба, типа и сложности. Девять (9) лет опыта работы в качестве SWE (инженера-программиста) в программах и контрактах аналогичного масштаба, типа и сложности. Required Skills: Опыт использования командной строки Linux (CLI) и инструментов Linux Опыт разработки скриптов Bash для автоматизации ручных процессов Недавний опыт разработки программного обеспечения с использованием Python и Java Опыт использования Apache Airflow (проектирование DAG, планирование, операторы, сенсоры) для оркестровки, планирования и мониторинга сложных рабочих процессов Опыт работы с распределенными движками обработки больших данных, включая Apache Spark Знакомство с SQL-технологиями, такими как MySQL, MariaDB и PostgreSQL, для запросов, объединения и агрегирования больших наборов данных Опыт использования Jupyter Notebook Опыт обработки и предварительной подготовки данных с использованием таких инструментов, как pandas, NumPy Опыт работы со структурированными, полуструктурированными и неструктурированными данными, такими как Parquet, JSON, CSV, XML Знакомство с концепциями качества данных, валидации данных и обнаружения аномалий Опыт работы с системой контроля версий Git Desired Skills: Знакомство с инструментами планирования заданий HPC, включая Slurm Опыт работы с набором инструментов Atlassian, включая Jira и Confluence Эта позиция открыта только для прямого найма. Мы не будем рассматривать кандидатов от сторонних кадровых/рекрутинговых агентств. Benefits Ежегодная заработная плата: $130,000 - $270,000 (зависит от стажа работы) До 20% отчислений в 401k (соответствие не требуется, vesting с первого дня) Ставки выше рыночных $3,600 взнос в HSA 6 недель оплачиваемого отпуска Медицинское/стоматологическое/зрение/страхование жизни/краткосрочная и долгосрочная нетрудоспособность/страхование от несчастных случаев, оплачиваемые компанией