Staff Data Engineer

Заголовок: Ведущий инженер по данным (Staff Data Engineer) Местоположение: 2 локации

Местоположение: США - Калифорния - Сан-Диего Местоположение: США - Район Залива - Фостер-Сити Занятость: Полная Что, если работа, которую вы делаете каждый день, могла бы повлиять на жизнь людей, которых вы знаете? Или на все человечество? В Illumina мы расширяем доступ к геномным технологиям, чтобы обеспечить равенство в области здравоохранения для миллиардов людей по всему миру. Наши усилия позволяют совершать меняющие жизнь открытия, которые трансформируют здоровье человека благодаря раннему выявлению и диагностике заболеваний, а также новым вариантам лечения пациентов. Работа в Illumina означает быть частью чего-то большего, чем вы сами. Каждый человек, в каждой роли, имеет возможность изменить ситуацию. Работая с выдающимися людьми, вдохновляющими лидерами и проектами, меняющими мир, вы сможете сделать больше и стать больше, чем вы когда-либо могли себе представить. Резюме Ведущий инженер по данным (Staff Data Engineer) — это опытный инженер-практик, который проектирует, создает и масштабирует продукты данных в нашем облачном репозитории данных (cloud lakehouse), обеспечивая аналитику, отчетность и ИИ/МО для Illumina. Мы ищем специалиста с глубокими знаниями Python, SQL и моделирования данных, с прочным пониманием распределенных систем и проектирования систем, который создавал и масштабировал продукты данных на современных облачных платформах, таких как Databricks и Snowflake. Это практическая, старшая роль индивидуального контрибьютора с полной ответственностью и лидерством, охватывающая несколько доменов, таких как цепочка поставок, производство и качество, включая наставничество инженеров в нашей глобальной команде (базирующейся в Индии). Обязанности Сотрудничество с командами по бизнесу, ИИ и платформам для преобразования потребностей доменов (например, SAP, производство, качество) в хорошо смоделированные, управляемые и масштабируемые продукты данных. Проектирование, создание и масштабирование сквозных продуктов данных на Databricks (и взаимодействие со Snowflake) — от сбора данных до подготовленных наборов данных, готовых к анализу, в соответствии с архитектурой медалиона (Bronze/Silver/Gold). Разработка повторно используемых фреймворков, библиотек и стандартизированных шаблонов на Python (функциональное и объектно-ориентированное программирование, в зависимости от ситуации) для сбора, преобразования, валидации и публикации. Проектирование надежных моделей данных (реляционных, размерных и lakehouse) и применение глубокого понимания проектирования систем для создания высокопроизводительных, надежных распределенных конвейеров данных с использованием Spark, Delta Lake / open table formats, dbt и SQL. Встраивание качества данных, сверки, валидации и управления в конвейеры (Unity Catalog: lineage, RBAC, маскирование, обработка PII). Мониторинг, оповещение, устранение неполадок, анализ первопричин и соблюдение SLA для критически важных бизнес-наборов данных. Использование ИИ в повседневной работе с данными и аналитике для ускорения разработки, тестирования и оптимизации. Выступать в качестве технического лидера — устанавливать стандарты, проводить ревью кода, участвовать в принятии архитектурных решений, наставлять инженеров и сообщать о компромиссах коллегам и заинтересованным сторонам. Требования к кандидатам Более 10 лет профессионального опыта в области инженерии данных, создания и масштабирования продуктов данных на облачных платформах, таких как Databricks и/или Snowflake. Глубокие знания Python, включая разработку повторно используемых фреймворков с использованием функционального и объектно-ориентированного программирования. Продвинутые навыки SQL и сильные навыки моделирования данных (реляционных, размерных и lakehouse). Прочное понимание распределенных систем и проектирования систем для крупномасштабной обработки данных. Практический опыт работы с форматами таблиц с открытым исходным кодом (Delta Lake и/или Apache Iceberg) и файловыми форматами больших данных (Parquet). Опыт работы со Spark и современными инструментами ELT (например, dbt). Опыт работы с практиками наблюдаемости данных, управления, безопасности и соответствия требованиям (RBAC, PII, SOX). Подтвержденное применение ИИ в рабочих процессах инженерии данных и аналитики. Прочный фундамент разработки программного обеспечения — Git, REST API, JSON, CI/CD по крайней мере в одной облачной среде (предпочтительно AWS). Отличные навыки письменного и устного общения, способность эффективно работать с командами по бизнесу, ИИ и платформам, а также вести технические обсуждения. Степень бакалавра в области компьютерных наук, науки о данных, информационных систем, инженерии, математики или смежной области, или эквивалентный подтвержденный опыт. Предпочтительные квалификации Большим плюсом будет знание предметной области SAP, производства и/или данных и процессов, связанных с качеством. Опыт работы в регулируемых средах GxP / 21 CFR Part 11 или сопоставимых (биология, фармацевтика, медицинские устройства). Опыт управления Unity Catalog и lakehouse в масштабе. Опыт миграции со Snowflake на Databricks. Опыт работы с данными SAP (ECC / S/4HANA, CDS views) и шаблонами интеграции данных SAP (например, SAP Business Data Cloud). Бонус, если у кандидата есть дополнительные знания в таких областях, как коммерция и финансы. Сертификаты Databricks и/или dbt. Знакомство с Power BI / Tableau и поддержка BI и разговорной аналитики. Компетенции, которые мы ценим Ответственность: Полная ответственность за продукты данных, от проектирования до поддержки в производственной среде. Инженерное мастерство: Чистый, повторно используемый, хорошо спроектированный код и гордость за проверяемые, надежные данные. Системное мышление: Глубокое понимание проектирования с точки зрения масштаба, производительности и стоимости. Техническое лидерство: Повышение планки через стандарты, ревью и наставничество. Скорость обучения: Быстрое освоение новых инструментов, включая ИИ, и их прагматичное применение. Межфункциональная коммуникация: Эффективное партнерство с командами по бизнесу, ИИ и платформам и четкое объяснение компромиссов. Оценочный диапазон базовой заработной платы для должности Ведущего инженера по данным (Staff Data Engineer) в Соединенных Штатах Америки составляет: $141 600 - $212 400. В случае изменения уровня или местоположения должности в процессе найма, применимый диапазон базовой оплаты может быть обновлен соответствующим образом. Диапазон отражает долгосрочный рост на данной должности; следовательно, большинство кандидатов нанимаются между минимальным значением и серединой диапазона. Размещение зависит от опыта, навыков, местоположения и внутренней справедливости. Кроме того, все сотрудники имеют право на участие в одной из наших программ переменного денежного вознаграждения (бонус или комиссия), а для подходящих должностей может быть предусмотрен опцион как часть компенсационного пакета. Мы предлагаем широкий спектр льгот, столь же инновационных, как и наша работа, включая доступ к геномному секвенированию, планированию семьи, медицинскому/стоматологическому/оптимическому страхованию, пенсионным пособиям и оплачиваемому отпуску. Мы — компания, глубоко укоренившаяся в стремлении к принадлежности, продвигающая инклюзивную среду, где сотрудники чувствуют себя ценными и имеют возможность внести свой вклад в нашу миссию. Основываясь на прочном фундаменте, Illumina всегда уделяла первостепенное внимание открытости, сотрудничеству и поиску альтернативных точек зрения для продвижения инноваций в геномике. Мы с гордостью подтверждаем нулевой разрыв в оплате труда независимо от пола, этнической принадлежности или расы. У нас также есть несколько групп поддержки сотрудников (ERG), которые предоставляют возможности для развития карьеры, повышают культурную осведомленность и предлагают возможности для участия в социальной ответственности. Мы гордимся тем, что являемся равным работодателем, стремящимся предоставлять возможности трудоустройства независимо от пола, расы, вероисповедания, цвета кожи, пола, религии, семейного положения, статуса партнера по сожительству, возраста, национального происхождения или происхождения, физического или умственного недостатка, состояния здоровья, сексуальной ориентации, беременности, военного статуса или статуса ветерана, гражданства и генетической информации. Illumina проводит проверку биографических данных кандидатов, которым было сделано условное предложение о работе. Квалифицированные кандидаты с историей арестов или судимостей рассматриваются для трудоустройства в соответствии с применимыми местными, государственными и федеральными законами. Результаты проверки биографических данных могут потенциально привести к отзыву условного предложения о работе. Процесс проверки биографических данных и любые решения, принятые в результате, должны осуществляться в соответствии со всеми применимыми местными, государственными и федеральными законами. Illumina запрещает использование генеративного искусственного интеллекта (ИИ) в процессе подачи заявок и собеседований. Если вам требуется помощь для завершения процесса подачи заявки или собеседования, пожалуйста, свяжитесь с контакт рекрутера. Чтобы узнать больше, посетите: . Вакансия будет открыта до тех пор, пока не будет выбран финальный кандидат или пока не будет достаточное количество квалифицированных соискателей.