Обзор
Мы ищем архитектора данных для руководства разработкой архитектуры данных в рамках инициативы по модернизации федеральных систем, поддерживающих системы разрешений и управления природными ресурсами.
Архитектор данных будет определять и руководить внедрением современного озера данных (lakehouse) на базе AWS, которое консолидирует структурированные, документоориентированные, геопространственные и событийные данные из множества исходных систем в управляемую каноническую модель. Роль будет устанавливать архитектурные шаблоны для управления метаданными и агентурной обработки данных, качества данных, обработки документов, интеграции ГИС и управляемых продуктов данных.
Среда включает Amazon S3, Apache Iceberg, AWS Glue Catalog, DuckDB, Kafka/Amazon MSK, OpenSearch, GeoParquet и PostGIS.
Эта позиция является удаленной с периодическими командировками по мере необходимости.
Обязанности и ответственность
- Выступать в качестве основного авторитета по архитектуре для рабочей группы по данным.
- Определять сквозную архитектуру данных, охватывающую загрузку, обработку (bronze/silver/gold), конвейеры документов, обработку ГИС, аналитические продукты данных и нижестоящие сервисы.
- Проектировать архитектуру озера данных, используя Amazon S3, Apache Iceberg, AWS Glue Catalog и DuckDB.
- Определять повторно используемые шаблоны для пакетной загрузки, API, файлов, баз данных, CDC и событийной загрузки.
- Создать архитектуру, управляемую метаданными, которая поддерживает онбординг источников на основе конфигурации и отображение от источника до канонической модели.
- Определить и управлять общей канонической моделью данных, используемой для гармонизации информации из исходных систем.
- Создать контракты и стандарты данных для отслеживания происхождения (lineage), источников (provenance), сверки (reconciliation), эволюции схем (schema evolution), аудируемости (auditability) и качества данных (data quality).
- Определить архитектурные шаблоны для агентурных решений, поддерживающих анализ источников, отображение, генерацию конвейеров, тестирование, сверку и обеспечение качества.
- Установить элементы управления для агентурных рабочих процессов, включая валидацию, наблюдаемость (observability), безопасность, детерминированное выполнение и, при необходимости, проверку человеком.
- Координировать архитектуру между структурированными данными, обработкой OCR/документов, векторным поиском и геопространственными данными.
- Предоставлять архитектурное руководство и проводить обзор проектов для команд инженерии данных, науки о данных, ГИС и конвейеров контента.
- Взаимодействовать с государственными заинтересованными сторонами и техническими командами для преобразования бизнес-требований и требований предметной области в масштабируемые модели и сервисы данных.
- Поддерживать стандарты архитектуры, технические решения, спецификации интерфейсов и руководство по внедрению.
- Поддерживать техническую передачу и обмен знаниями с государственными и эксплуатационными командами.
Образовательные требования
- Степень бакалавра в области компьютерных наук, инженерии данных, информационных систем, инженерии или смежной технической дисциплины.
Требования
- Опыт работы в области архитектуры данных, инженерии данных или разработки программного обеспечения более 10 лет, включая руководство инициативами по созданию современных платформ данных.
- Подтвержденный опыт проектирования облачных озер данных или аналитических платформ.
- Практический опыт работы с DuckDB, Apache Iceberg, SQL, Python и сервисами данных AWS, включая Amazon S3 и AWS Glue.
- Опыт проектирования архитектур типа "медальон" (medallion), канонических моделей данных и фреймворков загрузки и преобразования, управляемых метаданными.
- Опыт интеграции баз данных, API, файлов, потоковых/событийных источников и корпоративных SaaS-приложений.
- Опыт проектирования или внедрения агентурных решений или решений на базе ИИ, включая оркестрацию, интеграцию инструментов, валидацию, наблюдаемость, безопасность и элементы управления "человек в контуре" (human-in-the-loop).
- Глубокое понимание контрактов данных, эволюции схем, отслеживания происхождения, источников, сверки и качества данных.
- Опыт предоставления архитектурного руководства междисциплинарным техническим командам и преобразования бизнес-требований в масштабируемые технические решения.
- Отличные письменные и устные коммуникативные навыки.
Дополнительные навыки
- Опыт работы с Kafka или Amazon MSK и архитектурами CDC.
- Опыт работы с OpenSearch, векторными базами данных, эмбеддингами или системами поиска документов.
- Опыт работы с агентурными фреймворками, такими как LangChain, LangGraph или аналогичными фреймворками оркестрации.
- Опыт проектирования архитектур геопространственных данных с использованием GeoParquet и PostGIS.
- Опыт работы с Salesforce, ServiceNow, Microsoft Dataverse или аналогичными корпоративными платформами.
- Опыт работы в сфере федерального правительства США.
- Опыт работы с наборами данных, связанными с разрешениями, землепользованием, экологией, энергетикой или природными ресурсами.
Преимущества и зарплата
Мы привлекаем лучших специалистов отрасли благодаря нашему конкурентоспособному пакету льгот, который включает медицинское, стоматологическое и офтальмологическое страхование, пенсионный план 401k с вкладом работодателя, оплачиваемые праздники, отпуск и компенсацию обучения.
Если вам нравится быть частью высокопроизводительной, профессиональной организации, ориентированной на сервис и технологии, подайте заявку сегодня!
