Стажер Data Engineer в команду аналитики Datagovernance в МТС Веб Сервисы
Разработка ETL-процедур и работа с большими данными.
Задачи:
- Разрабатывать ETL-процедуры для сервисов datagov с использованием python, pyspark, hadoop, airflow
- Собирать данные из разных реляционных и нереляционных источников
- Создавать и наполнять витрины в hive/postgres/clickhouse/greenplum
Требования:
- Студенты 3-6 курсов бакалавриата, специалитета или магистратуры
- Хорошее знание Python
- Уверенное знание SQL и умение работать с реляционной СУБД
- Будет плюсом: опыт использования фреймворков обработки данных типа pandas/polars/spark и подобных
Навыки:
- Python
- SQL
- pyspark
- hadoop
- airflow
- hive
- postgres
- clickhouse
- greenplum
- pandas
- polars
- spark
