Разработчик DWH
Технологии
Описание вакансии
Кратко о роли
Открыта позиция Разработчика DWH для работы над проектом в транспортной компании.
Ключевые задачи
- Реализация ETL/ELT процессов для хранилищ и озер данных.
- Создание и поддержка DAG’ов в Apache Airflow.
- Оптимизация SQL-запросов, в том числе для OLAP.
- Интеграция данных с использованием API, веб-сервисов и очередей сообщений.
Обязательные требования
- Опыт работы от 2-х лет в качестве инженера данных или ETL-разработчика.
- Уверенное владение SQL и Pyspark.
- Опыт работы с PostgreSQL и Apache Airflow.
- Знание технологий интеграции данных (API, очереди).
- Опыт работы с брокерами сообщений (Kafka, RabbitMQ).
- Опыт работы с S3 Minio и Apache Iceberg.
Будет плюсом
- Базовый уровень владения Apache Hadoop (Spark, Hive или Impala).
Условия и бенефиты
- Удаленный формат работы.
- Полный рабочий день.
- Оформление по ИП или ГПХ.
Открыта позиция Разработчика DWH на проект в транспортной компании.
Формат работы: удаленно, полный рабочий день, оформление по ИП/ГПХ.
Требования:
- Опыт работы от 2-х лет в качестве инженера данных, разработчика ETL на SQL и Pyspark.
- Опыт работы с SQL, PostgreSQL, Apache Airflow, с API, веб-сервисами, очередями и другими стандартными технологиями интеграции данных.
- Оптимизация SQL, в том числе для целей OLAP.
- Экспертиза в реализации ETL / ELT для хранилищ или озер данных.
- Навыки работы с Apache Airflow — создание DAG’ов, управление зависимостями ETL-пайплайнов.
- Базовый уровень владения Apache Hadoop (Spark, Hive или Impala).
- Опыт работы с брокерами сообщений (Kafka, RabbitMQ).
- Опыт работы с S3 Minio и Apache Iceberg.
Оригинальная вакансия:
https://t.me/Getitrussia/4560