Senior Data Engineer
Технологии
Описание вакансии
Кратко о роли
Джетлин ищет Senior Data Engineer для проектирования хранилищ, разработки ETL/ELT-пайплайнов и потоковой обработки данных.
Ключевые задачи
- Проектирование и развитие хранилищ данных.
- Разработка и поддержка ETL/ELT-пайплайнов.
- Развитие DAG и интеграций в Airflow.
- Оптимизация SQL-запросов и обеспечение качества данных.
- Внедрение технологий CDC (Change Data Capture).
Обязательные требования
- Опыт работы Data Engineer от 4 лет.
- Уверенное владение Python, SQL, Bash, Git.
- Опыт работы с PostgreSQL, MSSQL, Redis, Cassandra.
- Знание Trino/StarRocks, Kafka, Flink, Airflow.
- Понимание архитектуры Lakehouse, опыт работы с Iceberg, Lakekeeper, S3.
- Знание принципов ETL/ELT, CDC, оптимизации запросов, моделей OLAP/OLTP.
- Опыт работы с Jira, Confluence.
- Свободный русский и английский для технической документации.
Условия и бенефиты
- Возможна удаленная работа.
- Есть офис в Пензе.
Процесс найма
- Подробности о вакансии и отклик доступны на платформе Хабр Карьера.
Джетлин ищет инженера для проектирования хранилищ, ETL/ELT-пайплайнов и потоковой обработки. Предстоит развивать DAG и интеграции в Airflow, оптимизировать SQL, обеспечивать качество данных и внедрять CDC.
Требования:
- Опыт работы Data Engineer от 4 лет
- Python, SQL, Bash, Git
- PostgreSQL, MSSQL, Redis, Cassandra
- Trino/StarRocks, Kafka, Flink, Airflow
- Iceberg, Lakekeeper, S3 и понимание Lakehouse
- ETL/ELT, CDC, оптимизация запросов, модели OLAP/OLTP
- Jira, Confluence и сервис-деск
- Свободный русский и английский для технической документации
Условия:
- Можно работать удаленно или из офиса в Пензе.
Оригинальная вакансия:
https://t.me/datajob/2829