Senior Data Engineer
Технологии
Описание вакансии
Кратко о роли
Ищем Senior Data Engineer для работы над международным проектом длительностью 1,5 года. Ожидается опыт работы в финтехе или банковской сфере.
Ключевые задачи
- Проектирование DWH (схемы звезда, снежинка, Data Vault, слои ODS, DDS, DM).
- Разработка и оптимизация пайплайнов данных с использованием Airflow.
- Работа с PostgreSQL и ClickHouse (оптимизация запросов, создание таблиц).
- Написание моделей, макросов и тестов в DBT.
- Реализация решений для единого профиля клиента (Customer 360).
- Обеспечение качества данных с помощью специализированных инструментов.
Обязательные требования
- Опыт работы в роли Data Engineer от 5 лет.
- Глубокое знание PostgreSQL и ClickHouse.
- Опыт работы с Airflow (разработка DAG, настройка инфраструктуры).
- Уверенное владение DBT.
- Навыки написания поддерживаемого кода на Python.
- Понимание принципов проектирования DWH.
- Готовность работать в офисе в Ереване.
Будет плюсом
- Опыт работы с Git и CI/CD для пайплайнов.
- Знание Docker и Kubernetes.
Условия и бенефиты
- Работа в офисе в Ереване.
- Международный проект на 1,5 года.
Процесс найма
- Для отклика свяжитесь с рекрутером в Telegram.
Ищем Senior Data Engineer для работы над международным проектом длительностью 1,5 года. Предпочтителен опыт работы в финтехе или банковской сфере. Работа предполагает нахождение в офисе в Ереване.
Задачи:
- Проектирование DWH: понимание схем (звезда, снежинка, Data Vault), опыт проектирования слоев ODS, DDS, DM.
- Разработка и оптимизация пайплайнов данных: Airflow (разработка DAG, использование операторов, управление зависимостями, настройка инфраструктуры).
- Работа с базами данных: PostgreSQL (написание сложных запросов, оптимизация), ClickHouse (создание таблиц, материализованных представлений, распределенных запросов, оптимизация).
- Работа с DBT: написание моделей, макросов, тестов, документации, управление сборками.
- Разработка на Python: написание поддерживаемого кода для кастомных операторов и скриптов обработки.
- Реализация решений для единого профиля клиента (Customer 360) и кастомизация платформ.
- Работа с брокерами и инструментами проверки качества (Great Expectations, Soda).
Требования:
- Опыт работы в роли Data Engineer от 5 лет.
- Опыт с Git, CI/CD для пайплайнов, знание Docker, Kubernetes будет преимуществом.
Оригинальная вакансия:
https://t.me/Getitrussia/4366