Lead Data Engineer
Технологии
Описание вакансии
Кратко о роли
SimbirSoft ищет Lead Data Engineer для работы над корпоративным хранилищем данных. Основные задачи включают создание потоковых пайплайнов, настройку ETL/ELT процессов и оптимизацию EDWH.
Ключевые задачи
- Разработка и поддержка потоковых пайплайнов.
- Настройка и оптимизация ETL/ELT процессов.
- Обеспечение контроля качества данных.
- Оптимизация корпоративного хранилища данных (EDWH).
Обязательные требования
- Опыт работы в data engineering от 5 лет.
- Опыт работы с Greenplum или другими MPP-СУБД.
- Уверенное владение ClickHouse и Airflow.
- Глубокие знания SQL и реляционных баз данных.
- Опыт написания сложных SQL-запросов.
- Уверенное владение Python.
- Высшее образование в IT, математике, статистике или физике.
Условия и бенефиты
- Удаленный формат работы.
- Работа в крупной компании-разработчике ПО под заказ.
Процесс найма
- Отклик на вакансию осуществляется через платформу career.habr.com.
SimbirSoft — разработчик ПО под заказ. Для корпоративного хранилища данных нужны потоковые пайплайны, ETL/ELT, контроль качества и оптимизация EDWH. В проекте используют Python, Greenplum, ClickHouse и Airflow.
Требования:
— От 5 лет в data engineering.
— Опыт с Greenplum или другой MPP-СУБД, ClickHouse и Airflow.
— SQL и реляционные базы, сложные запросы.
— Python и технологии обработки больших данных.
— Высшее образование в IT, математике, статистике или физике.
Оригинальная вакансия:
https://t.me/datajob/2805