DA/DE
Технологии
Описание вакансии
Кратко о роли
Альфа-Инсайт ищет специалиста на позицию DA/DE для работы с DWH/BI проектами. Роль предполагает проектирование потоков данных, анализ требований и тестирование решений.
Ключевые задачи
- Анализ и формализация требований от заказчиков.
- Проектирование потоков обработки и трансформации данных.
- Разработка прототипов и проверка гипотез с использованием SQL и Spark.
- Тестирование патчей и проверка корректности Spark-задач.
- Контроль выгрузки доработок в продуктивный контур.
Обязательные требования
- Опыт работы от 2-х лет на позициях DA/DE в области DWH/BI.
- Практический опыт работы с Apache Spark.
- Продвинутое знание SQL (joins, оконные функции, CTE, оптимизация).
- Опыт работы с S3 и Apache Iceberg.
- Понимание принципов DWH, ETL/ELT и нормализации данных.
- Опыт работы с технической документацией (BRD, FSD).
- Опыт тестирования данных и работы с Git.
Будет плюсом
- Понимание Oracle и Greenplum.
- Опыт работы в финансовой сфере.
- Базовые знания Python.
- Знание методологий Agile, Scrum, Kanban.
- Опыт работы с ClickHouse, Airflow, SuperSet, FineBI.
- Понимание архитектуры data lake и lakehouse.
Условия и бенефиты
- Вендорская ставка.
- Работа в крупном финансовом проекте.
Процесс найма
- Для отклика свяжитесь с рекрутером в Telegram.
Вакансия DA/DE в Альфа-Инсайт. Вендорская ставка.
Требования:
• Опыт работы от 2-х лет на позициях DA/DE в области DWH/BI.
Обязательные hard skills:
- Практический опыт работы с Apache Spark — ключевое требование.
- Продвинутое знание SQL: сложные joins, оконные функции, CTE, агрегации, подзапросы и оптимизация запросов.
- Опыт оптимизации Spark-задач и SQL-запросов на больших объемах данных.
- Опыт работы с S3.
- Опыт работы с Apache Iceberg или понимание его ключевых возможностей.
- Понимание принципов построения хранилищ данных (DWH), ETL/ELT-процессов, нормализации данных и организации потоков обработки.
- Опыт работы с технической документацией (BRD, FSD), умение писать ее четко и структурированно.
- Опыт тестирования данных.
- Опыт работы с системами контроля версий, включая Git.
Ключевые soft skills:
- Системное аналитическое мышление, коммуникабельность, самостоятельность, внимание к деталям.
Будет плюсом:
- Понимание принципов работы с Oracle и Greenplum.
- Опыт работы в финансовой сфере (банк, страхование, финтех).
- Базовые знания Python для скриптинга и анализа данных.
- Понимание методологий управления проектами (Agile, Scrum, Kanban).
- Опыт работы с ClickHouse, Airflow, SuperSet, FineBI.
- Понимание принципов организации data lake и lakehouse-архитектуры.
Обязанности:
• Анализ требований: прием и анализ документации, детальный разбор, оценка реализации, анализ влияния изменений.
• Проектирование и прототипирование: разработка концептуальных решений, проектирование потоков обработки данных, работа с S3 и Iceberg, написание SQL-кода для прототипов.
• Тестирование и выпуск изменений: приемка патчей, проверка корректности Spark-задач и SQL-логики, контроль выгрузки в продуктивный контур.
Оригинальная вакансия:
https://t.me/datascienceml_jobs/1931