Data QA
Технологии
Описание вакансии
Кратко о роли
Компания Centicore ищет Data QA специалиста для обеспечения качества процессов обработки и хранения данных.
Ключевые задачи
- Валидация процессов загрузки данных и проверка корректности получения данных из внешних источников.
- Контроль раскладки данных по целевым таблицам в S3/Iceberg.
- Подтверждение обработки 100% входящего объёма данных.
- Тестирование механизмов обновления и предотвращение дубликатов.
- Блокировка записей с аномалиями и ошибками.
- Анализ документации и проектирование тест-кейсов.
Обязательные требования
- Опыт интеграции внешних источников (БКИ, ФНС, ЦБ).
- Практическое знание SQL для написания запросов и анализа трансформаций.
- Понимание архитектуры Lakehouse (S3, Iceberg) и слоёв хранения (RAW/ODS/DDS).
- Базовое чтение кода на Python.
- Знание Big Data-инструментов: Airflow, Spark, S3/Hadoop.
- Локация: РФ.
Условия и бенефиты
- Зарплата: 200–350 тыс. руб. на руки.
- Оформление по ТК РФ с полной «белой» историей.
- Формат работы: удаленно.
Обязанности:
- Валидация процессов загрузки данных
- Проверка корректности скачивания данных из внешних источников (БКИ, ЦБ, ФНС и др.)
- Контроль раскладки данных по целевым таблицам в S3/Iceberg
- Подтверждение обработки 100% входящего объёма данных
- Тестирование механизмов обновления: отсутствие дубликатов при повторной загрузке
- Блокировка записей с аномалиями (ошибки источника, некорректные форматы)
- Анализ документации (ТЗ, мэппинги) для проектирования тест-кейсов
Требования:
- Опыт интеграции внешних источников (БКИ, ФНС, ЦБ)
- Практическое знание SQL: написание проверочных запросов, анализ трансформаций, выявление расхождений
- Понимание архитектуры Lakehouse (S3, Iceberg) и слоёв хранения (RAW/ODS/DDS)
- Базовое чтение кода на Python (для анализа скриптов обработки данных)
- Знание Big Data-инструментов: Airflow (мониторинг задач), Spark (понимание логики обработки), S3/Hadoop
Условия:
- Зарплата: 200–350 тыс руб на руки (в зависимости от опыта)
- Оформление по ТК РФ с полной «белой» историей
- Формат работы: удаленно
- Локация: РФ
Оригинальная вакансия:
https://t.me/QA_rabota/3419