Data Quality Engineer

Обязанности:

• Проведение аудита качества данных.
• Создание тестов для таблиц в хранилище.
• Автоматизация проверки качества данных.
• Формирование проектной документации (инциденты / процессы / описание проверок и т. д.).
• Консультирование владельцев данных и заказчиков по вопросам покрытия чеками и тестами их витрин.

Требования:

• Опыт работы в качестве QA engineer от 3 лет с углублением в Data QA минимум от 1 года.
• Уверенное знание SQL.
• Понимание метрик качества данных: полнота, уникальность, корректность, согласованность и актуальность.
• Поиск причин нарушений качества данных и взаимодействие с командами для их устранения.
• Опыт работы с Python: pandas, requests, SQLAlchemy.
• Опыт работы с инструментами профайлинга (например, ydata-profiling).
• Опыт работы с Soda/Great Expectations/Apache Deequ/dbt tests.
• Опыт работы с Airflow.
• Опыт работы с AI.

Будет плюсом:

• Опыт работы с Trino, dbt.
• Знание одного из инструментов визуализации (Power BI / Tableau / Metabase / Grafana).