Middle Data Quality Engineer/BA

Команда сосредоточена на миграции и модернизации наследуемой платформы данных в Azure Synapse Analytics. Этот проект подразумевает перенос сложных данных и бизнес‑логики из наследуемых систем на базе SQL/Access в надёжную медальон‑архитектуру данных Bronze/Silver/Gold. Вы будете тесно сотрудничать с Data Engineers и техническими руководителями для восстановления конвейеров обработки данных, улучшения бизнес‑логики, автоматизации рабочих процессов с данными и обеспечения высоких стандартов качества данных и сверки.

• Подготовка комплексных тестовых сценариев и детальных тест‑кейсов для мигрированных данных и трансформаций
• Проверка данных уровня Bronze в сравнении с исходными системами для обеспечения точности и полноты
• Выполнение сверки данных source‑to‑target между уровнями Bronze, Silver и Gold
• Проверка количества записей, значений полей, трансформаций, дубликатов и общей полноты данных
• Исследование расхождений данных между исходными и целевыми системами
• Определение и внедрение правил валидации и критериев приёмки для миграции данных
• Ведение полной тестовой документации и чёткое документирование всех результатов и выводов
• Подготовка и обновление технической и тестовой документации в течение жизненного цикла проекта
• Сотрудничество с Data Engineers и Lead Data Engineer для уточнения требований и решения технических вопросов
• Участие в анализе дефектов, повторном тестировании и регрессионном тестировании по мере необходимости.

• Практический опыт обеспечения качества данных, data QA или тестирования ETL/data (3+ years)
• Твёрдое знание SQL, с практической способностью писать и оптимизировать запросы для валидации и сверки данных
• Прикладной опыт тестирования миграции данных или тестирования ETL/ELT
• Твёрдый опыт валидации данных между исходными и целевыми системами
• Знакомство с измерениями качества данных, такими как полнота, точность, согласованность, уникальность и валидность
• Опыт создания и выполнения тест‑кейсов и тестовых сценариев в процессе работы
• Твёрдый опыт в сверке данных, включая сравнение количества записей и данных на уровне полей
• Способность исследовать и диагностировать расхождения данных, различая проблемы, возникающие из исходных данных, логики трансформации или целевых систем
• Высокая внимательность к деталям и подтверждённая способность эффективно работать с большими и сложными наборами данных
• Практическое применение в подготовке и поддержании чёткой технической и тестовой документации
• Способность работать самостоятельно и эффективно сообщать о выводах и проблемах разработчикам и техническим руководителям
• Хорошие навыки общения на английском языке для документации и взаимодействия со стейкхолдерами.

• Знакомство с Azure Synapse Analytics и Azure Data Factory
• Базовое понимание тестирования PySpark, решений data lake и lakehouse
• Знакомство с SQL Server и Azure SQL
• Осведомлённость о медальон‑архитектурах данных.