Senior Data Quality Engineer (Hyderabad-based)

Мы ищем Data Quality Engineer с практическим опытом внедрения и валидации качества данных. Вы будете разрабатывать и выполнять тесты, проверять данные при их перемещении из исходных систем в аналитические наборы данных и помогать исправлять эти данные.

Эта позиция предназначена для кандидатов, находящихся в Хайдарабаде и готовых работать из офиса.

Наш клиент управляет большим ландшафтом приложений и аналитическими наборами данных, которые их поддерживают. Качество этих данных является частью поставки: проектирование тестов, метрики качества, проверки данных при их перемещении из исходных систем в аналитические наборы данных и практическая помощь при необходимости исправления данных.

Data Quality Engineer отвечает за эту практическую работу. Роль охватывает проектирование и выполнение тестов, проверки целостности, отчётность по качеству и поддержку исправления данных в сотрудничестве с группами, которые производят и используют данные.

• Разрабатывать, внедрять и выполнять тестовые сценарии качества данных, а также предоставлять метрики, которые могут использовать другие группы.
• Применять проверки качества данных к большим наборам данных и помогать в исправлении данных.
• Валидировать конвейеры данных от начала до конца, охватывая перемещение, трансформацию, полноту, историю, актуальность и соответствие требованиям.
• Использовать модели данных и контракты для оценки downstream‑влияния и руководства покрытием качества.
• Использовать SQL, Snowflake, PostgreSQL, ETL‑инструменты и AI‑ассистированные инструменты разработки для анализа данных и создания проверок качества с последующим рецензированием.
• Интегрировать проверки качества с CI, используя систему контроля версий, такую как Git, и работать с другими группами для расследования и решения проблем качества данных.
• Предоставлять доказательства качества, оценку рисков и ввод о готовности к релизам.

• Методы тестирования, основанные на рисках, и опыт предоставления значимых метрик качества.
• Практический опыт валидации больших наборов данных и конвейеров данных, включая диагностику и исправление проблем качества.
• Глубокие знания SQL и моделирования данных, включая оценку downstream‑влияния изменений схемы и контрактов данных.
• Опыт валидации перемещения данных, трансформации, полноты, истории, актуальности и соответствия требованиям между исходными и аналитическими системами.
• Опыт работы с Python и Pandas для обработки данных и анализа качества.
• Опыт работы со Snowflake, PostgreSQL и ETL‑инструментами или эквивалентными платформами данных.
• Опыт работы с нормативными требованиями к данным (GxP).
• Опыт использования AI‑ассистированных инструментов и агентов для анализа требований и создания SQL‑запросов и проверок качества с последующим человеческим рецензированием сгенерированного результата.
• Опыт интеграции проверок качества с CI и работы с системой контроля версий, такой как Git.
• Опыт эффективного сотрудничества на английском языке с инженерными и бизнес‑группами, а также предоставления доказательств качества, оценки рисков и ввода о готовности к релизам.