Data Engineer / Senior Data Engineer with Azure, Databricks and Microsoft Fabric

Мы ищем Senior Data Engineer с сильным опытом работы в Azure, Databricks и Microsoft Fabric для проектирования и построения современной облачной платформы данных. Вы будете участвовать в создании слоёв ingest, transformation и curation платформы, сотрудничая с техническими и бизнес‑стейкхолдерами. На этой позиции вы также будете поддерживать инженерные стандарты, решения по дизайну платформы и поставку масштабируемых решений для работы с данными.

• Проектировать и разрабатывать конвейеры ingest данных из бизнес‑систем в управляемую облачную платформу данных.
• Создавать масштабируемые решения в области data engineering с использованием Azure Databricks и Microsoft Fabric.
• Реализовывать паттерны медальонной архитектуры и переиспользуемые инженерные фреймворки.
• Разрабатывать курируемые продукты данных и аналитические наборы данных для бизнес‑отчётности и принятия решений.
• Применять практики AI‑ассистированного развития, обеспечивая качество, управление и аудит.
• Вносить вклад в моделирование данных, семантические модели, управление метаданными и аналитические решения.
• Поддерживать миграцию рабочих нагрузок отчётности и аналитики с устаревших платформ.
• Сотрудничать со стейкхолдерами для преобразования бизнес‑требований в технические решения.
• Предоставлять рекомендации по дизайну, устанавливать инженерные стандарты и участвовать в code review.

• 6+ лет опыта в Data Engineering.
• Практический опыт работы с Azure Data Factory, Azure Databricks и Azure Data Lake Storage Gen2.
• Сильные навыки программирования на Python, SQL и PySpark.
• Опыт реализации Delta Lake и production lakehouse или медальонных архитектур.
• Опыт работы с Git и Azure DevOps, включая CI/CD конвейеры для решений с данными.
• Опыт работы с окружениями SQL Server.
• Практический опыт использования AI‑помощников при написании кода в проектах по поставке программного обеспечения.
• Умение эффективно общаться на английском с техническими и бизнес‑стейкхолдерами.
• Опыт ответственности за решения по архитектуре или дизайну платформы.
• Опыт ревью кода и установления инженерных стандартов.
• Опыт сбора требований и прямого взаимодействия с бизнес‑стейкхолдерами.

• Опыт внедрения Microsoft Fabric в production‑окружениях.
• Сертификации Microsoft, включая DP 203, DP 600, DP 700, AZ 900 или DP 900.
• Сертификация Databricks Data Engineer Associate или Databricks Data Engineer Professional.
• Опыт работы с dimensional modelling, включая star schema, snowflake schema или Data Vault.
• Опыт семантического моделирования в Power BI или Microsoft Fabric.
• Знание Microsoft Purview, data lineage и управления метаданными.
• Опыт работы в регулируемых финансовых сервисах.