Senior Data Engineer

Мы ищем Senior Data Engineer для участия в амбициозном проекте Data Warehouse для крупного страхового клиента из США. Проект направлен на создание надёжной и высокопроизводительной платформы данных, которая консолидирует финансовые данные из множества корпоративных источников для поддержки принятия решений на основе данных в отделах Finance, Accounting и других ключевых бизнес‑подразделениях. Вы станете частью международной команды, работающей с современными облачными технологиями и данными крупного предприятия.

• Проектировать, разрабатывать и оптимизировать масштабируемые ETL‑процессы и конвейеры данных
• Разрабатывать и поддерживать BI‑решения, data marts и аналитические наборы данных
• Проектировать и оптимизировать сложные SQL‑скрипты, процедуры и рабочие процессы обработки данных
• Управлять рисками и зависимостями, выявляя технические и поставочные угрозы, такие как качество данных, согласованность наследия и ёмкость, информируя об этом заинтересованные стороны и предлагая прагматичные меры смягчения на ранних этапах
• Согласовывать интересы заинтересованных сторон, определяя и утверждая подходы и компромиссы, представляя варианты и рекомендации, а также проводя демонстрации для подтверждения прогресса и демонстрации ценности
• Осуществлять техническое руководство с практической реализацией, проверяя и обеспечивая соблюдение архитектуры, дизайна, кода и SQL/notebooks, а также реализуя критические компоненты для гарантии единого качества.

• Минимум 5 лет опыта в data engineering, из которых не менее 2–3 лет сосредоточено на экосистеме Azure cloud
• Эксперт в SQL с подтверждённой способностью писать и оптимизировать сложные аналитические запросы, хранимые процедуры и функции
• Глубокие знания PySpark и Python для масштабной обработки данных и построения ETL/ELT‑конвейеров
• Понимание принципов организации данных в Data Lake (слои Raw, Silver, Gold)
• Опыт администрирования и разработки в средах управляемых экземпляров
• Знание методологий моделирования данных (Kimball/Inmon), понимание Slowly Changing Dimensions (SCD) и управления историей
• Глубокое понимание архитектуры корпоративного Data Warehouse, включая проектирование таблиц измерений и фактов, а также создание агрегированных слоёв данных
• Опыт работы с финансовыми/страховыми данными, понимание процессов закрытия месяца, сверки данных и логики финансовых расчётов
• Опыт проведения code review, проектирования архитектуры конвейеров и контроля технического качества результатов команды
• Опыт работы в Scrum‑командах, способность разбивать высокоуровневые бизнес‑цели на конкретные технические задачи (User Stories/Tasks) и управлять планом поставки
• Уровень английского B2 или выше.

• Опыт оркестрации сложных цепочек задач в Azure Data Factory
• Знание страховой отрасли, включая премии, комиссии, налоги на премии и актуарные расчёты
• Опыт работы с BI‑инструментами, такими как Power BI, и понимание того, как конечные пользователи потребляют данные из DWH
• Практический опыт выполнения lift-and-shift миграций логики из наследуемых баз данных в облачный склад данных
• Предпочтительно наличие Azure‑сертификации, например Microsoft Certified: Azure Data Engineer Associate (DP-203).