Lead Data Engineer

Мы ищем Lead Data Engineer, который поможет нашим клиентам проектировать, создавать и эксплуатировать надёжные платформы данных, превращающие сложные данные в полезные бизнес-аналитические выводы.

Вы будете работать на всех этапах жизненного цикла данных: от архитектуры и интеграции источников до конвейеров данных, семантических моделей, визуализации и отчётности. Вы обладаете сильными инженерными навыками в Python и SQL, а также практическим опытом работы как минимум с одним из инструментов: Databricks, Snowflake или Microsoft Fabric.

Тесно сотрудничая с клиентами, аналитиками, специалистами по данным (data scientists) и коллегами-инженерами, вы будете переводить бизнес-требования в безопасные, поддерживаемые и масштабируемые решения для работы с данными. Вы также будете давать технические рекомендации, участвовать в принятии проектных решений и помогать команде укреплять инженерные практики.

• Проектировать, создавать и поддерживать конвейеры данных для приёма, преобразования и доставки данных из различных источников, включая API.
• Разрабатывать решения на базе Databricks, Snowflake или Microsoft Fabric, выбирая подходы, которые соответствуют требованиям клиента и его существующей среде.
• Участвовать в проектировании архитектуры данных и решений, включая хранение, интеграцию и моделирование данных.
• Разрабатывать модели данных, онтологии и семантические слои, которые задают единые бизнес-определения и поддерживают аналитику и отчётность.
• Реализовывать оркестрацию конвейеров, планирование, мониторинг и операционную поддержку для обеспечения надёжности сервисов данных.
• Устранять проблемы с данными и конвейерами, повышая производительность, масштабируемость и экономическую эффективность.
• Применять контроль качества данных, автоматизированное тестирование и валидацию на протяжении всего жизненного цикла данных.
• Внедрять ролевое управление доступом и следовать лучшим практикам безопасности для платформ данных и интеграций.
• Применять практики DevOps в инженерии данных, включая контроль версий, управление репозиториями, CI/CD и автоматизированное развёртывание.
• Создавать визуализации данных и отчёты, которые делают информацию понятной и полезной для бизнес-пользователей.
• Документировать решения, проводить ревью кода и делиться знаниями для поддерживаемой разработки и непрерывного улучшения.

• Практический опыт поставки производственных решений для работы с данными с использованием одного или нескольких инструментов: Databricks, Snowflake или Microsoft Fabric.
• Сильные навыки программирования на Python и SQL.
• Опыт проектирования, разработки и эксплуатации конвейеров данных, включая процессы ETL/ELT, оркестрацию и мониторинг.
• Хорошее понимание архитектуры данных и методов моделирования, включая аналитическое и многомерное моделирование.
• Понимание онтологий и семантического моделирования и того, как они связывают структуры данных с бизнес-понятиями.
• Практический опыт оптимизации обработки данных и устранения проблем с производительностью конвейеров, запросов и платформы.
• Опыт интеграции данных через API, включая аутентификацию, обработку ошибок и надёжный обмен данными.
• Опыт применения ролевого управления доступом (RBAC) и лучших практик безопасности данных.
• Опыт работы с Git, ведения репозиториев, написания автоматизированных тестов и построения рабочих процессов CI/CD для решений по работе с данными.
• Опыт разработки визуализаций данных и отчётов.
• Умение чётко объяснять технические решения, работать в сотрудничестве с бизнес- и техническими заинтересованными сторонами и направлять других инженеров.

• PostgreSQL, SQL Server, Google BigQuery или Amazon Redshift.
• R или другие языки программирования.
• Соответствующие облачные сервисы Microsoft Azure, AWS или Google Cloud.
• Соответствующие сертификаты по Databricks, Snowflake или Microsoft Fabric.

• Гибкий гибридный формат работы: 20 дней «работы из любой точки» в год сверх нашей гибридной политики.
• Глобальные карьерные траектории и нелинейное развитие; возможность переходить между направлениями, дисциплинами или географиями.
• Непрерывное обучение: сертификации, внутренние академии, технические сообщества и конференции за счёт компании.
• Компенсация на здоровье и образ жизни, дополнительные дни отпуска за стаж, инклюзивный родительский отпуск и программы поддержки сотрудников.
• Яркая инклюзивная культура, в которой разные точки зрения служат источником инноваций.

Endava — работодатель равных возможностей. Мы ценим различия, которые делают нас сильнее, и обязуемся проводить прозрачный наём на основе заслуг.

• Ежемесячная компенсация на образ жизни: вклад в занятия, связанные со здоровьем и благополучием, например абонементы в спортзал.
• Novated Leasing: льготный лизинг автомобилей до уплаты налогов для новых и подержанных машин.
• Дополнительные дни отпуска за стаж: дополнительный день отпуска на 3-, 4- и 5-ю годовщину работы в компании, суммарно до 3 дополнительных дней отпуска в год.
• Инклюзивная политика родительского отпуска: 12 недель отпуска для основного опекуна и 4 недели отпуска для второго опекуна.
• Work From Anywhere: помимо нашей гибридной политики, мы также предлагаем 20 дней работы из любой точки в год. Идеально подходит для длительной поездки, чтобы уехать из города или навестить близких.