Lead Data Engineer

Мы ищем Lead Data Engineer, который будет руководить проектированием и внедрением масштабируемых решений для данных, конвейеров и наборов данных, готовых к аналитике.

• Руководить проектированием и внедрением конвейеров данных, трансформаций и курируемых наборов данных
• Преобразовывать бизнес‑требования в структурированные решения и модели данных
• Руководить и выполнять разработку переиспользуемых, готовых к аналитике активов данных
• Обеспечивать согласованность определения и использования ключевых элементов данных в разных системах
• Сотрудничать со стейкхолдерами для определения и уточнения требований к данным и логике
• Проводить ревью и направлять инженерную работу для обеспечения качества, производительности и масштабируемости
• Устанавливать лучшие практики в области инженерии данных, трансформаций и качества данных
• Поддерживать интеграцию данных из разных доменов и систем
• Вносить вклад в архитектурные решения по платформам данных и инструментам
• Наставлять и поддерживать других инженеров в команде

• 5+ лет опыта в инженерии данных, аналитической инженерии или смежных областях
• Глубокие знания SQL и опыт проектирования сложных трансформаций данных
• Практический опыт работы с современными платформами данных (например, GCP BigQuery, Databricks, Snowflake)
• Опыт работы с платформами данных. ELT или ETL, оркестрация, такая как Airflow или dbt, Spark, хранилища и озера данных, такие как Snowflake, BigQuery или Databricks, потоковая обработка, такая как Kafka или Kinesis, метаданные и качество данных
• Владение Python
• Твердое понимание концепций моделирования данных и их структурирования для аналитики
• Опыт работы со стейкхолдерами для определения требований и поставки решений данных
• Способность сочетать практическую реализацию с техническим руководством

• Знакомство с концепциями управления данными, их происхождением или управлением метаданными
• Опыт работы с данными из разных доменов (например, клиент, продукт, транзакции)
• Опыт в финансовых услугах или других отраслях с интенсивным использованием данных
• Опыт поддержки миграции или эволюции платформ данных (например, переход к Databricks)
• Опыт работы с инструментами оркестрации (например, Airflow, Cloud Composer)
• Знакомство с концепциями моделирования данных (например, измерительные модели, дата‑март, переиспользуемые наборы данных)

• Влияние в масштабе. Помогайте формировать корпоративные программы AI, программного обеспечения и данных в разных отраслях.
• Рост и мастерство. Работайте с опытной командой, состоящей из специалистов ведущих консалтинговых и технологических компаний.
• Создание реальных продуктов. Работайте над готовыми к продакшену активами с автономией в ключевых технических решениях.