Staff Data Engineer

Мы ищем Staff Data Engineer, который возьмёт на себя ответственность за ключевые инициативы в Data Platform Engineering и будет их продвигать, включая data lake, инструментирование событий, качество данных и управление данными (data governance).

• Проектировать решения для работы с данными для пакетных (batch), потоковых (streaming) и real-time нагрузок.
• Проектировать и создавать надёжные конвейеры данных с использованием Spark, Kafka, Iceberg и Airflow/MWAA.
• Участвовать в развитии data lake и платформы данных, включая подходы к приёму, обработке, хранению и выдаче данных.
• Создавать, поддерживать и масштабировать облачную инфраструктуру данных, в которую входят Kafka, Airflow, Druid, EMR on EKS, с учётом надёжности и наблюдаемости.
• Внедрять и улучшать качество данных, наблюдаемость, надёжность и governance в конвейерах данных и системах.
• Определять и улучшать стандарты инструментирования событий и governance, включая схемы событий, валидацию и эволюцию схем.
• Создавать платформенные решения для централизованной работы с PII, хранения, удаления данных и их резидентности для соответствия требованиям GDPR и CCPA.
• Создавать возможности agent harness, которые закладывают стандарты data engineering, паттерны конвейеров и quality gates в AI-инструменты, позволяя агентам безопасно генерировать и проверять код платформы данных и работать с ним.
• Лично участвовать в сложных технических инициативах, устранять проблемы в продакшене, наставлять инженеров и сотрудничать с Analytics Engineering и другими командами.
• Создавать agent harnesses, которые встраивают стандарты data engineering, паттерны конвейеров и quality gates в рабочие процессы разработки с поддержкой AI.

• Степень BA/BS или эквивалентный опыт
• Более 5 лет опыта в data engineering: создание и эксплуатация продакшен-конвейеров и платформ данных.
• Серьёзный опыт работы со Spark и распределённой обработкой данных, включая проектирование и оптимизацию продакшен-конвейеров данных.
• Опыт проектирования пакетных, real-time и потоковых решений для данных с использованием таких технологий, как Kafka, Spark Structured Streaming и CDC.
• Опыт внедрения качества данных, наблюдаемости и надёжности в продакшен-системах данных.
• Опыт работы с облачной инфраструктурой данных, CI/CD и infrastructure-as-code.
• Подтверждённый опыт руководства сложными инициативами в области data engineering от начала до конца: от технического проектирования и декомпозиции до реализации и вывода в продакшен.
• Сильные навыки программирования и SQL, опыт создания надёжных и поддерживаемых систем данных.

• Умеете работать с неоднозначными задачами, оценивать архитектурные компромиссы и принимать прагматичные технические решения.
• Мыслите шире отдельных конвейеров и учитываете сквозную экосистему данных: от источников данных до конечных потребителей.
• Имеете опыт в области governance и конфиденциальности данных, включая управление PII, хранение, удаление, резидентность данных, GDPR или CCPA.
• Имеете опыт инструментирования событий и governance, включая схемы событий, валидацию и эволюцию схем.
• Сотрудничаете с инженерами над сложными техническими задачами и помогаете выстраивать практичные инженерные практики.
• Принимаете AI и новые технологии, применяете их в своём рабочем процессе разработки и помогаете команде осваивать новые инструменты через обмен опытом и лучшие практики.
• Остаётесь любознательными и открытыми к росту: проактивно принимаете AI и активно развиваете и применяете навыки работы с новыми технологиями, чтобы улучшать то, как мы работаем, быстрее достигать результатов и увеличивать общий вклад.

• Причастность к тому, что вы помогаете создавать. Каждый постоянный сотрудник Webflow («Webflower») получает долю в капитале (RSU) нашей растущей частной компании.
• Медицинская страховка, которая действительно вас покрывает. Комплексные медицинские, стоматологические и офтальмологические планы для сотрудников на полной ставке и их иждивенцев, при этом Webflow оплачивает большую часть взносов.
• Поддержка на каждом этапе семейной жизни. 12 недель оплачиваемого отпуска по уходу за ребёнком для всех родителей и 6+ недель дополнительного оплачиваемого отпуска для рожениц. Кроме того, инклюзивная поддержка в вопросах планирования семьи, менопаузы и перемен среднего возраста.
• Отдых, который действительно отдых. Гибкий отпуск, оплачиваемые праздничные дни и программа сабатикала, чтобы вы могли восстановить силы и вернуться вдохновлёнными.
• Забота о вас целиком. Доступ к ресурсам по психическому здоровью, терапии и коучингу.
• Инвестируйте в своё будущее. План 401(k) с софинансированием работодателя 100% (до $6,000 в год) в США и поддержка пенсионных накоплений по всему миру.
• Ежемесячные выплаты, которые подстраиваются под вашу жизнь. Локальная поддержка расходов на работу и благополучие — от Wi-Fi до тренировок.
• Бонус за совместную работу. Все постоянные сотрудники на полной ставке, не работающие за комиссионное вознаграждение, имеют право на участие в нашей ежегодной бонусной программе WIN.