Senior Data Engineer

• Разрабатывать, строить и оптимизировать ETL/ELT конвейеры, преобразующие данные клиентов и внутренние данные в пригодные для использования наборы данных

• Сотрудничать с командами Markets и Product для разработки инструментов отчетности и панелей мониторинга, которые направляют бизнес‑стратегию и удовлетворяют потребности клиентов

• Создавать и поддерживать озера данных и feature stores, используемые командой ML Engineering для разработки ML‑решений в области суброгации

• Разрабатывать, строить и оптимизировать ETL/ELT конвейеры, преобразующие данные клиентов и внутренние данные в пригодные для использования наборы данных

• Сотрудничать с командами Markets и Product для разработки инструментов отчетности и панелей мониторинга, которые направляют бизнес‑стратегию и удовлетворяют потребности клиентов

• Создавать и поддерживать озера данных и feature stores, используемые командой ML Engineering для разработки ML‑решений в области суброгации

• Глубокое владение Python и SQL

• Опыт работы со Spark или аналогичными технологиями распределенной обработки

• Обширный опыт работы с AWS‑сервисами данных (Glue, S3, Step Functions, Athena, EMR, DynamoDB, SQS)

• Опыт работы с технологиями потоковой передачи данных (Kafka, Spark Streaming и др.)

• Опыт моделирования данных (желательно в финансовой или страховой сфере)

• Знакомство с MongoDB и документно‑ориентированными источниками данных

• Опыт работы с паттернами озера данных: медальонная архитектура (bronze/silver/gold), управление схемами, инкрементальная обработка

• Умение работать с IaC (CloudFormation или Terraform)

• Способность отлаживать проблемы качества данных в распределённых системах

• Опыт внедрения фреймворков контроля качества данных (например, Great Expectations) для обеспечения надежности конвейеров и целостности данных

• Опыт в суброгации, обработке претензий, страховании или финансовых технологиях

Преимущества Exadel зависят от местоположения и типа контракта. Ваш рекрутер предоставит детали.

• Международные проекты

• Гибкость работы в офисе, гибридного режима или удалённо

• Медицинское страхование

• Программа признания

• Непрерывное обучение и возмещение расходов

• Программа благополучия

• Командные мероприятия и локальные льготы

• Компенсация за спорт

• Бонусы за рекомендации

• Предоставление оборудования высшего уровня

Exadel гордится тем, что является работодателем, предоставляющим равные возможности, и привержен инклюзии по признаку расы, гендерной идентичности, сексуальной ориентации, инвалидности, возраста и другим характеристикам.

Разумные приспособления доступны для обеспечения возможности выполнения основных функций людьми с ограниченными возможностями.

Обратите внимание: данное описание работы не является исчерпывающим. Обязанности и задачи могут изменяться в зависимости от потребностей бизнеса.

Подробности о компенсации предоставляются кандидатам на ранних этапах процесса найма.

Предложение не является обязательным до подписания контракта.