WorkListВойтиОформить подписку
GD

Senior Big Data Engineer Lisbon, Portugal

висит 2 мес.
Grid Dynamics · Цифровая трансформация корпораций
Откликнуться на сайте компании ↗
Опубликована давно; 02.11 она ещё висела у компании.

О вакансии

Откуда можно работать
Lisbon, Португалия
Уровень
Senior
указан работодателем
Деньги
≈ $4,8–9,1 тыс/мес · оценка Worklist
по рынку страны, данные за август 2026 · Как считаем
Даты
Впервые заметили 21.08 · у компании видели 02.11
дату публикации работодатель не указал

Та же должность в других городах и странах

Почему в каталоге:Основана выходцами из Восточной Европы, Кавказа и Центральной АзииПодробнее о компании →

Описание переведено машинно с английского.

Суть роли

Мы ищем Senior Big Data Engineer для масштабирования и совершенствования нашей платформы данных совместно с кросс‑функциональными инженерными командами, обеспечивая Data Scientists надёжной инфраструктурой, гладкими операционными процессами и практической поддержкой. Рабочие часы: перекрытие до 15:00 PDT

Что предстоит делать

  • Сотрудничать с кросс‑функциональными инженерными командами для эксплуатации, масштабирования и развития нашей основной инфраструктуры платформы данных.
  • Тесно работать с Data Scientists, предоставляя поддержку, оптимизируя рабочие процессы и устанавливая надёжные операционные процессы.
  • Создавать и поддерживать эффективные CI/CD‑конвейеры, автоматизированные развертывания и решения по наблюдаемости.
  • Управлять высокообъёмными Spark‑задачами, распределением ресурсов Kubernetes и производительностью хранилищ в HDFS и объектных хранилищах.
  • Обеспечивать соблюдение управления данными, протоколов аутентификации, проектирования схем и практик управления таблицами.

Требования

  • Значительный опыт управления нагрузками Spark, управлением ресурсами Kubernetes (on‑prem) и архитектурой распределённых систем.
  • Глубокая экспертиза в построении CI/CD‑конвейеров, контейнеризации (Docker) и инструментах автоматизации.
  • Твёрдое понимание партиционирования, проектирования схем, типобезопасности, сжатия файлов и современных форматов таблиц (например, Iceberg, Hive).
  • Практический опыт работы с Prometheus, Grafana, OpenTelemetry, дежурными ротациями и проактивным оповещением системы.
  • Доказанный опыт внедрения аутентификации и рамок управления данными.
  • Доказанный опыт настройки, оптимизации и эксплуатации Trino/Presto для высокопроизводительных интерактивных запросов к крупномасштабным распределённым наборам данных.

Будет плюсом

  • Предыдущий опыт работы со Scala

Условия и бенефиты

  • Возможность работать над передовыми проектами
  • Работа в высокомотивированной и преданной команде
  • Конкурентоспособная зарплата
  • Гибкий график
  • Возможности профессионального развития

Навыки

Apache SparkKubernetesHDFSobject storesdata governanceauthentication protocolsschema designIcebergHivePrometheusGrafanaOpenTelemetryon‑call rotationsTrinoPrestoCI/CD pipelinesDockercontainerizationautomation toolsScala

Подходите ли вы под эту вакансию

Сверка вакансии с резюме доступна тем, кто вошел. Войти