Senior Data Platform Engineer Turkey Remote, Turkey

Senior Data Platform Engineer

Turkey Remote, Turkey

Мы ищем Data Platform Engineer для управления и масштабирования нашей основной инфраструктуры данных, одновременно предоставляя командам инженеров и Data Science надёжные, упрощённые процессы. На этой позиции вы будете поддерживать распределённые системы больших данных, обеспечивать операционное совершенство и гарантировать надёжное управление данными и наблюдаемость в нашей производственной экосистеме.

Это долгосрочная позиция на условиях контракта.

Рабочие часы: перекрытие до 11 am по часовому поясу PST.

• Управлять, поддерживать и масштабировать наши локальные кластеры Kubernetes, оркестрацию Airflow и распределённую инфраструктуру Spark.
• Создавать и поддерживать надёжные CI/CD конвейеры для упрощения развертывания, управления данными и протоколов аутентификации.
• Выполнять регулярную компакцию файлов, оптимизацию хранилища и обслуживание в HDFS и облачных объектных хранилищах.
• Поддерживать наблюдаемость системы, мониторить её состояние и участвовать в дежурстве по вызову, используя Prometheus, Grafana и OpenTelemetry.
• Применять основные принципы инженерии данных для оптимизации форматов таблиц (Iceberg/Hive), партиционирования, проектирования схем и производительности запросов.

• Доказанный опыт работы с распределёнными системами и глубокая экспертиза в управлении ресурсами Kubernetes в продакшене.
• Практический опыт масштабирования и управления инфраструктурой для тяжёлых нагрузок Apache Spark.
• Высокая квалификация в современных CI/CD конвейерах, контейнеризации Docker и оркестрации конвейеров данных (Python/Airflow).
• Глубокое понимание фундаментальных принципов инженерии данных, включая проектирование схем, партиционирование, типобезопасность и современные форматы таблиц (Iceberg/Hive/Trino/Presto).
• Практический опыт внедрения аутентификации, контроля доступа и рамок управления данными.
• Надёжный опыт работы с наблюдаемостью, мониторингом и практиками дежурств по вызову, используя Prometheus, Grafana и OpenTelemetry.

• Практический опыт работы со Scala для систем обработки больших данных.

• Возможность работать над передовыми проектами
• Работа в высокомотивированной и преданной команде
• Конкурентоспособная зарплата
• Гибкий график
• Возможности профессионального развития