Data Engineer - Cloud & Big Data Novi Sad, Belgrade, Nis, Serbia

Мы ищем Data Engineer для поддержки модернизации и масштабирования облачных платформ данных и высоконагруженных ELT-пайплайнов для глобальных лидеров розничной торговли и потребительского рынка. В этой роли вы будете проектировать, создавать и оптимизировать сквозные пакетные (batch) и потоковые (streaming) пайплайны, консолидировать сложные бизнес-KPI в модели данных с единым источником достоверной информации (single source of truth) и повышать производительность запросов к хранилищу данных. Работая вместе с кросс-функциональными командами облачной архитектуры и аналитики, вы будете использовать современные облачные платформы, фреймворки для работы с большими данными и оркестраторы рабочих процессов для создания критически важных для бизнеса решений на основе данных.

• Проектировать, создавать и поддерживать production-уровня ELT/ETL-пайплайны данных для приёма, преобразования и консолидации крупномасштабных данных из множества корпоративных источников.
• Оптимизировать архитектуры хранилищ данных, структуры таблиц и производительность запросов для критически важной для бизнеса отчётности и продвинутой аналитики.
• Разрабатывать процессы обработки данных с использованием Python, SQL и фреймворков для обработки больших данных (таких как Apache Spark / PySpark).
• Автоматизировать планирование, мониторинг и проверку качества пайплайнов данных с помощью современных инструментов оркестрации (Airflow или Kubeflow).
• Создавать надёжные коннекторы к API и облачным базам данных, взаимодействуя с бизнес- и техническими заинтересованными сторонами, чтобы адаптироваться к меняющимся требованиям к аналитике.

• Подтверждённый практический опыт работы Data Engineer: создание и поддержка сложных ELT/ETL-пайплайнов данных в корпоративной среде.
• Отличное владение Python и продвинутым SQL для сложных преобразований данных, агрегаций и настройки производительности.
• Практический опыт разработки пайплайнов данных на Google Cloud Platform (GCP) или Microsoft Azure (включая такие сервисы, как BigQuery, GCS, Azure Data Factory или Azure Data Lake).
• Практический опыт работы с фреймворками для обработки больших данных (Apache Spark / PySpark) и оркестраторами пайплайнов (Apache Airflow или Kubeflow).
• Прочный опыт в контейнеризации (Docker, Kubernetes) и современных практиках CI/CD (GitHub Actions, Azure DevOps или аналогичных).

• Опыт работы с Databricks для унифицированной аналитики и крупномасштабного преобразования данных.
• Знакомство с технологиями поиска, индексирования или векторного хранения данных (такими как Elasticsearch).
• Действующие отраслевые облачные сертификаты (GCP Professional Data Engineer или Azure Data Engineer Associate).

• Возможность работать над передовыми проектами

• Работа с очень мотивированной и преданной своему делу командой

• Конкурентная зарплата

• Гибкий график

• Пакет льгот — медицинская страховка, спорт

• Корпоративные мероприятия

• Возможности профессионального развития

• Хорошо оборудованный офис

Grid Dynamics — работодатель, предоставляющий равные возможности. Мы стремимся создавать инклюзивную среду для всех сотрудников в период их работы и для всех кандидатов в процессе подачи заявки.

Все квалифицированные кандидаты будут рассмотрены на соискание вакансии без учёта и без дискриминации по признаку возраста, расы, пола, цвета кожи, религии, национального происхождения, сексуальной ориентации, гендерной идентичности, статуса ветерана, инвалидности или любой другой защищаемой категории. Решение о приёме на работу принимается на основании квалификации, заслуг и бизнес-потребности.