Мы активно ищем Big Data Engineer с отличной технической экспертизой, который хочет присоединиться к нашей растущей команде. Присоединяйтесь к нашей яркой инженерной команде с открытой коммуникацией, широкими полномочиями, духом инноваций и культурой, ориентированной на клиента.
· Выполнять все уровни разработки систем данных ETL/ELT, включая проектирование, прототипирование, разработку, мониторинг и governance.
· Применять методы оптимизации JVM/Spark на всех уровнях разработки.
· Разрабатывать и поддерживать собственные фреймворки для работы с данными на Scala, Java и Python.
· Настраивать и поддерживать пайплайны CI/CD для процессов ETL/ELT в Data Lake и DataWarehouse.
· Проектировать cloud native решения с использованием фреймворков Spark.
· Давать точные оценки по задачам в области data engineering и поддерживать пайплайны данных в рамках заданного roadmap.
· Анализировать, расследовать и устранять проблемы и инциденты в production, разрабатывать шаги по снижению рисков и улучшению целевых метрик пайплайнов данных.
· Проводить технические собеседования по коду, наставлять других разработчиков и стажёров.
· Различные места работы: работа может быть удалённой, а также может предполагать переезд в ожидаемые или непредвиденные места по всей территории США, включая площадки клиентов и офисы Grid Dynamics в США и/или штаб-квартиру компании в San Ramon, CA.
· Диплом о среднем образовании или эквивалент, а также как минимум два года обучения на уровне колледжа по специальности Computer Engineering, Computer Science или в близкой области.
· Не менее ДВУХ (2) лет опыта работы на предлагаемой должности или не менее ДВУХ (2) лет опыта в следующем:
- Проектирование и оптимизация распределённых систем обработки данных масштаба петабайт с использованием Apache Spark для аналитики в реальном времени и пакетной аналитики.
- Функциональное программирование на Scala, Java и Python для распределённых систем данных корпоративного масштаба с использованием неизменяемых и идемпотентных структур данных, многопоточности, методов оптимизации JVM и реактивного программирования.
- Проектирование и оптимизация решений корпоративных хранилищ данных (data warehouse) и data lake, включая уровни приёма, преобразования, хранения, загрузки и governance.
- Внедрение cloud native распределённых систем хранения данных корпоративного масштаба.
- Проектирование и реализация монолитных и основанных на микросервисах приложений с интенсивной работой с данными и низкой задержкой, рассчитанных на глобальную клиентскую базу.
· Возможность работать над передовыми проектами
· Диапазон оплаты: $142,538.00-$150,000.00 в год
· Работа в команде с высокой мотивацией и преданностью делу
· Конкурентная зарплата
· Гибкий график
· Медицинская страховка
· Программа льгот
· Социальный пакет: медицинская страховка, спорт
· Корпоративные социальные мероприятия
· Возможности профессионального развития Обратите внимание: весь онбординг проходит только очно, и вас могут попросить приехать для участия в нём.