Senior/Lead Data Engineer Iasi, Bucharest, Romania

Senior/Lead Data Engineer Iasi, Bucharest, Romania. Проект находится на этапе Explore (Discovery) инициативы ATLAS (VLAOps), Greenfield‑проекта по построению базовой экосистемы Visual‑Language‑Action для автономной тяжёлой техники в горнодобывающей и строительной отраслях. Цель — спроектировать архитектуру данных, соединяющую существующую телеметрию состояния машин с новым цифровым слоем данных оператора.

• Стратегия ingest‑а: разработать конвейеры для перемещения данных из «raw edge» (проводной/физический перенос) в управляемую облачную среду.
• Аудит готовности данных: проанализировать существующие инвентаризации «Unstructured Operator Data», чтобы определить их качество и доступность для обучения.
• Проектирование архитектуры: определить Medallion Infrastructure (Bronze/Silver/Gold) специально для VLA‑данных, отделив её от наследственных данных Machine Health.
• Проектирование ETL/ELT: создать схему логики фильтрации, коррекции и агрегации, необходимых перед началом обучения.

• Обязательно сильное владение Python (для парсинга бинарных файлов/логов).

• Опыт работы с Big Data Frameworks: Spark, Databricks.

• Опыт работы с Unstructured Data (ROS‑bags, видео, изображения, LiDAR, лог‑файлы).

• Архитектура: Cloud Data Lakes (AWS/Azure), Medallion Architecture (Raw → Curated → Enriched) и проектирование конвейеров ETL/ELT.

• Знание ограничений Edge‑вычислений (обработка генерации данных 2‑5 GB/мин, которые нельзя транслировать в реальном времени).

• Знакомство с Robotics или структурами данных автономных транспортных средств (в частности ROS/bag‑файлы).

• Опыт работы с промышленным IoT (IIoT) — телеметрией или данными высокочастотных датчиков.

• Опыт проектирования архитектур, строго разделяющих экспериментальные данные (Behavioral) и производственные данные (Machine Health), чтобы избежать «загрязнения» основного озера данных.

• Умение проводить «Gap Analysis» разбросанных инвентаризаций данных, а не только выполнять заранее определённые задачи.

• Работа над передовыми проектами в команде опытных инженеров
• Гибкий график работы
• Курсы специализации
• 24 дня ежегодного отпуска + дополнительно 5 дней больничного
• Плавающие праздничные дни
• Частная медицинская подписка для сотрудников
• Пакет льгот общей стоимостью 650 euro чистыми в год

Grid Dynamics — работодатель, предоставляющий равные возможности. Мы привержены созданию инклюзивной среды для всех сотрудников в течение их работы и для всех кандидатов в процессе подачи заявок.

Все квалифицированные соискатели получат рассмотрение их заявки без учёта и без дискриминации по возрасту, расе, полу, цвету кожи, религии, национальному происхождению, сексуальной ориентации, гендерной идентичности, статусу ветерана, инвалидности или любой другой защищённой категории.