Мы в настоящее время ищем Middle+ / Senior Data Engineer для присоединения к нашему отделу аналитики и внесения вклада в развитие аналитической платформы компании. Основная цель роли — разработка и оптимизация нашего Data Warehouse на базе ClickHouse, проектирование надёжных процессов ETL/ELT и улучшение общей архитектуры данных. Ваша главная задача: построить и поддерживать масштабируемую, надёжную и высокопроизводительную инфраструктуру данных, поддерживающую аналитические и бизнес‑потребности компании.
Что вы будете делать: Разрабатывать и поддерживать ClickHouse‑based DWH компании, включая архитектуру, уровни данных и data marts. Проектировать и оптимизировать схемы хранения и аналитические процессы с высокой нагрузкой. Разрабатывать и поддерживать ETL/ELT конвейеры в Apache Airflow и обеспечивать их надёжность. Оптимизировать ресурсоёмкие процессы и аналитические запросы. Создавать и поддерживать интеграции с внутренними и внешними источниками данных. Тесно сотрудничать с бизнес‑, аналитическими и инженерными командами для формализации требований и реализации решений. Обрабатывать ad hoc запросы данных и исследовать наборы данных. Улучшать стандарты data engineering, поддерживать техническую документацию и снижать технический долг.
Какой опыт важен для нас: Не менее 3 лет опыта в Data Engineering, Analytics Engineering, разработке DWH или аналогичной роли. Экспертный уровень ClickHouse: проектирование схем DWH, движки, партиционирование, индексация, Materialized Views, оптимизация сложных JOIN и агрегатов, анализ системных логов. Продвинутые навыки SQL. Сильные навыки Python для разработки конвейеров и автоматизации. Практический опыт работы с Apache Airflow, включая разработку, обслуживание и мониторинг DAG. Опыт работы с REST APIs, Webhooks и хранилищем, совместимым с S3 (MinIO / AWS S3). Уверенные знания Linux, Git/GitHub и Docker. Опыт работы с Prometheus & Grafana. Английский на уровне B1–B2. Сильное системное мышление, самостоятельность и ответственность.
Будет плюсом: Опыт в iGaming, FinTech или E-commerce. Опыт проектирования и построения DWH с нуля. Опыт работы с высоконагруженными средами ClickHouse. Базовое понимание Apache Kafka.
Должность полная занятость и полностью удалённая. В связи с требованиями безопасности ежедневная работа выполняется в защищённой среде через удалённый рабочий стол (WDS/RDS).