Pipeline Engineer (remote work)

Мы ищем опытного инженера, который будет отвечать за автоматизированные конвейеры, превращающие threat intelligence в поставляемую защиту для десятков миллионов веб‑сайтов. Когда появляется новая уязвимость, цепочка автоматизированных систем должна её обнаружить, получить уязвимый исходный код, создать правила WAF, сгенерировать тесты, доказать, что правила работают и не нарушают легитимный трафик, и развернуть их на десятках миллионов веб‑сайтов — затем тщательно мониторить продакшн, чтобы автоматически откатить изменения, если они ведут себя некорректно. Сегодня эта цепочка существует и работает 24/7, и один ненадёжный звено может лишить клиентов их защиты. Мы ищем сильного Engineer, который быстро расширит её, сохраняя надёжность и прозрачность. Это включает решение сложных инженерных задач, работу с данными в масштабе, в мире, полном неожиданностей. Позиция полностью удалённая с гибким графиком, позволяющим планировать ваш день и работать из любой точки мира.

• Проектирование, создание и эксплуатация описанных выше автоматизированных конвейеров от начала до конца;
• Преобразование хрупких многоступенчатых batch‑задач в возобновляемые, идемпотентные, наблюдаемые системы с явными конечными автоматами и путями восстановления;
• Определение и соблюдение бюджетов задержки и SLOs на каждом этапе, а также обеспечение видимости и возможности реагировать на нарушения, а не оставлять их незамеченными;
• Создание слоя наблюдаемости — метрик, дашбордов, алертинга и health‑gates — чтобы конвейер сам сообщал о своём состоянии, без необходимости кто‑то проверял его;
• Проектирование и внедрение guardrails: автоматическое удержание и откат, ограничения blast‑radius, kill switches и поведение safe‑by‑default при недоступности upstream‑зависимости;
• Снижение требований к обслуживанию систем: устранение ручных шагов, удаление постоянного человеческого наблюдения и сокращение операционной поверхности вместо её увеличения;
• Написание и поддержка unit‑ и integration‑тестов для логики, действительно трудно тестируемой — конкуренция, частичные сбои, нестабильность внешних API, многоступенчатое состояние;
• Исследование и решение сложных проблем в ClickHouse, GitLab CI, S3/object storage, Prometheus/Grafana и сторонних API;
• Сотрудничество с аналитиками по безопасности и командой Server по архитектуре, а также возражение, когда предлагаемый дизайн не выдержит работу в продакшн.

• 5+ лет профессионального опыта в backend / platform / infrastructure инженерии;
• Доказуемый опыт создания и эксплуатации многоступенчатых data‑ или automation‑конвейеров — CI/CD систем, ETL/ELT, автоматизации сборки и релизов, оркестрации задач, ML/data платформ или аналогичного. Это единственное самое важное требование. Мы попросим вас подробно рассказать о таком проекте;
• Глубокие знания как минимум одного из Python, Go или Rust. Мы используем все три и не ищем специалиста по конкретному языку — какой язык вы приносите, действительно не имеет значения. Глубина просто подтверждает реальный опыт, поэтому ожидайте конкретных вопросов о системах, которые вы проектировали и поставляли: почему они такие, как они ведут себя при сбоях и что вы бы построили иначе сегодня;
• Оценка системного дизайна, а не просто объём кода. Сложная часть этой роли — решать, что строить, предвидеть, где могут возникнуть сбои, и заставлять систему доказывать свою корректность — а не количество написанного кода;
• Практический опыт оркестрации рабочих процессов и планирования задач (Airflow, Temporal, Prefect, Dagster, Argo, кастомные планировщики — всё, что вы действительно запускали в продакшн);
• Инстинкт надёжного инженерного подхода: идемпотентность, повторные попытки с backoff, exactly‑once vs at‑least‑once, контрольные точки и возобновляемость, грациозное деградирование, backpressure и безопасное обращение с частичными сбоями;
• Практический опыт наблюдаемости — Prometheus/Grafana, LGTM stack или эквивалент — включая проектирование метрик, а не только потребление чужих дашбордов;
• Глубокий опыт CI/CD, желательно GitLab CI, включая динамические/child‑pipeline и self‑hosted runners; уверенное владение Docker и тестовыми окружениями на основе контейнеров;
• Опыт работы с объектным хранилищем (S3/Ceph или эквивалент) и с крупномасштабными аналитическими хранилищами — ClickHouse или другой колонковой базой данных;
• Умение проектировать конечные автоматы и длительные процессы, которые выдерживают перезапуски, и рассуждать о конкуренции в нескольких одновременно развертываемых rollout‑ах;
• Отличные навыки отладки на уровнях системы, сети и данных;
• Сильные коммуникативные навыки и комфорт работы в распределённой команде;
• Владение разговорным и письменным английским.

• Опыт progressive delivery — canary и процентных rollout‑ов, feature flags, автоматического отката, контроля blast‑radius.
• Опыт эксплуатации AI/LLM систем в продакшн, особенно контроля затрат, учёта токенов, тестовых harness‑ов оценки и работы с недетерминированными компонентами внутри детерминированного конвейера.
• Опыт работы с телеметрией масштаба fleet и построения quality‑gates поверх шумного продакшн‑сигнала.
• Знакомство с WordPress, PHP или концепциями WAF/ModSecurity.
• Опыт управления конфигурацией (Ansible, Puppet, Salt) и работы с Linux‑сервисами.

• Ориентация на профессиональное развитие.
• Интересные и сложные проекты.
• Полностью удалённая работа с гибким графиком, позволяющая планировать ваш день и работать из любой точки мира.
• Оплачиваемый отпуск — 24 дня в год, 10 дней государственных праздников и неограниченное количество больничных.
• Компенсация частной медицинской страховки.
• Возмещение расходов на коворкинг и спорт/тренажёрный зал.
• Бюджет на образование.
• Возможность получить награду за самую инновационную идею, которую компания может запатентовать.