Middle Scraping Engineer

Мы ищем острого, проактивного и опытного Middle Scraping Engineer, который присоединится к нашей команде и будет продвигать наши операции по извлечению веб‑данных вперёд. Это не типичная backend‑позиция. Вы будете работать со сложными веб‑структурами, мощными механизмами защиты от ботов, инфраструктурой, масштабируемой под нагрузку, и системами скрапинга с высоким уровнем нагрузки. Вы расширите охват нашего краулинга, будете поддерживать огромный флот краулеров, разрабатывать решения по обходу блокировок и обеспечивать высокое качество данных в соответствии со строгими SLA.

• Поддерживать и оптимизировать наш существующий крупномасштабный флот краулеров для обеспечения высокой доступности;
• Расширять охват краулинга, разрабатывая скраперы для новых, сложных целевых веб‑сайтов;
• Повышать качество, пропускную способность и коэффициент успеха существующих краулов;
• Исследовать, обновлять и разрабатывать кастомные решения по обходу современных механизмов защиты от ботов;
• Обеспечивать стабильную поставку данных, строго соблюдая SLA клиентов;
• Поддерживать пропускную способность команды, активно берясь за задачи R&D, решая сложные граничные случаи и наставляя младших инженеров.

• Глубокое владение Python ("Python Ninja") с чистыми, масштабируемыми практиками кодирования;
• Глубокая экспертиза в Scrapy, Playwright и асинхронных сетевых взаимодействиях;
• Твердый практический опыт управления прокси (резидентные, дата‑центры, ротационные сети, привязка к сессии);
• Опыт работы с продвинутыми инструментами и техниками обхода (обход Cloudflare, Akamai, Datadome, решения CAPTCHA, TLS/браузерный отпечаток);
• Практические знания DevOps (Docker, CI/CD pipelines, оркестрация контейнеров, мониторинг);
• Сильные навыки обратного инженерного анализа веба (анализ сетевого трафика, API‑эндпоинтов, сообщений WebSocket, минифицированного JS);
• Опыт построения или развертывания масштабируемой инфраструктуры веб‑скрапинга;
• Высокий уровень ответственности, ориентация на SLA и целеустремлённый подход;
• Отличные навыки командной работы, быстрое мышление и сильные способности к решению проблем в условиях высокого давления.

• Богатый инновационный стек программного обеспечения, свобода выбора наиболее подходящих технологий;
• Идеология remote‑first: свобода работать из домашнего офиса или любого подходящего коворкинга;
• Гибкий график работы (начало с 8 до 11 утра) и отсутствие систем учёта рабочего времени;
• Регулярные обзоры эффективности и компенсаций;
• Регулярные 1‑on‑1 встречи и измеримые OKR;
• Глубокое вводное обучение с чётким планом успеха;
• Competera покрывает 70 % стоимости вашего обучения/курса;
• 20 дней отпуска, 15 выходных дней и до одной недели оплачиваемых рождественских каникул;
• 20 рабочих дней больничного.