Software Engineer,Risk & Data Technology - Python London, United Kingdom

Software Engineer,Risk & Data Technology - Python

London, United Kingdom

JUXT сотрудничает с ведущей глобальной фирмой по торговле сырьевыми товарами, чтобы построить её новую ядровую платформу данных для рыночных данных в реальном времени и в конце дня.

В рамках этой миссии мы заменим существующую систему новой высокомасштабируемой облачно‑нативной платформой данных, не нарушая работу клиентских приложений, которые сегодня используют эти данные. Мы построим новые конвейеры ingest‑данных для получения информации от широкого спектра поставщиков рыночных данных. Мы также создадим новые возможности запросов, совместимые с существующими API, чтобы клиентские приложения продолжали работать без изменений.

Это проект с нуля, реализуемый прагматичной командой, которая любит быстро доказывать решения и итеративно их улучшать. Вы будете работать рядом с высококвалифицированными инженерами, планировать миграцию, создавать и развёртывать новые системы, анализировать существующий трафик и определять приоритеты, а затем расширять потоки данных и API запросов для новых сценариев использования.

• Создание подсистемы ingest‑потоков: событийно‑ориентированные коннекторы, получающие данные напрямую от внешних поставщиков рыночных данных.

• Создание API запросов с использованием современных масштабируемых технологий данных, таких как ClickHouse и S3 Tables/Iceberg с Athena. Опыт работы с другими масштабируемыми технологиями данных будет преимуществом (QuestDB, Snowflake, DuckDB).

• Создание перехватывающего прокси для интеллектуального направления трафика к новым сервисам запросов. Обеспечение полной совместимости API, чтобы клиенты могли продолжать работать корректно.

• Сбор и анализ метрик и полезных нагрузок запросов для выявления и изучения существующих клиентских данных. Проверка дизайна от начала до конца на реальных клиентских запросах и поэтапный ввод новых систем.

• Сквозная наблюдаемость всех компонентов: логи, метрики и трассировки в ClickStack и Grafana, дополненные сервисами наблюдаемости AWS.

• Тщательная работа с клиентом, проведение сессий обнаружения и продуманный подход к архитектуре платформы (стриминг vs запрос‑ответ, поэтапные и низко‑рисковые развертывания, отслеживание лицензий на данные, понижение частоты высокочастотных потоков).

• Сильный senior backend engineer, уверенно работающий с языками, используемыми в платформе данных (например, Java, C#, Python) и имеющий опыт построения производственных сервисов с интенсивным использованием данных.

• Реальный опыт работы с конвейерами данных и событийно‑ориентированным ingest‑процессом: коннекторы, планировщики, идемпотентность, backfill и операционная поддержка, требуемая потоками данных.

• Твёрдая база в сетевых технологиях: DNS, TLS и сертификаты, модель OSI, анализ TCP‑пакетов, HTTP‑прокси: достаточно, чтобы уверенно рассуждать о прозрачном слое перехвата и отлаживать его при возникновении реальных проблем.

• Опыт работы с масштабируемыми облачными платформами данных, желательно AWS: объектное хранилище, форматы таблиц, движки запросов.

• Сильная дисциплина тестирования. Валидация, согласование и аккуратный rollout.

• Высокая автономность и чёткая коммуникация: небольшая senior‑команда, встроенная в клиентскую среду, принимающая прагматичные решения и хорошо их объясняющая. Необходимо будет брать на себя ответственность за значительные задачи, проектировать решения и доставлять их.

• Опыт в домене рыночных данных: Platts, Argus, ICE, CME, Bloomberg, Refinitiv, права доступа и лицензирование, кривые и временные ряды.

• Знание домена торговли сырьевыми товарами или энергией, либо опыт работы с системами Risk / ETRM.

• Практический опыт работы с Envoy/HAProxy/Kong/Traefik.

• ClickHouse, Trino/Iceberg или аналогичные аналитические хранилища и движки запросов в масштабе.

• Опыт поэтапных миграций с наследуемой или сторонней системы, когда старый и новый работают параллельно и переход происходит постепенно.

• Возможность работать над передовыми проектами

• Работа в высокомотивированной и преданной команде

• Конкурентоспособная зарплата

• Гибкий график

• Пакет льгот — медицинская страховка, спорт

• Корпоративные социальные мероприятия

• Возможности профессионального развития

• Хорошо оборудованный офис

• Grid Dynamics является работодателем, предоставляющим равные возможности. Мы привержены созданию инклюзивной среды для всех сотрудников в течение их работы и для всех кандидатов в процессе подачи заявок.

Все квалифицированные соискатели получат рассмотрение без учёта и без дискриминации по возрасту, расе, полу, цвету кожи, религии, национальному происхождению, сексуальной ориентации, гендерной идентичности, статусу ветерана, инвалидности или любой другой защищённой категории. Все решения о найме принимаются на основе квалификаций, заслуг и бизнес‑потребностей.