Applied AI Engineer, Operations Automation

Мы ищем опытного Applied AI Engineer в команду Growth, чтобы вместе создавать системы автоматизации операций для нашей глобальной платформы мобильности. Если вас увлекает применение машинного обучения в задачах клиентской поддержки, проверки документов и выявления мошенничества для более чем 200 млн клиентов Bolt, здесь вас ждёт много значимой работы.

О роли

Каждый новый клиент и каждый заказ в Bolt может потребовать операционного решения: возврата средств, проверки документа, проверки аккаунта, решения по спору. Наши команды уже используют AI поверх существующих процессов, чтобы они работали быстрее и точнее. Многие из этих процессов нужно проектировать заново с нуля — так, чтобы система становилась лучше с каждым принятым решением.

Вы начнёте с клиентской поддержки для всех пользователей, затем перейдёте к проверке документов и выявлению мошенничества. После этого в зону вашей работы попадёт любой процесс с большим объёмом решений и зафиксированным результатом.

Вы работаете руками. Вы выпускаете продукт и отвечаете за результат.

• Перепроектируйте процессы. Изучайте системы учёта в своей области, беседуйте с людьми, которые в ней работают, и решайте, какие шаги станут программным обеспечением, агентами или точками контроля человеком.
• Определяйте, как выглядит отличный результат. Превращайте реальные кейсы и решения людей в тестовые наборы, а каждый новый сбой — в регрессионный тест.
• Создавайте проверки, которые трудно обмануть. Калибруйте LLM-судей по разметке людей, держите их отдельно от программных проверок и контролируйте стоимость и выплаты.
• Ведите цикл улучшений по политикам, промптам, инструментам и моделям. Добавляйте fine-tuning там, где более качественной политики недостаточно.
• Отвечайте за критерии выкатки. Решайте, что выпускать, проводите A/B-тесты и возвращайте результаты с продакшена в тестовые наборы.
• Фиксируйте то, что работает, чтобы другие команды могли применять это без вас.

Вас оценивают по тому, сколько решений вы автоматизируете, повышая при этом их качество.

• Вы пришли из разработки программного обеспечения, ML или data science и выпускали в продакшен и эксплуатировали систему, которая обращается к LLM.
• Вы создавали набор оценочных тестов для LLM- или агентной системы и использовали его, чтобы решать, что выпускать.
• Вы провели десятки часов за изучением трейсов агентов, выясняя, где решения оказались ошибочными, и исправляли их.
• Вы проектировали LLM-судью, измеряли его согласованность с разметкой людей и исправляли его, когда они расходились.
• Вы знаете, как обманывают верификаторы, и сталкивались в своей работе со случаем reward hacking.
• Вы умеете проектировать A/B-тест, читать его результат и объяснять руководителю операций, почему офлайн-тесты предсказывали иное.
• Вы знаете, когда правило, классическая ML-модель или человек справляются лучше LLM, и можете показать компромисс по стоимости.
• Вы чётко пишете по-английски. В ваших отчётах приводятся как предельная оценка, так и реалистичная.

• Практический опыт post-training: RLVR, GRPO или DPO, reward modelling, LoRA и т. д.
• Фреймворки оптимизации программ, такие как GEPA, DSPy или TextGrad.
• Проектирование RL-окружений или gym с программной оценкой.
• Автоматизация операций в маркетплейсе, финтехе или в команде trust and safety.
• Хорошее знание SQL и уверенная работа с кодовыми базами, которые вы не писали.

Почему вам у нас понравится

• Ускорьте свой профессиональный рост благодаря уникальным карьерным возможностям.
• Получайте достойную зарплату и опционы на акции: чем успешнее Bolt, тем успешнее вы.
• Заботьтесь о физическом и психическом здоровье с помощью наших программ благополучия.
• Отметьте 5 лет в Bolt оплачиваемым творческим отпуском (sabbatical) на 1 месяц, чтобы восстановить силы.
• Общайтесь с коллегами на ежегодных корпоративных мероприятиях и в небольших командных встречах.
• Работайте в офисе в штаб-квартире в Таллинне, рядом с командами операций и разработки, чьи решения вы автоматизируете.

Некоторые бонусы могут отличаться в зависимости от вашего местоположения и роли.

Рады всем Bolt — работодатель, предоставляющий равные возможности. Мы стремимся создать разнообразное и инклюзивное рабочее место, где все подходящие кандидаты рассматриваются без учёта расы, цвета кожи, национальности, религии, пола или гендерной идентичности, сексуальной ориентации, возраста или инвалидности.

Мы рады откликам от людей с любым опытом и готовы предоставить разумные условия на всех этапах найма. Если вам нужны какие-либо изменения, сообщите нам