Operations Specialist, AI Enablement [Content Moderation]

Bumble Inc. ищет Operations Specialist, AI Enablement для присоединения к нашей команде CX & Trust. Доверие, забота и качественный опыт — ключевые элементы миссии Bumble по созданию мира, где все отношения здоровые и равноправные, и в этой роли вы поможете воплотить эту миссию в жизнь, улучшая то, как наши системы клиентского опыта и модерации на основе AI поддерживают наше сообщество.

Вы будете оценивать взаимодействия с клиентами на основе AI и решения автоматической модерации на соответствие политикам, процессам и стандартам качества Bumble, помогая нам понять, где наши системы работают хорошо, а где их можно улучшить. Благодаря проверкам качества, точной разметке кейсов, поддержанию золотых наборов (golden sets) и вдумчивому анализу вы поможете обеспечить, чтобы решения, поддерживаемые AI, были последовательными, точными и учитывали нюансы, необходимые для ответственного обслуживания наших пользователей. Вы будете тесно сотрудничать с AI Performance & Enablement Manager и коллегами в CX & Trust, беря на себя ответственность за качественную работу и демонстрируя ценности Bumble — Смелость, Любознательность, Уважение и Совершенство — пока мы переосмысливаем, как AI может укреплять доверие и заботу на протяжении всего опыта пользователей.

Эта роль будет базироваться в Лондоне и предполагает гибридный формат работы.

• Проводить проверки качества бесед с клиентами на основе AI и решений автоматической модерации, оценивая их соответствие политикам сообщества, операционным процессам и стандартам качества Bumble.
• Анализировать пробелы в применении политик и неоднозначные случаи, выявляя, где автоматические решения могут быть непоследовательными, неясными или не соответствовать смыслу политики, и формулировать практические рекомендации для улучшения.
• Выполнять точную разметку кейсов для поддержки обучения моделей AI, пайплайнов оценки и постоянного сравнительного анализа качества, демонстрируя Совершенство через тщательное и последовательное применение установленных рекомендаций.
• Проверять и поддерживать золотые наборы (golden sets), которые отражают текущие стандарты политик и обеспечивают надёжную эталонную базу для оценки качества, точности и достоверности AI.
• Сообщать о проблемах качества через установленные рабочие процессы, беря на себя ответственность за точную категоризацию, чёткую документацию и практическую обратную связь, доводя инсайты до значимого результата.
• Целенаправленно сотрудничать с AI Performance & Enablement Manager по вопросам последовательности оценок, калибровки, повторяющихся проблем качества и возможностей укрепления надёжности AI и опыта пользователей.
• Выявлять закономерности и делиться выводами, которые могут улучшить точность и достоверность AI, удовлетворённость клиентов и операционную эффективность, подходя к новым вызовам с Любознательностью и гибким мышлением.
• Использовать платформы QA и инструменты с поддержкой AI, включая такие системы, как Cinder, Zendesk QA и внутренние инструменты оценки Bumble, для мониторинга качества и понимания поведения AI, критически анализируя результаты на точность, предвзятость, конфиденциальность и справедливость, а также применяя человеческое суждение перед принятием решений на основе результатов.

• Требуется опыт работы 1+ год, однако мы рады рассмотреть кандидатов с альтернативным опытом, который демонстрирует эквивалентные навыки.
• Обладать опытом или переносимыми навыками из сфер Trust & Safety, модерации контента, Customer Experience, обеспечения качества (quality assurance) или другой динамичной среды, основанной на политиках.
• Обладать острым вниманием к деталям и уметь объективно оценивать беседы, решения модерации и другие взаимодействия на соответствие установленным политикам, процессам и стандартам качества.
• Иметь представление о разговорных системах AI, чат-ботах, автоматической модерации или рабочих процессах с поддержкой AI, а также обладать Любознательностью, чтобы продолжать изучать, как эти системы работают, в чём заключаются их ограничения и как человеческое суждение может повысить их эффективность.
• Понимать или быть мотивированным изучать практики обеспечения качества, такие как разметка кейсов, калибровка, последовательная оценка, оценка по золотым наборам (golden-set) и чёткая документация результатов проверки качества.
• Легко осваивать цифровые инструменты и платформы и уметь использовать данные и инсайты о качестве для выявления значимых закономерностей, адаптируя свой подход по мере развития систем, политик и приоритетов.
• Целенаправленно сотрудничать с коллегами, брать на себя ответственность за результаты своей работы и доводить работу от инсайта до результата, воспринимая обратную связь как возможность учиться и совершенствоваться.
• Применять AI вдумчиво и ответственно, оценивая результаты на точность, предвзятость, конфиденциальность и справедливость, а не полагаясь на них без проверки, и демонстрировать ценности Bumble — Уважение, Любознательность и Совершенство — в том, как вы поддерживаете наше сообщество и коллег.

Итоговая компенсация

Будет определена на основе таких факторов, как квалификация выбранного кандидата, соответствующий опыт, набор навыков и другие аспекты, связанные с должностью.