Senior Data Labeler

Мы ищем руководителя команды Data Labeling, который построит нашу аннотационную команду с нуля — установит стандарты качества, разработает рамки оценки и будет управлять процессом разметки для наших оценок безопасности, RLHF и бенчмарков. Вы будете отвечать за качество, пропускную способность и стоимость, работая бок о бок с нашими исследователями ИИ.

• Создать с нуля и возглавить команду Data Labeling (набор персонала, наставничество и управление эффективностью)
• Определять руководства по аннотации, стандарты качества и рамки оценки
• Разрабатывать процессы контроля качества, сессии калибровки и системы аудита
• Сотрудничать с исследователями и инженерами ИИ, переводя исследовательские цели в рабочие процессы разметки
• Приоритизировать проекты разметки в зависимости от бизнес‑ и исследовательских потребностей
• Отслеживать операционные метрики, включая качество, согласованность, пропускную способность и стоимость
• Улучшать инструменты аннотации, автоматизацию и эффективность рабочих процессов
• Руководить сложными проектами оценки ИИ, включая безопасность, ранжирование предпочтений, RLHF, оценку политик и создание бенчмарков
• Анализировать паттерны разногласий и граничные случаи для улучшения руководств и производительности модели
• Управлять отношениями с поставщиками и обеспечивать стабильное качество в распределённых командах
• Создавать отчётные панели и передавать операционные инсайты руководству
• Содействовать культуре непрерывного улучшения, ответственности и операционного совершенства

• Имеет опыт руководства командами аннотации данных или оценки ИИ
• Обладает сильными операционными и управленческими навыками
• Понимает оценку моделей ИИ, поведение LLM и современные рабочие процессы аннотации
• Способен разрабатывать масштабируемые процессы без потери качества
• Чётко коммуницирует с техническими и нетехническими командами
• Процветает в быстро меняющихся стартап‑средах

• Управлял программами аннотации для LLM, генеративного ИИ или машинного обучения
• Имеет опыт работы с RLHF, сбором данных предпочтений, оценками безопасности или созданием бенчмарков
• Работал в Trust & Safety, AI Safety, Content Moderation или ML Ops
• Управлял распределёнными или глобальными командами аннотации
• Имеет опыт управления поставщиками и аутсорсингом операций
• Знаком с prompt engineering и политиками безопасности ИИ
• SQL, Python или опыт анализа данных
• Опыт создания внутренних платформ аннотации или автоматизации рабочих процессов
• Образование в лингвистике, когнитивных науках, машинном обучении или операциях с данными

• Конкурентоспособная компенсация, включая долю в компании
• Гибкий отпуск
• Просторный офис в сердце 2‑го округа Парижа, с гибридным форматом работы
• Поддержка переезда в Париж, доступная после прохождения испытательного срока
• Премиальная частная медицинская страховка
• Поддержка психического здоровья, включая покрытие терапии по необходимости
• Уроки языков для улучшения вашего английского или французского
• Обед и ужин покрываются, когда вы работаете из офиса
• Поддержка обучения и развития: курсы, конференции и возможности роста навыков
• Всё необходимое оборудование, подписки, инструменты и сервисы
• Выездные мероприятия команды два раза в год: недавно мы были в Альпах, Сен‑Тропе и Марбелье