- Мы ищем AI Engineer, который обладает глубоким пониманием систем масштабного поиска информации, глубокого обучения, баз данных и архитектур RAG. Идеальный кандидат будет экспертом в разработке и оптимизации поисковых алгоритмов, реализации эффективных техник индексации и использовании RAG для улучшения AI‑поддерживаемых систем поиска и ответов на вопросы.
В роли AI Engineer вы будете играть ключевую роль в проектировании, разработке и развертывании передовых систем поиска и извлечения, использующих техники RAG для решения сложных задач доступа к информации. Вы будете сотрудничать с инженерами‑программистами, клиентами и бизнес‑стейкхолдерами для создания AI‑поисковых решений, приносящих значительную ценность организации и её клиентам.
RAG System Research and Implementation: Руководить проектированием и реализацией передовых систем извлечения, таких как Deep Memory от Activeloop, предоставляя оптимизированные RAG‑системы на всех этапах цепочки ценности — от встраивания или тонкой настройки модели до оптимизации извлечения с помощью пользовательских алгоритмов, повышая точность получения знаний.
Search Algorithm Optimization: Разрабатывать и совершенствовать поисковые алгоритмы, включая семантический поиск, гибридный поиск и мульти‑модальные техники, для улучшения производительности извлечения и релевантности ранжирования.
Vector Database Integration: Внедрять и оптимизировать решения хранения и индексации векторов в Deep Lake, обеспечивая эффективный поиск похожих элементов для высокоразмерных эмбеддингов, используемых в RAG‑системах.
Query Understanding and Processing: Проектировать и реализовывать продвинутые конвейеры обработки запросов, включая расширение запросов, распознавание намерений и контекстную интерпретацию для повышения точности поиска.
Information Retrieval Model Development: Создавать и дорабатывать модели машинного обучения, специально предназначенные для задач информационного поиска, таких как ранжирование документов, оценка релевантности запрос‑документ и zero‑shot поиск.
Performance Evaluation and Metrics: Создавать комплексные рамки оценки для поисковых и RAG‑систем, включая оценку релевантности, A/B‑тестирование и метрики удовлетворённости пользователей, чтобы постоянно улучшать производительность системы.
Scalability and Efficiency: Оптимизировать RAG и поисковые системы для высокой пропускной способности и низкой задержки, обеспечивая их способность обрабатывать масштабные наборы данных и запросы в реальном времени.
Data Ingestion and Indexing: Разрабатывать эффективные конвейеры ingest‑данных и стратегии индексации для поддержки быстрых обновлений и возможностей поиска в реальном времени по разнообразным типам и источникам данных.