Внедрение GenAI в промышленности упирается в одну и ту же проблему: отраслевые данные уникальны, а размеченных датасетов для fine-tuning почти нет. Стоимость обучения специальных моделей может быть существенной при этом результат непредсказуем. Кейс из практики нашей команды: каталог промышленного оборудования, сотни тысяч SKU. ❗️Задача — обеспечить точность подбора номенклатуры по текстовому запросу на уровне 80%+. Классический путь — RAG с reranker'ом, валидационными данными и итеративным тюнингом гиперпараметров — требовал ресурсов, которых у заказчика не было. 👌Решение: Базовый RAG без дополнительной оптимизации давал 50–60% точности. Вместо того чтобы усложнять пайплайн, мы увеличили выдачу в ~10 раз и передавали расширенный контекст в модель с окном 128K+. Модель самостоятельно фильтровала нерелевантные позиции, опираясь на логику всей выборки. 🔘Результат: — Целевые 80% точности достигнуты — Нулевые CAPEX на рост качества — Устойчивость к изменениям в каталоге за счет мощно
⚡️80% точности без CAPEX на обучение: решение для промышленного RAG
7 мая7 мая
4
1 мин