14 подписчиков
HippoRAG: нейробиологически стимулированная долговременная память для больших языковых моделей
HippoRAG - интеллектуальная структура RAG, которая позволяет магистрантам эффективно и результативно интегрировать знания из внешних документов, что выходит за рамки стандартных методов RAG.
Дизайн HippoRAG во многом вдохновлен теорией индексации гиппокампа долговременной памяти человека, которая изображает гиппокамп как библиотекаря нашего мозга, постоянно выстраивающего индексы памяти и ассоциации для улучшения запоминания.
Представленный метод превосходит современные ретриверы в нескольких тестах многоступенчатого контроля качества (MuSiQue/2Wiki) с заметным отрывом до 20%.
HippoRAG способен обеспечить производительность, сравнимую с итеративными методами RAG (IRCoT), будучи при этом в 10–30 раз быстрее и в 6–13 раз дешевле.
Новый метод позволяет обрабатывать новые сценарии, которые недоступны существующим методам RAG.
Telegram: @Age_of_it
Около минуты
31 мая 2024