Отбор сырых реплик заменил извлечение фактов при короткой памяти агента
На LoCoMo отбор реплик набрал 77,0% против 77,5% у извлечения фактов при бюджетах 265 и 251 токен.
Запись памяти из сырых реплик стоила в 3061 раз дешевле.
При сохранении 3 из 30 кандидатов ранжирование добавило 17,4 пункта, а при 20 кандидатах — 1,5 пункта.
При большом бюджете извлечение фактов выиграло у отбора реплик: 82,4% против 77,6%.
Почему важно
Архитектуру памяти стоит выбирать по контекстному бюджету: при жестком лимите решает отбор, при щедром — предварительное сжатие фактов.