ChatGPT, Claude и Gemini теперь оснащены функциями памяти, и суть та же: помощник, который вас знает. Ваши предпочтения, ваши проекты, ваши цели переносятся в разговоры. Часто задаваемые вопросы по памяти OpenAI допускают неловкую часть. Это ...
ChatGPT, Claude и Gemini теперь оснащены функциями памяти, и суть та же: помощник, который вас знает. Ваши предпочтения, ваши проекты, ваши цели переносятся в разговоры.
Часто задаваемые вопросы по памяти OpenAI допускают неловкую часть. В нем говорится, что предыдущая система сохраненных воспоминаний «часто устаревала» и могла одновременно хранить противоречивые воспоминания. Именно для измерения этой версии проблемы создан новый тест под названием Memora.
В статье «От воспоминания к забвению» (Уддин и др., штат Аризона, Университет Аризоны, Genies, результаты ACL 2026) утверждается, что способ проверки памяти агента имеет «слепое пятно»: мы проверяем запоминание, в то время как, по мнению авторов, реальная долговременная память в основном представляет собой пересмотр.
Слепое пятно в тестировании памяти
Посмотрите, как строятся существующие тесты долговременной памяти:
В LoCoMo на 94% вопросов оценки можно ответить, используя данные не более чем двух прошлых сессий. В LongMemEval это 85%. По основным критериям средний вопрос требует около одного сеанса истории.
Обновлений практически нет. LongMemEval допускает не более двух обновлений знаний перед оценкой, а PersonaMem обрабатывает изменения не более чем в трех