Backboard превзошел конкурентов в тесте на долговременную память ИИ

Платформа Backboard для создания ИИ-агентов продемонстрировала выдающийся результат в 90,1% в бенчмарке LoCoMo, предназначенном для оценки долговременной диалоговой памяти. Этот показатель значительно превосходит результаты популярных библиотек, ранее находившихся в диапазоне 67–69%.

LoCoMo оценивает способность ИИ-систем запоминать, обновлять и использовать информацию о пользователе и контексте диалога в течение множества сессий. Высокий балл означает более точное выполнение инструкций, снижение количества переспрашиваний и повышение эффективности взаимодействия, что, в свою очередь, снижает затраты на использование токенов.

Backboard предлагает API для долгосрочной памяти, мультимодельный API для работы с более чем 2200 LLM и RAG-слой для интеграции внешних знаний. Компания обеспечила воспроизводимость результатов, опубликовав скрипты, логи и промпты на GitHub для проверки и использования другими исследователями.

Достижение в области долговременной памяти открывает перспективы для разработки ИИ-ассистентов, способных к персонализации и адаптации к постоянным взаимодействиям с пользователем.

И, конечно, все эти чудеса ИИ создаются для того, чтобы нам было проще… забывать, что мы сами должны думать.