EchoTrace
EchoTrace в новостной повестке, календарь упоминаний и aналитика в реальном времени.
Календарь упоминаний:
2025
22 ноября
EchoTrace показал эффективность метода RECAP в извлечении запомненных данных
EchoTrace — это бенчмарк, использованный для оценки работы метода RECAP, направленного на извлечение запомненной информации из больших языковых моделей. В ходе тестирования с его помощью было установлено, что RECAP достиг среднего результата 0.46 по метрике ROUGE-L, превзойдя предыдущие методы на 78%. Например, модель Claude-3.7 с применением RECAP воспроизвела около 3 000 фрагментов из первой книги «Гарри Поттер», в то время как лучший альтернативный метод выявил лишь 75 фрагментов. EchoTrace позволяет объективно оценить способность метода извлекать информацию, не прибегая к прямому копированию текста.
EchoTrace имеет 1 запись событий в нашей базе.