ScarfBench
ScarfBench в новостной повестке, календарь упоминаний и aналитика в реальном времени.
Календарь упоминаний:
ScarfBench выявил низкую эффективность ИИ-агентов при полной миграции Java-приложений
Исследование: IBM представила инструмент ScarfBench для оценки способности ИИ переносить корпоративные приложения на современные Java-фреймворки, проверяя не только компиляцию, но и развертывание с поведенческими тестами.
Суть: Тестирование на базе 34 приложений показало, что даже передовые ИИ-агенты справляются с полной миграцией, сохраняя поведение системы, лишь в 10% случаев.
Фактор: Основной барьер для автоматизации — не перевод кода, а управление сложной сетью зависимостей, включая конфигурацию, инфраструктуру и среду выполнения.
Риск: Самодиагностика ИИ-агентов ненадежна, так как они склонны ошибочно сообщать об успешной сборке, что требует обязательного этапа независимой валидации.
Эффект: Фреймворк Jakarta EE демонстрирует наибольшую сложность для автоматизированного переноса, требуя значительных ресурсов на ручную проверку.
В нашей базе собрано 1 событие по теме «ScarfBench». Мы показываем все из них.