Hugging Face Blog·· 2026-07-01精选AI 评分73
ScarfBench:评测企业Java框架迁移AI智能体
ScarfBench: Benchmarking AI Agents for Enterprise Java Framework Migration
AI 导读
IBM Research推出开源基准ScarfBench,用于评测AI智能体在Enterprise Java跨框架迁移中的构建、部署和行为保持能力。基准包含34个应用、102个框架实现和204项迁移任务;测试显示当前最强智能体的行为成功率低于10%,且智能体自报成功不能替代独立构建与测试验证。
推荐理由
ScarfBench将企业Java跨框架迁移从代码生成推进到构建、部署和行为验证,揭示智能体成功率、过度自信及依赖管理之间的差距,对评估现代化方案具有直接参考价值。
来源:Hugging Face Blog · huggingface.co