反常识真相:Agent在真实工作场景的成功率依然很低
文章通过分析多个真实场景评测集(如RealReplicaBench、E-Bench等),指出尽管大模型在编程领域表现优异,但在电商、生活等复杂真实任务中的成功率极低,甚至不足50%。这揭示了模型从解题到实际工作之间仍存在巨大差距。
文章通过分析多个真实场景评测集(如RealReplicaBench、E-Bench等),指出尽管大模型在编程领域表现优异,但在电商、生活等复杂真实任务中的成功率极低,甚至不足50%。这揭示了模型从解题到实际工作之间仍存在巨大差距。