The Scaffolding Tax: Investigating the Optimal Harness for a Model
本文探讨了AI代理中模型与脚手架(harness)之间的关系,提出了“脚手架税”概念,即过时的脚手架会抑制更强大模型的表现。通过Terminal-Bench 2.0实验,作者发现固定脚手架在不同模型和推理努力水平下表现不一,强调模型与脚手架需协同优化。
本文探讨了AI代理中模型与脚手架(harness)之间的关系,提出了“脚手架税”概念,即过时的脚手架会抑制更强大模型的表现。通过Terminal-Bench 2.0实验,作者发现固定脚手架在不同模型和推理努力水平下表现不一,强调模型与脚手架需协同优化。