我把四份宇树科技申报材料交给金融模型跑了三次,第三次它没输给数字,输给了 JSON
作者用四份宇树科技公开申报材料构建了10万字符的证据包,对蚂蚁百灵金融模型 Ling-3.0-flash-Fin 进行三轮相同条件实测。前两轮均达 32/33 字段正确、19/20 整项正确,且对无答案问题不硬编;第三轮内容大体正确,却因 JSON 结构错误导致程序无法解析,形成'API 返回 3/3,严格结构化交付 2/3'的结果。文章指出模型进入真实金融工作流后,关键不再是答对问题,而是稳定交付下游可用的结构化结果,建议采用 JSON Schema 校验、失败重试与人工复核的生产路径,认为该模型适合作为金融 Agent 的中间推理层,但尚不能无人值守接管工作流。