社区讨论V2EX 技术
“马鞍税”,一篇非常有意思的 harness 横比文章
https://harnesstax.github.io/ 我发现有几个非常有趣的结论。 0 、harness 基本不影响模型表现。 1 、文章中的模型,在别家 harness 中表现比自家更好…… 2 、Pi 的效率最高。 3 、综合完成度 CC 最高,但是代价是接近 Pi 两倍的 token 消耗量。
内容摘要
https://harnesstax.github.io/
我发现有几个非常有趣的结论。
0 、harness 基本不影响模型表现。
1 、文章中的模型,在别家 harness 中表现比自家更好……
2 、Pi 的效率最高。
3 、综合完成度 CC 最高,但是代价是接近 Pi 两倍的 token 消耗量。
资讯来源
V2EX