Ornith开源，Copilot还稳吗？
GitHub Copilot
Claude Code
Qwen3.7
花了一个周末跑完了Ornith-1.0的三个版本benchmark，跟Copilot做了详细对比说点真实数据。9B版本在HumanEval上拿了72%接近Copilot的78%，13B版本到了81%已经超过了Copilot标准模式，397B版本在SWE-Bench上表现接近Claude级别但免费本地跑。但跑分归跑分实际体验有差距，Ornith在简单代码补全上已经很丝滑了，但复杂的多文件重构和跨仓库理解Copilot还是强一截因为它的上下文工程做得好。本地部署方面用vLLM加载13B版本单张4090就能跑延迟在200毫秒内体验很接近Copilot。开源替代品的差距已经缩小到5%到10%了，对大部分日常开发场景来说完全够用。Qwen 2.5 Coder 14B这些模型在单卡消费级GPU上跑的效果已经追上两年前的云模型了。结论是如果你对数据隐私敏感或者想省钱Ornith加Continue.dev完全可以替代Copilot。
发布于 广东
分享
评论
1
未登录
友善发言
评论
加载中
