开源仓库

共 9 个仓库 · 按最近更新排序

查看全部 →
多模型成本路由:省 42% 的钱,掉 3.9 个点准确率 新

多模型成本路由:省 42% 的钱,掉 3.9 个点准确率

一句话总结:把任务按难度分给不同价位的模型,实测每1000个任务能省42%成本,准确率从97.7%降到93.8%。但真正的风险不是分类器判错多少,而是往哪个方向错。随机误判会互相抵消,把难题低估成简单题才会翻车。准确率也不是线性可交易的,93.8%和84.1%之间有断崖。上一篇算过算力涨价对内...

同一个模型自问自答有用吗:写代码测 Role-Agent 的收益 新

同一个模型自问自答有用吗:写代码测 Role-Agent 的收益

一句话总结:Role-Agent让同一个模型扮演学生和老师,在自问自答中变强。我按它的逻辑写了个模拟:双角色带来的准确率提升,约等于「老师比学生强多少」的一半。同一个模型换个角色,能力没变,所以收益接近零。它真正起作用的地方不是角色扮演,是让两个角色看到不同的信息。阿里AMAP研究院的Role-Agent...