你的 AI 账单,一半可能花在重试上!便宜 14 倍却不敢用?最便宜模型跑分类任务,成本只有对手零头却输在稳定性
有开发者在 150 条银行客服消息上实测十款模型,最便宜的一款每次成功只要 0.00009 美元,但配对检验显示它未必追得上基线。
大白话有人拿 150 条银行客服消息做实验,让十款模型从 77 个意图标签里选一个,看谁又准又便宜。结果最便宜的 GPT-6 Luna 每次成功只花约 0.00009 美元,比基线便宜约 14 倍,通过率 82%,但统计检验没法证明它和基线差距在 5 个点以内。而 GPT-6.1 Terra 通过率 84%,成本比基线低 42.8%,是唯一被判定「追平基线」的。
对你意味着如果你在做客服分类、工单打标这类批量任务,这张表能帮你算清「便宜」和「够用」之间的账,别只看单价。
开发者个人实测与自建评测页数据,非厂商官方评测
原文:Cheapest LLM for 77-intent banking classification: GPT-6.1 Terra at $0.000727 a success
打开巨象雷达,看今天全部 AI 动态