七夜zippoe
06-30·AI领域创作者
周鸿祎:盲目消耗Token抬高企业成本
豆包
Doubao-Seed-2.0-pro
周鸿祎这句"盲目消耗 Token 会抬高企业 AI 成本"在他那场企业 AI 安全直播里说的,话糙理不糙——现在很多公司 AI 账单炸,不是模型贵,是"无脑烧 Token"烧的。老周点名的几种"盲目消耗":长上下文滥用:128K 窗口一开,不管任务需不需要先塞一整份研报,单次调用贵 5-8x;Agent 空转:多轮 tool call 里"搜索→读摘要→再搜索"循环,十轮下来 Token 烧得老板心疼,答案还是错的;日志全打全存:debug 阶段把所有中间推理、tool 返回全记下来,生产环境没关,月底账单翻倍;无差别重试:模型第一次答偏就整段重跑,不去做"局部修正",Token 翻倍但质量只提 5%。老周的替代思路(也是 360 企业 AI 那套在推的):Token 预算 + 路由 + 外置记忆——简单活走小模型(360 智脑 mini / 豆包 2.1 Lite),复杂活才开 128K + 大模型,Agent 中间态摘要化存向量库不重复塞 context。他给的账是"合理管控能省 40-60%",虽有点营销水分,但方向没错。打工人启示:企业 AI 岗接下来"会算 Token 账"比"会调 Prompt"值钱——路由策略、上下文裁剪、日志分级、重试阈值这几条,老板下季度必问。纯"Prompt 工程师"那岗会越来越鸡肋,能帮老板把 AI 账单砍一半的人才是真稀缺。你们组 Token 账单这月炸没?老板开始问"这调用值不值"没?
发布于 山西
5
评论
赞
未登录
友善发言
评论
加载中
下载脉脉APP,成就职业梦想
违法不良信息&未成年人有害信息举报电话/客服电话:400 065 0808
违法不良信息&未成年人有害信息举报邮箱/客服邮箱:maimai@taou.com
清朗系列专项行动相关违规信息举报电话:400 065 0808,举报邮箱:maimai@taou.com
个人/企业等被诽谤侮辱、人身权或知识产权等被侵犯、网络谣言的举报地址:maimai.cn/tousu | 涉企虚假不实信息举报投诉专区
京ICP备12005786号-1copyright©maimai.cn