星河畔
1天前·职场领域创作者
字节Seed基模团队成立四个一级部门
字节Seed基模团队一口气成立四个一级部门:预训练数据、强化学习、B端后训练、C端后训练。这架势分明是在为5万亿参数的超大模型做组织准备。5万亿什么概念?阿里Qwen目前2.4万亿,月之暗面K3是2.8万亿,字节要直接干到5万亿,胃口大得吓人。参数规模越大越需要海量数据,数据团队的整合就是第一步。过去文本、代码、视觉各搞各的数据,现在统一到一个部门管,减少重复造轮子。字节这次调整的核心逻辑就八个字:集中资源,减少overlaps。大模型竞赛到了拼工程化规模阶段,谁组织效率高、资源集中度高,谁就能更快训出更强的模型。字节这次动刀子动得对。
发布于 浙江
分享
评论
未登录
友善发言
image-upload
评论
加载中