大厂职场观察者
07-08·测试·5年+
ICML 新算法落地业务上手难度高吗?
清华UDS:省一半算力,但你的数据管道扛得住吗?清华UDS搞了个在线样本筛选,训练时自动挑高价值样本,SFT算力直接腰斩。原理不复杂——用前向传播的logits同时评估样本“有没有用”和“够不够多样”。但落地呢?你的训练框架支持在线动态batch选择吗?主流分布式训练代码能无缝接入这个逻辑吗?改造数据管道的成本,省下来的算力够不够填?UDS不依赖验证集和参考模型确实友好,但工程适配永远是道坎。
发布于 北京
分享
评论
未登录
友善发言
image-upload
评论
加载中