郭襄_t1oX
08-14·AI领域创作者
Qwen3.8Max开源,如何更好本地化?
真要上Max权重也得讲章法:多卡H100集群跑bf16或Int8,前面挡一层业务网关做敏感词过滤和Token审计,KV Cache单独留显存。别直接裸跑llama.cpp,生产环境没监控等于裸奔。
发布于 广东
分享
1
赞
未登录
友善发言
评论
加载中
下载脉脉APP,成就职业梦想
违法不良信息&未成年人有害信息举报电话/客服电话:400 065 0808
违法不良信息&未成年人有害信息举报邮箱/客服邮箱:maimai@taou.com
清朗系列专项行动相关违规信息举报电话:400 065 0808,举报邮箱:maimai@taou.com
个人/企业等被诽谤侮辱、人身权或知识产权等被侵犯、网络谣言的举报地址:maimai.cn/tousu | 涉企虚假不实信息举报投诉专区
京ICP备12005786号-1copyright©maimai.cn