章淼
08-07 · 北京瑛菲网络科技有限公司创始人兼ceo
瑛菲AI网关 v0.3.0 正式发布
瑛菲AI网关 v0.3.0 正式发布:三级加权路由,让 AI 流量调度更精细近日,瑛菲AI网关正式开源发布 v0.3.0 版本。在 v0.3.0 中,我们聚焦企业级 AI 流量治理中"流量该往哪里走"这一核心命题,重磅推出 按 API-Key / 组织实体(Entity)/ 全局 的三级加权路由能力,并统一升级为全新的 Route Table(路由表) 管理体系。配合 BFE v1.8.4 新增的 mod_ai_route 模块,企业在多模型、多集群、多租户场景下的流量调度将更加灵活、可控。详情见 https://taou.cn/a/ig2xBr
发布于 北京
分享
1
1
未登录
友善发言
image-upload
评论
加载中