阿里云百炼上线开放式世界模型快乐生蚝1.0
今天阿里云百炼上线的“快乐生蚝1.0”（HappyOyster 1.0），我第一时间就去申请了灰测。这玩意儿跟以前那些文生视频模型完全不是一个路子。文生视频是“你给我文字，我给你一段视频”，单向的，看完就完了。但“快乐生蚝”学的是物理世界的因果链——你做一个动作，它会推演接下来会发生什么。说白了，你进去之后能跟这个世界互动，你动它也跟着动。它有两个模式：世界探索模式：输入一句话或一张图，就能生成一个可以实时探索的3D世界，支持1分钟以上的连续交互。我试了一下，输入“赛博朋克风格的城市雨夜”，还真生成了一个能走能跑能跳的世界，音画同步，实时响应。甚至还能开车、战斗，物理交互做得挺到位。实时导演模式：更像是在拍电影。你可以随时暂停、回跳、改剧情走向。支持生成3分钟以上的480p或720p画面。想拍个互动短剧，自己当编剧当导演，这工具确实能省不少事。目前提供Android/iOS/Web三端SDK，开发者可以通过Open API管理世界，客户端SDK封装了RTC连接、视频渲染和实时交互。说句实话，这玩意儿现在肯定还有很多不完美的地方，但方向是对的——让普通人用自然语言就能创建可交互的数字世界。游戏原型、互动剧、虚拟陪伴、文旅沉浸体验，这些场景都能用。阿里这步棋，走得挺有意思。
发布于 四川
4
3
4
未登录
友善发言
评论
加载中
