Oasis - Decart联合Etched推出首款AI实时生成的游戏系统
发布于 2024-11-01 · Oasis是世界上首款AI实时生成的游戏,由Decart和Etched联合推出。游戏能以每秒20帧的速度实时渲染交互式视频内容,无需游戏引擎,通过AI模型直接生成。玩家可以自由移动、跳跃、拾取物品,体验由AI实时塑造的游戏世界。
Oasis是什么
Oasis 是世界上首款 AI 实时生成的游戏,由 Decart 和 Etched 联合推出。游戏以每秒 20 帧的速度实时渲染交互式视频内容,不用游戏引擎,画面由 AI 模型直接生成。玩家可以自由移动、跳跃、拾取物品,游戏世界由 AI 现场塑造。Oasis 基于 Transformer 架构,配合 ViT 和 DiT 技术,把实时互动的延迟压到很低。代码和模型权重都已开源,社区的贡献和技术创新能持续接进来。Oasis 的出现,也预示着 AI 个性化内容的一个新时代开始了。
Oasis的主要功能
- 实时内容生成:Oasis 能根据玩家的键盘输入实时生成游戏画面,玩家什么动作,游戏世界就即时回应什么。
- 自由探索与互动:玩家可以在 Oasis 里自由移动、跳跃、打破或建造方块,探索每次都是新生成的地图世界,互动性和探索自由度都给得很足。
- 无需游戏引擎:Oasis 不依赖传统游戏引擎,改用 AI 基座模型生成游戏内容,开发的复杂性降下来了,内容创造也多了条新路。
- 物理规则和游戏机制的内建理解:Oasis 表现出对物理原则和游戏规则的理解,生成的内容里既有图形渲染,也有对游戏逻辑的模拟。
- 高帧率渲染:每秒 20 帧的实时渲染,玩起来比较流畅。
- 开放世界体验:开放世界里能碰到海岸、村庄、森林、沙漠等各种地形。
- 基于玩家输入的动态调整:游戏世界会按玩家输入动态调整,游戏体验更个性化。
- 硬件优化:Oasis 针对特定硬件(如 Etched 的 Sohu 芯片)做了优化,性能和用户体验都能再上一层。
- 交互式视频内容:游戏生成静态图像、生成交互式视频内容,给视频游戏领域带来了新的可能性。
Oasis的技术原理
- 模型架构:Oasis 的模型架构基于 Transformer,包含 Diffusion Transformer 骨干网络和 Transformer-based autoencoder,专门为快速的自回归交互式视频生成设计。
- 低延迟设计:Decart 团队做出了低动作到帧延迟的模型架构,系统响应玩家输入很快。
- 硬件优化:Oasis 针对特定的 GPU 和服务器硬件架构做专有系统优化,性能跑得更高效。
- Sohu芯片:Oasis 将在 Sohu 芯片上运行。Sohu 是 Etched 即将推出的 ASIC(专用集成电路),专为处理大规模视频模型设计,能在 4K 分辨率下运行超过 1000亿参数的模型。
Oasis的项目地址
- 项目官网:oasis-model.github.io
- GitHub仓库:https://github.com/etched-ai/open-oasis
- HuggingFace模型库:https://huggingface.co/Etched/oasis-500m
- 在线体验Demo:http://oasis.decart.ai
Oasis的应用场景
- 视频游戏:提供全新的游戏体验,游戏环境也几乎不受限制。
- 教育和培训:可以造模拟环境做技能培训,也能提供互动式的学习体验。
- 虚拟旅游和探索:用户可以探索虚拟世界,还能拿到安全的探险体验。
- 电影和娱乐:电影场景可以实时生成,互动式电影也做得出来。
- 社交互动:可以做虚拟社交平台,也能提供增强现实的社交体验。






0 条评论
暂无评论,来抢沙发。