Oasis – Decart联合Etched推出首个实时生成交互式视频内容的AI模型 | AI工具集

Oasis是什么

Oasis是Decart和Etched合作推出的革命性AI技术，是世界上首个实时AI世界模型，能以每秒20帧的速度实时生成交互式视频内容，无延迟。Oasis开启“生成式交互体验”的新纪元，支持用户基于文字或语音命令控制游戏进程，为数字内容消费和娱乐方式带来无限可能。Oasis展示了AI在物理理解方面的能力，玩家能在游戏中进行移动、跳跃、建造和破坏等操作。Oasis预示着由AI驱动的个性化内容新时代的到来，对游戏、教育、娱乐和社交等多个领域产生深远影响。

Oasis的主要功能

• 实时视频内容生成：Oasis能以每秒20帧的速度实时生成交互式视频内容，提供流畅的游戏体验。
• 交互式控制：用户基于键盘和鼠标输入，甚至文字或语音命令控制游戏进程，实现高度互动。
• 物理世界模拟：Oasis展示物理理解能力，支持玩家在游戏中进行移动、跳跃、建造和破坏等操作，模拟真实世界的物理规则。
• 开放世界探索：作为开放世界游戏，Oasis支持玩家自由探索全新生成的地图和环境。
• 内容个性化：基于AI模型，Oasis能根据用户的喜好和行为即时创建个性化内容。

Oasis的技术原理

• 模型架构：Oasis基于Transformer的模型架构，包括Diffusion Transformer骨干网络和Transformer-based autoencoder，是专为快速自回归交互式视频生成而设计的。
• 低延迟设计：Decart团队推出能实现低动作到帧延迟的模型架构，系统能快速响应玩家的输入。
• 硬件优化：Oasis针对特定的GPU和服务器硬件架构进行专有系统优化，实现更高效的性能。
• Sohu芯片：Oasis将在Sohu芯片上运行，是Etched即将推出的专为处理大规模视频模型而设计的ASIC（专用集成电路），能支持4K分辨率下运行超过1000亿参数的模型。

Oasis的项目地址

Oasis的应用场景

• 视频游戏：提供全新的游戏体验和无限可能的游戏环境。
• 教育和培训：创造模拟环境进行技能培训和提供互动式学习体验。
• 虚拟旅游和探索：支持用户探索虚拟世界和提供安全的探险体验。
• 电影和娱乐：实时生成电影场景和创建互动式电影。
• 社交互动：开发虚拟社交平台和提供增强现实社交体验。