Muse：微软推出的AI游戏生成模型，能生成连贯的游戏画面和动作

Muse 是什么？

Muse 是微软发布的首个专为游戏创意设计的生成式AI模型，基于大规模玩家数据训练，能够生成连贯、多样化的游戏视觉效果和控制器操作。它支持多模态生成，可快速生成游戏原型，助力开发者探索新玩法。微软开源了Muse的权重和样本数据，并提供WHAM Demonstrator供开发者实验，推动生成式AI在游戏行业的应用与发展。

Muse 的主要特性

高效生成游戏内容：Muse能够基于极少量的输入（如10帧游戏画面，相当于1秒的游戏视频）和控制器操作，生成连贯的游戏视觉效果和控制器动作。
强大的3D游戏世界理解能力：该模型经过大规模人类游戏数据训练（超过10亿张图片和手柄动作，相当于7年的人类游戏时长），能够深度理解游戏物理规则和玩家操作的反应。
高度一致性和多样性：Muse生成的游戏画面和玩法序列在一致性（保持游戏物理规则）和多样性（不同初始条件生成多种玩法）方面表现出色。
实时交互与创意支持：开发者可以通过WHAM Demonstrator界面和Xbox手柄实时控制角色，Muse会根据操作生成相应的后续内容，极大地拓展了创意空间。
开源与社区支持：微软开源了Muse的权重、样本数据和WHAM Demonstrator，供开发者在Azure AI Foundry上学习和实验，推动技术的广泛应用。
多学科合作与用户驱动设计：Muse由微软研究团队与Xbox Games Studios的Ninja Theory团队合作开发，从游戏创作者的需求出发，确保技术能够真正服务于游戏创意。

Muse 的应用场景

游戏创意与原型开发：Muse能够基于一张游戏截图或简短的初始画面，快速生成多个可能的后续游戏场景。开发者可以通过Xbox手柄实时控制角色，Muse会根据操作生成相应的后续内容，极大地提升了游戏创意构思和原型开发的效率。
经典游戏复活与优化：Muse可用于优化经典游戏，使其适应现代设备。通过分析大量老游戏数据，Muse能够提取游戏精华并提供优化建议，帮助经典游戏在新平台上顺利运行。
游戏测试与内容生成：Muse能够生成复杂的游戏玩法序列，支持开发者快速生成多样化的游戏场景和角色动作。这不仅有助于游戏测试，还能为游戏开发者提供丰富的创意灵感。
实时交互与创意支持：通过WHAM Demonstrator界面，开发者可以实时与Muse交互，探索不同的游戏创意。这种实时交互能力为游戏开发提供了更大的灵活性。