现在编辑器中可以使用 Unity Muse 的所有功能,另外还有 3 项新更新

我们很高兴地宣布,Unity Muse用户现在可以直接在Unity 编辑器中使用 Muse 的全部五项功能。通过将人工智能功能带到您的创作中,您现在可以更轻松、更方便地使用 Muse 来补充您的创作流程并简化开发过程。
您可能已经熟悉了用于创建原始 2D 资产的 Muse Sprite 和最近改进的用于为 3D 物体创建大量独特纹理的 Muse纹理生成器,这次更新带来了三项令人兴奋的改进:
- 新的编辑器集成版 Muse Chat 可提供项目感知回复。
- 现在,所有用户都可以使用 Muse Animate 在项目上下文中创建动画。
- 现在,任何使用 Muse 的人都可以使用由 LLM 支持的 Muse Behavior,通过直观的人工智能辅助界面来设置角色互动。
去年 Muse 推出后,我们就如何继续改进聊天体验征求了反馈意见。我们听到的是一种强烈的愿望,那就是能够在不离开编辑器的情况下排除故障。我们收到的反馈意见是,Muse 聊天室最好能自动了解项目的更多细节,以减少提供上下文所花费的时间,并更快地获得更相关的答案。我们听到了您的反馈,非常高兴地宣布 Muse Chat 现在可以作为编辑器内软件包使用。这一更新也为提供项目感知响应奠定了基础。Muse Chat 现在可以检索项目的关键详细信息,包括 Unity 版本、活动渲染管道、使用的输入系统、目标平台、API 兼容性和其他项目设置。

此更新将简化故障排除问题的一个例子就是解决控制台错误。出现错误时,您现在可以点击它,然后询问 "如何修复这个错误?Muse 会自动检索导致问题的原因,并提供解决问题的建议。
Muse Chat 还将一如既往地提供可用脚本,您可以即插即用。随着时间的推移,Muse Chat 将继续发展,成为一个更加智能的聊天助手,可以提供量身定制的答案和信息、代码片段,并与编辑器进行更智能的集成。
动画制作是一门复杂的工艺。在开发的后期阶段,尽早设计出能够与游戏机制相结合的基本动作原型,可以节省大量时间。Muse Animate 是帮助您通过自然语言快速生成仿人动画的完美工具。
与 Muse Chat 的反馈类似,我们也普遍听到 Muse Animate 需要更深入地集成到编辑器中。根据这些反响,我们推出了新的编辑器内 Muse Animate 预发布包,所有 Muse 用户均可使用。有了这个新版本,您可以直接在 Unity 编辑器中创建Unity 动画剪辑,并轻松地将其重新定位到使用Unity Humanoid Rigging 的角色上。

您还可以使用 Muse 编辑生成的动画,方法是选择一个动画,将其分解为多个姿势。在这里,你可以选择效果器(人物某些关节上的橙色小点)来更精细地调整动作。Muse Animate 会处理您的更改并重新生成动画。该软件包还提供额外的编辑功能,例如外推摆姿势、循环至第一个姿势和过渡持续时间。
在这个版本中,我们还将积极改进现有的人工智能动画模型,并引入生成和修改动画的新方法,包括根据草图或视频创建动画的功能。
我们收到了很多关于内置行为树的请求,它可以让您通过 NPC 交互能力让游戏角色栩栩如生。去年,我们启动了 Muse 行为功能的封闭式预发布,该功能是我们对 LLM 驱动的决策树的改进,允许您在易于使用的工作流程中为角色和对象创建自定义逻辑。这套功能还包括生成能力,可帮助您建立更复杂的交互。
现在,所有 Muse 用户都可以使用带有 LLM 功能的 Muse Behavior 预发布软件包。我们对该软件包进行了设计和改进,使其使用更方便,编辑更直观。与经典的行为树模型一样,Muse Behavior 由节点和分支组成,这些节点和分支都是人类可读的,让你可以创建像故事一样的表现形式。

节点故事中的词语被标记为节点内部逻辑使用的输入。然后,这些单词会自动转换成字段,这样你就可以直接将数据嵌入到节点中。想让您的角色说话吗?添加对话节点,提供词语,就这样,你的角色就能通过玩家的互动触发对话。
Muse Behavior 还包含一个黑板,其中的变量可在整个图形的节点中重复使用。只需点击字段的链接按钮,然后从可分配选项菜单中选择即可。黑板中的变量可以在代码中赋值,也可以通过检查器窗口中的行为图代理组件赋值。这种设置和复制可重复操作的能力,使创建复杂和重复的交互变得更快、更容易。

有了 Muse Behavior,您就可以创建自定义操作,从而控制行为树的高级结构和叙述。如果你是创建行为树的新手,也不用担心,节点向导会一步步指导你创建新的操作类型并添加到图形中。 您还可以使用 LLM 功能自动生成行为树。随着我们对 Muse Behavior 的不断改进,您可以期待更多的生成功能,以进一步简化复杂的行为树设置。

这些新软件包和改进仅仅是个开始。我们将继续在 Muse Texture 等现有功能上进行创新,利用新的原创研究和专有模型为 3D 物体生成真正的 PBR 材质。这意味着你可以制作多材质 UV 纹理,直接包裹在物体上,而且对光照的反应更加精确。

我们也深知音频对场景设置的重要性,因此今年晚些时候,我们将发布 Muse Sound,让您可以制作人工智能生成的提示音效果,如移动和环境声音。
在 GDC 上,我们展示了如何在URP 示例项目的花园场景中同时使用 Muse 的所有五种功能来定制游戏循环。查看我们的会议Unity Muse:使用 AI 加速 Unity 编辑器中的原型开发了解如何使用 Muse 的所有功能快速定制项目场景和游戏玩法。
我们更新了 Muse 的入职体验,让您更轻松地开始免费试用Muse 并将 Muse 软件包添加到您的项目中。请访问新的Muse Explore 页面开始使用,并告诉我们您对讨论区最新功能和改进的看法。
