# 视觉一致性

Unbounded是一个创新的无限游戏，它超越了传统有限、硬编码系统的限制，通过使用生成模型来实现。这款游戏受到James P. Carse关于有限与无限游戏之间区别的启发，利用最新的生成AI技术，创建了一个完全由生成模型封装的角色生活模拟游戏。Unbounded从沙盒生活模拟中汲取灵感，允许玩家通过自然语言指令与自主虚拟角色在虚拟世界中互动，包括喂养、玩耍和引导角色，同时由大型语言模型（LLM）生成的开放式机制，其中一些可能是新兴的。为了开发Unbounded，提出了在LLM和视觉生成领域的技术创新，包括一个专门化的、蒸馏的大型语言模型，用于实时动态生成游戏机制、叙事和角色互动，以及一个新的动态区域图像提示适配器（IP-Adapter），用于确保角色在多个环境中的视觉生成一致但灵活。

FontStudio是一个创新的字体效果生成模型，它利用自适应扩散技术，能够在不规则的字体形状画布上生成连贯一致的视觉内容。这项技术突破了传统矩形画布的限制，为多语言字体设计提供了新的解决方案。FontStudio系统在用户偏好研究中显示出明显的优势，甚至在与Adobe Firefly等顶尖商业产品比较时，也获得了78%的美学胜出率。

FLATTEN是一种用于文本到视频编辑的光流引导注意力插件。它通过在扩散模型的U-Net中引入光流来解决文本到视频编辑中的一致性问题。FLATTEN通过强制在不同帧上的相同光流路径上的补丁在注意模块中相互关注，从而提高了编辑视频的视觉一致性。此外，FLATTEN是无需训练的，可以无缝集成到任何基于扩散的文本到视频编辑方法中，并提高其视觉一致性。实验结果表明，我们提出的方法在现有的文本到视频编辑基准上取得了最新的性能。特别是，我们的方法在保持编辑视频的视觉一致性方面表现出色。