Wonder Journey

Wonder Journey只需一张图片或一段文字描述就能创建3D场景动画，这是一个用于永久场景生成的模块化框架，由斯坦福大学和谷歌联手打造，是一项突破性项目。

Wonder Journey网址体验入口：https://kovenyu.com/wonderjourney

不同于之前的视图生成工作，专注于单一类型的场景，我们从用户提供的任何位置（通过文本描述或图像）开始，通过一系列不同但连贯的3D场景生成旅程。我们利用LLM生成这些场景的文本描述，采用文本驱动的点云生成管道来制作引人入胜且连贯的3D场景，每个场景都充满多样性且紧密相连，并使用大型VLM验证生成的场景。我们在各种场景类型和风格中展示了引人注目的、多样化的视觉效果，形成想象中的‘奇妙旅程’。

Wonder Journey的独特之处在于它可以从任何位置灵活启动，无论是图像还是文本描述。这开启了一场‘奇妙之旅’——一系列沿相机轨迹的3D场景，展示了多样化但相互关联的景观。

从任意位置（由文本或图像指定）开始，Wonder Journey生成一系列沿相机轨迹的多样化但连贯的3D场景（即‘奇妙之旅’）。我们使用来回的摄像机轨迹来渲染‘奇妙之旅’。

Wonder Journey可以合成长篇‘wonder journeys’。将鼠标悬停在视频上可暂停自动滑动。

从同一位置开始，Wonder Journey可以生成一系列多样化的‘奇妙之旅’，在不同的目的地结束。我们使用相机姿势的轨迹来渲染下面的每个视频。将鼠标悬停在视频上可暂停自动滑动。

Wonder Journey还可以生成受控的‘wonder journeys’，给定一系列文本描述，例如诗歌、俳句和故事摘要。将鼠标悬停在视频上可暂停自动滑动。此功能允许用户影响旅程的主题方向和进展，使其不仅成为探索的工具，也成为讲故事和艺术表达的工具。