李飞飞联合创办的初创公司 World Labs 发布了一项创新的 AI 系统,这个系统能够从单张照片生成可互动的 3D 世界。该技术使生成 AI 从传统的 2D 图像拓展到了 3D 虚拟空间,使用户能够通过浏览器实时探索和修改 3D 世界。该公司已经获得了超过 2.3 亿美元的融资。
该系统能在浏览器中实时生成和渲染 3D 场景,提取 2D 图像中的深度、纹理和空间数据,创建可交互的三维环境。用户可以 “走进” 图片,探索其转换后的三维场景。与传统的静态内容技术不同,World Labs 的系统支持沉浸式互动体验,并遵循物理定律。
这项技术被应用于多个领域,如游戏、电影、建筑设计和教育。它使开发者能够快速、经济地创造互动场景,数字艺术家也可以利用该技术搭建场景并设计复杂的相机移动路径。
尽管目前技术面临着可探索区域有限和渲染错误等挑战,World Labs 正致力于提高生成世界的保真度和规模,并开发适用于更广泛用户的新功能。各行业的从业者开始考虑将这项技术纳入其创作以减少制作成本和缩短开发周期。
技术与现有 AI 和创作工具集成,形成了一个内容创作生态系统。特别是在教育和虚拟旅游领域,虚拟场景能够提供沉浸式学习和不出家门的世界名胜游览体验。