当前位置:首页 > 科技资讯 > 正文

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble

近日,斯坦福大学教授李飞飞的创业公司 World Labs 正式上线了其空间智能最新研究成果:Marble。这一平台的推出,标志着AI在三维世界构建方面的新进展。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第1张

虽然Marble已经上线,但目前它仍是一个限量访问的Beta测试版平台。用户可以在官网地址( marble.worldlabs.ai )浏览和创建3D世界。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第2张

李飞飞在社交媒体上表示:"这是使用我们的3D世界生成模型创建的一个极其庞大的世界。这让我惊叹不已!" 有网友已经迫不及待地问起了等待名单的时长,而专业人士也认为这是虚拟世界创建技术的一个惊人飞跃。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第3张

当被问及是否可以将Marble移植到VR中进行交互时,李飞飞回应称:“我们有VR按钮,只需在世界查看器里点击‘分享’即可。” 从技术角度来看,World Labs的目标是给AI一张照片,让它“脑补”出整个场景的几何结构,包括面部的平整度、物体间的空间关系、深度、光照等。

这包括估计场景中隐含的深度地图和几何边界,然后生成一个可以随时探索的3D世界。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第4张

Marble生成的世界是永久持续的,不会变形或不一致。相比之前的技术成果,现在的生成世界更大、风格更多样,三维几何结构也更清晰。

更贴心的是,在Marble里,创作者还可以将生成的世界导出为Gaussian splats,并应用在后续项目中。World Labs提供的开源渲染库Spark可以无缝整合Gaussian splats到Three.js中,用于搭建基于网页的3D体验,并且能在台式机、笔记本、移动设备和VR头显上高效运行。

有体验过的博主 @ilumine_ai 表示:“目前它是利用Gaussian Splatting(高斯溅射)生成3D世界的最佳工具。”看起来确实有两把刷子。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第5张

官方博客提供了多个可简单体验的演示场景,涵盖室内外各种环境类型。用户可以直接在网页端用W、A、S、D键进行移动,鼠标拖拽调整视角,自由探索这些AI生成的3D空间。

我试了几个空间,从室内场景到户外环境,立体感和细节还原度确实让人印象深刻。特别是光影效果和材质质感,比想象中要真实不少。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第6张

不过,目前Marble距离真正的商业化应用可能还有段距离。比如Marble目前专注于生成3D环境,还无法处理人物或动物,所以“自拍爱好者和萌宠主人”暂时要失望了。而且虽然能生成“房间大小”的世界,但要构建真正的大型游戏场景,可能还需要更多技术突破。

但好歹已经迈出了第一步,这就值得肯定。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第7张

至少得益于模型在风格统一性和几何一致性上的提升,现在用户已经可以在这些大场景中畅快地导航、浏览,并体验更多应用场景。而这种视觉上的震撼,或许正是李飞飞想要证明的观点。

她曾经这样吐槽:“自然界中并不存在语言。你走进大自然,不会看到天空中写着文字……真正存在的是一个遵循物理规律的三维世界。语言完全是一种生成的信号。”

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第8张

或许在她看来,文字AI再厉害,也只是在“纸上谈兵”,真正的AI应该能理解和创造三维空间。按照李飞飞的说法,空间智能已经能让我们“生成并重建无限的宇宙,用于创造、旅行、叙事,甚至社交”,甚至“让我们能够以多元宇宙的方式生活”。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第9张

某种程度上,Marble里的空间给我的感觉更像是一款游戏,其出现的时机也正好赶上了“AI游戏”这个赛道的集体发力期。

马斯克此前也在社交媒体上宣布,xAI将正式成立一个AI游戏工作室,重申要让游戏再次伟大,而真正意义上的AI视频游戏预计将在明年出现。

无论是Runway跨界搞的AI游戏平台Game Worlds,让用户创建非线性叙事游戏;还是李飞飞的Marble,整个AI游戏生态链似乎正在快速成型。

Stanford教授李飞飞新创公司World Labs,推出AI生成3D世界平台Marble Marble World Labs AI生成 3D世界 第10张

方向或许各有侧重,但都指向同一个未来:让普通人也能轻松创建复杂的虚拟世界和游戏体验。

我们这一代算是第一批“AI原住民”了。现在看来,AI不只是用来做作业、聊天、修图,很快就要开始用AI创造属于自己的虚拟世界了。想体验更多细节,赶紧去注册排队吧!

附上博客地址:

https://www.worldlabs.ai/blog/bigger-better-worlds