TL;DR:
AI教母李飞飞这次又“放大招”了!她家World Labs发布的Marble,能让你“一张图入魂”,秒变3D世界建造师。以前AI只能“纸上谈兵”,现在直接带你“沉浸式体验”空间智能的魅力,元宇宙、AI游戏什么的,这不是要起飞了?!
今天凌晨,当大家还在梦里和周公下棋的时候,AI界的一位“顶流”——斯坦福大学教授李飞飞,带着她的创业公司World Labs,悄悄放了个“王炸”!1 他们的空间智能最新成果,代号“Marble”,正式上线了!
这消息一出,整个科技圈都“炸”了锅。毕竟,李飞飞这名字,在AI界那可是响当当的“金字招牌”。这次她不玩虚的,直接让AI把一张平平无奇的图片,“脑补”成一个可探索、可互动的3D世界。听起来是不是有点玄幻?别急,我们这就来盘一盘。
Marble目前还是个限量访问的Beta测试版,有点“上线了,但没完全上线”那味儿。1 不过,已经有幸拿到“船票”的网友们,都快把“惊艳”俩字儿刻在公屏上了。李飞飞本人在社交媒体上都忍不住感叹:
“这是使用我们的3D世界生成模型创建的一个极其庞大的世界。这让我惊叹不已!”1
甚至连那些“整个职业生涯都在创造虚拟世界”的专业大佬们,也直呼这是“惊人的飞跃”。这下好了,等候名单估计要排到“天荒地老”了吧。
技术大揭秘:黑科技到底“黑”在哪儿?
那么问题来了,Marble到底用了什么“黑科技”,能把一张2D图片变成活灵活现的3D世界?
简单来说,World Labs给AI扔一张照片,AI就能立马变身“福尔摩斯”,开始“脑补”整个场景的几何结构:哪里是平的,哪里是凹凸不平的;物体之间是怎么排列的;光线从哪儿来,材质是硬是软……它会像个经验丰富的老司机一样,估算出场景里“隐藏款”的深度地图和几何边界,然后生成一个你能随意“溜达”的3D世界。1
而且,这个世界可不是那种“豆腐渣工程”,它永久持续,不会变形,更不会出现前后不一致的“穿帮”镜头。相比以前的技术,Marble生成的世界更大、风格更多变,三维几何结构也清晰得让人“爷青回”。
这里不得不提一个“硬核”技术——Gaussian Splatting(高斯溅射)。简单讲,它不是传统那种用多边形来建模3D物体的方法,而是把3D空间里的物体想象成无数个带有颜色、透明度等属性的“小点点”(高斯球)。这些小点点可以非常高效地渲染出高质量的3D场景。12 用体验过的大佬@ilumine_ai的话说,Marble就是目前利用Gaussian Splatting生成3D世界的“最佳工具”,看起来确实“有两把刷子”。1
更“贴心”的是,Marble还支持将这些生成的3D世界导出为Gaussian splats,方便你在其他项目里继续“骚操作”。而且,World Labs开源的渲染库Spark,能让Gaussian splats无缝接入Three.js,这意味着你可以在网页端、VR头显上,甚至手机上,都能丝滑地体验这些AI生成的3D空间。12
我们亲测了一下官方提供的几个演示场景(强烈建议大家去试试,官网:marble.worldlabs.ai),用键盘的W、A、S、D键就能在网页里“逛街”,就像玩第一人称游戏一样自由。从室内小咖啡馆到户外大花园,立体感和细节还原度真的让人“哇塞”。特别是光影效果和材质质感,比想象中真实太多了,感觉AI是真的把“眼睛”和“脑子”都装上了!1
李飞飞的“三维野心”:为何要颠覆“纸上谈兵”?
看到这里,你可能会好奇,为啥李飞飞要“死磕”3D世界生成?
其实,作为AI赛道的“先行者”,李飞飞对现在大火的“语言大模型”早就颇有微词。她曾“吐槽”过:
“自然界中并不存在语言。你走进大自然,不会看到天空中写着文字……真正存在的是一个遵循物理规律的三维世界。语言完全是一种生成的信号。”1
在她看来,光会“聊天”的文字AI,再厉害也只是在“纸上谈兵”。真正的AI,应该能理解并创造我们所处的三维物理世界,这才是“空间智能”的终极奥义。用她的话说,空间智能能让我们“生成并重建无限的宇宙,用于创造、旅行、叙事,甚至社交”,甚至达到“以多元宇宙的方式生活”的境界。1
这简直就是把“元宇宙”的饼,从文字层面直接升级到了视觉和空间层面,而且还是AI亲手“烙”的,想想就有点小激动呢!
AI游戏大爆发:未来,“打工人”都能做游戏?
Marble的出现,也恰好赶上了“AI游戏”这个赛道的集体“发力期”。
马斯克前不久也高调宣布xAI要成立AI游戏工作室,誓要“让游戏再次伟大”1。想想看,Runway在搞AI游戏平台Game Worlds,把AI陪聊升级成有剧情的交互游戏;现在李飞飞的Marble又提供了强大的3D世界生成能力。这整个AI游戏生态链,简直就像被按下了“快进键”,正在光速成型!
这意味着什么?可能很快,我们这些“AI原住民”,不只是用AI写作业、聊天、修图了,而是可以直接用AI来创造属于自己的虚拟世界和游戏体验。普通人也能轻松“搓”出一个复杂的虚拟场景,甚至是一整个游戏。这简直是游戏开发者的“福音”,也是所有“梦想家”的“狂欢”!
展望:星辰大海,路还很长?
当然,Marble虽然“牛掰”,但距离真正的商业化应用,可能还有一段“小小的”距离。
比如,它目前只专注于生成3D环境,对于人物或动物这种“活物”,它暂时还搞不定。所以那些想在AI世界里“自拍”或者给“萌宠”造家的朋友们,可能要再等等了。1 虽然能生成“房间大小”的世界,但要构建那种动辄几十上百平方公里的大型游戏地图,可能还需要更多技术上的突破。
但俗话说得好,“罗马不是一天建成的”。至少,Marble在风格统一性和几何一致性上的巨大提升,已经让用户可以在这些宏大的AI世界里畅快“导航”了。这第一步迈得如此扎实,未来可期啊!
所以,如果你也想体验一下AI亲手“编织”的3D世界,不妨去官网注册排个队,说不定你就是下一个在虚拟世界里“创业”的AI原住民呢!