智源社区 23小时前
刚刚,谷歌摊牌:Genie 3让你1秒「进入」名画,人人可造交互世界!
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

谷歌最新发布的Genie 3世界模型展示了AI的强大能力,它不仅能根据文本生成交互式的AI空间世界,还能操控图像和视频,让用户“穿越”到世界名画中身临其境地体验艺术与历史。例如,用户可以进入雅克-路易·大卫的《苏格拉底之死》或爱德华·霍普的《夜游者》,在画中自由移动和观察。前谷歌XR团队成员Bilawal Sidhu还利用Genie 3成功训练出3D高斯溅射模型,实现了高效的辐射场渲染和沉浸式探索。这一技术革新不仅提升了艺术鉴赏的深度,也预示着虚拟世界的无限可能。

🌟 Genie 3突破性地实现了AI对图像和视频的操控,能够生成可交互的3D空间世界,让用户能够“进入”世界名画,如《苏格拉底之死》和《夜游者》,获得前所未有的沉浸式艺术体验,深刻感受艺术作品所传达的历史、哲学和情感内涵。

💡 Genie 3的技术可以与3D重建技术结合,例如通过生成可导航的3D世界,再结合内绘、超分辨率处理等步骤,可以训练出3D高斯溅射模型,实现高效的辐射场渲染,让用户在虚拟空间中进行更真实的探索和交互。

🌐 除了艺术领域的应用,Genie 3还可以被视为一种强大的游戏化工具,能够创造出自由度极高的虚拟环境,让用户能够操控角色(如狗狗)在沙滩上奔跑,随意切换视角,体验虚拟世界的乐趣和创造力。

🚀 Genie 3的出现引发了对未来虚拟世界发展的畅想,有网友预测,在未来5-10年内,每个人都可能拥有自己的虚拟世界,而“全息模拟舱”等概念也正逐渐成为现实,预示着人机交互和虚拟体验的巨大进步。

编辑:犀牛
谷歌摊牌了,彻底不装了!

他们前几天刚刚发布的Genie 3世界模型,正在疯狂展示AI的超能力。

它不只是能从文本中生成交互式的AI空间世界,还能操控图像和视频。

比如,你现在可以进入到世界名画中去,随意的在其中移动、观察。

这种身临其境的现场感,对于喜欢艺术的同学不要太爽。

有网友就用Genie 3进入到了Jacques Louis David的名画《苏格拉底之死》。

这幅1787年的油画是新古典主义的代表作,现藏于纽约大都会艺术博物馆。

画的是苏格拉底被判喝毒芹的那一刻:他还在讲道理、伸手接杯子,学生们有人哭成一片,柏拉图则安静坐旁边。

画面干净利落、光影强烈,把「为理性而死」的硬核形象画得很震撼。

以前,我们只能在二维平面前安静地欣赏大师的杰作。

现在,有了Genie 3的帮助,我们有机会1秒钟回到两千四百多年前,目睹苏格拉底饮下毒芹。

轻轻按下按键,就能穿行其中,更加沉浸地去体会艺术、历史与哲学。

这不仅是AI的超能力,更是其存在的意义——更好地成就、提升人们!

前谷歌XR、地图团队成员Bilawal Sidhu甚至还利用Genie 3的生成,成功训练出了3D高斯溅射(Gaussian Splat)模型。

具体的过程大概是:

    Genie 3从图像(如油画)生成可互动的动态3D世界,支持实时导航和多视角渲染。

    然后,进行内绘(移除UI元素)和放大处理(使用Topaz AI提升4倍超分辨率)。

    最后,利用这些处理后的图像训练3D高斯溅射(Gaussian Splat)模型,实现高效的辐射场渲染和沉浸式探索。

除了高斯溅射模型,Bilawal Sidhu还尝试了通过经典的摄影测量流程处理,以提取一个带纹理的3D网格,可以将其导入到任何3D工具中。

效果虽然不如高斯溅射来的优雅,不过依然可用。

最后,Bilawal Sidhu还贴心地将两个模型的链接分享了出来,让大家都可以进去体验。

相当nice👍

高斯溅射:https://superspl.at/view?id=e05e5eb7

摄影测量技术:https://sketchfab.com/3d-models/socrates-painting-genie-3-to-textured-3d-mesh-147645d6cc2c4d8c86d23a73f3215b8a

另一个震撼人心的例子是进入到Edward Hopper的《夜游者》。

这是一幅1942年完成的油画,现藏芝加哥艺术学院。

画面是深夜街角的一家餐馆:亮白灯光、玻璃窗内三位顾客与店员,外面空无一人、几乎看不见门。

它是美国现实主义的标志品,被电影、广告与摄影不断致敬,几乎成了「现代城市深夜感」的代名词。

通过Genie 3进入到画中,仿佛你自己就成了那个「夜游者」。

街道上空无一人,孤独、寒冷更加真实地扑面而来。

当然,除了进入名画之外,你还可以把它当作一个游戏来玩。

比如,像下面这种,操控一只狗狗在沙滩上奔跑。

可以随时切换视角,就是那种自由的感觉。


网友热评

网友Hasan感叹道,只需5-10年,我们每个人都会进入到自己的虚拟世界中去。

网友eter Dedene表示同意,他说「全息模拟舱」这种概念正在变成现实。

参考资料:
https://x.com/minchoi/status/1954200428482097249
https://x.com/bilawalsidhu/status/1954229425199034753


内容中包含的图片若涉及版权问题,请及时与我们联系删除

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

谷歌Genie 3 AI艺术 3D高斯溅射 沉浸式体验 虚拟世界
相关文章