书生·天际 3.0 开源发布:城市级实景三维大模型迈向VR新纪元
IT之家8 月 29 日消息,上海人工智能实验室联合多家机构研发的“书生·天际 3.0”实景三维大模型正式开源发布,标志着该模型在渲染效率、应用场景和VR体验方面取得了重大突破。
渲染提速,VR体验升级
书生·天际 3.0 的渲染效率较上一代模型提升了 5.84 倍,在室内场景中实现了 120FPS 的流畅表现,室外场景则能保持稳定的 72FPS。研究人员还提出了连续渲染静态重用技术,渲染精度较传统方法提升 36.93%,保证了成像流畅度。
更重要的是,书生·天际3.0 将应用方式拓展至 VR 设备,用户戴上 VR 眼镜,即可身临其境地探索名胜古迹、城市街景或博物馆,并对场景进行更直观、更自由的编辑。这一突破将为用户带来更沉浸式的虚拟体验,并为城市规划、文化遗产保护等领域提供新的应用场景。
全尺度场景建模,打造更真实立体空间
书生·天际 3.0 拥有了更全尺度场景的 3D 建模能力,可覆盖单个物体、室内布局及城市场景,面向更真实、立体的生活及生态空间呈现。这意味着该模型可以更精准地还原现实世界,为用户提供更逼真的虚拟体验。
双目去冗融合渲染技术,提升VR体验
研究人员还提出了首个针对 3D 高斯渲染的双目去冗融合渲染技术,在不增加额外算力的情况下可实现消除双目视差,进一步提升了 VR 体验的舒适度和真实感。
开源赋能,推动行业发展
书生·天际 3.0 的开源发布,将为学术界和产业界提供更强大的工具,推动实景三维大模型技术的发展和应用。开发者可以基于该模型进行二次开发,探索更多应用场景,例如:
- 城市规划与管理:利用书生·天际 3.0 建立城市三维模型,进行城市规划、交通管理、环境监测等方面的研究和应用。
- 文化遗产保护:将历史建筑、文物等数字化,进行虚拟展示和保护,让更多人了解和体验历史文化。
- 游戏与娱乐:利用书生·天际 3.0 建立虚拟场景,打造更逼真的游戏体验,为用户提供更沉浸式的娱乐体验。
- 教育与培训:利用书生·天际 3.0 建立虚拟课堂、博物馆等场景,为用户提供更直观的学习和培训体验。
书生·天际 3.0的开源发布,标志着实景三维大模型技术迈向新的发展阶段,将为各行各业带来更多可能性。相信未来,随着技术的不断发展,实景三维大模型将与我们的生活更加紧密地联系在一起,为我们带来更便捷、更智能的体验。
开源链接:
- 书生·天际算法代码:https://github.com/InternLandMark
- 书生·天际系统开源代码:https://github.com/InternLandMark/LandMarkSystem
【source】https://www.ithome.com/0/791/978.htm
Views: 4