當前位置: 華文世界 > 科技

書生·天際3.0實景三維大模型開源釋出:渲染效率提速近6倍

2024-08-30科技

IT之家 8 月 29 日訊息,據「書生 Intern」官方公眾號 28 日推文,書生天際 3.0 實景三位大模型現已開源釋出,渲染效率提速近 6 倍,同時將套用方式拓展至 VR 裝置。

此前在去年 7 月,上海人工智慧實驗室聯合多家機構釋出了書生天際(LandMark)實景三維大模型,號稱首次實作 城市級 100 平方公裏全範圍即時渲染

據介紹,書生天際 3.0 在 Web 端的基礎上,將套用方式拓展至 VR 裝置,使用者戴上 VR 眼鏡,既可在名勝古跡、城市模組屋或博物館中自由穿梭、探索,也可在重建的三維實景中對場景進行更直觀、更自由的編輯。

此外,書生天際 3.0 擁有了更全尺度場景的 3D 建模能力,可覆蓋 單個物體、室內布局及城市場景 ,面向更真實、立體的生活及生態空間呈現。

渲染效率方面,書生天際 3.0 相比於上一代模型提升了 5.84 倍。面對不同尺度場景對即時渲染算力需求的區別,結合算力需求與硬體效能,可對計算資源進行彈性排程。

此外,研究人員還提出了連續渲染靜態重用技術,渲染精度較傳統方法提升 36.93%,保證了成像流暢度。在書生天際 3.0 中, 室內場景中實作 120FPS 的流暢表現,在室外場景中則能保持穩定的 72FPS

研究人員同時也提出第一個針對 3D 高斯(3D Gaussian)渲染的雙目去冗融合渲染技術,在不增加額外算力的情況下可實作消除雙目視差 。

IT之家附開源連結如下:

書生天際演算法程式碼:

  • https://github.com/InternLandMark

  • 書生天際系統開原始碼:

  • https://github.com/InternLandMark/LandMarkSystem