4月17日，上海人工智能實驗室（上海AI實驗室）升級并開源了通用多模態(tài)大模型書生·萬象3.0（InternVL3）。通過采用創(chuàng)新的多模態(tài)預(yù)訓(xùn)練和后訓(xùn)練方法，InternVL3多模態(tài)基礎(chǔ)能力全面提升，在專家級基準測試、多模態(tài)性能全面測試中，10億~780億參數(shù)的全量級版本在開源模型中性能均位列第一，同時大幅提升了圖形用戶界面（GUI）智能體、建筑場景圖紙理解、空間感知推理以及通識學(xué)科推理等方面的能力。
采購人為廣東省國土資源測繪院。
8月29日消息，據(jù)“書生 Intern”官方公眾號28日推文，書生 天際 3.0 實景三位大模型現(xiàn)已開源發(fā)布，渲染效率提速近6倍，同時將應(yīng)用方式拓展至VR設(shè)備。此前在去年7月，上海人工智能實驗室聯(lián)合多家機構(gòu)發(fā)布了書生 天際（LandMark）實景三維大模型，號稱首次實現(xiàn)城市級100平方公里全范圍實時渲染。據(jù)介紹，書生 天際 3.0 在 Web 端的基礎(chǔ)上，將應(yīng)用方式拓展至VR設(shè)備，用戶戴上VR眼鏡，既可在名勝古跡、城市街景或博物館中自由穿梭、探索，也可在重建的三維實景中對場景進行更直觀、更自由的編輯。此外，書生 天際 3.0 擁有了更全尺度場景的3D建模能力，可覆蓋單個物體、室內(nèi)布局及城市場景，面向更真實、立體的生活及生態(tài)空間呈現(xiàn)。
12個標項總中標金額為1595.170422萬元。
在7月6日召開的2023世界人工智能大會上，上海人工智能實驗室聯(lián)合香港中文大學(xué)、上海市測繪院發(fā)布城市級實景三維大模型“天際”，該大模型能夠?qū)?00平方公里范圍的城市實景進行高精度快速建模。據(jù)了解，天際大模型支持高精度實時渲染，具有城市實景三維模型編輯和風格轉(zhuǎn)換等功能。根據(jù)研發(fā)人員現(xiàn)場演示，觀眾可從任意角度查看城市實景三維模型，設(shè)置目標建筑相關(guān)參數(shù)，即可在三維模型中移除、移動或復(fù)制目標建筑。
在7月6日舉行的2023世界人工智能大會（WAIC 2023）開幕式和科學(xué)前沿全體會議上，上海人工智能實驗室（上海AI實驗室）聯(lián)合香港中文大學(xué)和上海市測繪院發(fā)布全球首個城市級NeRF實景三維大模型“書生·天際（LandMark）”（以下簡稱“書生·天際”）。書生·天際在大模型層面提出一種新的實景三維模型表征和訓(xùn)練范式，可以4K級圖像精度準確呈現(xiàn)大規(guī)模三維城市場景。在重構(gòu)出來的三維實景中，不僅具備包括移除、移動和新建城市建筑等城市布局的調(diào)整能力，還可以“上帝視角”調(diào)節(jié)光照、季節(jié)等城市風格。書生·天際已超越“城市重建”，突破性實現(xiàn)了“城市編輯”功能。未來，上海AI實驗室將對書生·天際的建模范圍和功能進行擴展，并對書生·天際的算法、算子和系統(tǒng)全部進行開源。