中國世界青年峰會與商湯科技、增強(qiáng)現(xiàn)實核心技術(shù)產(chǎn)業(yè)聯(lián)盟(CARA)聯(lián)合發(fā)布了《元宇宙“破壁人”:做虛實融合世界的賦能者》白皮書。
當(dāng)前,元宇宙概念熱火朝天,市場呈現(xiàn)千軍萬馬競逐趨勢,商湯科技也不甘落后。
《白皮書》指出,雖然業(yè)內(nèi)對元宇宙并沒有一個統(tǒng)一的定義,但普遍認(rèn)為元宇宙應(yīng)同時具備“沉浸感、開放性、隨時隨地,以及經(jīng)濟(jì)系統(tǒng)”四大基礎(chǔ)共性。
《白皮書》的觀點(diǎn)認(rèn)為,元宇宙不只是獨(dú)立且平行的虛擬世界,它的意義和價值還在于與真實世界的連接和交互,并賦能實體經(jīng)濟(jì)的發(fā)展,提高人們的生活體驗。
不是要讓經(jīng)濟(jì)脫實向虛,而是要虛實結(jié)合,去盤活經(jīng)濟(jì)的存量價值,創(chuàng)造經(jīng)濟(jì)的增量價值,讓我們的生活變得更充實、更美好,這才是我們發(fā)展元宇宙產(chǎn)業(yè)的最終目標(biāo)。否則它的意義只是一款游戲,或者說只是一個APP。
此前,商湯I(xiàn)PO招股書中稱,“SenseME、SenseMARS等業(yè)務(wù)已讓公司成為最大的元宇宙賦能平臺之一,SenseMARS軟件平臺內(nèi)含3500個人工智能模型,支持感知智能及混合與增強(qiáng)現(xiàn)實系統(tǒng)(MARS),創(chuàng)造了全新的元宇宙體驗。”
IPO聆訊資料顯示,商湯計劃持續(xù)開發(fā)與推進(jìn)元宇宙相關(guān)服務(wù)的商業(yè)化,繼續(xù)提升SenseMARS上人工智能、增強(qiáng)現(xiàn)實和混合現(xiàn)實的功能和能力,夯實客戶基礎(chǔ),建立更完整的研發(fā)生態(tài),以鞏固公司在元宇宙領(lǐng)域的領(lǐng)先地位。
【SenseCore商湯AI大裝置:打造融合元宇宙的生產(chǎn)力底座】
元宇宙將是一個復(fù)雜巨系統(tǒng),不僅表現(xiàn)為超高并發(fā)的數(shù)據(jù)體量,由于信息維度的升級,信息復(fù)雜度也將呈現(xiàn)指數(shù)級上升,遠(yuǎn)遠(yuǎn)超出人腦計算極限。
如何高效的處理高并發(fā)且復(fù)雜度極高的信息資源,并使得處理的結(jié)果能夠進(jìn)一步指導(dǎo)產(chǎn)業(yè)、治理和科研的發(fā)展需要,快速響應(yīng)需求變化,將成為元宇宙智能技術(shù)發(fā)展的關(guān)鍵驅(qū)動力。
《白皮書》指出,“ 基模型(Foundation Model)”被認(rèn)為是解決復(fù)雜巨系統(tǒng)問題的重要途徑之一。各國在基模型上都投入了大量的資金和研發(fā)力量,BERT、DALL-E、GPT-3 等基模型相繼出現(xiàn),AI 科研正在經(jīng)歷一場范式改變,基模型競爭時代到來。
商湯SenseCore的算力底座支撐對真實世界數(shù)字化后海量多模態(tài)數(shù)據(jù)的實時分析、模型訓(xùn)練和實時推理。通過超大規(guī)模、集約化的算力部署,可以降低計算和AI 模型研發(fā)成本。
截至2021年6月30日,商湯已在主要區(qū)域市場建立了23個智能計算集群,擁有超過20000塊GPU,總算力達(dá)到1170Petaflops。同時,也正在建設(shè)上海臨港新一代智能計算中心(簡稱AIDC),建成后將成為亞洲最大的超算中心之一,總體算力將達(dá)到3740Petaflops 的計算能力,能滿足四個20000萬以上人口的超大規(guī)模智慧城市的計算需求。
商湯基于SenseCore 也在持續(xù)投入對基模型的研發(fā),即通過“大算力+ 大數(shù)據(jù)”訓(xùn)練產(chǎn)生具有通用能力的“大模型”,從而進(jìn)一步提升AI 模型的生產(chǎn)效率,同時幫助解決復(fù)雜系統(tǒng)中存在的大量的長尾問題。目前,基于SenseCore 所訓(xùn)練的CV 基模型已具有高達(dá)300 億個參數(shù),是目前CV 領(lǐng)域公開信息中最大參數(shù)量的模型。
【商湯的“造物者”平臺SenseMARS】
《白皮書》指出,交互引擎支持人們在虛擬世界中沉浸式體驗,并可將虛擬世界帶入現(xiàn)實,并幫助實現(xiàn)虛擬世界與現(xiàn)實世界的精準(zhǔn)疊加和虛實交互。
例如,基于Niantic的高級增強(qiáng)現(xiàn)實引擎平臺 “Real World Platform”制作的《Pokémon GO》游戲曾經(jīng)風(fēng)靡世界,可以實現(xiàn)多人、跨平臺的AR 游戲體驗。其他還有谷歌的ARCore,蘋果的ARKit,以及商湯SenseMARS都是旨在打造無縫融合虛擬世界和物理世界的全新增強(qiáng)現(xiàn)實體驗。
商湯通過SenseMARS火星混合現(xiàn)實平臺為用戶構(gòu)建一個元宇宙的“造物者”平臺,通過構(gòu)建SenseCore AI 大裝置實現(xiàn)虛擬世界與真實世界的“破壁”和連接。通過與合作伙伴的合作共生不斷拓展元宇宙生態(tài)的邊界和內(nèi)涵。
圍繞“人”、“物”、“場”三大基本元素,商湯的“造物者”平臺SenseMARS對外輸出功能和服務(wù),包括創(chuàng)作元宇宙虛擬化身的SenseMARS Avatar、支持?jǐn)?shù)字人等元宇宙“原住民”開發(fā)的SenseMARS Agent、物理世界的數(shù)字重建SenseMARS Reconstruction。
《白皮書》中介紹,通過SenseMARS Avatar可以結(jié)合個人影像快速生成不同風(fēng)格的虛擬形象,并通過智能手機(jī)、AR/VR等終端設(shè)備對姿態(tài)、表情等識別和捕捉,驅(qū)動虛擬形象在元宇宙世界里自由穿梭。
此外,商湯的SenseMARS Agent通過自然語言處理,以及語音、手勢及視線的感知及決策智能,給元宇宙中的“原住民”裝上“智慧的大腦”,從而讓我們與“他們”之間可以互動起來。例如,SenseMARS數(shù)字人,他/ 她不僅可以“聽懂”人話,還能夠通過語言、表情、肢體動作等與我們進(jìn)行交流。同時,經(jīng)過不同領(lǐng)域知識數(shù)據(jù)的訓(xùn)練學(xué)習(xí),數(shù)字人可以曉通百事,成為我們在各個領(lǐng)域的“超級助手”。
SenseMARS Reconstruction借助多算法融合(譬如三維語義分割算法、稠密三維重建算法等),賦能用戶利用消費(fèi)級移動設(shè)備(包括手機(jī)、運(yùn)動相機(jī)及無人機(jī))就可以高效重建物理世界的三維模型,從小物體到購物商場、交通樞紐乃至城市都可以做到厘米級高精度復(fù)刻。
【“共生”生態(tài) 擴(kuò)展元宇宙世界的邊界和范疇】
商湯在技術(shù)共生方面,例如為了降低元宇宙的應(yīng)用門檻,同時也為創(chuàng)作者提供更廣闊的創(chuàng)作舞臺,SenseMARS通過與芯片廠商、設(shè)備廠商合作,實現(xiàn)與多交互終端系統(tǒng)的適配兼容,覆蓋更廣泛的用戶群體。
商湯在業(yè)務(wù)共生方面,例如,與一些數(shù)字孿生平臺型企業(yè)一起形成戰(zhàn)略合作,在創(chuàng)造的“城市復(fù)刻體”之上,結(jié)合AI能力實現(xiàn)對城市多樣化、細(xì)分場景的實時感知和智能決策,打造虛實融合的“城市元宇宙”。與AR眼鏡廠商戰(zhàn)略合作,為 “文博元宇宙”的創(chuàng)造和體驗提供端到端AR 解決方案。與能源、電力等基礎(chǔ)設(shè)施廠商合作建立數(shù)字資產(chǎn)庫,為未來的“能源、電力元宇宙”奠定數(shù)字化基礎(chǔ)。
原標(biāo)題:商湯智研院發(fā)布白皮書,首次系統(tǒng)解讀元宇宙