之江實(shí)驗(yàn)室021科學(xué)基礎(chǔ)模型首次亮相 突破語言局限

　　中新社杭州12月18日電(鮑夢妮)浙江之江實(shí)驗(yàn)室18日在杭州舉行021科學(xué)基礎(chǔ)模型創(chuàng)新合作大會(huì)，首次全面展示021科學(xué)基礎(chǔ)模型及系列領(lǐng)域科學(xué)模型研發(fā)進(jìn)展。

　　據(jù)悉，021模型構(gòu)筑形成跨學(xué)科知識、跨領(lǐng)域推理、跨語言理解(覆蓋204種語言)三大基石，具備出色的科學(xué)推理能力，能夠深入分析、推導(dǎo)、驗(yàn)證多類科學(xué)問題。

　　“語言所表達(dá)的維度，遠(yuǎn)遠(yuǎn)低于科學(xué)所需表達(dá)的維度�！敝�江實(shí)驗(yàn)室科學(xué)模型總體部技術(shù)總師薛貴榮認(rèn)為，科學(xué)數(shù)據(jù)涵蓋時(shí)間、空間、能量等多個(gè)維度，是對復(fù)雜物理系統(tǒng)演變規(guī)律的高維表征。為解決科學(xué)問題，科學(xué)界需要突破語言空間的局限，研發(fā)科學(xué)基礎(chǔ)模型，構(gòu)建“科學(xué)空間+語言空間”于一體的更高維空間，建立跨學(xué)科數(shù)據(jù)之間的深層連接，變革科學(xué)研究范式。

　　對此，之江實(shí)驗(yàn)室研發(fā)團(tuán)隊(duì)探索將科學(xué)數(shù)據(jù)和文本語料編碼到統(tǒng)一的高維空間，讓模型能夠識別、處理科學(xué)數(shù)據(jù)，認(rèn)識并解決復(fù)雜科學(xué)問題。經(jīng)過近萬次實(shí)驗(yàn)，團(tuán)隊(duì)形成了模型訓(xùn)練框架，包括預(yù)訓(xùn)練、后訓(xùn)練、強(qiáng)化學(xué)習(xí)等，并完成了2360億參數(shù)規(guī)模的021科學(xué)基礎(chǔ)模型訓(xùn)練。

　　目前，021模型已服務(wù)地球科學(xué)、天文學(xué)、生命科學(xué)、材料科學(xué)等多個(gè)領(lǐng)域，成為打破學(xué)科邊界、激發(fā)創(chuàng)新思維的“科研伙伴”。(完)