國(guó)內(nèi)科學(xué)家團(tuán)隊(duì)發(fā)布超大規(guī)模AI預(yù)訓(xùn)練模型

據(jù)消息，北京智源人工智能研究院發(fā)布四個(gè)超大規(guī)模人工智能預(yù)訓(xùn)練模型，統(tǒng)稱為“悟道1.0”，涵蓋中文語(yǔ)言、多模態(tài)、認(rèn)知、蛋白質(zhì)預(yù)測(cè)四個(gè)領(lǐng)域，是幫助國(guó)內(nèi)企業(yè)、機(jī)構(gòu)開(kāi)發(fā)人工智能應(yīng)用的大型基礎(chǔ)設(shè)施。

“悟道1.0”由智源研究院學(xué)術(shù)副院長(zhǎng)、清華大學(xué)唐杰教授領(lǐng)銜，帶領(lǐng)來(lái)自北京大學(xué)、清華大學(xué)、中國(guó)人民大學(xué)、中國(guó)科學(xué)院等單位的100余位AI科學(xué)家團(tuán)隊(duì)聯(lián)合攻關(guān)，同時(shí)與快手、搜狗、360、阿里、新華社等龍頭企業(yè)共同研發(fā)工業(yè)級(jí)示范性應(yīng)用。

智源研究院院長(zhǎng)黃鐵軍教授介紹，近幾年這輪人工智能浪潮的基本特點(diǎn)是“數(shù)據(jù)+算力+算法=模型”，模型濃縮了訓(xùn)練數(shù)據(jù)的內(nèi)部規(guī)律，是實(shí)現(xiàn)人工智能應(yīng)用的載體。近年來(lái)人工智能的發(fā)展，已經(jīng)從“大煉模型”逐步邁向了“煉大模型”的階段，通過(guò)設(shè)計(jì)先進(jìn)的算法，整合盡可能多的數(shù)據(jù)，匯聚大量算力，集約化地訓(xùn)練大模型，供大量企業(yè)使用，是必然趨勢(shì)。

智源研究院2020年10月啟動(dòng)“悟道”項(xiàng)目，研發(fā)規(guī)模大（主要體現(xiàn)為參數(shù)量）、智商高、具備類人認(rèn)知能力、統(tǒng)一對(duì)多模態(tài)數(shù)據(jù)的理解和建模、滿足各種應(yīng)用需要的預(yù)訓(xùn)練模型，特別是注重中文語(yǔ)料的采集和訓(xùn)練。

責(zé)任編輯：lq6