
IT之家4月11日消息,中國信通院此前成立大模型工作組,吸納成員單位60余家,覆蓋大模型頭部企業(yè)、互聯(lián)網(wǎng)企業(yè)、科研院所、電信運營商、金融機構(gòu)等,圍繞技術(shù)研討、產(chǎn)業(yè)交流、標(biāo)準(zhǔn)研制、評估測試、案例征集等方面開展多項工作。
中國信通院聯(lián)合工作組60余家單位,共同研制了《大規(guī)模預(yù)訓(xùn)練模型技術(shù)和應(yīng)用評估方法》系列標(biāo)準(zhǔn),包含模型開發(fā)、模型能力、模型應(yīng)用和可信要求四個重要部分。目前模型開發(fā)、模型能力兩部分標(biāo)準(zhǔn)已發(fā)布,模型開發(fā)標(biāo)準(zhǔn)包括數(shù)據(jù)構(gòu)建、模型訓(xùn)練、模型管理、模型部署4個能力域、16個能力子域、60余個能力項,全面評估研究主體開發(fā)大模型的能力。
模型能力標(biāo)準(zhǔn)包含功能豐富度、性能優(yōu)越度、服務(wù)成熟度3個評測維度、8個能力域、30余個能力項,全面評估大模型的各項技術(shù)能力。模型應(yīng)用標(biāo)準(zhǔn)初步定稿,包含應(yīng)用豐富度、服務(wù)成熟度、運營管理能力3個能力域、14個能力子域、30余個能力項,綜合評估大模型應(yīng)用成熟度??尚乓髽?biāo)準(zhǔn)正在前期研究中,近期將啟動編制工作。
IT之家從官方獲悉,中國科學(xué)院自動化研究所、武漢人工智能研究院研發(fā)的“紫東太初”大模型,在2月12日-3月3日參與可信AI評測工作,模型開發(fā)和模型能力兩部分獲得4+級評分,成為國內(nèi)首家通過該項評測的學(xué)術(shù)機構(gòu)。