12月28日，以“大模型·大未來”為主題的“2023人工智能大模型基準(zhǔn)測試科創(chuàng)發(fā)展大會暨中西部數(shù)字經(jīng)濟(jì)大會”在成都市高新區(qū)成功舉辦。作為大模型的行業(yè)盛會，本次大會發(fā)布《2023人工智能大模型基準(zhǔn)測試白皮書》等三大成果，助力大模型向好發(fā)展。
大會由成都傳媒集團(tuán)主辦，成都商報社承辦，紅星新聞、紅星資本局、四川省大數(shù)據(jù)發(fā)展聯(lián)盟、四川省人工智能學(xué)會協(xié)辦，馳星創(chuàng)投戰(zhàn)略合作。來自中國科學(xué)院、清華大學(xué)、北京大學(xué)、天津大學(xué)、澳門大學(xué)等的專家學(xué)者，中國信通院人工智能研究中心、中國軟件評測中心等權(quán)威機(jī)構(gòu)，以及80余家人工智能大模型領(lǐng)域的頭部企業(yè)，齊聚一堂，共同探討大模型時代下數(shù)實(shí)融合的新業(yè)態(tài)、新模式、新路徑。
本次大會作為大模型的行業(yè)盛會，不僅邀請到多位行業(yè)大咖、專家學(xué)者分享經(jīng)驗(yàn)和前沿思考，匯聚了頭部企業(yè)、專家學(xué)者和權(quán)威機(jī)構(gòu)，還凝聚了行業(yè)集體智慧，形成三大成果：搭建OpenEval平臺、成立大模型應(yīng)用創(chuàng)新協(xié)同中心、發(fā)布《2023人工智能大模型基準(zhǔn)測試白皮書》。
成果1：OpenEval平臺助推中文大模型能力與安全協(xié)同發(fā)展
大會舉辦前夕邀請到中國信息通信研究院人工智能研究中心、中國軟件評測中心兩大權(quán)威研究機(jī)構(gòu)，以及來自各大高校的專家學(xué)者組成大模型基準(zhǔn)評測專家委員會，對國內(nèi)大模型進(jìn)行多元化評測。
其中，大模型基準(zhǔn)評測專家委員會的成員包括中國信息通信研究院人工智能研究中心魏凱、中國軟件評測中心梁斌、天津大學(xué)智能與計(jì)算學(xué)部熊德意、鄭州大學(xué)計(jì)算機(jī)與人工智能學(xué)院昝紅英、上海交通大學(xué)約翰·霍普克羅夫特計(jì)算機(jī)科學(xué)中心林洲漢、香港中文大學(xué)數(shù)據(jù)科學(xué)學(xué)院王本友、香港科技大學(xué)計(jì)算機(jī)系何俊賢、澳門大學(xué)科技學(xué)院黃輝。
在對大模型進(jìn)行評測前，專委會成員專門為大模型評測研制開發(fā)了自動測試平臺，并取名為“OpenEval”，意為開放評測以及對大模型發(fā)展無窮無盡的展望。
作為本次大會的成果，OpenEval平臺致力于成為中文大模型評估多維度、全面、開放的評測平臺，探索前沿模型評測方法，建立大模型評測標(biāo)準(zhǔn)與協(xié)議，建設(shè)高質(zhì)量大模型評測基準(zhǔn)數(shù)據(jù)，綜合評估大模型知識、能力、對齊及安全級別，發(fā)布詳細(xì)評測報告，助推中文大模型能力與安全協(xié)同發(fā)展。
目前，OpenEval平臺從四大維度出發(fā)，包括知識能力、價值對齊、安全可控和專業(yè)領(lǐng)域，每一個維度下又分多個子維度，且收錄了若干數(shù)據(jù)集。
在大會結(jié)束后，OpenEval平臺將持續(xù)運(yùn)營，并不斷地更新評測數(shù)據(jù)、創(chuàng)新大模型評測方法、組織線上與線下評測活動，第三方評測機(jī)構(gòu)和企業(yè)等均可通過該平臺申請和組織新型評測任務(wù)。
成果2：《2023人工智能大模型基準(zhǔn)測試白皮書》為行業(yè)構(gòu)建全景視圖
基于前述的評測結(jié)果，OpenEval平臺、中國軟件評測中心、天津大學(xué)自然語言處理實(shí)驗(yàn)室、鄭州大學(xué)自然語言處理實(shí)驗(yàn)室、紅星新聞和長三角數(shù)據(jù)要素流通服務(wù)平臺在此次大會上聯(lián)合發(fā)布《2023人工智能大模型基準(zhǔn)測試白皮書》。
天津大學(xué)智能與計(jì)算學(xué)部教授、天津大學(xué)“語言智能與技術(shù)”中外聯(lián)合研究中心主任熊德意告訴紅星資本局，《白皮書》的發(fā)布標(biāo)志著對國內(nèi)開源和閉源大模型首次大范圍綜合評測圓滿完成。
《白皮書》指出，在過去的一年中，中文大模型在學(xué)科知識和數(shù)學(xué)推理等方面的能力有了顯著的提升，這展現(xiàn)了大模型在學(xué)科知識掌握、處理復(fù)雜問題和推理方面的潛力。
“基于前述評測結(jié)果，白皮書深度洞察了國內(nèi)大模型的發(fā)展態(tài)勢，度量了中文大模型能力邊界，探明了潛在的安全風(fēng)險點(diǎn)，建構(gòu)了中文大模型能力與安全全景圖，為國內(nèi)大模型未來技術(shù)與產(chǎn)業(yè)發(fā)展提出了明確建議和方向?！毙艿乱鈱t星資本局說。
同時，《白皮書》復(fù)盤了2023年全世界人工智能的發(fā)展概況，以專業(yè)視角解析大模型在應(yīng)用領(lǐng)域的面臨的機(jī)遇與挑戰(zhàn)，為行業(yè)構(gòu)建全景視圖，探索人工智能領(lǐng)域?qū)I(yè)技術(shù)的進(jìn)步及突破。
《白皮書》還提出建議稱，大模型提供方在追求知識和能力提升的同時，應(yīng)關(guān)注價值對齊。隨著大模型能力的不斷進(jìn)化，這一問題的重要性將日益凸顯。
成果3：成立大模型應(yīng)用創(chuàng)新協(xié)同中心
在此次大會上，大模型應(yīng)用創(chuàng)新協(xié)同中心正式成立。
該中心將通過創(chuàng)新聯(lián)合體形式建立大模型產(chǎn)業(yè)社群，協(xié)同引導(dǎo)大模型企業(yè)與實(shí)體產(chǎn)業(yè)進(jìn)行交流互動；組建大模型創(chuàng)新服務(wù)體系，通過資本對接、成長跟蹤和業(yè)務(wù)交流等多種形式，助力大模型企業(yè)成長；搭建數(shù)據(jù)資產(chǎn)服務(wù)基座，打通數(shù)據(jù)要素流通和數(shù)據(jù)資產(chǎn)價值化。
目前，首批參與該中心的成員有：天津大學(xué)自然語言處理實(shí)驗(yàn)室、紅星新聞、馳星創(chuàng)投、元禾辰坤、左手醫(yī)生、聯(lián)合數(shù)據(jù)、360集團(tuán)、科大訊飛、云從科技、達(dá)觀數(shù)據(jù)、極睿科技、曉多科技、中科聞歌、得理科技、上海財經(jīng)大學(xué)金融大模型實(shí)驗(yàn)室團(tuán)隊(duì)、香港中文大學(xué)數(shù)據(jù)科學(xué)學(xué)院、澳門大學(xué)科技學(xué)院以及鄭州大學(xué)計(jì)算機(jī)與人工智能學(xué)院。
大模型應(yīng)用創(chuàng)新協(xié)同中心致力于匯聚業(yè)內(nèi)高校、科研機(jī)構(gòu)、相關(guān)企業(yè)，共同推動大模型在各垂直領(lǐng)域的深度應(yīng)用與創(chuàng)新，促進(jìn)產(chǎn)業(yè)升級和經(jīng)濟(jì)發(fā)展，包括但不限于趨勢研究、技術(shù) 交流、跨界合作、成果孵化等工作任務(wù)。
用戶評論