國產(chǎn)大模型陣營再添一員。

11月14日，阿里巴巴智能信息事業(yè)群發(fā)布全棧自研、千億級參數(shù)的夸克大模型。據(jù)悉，該大模型將應(yīng)用于通用搜索、醫(yī)療健康、教育學(xué)習(xí)、職場辦公等眾多場景，夸克App也將借助自研大模型進(jìn)行全面升級。

資料顯示，在一項檢測大模型中文能力的測試中，夸克大模型拿到第一。

考慮到夸克大模型目前仍未上線。其實際表現(xiàn)如何，未來有待各界檢驗。

據(jù)Github網(wǎng)站介紹，CMMLU是一個綜合性的中文評估基準(zhǔn)，它專門用于評估語言模型在中文語境下的知識和推理能力?！癈MMLU中的許多任務(wù)具有中國特定的答案，可能在其他地區(qū)或語言中并不普遍適用?！?

資料顯示，CMMLU涵蓋了從基礎(chǔ)學(xué)科知識到高級專業(yè)水平能力的67個主題。其中包括需要計算和推理的自然科學(xué)，需要知識的人文科學(xué)和社會科學(xué)，以及需要生活常識的中國駕駛規(guī)則等。

Github網(wǎng)站截圖

觀察者網(wǎng)發(fā)現(xiàn)，在CMMLU最新的zero-shot測試中，夸克大模型在“未開放測試組”中均分位列第一。

相關(guān)網(wǎng)站截圖

同為zero-shot測試，“XuanYuan-70B”模型則在“開放測試組”中獲得了均分第一名。

何為Zero-shot？

有業(yè)內(nèi)人士對觀察者網(wǎng)表示，Zero-shot（零次訓(xùn)練）是指模型在測試階段沒有接觸過與具體任務(wù)相關(guān)的訓(xùn)練數(shù)據(jù)的情況下進(jìn)行預(yù)測和推理。換句話說，模型在沒有進(jìn)行過與特定任務(wù)相關(guān)的訓(xùn)練的情況下，通過利用其在其他任務(wù)上的訓(xùn)練經(jīng)驗，來解決新的任務(wù)。

另一個時常出現(xiàn)的是Five-shot（五次訓(xùn)練）：模型只能接觸到非常有限的數(shù)據(jù)，然后通過這五個樣本來進(jìn)行預(yù)測和推理。

“Five-shot和zero-shot是指在機(jī)器學(xué)習(xí)和自然語言處理中用于描述模型訓(xùn)練和測試的方式。這兩個術(shù)語常常用于描述模型在小樣本學(xué)習(xí)，比如少樣本學(xué)習(xí)、元學(xué)習(xí)等等，以及遷移學(xué)習(xí)中的性能?！痹撊耸勘硎?，在這些情況下，模型需要具備較強(qiáng)的泛化能力，能夠從非常有限的數(shù)據(jù)或沒有具體任務(wù)相關(guān)數(shù)據(jù)的情況下，進(jìn)行準(zhǔn)確的預(yù)測和推理。

資料顯示，夸克大模型是基于Transformer架構(gòu)、自主研發(fā)的多模態(tài)大模型，每天會對億級的圖文數(shù)據(jù)進(jìn)行訓(xùn)練和精調(diào)，具有低成本、高響應(yīng)、綜合能力強(qiáng)等特點。同時，夸克大模型還將衍生出通識、醫(yī)療、教育等垂類模型，可以提供AIGC、智能檢索的專業(yè)服務(wù)。

據(jù)悉，夸克大模型將會優(yōu)先落地在通識問答、專業(yè)搜索等信息服務(wù)領(lǐng)域，滿足年輕人學(xué)習(xí)知識和提升自我的需求。未來，夸克大模型應(yīng)用于搜索、智能工具和資產(chǎn)管理助手等場景，一系列AI原生應(yīng)用將為年輕人工作、學(xué)習(xí)、生活提供更全面的服務(wù)。

“AI時代已經(jīng)來臨，大模型應(yīng)用的全新體驗臨界點近在咫尺。”阿里巴巴智能信息事業(yè)群總裁吳嘉表示，基于大模型的AIGC技術(shù)將會給搜索產(chǎn)品帶來全新變化，加速邁向下一代搜索?？淇私柚匝写竽Ｐ蛯⑷嫔?，全新的夸克很快會和大家見面。

本文系觀察者網(wǎng)獨家稿件，未經(jīng)授權(quán)，不得轉(zhuǎn)載。