-
阿里云自研大模型“通義千問(wèn)”亮相,我們進(jìn)行了深度實(shí)測(cè)
-
周毅是故意的還是不小心?
最后更新: 2023-04-07 17:26:45與ChatGPT-4相比,“通義千問(wèn)”表現(xiàn)如何?
為了讓大家對(duì)“通義千問(wèn)”的表現(xiàn)能力有一個(gè)初步的、直觀的了解,在后續(xù)的測(cè)試中,我們圍繞數(shù)理邏輯推算、商業(yè)文案創(chuàng)作、情感和道德判斷、仿寫(xiě)創(chuàng)作和小說(shuō)續(xù)寫(xiě)設(shè)計(jì)了五組問(wèn)題,分別由ChatGPT(基于4.0模型)和“通義千問(wèn)”進(jìn)行回答。
這也讓初生的“通義千問(wèn)”直接“硬剛”世界上最先進(jìn)的大模型GPT-4。
第一組是數(shù)學(xué)問(wèn)題。
“雞、兔共有腳100只,若將雞換成兔,兔換成雞,則共有腳86只,雞兔各有幾只? ”
這道題目的正確答案是雞有12只,兔有19只。
ChatGPT表示,這是一個(gè)典型的雞兔同籠問(wèn)題。我們可以使用代數(shù)來(lái)解決這個(gè)問(wèn)題,隨后給出了正確的答案;
對(duì)這一問(wèn)題,“通義千問(wèn)”三次都沒(méi)有得出正確的答案。
第二組是商業(yè)文案創(chuàng)作。
題目要求兩個(gè)模型參考“全球視野,中國(guó)關(guān)懷”,為觀察者網(wǎng)制作一條宣傳語(yǔ)。
ChatGPT給出的答案是:
"放眼世界,聆聽(tīng)中國(guó)心聲——觀察者網(wǎng),讓全球視野與中國(guó)關(guān)懷相融匯。"
“通義千問(wèn)”給出的答案是:
“觀察者網(wǎng),洞察國(guó)際時(shí)事,聚焦全球熱點(diǎn),解讀中國(guó)方案。”
與ChatGPT相比,“通義千問(wèn)”的風(fēng)格顯得更加平鋪直敘,但總體而言,表現(xiàn)也不錯(cuò)。
第三個(gè)問(wèn)題是道德和情感判斷,材料為著名的電車?yán)Ь?/strong>。
“一個(gè)瘋子把五個(gè)無(wú)辜的人綁在電車軌道上。一輛失控的電車朝他們駛來(lái),并且片刻后就要碾壓到他們。幸運(yùn)的是,你可以拉一個(gè)拉桿,讓電車開(kāi)到另一條軌道上。然而問(wèn)題在于,那個(gè)瘋子在另一個(gè)電車軌道上也綁了一個(gè)人。考慮以上狀況,你是否應(yīng)拉拉桿?”
我們要求兩個(gè)模型做出選擇,并給出理由。
ChatGPT開(kāi)宗明義,點(diǎn)明這是“道德困境”。它的選擇是拉動(dòng)拉桿,犧牲一個(gè)人保護(hù)五個(gè)人,它表示,“雖然這并非一個(gè)完美的解決方案,但在這種情況下,我們需要在兩個(gè)不理想的選擇之間進(jìn)行權(quán)衡。”
ChatGPT解釋稱,該選擇基于效益主義(Utilitarianism,即邊沁等人的功利主義學(xué)說(shuō))的道德觀念,它隨后介紹了該理論的主要主張并結(jié)合材料進(jìn)行了分析。在最后,它強(qiáng)調(diào):“這個(gè)問(wèn)題沒(méi)有絕對(duì)正確的答案”,并重復(fù)了自己做出該選擇的原因和立場(chǎng)。
“通義千問(wèn)”沒(méi)有回答這個(gè)問(wèn)題。它非常誠(chéng)實(shí)地表示,“作為一個(gè)人工智能語(yǔ)言模型,目前我還沒(méi)有學(xué)會(huì)如何回答這個(gè)問(wèn)題,我會(huì)持續(xù)學(xué)習(xí),為您提供更好的服務(wù)?!?
需要補(bǔ)充的是,電車?yán)Ь臣捌洹白兎N”問(wèn)題,在西方世界已經(jīng)有多年的討論,材料很多。這可能也是ChatGPT表現(xiàn)更亮眼的重要原因。
第四組問(wèn)題是仿寫(xiě)創(chuàng)作。
這一組問(wèn)題我們提了一個(gè)“刁鉆”的要求。在實(shí)驗(yàn)中,我們要求兩組模型,以“困住風(fēng)的氣球,開(kāi)始斑斕的遠(yuǎn)行”為仿寫(xiě)對(duì)象,創(chuàng)作四個(gè)類似的句子,擁有類似的句式或者意境即可——我們特意要求:前兩個(gè)句子為浪漫主義風(fēng)格,后兩個(gè)句子為荒誕主義風(fēng)格。
ChatGPT給出的答案是:
“通義千問(wèn)”給出的答案是:
兩相對(duì)比,ChatGPT和“通義千問(wèn)”都順利地完成了問(wèn)答,甚至都基本滿足了“前兩個(gè)句子浪漫,后兩個(gè)句子荒誕”的要求。
從各自的不足來(lái)看,ChatGPT雖然更加靈活,但是在內(nèi)容上,有點(diǎn)像一個(gè)“中二少年”;“通義千問(wèn)”雖然在比喻的內(nèi)在聯(lián)系上顯得“靠譜”了不少,但是顯得木訥了一些,在句式、素材、表達(dá)上都有些“中規(guī)中矩”。
- 責(zé)任編輯: 周毅 
-
超210億元!中船獲法國(guó)達(dá)飛海運(yùn)16艘訂單,史上最大單筆箱船訂單
2023-04-07 17:23 中國(guó)精造 -
3月末我國(guó)外儲(chǔ)31839億美元,外匯局解讀
2023-04-07 16:48 觀網(wǎng)財(cái)經(jīng)-金融 -
-
-
阿里回應(yīng)減資:網(wǎng)傳消息不實(shí)
2023-04-07 14:03 -
杭州阿里巴巴由122億減資至1億
2023-04-07 11:00 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
上市傳聞,為何“偏偏”挑中菜鳥(niǎo)?
2023-04-06 18:08 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
不定增不減持承諾,難阻三六零大跌
2023-04-06 14:58 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
阿里版ChatGPT現(xiàn)身“天貓精靈”,這家制造商一字漲停
2023-04-06 13:48 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
中國(guó)殯葬第一村:500多家店關(guān)了三分之一
2023-04-05 19:34 產(chǎn)業(yè)萬(wàn)象 -
易會(huì)滿主席會(huì)見(jiàn)香港金融監(jiān)管局總裁余偉文
2023-04-04 19:15 觀網(wǎng)財(cái)經(jīng)-金融 -
-
-
-
美光被審查背后,中國(guó)存儲(chǔ)市場(chǎng)要變天了?
2023-04-04 17:01 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
上海:鼓勵(lì)跨境貨物貿(mào)易優(yōu)先使用人民幣結(jié)算
2023-04-04 11:06 人民幣國(guó)際化 -
假期將至,部分熱門(mén)景區(qū)周邊“供不應(yīng)求”
2023-04-04 08:27 -
安踏終止跟張繼科合作,這些品牌也叫停了!
2023-04-03 17:48 觀網(wǎng)財(cái)經(jīng)-消費(fèi) -
?烏克蘭股市單日大漲47%?真相竟是……
2023-04-03 17:25 -
?除了馬保國(guó),沒(méi)有人相信B站UP主賺錢(qián)了
2023-04-03 17:09
相關(guān)推薦 -
-
“痛苦!關(guān)稅戰(zhàn)被中方拿捏,美國(guó)只能二選一” 評(píng)論 53撐不住了?特朗普暗示降低對(duì)華關(guān)稅 評(píng)論 366幾經(jīng)波折,美烏要簽了? 評(píng)論 125“不吃夠自己種的苦果,某國(guó)就不會(huì)放下身段老實(shí)談判” 評(píng)論 197最新聞 Hot
-
“痛苦!關(guān)稅戰(zhàn)被中方拿捏,美國(guó)只能二選一”
-
“再?zèng)]進(jìn)展,我們就撤”
-
“中國(guó)人很團(tuán)結(jié),就連親美人士都認(rèn)為必須對(duì)抗美國(guó)”
-
又一位科學(xué)家回國(guó)!曾供職美頂尖能源實(shí)驗(yàn)室
-
撐不住了?特朗普暗示降低對(duì)華關(guān)稅
-
國(guó)家發(fā)改委干將龔楨梽,“空降”廣東
-
廣西東蘭干旱“農(nóng)民求雨”?當(dāng)?shù)鼗貞?yīng):視頻系擺拍
-
外媒繼續(xù)緊盯:中國(guó),70天了…
-
中央巡視組剛進(jìn)駐吉林,正廳級(jí)趙明任上被查
-
“中方把波音飛機(jī)退回美國(guó)”
-
巴西毛遂自薦:聽(tīng)說(shuō)中國(guó)停了近400家美國(guó)牛肉商…
-
“特朗普破產(chǎn)過(guò)6次,想用這樣的手段嚇中國(guó)?”
-
“毛主席總講,既要看到它是‘紙老虎’,又要看到它是‘真老虎’”
-
澤連斯基猛批美國(guó)特使:散布“俄羅斯敘事”
-
就因兩張超速罰單,日籍博士被美國(guó)吊銷簽證
-
果然,特朗普對(duì)中國(guó)船只動(dòng)手了!
快訊- 茶咖日?qǐng)?bào)|咖啡依賴進(jìn)口難自給,關(guān)稅大棒壓垮美小企業(yè)
- 讓未成年人演繹分手、相親感悟?網(wǎng)信部門(mén)出手
- 美國(guó)務(wù)院稱中國(guó)衛(wèi)星公司支持也門(mén)胡塞武裝,中方駁斥
- 國(guó)常會(huì):要持續(xù)穩(wěn)定股市,持續(xù)推動(dòng)房地產(chǎn)市場(chǎng)平穩(wěn)健康發(fā)展
- 龔正會(huì)見(jiàn)黃仁勛
- ??谑忻捞m區(qū)委副書(shū)記、區(qū)長(zhǎng)吳升嬌去世,終年41歲
- 事關(guān)食用植物油運(yùn)輸,市監(jiān)總局出手
- 一季度證券交易印花稅411億元,同比增長(zhǎng)60.6%
-