-
精耕細(xì)作的數(shù)據(jù)標(biāo)注產(chǎn)業(yè),能否幫中國(guó)AI大模型構(gòu)筑獨(dú)特優(yōu)勢(shì)?
-
張廣凱13764468101
文/觀察者網(wǎng) 張廣凱
具備高度智能的ChatGPT,能否正確運(yùn)用自己海量的知識(shí),卻要取決于一群時(shí)薪不到2美元的肯尼亞勞工。
他們所做的工作——數(shù)據(jù)標(biāo)注,不僅是ChatGPT能夠領(lǐng)先競(jìng)爭(zhēng)對(duì)手的重要原因,也有著重要的倫理意義。數(shù)據(jù)標(biāo)注師們自己的價(jià)值觀,同樣決定了人工智能的價(jià)值觀,決定了AI能否被善意地運(yùn)用。
在百度智能云數(shù)據(jù)標(biāo)注基地業(yè)務(wù)產(chǎn)品負(fù)責(zé)人胡馳看來(lái),人工標(biāo)注將是大模型訓(xùn)練中絕對(duì)無(wú)法被替代的一部分。
而對(duì)于中國(guó)大模型企業(yè)來(lái)說(shuō),這項(xiàng)嚴(yán)重依賴勞動(dòng)力個(gè)人素質(zhì)的工作,或許也是獨(dú)特的競(jìng)爭(zhēng)優(yōu)勢(shì)所在。
近日,百度在中文大模型的數(shù)據(jù)標(biāo)注產(chǎn)業(yè)建設(shè)上邁出重要一步。
100%本科學(xué)歷,百度數(shù)據(jù)標(biāo)注卷到新高度
日前,位于??谑行阌^(qū)的百度智能云(??冢┤斯ぶ悄芑A(chǔ)數(shù)據(jù)產(chǎn)業(yè)基地正式啟動(dòng)運(yùn)營(yíng),這是百度智能云與??谑姓献鞴步ǖ膰?guó)內(nèi)首個(gè)大模型數(shù)據(jù)標(biāo)注中心。
百度智能云??谌斯ぶ悄芑A(chǔ)數(shù)據(jù)產(chǎn)業(yè)基地
百度智能云大模型數(shù)據(jù)標(biāo)注師董志煥介紹到:”我們的主要工作就是對(duì)大模型生成的內(nèi)容進(jìn)行評(píng)價(jià)、反饋,通過(guò)這些人工標(biāo)注數(shù)據(jù),讓大模型學(xué)習(xí)人類的思維方式,從而使大模型更加聰明?!?
當(dāng)前,大模型正處在產(chǎn)業(yè)落地前期,高質(zhì)量的數(shù)據(jù),是大模型實(shí)現(xiàn)產(chǎn)業(yè)化的關(guān)鍵要素。以ChatGPT、文心一言為代表的生成式AI,不僅需要海量的數(shù)據(jù)訓(xùn)練,更需要人工標(biāo)注、指令微調(diào)、基于人類反饋的強(qiáng)化學(xué)習(xí)(RLHF),才能夠讓大模型與人類價(jià)值觀、思維方式不斷對(duì)齊,使大模型更加可用。
為此,百度智能云升級(jí)了大模型數(shù)據(jù)服務(wù)能力,建設(shè)了國(guó)內(nèi)首個(gè)專業(yè)大模型數(shù)據(jù)標(biāo)注基地。
截至目前,百度智能云已經(jīng)在全國(guó)與各地政府合作,共建了十多個(gè)數(shù)據(jù)標(biāo)注基地,累計(jì)為當(dāng)?shù)靥峁┏^(guò)1.1萬(wàn)個(gè)穩(wěn)定就業(yè)崗位,間接帶動(dòng)5萬(wàn)人就業(yè)。
但是相比于傳統(tǒng)的數(shù)據(jù)標(biāo)注,語(yǔ)言類大模型對(duì)勞動(dòng)者技能提出了更高的要求。??跀?shù)據(jù)標(biāo)注基地現(xiàn)擁有數(shù)百名專職大模型數(shù)據(jù)標(biāo)注師,標(biāo)注師的本科率達(dá)到100%。
“和傳統(tǒng)的數(shù)據(jù)標(biāo)注師要求不同,大模型標(biāo)注師都需要本科以上學(xué)歷,我覺(jué)得主要是因?yàn)榇竽P蛿?shù)據(jù)涉及的知識(shí)面很廣,評(píng)判標(biāo)準(zhǔn)復(fù)雜,非??简?yàn)標(biāo)注師的語(yǔ)言理解能力和邏輯推理能力。在入職的前兩個(gè)月,公司會(huì)對(duì)我們進(jìn)行集體培訓(xùn)和考核,通過(guò)考核后才能正式上崗?!卑俣戎悄茉拼竽P蛿?shù)據(jù)標(biāo)注師王潔玉說(shuō)。
標(biāo)注師劉小瑩畢業(yè)于一所普通本科學(xué)院的漢語(yǔ)國(guó)際教育專業(yè)。她對(duì)觀察者網(wǎng)表示,自己的專業(yè)原本就業(yè)方向較窄,就業(yè)壓力大,而大模型標(biāo)注產(chǎn)業(yè)卻剛剛傾向于招收漢語(yǔ)言、新聞傳播等專業(yè)畢業(yè)生,為自己提供了新的就業(yè)方向。
??谑行阌^(qū)委常委、常務(wù)副區(qū)長(zhǎng)石晟屹表示:“??谌斯ぶ悄芗夹g(shù)數(shù)據(jù)產(chǎn)業(yè)基地的落成,最大的價(jià)值是在人才集約、產(chǎn)業(yè)集聚等方面有重要的引領(lǐng)作用。在不到一年的時(shí)間,基地已經(jīng)帶動(dòng)近千人的大學(xué)生就業(yè),對(duì)培育本地的數(shù)字經(jīng)濟(jì)人才做出了突出貢獻(xiàn)。同時(shí),引入百度這樣的科技企業(yè),將持續(xù)帶動(dòng)數(shù)字產(chǎn)業(yè)化項(xiàng)目落地,也會(huì)為傳統(tǒng)產(chǎn)業(yè)的轉(zhuǎn)型升級(jí)帶來(lái)新的戰(zhàn)略契機(jī)和發(fā)展機(jī)會(huì)?!?
百度智能云海口人工智能基礎(chǔ)數(shù)據(jù)產(chǎn)業(yè)基地 作業(yè)區(qū)
不只靠堆人力,中國(guó)數(shù)據(jù)標(biāo)注如何精耕細(xì)作?
盡管數(shù)據(jù)標(biāo)注聽(tīng)上去是一個(gè)依賴簡(jiǎn)單重復(fù)勞動(dòng)的工作,但是一旦深入工作細(xì)節(jié)便會(huì)發(fā)現(xiàn),它同樣需要很高的技術(shù)含量。
事實(shí)上,以Scale AI為代表,海外已經(jīng)誕生了一些數(shù)據(jù)標(biāo)注行業(yè)的獨(dú)角獸公司。2022年,Scale AI營(yíng)收達(dá)到2.9億美元,毛利率更是高達(dá)70%。
Scale AI不僅僅在使用非洲等地的廉價(jià)人力資源,同樣還招聘了數(shù)十名博士,來(lái)應(yīng)對(duì)各行業(yè)的專業(yè)數(shù)據(jù)。數(shù)據(jù)標(biāo)注質(zhì)量,是Scale AI為OpenAI等大模型企業(yè)提供的最大價(jià)值。
百度也正在全面提升中文大模型的標(biāo)注質(zhì)量。
劉小瑩向觀察者網(wǎng)介紹,除了自己負(fù)責(zé)的第一道標(biāo)注工序之外,層層審核也是保證標(biāo)注質(zhì)量的重要環(huán)節(jié)。在數(shù)據(jù)標(biāo)注公司內(nèi)部,有資深標(biāo)注師對(duì)所有標(biāo)注數(shù)據(jù)進(jìn)行全面復(fù)核,而百度自己也有龐大的審核團(tuán)隊(duì),最終把握數(shù)據(jù)質(zhì)量。涉及到專業(yè)領(lǐng)域知識(shí)時(shí),也有相關(guān)行業(yè)專家提供支持。
據(jù)了解,百度智能云沉淀了多領(lǐng)域?qū)<屹Y源,針對(duì)來(lái)自不同行業(yè)的數(shù)據(jù)服務(wù)需求,百度智能云可快速搭建專家團(tuán)隊(duì),對(duì)特定領(lǐng)域的任務(wù)提供監(jiān)督微調(diào)和強(qiáng)化訓(xùn)練數(shù)據(jù),保證數(shù)據(jù)交付質(zhì)量,目前已覆蓋計(jì)算機(jī)、法律、醫(yī)療等領(lǐng)域。
此外,百度智能云還組建了專業(yè)的數(shù)據(jù)咨詢團(tuán)隊(duì),從前期的數(shù)據(jù)收集、數(shù)據(jù)清洗,再到數(shù)據(jù)管理、數(shù)據(jù)回流,可為企業(yè)提供全流程的咨詢服務(wù),幫助企業(yè)在智能化轉(zhuǎn)型過(guò)程中少走彎路。
百度自研的高效標(biāo)注系統(tǒng),則進(jìn)一步提升了數(shù)據(jù)標(biāo)注效率。
胡馳表示,為提高數(shù)據(jù)標(biāo)注的質(zhì)量和效率,百度智能云自主研發(fā)了業(yè)內(nèi)領(lǐng)先的大模型數(shù)據(jù)標(biāo)注平臺(tái),支持從大模型微調(diào)、強(qiáng)化學(xué)習(xí)到模型評(píng)估的數(shù)據(jù)生產(chǎn)閉環(huán)。在人工標(biāo)注之前,平臺(tái)會(huì)首先進(jìn)行自動(dòng)化的預(yù)審核,對(duì)數(shù)據(jù)的行業(yè)特征進(jìn)行分類,確保數(shù)據(jù)交到更合適的審核員手上。
結(jié)合平臺(tái)獨(dú)有的人機(jī)協(xié)同標(biāo)注、多輪智能審核等智能化工具,百度可大幅提升數(shù)據(jù)標(biāo)注的產(chǎn)能和質(zhì)量,同時(shí)幫助企業(yè)實(shí)現(xiàn)降本增效。
數(shù)據(jù)安全也始終是重中之重。胡馳表示,百度智能云不僅可提供高安全性的端到端數(shù)據(jù)服務(wù),標(biāo)注平臺(tái)還支持私有部署,通過(guò)與基地資源聯(lián)動(dòng),為客戶提供多樣化的數(shù)據(jù)安全方案。
“大模型標(biāo)注基地重點(diǎn)要評(píng)估三大指標(biāo):高效標(biāo)注工具、高端人才梯隊(duì)、高級(jí)別數(shù)據(jù)安全,只有三管齊下,才能為大模型提供好的數(shù)據(jù)?!焙Y說(shuō)。
隨著數(shù)據(jù)標(biāo)注基地等“智能新基建”的建設(shè),百度“千帆大模型平臺(tái)”將更好地向社會(huì)提供服務(wù)。
據(jù)悉,百度智能云將在9月全面升級(jí)大模型服務(wù)。8月,百度智能云宣布,千帆大模型平臺(tái)升級(jí),接入包括文心一言、Llama 2全系列、ChatGLM2-6B等在內(nèi)的33個(gè)國(guó)內(nèi)外最主流的大模型,成為國(guó)內(nèi)擁有大模型最多的平臺(tái)。
(文中劉小瑩為化名)
|舉報(bào)-
違反法律法規(guī) -
垃圾信息、廣告 -
色情、淫穢信息 -
人身攻擊 -
謠言、不實(shí)信息 -
冒充,冒用信息 -
破壞社區(qū)秩序 -
其他 -
涉未成年人有害信息
標(biāo)簽 百度- 責(zé)任編輯: 張廣凱 
-
兩部門:多項(xiàng)個(gè)稅優(yōu)惠政策延續(xù)至2027年底
2023-08-28 16:14 -
滬指高開(kāi)低走漲1.13%,市場(chǎng)成交額超1.1萬(wàn)億元
2023-08-28 16:06 觀網(wǎng)財(cái)經(jīng)-金融 -
“四箭齊發(fā)”后,A股開(kāi)盤(pán)暴漲超5%
2023-08-28 10:09 觀網(wǎng)財(cái)經(jīng)-金融 -
央媒:“組合拳”釋放“活躍資本市場(chǎng)”強(qiáng)信號(hào)
2023-08-28 07:33 觀網(wǎng)財(cái)經(jīng)-金融 -
證監(jiān)會(huì)重磅發(fā)布
2023-08-27 18:38 觀網(wǎng)財(cái)經(jīng)-金融 -
財(cái)政部、稅務(wù)總局:減半征收證券交易印花稅
2023-08-27 17:23 觀網(wǎng)財(cái)經(jīng)-金融 -
涉及超6萬(wàn)億收入的增值稅法將二審,有六大變化
2023-08-27 15:04 -
-
-
-
AI加持,人人都可以做外貿(mào)了?
2023-08-25 17:48 觀網(wǎng)財(cái)經(jīng)-海外 -
平安健康:虧幅收窄47%,有望提前盈利上岸
2023-08-25 17:36 觀網(wǎng)財(cái)經(jīng)-健康 -
光伏企業(yè)集中披露業(yè)績(jī),為何呈現(xiàn)“冰火兩重天”?
2023-08-25 16:01 觀網(wǎng)財(cái)經(jīng)-金融 -
-
-
《中國(guó)好聲音》停播,背后公司股價(jià)跳水跌超13%
2023-08-25 11:39 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
-
途虎養(yǎng)車通過(guò)上市聆訊,今年上半年扭虧為盈
2023-08-24 17:47 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
因四項(xiàng)違規(guī),民生銀行遭警告
2023-08-24 17:04 觀網(wǎng)財(cái)經(jīng)-金融 -
數(shù)十家上市公司股東集中承諾不減持
2023-08-24 15:43 觀網(wǎng)財(cái)經(jīng)-金融
相關(guān)推薦 -
-
“一團(tuán)糟!關(guān)鍵是,各國(guó)能忍到幾時(shí)?” 評(píng)論 132“騎虎難下!對(duì)美國(guó)人來(lái)說(shuō),真正的痛苦即將襲來(lái)” 評(píng)論 245美國(guó)扛不住了才打貿(mào)易戰(zhàn),但藥不對(duì)癥會(huì)治死 評(píng)論 125他無(wú)視美國(guó)威脅訪華,“給世界作出示范” 評(píng)論 123最新聞 Hot
-
美國(guó)低調(diào)豁免部分商品,“對(duì)華關(guān)稅現(xiàn)首個(gè)松動(dòng)信號(hào)”
-
探訪義烏后,法媒感嘆:美國(guó)訂單少了,士氣反而更高
-
“對(duì)抗中國(guó)主導(dǎo)地位,特朗普盯上太平洋海底”
-
“一團(tuán)糟!關(guān)鍵是,各國(guó)能忍到幾時(shí)?”
-
“美國(guó)既非全知,亦非全能”,毛寧分享肯尼迪講話
-
又威脅上了!“再偷水,我就加稅”
-
“騎虎難下!對(duì)美國(guó)人來(lái)說(shuō),真正的痛苦即將襲來(lái)”
-
“中國(guó)尊重合作,比特朗普要人拍他馬屁,更受全球歡迎”
-
馬斯克“不安”了
-
AI(誒哎)還是A1(誒萬(wàn)),美教育部長(zhǎng)傻傻分不清楚
-
“中國(guó)藥活性成分性命攸關(guān),美國(guó)被卡脖子了”
-
中國(guó)同意,西班牙:歡迎
-
美國(guó)特使:烏克蘭可能會(huì)“像二戰(zhàn)后的柏林一樣”被分區(qū)駐軍
-
中方再出手,“一夜之間,美國(guó)不再是避風(fēng)港”
-
美債拋售潮繼續(xù),10年期美債收益率創(chuàng)2001年來(lái)最大漲幅
快訊- 大風(fēng)+沙塵暴+暴雪,中央氣象臺(tái)同時(shí)發(fā)布三預(yù)警
- 對(duì)標(biāo)OpenAI o1,商湯日日新V6讓AI融入“百姓之日用”
- 開(kāi)診10個(gè)月、接診近萬(wàn)人次,“拒絕上學(xué)門診”一號(hào)難求
- 哈馬斯:對(duì)任何保證加沙地帶永久?;鸬奶嶙h持積極態(tài)度
- 英國(guó)被曝深度參與俄烏沖突,多次派遣部隊(duì)入烏
- 烏克蘭外長(zhǎng):不需要“被操縱的和平”
- 工業(yè)和信息化部發(fā)布首批中國(guó)消費(fèi)名品名單,農(nóng)夫山泉上榜
- 4月12日《新聞聯(lián)播》主要內(nèi)容
-