北京798附近的一家咖啡館內(nèi),AI數(shù)據(jù)標(biāo)注師廖仔在交談中一再提到店里的咖啡機(jī)器人。
在這家占地近3000平米的咖啡館內(nèi),不少咖啡師圍繞著中央圓形島臺(tái)工作,但其中最引人矚目的是一臺(tái)人型機(jī)械臂的咖啡機(jī)器人。據(jù)說(shuō),該機(jī)器人的臉還是依據(jù)咖啡店主理人建模而成。
如果時(shí)間回到三四年前,廖仔想不到機(jī)器人可以沖咖啡,也想不到自己會(huì)進(jìn)入AI賽道。
99年出生的他,專(zhuān)科學(xué)歷,曾在深圳一家體制內(nèi)單位工作,因?yàn)椴幌胱约旱娜松瓦@樣一輩子看到頭,廖仔離職讀了一個(gè)建筑設(shè)計(jì)相關(guān)的課程。后來(lái),他又由設(shè)計(jì)師切入AI行業(yè),最終成為了大廠(chǎng)的一名外包數(shù)據(jù)標(biāo)注師。職業(yè)變化背后,廖仔的收入也水漲船高,月薪從一開(kāi)始3K一路漲到了現(xiàn)在13K。
處在Gap期的蘇打也曾試圖進(jìn)入這個(gè)行業(yè)。
985碩士畢業(yè)的她此前工作一直順風(fēng)順?biāo)�,但去年因�(yàn)楦纤景l(fā)生矛盾離職后,進(jìn)入了漫長(zhǎng)的職業(yè)空窗期。近半年來(lái),蘇打也想過(guò)轉(zhuǎn)換賽道。當(dāng)下火熱的AI行業(yè)讓她心動(dòng),數(shù)據(jù)標(biāo)注師曾被她視為職業(yè)轉(zhuǎn)型的方向之一。
但經(jīng)過(guò)一次兼職后,蘇打打消了這個(gè)念頭。“這就是一個(gè)純燒腦的體力勞動(dòng),看不到任何上升的空間。”她對(duì)「定焦One」說(shuō)道。
作為人工智能訓(xùn)練師的一個(gè)工種,數(shù)據(jù)標(biāo)注師2020年被正式納入國(guó)家職業(yè)分類(lèi)目錄,但圍繞這個(gè)職業(yè)前景的討論卻是冰火兩重天。
一邊是基礎(chǔ)大模型高速擴(kuò)張時(shí)期,大廠(chǎng)高薪與“AI紅利”吸引而來(lái)的數(shù)以萬(wàn)計(jì)的求職者,全國(guó)各地甚至涌現(xiàn)了不少打著AI訓(xùn)練師旗號(hào)的培訓(xùn)班;另一邊則是彌漫在從業(yè)者之中的不安和焦慮,很多人覺(jué)得自己是在為AI打零工,或者只是成為了大模型優(yōu)化的一個(gè)耗材,既難以形成技術(shù)積累,也隨時(shí)可能被AI所取代。
如今,隨著大模型開(kāi)發(fā)從“拼底層參數(shù)”轉(zhuǎn)向“爭(zhēng)場(chǎng)景落地”,這一工種的需求也在發(fā)生變化。標(biāo)注崗位不再像過(guò)去那樣“批量放量”,取而代之的是更垂直化的需求和更強(qiáng)的專(zhuān)業(yè)門(mén)檻。轉(zhuǎn)型成功的廖仔,和抽身離開(kāi)的蘇打,正是這股AI浪潮下的兩個(gè)典型注腳。
“擰螺絲”的三種姿勢(shì):
數(shù)據(jù)標(biāo)注師的隱秘分層
如果想要進(jìn)入AI行業(yè),數(shù)據(jù)標(biāo)注或許是最沒(méi)有門(mén)檻的一個(gè)崗位——在網(wǎng)絡(luò)上隨手就能找到一份兼職。
「定焦One」體驗(yàn)了一個(gè)眾包平臺(tái)的視頻審核兼職項(xiàng)目,任務(wù)是為自動(dòng)售貨機(jī)做數(shù)據(jù)標(biāo)注。正式上崗前,求職者先得進(jìn)群進(jìn)行一輪訓(xùn)練——為500條視頻進(jìn)行標(biāo)注,且正確率在90%以上才算通過(guò)考核。正式接單后,以計(jì)件形式收費(fèi),每單費(fèi)用在0.04元到0.1元浮動(dòng),標(biāo)錯(cuò)還會(huì)扣錢(qián)。
每個(gè)計(jì)件視頻長(zhǎng)度大概十來(lái)秒,需要辨別出顧客從自動(dòng)售貨機(jī)中拿走的商品種類(lèi)以及數(shù)量。任務(wù)看似簡(jiǎn)單,做起來(lái)卻并不容易。很多飲品、零食的包裝非常接近,加上夜晚光線(xiàn)干擾,極易誤判�!付ń筄ne」嘗試標(biāo)注了20條視頻,用時(shí)25分鐘,完全正確的只有14條。
群里負(fù)責(zé)培訓(xùn)的老師一再鼓勵(lì)大家:一開(kāi)始錯(cuò)誤率高是正常的,后面會(huì)越來(lái)越熟練、正確率越來(lái)越高,熟練后每天最多可做3000條視頻。
但做過(guò)類(lèi)似兼職的人在社交媒體抱怨:真的做不了太久,眼睛受不了。在那個(gè)標(biāo)記為11群的近200人大群內(nèi),不斷地有人退出、加入,就像一條永不停歇的虛擬流水線(xiàn)。
蘇打也在類(lèi)似的一個(gè)微信群里。
前不久,她在招聘平臺(tái)看到國(guó)內(nèi)某個(gè)大廠(chǎng)發(fā)布的數(shù)據(jù)標(biāo)注兼職崗位。專(zhuān)業(yè)不限、經(jīng)驗(yàn)不限,*的門(mén)檻是學(xué)歷——必須是985/211碩士及以上。
這份兼職是為大模型思考過(guò)程和輸出結(jié)果進(jìn)行打分。輸出結(jié)果的正確與否、是否照顧到了用戶(hù)的情緒、感受,以及思考過(guò)程是否符合邏輯且高效等等都需要納入考量。
蘇打通過(guò)篩選后,也被拉到了一個(gè)微信群。同樣的,在正式接單之前,需要先進(jìn)行培訓(xùn)和測(cè)試。
蘇打收到了一份長(zhǎng)達(dá)幾十頁(yè)的文件,詳細(xì)介紹了各個(gè)打分維度和評(píng)判標(biāo)準(zhǔn)。根據(jù)這個(gè)打分體系,她需要先進(jìn)行兩到三輪的試標(biāo),達(dá)標(biāo)后才可進(jìn)行接單。通過(guò)測(cè)試后,在正式的標(biāo)注過(guò)程中,也需保證正確率。如果正確率低于平均水平,便會(huì)失去標(biāo)注資格,需要重新測(cè)試。
據(jù)蘇打觀(guān)察,她所在群里測(cè)試的通過(guò)率并不高。
“這份工作的難點(diǎn)是記憶、理解的成本特別高。在標(biāo)注之前,你得先理解、記住他們的評(píng)價(jià)體系和打分標(biāo)準(zhǔn)。”更讓蘇打難受的是,這些標(biāo)準(zhǔn)并不是固定不變的。有時(shí)候,面對(duì)相似的問(wèn)題和回答,她用相同的思考方式去打分,結(jié)果卻截然相反。
就像是寫(xiě)沒(méi)有標(biāo)準(zhǔn)答案的一張張?jiān)嚲�,無(wú)法通過(guò)自我努力或?qū)W習(xí)提升正確率,只能原地不停得打轉(zhuǎn)、消耗自己的腦力和體力,最后獲得的報(bào)酬微乎其微。蘇打告訴「定焦One」,這份兼職也是按計(jì)件收費(fèi),標(biāo)注一件的費(fèi)用只有3-7元。
比蘇打幸運(yùn)一些,廖仔沒(méi)有這些嚴(yán)苛的KPI和考核標(biāo)準(zhǔn)。
廖仔參與標(biāo)注的是國(guó)內(nèi)另外一家互聯(lián)網(wǎng)大廠(chǎng)的外包項(xiàng)目。他領(lǐng)導(dǎo)著一個(gè)由10名標(biāo)注師組成的小組。項(xiàng)目里,有好幾個(gè)這樣的組別,對(duì)該大廠(chǎng)的大模型進(jìn)行評(píng)估、鑒定、指定標(biāo)注規(guī)則。廖仔會(huì)對(duì)每天需要標(biāo)注的任務(wù)進(jìn)行分配,再告訴組員具體的規(guī)則和評(píng)判標(biāo)準(zhǔn)確�?陀^(guān)性。除數(shù)據(jù)標(biāo)注之外,他還需跟算法團(tuán)隊(duì)、產(chǎn)品研發(fā)團(tuán)隊(duì)溝通,根據(jù)上下游反饋調(diào)整模型的評(píng)估和鑒定。
廖仔還是以咖啡機(jī)器人舉例,如果要AI制作咖啡,那么就需告訴它整個(gè)鏈路,包括咖啡樹(shù)如何種植、咖啡豆有哪些品類(lèi)、分子結(jié)構(gòu)如何、怎么研磨等等。通過(guò)每一步的數(shù)據(jù)標(biāo)注,對(duì)它進(jìn)行調(diào)校,然后再回歸到模型,讓它自主訓(xùn)練。
三種數(shù)據(jù)標(biāo)注工作可以大致勾勒出這個(gè)職業(yè)背后的隱形分層:自動(dòng)售貨機(jī)標(biāo)注,考驗(yàn)“體力+注意力”,靠重復(fù)和熟練提升效率;為大模型的思考過(guò)程和輸出結(jié)果打分,要求較強(qiáng)的理解力和記憶力,像在答一道道沒(méi)有標(biāo)準(zhǔn)答案的試卷;大模型評(píng)估,則在標(biāo)注之外承擔(dān)流程管理和溝通工作,具備一定自主性。
常有人將數(shù)據(jù)標(biāo)注比做AI流水線(xiàn)上的“螺絲釘”。在廖仔看來(lái),即便是擰螺絲釘,到他這一步,最起碼清楚了用什么工具擰、怎么擰效率會(huì)更高。
尷尬的崗位:
重要,但是廉價(jià)
站在產(chǎn)業(yè)鏈更上游的Jackson,能從更為完整的流水線(xiàn)上審視數(shù)據(jù)標(biāo)注的意義。
Jackson是海外一所名校研究生畢業(yè),現(xiàn)在在上海一家科技企業(yè)從事基礎(chǔ)模型訓(xùn)練工作。他告訴「定焦One」,模型訓(xùn)練主要包含三個(gè)部分:預(yù)訓(xùn)練、監(jiān)督微調(diào)和強(qiáng)化學(xué)習(xí)。
預(yù)訓(xùn)練所需的數(shù)據(jù)量動(dòng)輒十幾TB,主要來(lái)源于公開(kāi)爬蟲(chóng)數(shù)據(jù)、模型合成數(shù)據(jù)、第三方采購(gòu)數(shù)據(jù)或企業(yè)自有數(shù)據(jù)。這一階段對(duì)人工標(biāo)注的依賴(lài)較少。
數(shù)據(jù)標(biāo)注師主要介入的,是后兩個(gè)階段。
微調(diào)階段(Supervised Fine-Tuning,簡(jiǎn)稱(chēng)SFT)目標(biāo)是讓預(yù)訓(xùn)練后的通用語(yǔ)言模型適應(yīng)特定任務(wù)或?qū)υ?huà)場(chǎng)景,使其輸出更符合人類(lèi)期望。簡(jiǎn)而言之,就是輸入特定數(shù)據(jù)后,教會(huì)模型“如何回答”。
強(qiáng)化階段(Reinforcement Learning from Human Feedback,簡(jiǎn)稱(chēng)RLHF)的核心是利用人類(lèi)偏好數(shù)據(jù)優(yōu)化模型輸出質(zhì)量。
用再通俗一點(diǎn)的話(huà)解釋?zhuān)琒FT是要寫(xiě)出一個(gè)答案讓AI學(xué)習(xí)、模仿;而RLHF則是在A(yíng)I給出幾個(gè)答案后,幫助AI選擇一個(gè)更符合人類(lèi)偏好的答案。
廖仔大部分的工作都屬于前者,很難量化;蘇打的工作則是后者,可以計(jì)件考核。而像前文提到的自動(dòng)售貨機(jī)標(biāo)注這類(lèi)較為簡(jiǎn)單的數(shù)據(jù)收集工作,將很快被AI替代。
Jackson介紹,在微調(diào)和強(qiáng)化階段都可以使用一些自動(dòng)化手段,或是使用其他模型生成的數(shù)據(jù),但其內(nèi)容的多元性、正確性以及專(zhuān)業(yè)性可能不如人工標(biāo)注的數(shù)據(jù)。就像DeepSeek生成的內(nèi)容一眼就能看出來(lái)。
“*的效果肯定是全部由人工標(biāo)注,但(AI公司)老板們比起做個(gè)*的模型,更在意成本。能用模型合成一個(gè)次優(yōu)版本,也是可以接受的。”
據(jù)Jackson估算,一次完整的微調(diào)和強(qiáng)化訓(xùn)練多則需要幾十萬(wàn)條數(shù)據(jù),而且模型還會(huì)更新迭代,數(shù)據(jù)的需求也會(huì)成倍累積。據(jù)他觀(guān)察,目前國(guó)內(nèi)的大模型團(tuán)隊(duì)有財(cái)力做人工數(shù)據(jù)標(biāo)注的只有幾家*大廠(chǎng),其他團(tuán)隊(duì)大部分都是用別人的模型生成數(shù)據(jù)。
根據(jù)公開(kāi)資料,字節(jié)跳動(dòng)在A(yíng)I上的投入僅2024年就達(dá)到了800億,2025年這一數(shù)字還要翻番到1600億。今年2月,阿里巴巴集團(tuán)CEO吳泳銘宣布,未來(lái)三年,阿里將投入超3800億元用于建設(shè)云和AI硬件基礎(chǔ)設(shè)施。
但即便是這些頭部玩家,也必須在各環(huán)節(jié)精打細(xì)算。數(shù)據(jù)標(biāo)注作為成本可控的一環(huán),被大廠(chǎng)選擇以外包、眾包的形式進(jìn)行,成為常態(tài)。
蘇打每天兼職的工作量大概在3-4個(gè)小時(shí),她計(jì)算了一下時(shí)薪,也就30-60塊之間。蘇打說(shuō),這三四個(gè)小時(shí)必須全神貫注,一點(diǎn)水分也擠不出。這樣的一個(gè)付出和回報(bào),如果不是對(duì)這個(gè)行業(yè)感興趣真的很難堅(jiān)持下來(lái)。
但蘇打所在的微信群每天還在不斷進(jìn)人。“你不干,有的是人肯干,價(jià)格自然上不去。”
問(wèn)題的本質(zhì)不在于數(shù)據(jù)標(biāo)注不重要,而在于這類(lèi)工作缺乏技術(shù)壁壘。大模型的生成、優(yōu)化是一個(gè)非常精細(xì)化的過(guò)程。每一條數(shù)據(jù)就好像是布玩偶身上的一個(gè)針腳、斑馬身上的一根毛發(fā),很難辨析出其對(duì)于整體的意義。在這條流水線(xiàn)上,標(biāo)注師很難積累出個(gè)人能力上的“獨(dú)占優(yōu)勢(shì)”,非常容易被替代。
沒(méi)有壁壘,就難有議價(jià)能力。
從招聘網(wǎng)站公開(kāi)信息來(lái)看,兼職數(shù)據(jù)標(biāo)注師日薪多在120-500元之間,外包崗位月薪大部分在9-17K之間。幾家大廠(chǎng)的正式崗位,月薪則在15-25K之間。相對(duì)技術(shù)崗和算法崗,這樣的薪資水平并不算高。
被自己訓(xùn)練的AI替代:
誰(shuí)能突破金字塔?
因?yàn)闆](méi)有成長(zhǎng)性,蘇打最終放棄了兼職,也不打算再投任何數(shù)據(jù)標(biāo)注相關(guān)的崗位。為此,她還專(zhuān)門(mén)咨詢(xún)了一位從事AI數(shù)據(jù)標(biāo)注多年的朋友。
這位朋友在大模型爆火之前,便加入了國(guó)內(nèi)的一家大模型團(tuán)隊(duì),后來(lái)又跳槽去了另外一家大廠(chǎng)。朝陽(yáng)行業(yè)、高薪崗位,很多人羨慕她踩中了風(fēng)口,但她勸蘇打慎重投遞這個(gè)崗位。因?yàn)閿?shù)據(jù)標(biāo)注師職業(yè)發(fā)展空間有限,很難跳進(jìn)AI產(chǎn)業(yè)真正的核心環(huán)節(jié)。
Jackson也持類(lèi)似的觀(guān)點(diǎn)。
他用金字塔形容當(dāng)前AI從業(yè)者的階梯式分布:塔底是標(biāo)注,腰部是應(yīng)用,再往上是做微調(diào)和后訓(xùn)練,塔尖才是基礎(chǔ)模型設(shè)計(jì)和預(yù)訓(xùn)練。“現(xiàn)在基本上是背景決定一切,很難從塔底一層層向上突破。”
所謂的背景是指學(xué)歷和學(xué)術(shù)背景。譬如,很多崗位,學(xué)歷就是一個(gè)硬性門(mén)檻。Jackson分析,應(yīng)用層面需要本科學(xué)歷,微調(diào)和后訓(xùn)練階段碩士起步,基礎(chǔ)模型基本上都是博士。
就拿他所在的算法崗來(lái)說(shuō),找工作要看學(xué)歷、實(shí)習(xí)、比賽、論文若干個(gè)維度。AI圈尤其重視學(xué)術(shù)背景。如果沒(méi)有過(guò)硬的論文,即便是排名還不錯(cuò)的學(xué)校畢業(yè),也很難進(jìn)入大廠(chǎng)的AI團(tuán)隊(duì)。
“站在金子塔尖的,大部分是*學(xué)校的博士,還需要發(fā)很多論文的那種。”他總結(jié)。
與此同時(shí),標(biāo)注師們訓(xùn)練出來(lái)的模型本身,在悄然和標(biāo)注師展開(kāi)競(jìng)爭(zhēng)。會(huì)不會(huì)被AI取代,成為懸在標(biāo)注師們頭上的達(dá)摩克利斯之劍。
Jackson指出,在一些成熟的文本模型中,模型合成的數(shù)據(jù)已經(jīng)替代了80%的人工標(biāo)注。這背后的邏輯是,模型不強(qiáng)時(shí),對(duì)標(biāo)注的需求就大;標(biāo)注多了模型能力變強(qiáng)了,AI就會(huì)在這個(gè)任務(wù)或者這個(gè)領(lǐng)域把標(biāo)注師替代了。
在海外的一些高科技企業(yè),這樣的情況已經(jīng)發(fā)生。
據(jù)彭博社報(bào)道,蘋(píng)果公司于2024年1月關(guān)閉了一個(gè)與Siri人工智能業(yè)務(wù)相關(guān)的團(tuán)隊(duì)。他們?cè)矩?fù)責(zé)對(duì)用戶(hù)與Siri交互時(shí)產(chǎn)生的數(shù)據(jù)進(jìn)行監(jiān)聽(tīng)分析、標(biāo)注和理解用戶(hù)需求。同樣因?yàn)樽詣?dòng)標(biāo)注能力大幅改善,2022年6月,特斯拉裁撤了200名為其標(biāo)注視頻以改進(jìn)輔助系統(tǒng)的美國(guó)員工。
另一方面,大廠(chǎng)戰(zhàn)略的變化,也影響著數(shù)據(jù)標(biāo)注師的職業(yè)前景。
2023年初,基礎(chǔ)大模型是所有科技巨頭競(jìng)相投入的戰(zhàn)場(chǎng),百度、字節(jié)、阿里、騰訊等大廠(chǎng)商高調(diào)押注自研大模型,數(shù)據(jù)標(biāo)注一度成為不可或缺的基礎(chǔ)崗位。
但進(jìn)入2024年,這場(chǎng)競(jìng)賽明顯降溫。多家大廠(chǎng)陸續(xù)調(diào)整重心,開(kāi)始從“造更大參數(shù)的模型”,轉(zhuǎn)向“讓模型真正落地”。
這一轉(zhuǎn)向,也直接影響到數(shù)據(jù)標(biāo)注這一基礎(chǔ)工種的崗位供給與預(yù)算安排。于是,用于支持基礎(chǔ)大模型訓(xùn)練的數(shù)據(jù)標(biāo)注需求可能被壓縮。未來(lái)企業(yè)需要的將不再是成千上萬(wàn)“能標(biāo)數(shù)據(jù)的人”,而是“懂業(yè)務(wù)、懂模型的人”。
當(dāng)然,需求并未完全消失。一方面,Jackson解釋?zhuān)S著AI技術(shù)的發(fā)展、大模型進(jìn)一步落地將會(huì)產(chǎn)生大量的應(yīng)用場(chǎng)景。每當(dāng)有新的場(chǎng)景出現(xiàn),就需要找人標(biāo)注數(shù)據(jù)。數(shù)據(jù)標(biāo)注的需求仍將長(zhǎng)期、大量存在。另一方面,根據(jù)清華大學(xué)發(fā)布的《智能數(shù)據(jù)產(chǎn)業(yè)發(fā)展觀(guān)察報(bào)告》,2024年數(shù)據(jù)標(biāo)注產(chǎn)業(yè)有用工需求的企業(yè)從2023年的457家升至1195家。另?yè)?jù)IDC數(shù)據(jù)測(cè)算,2025年中國(guó)人工智能基礎(chǔ)數(shù)據(jù)服務(wù)市場(chǎng)規(guī)模將突破120億元,2019-2025年年均復(fù)合增長(zhǎng)率(CAGR)約為47%。
只不過(guò),這些增長(zhǎng)更多屬于“橫向增量”——也就是新場(chǎng)景帶來(lái)的數(shù)據(jù)標(biāo)注需求擴(kuò)容,而非“標(biāo)注師”作為工種本身的上升通道被打開(kāi)。對(duì)絕大多數(shù)從業(yè)者而言,他們所做的,依然是為流水線(xiàn)打工。
已經(jīng)被AI“搶”過(guò)一次飯碗的廖仔對(duì)自己的職業(yè)未來(lái)充滿(mǎn)信心。
在來(lái)北京之前,廖仔在上海的一家設(shè)計(jì)公司做了兩年設(shè)計(jì)師。那時(shí)候,AI對(duì)于設(shè)計(jì)行業(yè)的沖擊已經(jīng)開(kāi)始,廖仔所在的公司也不得不向AI轉(zhuǎn)型,決定做一個(gè)客服類(lèi)大模型。他主動(dòng)請(qǐng)纓參與其中,這個(gè)AI項(xiàng)目為他打開(kāi)了新世界大門(mén)。
后來(lái),他從公司離職,對(duì)AI進(jìn)行了更為系統(tǒng)的學(xué)習(xí)。今年春節(jié)后,他入職了現(xiàn)在的公司。每天下班不管多晚,廖仔都會(huì)學(xué)習(xí)兩個(gè)小時(shí)AI相關(guān)的內(nèi)容,他還開(kāi)了一個(gè)小紅書(shū)賬號(hào)“炸毛瘋兔”,記錄AI心得。
“凡事發(fā)生,皆有利于我。”在交流時(shí),廖仔一再引用這句古語(yǔ)。
咖啡店的工作人員時(shí)不時(shí)會(huì)送來(lái)一些新品試吃,服務(wù)細(xì)致妥帖。而引人注目的咖啡機(jī)器人一下午并沒(méi)有沖調(diào)一杯咖啡。最起碼現(xiàn)階段,機(jī)器人對(duì)這家咖啡館而言,更多是一個(gè)裝飾品。盡管未來(lái)不可控,但人的主動(dòng)性始終是關(guān)鍵。
榜單收錄、高管收錄、融資收錄、活動(dòng)收錄可發(fā)送郵件至news#citmt.cn(把#換成@)。
海報(bào)生成中...