GPT-4 替代初級(jí)數(shù)據(jù)分析師的成本只有 0.71%，換成高級(jí)數(shù)據(jù)分析師則是 0.45%……

你沒(méi)看錯(cuò)，是百分之零點(diǎn)七一，不是百分之七十一。

按新加坡行情，年薪 8.6 萬(wàn)-9 萬(wàn)美元 (60-63 萬(wàn)人民幣）的高級(jí)數(shù)據(jù)分析師，換成 GPT-4 就只需要三四百美元（2000 多人民幣）了。

這項(xiàng)結(jié)論來(lái)自阿里達(dá)摩院與新加坡南洋理工大學(xué)的新論文，被網(wǎng)友評(píng)價(jià)為對(duì) AI 和數(shù)據(jù)分析領(lǐng)域感興趣的必讀論文。

具體來(lái)說(shuō)，結(jié)論中高級(jí)分析師指在金融行業(yè)擁有多年工作經(jīng)驗(yàn)的數(shù)據(jù)分析師。

而 GPT-4 的表現(xiàn)，在大多數(shù)指標(biāo)上能與一位 6 年工作經(jīng)驗(yàn)的人類相當(dāng)，正確性低于人類，但復(fù)雜性和一致性指標(biāo)高于人類。

在與另一位 5 年工作經(jīng)驗(yàn)的分析師對(duì)比中，GPT-4 在信息的正確性、圖表的美觀性、洞察的復(fù)雜性等方面輸給人類。

如果與 2 年工作經(jīng)驗(yàn)的初級(jí)分析師對(duì)比，GPT-4 在正確性上表現(xiàn)更好，而且能完成更多的工作。

但 GPT-4 完成所有類型的任務(wù)都要比人類快得多。

在假設(shè)每個(gè)月有 21 個(gè)工作日，每天 8 小時(shí)工作時(shí)間，按市場(chǎng)價(jià)支付工資的前提下，得出最終結(jié)論。

GPT-4 當(dāng)數(shù)據(jù)分析師，都能干什么

論文重點(diǎn)考察了 GPT-4 作為數(shù)據(jù)分析師的以下幾種能力：

• 生成 SQL 和 Python 代碼

• 執(zhí)行代碼獲得數(shù)據(jù)和圖表

• 從數(shù)據(jù)和外部知識(shí)源中分析數(shù)據(jù)，得出結(jié)論

200 個(gè)樣本的實(shí)驗(yàn)表明，對(duì)于繪制圖表任務(wù)，GPT-4 能夠理解指令含義，且對(duì)圖表類型有一定背景知識(shí)，從而繪制出正確的圖表。

圖表大部分清晰可見(jiàn)，沒(méi)有任何格式錯(cuò)誤，圖標(biāo)的美觀性指標(biāo)滿分 3 分，GPT-4 平均得分 2.73。

但手工檢查還是能發(fā)現(xiàn)一些小錯(cuò)誤，圖表準(zhǔn)確性指標(biāo)滿分 1 分，GPT-4 平均得分 0.78。

論文中特別說(shuō)明他們的評(píng)估標(biāo)準(zhǔn)非常嚴(yán)格，只要 x 軸或 y 軸的任何數(shù)據(jù)或任何標(biāo)簽有錯(cuò)誤，都要扣分。

對(duì)于數(shù)據(jù)分析任務(wù)，GPT-4 在一致性和流暢性中平均得到滿分，驗(yàn)證了生成流暢且語(yǔ)法正確的句子對(duì) GPT-4 來(lái)說(shuō)絕對(duì)不是問(wèn)題。

有意思的是，到了數(shù)據(jù)分析這一步的準(zhǔn)確性要比圖表信息的準(zhǔn)確性高得多，說(shuō)明盡管 GPT-4 畫了錯(cuò)誤的圖表但分析出了正確的結(jié)論。

在案例分析中，研究團(tuán)隊(duì)還總結(jié)出三條 GPT-4 與人類數(shù)據(jù)分析師的主要區(qū)別：

• 人類分析師可以用個(gè)人思想和情感來(lái)表達(dá)，比如在分析時(shí)寫“令人驚訝的是……”；人類讀者容易從這樣的表述中理解數(shù)據(jù)是符合預(yù)期還是不正常的。

• 人類分析師傾向于結(jié)合背景知識(shí)得出結(jié)論，如寫到“…… 常見(jiàn)于……”；GPT-4 通常只關(guān)注提取到的數(shù)據(jù)本身，允許 GPT-4 上網(wǎng)搜索實(shí)時(shí)在線信息可以改善這一點(diǎn)。

• 當(dāng)提供見(jiàn)解或建議時(shí)，人類分析師傾向于保守，如聲明“假如數(shù)據(jù)沒(méi)有問(wèn)題的話……”；GPT-4 會(huì)以自信的語(yǔ)氣直接給出建議，不會(huì)提及假設(shè)。

另外團(tuán)隊(duì)表示，由于預(yù)算有限，主要是雇一個(gè)來(lái)與 GPT-4 對(duì)比的高級(jí)分析師太貴了，人工評(píng)估和數(shù)據(jù)標(biāo)注的數(shù)量相對(duì)較少。

在最后的結(jié)論則是：

實(shí)驗(yàn)結(jié)果和分析表明，GPT-4 在數(shù)據(jù)分析上有與人類相當(dāng)?shù)男阅埽欠窨梢匀〈鷶?shù)據(jù)分析師需要近一步研究才能得出結(jié)論。

論文：

https://arxiv.org/abs/2305.15038

本文來(lái)自微信公眾號(hào)：量子位 （ID：QbitAI），作者：夢(mèng)晨

總結(jié)

以上是生活随笔為你收集整理的阿里达摩院：GPT-4 替代年薪 60 万的数据分析师只要几千块，论文已发的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。