5 月 24 日，阿里達摩院發(fā)布了一個關(guān)于用 GPT-4 取代數(shù)據(jù)分析師的成本核算的研究論文。

該論文指出：“除了所有數(shù)據(jù)分析師和 GPT-4 之間的可比績效外，我們可以注意到 GPT-4 所花費的時間要比人類數(shù)據(jù)分析師短得多。我們假設(shè)每個月有大約 21 個工作日，每天工作 8 小時左右，并根據(jù)每個級別的數(shù)據(jù)分析師所花費的平均時間計算出每個實例在美元方面的成本。GPT4 的成本約為初級數(shù)據(jù)分析員成本的 0.71％和高級數(shù)據(jù)分析員成本的 0.45％。”

這篇來自阿里達摩院與新加坡南洋理工大學(xué)的新論文，主要探討了 GPT-4 能否做好數(shù)據(jù)分析師的工作，論文標(biāo)題為“Is GPT-4 a Good Data Analyst?”

該論文重點考察了 GPT-4 作為數(shù)據(jù)分析師的以下幾種能力：

生成 SQL 和 Python 代碼；

執(zhí)行代碼獲得數(shù)據(jù)和圖表；

從數(shù)據(jù)和外部知識源中分析數(shù)據(jù)，得出結(jié)論。

在 5.3 節(jié)“主要結(jié)果”中，該論文指出，GPT-4 的表現(xiàn)，在大多數(shù)指標(biāo)上能與一位金融行業(yè)工作 6 年的人類相當(dāng)，正確性低于人類，但復(fù)雜性和一致性指標(biāo)高于人類。在與另一位 5 年工作經(jīng)驗的分析師對比中，GPT-4 在信息的正確性、圖表的美觀性、洞察的復(fù)雜性等方面輸給人類。如果與 2 年工作經(jīng)驗的初級分析師對比，GPT-4 在正確性上表現(xiàn)更好，而且能完成更多的工作。

雖然在高級數(shù)據(jù)分析任務(wù)中，GPT-4 目前的準(zhǔn)確性低于人類，但是勝在成本便宜。

也就是說，根據(jù)實驗結(jié)果和分析，GPT-4 在數(shù)據(jù)分析上有與人類相當(dāng)?shù)男阅埽欠窨梢匀〈鷶?shù)據(jù)分析師需要近一步研究才能得出結(jié)論。

論文地址：https://arxiv.org/abs/2305.15038