梦晨 发自 凹非寺 量子位 | 大众号 QbitAI

GPT-4替代初级数据剖析师的本钱只要0.71%,换成高档数据剖析师则是0.45%……

你没看错,是百分之零点七一,不是百分之七十一。

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

按新加坡行情,年薪8.6万-9万美元(60-63万人民币) 的高档数据剖析师,换成GPT-4就只需求三四百美元(2000多人民币)了。

这项定论来自阿里达摩院新加坡南洋理工大学的新论文,被网友评价为对AI和数据剖析范畴感兴趣的必读论文。

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

具体来说,定论中高档剖析师指在金融行业拥有多年作业经验的数据剖析师。

而GPT-4的体现,在大多数目标上能与一位6年作业经验的人类适当,正确性低于人类,但复杂性和一致性目标高于人类。

在与另一位5年作业经验的剖析师比照中,GPT-4在信息的正确性、图表的漂亮性、洞悉的复杂性等方面输给人类。

如果与2年作业经验的初级剖析师比照,GPT-4在正确性上体现更好,而且能完成更多的作业。

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

但GPT-4完成一切类型的使命都要比人类快得多。

在假定每个月有21个作业日,每天8小时作业时间,按市场价支付薪酬的前提下,得出终究定论。

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

GPT-4当数据剖析师,都能干什么

论文要点调查了GPT-4作为数据剖析师的以下几种能力:

  • 生成SQL和Python代码
  • 履行代码获得数据和图表
  • 从数据和外部常识源中剖析数据,得出定论

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

200个样本的试验标明,对于制作图表使命,GPT-4能够了解指令含义,且对图表类型有必定布景常识,然后制作出正确的图表。

图表大部分清晰可见,没有任何格局过错,图标的漂亮性目标满分3分,GPT-4均匀得分2.73。

但手艺检查仍是能发现一些小过错,图表准确性目标满分1分,GPT-4均匀得分0.78。

论文中特别说明他们的评估标准非常严格,只要x轴或y轴的任何数据或任何标签有过错,都要扣分。

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

对于数据剖析使命,GPT-4在一致性和流通性中均匀得到满分,验证了生成流通且语法正确的句子对GPT-4来说绝对不是问题。

有意思的是,到了数据剖析这一步的准确性要比图表信息的准确性高得多,说明尽管GPT-4画了过错的图表但剖析出了正确的定论。

阿里达摩院:GPT-4替代年薪60万的数据分析师只要几千块,论文已发

在事例剖析中,研讨团队还总结出三条GPT-4与人类数据剖析师的首要区别:

  • 人类剖析师能够用个人思想和情感来表达,比如在剖析时写“令人惊讶的是……”;人类读者简单从这样的表述中了解数据是符合预期仍是不正常的。
  • 人类剖析师倾向于结合布景常识得出定论,如写到“……常见于……”;GPT-4一般只重视提取到的数据自身,允许GPT-4上网搜索实时在线信息能够改进这一点。
  • 当供给见解或建议时,人类剖析师倾向于保存,如声明“假如数据没有问题的话……”;GPT-4会以自傲的口气直接给出建议,不会提及假定。

别的团队标明,因为预算有限,首要是雇一个来与GPT-4比照的高档剖析师太贵了,人工评估和数据标注的数量相对较少。

在最终的定论则是:

试验结果和剖析标明,GPT-4在数据剖析上有与人类适当的功能,但是否能够取代数据剖析师需求近一步研讨才能得出定论。

论文:
arxiv.org/abs/2305.15…