阿里达摩院：GPT

GPT-4 替换低级数据合成师的阿里老本惟独 0.71%  ，换成低级数据合成师则是达摩 0.45%……

你没看错 ，是阿里百分之零点七一，不是达摩百分之七十一。

按新加坡行情
，阿里年薪 8.6 万-9 万美元 (60-63 万国夷易近币）的达摩低级数据合成师 ，换成 GPT-4 就惟独要三四百美元（2000 多国夷易近币）了
。阿里

这项论断来自阿里达摩院与新加坡南洋理工大学的达摩新论文，被网友评估为对于 AI 以及数据合陋习模感兴趣的阿里必读论文。

详细来说，达摩论断中低级合成师指在金融行业具备多年使命履历的阿里数据合成师。

而 GPT-4 的达摩展现，在大少数目的阿里上能与一位 6 年使命履历的人类至关，精确性低于人类
，达摩但重大性以及不同性目的阿里高于人类  。

在与另一位 5 年使命履历的合成师比力中 ，GPT-4 在信息的精确性、图表的美不雅性、洞察的重大性等方面输给人类 。

假如与 2 年使命履历的低级合成师比力，GPT-4 在精确性上展现更好，而且能实现更多的使命。

但 GPT-4 实现所有规范的使命都要比人类快良多。

在假如每一个月有 21 个使命日 ，天天 8 小时使命光阴，按市场价支出人为的条件下 ，患上出最开幕论 。

论文重点审核了 GPT-4 作为数据合成师的如下多少种能耐 ：

200 个样本的试验表明 ，对于绘制图表使命，GPT-4 可能清晰指令寄义 
，且对于图表规范有确定布景知识，从而绘制出精确的图表 。

图表大全副清晰可见，不任何格式过错 ，图标的美不雅性目的满分 3 分，GPT-4 平均患上分 2.73。

但手工魔难仍是能发现一些小过错，图表精确性目的满分 1 分，GPT-4 平均患上分 0.78。

论文中特意剖析他们的评估尺度颇为严厉，惟独 x 轴或者 y 轴的任何数据或者任何标签有过错，都要扣分。

对于数据合成使命，GPT-4 在不同性以及流利性中平均患上到满分，验证了天生流利且语法精确的句子对于 GPT-4 来说相对于不是下场。

专神思的是，到了数据合成这一步的精确性要比图表信息的精确性高良多，剖析尽管 GPT-4 画了过错的图表但合成出了精确的论断
。

在案例合成中
，钻研团队还总结出三条 GPT-4 与人类数据合成师的主要差距
：

此外团队展现
，由于估算有限 
，次若是雇一个来与 GPT-4 比力的低级合成师太贵了 ，家养评估以及数据标注的数目相对于较少 。

在最后的论断则是 ：

论文：

https://arxiv.org/abs/2305.15038

本文来自微信公共号：量子位 （ID：QbitAI），作者 ：梦晨