
来源:X增强现实
马斯克为了探寻“宇宙的真实本质”刚刚成立了xAI,而有些人则为了探寻真相,写了一篇论文证实被马斯克视为竞争对手的OpenAI推出的GPT4正在变笨。
GPT4真的变笨了吗?
近日,Twitter的热点话题之一是关于GPT-4的性能下降,人们认为它开始变得“难用”。OpenAI的产品副总裁公开表示,他们并没有让GPT-4更蠢,相反,每一个新版本都比前一个版本更智能。所谓的变笨错觉可能是由于更频繁地使用它,暴露出以前未曾注意到的问题。

为了验证GPT-4是否真的变笨,斯坦福的华人教授James Zou及其学生Lingjiao Chen以及伯克利的计算机科学教授Matei Zaharia发布了一篇论文,通过实验测试得出结论,即GPT-4的性能确实下降了。
该论文通过数学问题、敏感问题、 生成代码、视觉推理四个任务对比GPT-3.5和GPT-4的2023年3月版和6月版的生成结果,发现这两个模型在一些指标上的表现变得更差,尤其是GPT-4在求解数学问题上的准确度出现断崖式下降——从3月版的97.6%降至6月版的仅2.4%。

尽管该论文得到了一部分网友的认可,但也有些网友认为论文的结果过于简单化,其中的方法值得怀疑。然而,无疑地,对于大模型的发展来说,若它的性能被质疑,将会影响其商业落地,对大模型的发展不利。
在大模型的商业应用中,性能和稳定性是至关重要的。若模型的性能受到广泛质疑,可能会导致用户的信任问题,进而影响到商业合作的顺利进行。
这也是作者之一的Matei Zaharia研究的意义,毕竟他的另一个身份是AI 数据公司 Databricks 的CTO。
在大模型时代,百家争鸣,科技巨头都想通过这一次科技变革站在时代巅峰,马斯克成立xAI也是如此。他预测AIGC将在2029年成为现实,并认为AIGC的出现是不可避免的,只有两个选择,旁边与参与。作为旁观者,没有影响力,而作为参与者,则可以创造一种竞争性的替代方案,希望xAI能比谷歌 DeepMind、OpenAI 或微软更好。
资本如何评价AIGC
最后,莎拉·郭和马库斯都强调了警惕炒作的重要性,必须要分辨人工智能营销和真实的人工智能应用。在考虑任何潜在投资时,仔细进行尽职调查是至关重要的。一家企业的护城河以及技术、数据优势是决定其成功与否的关键因素。




