群发资讯网

GPT‑6 Astra刚发布就翻车!GPT‑6官方跑分多次改动,大模型开始也开始了“应试刷分”? OpenAI刚刚发布新一代旗舰GPT‑6 Astra,布罗克曼直接宣告AGI时代到来,公布的跑分数据近乎满分,数学、推理测试成绩惊艳全网。 但是发布短短数小时,官网上面的评测数据被多次修改。幻觉

GPT‑6 Astra刚发布就翻车!GPT‑6官方跑分多次改动,大模型开始也开始了“应试刷分”?

OpenAI刚刚发布新一代旗舰GPT‑6 Astra,布罗克曼直接宣告AGI时代到来,公布的跑分数据近乎满分,数学、推理测试成绩惊艳全网。

但是发布短短数小时,官网上面的评测数据被多次修改。幻觉率数值前后两个版本差异巨大,甚至竞品模型的测试分数也被压低,截图证据被大量网友留存对峙。

更尴尬的是:换用第三方独立平台评测之后,GPT‑6的成绩立刻大幅下滑,和官方满分成绩单形成巨大反差。

这是因为现在各大AI厂商,都在自家定制的测试集上面疯狂优化,相当于为自家模型订制了一份模型测试,分数自然很高,真实能力却要打个问号。

当然,GPT‑6 Astra的能力还是很强的,只不过进步没有想像中的大,至于步入AGI时代可能还得一段时间,说到底,刻意美化数据还是想让大众相信,然后接盘罢了人工GPT-6 GPT-6的发布会带来哪些影响