猛料!GPT-5 可能被雪藏:AI发展或已转向

 

这两天关于GPT-5的传闻越来越多了,但它似乎与我们渐行渐远。博主Alberto Romerox提出一个大胆而又很有意思的猜想:OpenAI可能已经秘密构建了GPT-5,并将其作为内部工具使用,而非公开发布。这种做法并非为了金钱,而是为了其他更重要的战略目标。这篇深度分析将尝试连接散落在各处的线索,揭示这一可能的真相

一、Opus 3.5的神秘消失

在探讨GPT-5之前,我们需要先了解Anthropic的Claude Opus 3.5的经历。作为顶尖AI实验室,OpenAI、谷歌DeepMind和Anthropic都提供不同性能和价格的模型。然而,在2024年10月,Anthropic并未如预期般发布Claude Opus 3.5,而是更新了Claude Sonnet 3.5(被称为Sonnet 3.6)。关于Opus 3.5的传言四起,先是有人认为其训练失败,后又有消息称Anthropic战略性地隐藏了它

最终,半导体专家Dylan Patel的团队揭示了真相:Anthropic确实训练了Opus 3.5,但它并未达到预期效果。因此,他们并未公开发布,而是利用Opus 3.5生成的合成数据和奖励模型来大幅提升Sonnet 3.5的性能

二、更好、更小、更便宜?

这种利用强大模型提升较弱模型性能的做法被称为“蒸馏”。通过蒸馏,AI实验室能够将小型模型提升到仅靠预训练无法达到的水平。Anthropic正是通过这种方式,使Sonnet 3.6的性能大幅提升,甚至超越了OpenAI的GPT-4o。

这一现象打破了“越大越好”的传统观念。OpenAI的CEO Sam Altman早已警告过,参数数量不再是衡量模型性能的可靠指标。如今,最新的模型不仅性能更强,而且规模更小、成本更低。OpenAI似乎也遵循着类似的路线。那么,他们是如何做到的呢?

三、AI实验室面临的共同挑战

Anthropic的蒸馏策略并非个例。实际上,OpenAI和谷歌DeepMind在最近的训练中也遇到了类似的问题。原因可能包括数据不足、transformer架构的局限性以及预训练缩放定律的停滞。同时,由于ChatGPT/GPT-4的爆炸式增长,AI实验室面临着巨大的运营压力,降低推理成本成为当务之急。

蒸馏技术恰好能应对这些挑战:通过使用较小的模型来降低推理成本,并通过不发布较大的模型来避免公众对性能不佳的负面反应。Ege Erdil认为,OpenAI可能也采取了类似的策略,利用大型模型来蒸馏出更小、更强的模型。那么,OpenAI的隐藏模型又在哪里?它会是GPT-5吗?

四、先行者必须开辟道路

OpenAI作为AI领域的先行者,可能面临着其竞争对手尚未遇到的挑战,例如训练GPT-5的硬件要求。训练GPT-5可能耗资数亿美元,但Ege Erdil认为这在技术上是可行的。关键在于,如此庞大的模型并不适合向公众提供服务。因此,OpenAI可能已经训练了GPT-5,但将其内部保留,用于蒸馏较小的模型,就像Anthropic处理Opus 3.5一样。这与《华尔街日报》对GPT-5的报道不谋而合

五、Altman的更多理由

除了成本和性能方面的考虑,OpenAI可能还有其他理由不发布GPT-5。一个重要的因素是与微软的合作协议中的“AGI条款”。根据该条款,一旦OpenAI宣布实现了AGI(通用人工智能),该技术将不再属于与微软的授权协议范围。为了避免触发这一条款,OpenAI可能选择推迟发布可能被认为是AGI的系统

更重要的是,OpenAI和微软之间有一个秘密的AGI定义:一个能够产生至少1000亿美元利润的AI系统。如果OpenAI认为GPT-5能够达到这个水平,他们可能根本不介意触发AGI条款,与微软分道扬镳。这表明OpenAI并非为了赚钱,而是为了追求AGI,最终实现ASI(超人工智能)

六、这一切如何改变一切

最终,所有的证据都指向一个可能性:OpenAI很可能秘密拥有GPT-5,就像Anthropic的Opus 3.5一样。而且,OpenAI可能永远不会公开发布GPT-5。他们将继续训练新的基础模型,并将这些模型用作内部工具,以生成更多数据来改进下一代模型。

这意味着,我们可能永远无法直接体验到GPT-5的强大功能,但我们将感受到它带来的影响。OpenAI可能正在启动一个递归的自我改进过程,他们将因此变得越来越强大,而我们能接触到的只是冰山一角。

或许,这就是OpenAI在短短三个月内从o1跳到o3的原因。他们可能已经找到了新的运作模式,我们看到的只是他们不断进步的冰山一角。

你真的以为接近AGI意味着我们可以使用越来越强大的AI吗?这或许只是我们的臆想。他们已经说过,他们的模型将把他们推向一个无人能及的高度。每一代新模型都是一个“逃逸速度”引擎,他们可能已经远远超越我们,向我们挥手告别了

写在最后:

AI的未来可能不是我们想象的那样,而是由少数精英掌控,他们利用内部工具不断改进模型,并逐步拉开与大众的差距。这对我们每个人来说,都意味着一次深刻的变革

参考:

https://freedium.cfd/https://albertoromgar.medium.com/this-rumor-about-gpt-5-changes-everything-f49e4af8efd5

 

(文:AI寒武纪)

发表评论