DeepMind 联合创始人透露:OpenAI 正在秘密研发 GPT-5,模型规模将比现有模型增大 100 倍。

GPT-5 依然处于秘密的培训阶段!DeepMind 联合创始人最近在一次采访中揭示,在接下来的三年内,Inflection 模型的规模将比当前的 GPT-4 增大1000倍。DeepMind 联合创始人透露:OpenAI 正在秘密研发 GPT-5,模型规模将比现有模型增大 100 倍。_图1

DeepMind 联合创始人 Mustafa Suleyman,现 Inflection AI 的 CEO 最近在采访时投出了重磅炸弹:

我认为我们都直截了当地说会更好。这就是为什么我们公开了我们的计算能力。

在未来的18个月里,Inflection AI 训练的模型将比当前的顶尖模型大100倍。而在未来3年内,Inflection的模型将比现在大1000倍。

DeepMind 联合创始人透露:OpenAI 正在秘密研发 GPT-5,模型规模将比现有模型增大 100 倍。_图2

实际上,之前 Sam Altman 曾否认正在训练 GPT-5 这一说法。有网友表示,OpenAI 可能只是为这一模型起了一个新的名字,所以他们才否认了训练 GPT-5。

这就像当初 Code Interpreter 推出时一样,很多人感觉它的能力已经超越了 GPT-4 模型,更像是 GPT-4.5。DeepMind 联合创始人透露:OpenAI 正在秘密研发 GPT-5,模型规模将比现有模型增大 100 倍。_图3

此外,在采访中,Suleyman 还分享了在 DeepMind 和 Inflection AI 工作期间的内部信息,包括谷歌收购 DeepMind 以及随后的发展过程,这在某种程度上解释了为什么 DeepMind 相对于 OpenAI "起步早,走得慢"。

他还强调了开源模型可能加剧 AI 带来的不稳定性和潜在风险,而对于AI安全性最大的担忧源头并不在于大型语言模型,而在于未来可能出现的自主智能体。

访谈全文

在被问及未来是否有可能出现具有自主进化能力的AI时,Suleyman认为:

在短期内,出现这种具备自主运行、制定自身目标、识别新信息和奖励信号、自我监督并随时间更新自身权重的人工智能体并不太可能。

然而,他也警告称,这种具备自主进化能力的AI是一个不容忽视的概念,因为如果某种AI技术真的展现出这种潜力,它可能会带来极大的潜在风险。

他强调,据他所知,Inflection AI 和 DeepMind 目前并没有朝着这个方向发展。

DeepMind 联合创始人透露:OpenAI 正在秘密研发 GPT-5,模型规模将比现有模型增大 100 倍。_图4

Inflection AI 并非一家AGI(人工通用智能)公司,他们的目标是创建一个非常实用的个人助理。这个助理将在充分获得用户个人信息的前提下,提供高度个性化的AI服务。

模型训练军备竞赛会加剧 AI 的风险吗?

他的公司,Inflection AI,正在建造世界上最大的超级计算机之一。他表示,在接下来的18个月内,他们可能会进行一次比制造GPT-4的语言模型训练运行大10倍或100倍的训练运行。

当被问及这种军备竞赛式的模型训练是否会增加AI风险时,他回答道:

进行100倍训练仍然会产生一个聊天机器人,可以理解为一个更强大的GPT-4。尽管这将会是一个令人印象深刻的模型,但并不会带来危险,因为它仍然缺乏自主性,不能改变物理世界等使模型自身成为威胁的要素。

仅仅生产一个非常出色的、更强大的GPT-4并不构成危险;要使其变得危险,还需要增加其他能力,例如自我迭代和自我制定目标等。而这可能需要五年、十年、十五年或甚至更长的时间来实现。

DeepMind 联合创始人透露:OpenAI 正在秘密研发 GPT-5,模型规模将比现有模型增大 100 倍。_图5


Suleyman认为,Sam Altman最近说他们没有训练GPT-5可能没有说实话(Come on. I don’t know. I think it’s better that we’re all just straight about it.)。

他期望所有拥有大规模算力的公司都能尽可能保持透明,这也是他们披露自己拥有的计算总量的原因。

他们目前正在训练比GPT-4更大的模型。目前,他们拥有6000台H100正在进行模型训练。

截止到12月,他们计划投入全面运营的H100数量将达到22,000台。从现在开始,每个月将继续增加1000到2000台H100。

他还认为,谷歌DeepMind也应该采取同样的透明做法,披露Gemini接受了多少FLOPS的训练。