> 自媒体 > AI人工智能 > GPT-5正秘密训练!DeepMind联创爆料,这模型比GPT-4大100倍
GPT-5正秘密训练!DeepMind联创爆料,这模型比GPT-4大100倍
来源:新智元
2023-09-07
175
管理

编辑:润 桃子

【新智元导读】GPT-5仍在秘密训练中!DeepMind联合创始人在近日采访中透露,未来3年,Inflection模型要比现在的GPT-4大1000倍。

近来,DeepMind联合创始人Mustafa Suleyman,现Inflection AI的CEO,在采访时投出了重磅炸弹:

OpenAI正在秘密训练GPT-5。

我认为我们都直截了当地说会更好。这就是为什么我们披露了拥有的计算总量。

在未来18个月内,Inflection AI训练的模型比当前的前沿模型大100倍。未来3年内,Inflection的模型比现在大1000倍。

其实,Sam Altman此前曾否认训练GPT-5的这一说法。

对此,网友表示,OpenAI可能给它起了一个新名字,所以他们才说没有训练GPT-5。

这就像当时Code Interpreter推出一样,许多人感觉其能力早已不是GPT-4模型,而应该是GPT-4.5。

另外,采访中,Suleyman还爆出了很多自己在DeepMind和Inflection AI工作时的内部信息,包括了谷歌当时收购DeepMind和之后的抓马,某种程度上解释了为什么DeepMind相比于OpenAI「起了个大早,却赶了个晚集」。

他还认为,开源模型可能会增加AI带给人类的不稳定和危害。

而AI安全性最大的威胁来源并不是大语言模型,而是未来可能出现的自主智能体。

访谈全文

当被问到未来AI是否有可能会成为一个有自主进化能力的智能体时,Suleyman认为:

在短期之内,不太可能出现这种智能体——能够自主运行,能够制定自己的目标,能够识别环境中的新信息、新的奖励信号,并学会用它作为自我监督,并且随着时间的推移更新自己权重的人工智能体。

但是这种自主进化能力的AI是所有人都不应该忽视的东西,因为如果某种AI技术真的展现出这种能力的,它可能会有非常大的潜在风险。

至少他知道的范围之内,Inflection AI和DeepMind都没有在往这个方向上走。

这是一个相当痛苦的过程。虽然他认为谷歌的出发点是好地,但它运作的方式仍然像传统的官僚机构一样。

当我们设立了谷歌的伦理委员会时,计划有九名独立成员,是对于开发敏感技术过程中进行外部监督的重要措施。

但因为任命了一个保守派人士,而她过去曾发表过一些有争议的言论,很多网友就在推特等场合抵制她,同时也抵制其他支持她的几个成员,要求他们退出委员会。

这是一场彻底的悲剧,非常令人沮丧。我们花了两年时间来建立这个委员会,这是朝着对我们正在开发的非常敏感的技术进行外部审查的第一步。

不幸的是,在一周内,九名成员中的三名辞职了,最终她也辞职了,然后我们失去了半数委员会成员。

然后公司转身说:「我们为什么要招人来限制自己?这纯粹是浪费时间。」

其实,当DeepMind被收购时,我们提出了收购的条件,即我们要有一个伦理和安全委员会。

我们计划在伦理和安全委员会之后,我们要将DeepMind打造成一个全球利益公司:一个所有利益相关者在做决策时都能发声的公司。

它是一个按担保有限责任公司设立的公司。然后,我们计划制定一个宪章,为AGI的开发制定相关的伦理安全的目标;这样使得我们可以将收入的大部分用于科学和社会使命。

这是一个非常有创意和实验性的结构。但是当Alphabet看到设立伦理委员会发生的事情时,他们变得胆怯了。他们说:「这完全疯了。你们的全球利益公司也会发生同样的事情。为什么要那样做?」

最终,我们将DeepMind合并进入到了谷歌,从某种程度上说,DeepMind从未独立过——现在当然也完全从属于谷歌。

谷歌下一代大模型Gemini

The Information独家报道称,谷歌多模态人工智能模型Gemini即将面世,直接对标OpenAI的GPT-4。

其实,在今年谷歌I/O大会上,劈柴已经向大众宣布,谷歌正在研发下一代模型Gemini。

有传言说,该模型将至少有1万亿参数,训练将使用数以万计的谷歌TPU AI芯片。

与OpenAI类似,谷歌使用GPT-4的方法来构建模型,由多个具有特定能力的人工智能专家模型组成。

简言之,Gemini同样是一个混合专家模型(MoE)。

这也可能意味着,谷歌希望提供不同参数规模的Gemini,因为从成本效益上考虑是个不错的选择。

除了生成图像和文本外,Gemini接受过YouTube视频转录数据的训练,也可以生成简单的视频,类似于RunwayML Gen-2。

另外,比起Bard,Gemini在编码能力方面也得到了显著提升。

Gemini推出之后,谷歌也计划逐步将其整合到自家产品线中,包括升级Bard,谷歌办公全家桶、谷歌云等等。

其实,在Gemini之前,DeepMind还有一个代号为「Goodall」的模型,基于未宣布的模型Chipmunk打造,可与ChatGPT匹敌。

不过GPT-4诞生后,谷歌最后决放弃这一模型研发。

据称,至少有20多位高管参与了Gemini的研发,DeepMind的创始人Demis Hassabis领导,谷歌创始人Sergey Brin参与研发。

还有谷歌DeepMind组成的数百名员工,其中包括前谷歌大脑主管Jeff Dean等等。

Demis Hassabis在此前接受采访表示,Gemini将结合AlphaGo类型系统的一些优势和大型模型惊人的语言能力。

可以看到,谷歌已经在全力备战,就等着Gemini开启逆袭之路。

参考资料:

https://80000hours.org/podcast/episodes/mustafa-suleyman-getting-washington-and-silicon-valley-to-tame-ai/

https://twitter.com/AISafetyMemes/status/1697960264740606331

0
点赞
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与华威派无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
凡本网注明 “来源:XXX(非华威派)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。
如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。
QQ:2443165046 邮箱:info@goodmaoning.com
关于作者
卿嫣(普通会员)
点击领取今天的签到奖励!
签到排行
0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索