编辑:润 桃子
【新智元导读】GPT-5仍在秘密训练中!DeepMind联合创始人在近日采访中透露,未来3年,Inflection模型要比现在的GPT-4大1000倍。近来,DeepMind联合创始人Mustafa Suleyman,现Inflection AI的CEO,在采访时投出了重磅炸弹:
OpenAI正在秘密训练GPT-5。
我认为我们都直截了当地说会更好。这就是为什么我们披露了拥有的计算总量。
在未来18个月内,Inflection AI训练的模型比当前的前沿模型大100倍。未来3年内,Inflection的模型比现在大1000倍。
其实,Sam Altman此前曾否认训练GPT-5的这一说法。
对此,网友表示,OpenAI可能给它起了一个新名字,所以他们才说没有训练GPT-5。
这就像当时Code Interpreter推出一样,许多人感觉其能力早已不是GPT-4模型,而应该是GPT-4.5。
另外,采访中,Suleyman还爆出了很多自己在DeepMind和Inflection AI工作时的内部信息,包括了谷歌当时收购DeepMind和之后的抓马,某种程度上解释了为什么DeepMind相比于OpenAI「起了个大早,却赶了个晚集」。
他还认为,开源模型可能会增加AI带给人类的不稳定和危害。
而AI安全性最大的威胁来源并不是大语言模型,而是未来可能出现的自主智能体。
访谈全文
当被问到未来AI是否有可能会成为一个有自主进化能力的智能体时,Suleyman认为:
在短期之内,不太可能出现这种智能体——能够自主运行,能够制定自己的目标,能够识别环境中的新信息、新的奖励信号,并学会用它作为自我监督,并且随着时间的推移更新自己权重的人工智能体。
但是这种自主进化能力的AI是所有人都不应该忽视的东西,因为如果某种AI技术真的展现出这种能力的,它可能会有非常大的潜在风险。
至少他知道的范围之内,Inflection AI和DeepMind都没有在往这个方向上走。
这是一个相当痛苦的过程。虽然他认为谷歌的出发点是好地,但它运作的方式仍然像传统的官僚机构一样。
当我们设立了谷歌的伦理委员会时,计划有九名独立成员,是对于开发敏感技术过程中进行外部监督的重要措施。
但因为任命了一个保守派人士,而她过去曾发表过一些有争议的言论,很多网友就在推特等场合抵制她,同时也抵制其他支持她的几个成员,要求他们退出委员会。
这是一场彻底的悲剧,非常令人沮丧。我们花了两年时间来建立这个委员会,这是朝着对我们正在开发的非常敏感的技术进行外部审查的第一步。
不幸的是,在一周内,九名成员中的三名辞职了,最终她也辞职了,然后我们失去了半数委员会成员。
然后公司转身说:「我们为什么要招人来限制自己?这纯粹是浪费时间。」
其实,当DeepMind被收购时,我们提出了收购的条件,即我们要有一个伦理和安全委员会。
我们计划在伦理和安全委员会之后,我们要将DeepMind打造成一个全球利益公司:一个所有利益相关者在做决策时都能发声的公司。
它是一个按担保有限责任公司设立的公司。然后,我们计划制定一个宪章,为AGI的开发制定相关的伦理安全的目标;这样使得我们可以将收入的大部分用于科学和社会使命。
这是一个非常有创意和实验性的结构。但是当Alphabet看到设立伦理委员会发生的事情时,他们变得胆怯了。他们说:「这完全疯了。你们的全球利益公司也会发生同样的事情。为什么要那样做?」
最终,我们将DeepMind合并进入到了谷歌,从某种程度上说,DeepMind从未独立过——现在当然也完全从属于谷歌。
谷歌下一代大模型Gemini
The Information独家报道称,谷歌多模态人工智能模型Gemini即将面世,直接对标OpenAI的GPT-4。
其实,在今年谷歌I/O大会上,劈柴已经向大众宣布,谷歌正在研发下一代模型Gemini。
有传言说,该模型将至少有1万亿参数,训练将使用数以万计的谷歌TPU AI芯片。
与OpenAI类似,谷歌使用GPT-4的方法来构建模型,由多个具有特定能力的人工智能专家模型组成。
简言之,Gemini同样是一个混合专家模型(MoE)。
这也可能意味着,谷歌希望提供不同参数规模的Gemini,因为从成本效益上考虑是个不错的选择。
除了生成图像和文本外,Gemini接受过YouTube视频转录数据的训练,也可以生成简单的视频,类似于RunwayML Gen-2。
另外,比起Bard,Gemini在编码能力方面也得到了显著提升。
Gemini推出之后,谷歌也计划逐步将其整合到自家产品线中,包括升级Bard,谷歌办公全家桶、谷歌云等等。
其实,在Gemini之前,DeepMind还有一个代号为「Goodall」的模型,基于未宣布的模型Chipmunk打造,可与ChatGPT匹敌。
不过GPT-4诞生后,谷歌最后决放弃这一模型研发。
据称,至少有20多位高管参与了Gemini的研发,DeepMind的创始人Demis Hassabis领导,谷歌创始人Sergey Brin参与研发。
还有谷歌DeepMind组成的数百名员工,其中包括前谷歌大脑主管Jeff Dean等等。
Demis Hassabis在此前接受采访表示,Gemini将结合AlphaGo类型系统的一些优势和大型模型惊人的语言能力。
可以看到,谷歌已经在全力备战,就等着Gemini开启逆袭之路。
参考资料:
https://twitter.com/AISafetyMemes/status/1697960264740606331
相关文章
猜你喜欢