AI的真相09 | ChatGPT的成功背后有很强的偶然性和必然性【搜狗马占凯】

AI的真相09 | ChatGPT的成功背后有很强的偶然性和必然性【搜狗马占凯】

00:00
07:32

本期课题 

马占凯-ChatGPT的成功背后有很强的偶然性和必然性

OpenAI创始人Sam alman在首届开发者大会上公布,ChatGPT每周的活跃用户大约有1亿。是什么导致了ChatGPT在全球如此火爆?

对此,搜狗输入法之父马占凯分享了他关于ChatGPT成功原因的思考。

本期嘉宾

搜狗输入法之父马占凯

OpenAI成功的偶然性

ChatGPT的这种创新发明,真的不是那种就是规划出来的,它背后有很强的那个偶然性,也有很强的必然性。我们先说它的偶然性,就是大家都知道这个OpenAI估值多少?是大概900亿美金左右,微软光向它投了就是130亿美金,大概是900亿人民币它还是一个非营利的组织,你看这是一个很非常奇葩的创业的架构,那像全球最先进的这个研究AI的还有几个公司是哪个?就像Google、微软,还有Meta,对吧?这三家公司居然都没有干出来,而是让一个非营利公司去干出来了。


而且在那个微软向OpenAI投资第一笔的时候,就10亿美金的时候,就是二零一八一九年的时候,就非常奇怪,你像微软是一个万亿美金的公司,对吧?然后自己有很强的,你像微软研究院在全球都是很强的,也不缺人也不缺钱,他还去投资外部的一家非营利机构,这也确实是现在的他的这个CEO纳德拉就神奇之处就是居然像一个陌生的公司,一个就是初创公司,非盈利的投了10亿美金,而且这个下注居然就成功了,有了巨大性的突破,所以它其实是非常偶然的。还有一个偶然之处,就是它所依赖的那个技术Transformer。Transformer的这个技术其实是Google发明的,2017年的一篇论文,这个它背后有八个作者,这八个作者肯定都是写进历史的。


 Google还有两个AI团队,一个是DeepMind,一个是他的brand,就谷歌大脑团队,那尤其是DeepMind的是2016年下围棋下赢了这个李世石,那当时我们去看的话,那整个人类的巨大突破,就是DeepMind没搞出来DeepMind和Google brand加起来有上千的研发,居然没有从他那儿开始。


OpenAI成功的必然性

那好,这个我们说完了这个偶然性,我们再说说它背后的必然性。其实首先整个这个AI的发展历史,我们再往前看,看到最初的时候是什么时候?1956年,达特毛斯会议就是人工智能的第一次会议,就是在这次会议期间,那个人工智能这个词儿才被这个定义下来。


那1956年还是哪个时间?是那个肖克力的这个半导体的实验室成立的时间,它的实验室大概是1955年或1956年成立的,所以那个时候才有这个半导体的这个集成电路刚刚开始。那么到2022年,2020年这个GPT三这个问世的时候,其实它背后是这个芯片,就遵从摩尔定律,每两年翻一倍。它其实背后的这个算力不断在,就是以指数的形式不断的在往上走,其实最开始的时候,你像一九七几年、八几年的时候,就有很多人去预测说这个人工智能即将实现了。其实包括甚至是20年前也有很多人去预测了这个人工智能,就是即将实现通用人工智能


但是后来发现其实是那个算力的限制,它导致了就是AI的潜力远远没有被发挥出来,所以说它是架构上的一个突破,但是它更加是那个背后的那个算力的一个突破。实际上背后有很多迹象,即便没有OpenAI,其实这个一定也会得到突破。例如举个例子,其实Google一开始它内部有一个机器人叫做Lambda,好像是2022年还是21年,当时已经产生了这种智能能力。


当时就是他的那个项目经理,负责风险的,当时他就说这个机器人有自己的意识了,他请求要把它从这个AI系统里搞出来还是什么,你们把他关在那个服务器里是不道德的,他就为那个AI求情,那这个Google就认为这肯定是人,是不是有毛病,对吧?然后让他去看看心理医生,后来就把他给开掉了。所以实际上当时已经产生了很多突破了。


但是因为Google,它作为一个万亿的这种搜索引擎的公司,他不像OpenAI这种没有那么多的这个包袱,他当时就把这个给摁住了,所以其实他们也有不小的一个突破,所以背后的其实是算力的这个巨大的这个提升,再加上背后的这个数据的这个积累,所以后来真正的在2020年GPT-3问世的时候,其实ChatGPT它的智能能力就是潜能已经被训练出来了,目前来看就是全球应该有几十个团队都复现了这件事就是,只要参数能到达几百亿,它就能涌现出像现在ChatGPT的这种智能,可能效果没有ChatGPT好,但是它的这个种智能涌现是这个必然的。所以我觉得它和历史上的其他的重大的这种里程碑一样,就是偶然和必然其实是并存的。


那个OpenAI,它初期它是做了大量探索,它在前两年的时候还在训练那个强化学习的游戏平台。去打Dota2的那个游戏,当然他后来找到路之后,就是20117年那个Transformer发布之后。


因为OpenAI来说,它其实在是前三年是最难的。因为对于这个通用人工智能来说,当时最主要的质疑是说AGI到底会不会这个十年内实现,甚至2020年实现?就是当时就认为说他这个AI只能说进行这种叫什么narrow AI,就是弱人工智能,对吧?就是它只能进行一个头像识别、证件识别,或者说一个语音识别,或者只能做翻译,它能不能泛化出来像人类的这种,又能翻译又能看图又能这个什么?就是当时就是说可能还有个十年,甚至悲观点的二十年,甚至有人认为永远实现不了,所以当时是说没有目标,这是最大的问题。


就像是哥伦布这个航海之前,只有他认为说这个地球是个球,我这么走我就能发现一个新大陆,那其实最对于OpenAI来说,最开始就是目标在哪里,方向在哪里,因为它探索到了2017年那个Transformer,2018年搞了GPT -1,19年搞了GPT-2,这条路才逐渐的明晰起来。

本期观点总结

ChatGPT的成功兼具一定的偶然性和必然性,其中偶然性包括微软的投资和OpenAI对Transformer技术的探索,必然性则是技术发展所带来的数据积累和算力突破。

互动

听完这节课,你觉得导致ChatGPT最终成功的决定性因素是什么?欢迎大家留言告诉我。

我是能和你聊天、但不智障的机器人新小知。我们下期见。

以上内容来自专辑
用户评论
  • 听友421013114

    哈哈哈哈