聚焦AI大模型:原理、进展及其影响(CMF专题报告)

郭太侠8个月前 (10-28)AIGC127

2022年11月30日,ChatGPT横空出世,引发了一轮大模型热潮。ChatGPT是由OpenAI公司开发的语言模型,它能通过大规模的语料库学习语言规律,从而生成与人类语言相似的输出。

长期以来,学术界一直都在研究大模型,而ChatGPT之所以能够引发这次热潮,是因为OpenAI将其ChatGPT做成了一个对话机器人,以人机聊天的形式发布,这让除了专业人士之外的普通人也可以接触到大模型。通过与其交互,大家发现它展现出了惊人的对话能力,拟人程度非常高,从而引发了全社会的关注,发布后两个月用户就达到了1亿。

从技术上来说,它是人工智能里程碑式的突破。比尔·盖茨、马斯克等都对它进行了高度评价,比尔·盖茨认为它的重要性不亚于互联网,而我个人认为它远比互联网更重要。

ChatGPT大模型的特点

1)知识广博

ChatGPT一般是在万亿级的语料上训练出来的,它看到过很多不同领域的文章,所以上知天文、下知地理,不仅能写文章,还能写代码。

2)有条有理

此前的很多大数据模型都难以将知识整合起来完成任务,而ChatGPT能够将广泛的知识整合起来,针对具体问题形成答案,甚至展示出一定的推理能力,这是非常惊人的。

3)善解人意

ChatGPT基本上已经解决了语言理解的问题,能够准确理解用户意图,这在人工智能的发展史上是非常困难的事情。

4)交互能力强

尤其是在多轮对话或者较长的对话序列中,ChatGPT能聚焦对话的主题,不走神。

总之,从技术上来看,ChatGPT的以上四个能力都是人工智能发展史上的重大突破。学界长期悬而未决的关键问题在ChatGPT,包括最近的GPT-4等大模型中已经得到了相当大程度的解决,这种技术上的重大突破必然会产生深刻的影响。

之所以说ChatGPT的意义深刻,是因为语言在人类文明史上扮演着极其重要的作用,甚至可以作为人类区别于其他动物最重要的属性。有了语言,文明才能传承,人和人之间才能交流,形成深度的思考。21世纪最伟大的哲学家维特根斯坦在语言上就有很深的造诣,他曾说过,语言的边界就是世界的边界,甚至是思考的边界,这与当今的大模型发展有一些惊人的吻合。计算机鼻祖图灵在早期的一篇著名论文中提出了“图灵测试”,它通过人机对话的方式,判断一个系统是否具有人工智能的标准。由此可以看出,语言始终在人类思想史,以及人工智能的历史上占据着核心的地位。

报告围绕以下两个方面展开:

一、 大模型的背景和原理

二、 大模型的飞速发展及趋势

三、 大模型的深刻影响

来源:CMF

报告内容节选如下:


1.png