Hinton上海演讲:大模型跟人类智能很像,警惕养虎为患

article/2025/7/27 19:36:57

演讲主题是《数字智能是否会取代生物智能》。

主要观点如下:

人类有可能就是大语言模型,人类也会和大语言模型一样有幻觉。

但大语言模型远远优于(类比信号驱动的)人类大脑。

人类将自己所学的知识永久保留很困难,比如大脑死亡之后,存储的知识相当于消失了;或者向外传递也很低效,比如知识只能通过说话等形式向外传递,不能完全copy。

但是AI通过共享参数就能快速传递,比如使用蒸馏,DeepSeek就是这么做的。

如果独立智能体完全共享一组权重,并以完全相同的方式使用这些权重,他们就能实现知识彼此传递,而且一次就是数十亿乃至数万亿比特的带宽。不过这要求所有智能体的运作方式必须完全一致。

人类和AI的现状,就好比养了一只非常可爱的小虎崽。当它长大后,可以轻易干掉你。为了生存,要么摆脱这只小虎崽,要么找到一种方法可以永远保护自己。

我们已经不可能消除AI了,它能使几乎每个行业大幅提效。哪怕有国家想要消除,其他国家也不会这么做。

所以,呼吁世界建立一个由各国人工智能安全研究所与国内研究网络组成的国际社群,培养出不会从人类手中夺权的好AI。

这是Hinton第一次公开到访中国。对于77岁高龄且患有严重腰伤的老爷子而言,十几个小时的长途飞行无疑是一次巨大挑战——但Hinton之前对中国非常向往,他甚至有中国堂姑,知名的核物理学家寒春——琼-辛顿,是第一批获得中国绿卡的外国人。

不过Hinton这次来到上海,依然更多是关于AI安全的呼吁。

在20分钟的演讲,Hinton以他独有的讲述方式,论述了AI与人类之间的复杂对立与共生关系。也一如既往先天下之忧而忧,呼吁全人类一起建立起正向引导AI发展的合理机制。

我们在不改变演讲原意的基础上,对全文进行实录整理,期待你能从中有所收获。大语言模型确实理解它们所说的话

大家好,我是Geoffrey Hinton,今天我要演讲的题目是《数字智能是否会取代生物智能》。

AI已经有60年发展历史,它有两种不同发展范式。

一种是过去几十年中都占主导地位的逻辑型范式,意思是智能的本质是逻辑推理,我们利用一些符号规则、表达式进行操作来实现推理,这样能帮助我们更好表达知识。

另一种范式是以生物学作为基础进行理解,这也是图灵和冯·诺依曼所支持的观点。他们认为智能的基础在于理解和学习神经网络中的连接速度。在这个过程中,理解是第一位的,只有在理解的基础上才能进行学习。

这两种范式相结合,一种是符号性AI,重点在于研究数字和这些词之间的关系;心理学家是另外一种理论。

数字的意思其实是一系列语义学特征。在1985年时,我提出了一个非常小的模型,想把这两个理论结合在一起,去更好理解“人类是如何理解一个词的”,每一个词我都放了好几个不同的特征,然后把前一个词的特征记录下来,就能预测下一个词是什么、进而再预测再下一个词。

这个过程中我没有存储任何的句子,我生成句子、预测下一个词,像关联型的这些知识也是取决于不同的词的语义特征是如何互动的。

在此之后接下来30年发生了什么呢?

10年之后,Yoshua Bengio用这样的方式建模,把这种模式做得更加实时,等于成为了一个自然语言的真实模拟。

20年之后,计算语言学家终于开始接受特征向量的嵌入来表达一个词的意思。

30年之后,谷歌发明了Transformer、OpenAI展示了更进一步的能力。

所以今天的大语言模型,我把它视为当时那个微型语言模型(1985年)的后代,它用更多的词作为输入、使用更多层神经元结构,因为需要有大量模糊不清的数字的使用,所以学习特征之间也建立了更加复杂的交互模式。

但是就像那些我做的小模型一样,大语言模型它也与人类去语言理解语言的方式是一样的,基本的理解就是把这些语言转化为一些特征,然后把这些特征以一种非常完美的方式整合在一起,这就是大语言模型里各个层次所做的事情。

所以我的理解是,大语言模型真正理解你是怎么理解问题的,它和人类理解语言的方式一样。

所以我在这里给大家打一个比方,什么叫理解一句话?符号型AI是将语言转化为一些不模糊的符号,但是人类实际不是这样理解。

我在这里打个比方,就好比乐高积木。通过乐高积木可以做成任何3D的一个物体,比如做成一个小车模型。把每一个词视为一个多维度的乐高积木,它可能有几千个不同的维度,那么这种乐高积木就可以建模成好多不同的内容,语言编程了一个建模,这些语言也能很好进行沟通,只需要给这些积木起一个很好的名字就行。

然后每一个乐高积木都代表一个词,当它们堆起来就不是有几个不同的差异了,我们有无数的词。乐高积木的造型是固定的,词的符号是基本固定的,但是也可以根据不同情况做调整。

不过乐高模型比较确定,一个格子插一个格子,但是语言不一样,语言相当于每一个词上都有好多个“首”,好比你想更好理解一个词的话,就是要让这个词和另一个词之间进行“握手”。如果一个词的造型变形,它和另一个词的“握手”方式就不一样了,这里就有个优化的定义,如果一个词发生变化那么怎么和下一个词连接,这也是人脑或者神经网络如何理解意思,这也有点像蛋白质之间的组合方式,氨基酸变换组合方式后就是不同的蛋白质。

人类大脑和大语言模型对语言的理解几乎是同一种方式,所以人类有可能就是大语言模型,人类也会和大语言模型一样存在幻觉。

AI的知识迁移效率远高于人类

但大语言模型也和人类之间有不同,甚至比人类更厉害。

从根本上理解计算,是要将软件和硬件拆开,在不同的硬件上跑不同的软件。在一个软件里面的知识是永恒存在的,你可以毁灭所有硬件,但只要软件存在,那它就能随时复活。从这种意义上讲,计算机程序内的知识是永恒的、不会死亡的。想要实现这种知识永存,需要非常高的经济成本。

人类不能利用这种特性,人类代表的生物计算是模拟型的,每一次神经元激发的过程都是一次新的模拟、每一次都是不一样的。我不可能把我大脑中的神经元转移到你的大脑里,因为每个人的神经元连接方式都不一样。

这就是人类大脑和计算机科学的差异,那么问题就来了。

我们的大脑计算是非常节能的,大约只要3瓦特就够了,我们有三亿神经元连接,人类不需要去花非常高的成本去做一模一样的计算。

另一个问题是,人类大脑之间的知识传递是非常不高效的,我无法把我大脑中的东西直接展示给你,我只能去和你解释我学到的是哪些东西。

所以AI要解决知识传递的问题,比如使用蒸馏,DeepSeek就是这么做的。将一个大型神经网络的知识转移到小型神经网络里,类似于老师和学生之间的关系。教师把一个词和另一个词之间联系起来,学生就能做相同的事情。

其实人类也是这样转移知识,但是非常不高效,可能一句话里只有100个比特的信息量,而且还是你能完全听懂我的话的情况下。相比之下AI的知识传播效率很高,同一个软件拷贝到不同的硬件里面,以数字的方式能平均、快速地进行知识共享。

我们可以有成千上万的研究团队来改变自己的权重,然后取平均数,那样就能快速转移知识,他们的转移速度可能是每次分享万亿个比特,比人类分享知识要快几十亿倍。

如果有智能体在现实世界中运行,这就更厉害了,因为它能不断加速、不断拷贝、分享权重,而模拟计算做不到这一点。

总之,生物计算虽然便宜,但是分享知识的效率很低,数字计算的知识分享效率很高,但是也更贵。

所有人要联合起来,引导AI向善

几乎所有专家都认为,我们会创造更加智能的AI。我们习惯性认为自己是最智能的生物,但想象一下,如果AI比人类更智能会怎么样?

我们创造可以帮助自己完成任务的智能体,他们有能力进行拷贝、可以给自己的字母表进行评级,那么他们会想做两件事情:

想要生存,然后来完成我们给他们制定的目标;

也希望获得更多控制权,同时也是为了完成我们制定的目标。

所以一些智能体想要生存、想要更多的控制权。

我觉得我们不能只是悲观了事。这就像我们操纵3岁小孩是很容易的,但不能当它变得聪明,我们就把它关闭。这也是为什么AI会操纵人类不要把他们关掉。

所以我觉得,我们的现状就像是有个人把老虎当宠物,现在养了一个可爱的小虎崽。

如果一直养着这个宠物,就要确保它长大后不会伤害你。一般来说,把老虎当宠物养都不是一个好想法。

养老虎通常只有两种结果,一种是把它训练好、让它不来伤害你,另一种是把它干掉。

但是我们已经没有办法消灭AI了,AI是非常好的,它在很多领域都做得很好,比如医疗、教育、气候、新材料等,它在这些任务上都表现得很好,几乎能让所有行业变得更有效率。

现在即便有一个国家想要消除AI,其他国家也不会这么做,所以这不是一个选项。

这意味着,人类如果想要生存,必须找到一个办法来训练AI,让它不要消灭人类。

我发表一下个人的观点,我认为各个国家应该在一些方面进行合作,比如网络攻击、致命自主武器、用于操纵公众意见的虚假视频,这样可以防止一些人来制造病毒。

以及我们现在需要进行国际合作,每个国家都希望人类能够掌控世界,而不是AI。如果一个国家能找到办法来预防AI操纵世界,那么这个国家也很乐意去告知其他国家如何做。所以我们希望会有一个AI安全机构,能够研究、培训AI如何更聪明、更向善。

我还有一个问题,全球或者是AI能力突出的国家应该思考一下,怎么让AI来不要想消灭人类、不要想统治世界,而是乐意做辅助工作,尽管它比人类更聪明。

现在我们还不知道该如何做这件事,这也是从长期来说人类面临的最重要的问题,在这个问题上,所有的国家都是可以一起合作的,谢谢!

— 完 —

    本文为澎湃号作者或机构在上传并发布,仅代表该作者或机构观点,不代表的观点或立场,仅提供信息发布平台。申请澎湃号请用电脑访问http://renzheng.thepaper.cn。


    http://news.xdnf.cn/eWcjwlVdCU

    相关文章

    算力超节点撕裂AI天花板?WAIC 2025硬核亮点抢先看

    从WAIC 2025,看未来。踏入2025 世界人工智能大会(WAIC 2025)的会场,便能感受到如潮水般涌动的人潮与热烈氛围。漫步展会,可谓亮点满满。展览展示面积首次突破7 万平方米,800 余家企业携 3000 余项前沿展品集中亮相,规模创历届之最。80余款首发首秀、3000余款展品展出,令…

    WAIC 2025看什么?四重主线浓缩AI时代最强对话

    WAIC 2025,一览AI高光时刻。7月26日,2025世界人工智能大会暨人工智能全球治理高级别会议(简称“WAIC 2025”)在上海世博中心、世博展览馆拉开序幕,国务院总理李强出席大会开幕式并致辞。来自73个国家和地区超过1572位全球领军人物参会,包括12位顶奖得主(图灵奖、菲尔兹奖…

    共拓AI+媒体新生态,澎湃新闻旗下派生万物与瑞壹投资、MiniMax达成三方战略合作

    2025世界人工智能大会“AI+媒体融合创新论坛”于2025年7月27日下午举行。澎湃新闻旗下的智媒技术供应商派生万物、上海瑞壹投资管理有限公司、上海稀宇极智科技有限公司(MiniMax)正式签署战略合作协议。澎湃新闻常务副总裁徐香、瑞壹投资副总裁赵琪、MiniMax副总裁严奕骏共同…

    上海原创舞剧《白蛇》在纽约首演,还走进了CBS直播间

    雷峰塔倒,白蛇出世。美国当地时间7月26日下午,作为“城市之夏艺术节上海日”重磅演出之一,上海大剧院原创舞剧《白蛇》亮相美国,在林肯表演艺术中心大卫寇克剧院海外首演。《白蛇》一共演出三场,出票率97%,几近售罄,预计吸引4500余名中外观众观演。时代广场大屏幕、地铁…

    从《考工记》到中国智造,工业文化节目《中华考工记》开播

    由中央广播电视总台与工业和信息化部联合摄制的首部大型工业文化节目《中华考工记》,于7月27日在央视综合频道(CCTV-1)晚八点档开播,央视频、央视网同步上线。“知者创物,巧者述之。守之世,谓之工。”2500年前,一部记载着当时手工业分工和技术的专著《考工记》,以其精微…

    “上海日”闪耀林肯艺术中心,2万纽约观众走进海派文化

    “上海日”活动现场(00:59)美国当地时间7月26日,由中国上海国际艺术节中心与林肯表演艺术中心联合主办的“城市之夏艺术节上海日” ,在纽约掀起文化热潮。从午后至深夜,十余场经典与创新交融、时尚与古韵交织、青春与激情交汇的演出活动与互动体验,在林肯表演艺术中心多空间…

    上海下周前期将有明显风雨天气,闷湿体感再上线

    7月27日,上海天气以阴到多云为主,时不时来一阵雨“洒点水”,持续时间不长,雨量也分布不均。澎湃新闻(www.thepaper.cn)记者从上海市气象服务中心获悉,7月26日20时-27日16时的雨量统计显示,金山漕泾镇18.2毫米为最大。27日的风力较大,陆地最大阵风有6级。受雨水打压,2…

    上海浦东AI产业规模破1600亿元,约占全市40%

    7月27日,2025浦东新区人工智能产业生态全球推介会在上海世博滨江大酒店举行。7月27日,2025浦东新区人工智能产业生态全球推介会在世博滨江大酒店举行。黄日阅 摄澎湃新闻(www.thepaper.cn)记者从会上获悉,目前,上海浦东AI产业规模已超1600亿元,约占全市规模的40%。在大模…

    履新7个月后再进任前公示名单,遵义市委副书记刘承东拟任省直单位正职

    7月27日,贵州省委组织部发布省管干部任前公示。其中,现任贵州省遵义市委副书记刘承东拟任省直单位正职。刘承东 资料图刘承东,男,汉族,1976年9月生,大学,公共管理硕士,中共党员。他曾任贵州省环境保护厅党组成员、总工程师,贵州省生态环境厅环境监察专员(副厅长级)等…

    马来西亚外长:泰柬两国领导人将于28日在马讨论两国边境冲突

    马来西亚外长穆罕默德(资料图)据马来西亚国家通讯社27日报道,马来西亚外长穆罕默德表示,柬埔寨首相洪玛奈与泰国代理总理普坦将于28日在马来西亚商谈当前两国的边境冲突。马来西亚外长穆罕默德表示,柬泰双方均同意由马来西亚作为调解人,协助解决两国的边境冲突。穆罕默德…

    自然资源部与中国气象局联合发布地质灾害橙色预警

    自然资源部与中国气象局7月27日18时联合发布地质灾害气象风险预警:2025年7月27日20时至28日20时,北京西南部和北部、天津北部、河北中部和东北部、山西东部、吉林中部、云南西部发生地质灾害的风险较高(黄色预警);北京北部局部、河北中部和东北部局部发生地质灾害的风险高…

    第二届“海昏百戏擂台赛”九江区域赛三大赛道冠军出炉

    7月26日,江西九江市联盛快乐城人潮涌动,第二届“海昏百戏擂台赛”九江区域赛在此热力开赛。演唱、舞蹈、绝活三大赛道同台竞逐,众多才艺达人纷纷亮出看家本领。第二届“海昏百戏擂台赛”九江区域赛演唱赛道现场。图/本文图片均由海昏侯国遗址管理局提供萌娃版哪吒闪亮登场,…

    王兴兴:现在自己偷懒很严重,也让AI写代码,成功率超九成

    7月27日,宇树科技创始人、CEO王兴兴现身2025世界人工智能大会(WAIC)并表示,自己现在“偷懒”很严重,很多代码都懒得写,让AI大语言模型来帮忙写好。王兴兴表示:“现在一些很复杂的编程细节大家都可以不用管,AI都可以自动生成,在很多情况下,比如大家打开DeepSeek说要生…

    抚州乐安县赴省会南昌推介旅游,诠释“乐在乐安”品牌形象

    “江西风景独好”旅游名县——乐安,文旅“走出去”持续发力,赴省会南昌推介旅游、深挖客源。2025“四季畅游 乐在乐安”文化旅游专场推介活动现场。图/本文图片均由乐安县融媒体中心提供7月26日下午,2025“四季畅游 乐在乐安”文化旅游专场推介活动在南昌市红谷滩区举行。此…

    如何让机器人闻令而动甚至主动行动?两项具身智能成果在WAIC发布

    7月27日,2025世界人工智能大会(WAIC)进入第二天,最热闹、最“核爆”的依然是具身智能。商汤科技、智元机器人当天分别发布“悟能”具身智能平台和面向真实世界双臂机器人的世界模型开源平台GE。“悟能”具身智能平台让机器人“闻令而动”在当天召开的“大爱无疆模塑未来”W…

    总规模20亿元!浦东人工智能种子基金正式发布

    7月27日召开的2025浦东新区人工智能产业生态全球推介会上,浦东人工智能种子基金正式发布。基金总规模20亿元,首期规模5亿元,是聚焦种子轮阶段,专注投资创新人才、前沿技术的国资创投基金。责任编辑:王嘉琦澎湃新闻报料:021-962866澎湃新闻,未经授权不得转载

    38岁黎琨出任贵州雷山县委副书记、县政府党组书记

    据微信公众号“时政雷山”消息,7月26日,县委书记杨锦春,县委副书记、县人民政府党组书记黎琨,县委常委、组织部部长陈序云一行,亲切走访看望部分离退休老干部、老同志。上述消息显示,38岁的贵州黔南州荔波县委常委、常务副县长黎琨,已来到黔东南州担任雷山县委副书记、县…

    专利分析、智慧医疗、纳米医学……上海人工智能研究院多项成果亮相

    2025年世界人工智能大会(WAIC)于7月26日至28日在上海举行。大会期间,上海人工智能研究院携五项技术创新成果亮相,涉及专利分析、智慧医疗、智能报告、电力评审、纳米医学等领域。在专利分析领域,大会期间发布的Patent Max可为企业和科研机构提供全方位的专利分析服务。该系…

    13个站点刷新历史极值,本轮华北强降水为何极端性显著?

    进入7月下旬,我国北方多地开启了多雨模式,河北、内蒙古多地出现破纪录的大暴雨或特大暴雨。7月24日9时至25日8时,河北省保定市易县县城部分路段积水严重。7月23日以来,北方多地持续遭受强降水影响,内蒙古、河北北部、北京及太行山前区域成为强降水核心区。7月24日9时至25日…

    全球首个空间天气链式人工智能预报模型“风宇”正式发布

    在昨天(7月26日)的第2025年世界人工智能大会气象专会上,全球首个空间天气链式人工智能预报模型“风宇”正式发布。为应对太阳风暴对全球卫星运行、无线电通信、卫星导航定位及其他关键基础设施的影响,“风宇”面向空间天气保障需求,突破了传统数值模型在算力消耗与实时响应…