德国比勒菲尔德大学的金耀初教授长期从事计算智能、演化计算、机器学习、计算神经科学等交叉学科的理论研究和工程应用,目前已发表学术论文500余篇,论文被引用次数达37400余次,2019—2022年连续4年被Web of Science评为“全球高被引科学家”。
近日,围绕热门科技话题ChatGPT,记者专访了欧洲科学院院士、德国比勒菲尔德大学洪堡人工智能教席教授金耀初。金教授同时兼任英国萨里大学计算系“计算智能”讲席教授 、IEEE计算智能学会候任理事长,曾任《IEEE认知与发育系统汇刊》主编等职。
生成式模型的重大进展
(资料图片)
谈到ChatGPT最核心的东西,金耀初表示,ChatGPT所代表的技术是第三波人工智能技术取得的一个重大进展。它基于生成式预训练Transformer模型,采用了“自注意力机制”。与传统的判别式模型相比,生成式模型的最大特点是直接学习训练数据本身的特点,因而能更有效地学习大容量的样本,特别是海量的语言、视觉信息。
传统的语言处理模型一般只能根据字词的前后相邻词语来找它们之间的关系,因此有很大的局限性。Transformer引入了自注意力机制后,它就能很灵活地找出不单是某一个句子,而是不同句子,甚至是整篇文章或不同的文章之间词的相互关系,学习能力就增强了很多。
横空出世非一日之功
对于ChatGPT的横空出世,金耀初强调这仅仅是大众的感受。从科研的角度看,ChatGPT也是一步一步演进而来的。根据OpenAI发表的论文,ChatGPT是花了很长时间,用了各种学习方法不断训练和微调出来的。生成式模型给出的答案并不是人们事先给它的训练数据,而是模型生成出来的,所以很难保证百分之百正确。ChatGPT在训练过程中用到非常多的最新的学习技术。例如,无监督学习、有监督学习、多任务学习、小样本学习、自监督学习等。
此外,它还加入了基于人类反馈的强化学习,以获得与人类对齐、共情能力。通过人类评价,即给它生成的答案打分来选择一个最佳的答案。这个过程实际上是一个强化学习过程,也就是对原来的模型进行微调。其他AI模型可能没有像ChatGPT这样,用大量的人类反馈来使得模型能产生更加符合人类期待的回答,相应的体验就会有差距。
尚不具备自主的“心智”
金耀初谈到,作为一个从文本到文本的对话系统,ChatGPT最强的地方是对自然语言的充分学习,生成的文本更加“流畅”并符合人类体验,这是一个重大的技术创新。但值得注意的是,生成式机器学习模型有很多,比如从文本到语音信息,或者文本到图像信息,这些方面ChatGPT的表现可能就没那么好了。这是它的一个局限性。
另一方面,目前ChatGPT训练的数据截至2021年,没有训练过的东西,它是不可能准确回答出来的。换句话说,目前的模型不具备创造新知识的能力。ChatGPT回答问题时用的是推理。它不是那种在数据库中搜索答案的概念。生成式模型是根据问题本身联想出一个答案。这个答案是模型“学习消化”后产生出来的东西,不是原始的数据。严格意义上来说,模型本身甚至不知道这个答案的真正含义,它也不能保证答案肯定是对的。
ChatGPT不是“万能”的
金耀初认为,ChatGPT离真正的专业应用还有一定的距离。现在大家感觉很新奇,都在尝试玩一玩。有的人甚至以为ChatGPT什么都能干,可以很快用在自动驾驶之类的很多应用上,这其实是误解。自动驾驶的重点不是文本到文本的问题,纯粹的生成式模型是不够的。它需要其他判别式的机器学习模型,特别是实时场景的识别。
以现在热议的医疗服务为例,尽管ChatGPT在美国执业医师资格考试中取得不错的成绩,但真实情况下人们会用ChatGPT来代替医师进行诊疗吗?至少目前还不行,因为无法保证它的答案百分之百是正确的。有人说ChatGPT有时会一本正经地胡说八道,这样的描述是比较中肯的,人们不能忽视这种风险。
期待未来更多突破
金耀初表示,这一波人工智能可能不会像第一波和第二波人工智能浪潮那样很快偃旗息鼓。它会继续发展下去,未来三五年,人工智能领域可能还会涌现一些令人吃惊的突破。很多基于ChatGPT的新的想法或技术或会涌现,并在此基础上找到真正好的细分领域的应用。
至于人工智能和机器人的结合,金耀初强调,从某种意义上来说,这一直是人工智能研究的重点之一。现在ChatGPT与人对话这么流畅,如果把它与数字虚拟人技术结合起来,一般人可能很难分辨出计算机屏幕里回答问题的是真人还是一个数字人。当然,未来的发展过程中会涉及很多人工智能的本质问题,包括信任、责任、伦理、法律问题等。乐观地看,ChatGPT等人工智能应用的影响力急剧扩大,反过来会在一定程度上推动上述问题的解决。
更多精彩内容,请下载科普中国客户端。
返回人民网科普频道
德国比勒菲尔德大学的金耀初教授长期从事计算智能、演化计算、机器...
婚姻是家庭和社会的总开关,是子女成长、成才的基石,婚姻会涉及到...
1、~,更打动我边塞离情。2、还说甚雁过留声,那堪更瑶阶夜永,嫌...
“吸烟有害健康”在这个话题一直被人们关注着,大家都知道吸烟对我们...
1、一、起源刘姓,最早一支刘姓源自尧的后裔刘累,故刘累为刘姓得姓...
南方财经2月14日电,企查查APP显示,近日,甘肃省敦煌种业集团农业...
大家好,小太来为大家解答以上问题。马克龙的养老金改革为何激起众...
关于清明节的习俗清明快到了,关于清明节扫墓的习俗,你知道吗?以下...
网评:炸残男童手臂的炮仗,为什么能被正常售卖 来源:光明网 ...
又是一则官宣喜讯,我们的青春总会以一种方式结束,沉浸在别人的幸...
时针走一大格是几,时针走一大格是一个小时,即60分钟。钟表上有三...
1、象征含义青鸟象征着幸福,青鸟还象征着对梦想与希望的追求。2、...
1、占卦很复杂,给你说了未必你能用,拿50根蓍草。2、一根放前面为...
不要说明父母在乎你的礼物是不是很在乎你送的是什么,只要你能在他...
2月9日,宁夏银川党政考察团到浙江嘉兴考察招商,深入浙江新澳纺织...
望江楼,杏梅开!
最好的闺蜜生日,我们两个是从小长大的闺蜜,从小玩到大,关系一直...
组织开展面向全省的特种作业操作证书的资格复审和新办工作,技能培...
收礼品收售的名酒,收礼品和收藏品的区别对象,选择好了,自己送的...
1、赣榆人才网秉承“诚信为上,服务为本”之理念,以服务企业、服务...
走是什么结构的字各省的已出,很多同学都会来一场说走就走的旅行。...
1、互相帮助、团结与共。2、2、吃苦耐劳、不好逸恶劳。3、3、有规矩...
去年,安大毕业生留皖就业率超六成
无锡首套房贷利率降至3 8%,套房,个贷,贷款,无锡市,大运河,中国文物...
人世间,总有一个人,默默地给我们支撑,总有一种爱,让我们泪流满面。...
印度央行周三宣布加息25个基点,连续第二次放缓加息步伐,同时在核...
提高电话接线员Tre的报价。今天,您的智能手机有两项新优惠。对于列...
精选洗澡的作文400字4篇在平日的学习、工作和生活里,大家一定都接...
2月8日,生意社棉纱32S基准价为24775 00元 吨,与本月初持平。棉...
1、KSMSVC EXE描述是金山急救箱。2、出品公司是金山。文章到此就分...