MIT学者独家揭示ChatGPT的瓶颈与解药 (mit学院教授)
麻省理工学院(MIT)学者罗鸿胤供稿,经其授权后编辑发布。
罗鸿胤是人工智能领域的青年科学家,MIT计算机学与人工智能实验室(CSL)博士后研究员,主要关注自然语言处理方向,包括自训练算法、蕴含模型、语言模型推理问题。他博士毕业于MIT电子工程与计算机科学系,师从JimGlass博士;本科毕业于清华大学计算机系,师从刘知远教授。
引言
人工智能领域一直存在着学派之争。曾经,建制派的符号主义AI被看作唯一的主导力量,逻辑驱动的人工智能曾主宰数十年;另一派则是代表经验主义AI的深度学习,不追求解释和逻辑,以神经网络和大数据开启暴力美学的大门。以GPT系列为代表的大语言模型就是这条暴力美学路线的产物。这条路现在看来是成功的,但也存在一定的局限性。
从人工智能诞生的第一天起,计算机科学家们一直在比较以神经网络为代表的经验主义与以数理逻辑为代表的符号主义。
简单来说,经验主义主张通过对大量数据的学习来获取知识,而符号主义则强调精确的任务定义和严谨的数学工具。随着近十年的算力进化,神经网络这一最典型的经验主义AI模型得到了飞速的发展。由于无法匹敌神经网络处理非结构化信息的能力和泛用性、无法生成非结构化数据(如自然语言),符号主义AI的存在感和影响力快速降低。
但是在我看来,基于符号和逻辑的推理(reasoning)远比基于经验和数据的感知(perception)复杂。经验主义发展的顶点正是符号主义大放异彩的起点。
著名语言模型批评者Gary Marcus博士曾锐评道:大语言模型没法做一些有严格定义的工作:遵守国际象棋规则、五位数字相乘、在家谱中进行可靠的推理、比较不同物体的重量等等。
火力全开的Marcus博士指出了目前大语言模型存在的问题,但是这个问题并非没有解决方法,我认为:大语言模型只是不能通过生成文本做有严格定义的工作。大语言模型可以通过生成自然语言嵌入式程序(naturallanguageembeddedprogram,NLEP)准确完成上述工作。
NLEP是我与麻省理工学院(MIT)、香港中文大学(CUHK)研究团队共同研发的一种兼顾符号推理和自然语言生成的程序。它将语言智能抽象为「思维编程+程序执行」两个步骤,能让大语言模型同时具有生成自然语言和精确执行复杂推理任务的能力。
在传统认知里,符号AI无法处理非结构化数据和生成自然语言。而的方法证明,符号可以处理非结构化数据、自然语言,还可以强化非结构化数据深层的结构规律和推理能力。或许在不久的将来,符号主义有潜力替代经验主义。
大模型与醉酒的人相似
当前最先进的神经网络模型其实与醉酒的人相似。他们都努力与人互动、跟随简单指令生成信息,少数还试图驾驶交通工具。同时,他们也都带来了商业机遇和社会风险,并可能引起广泛讨论。
人类认知功能不完整时(如醉酒、梦呓、疾病等),语言行为往往是脱离逻辑思维的。这时,人类只是依赖语言本能,把输入信号强行拼凑成有一定语法结构的句子(文本补全)。表达的内容可能是如李白斗酒诗百篇般的艺术瑰宝,也可能只是毫无意义的胡言乱语。
事实上,人类大脑语言区域的发现正是基于临床医生对认知功能受损、保留了部分语言能力患者的研究。类似的科学方法也被大量应用于探索AI模型行为和规律的研究中。随着算力的快速发展,等机构花费数百亿美元构建了参数量远超人类语言器官的神经网络,和文本量远超人类阅读极限的训练数据,为体积远大于人脑的机器赋予了类似的文本补全能力。但此类模型生成的究竟是语言还是梦呓?这个问题已经在学术界引起了激烈争论。争论的结果关乎社会和业界对可解释性、可靠性、安全性的认可程度。而决定结果的关键就在于语言模型是否存在可控、准确的思维能力。
为了回答这一核心问题,谷歌旗下研究机构DeepM
关于作者
罗鸿胤,麻省理工学院(MIT)计算机学与人工智能实验室(CSL)博士后研究员。主要关注自然语言处理方向,包括自训练算法、蕴含模型、语言模型推理问题。
个人主页 | Twitter
CHATGPT是什么?
CHATGPT是什么 CHATGPT国内能使用吗CHATGPT是人工智能技术驱动的自然语言处理工具,用国外手机号注册,国内可使用。CHATGPT是属于一种开发的语言生成模型,能够被训练,用来日常对话以及进行建模。
CHATGPT是人工智能技术驱动的自然语言处理工具,用国外手机号注册,国内可使用。CHATGPT是属于一种开发的语言生成模型,能够被训练,用来日常对话以及进行建模,也能够通过学习和理解人类语言进行对话,并且生成回应,主要它是用来自然语言的,处理任务,回答对话生成等,也需要通过学习大量的文本才能够形成文本的模型。
在国内可以使用吗
在国内是可以使用的,但是在国内是不能够注册的,必须要在国外用国外的手机号码进行注册,也可以是在官网里面进行操作,需要登录过之后再去注册,但如果是在国外生活,就是可以正常的使用CHATGPT镜像版。有一些大神是做了国内的镜像版,也是可以不用注册直接使用的,可以直接访问。
CHATGPT的详情
是一款可玩性能特别高的产品,能够通过使用大量的语料库来进行训练模型能够形成特别真实的对话,而且还能够更好的去理解来自于人类的语言,CHATGPG能够做到实时的去回应用户的提问,包括聊天和纠正语法的错误等,甚至是还能够帮助代写代码剧本在全国的范围之内都受到了众人的喜爱,是一种运用处理序列数据的模型,能够在输入序列中之后,捕捉长期的依赖性。
所带来的影响
CHATGPT的爆火也导致有很多的学者和研究学家都觉得能够杀死掉大量的大学论文,因此在很多的互联网大厂之中都遭到了封杀,能够对科技行业产生特别深远的影响,甚至能够改变人们与电脑互动的方式和方法,实现与电脑对话像是在实际生活中对话一样自然,也将改变人们使用科技的体验感。
总之,通过以上关于CHATGPT是什么 CHATGPT国内能使用吗内容介绍后,相信大家会对CHATGPT是什么 CHATGPT国内能使用吗有个新的了解,更希望可以对你有所帮助。
免责声明:本文转载或采集自网络,版权归原作者所有。本网站刊发此文旨在传递更多信息,并不代表本网赞同其观点和对其真实性负责。如涉及版权、内容等问题,请联系本网,我们将在第一时间删除。同时,本网站不对所刊发内容的准确性、真实性、完整性、及时性、原创性等进行保证,请读者仅作参考,并请自行核实相关内容。对于因使用或依赖本文内容所产生的任何直接或间接损失,本网站不承担任何责任。