信息发布→ 登录 注册 退出

被OpenAI CEO取关后,Yann LeCun再次抨击:ChatGPT对现实的把握非常肤浅

发布时间:2023-04-11

点击量:

大佬之间的关系,有时真是扑朔迷离。

昨天,有人发现,OpenAI CEO Sam Altman 已经在推特上取关了 Meta 首席人工智能科学家 Yann LeCun。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

我们很难确定这次取关发生的具体时间点,但基本能够确定事件原因 —— 几天前,Yann LeCun 在前段时间的一次小型媒体和高管在线聚会上发表了自己对 ChatGPT 的看法:

「就底层技术而言,ChatGPT 并没有什么特别的创新,也不是什么革命性的东西。许多研究实验室正在使用同样的技术,开展同样的工作。」

在 ZDNet 的「ChatGPT is 'not particularly innovative,' and 'nothing revolutionary', says Meta's chief AI scientist」报道中,LeCun 演讲的一些细节被披露出来。其中有一些很惊人的评价:

  • 「与其他实验室相比,OpenAI 并没有什么特别的进步。」
  • 「ChatGPT 使用的 Transformer 架构是以这种自监督的方式预训练的。自监督学习是我很长一段时间以来一直倡导的,甚至可以追溯到 OpenAI 出现之前。」
  • 「Transformer 是谷歌的发明,这类语言项目的工作可以追溯到几十年前。」
  • ……

如此,Sam Altman 的取关行动也是情有可原。

在「取关」被人发现的四个小时后,Yann LeCun 更新了动态,再次转发了一篇「阴阳」ChatGPT 的文章:

为什么像 ChatGPT 这样的大型语言模型可以滔滔不绝地胡说八道?它们对现实的把握是非常肤浅的

有人就不同意了:「ChatGPT 是广泛知识和巨大创造力的源泉,已经在大量书籍和其他信息源上接受过训练。」

对此,LeCun 也表明了自己观点:「没人说 LLM 没用。FAIR 的 Galactica 短暂发布期间,我自己也曾这么说过。人们把它钉在十字架上,因为它会产生胡说八道。ChatGPT 做了同样的事情。但同样,这并不意味着它们没有用。

实际上,这篇《大西洋报》的文章是对麻省理工学院认知科学小组的一篇论文进行了评论。让我们看一下具体的研究内容。

这篇论文说了啥?

这篇论文的标题为《Dissociating Language and Thought in Large Language Models: a Cognitive Perspective》,作者分别来自得克萨斯大学奥斯汀分校、MIT 和 UCLA。

论文地址:https://arxiv.org/pdf/2301.06627.pdf

我们知道,如今的大型语言模型(LLM)通常能够生成连贯、合乎语法且看起来有意义的文本段落。这一成就引发了人们的猜测,即这些网络已经是或者很快将成为「思维机器」,从而执行需要抽象知识和推理的任务

在本文中,作者考虑了两个不同方面的语言使用表现来观察 LLM 的能力,分别如下:

  • 形式语言能力,包括给定语言的规则和模式知识;
  • 功能语言能力,现实世界中语言理解和使用所需的一系列感知能力。

借鉴认知神经科学的证据,作者表明人类的形式能力依赖特定的语言处理机制,而功能能力需要语言之外的多种能力,它们构成了形式推理、世界知识、情境建模和社会认知等思维能力。与人类的两种能力区别相似,LLM 在需要形式语言能力的任务上表现出色(尽管还不完美),但在很多需要功能能力的测试中却往往失败

基于这一证据,作者认为,其一现代 LLM 应该被认真地作为具备形式语言技能的模型,其二玩转现实生活语言使用的模型需要合并或开发核心语言模块以及建模思维所需的多种非特定语言的认知能力。

总之,他们认为,形式语言能力和功能语言能力之间的区别有助于理清围绕 LLM 潜力的讨论,并为构建以类人方式理解和使用语言的模型提供了途径。LLM 在很多非语言任务上的失败并没有削弱它们作为语言处理的良好模型,如果以人类的思维和大脑作为类比,未来 AGI 的进步可能取决于将语言模型以及代表抽象知识和支持复杂推理的模型相结合

ChatGPT 数学水平仍需要提升

LLM 在语言之外的功能能力(如推理等)方面有所欠缺,OpenAI 的 ChatGPT 正是一个例子。虽然此前​​官宣数学能力再升级​​​,但被网友吐槽只能精通十以内的加减法。

近日在一篇论文《Mathematical Capabilities of ChatGPT》中,牛津大学、剑桥大学等机构的研究者在公开可用和手工制作的数据集上测试 ChatGPT 的数学能力,并衡量了它与在 Minerva 等数学语料库上训练的其他模型的性能。同时通过模拟数学家日常专业活动(问答、定理搜索)中出现的各种用例,来测试 ChatGPT 是否可以称为专业数学家的有用助手。

论文地址:https://arxiv.org/pdf/2301.13867.pdf

研究者引入并公开了一个全新数据集 —— GHOSTS,它是首个由数学研究人员制作和管理的自然语言数据集,涵盖了研究生水平的数学,并全面概述语言模型的数学能力。他们在 GHOSTS 上对 ChatGPT 进行了基准测试,并根据细粒度标准评估性能。

测试结果显示,ChatGPT 的数学能力明显低于普通数学研究生,它通常可以理解问题但无法给出正确答案

每月 20 美元,ChatGPT Plus 大会员上线

不管怎么说,ChatGPT 在商业上的成功是有目共睹的。

刚刚,OpenAI 宣布了「ChatGPT Plus」,一项每月 20 美元的新付费会员服务。

订阅者将获得一些好处:

  • 可以普遍使用 ChatGPT,即使在高峰期也是如此;
  • 更快的响应时间;
  • 优先获得新功能和改进。

OpenAI 表示,它将在「未来几周内」向在美国和在其候补名单上的人发出该服务的邀请,并表示会将该服务推广到其他国家和地区。

一个多星期前,有消息称 OpenAI 要以每月 42 美元的价格推出 ChatGPT 服务的 plus 版或 pro 版,但最终定下的每月 20 美元,显然让更广泛的人群有能力使用该服务,包括学生和企业。

某种程度上,这将为市场上任何想要推出的 AI 聊天机器人设定付费标准。鉴于 OpenAI 是该领域的先行者,如果其他公司试图发布每月付费超过 20 美元的机器人,都必须先解释明白一件事 —— 自己的聊天机器人凭什么比 ChatGPT Plus 更值钱?


相关文章: 智能语音新体验ChatTTS为您带来前所未有的语音互动魅力  人AI判断模型构建方法与实践深度解析,制作手机壁纸ai  AI扫描生成模型,深度解析技术原理与实践应用,ai书籍阴影  AI赋能立体建模,高精度立体模型构建全方位攻略,ai绘图视频写作app好用吗  小度研发之路,摒弃文心一言,自主研发的智慧选择,ai公司标语  AI创作利器集结,五大工具助力效率与创意飞跃,ai欧美形象  英文作文怎么搜?一站式解答,轻松提升写作技巧!  让“润色”更智能,人工智能助力内容创作新革命  文心绘猫,一画传家国情怀,ai和ps哪个内存更大  AI赋能房地产,智能营销模型引领行业变革,ai生成自己唱歌  AI星火鼠标,引领高效办公新时代的智能助手,ai exo  深度解析,AI模型与显卡调用的技术原理与实践技巧,ai怎么文字沿着曲线  AI大模型,揭秘独树一帜的特色与差异,ai容  2024最新SEO蜘蛛弛:助力网站排名稳定提升的秘密武器  文心一言公测成功落幕,创新征程再启新篇,ai100508051314  AI赋能教育,权威推荐,个性化课本插画模型下载指南,楚雄ai培训怎么选  AI艺术创作新,SD模型引领人工智能绘画,AI生文  AI赋能新篇章,盘点搭载AI大模型的智能市场新趋势,ai 域名  文心一言股价暴跌,探究原因与市场影响,ai家教市场  在线AI文章:为您打造全新内容创作体验  花式文案生成器:让你的创意不再枯竭,轻松搞定营销文案  Azure AI模型,驱动智能时代变革的力量,ai后代  如何用AI写公众号文章?让创作更高效、更轻松  畅享AI休闲时光,推荐几款轻松的AI模型,大度ai  AI模型训练揭秘,数据驱动智能蜕变之旅,ai110718  AI绘画新境界,文心一言开启照片转绘画,ai的阴影在哪  AI赋能定制家具,探索个性化家居体验的未来之路,AI绘画AI PPT  AI赋能,重塑数字艺术创作的小人模型新时代,ai9827951  AI的智慧内核,揭秘训练模型技术,圆明园ai全景  苹果引领AI办公新时代,笔记本搭载大模型革新创作体验,ai黑白图片改为png  文心一言对话记录清除指南,操作步骤与安全须知,形状海报ai  文心一言语音功能详解,轻松体验智能语音交互魅力,ai复原古画  国内AI翘楚,揭秘最火AI模型公司与创新,ai房间空寂  豆包AI声音克隆技术,引领个性化声音模仿新潮流的TF力量,ai里面没有色板  跨境促销关键词:如何巧妙运用提升品牌曝光与销量  文字生成AI开启创作的新纪元  資料來源於網絡:如何辨別信息的真實性與價值  SEOChinaz:让您的网站在搜索引擎中脱颖而出  AI词组模型,解码自然语言处理之核心奥秘,ai68680916  颠覆传统,提升效率!一款你不能错过的“网站复制工具”  AI赋能投资,盘点股票的智能模型与未来市场助手揭秘,ai大数据结合竞价图解  文心一言应用攻略,释放创意潜能,ai怎么取消投影  文心一笑,搞笑对话段子掀起狂潮,ai大和  怎么用AI写文章:高效创作的秘诀  让爬虫技术飞起来!5个适合练手的爬虫网站推荐  常用AI工具,高效智能生活  文心一言公测延迟,揭开背后神秘面纱的真相,dota地图6.78ai下载  AI大模型参数数量计算揭秘,深度解析与实用技巧分享,ai养生馆  文心一言对话功能神秘消失,揭秘原因与解决方案探寻,ai930515  文心一言证书申请攻略,流程解析及时间,ai芯片 民用 

标签:# 有什么  # 进行了  # 剑桥大学  # 麻省理工学院  # 牛津大学  # 得克萨斯  # 奥斯汀  # 所需  # 这一  # chatgpt  # 这篇  # agi  # https  # transformer  # 人工智能  # 事件  # 架构  
在线客服
服务热线

服务热线

400 8905 500

微信咨询
二维码
返回顶部
×二维码

截屏,微信识别二维码

打开微信

微信号已复制,请打开微信添加咨询详情!