Andrej Karpathy这位OpenAI联合创始人最近在一个开发者活动上发表简短讲话,谈论了自己和OpenAI内部对AI Agents (人工智能代理人)的看法。
(资料图片仅供参考)
Andrej Karpathy 对比了过去开发AI Agent的困难和现在新技术工具下开发的新机会,他还不忘调侃自己在特斯拉的工作,是“被自动驾驶分了心”,他认为自动驾驶和VR都是糟糕的AI Agents的例子。
对于新的机会,Andrej Karpathy认为此刻正是再次回归神经科学,从中寻求灵感的时刻——正像在深度学习早期发生的那样。
另一方面,Andrej Karpathy认为普通人、创业者和极客在构建AI Agents方面相比OpenAI这样的公司更有优势,大家目前处于平等竞争的状态,因此他很期待看到这方面的成果。
他还透露,如果一篇论文提出了某种不同的训练方法,OpenAI内部的Slack上会嗤之以鼻,认为都是他们玩剩下的。但是当新的AI Agents论文出来的时候,他们会认真兴奋的讨论。
以下是此次分享全文:
大家好。
我受邀就AI Agents 的话题说一些激励的话。我认为AI Agents在某种程度上跟我是很近的关系,让我以一个故事开始,这是一个非常早期的OpenAI的故事,那时OpenAI可能只有十几个人,在2016年左右,当时的潮流实际上是RL Agents(强化学习代理人)。
每个人都对建立代理人非常感兴趣,但在当时主要是基于游戏,人们的兴奋点围绕着像 Atari这样的游戏公司,而我当时在OpenAI的项目试图将RL Agents的重点放在用键盘和鼠标使用电脑上,而不是游戏。
我想让它们变得更有用,可以做很多工作,这个项目被称之为World of Bits。
我和几位同事最后发表了一篇论文。这不是一篇非常惊艳的论文,因为实际上这是基于RL强化学习方法的。我们的网页非常简单,上面可以让人比如预定一个航班或者订购一些食物等等。
这一切显然是行不通的,因为技术还没有准备好,在那时做这些东西是不明智的。
事实证明,应该完全忘记AI Agents这件事,去做语言模型。
五年之后我们回到这里,期间我被自动驾驶分了一点心,但现在AI Agents重新酷了起来,而我们的工具箱完全不一样了,我们处理这些问题的方式也完全不同了。
事实上,你们所有人都在研究AI Agents,但你们可能没有使用任何强化学习方法。这太疯狂了,我不认为我们当时会预见到这一点。这简直太有趣了。
下面我花一点时间谈谈为什么AI Agents如此火爆。我想很明显,对很多人来说,AGI(通用人工智能)将充分利用AI Agents的能力,不是一个,而是很多个。也许将会出现数字实体的组织或文明,我认为这是非常鼓舞人心的,甚至有点疯狂。
不过,我也想为此泼点冷水。 我认为有一大类问题很容易想象,很容易构建、演示,但实际上很难制作称为产品。很多事情都属于这一类,比如我想自动驾驶就是一个例子。
自动驾驶很容易想象,也很容易构建汽车绕街区行驶的演示,但将其变成产品需要十年时间。同样的道理,我觉得VR也是如此,让它发挥作用需要十年时间。
我认为AI Agents某种程度上也是如此。很容易想象它的场景,非常激发人的兴奋感,但我认为如果你参与其中,你应该投入十年时间来让它真正发挥作用。
我想说的另一件事是,我认为现在回到神经科学并在某些方面再次从中获得灵感是很有趣的,深度学习的早期阶段就受到了神经科学的启发。
思考它们之间的关系是非常有趣的,特别是我认为很多人都把语言模型当作解决方案的一部分,但如何构建一个完整的,拥有人类所有认知能力的数字实体呢?
显然,我们都认为我们需要某种潜在的系统来规划、思考和反思我们正在做的事情,这是神经科学发挥作用的地方。
比如,海马体是非常重要的,AI Agents中什么东西发挥着海马体的作用,用来实现储存记忆,标记检索等等这些功能?
我们大致已经了解如何构建视觉和听觉皮层,但还有许多的东西我们并不知道在AI Agents中意味着什么。
比如视觉游戏在AI Agents中是什么样子的?潜意识的所在地——丘脑在AI Agents中又相当于什么呢?
这非常有趣。事实上我今天带了一本神经科学的书,David Eagleman的《大脑与行为》,我发现这本书非常有趣和有启发性。
从神经科学中汲取一些有趣的灵感,就像早期我们设计单个神经元时所做的那样,今天我们也许应该再次这样做。
最后我想用一些鼓励的话结尾。一个有趣但不明显的事情是,你们(指现场观众)构建的AI Agents实际上处于当代AI Agents能力的最前沿,所有的大型LLM机构比如OpenAI、DeFi等,我怀疑他们都没有处于最前沿。
你们正处于最前沿。
举个例子,OpenAI 非常擅长训练 Transformer 大语言模型。如果一篇论文提出了某种不同的训练方法,那么我们OpenAI内部的Slack群组里的讨论会类似于,哦是的,有人在两年半尝试过,它不起作用,我们对这种方法的来龙去脉非常了解。
但是当新的AI Agents论文出来的时候,我们都非常感兴趣,觉得它非常酷,因为我们的团队并没有花费五年时间在这上面,我们并不比你们更多掌握什么,我们正在与你们所有人一起竞争。
这就是我为什么认为你们处于AI Agents能力的最前沿的原因,这对AI Agents的发展来说是非常重要的。
关键词:
OpenAI大神Karpathy最新分享:为什么OpenAI内部对AI Agents最感兴趣_世界微资讯
坚决清除公司“螃蟹文化”!_全球简讯
环球观点:马上,盐亭人将有一笔钱到账!
民国九年银元价格(2023年06月27日)
潢开区纪委:以督保执行 以访解难题 焦点滚动
报考教师资格证里面有无居住证_教师资格考试有无居住证
【当前独家】移动无限流量卡1000g_移动无限流量手机卡
环球观焦点:立足桃浦智创城,共创高品质生活
假期旅游,这四类传染病要当心!
九强生物:股东拟减持公司不超5.28%股份-最新
世界报道:柴洪获_关于柴洪获概略
环球观速讯丨郑州高新区举行工业互联网“百城千园行”活动
哈登左右不讨好?76人与火箭无明确报价,并曝恩比德可能离队! 热文
环球头条:汶川突发山洪泥石流,7人失联 目前正在全力搜救
环球热头条丨华丰科技上市!长虹控股集团第7家上市公司,绵阳首只科创板股
天天热头条丨浙江队火力正猛,梅州客家急需止颓!康拉德PK穆谢奎,乔迪欲送对手4连败
2023年兔年金银币价格表(2023年06月27日)-天天滚动
积极作为 履职尽责--安阳市东门小学英语学科期末工作总结会
今日视点:业绩为锚捕捉市场机遇 券商把脉中报行情
全球热文:千余作品参赛 “爱上北京的100个理由”短视频大赛在京颁奖
今日观点!6月26日CBOT小麦期货收盘互有涨跌
国内首台12兆瓦 海上风电机组完成安装
今日最新!汉朝与匈奴争夺西域,如何分解车师等国的?
今日热讯:瞄准产业新风向培养中医药技能人才
陕西降水来袭 给高温降降火_每日热门
焦点播报:尼山论“见”丨刘利达:预防安全事故光靠意识和管理远远不够,科技+管理形成互补和赋能
【研究报告】铜:利多支撑有限,铜价或继续承压|焦点关注
焦点热门:图南股份(300855):6月26日北向资金减持6.71万股
国际禁毒日 | 江苏常州:禁毒版“三国杀”上线,守护青春不“毒”行
重点监测造船企业前五个月新船订单同比增长48.3% 行业景气将持续改善?_快播