服务粉丝

我们一直在努力
当前位置:首页 > 科技 >

OpenAI大神Karpathy最新分享

日期: 来源:品玩收集编辑:品玩

Andrej Karpathy这位OpenAI联合创始人最近在一个开发者活动上发表简短讲话,谈论了自己和OpenAI内部对AI Agents (人工智能代理人)的看法。

Andrej Karpathy 对比了过去开发AI Agent的困难和现在新技术工具下开发的新机会,他还不忘调侃自己在特斯拉的工作,是“被自动驾驶分了心”,他认为自动驾驶和VR都是糟糕的AI Agents的例子。

对于新的机会,Andrej Karpathy认为此刻正是再次回归神经科学,从中寻求灵感的时刻——正像在深度学习早期发生的那样。

另一方面,Andrej Karpathy认为普通人、创业者和极客在构建AI Agents方面相比OpenAI这样的公司更有优势,大家目前处于平等竞争的状态,因此他很期待看到这方面的成果。

他还透露,如果一篇论文提出了某种不同的训练方法,OpenAI内部的Slack上会嗤之以鼻,认为都是他们玩剩下的。但是当新的AI Agents论文出来的时候,他们会认真兴奋的讨论。

以下是此次分享全文:

大家好。

我受邀就AI Agents 的话题说一些激励的话。我认为AI Agents在某种程度上跟我是很近的关系,让我以一个故事开始,这是一个非常早期的OpenAI的故事,那时OpenAI可能只有十几个人,在2016年左右,当时的潮流实际上是RL Agents(强化学习代理人)。

每个人都对建立代理人非常感兴趣,但在当时主要是基于游戏,人们的兴奋点围绕着像 Atari这样的游戏公司,而我当时在OpenAI的项目试图将RL Agents的重点放在用键盘和鼠标使用电脑上,而不是游戏。

我想让它们变得更有用,可以做很多工作,这个项目被称之为World of Bits。

我和几位同事最后发表了一篇论文。这不是一篇非常惊艳的论文,因为实际上这是基于RL强化学习方法的。我们的网页非常简单,上面可以让人比如预定一个航班或者订购一些食物等等。

这一切显然是行不通的,因为技术还没有准备好,在那时做这些东西是不明智的。

事实证明,应该完全忘记AI Agents这件事,去做语言模型。

五年之后我们回到这里,期间我被自动驾驶分了一点心,但现在AI Agents重新酷了起来,而我们的工具箱完全不一样了,我们处理这些问题的方式也完全不同了。

事实上,你们所有人都在研究AI Agents,但你们可能没有使用任何强化学习方法。这太疯狂了,我不认为我们当时会预见到这一点。这简直太有趣了。

下面我花一点时间谈谈为什么AI Agents如此火爆。我想很明显,对很多人来说,AGI(通用人工智能)将充分利用AI Agents的能力,不是一个,而是很多个。也许将会出现数字实体的组织或文明,我认为这是非常鼓舞人心的,甚至有点疯狂。

不过,我也想为此泼点冷水。 我认为有一大类问题很容易想象,很容易构建、演示,但实际上很难制作称为产品。很多事情都属于这一类,比如我想自动驾驶就是一个例子。

自动驾驶很容易想象,也很容易构建汽车绕街区行驶的演示,但将其变成产品需要十年时间。同样的道理,我觉得VR也是如此,让它发挥作用需要十年时间。

我认为AI Agents某种程度上也是如此。很容易想象它的场景,非常激发人的兴奋感,但我认为如果你参与其中,你应该投入十年时间来让它真正发挥作用。

我想说的另一件事是,我认为现在回到神经科学并在某些方面再次从中获得灵感是很有趣的,深度学习的早期阶段就受到了神经科学的启发。

思考它们之间的关系是非常有趣的,特别是我认为很多人都把语言模型当作解决方案的一部分,但如何构建一个完整的,拥有人类所有认知能力的数字实体呢?

显然,我们都认为我们需要某种潜在的系统来规划、思考和反思我们正在做的事情,这是神经科学发挥作用的地方。

比如,海马体是非常重要的,AI Agents中什么东西发挥着海马体的作用,用来实现储存记忆,标记检索等等这些功能?

我们大致已经了解如何构建视觉和听觉皮层,但还有许多的东西我们并不知道在AI Agents中意味着什么。

比如视觉游戏在AI Agents中是什么样子的?潜意识的所在地——丘脑在AI Agents中又相当于什么呢?

这非常有趣。事实上我今天带了一本神经科学的书,David Eagleman的《大脑与行为》,我发现这本书非常有趣和有启发性。

从神经科学中汲取一些有趣的灵感,就像早期我们设计单个神经元时所做的那样,今天我们也许应该再次这样做。

最后我想用一些鼓励的话结尾。一个有趣但不明显的事情是,你们(指现场观众)构建的AI Agents实际上处于当代AI Agents能力的最前沿,所有的大型LLM机构比如OpenAI、DeFi等,我怀疑他们都没有处于最前沿。

你们正处于最前沿。

举个例子,OpenAI 非常擅长训练 Transformer 大语言模型。如果一篇论文提出了某种不同的训练方法,那么我们OpenAI内部的Slack群组里的讨论会类似于,哦是的,有人在两年半尝试过,它不起作用,我们对这种方法的来龙去脉非常了解。

但是当新的AI Agents论文出来的时候,我们都非常感兴趣,觉得它非常酷,因为我们的团队并没有花费五年时间在这上面,我们并不比你们更多掌握什么,我们正在与你们所有人一起竞争。

这就是我为什么认为你们处于AI Agents能力的最前沿的原因,这对AI Agents的发展来说是非常重要的。


相关阅读

  • 奔流“拍客团”邀您加盟

  • 奔流是一种向前的姿态奔流更是一种开放的胸怀上线一年奔流新闻坚持全域广度、文化厚度、青春角度和民生温度内容生产力跃升品牌传播力彰显成功迈进千万级新媒体平台站在新的
  • 重大等你,未来可期

  • 嘉陵与长江相汇而生重庆,人文与科学相济而衍重大。代号10611,这是重庆大学,是国家“211工程”“985工程”重点建设高校,入选国家“世界一流大学建设高校(A类)”、第二轮“双一流”
  • 技校学子省赛获佳绩

  •   记者 郑丽敏 通讯员 黄溢平   近日,在第二届浙江技能大赛的CAD机械设计赛项中,象山港高级技工学校学子石曦获得第二名,励韬获得第三名。这是象山学生首次参加该赛项比赛,
  • 李振平:以红心践初心 以初心赢民心

  • 春来暑往,秋收冬藏,任时间飞逝、季节轮转,他始终捧着一颗红心,奔走在乡间田野,以共产党员的初心和使命,矢志不渝带领群众致富奔小康。“东营市优秀村主任”、“河口区劳动模范”、
  • 绿色钢厂 “氢”松降碳

  • 一尘不染的道路,整齐排列的厂房,再加上大片的绿化,这是我们看到的绿色河钢。投资上百亿元完善环保项目,率先采用氢能重卡进行产品运输,建成“世界最清洁钢厂”,这是内行人看到的
  • 极目锐评|以龙舟精神汇聚咸宁拼搏赶超的奋进力量

  • 极目新闻特约评论员 朱哲鼓声三下红旗开,两龙跃出浮水来。“粽”夏之时,湖北咸宁市各地争相举办龙舟赛,百舸争流,龙舟竞渡,观者如林,形成一道道靓丽的风景。通山市民自发组织龙舟
  • 征兵体检进行时,热血青年接受祖国挑选

  • 极目新闻记者 李庆通讯员 洪培舒 邓健文 夏丹近日,武汉市蔡甸区开展2023年下半年征兵体检工作,来自全区各街(乡)以及对口征集高校的两百余名应征青年怀揣着青春梦和强军梦接受祖

热门文章

  • 解码“新IT”的5个特征和3大价值

  • 党的二十大报告提出,要加快发展数字经济,促进数字经济和实体经济深度融合,打造具有国际竞争力的数字产业集群。在数字经济与实体经济深度融合的产业浪潮中,以智能设备、边缘计算
  • OPPO k1的低价高配真实么?网友:不看不知道

  • 近日OPPO一款新机OPPO k1,摒弃了高价低配,就连自家老大哥r17都要怼一下。更是放弃了请代言人,以往的OPPO手机还没出来,各路流量小生,花样美男的代言就先来了。还有线下销售人员的
  • 一招教你手机无限制成为一台新设备

  • 大家平时用手机去注册app,肯定会遇到检测设备异常,交易关闭,等问题 这个都是手机已经不止1-2次注册过此app,不断更换手机仅是一个暂时的方法,却不是长久之计,手机总归会用完
  • 从零开始如何开网店

  • 随着互联网的高速发展,人们的生活发生了翻天覆地的变化,生活节奏越来越快,网购已经成为家家户户生活中离不开的一种购物方式了。网购的发展使得越来越多的人想要涉足电商事业,那

最新文章

  • OpenAI大神Karpathy最新分享

  • Andrej Karpathy这位OpenAI联合创始人最近在一个开发者活动上发表简短讲话,谈论了自己和OpenAI内部对AI Agents (人工智能代理人)的看法。Andrej Karpathy 对比了过去开发AI Ag
  • 临县:中小学生暑假交通安全倡议书

  • 全县中小学生、各位家长:暑假即将来临,为确保全县中小学生交通安全,让孩子们度过一个安全、文明、健康、愉快的假期,临县公安局交警大队向全体中小学生及家长发出如下倡议:一、自
  • 儿童绘画心理学:画中有“话”——忙碌的人们

  • 绘画是儿童最常见的游戏活动之一,是孩子内心世界的无意识的呈现,可以促进儿童身体、心灵、学习的发展,是沟通交流的媒介,也是走进孩子内心的一把钥匙。根据国内著名绘画心理专家
  • 衡阳市珠晖区:民兵互助 为民解忧

  • 近日,家住衡阳市珠晖区茶山坳镇的民兵队员许健遇到了麻烦事。端午期间的连续暴雨让房屋附近内涝成灾,院子里种植的蔬菜、瓜、果来不及收摘,眼看心血将毁于一旦,许健愁得手足无措
  • 影视剧里的坏人,为什么都爱吃甜的

  • “你是不是最近压力比较大?吃根棒棒糖吧。”当电视剧《狂飙》里杀人不眨眼的鱼贩老默从口袋里掏出两根棒棒糖时,某种奇怪的错位,让这个人物的形象变得愈加复杂起来。用食物隐