OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 石榴图汇·每日一图丨水厂满负荷运行让企业用水管“饱”

责任编辑: 杨畅

发布时间: 2024-09-20 09:27:57

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

行进中国·看生态之美——青山依旧湟水悠长

2

中国石化启动“清净守护长江”社会责任行动

3

埃及外长:达成加沙地带停火协议是缓和局势的关键

4

东盟走向何方

5

孙杨参加明年全运会

6

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

7

中老缅泰外长举行非正式会晤

8

滨州市第54期“政企同心·亲清茶事”政企对接交流活动举办

9

苹果首次开放第三方NFC支付,仅支持付费使用

10

中纪委点名医药腐败

11

英跳水名将戴利退役

12

中老缅泰外长举行非正式会晤

13

化隆:县域面貌发生巨变民生福祉持续殷实

14

台湾局势变天?赖清德遭晴天霹雳!大陆果断祭出杀招,事情不简单

15

超重被取消决赛资格

16

俄罗斯外交部抗议亚美尼亚新版历史教科书“歪曲”历史

17

大医精诚,格物致知——荆州市中心医院举办第七届中国医师节表彰庆祝大会

18

水谷隼说马龙突破口

19

580余家媒体集中发布这一报告

20

洛杉矶将办无车奥运

21

美国7月新屋开工总数年化123.8万户:低于预期133万户

22

扶南运河开挖,越猴急了,兔子终于出手。#国际局势#巴以冲突

23

广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

24

江津区城市管理局:高效推进审批事项办理助力政务服务环境提升

25

苏丹外交部:快速支援部队袭击村庄造成85人死亡

26

又有两名政界人士可能加入日本自民党党魁角逐

27

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

28

贵州三穗县大桥垮塌

29

外网提问:印度能在全面战争中彻底打败中国吗?三哥提问笑不活了

30

日方政要纷纷参拜靖国神社!我外交部强硬回应,岸田文雄听清了

31

"台湾长荣酒店的做法是在作死。

32

王楚钦再谈男单失利

33

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

34

美国国务卿布林肯或前往以色列会见内塔尼亚胡

35

永福县广福乡:“人才+”模式探索乡村振兴新路子

36

市场监管总局:正在加快制定《经营者公平竞争合规管理规范》国家标准

37

杨浦区一干部被查

38

美国总统大选辩论将于9月10日在费城举行

39

四川兴文推进竹食品及林下采集产品产业一二三产融合联动“竹林粮库”盘活林地空间

40

石智勇疑内收肌断了

20

注重文书质量 强化跟踪落实 优化流程设置促进检察建议实质化“办复”

20

欧洲最干净的十大城市出炉,卢森堡第一,苏黎世第三,维也纳上榜

20

普京打断库尔斯克州州长的汇报那是军事数据

20

连续3年全省前列!咸宁持续加大长江大保护工作力度

20

广西壮族自治区政协经济委员会副主任李延强接受审查调查

20

国乒女团首次登场

20

韩国乒乓球女团铜牌

20

多国停飞中国航线,更多国家或将跟进,背后发生了什么?

20

澜湄清洁空气倡议联合声明(摘要)

热门攻略

1

潘展乐惊天逆转

2

快递小哥现身闭幕式

3

【国际】乌克兰继续深入俄罗斯地区,据称是为了获得更多谈判筹码

4

王楚钦掐火莎莎的脸

5

当全职孙子月入七千

6

在事实面前,美国的“全球叙事”不攻自破|参考独家

7

省委常委会召开会议徐麟主持并讲话李炳军赵永清时光辉等参加

8

美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

9

蔡润,候任副部级新职

10

在社会上,居然存在着一种极为荒谬的说法,说很多女干部跟领导存在不正当关系。可这纯

11

震惊!菲律宾惊天劫案:中国商店遭抢,保安独战群匪击毙匪首!

12

【心安商店】心安城市助力阳信县商店镇葡萄节嘉年华圆满成功

13

陈俊光到潮州调研绿美广东示范点、示范带建设情况

14

12秒卖完4万瓶红酒!哈登二度带货,兴奋到跳舞,直接翻跟斗

15

秦皇岛抚宁区:“学”“行”“展”并举,开展理想信念教育

16

#精神内耗

17

国家市场监管总局:今年底建成全国“个体工商户名录”

18

俄法举刀疯狂互捅-奥运禁赛算什么-俄在非洲断法国财路

19

大葱生长加速期,掌握这6大管理要点,把握时机别错过!

20

规范指定居所监视居住适用工作

20

台湾民意代表陈玉珍:两岸同属一条根,我以身为福建金门人为荣

20

干部被举报顶替上学

20

巴西绝大部分商界精英并不在意国家利益

20

济南市教育局新增一名副局长,此前任职市科技局

20

伊朗遭遇大规模网络攻击:银行系统瘫痪,网络战正式打响?

20

特朗普:投票给我我会让你们更有钱拜登嘲讽:你该去找份工作

20

学习全会精神助推法院高质量发展

20

“锡”引力丨在碧水蓝天中亮出生态答卷,无锡开启生态文明新篇章

20

未办环评审批手续擅自开工,山西陆合集团恒泰南庄煤业被罚21.7万元

20

警惕!有人假冒民政部老龄工作司工作人员身份进行诈骗

20

20

我去过很多东南亚国家,可以说几乎所有东南亚国家的经济都是掌握在华人手里,只有越南

20

罕见!一镇政府发文,被撤销

20

已余震7次!未来3天台湾可能仍有5.5级地震!

20

加沙地带确认一例脊髓灰质炎病例

20

美国政府批准了新一轮价值超过200亿美元对以色列军售计划此时美国批准对以军售实际上就是向以色列授权使其继续袭击加沙地带,并将冲突扩散

20

吴艳妮谈带妆比赛

20

日本首相岸田文雄宣布重大决定放弃连任

20

澳门公布行政长官选举日程表

20

光伏板下牧牛羊

20

郑钦文对不起张之臻

20

高盛称选民正在转而支持哈里斯

20

铸牢共同体团结谱新篇

20

8月16日,朝鲜半岛风云突变,金正恩一声令下,朝军铁骑"

20

沙田镇主要领导调研“百千万工程”和人居环境提升工作

20

兰花萎靡不振?注意盆土酸碱度,可能是原因所在!

20

龙凤胎生日相差11天

20

婚登中取消户口簿是否会导致重婚、骗婚?民政部回应

热门游戏

  • 1
    广州荔湾沙面街道:以“四大工程”助力沙面历史文化街区保护和提升

    射击枪战 /热度:57373

    点击下载

    湖南益阳:虎山之路展新妆

  • 2
    美国国务卿布林肯或前往以色列会见内塔尼亚胡

    射击枪战 /热度:78131

    点击下载

    庆祝中国与巴西建交50周年:中巴友城举办灯光秀

  • 3
    公职人员工作群误发不雅内容

    射击枪战 /热度:79365

    点击下载

    云南五华产业园区总工会揭牌成立第一次会员代表大会顺利召开!

  • 4
    崩坏3 中国贸促会会长任鸿斌会见广西壮族自治区副主席谭丕创一行

    射击枪战 /热度:60628

    点击下载

    昆明市不动产登记中心办公室主任宋伟烨接受纪律审查和监察调查

  • 5
    原神 万州区委副书记、区长李庆会见国家能源集团重庆电力有限公司总经理陈勇

    射击枪战 /热度:08527

    点击下载

    又是波音!特朗普副手万斯所乘飞机出现紧急情况迫降

  • 6
    出发吧麦芬 [党纪学习教育]抓实警示教育提升学习质效

    射击枪战 /热度:20025

    点击下载

    广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

  • 7
    永劫无间手游 西合高铁、合襄高铁、南信合高铁、沿淮高铁、阜冈九高铁的关系

    射击枪战 /热度:20314

    点击下载

    曹全民被查,曾任唐山市副市长

  • 8
    向僵尸开炮 图1-2,乌克兰那边确认了,一爱尔兰裔的19岁小伙子雷茹克,在乌克兰战场成了俄军

    射击枪战 /热度:07964

    点击下载

    “靠交通吃交通”海南省交通运输厅原副厅长姚建勇被“双开”

  • 9
    鸣潮 打造“敏捷服务”,江苏部署实施29项“高效办成一件事”

    射击枪战 /热度:19839

    点击下载

    伊朗和黎巴嫩真主党对以色列的报复行动可能以暗杀以色列高级官员的形式出现,而不是发

  • 10
    艾塔纪元 0214渔船事件正式结案,岛内“海委会”出来表态了!8月16日,“海委会”声称,

    射击枪战 /热度:04760

    点击下载

    烟台机场每周飞往日韩的全货机达40班,提供两千吨以上运载能力

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏主题曲MV | 账号安全 | 热门排行 |