OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 住在蒙特勒伊的日子——巴黎永远没有终结①

责任编辑: 轩辕锦

发布时间: 2024-09-20 06:35:09

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

杨永明:长崎市长不邀以色列参加记念。美国大使拒绝出席很可耻!

2

72小时内,日方3次叫板中国,中方直接摊牌,日本只有一条路可走

3

改革中的“民生账”|进“一扇门”办“两地事”川渝携手打造便民惠企“幸福圈”

4

台风“安比”将以巅峰16级,#强台风袭击日本!

5

#遵纪守法才是正道#严惩黑恶势力#违法必究

6

以官员:以军在加沙地带的作战已“基本结束”

7

国家一把手时间最长的领导人

8

潼关县委统战部不忘老朋友、广交新朋友、深交好朋友

9

现在的舆论导向都怎么了?弱势群体就一定有理?法院如果不讲证"

10

普京向金正恩请求援助,检验两国条约成色的时候到了

11

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

12

波兰总理:波兰将申请举办奥运会

13

中央气象台:台风“安比”减弱为台风级,将向东偏北方向移动

14

全红婵成了社交悍匪

15

旧物当钱花成年轻人新时尚杭州首届绿色生活消费季活动在银泰百货启动

16

反转再反转!哈里斯筹款破亿,中方发出重要信号!

17

重磅!49岁警察继父性侵案曝光!梅毒病史与权利滥用下的阴影!

18

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

19

卡德罗夫麾下最精"

20

全红婵哥哥开果蔬店

21

7部影片进军国庆档

22

老人被深度洗脑转账

23

下限4027元,上限20133元!湖南调整社保月缴费基数上下限

24

湖南湘潭一物业管理公司因违规停放电动自行车被罚

25

贝东丹当选泰国总理后首发言!感谢赛塔所做的贡献!

26

澳霹雳舞选手被网暴

27

泰国坠崖孕妇,五年前被丈夫推下悬崖,如今故地重游感谢恩人

28

关于刘祖元等15名同志任职的通知

29

广西壮族自治区政协经济委员会副主任李延强接受审查调查

30

统一势不可挡!大陆逮住多条“大鱼”,民进党好日子不多了

31

国羽男单全部出局

32

深圳盐田边检站全力护航迎开渔

33

#日本研究机构预测全球变暖将导致大米产量下降#日本

34

广州荔湾沙面街道:以“四大工程”助力沙面历史文化街区保护和提升

35

安倍夫人高速遭遇车祸,遭后方警卫车辆追尾(2)

36

果然没让大陆失望!蔡英文这回立大功了,赖清德最害怕的事发生

37

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

38

多国回应股市动荡

39

台公布“2·14”撞船调查结论,国台办:不接受

40

越南重启高铁梦,向中国既要技术又要钱

20

乌克兰要求墨西哥逮捕普京,27国表示支持,中国发言表明态度

20

容桂破局待昔日工业路在何方?顺德|国科院研·科技成果转化

20

外交部美大司司长杨涛会见美国青年政治家代表团

20

联合国呼吁加沙短暂停火以便启动脊髓灰质炎疫苗接种

20

中老缅泰同意加大力度联手打击网赌电诈等跨境犯罪

20

两岸善意门已开?民进党当局什么都没干,就想空口白言推卸责任

20

普京研读《论持久战》启示录:俄美消耗战背后,乌克兰的未来迷局

20

业界:中国品牌发展迅速本质在于创新

20

夏日汽车7大危险品

热门攻略

1

潘展乐大家少关注我

2

注重文书质量 强化跟踪落实 优化流程设置促进检察建议实质化“办复”

3

Meta广告管控失职失责,19名美国议员联合质询扎克伯格

4

网红桃花水一瓶卖到42元

5

杨威回应考裁判证

6

美国这是对印度下手了吗?这又是什么操作?难道印度已经拱到世界老二位置让美国慌了?

7

当选泰国新任总理后,他信之女佩通坦钦那瓦首次发声

8

富强不忘国防和平不忘忧患

9

确实,如果是北约直接参与确实很难对付,俄罗斯调集相当的兵力也不容易,主要是能干的

10

马来西亚发布莎阿南市空难调查报告机组人员操作失误致飞机坠毁

11

男子在按摩店死亡

12

印尼总统佐科发表任内最后一份国情咨文

13

14

俄罗宣斯称"

15

美国或迎首位女总统,哈里斯胜率高达7成!特朗普:车轮战不公平

16

邹敬园卫冕双杠金牌

17

记者:马竞已将下周三定为解决加拉格尔问题的最后期限

18

浴场粪大肠菌群超标

19

淄博世博高新医院骨科临床医学中心医患联谊会成功举办

20

瑶海区安溪商会第一次会员代表大会胜利召开梁全财当选首任会长

20

美国强行嫁祸乌克兰,乌克兰拒绝接受,却愚蠢地要甩锅给俄罗斯

20

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

最牛死刑饭死了都要赚

20

中国建设银行甘肃省分行党委委员、副行长邵茂丰接受纪律审查和监察调查

20

澳IT专家批美炮制“伏特台风”:把中国描述成网络威胁是危险的

20

河北省唐山市一级巡视员曹全民接受纪律审查和监察调查

20

辰亦儒妻子官宣怀孕

20

产品生态双管齐下银河麒麟蓬勃发展

20

单位41人入职遭清退

20

2024国际零碳岛屿联盟暨长岛海洋生态文明分论坛举行

20

被“驯服”的俄罗斯新寡头:作为普京的伙伴,普京如何照顾他们?

20

"震撼新闻曝光!

20

陈梦奥运奖金近400万

20

加强施工污染防治监管营造舒适宜居环境

20

种地养土,种菜施肥:农业之道,事半功倍!

20

也门南部自杀式袭击死伤人数升至34人

20

瞒了普京2次酿成大祸,格拉西莫夫失势了,俄军大权交给普京心腹

20

今天,正式开幕!

20

天气预报#一起关注天气变化

20

台湾花莲县发生4.0级地震震源深度18千米

20

中国建设银行甘肃省分行党委委员、副行长邵茂丰被查

20

1家3口大群互骂1时

20

张雨霏印度并列71名

20

英国国王就骚乱发声

20

越南苏林确认访华,中方将超高规格接待,不到24小时中柬外长会面

20

存款率下降钱放哪好

20

[企业动态]中顺洁柔新增1件法院诉讼,案由为不正当竞争纠纷

20

[企业动态]中顺洁柔新增1件法院诉讼,案由为不正当竞争纠纷

热门游戏

  • 1
    卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

    射击枪战 /热度:42043

    点击下载

    海峡两岸法学界人士共话“司法保障与法律服务”

  • 2
    还要考虑吗?只要拿地图看一下就知道有且只有缅甸。"

    射击枪战 /热度:89444

    点击下载

    惊险一幕!美国犹他州连续遭遇雷暴天气,居民拍下洪水冲破窗户涌入地下室瞬间

  • 3
    大陆一举轰动两岸,不到一天,美国口风大变,赖清德害怕的发生?

    射击枪战 /热度:36243

    点击下载

    曹全民被查,曾任唐山市副市长

  • 4
    崩坏3 社会类:入围奖-《巴尔斯》

    射击枪战 /热度:93326

    点击下载

    落实进一步全面深化改革的决策部署为中国式现代化提供强大动力和制度保障

  • 5
    原神 德国联邦国防军开始分析乌克兰进攻俄罗斯地图

    射击枪战 /热度:80548

    点击下载

    镜观·领航|巩固发展新时代生态文明建设成果

  • 6
    出发吧麦芬 雄安早知道丨雄安新招聘!事业编!(2024.08.16)

    射击枪战 /热度:20898

    点击下载

    河北唐山又一厅官落马:曾任副市长的曹全民通报被查

  • 7
    永劫无间手游 山东省委常委会召开会议

    射击枪战 /热度:60331

    点击下载

    马来西亚发布莎阿南市空难调查报告机组人员操作失误致飞机坠毁

  • 8
    向僵尸开炮 亭湖大洋:抗战家书宣讲,激发奋进力量

    射击枪战 /热度:24226

    点击下载

    中老缅泰同意加大力度联手打击网赌电诈等跨境犯罪

  • 9
    鸣潮 洛阳市政协最新人事任免

    射击枪战 /热度:18035

    点击下载

    尹弘主持召开省委常委会会议

  • 10
    艾塔纪元 昆明市不动产登记中心办公室主任宋伟烨接受纪律审查和监察调查

    射击枪战 /热度:43336

    点击下载

    突发!张志杰遗体在国外火化,姑姑透露心酸事,印尼做法令人心寒

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏社交圈 | 积分商城 | 电竞明星 |