OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 联合国人道主义车辆遭以军射击

责任编辑: 戈睿

发布时间: 2024-09-20 04:15:26

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

俄罗斯永久禁止92名美国公民入境

2

日本发生“米骚乱”,民众恳求国家开仓放粮,被断然拒绝

3

英国财政压力严峻,政府酝酿对富人加税

4

心连心“网”前行:中部六省近百名网络达人走进湖南衡阳

5

2岁娃遭已婚男强奸

6

沙利文访华随行人员几乎都会说中文!网友高潮,实力的必然结果

7

宣绩高铁开始试运行全线开通运营进入倒计时

8

柯文哲让黄珊珊负责假账案善后,会是“请鬼拿药方”吗?

9

"四川阿坝驻村女乡党委书记下乡失联,以下哪种可能性比较大

10

河北高碑店:情系群众办实事为民修路暖人心

11

国家队的采访“泥石流”,把香港记者整懵了。

12

英国财政压力严峻,政府酝酿对富人加税

13

为麦田育种,为农民代言(人大代表在基层)

14

嘉峪关市十一届人大常委会第二十次会议召开王进平主持并讲话

15

50万大军压境,北约下场?普京派人来北京,请中方帮3件事

16

2024年中国网络文明大会在成都举行李书磊出席并发表主旨演讲

17

中美已谈拢,日本做出重大让步,高官紧急访华,岸田政府找台阶下

18

中国经济的东风吹到东南亚,唯独菲律宾,被排除名单之外

19

离石区医疗集团举行2024年“中国医师节”庆祝活动暨表彰大会

20

中国反制开始!首个“叫苦”的国家出现!爱尔兰怒斥欧盟:赔钱!

21

特朗普威胁扎克伯格:若再像2020年那样,你将在监狱度过余生

22

“过水门”迎接!国航首架C919飞机抵达首都机场

23

中式英语成海外爆梗

24

美国绝对没料到!普京重大让步,帮中国建5道防线,拿下18万亿大单

25

美科学家称该国一地放射性物质含量“堪比切尔诺贝利”美能源部:在安全范围内

26

人口老龄化加剧,日本上半年超3万名独居者死于家中

27

郑文灿涉贪案速审速判,赖清德的目的已达到?

28

数据·明查|印度强奸案发生率究竟是多少?

29

美媒痛苦发现,美国瞎折腾了七八年,中国却已不可阻挡

30

2024年中国网络文明大会网络文明培育分论坛发布系列成果

31

左翼强势“逼宫”,法政坛陷入僵局,关键时刻,马克龙开始耍无赖

32

小米对撞后门打不开

33

眉山市青神县:无惧高温“烤”验织密森林“防火网”

34

国际社会谴责以色列在约旦河西岸开展军事行动

35

乌克兰将失强援:波兰防长无奈的称,能给的武器都给了

36

5个核电项目获核准

37

首次多架!C919居然提前交付,国航、南航首机同框亮相

38

国家能源局:有能力、也有信心推动如期实现2030年前碳达峰的目标

39

具荷拉法正式通过,父母未尽抚养义务,不得继承子女财产。

40

世界上最危险的一条公路,全程都不限速,只能一路狂飙才能活

20

哈米德爸爸能平安归来是上天对哈米德一家莫大的眷顾(下)

20

点赞河北|市长点赞《槐安路的咖啡馆》,宝藏歌手为石家庄创作了23首歌曲

20

通关黑神话景区免费

20

AI与云算技术公司耗电大开矿公司助供电

20

孙颖莎龙道一记大功

20

国家体育总局:坚决遏制体育“饭圈化”愈演愈烈态势

20

海口最新人事!吕小蕾任海口市人民政府副市长

20

外交部回应以色列在约旦河西岸开展军事行动:保持冷静克制

20

莱昂纳多惊现法国餐厅,豪掷五万欧元小费,服务员泪目

热门攻略

1

40秒延时记录中国国航首架C919总装过程

2

中国预感到了什么,开始提前接触特朗普,为美国总统换人做准备

3

以色列南部拉响防空警报

4

8连问!中国驻菲律宾使馆批驳日方涉南海言论

5

程露任甘孜州人民政府副州长人事

6

地铁一女子骚扰大爷

7

20天了,还赶不走乌军!普京大怒,中方收到求助信号,中国开始行动

8

国家卫健委:我国人均预期寿命达到78.6岁

9

澳大利亚经历该国有记录以来最热冬日

10

台风“珊珊”登陆日本鹿儿岛多地出现人员伤亡

11

顿涅茨克形势恶化,乌军防线被突破

12

可爱一幕!巴黎残奥会开幕式前,中国与智利代表团PK“加油”

13

哈马斯损失惨重,真主党突袭失败,伊朗突然要向美国服软

14

美国曾经说一不二,想打谁就打谁,但现在,光是个胡塞武装就让他"

15

汶川县科学技术和农业畜牧局党组成员、县科技和农牧服务中心主任王平被查

16

关键一票!柯建铭暂时无人可替代,或成为“中常会”最大赢家

17

近百名选手参赛,第一届全省市场监管系统纤维检验员职业技能竞赛成功举办

18

连撞中美两堵墙后,莫迪认清事实愿出席金砖峰会,但中方未必买账

19

俄军占领乌重要村庄

20

中央批准履新的三名省级党委常委,均有新职!

20

“树语”回国再发声!曾在NHK直播时脱稿喊话“钓鱼岛是中国的”

20

猴痘变异新毒株出现

20

日本气象厅下调鹿儿岛县台风警报级别

20

"被打脸了!美国中情局承认了!

20

零首付买房重出江湖

20

台风来袭 日本自民党多人推迟宣布参选党总裁

20

风信子|市内免税店或增至27家,“DutyFree”为“ChinaTravel”添把火

20

海南省三亚市委原常委、统战部原部长陈正光接受审查调查

20

#扬州市广陵区委书记张伟:以深化改革为高质量发展蓄势赋能

20

东乌四州正式入俄,美要求中印对俄施压,印度拒绝站队,拜登出丑

20

台媒:加拿大课征收电动车100%关税,中方声明,坚决抗议!

20

泉州市十七届人大常委会召开第二十三次会议

20

一图速览2024年上半年荆州检察工作报告

20

现场视频来了!内地奥运健儿代表团抵港开始为期3天的交流活动

20

志同向行同道民同心(大使随笔·推动构建人类命运共同体)

20

印度火车挂满人不算什么,看看他们的轮船,让人感到冷汗直流!

20

中国不买“日本辐射鱼”,上门谈条件无果后,岸田文雄准备来硬的

20

加拿大人会明白的

20

拜登心腹沙利文,此刻访华有何意图?

20

美国多州报告李斯特菌感染病例,已有8人死亡

20

这种情况有标准答案吗?

20

中越关系彻底变天?越南专机正式抵华!现场迎接释放特殊信号!

20

突发!美国得州发生重大车祸货车多次翻滚致4死10伤

20

一觉醒来,美国接连被教训,后院两国公开反抗,称已忍无可忍

20

土耳其抓捕20名涉嫌参与2016年未遂政变的嫌疑人

20

特朗普再遭刺杀威胁

20

"蒙古国首都街道上到处是韩国人开的餐厅。

20

这一“战”,告捷!——青岛卷烟厂夏季停产检修工作侧记

热门游戏

  • 1
    惠州市惠城区龙丰街道党工委原副书记、综合行政执法办公室原主任……

    射击枪战 /热度:12429

    点击下载

    果不其然!连蔡英文都不如?岛内专家犀利无比,赖清德遭晴天霹雳

  • 2
    让美国失望了?一觉醒来,反华联盟彻底“崩塌”!拜登着急也没用

    射击枪战 /热度:38808

    点击下载

    韩国一高中生用AI制作带有老师面孔的色情图片,并在网上传播被捕

  • 3
    滨州市退役军人事务局举办“送政策、送法律、送培训、送教育、送岗位”进军营活动

    射击枪战 /热度:69523

    点击下载

    中国刚给予俄罗斯支持,俄反手就给我们一道难题,是挖坑还是合作

  • 4
    崩坏3 俞承志任中国电科副总经理

    射击枪战 /热度:63362

    点击下载

  • 5
    原神 王毅同美国总统国家安全事务助理沙利文举行战略沟通

    射击枪战 /热度:05832

    点击下载

    中国海军“和平方舟”号医院船结束访问南非前往安哥拉

  • 6
    出发吧麦芬 瑞昌、樟树市委主要负责同志调整#人事任免

    射击枪战 /热度:16323

    点击下载

    济南市人社系统业务技能练兵比武集训班开班

  • 7
    永劫无间手游 每次看到别人指责我们写文章宏大叙事,我就感到特别奇怪。我们是写国际政治的号,国际

    射击枪战 /热度:03871

    点击下载

    厦门银城智谷推行园区与企业联席共治管好企业员工衣食住行

  • 8
    向僵尸开炮 日本上半年超3万名独居者死于家中

    射击枪战 /热度:63691

    点击下载

    国外网友对中国的第一印象,日本网友:全靠我们上个世纪的帮助

  • 9
    鸣潮 世界上流量最大的亚马逊河,为何没有一座桥梁贯穿之上?

    射击枪战 /热度:84146

    点击下载

    "突发消息!

  • 10
    艾塔纪元 经济安全保障大臣高市早苗宣布将于9月9日正式宣布参选自民党总裁选

    射击枪战 /热度:05706

    点击下载

    东京暴雨地铁站被淹

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏公司介绍 | 游戏攻略 | 射击游戏 |