OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 川普脱口秀8月26日:男厕所里放棉条,美国不大创造神话

责任编辑: 商媛

发布时间: 2024-09-20 00:24:23

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

日本,上半年超3.7万孤独者死于家中

2

皖赣铁路宁国改线工程建成通车

3

专家分析沙利文访华:中美新一轮战略沟通具有重要意义

4

亲西方小尾巴被揪出来了,伊朗背弃盟友,要跟敌人握手言和

5

国家能源局:将出台专项行动实施方案高效有序推进新型电力系统各项行动落实落地

6

德国又发生持刀行凶案,嫌犯被警方击毙

7

中国实力藏不住了!泰国2000亿大项目计划招标,希望中国投资建设

8

蔡壁如或接替溜之大吉的黄珊珊?柯文哲陷丑闻!

9

京津冀地区装配式建筑产业实现快速发展扫码阅读手机版

10

加沙断臂少年:失去亲人比失去双臂更痛苦

11

"沙利文访华随行人员几乎都会说中文,说明了啥?

12

【沙利文点名要见中央军委副主席,啥意思?】按惯例,美国白宫国家安全顾问一般与中央

13

00后癌发率飙升25倍

14

导演王君正病逝

15

世界第二大钻石挖出

16

未来三年50%的家庭,将面临四大难题##老百姓关心的话题

17

继柬埔寨、越南后,泰国宣布涉华重大消息!美国布局就要破灭了

18

沙利文想要的,中方无法接受,会场出现罕见一幕,中美斗争无赢家

19

外媒:马克龙否认他被捕是“政治决定”,马斯克再次发声!

20

未来三年50%的家庭,将面临四大难题##老百姓关心的话题

21

临沂市强化创新引领构建新型基础测绘体系

22

韩国通过《具荷拉法》父母如未尽抚养义务将被限制继承子女遗产

23

为人民群众提供更加优质高效的健康服务

24

以军在约旦河西岸行动已造成12死26伤

25

在东北打松塔是最赚钱的活儿,一年能干一个月,但是还是没人愿意来干,而会干这些活的

26

大选背景下沙利文来华,拜登政府有何需要?

27

绕过“豁免权” 检方提交新诉状起诉特朗普

28

日照万人捡拾面条鱼

29

台风“珊珊”登陆日本鹿儿岛多地出现人员伤亡

30

特朗普“未遂刺杀案”嫌疑人作案动机仍不明

31

2024“一带一路”媒体合作论坛在成都举行

32

要求降低针对中国关税,美国巨头特斯拉曾找过加拿大政府

33

从“新”出发清源街道“廉政1+N”伙伴成长计划开讲啦!

34

国家能源局:有能力、也有信心推动如期实现2030年前碳达峰的目标

35

比美剧还魔幻,实录巴西囚犯趁堵车出逃,并成功逃之夭夭

36

韩国Z世代上班族中,八成受访者爱求助AI

37

42头亚洲象组团遛弯

38

非中合作是全球发展合作的典范|国际论坛

39

面对面交流后有信心胜任这份工作。期待你的好消息(作者:罗晶

40

高调访问乌克兰,印度总理莫迪本想表现一下,反而现了眼

20

近"

20

莫迪结束访乌,不忘跟拜登通气,“白宫简报却漏了一段内容”

20

巴黎残奥会凌晨开幕!重温北京2次残奥点火,依旧震撼人心

20

哈里斯拼了,为竞选总统命都不要了?新的税收方案猛攻美顶级富豪

20

危废污泥变有机肥原材料河北石家庄被指危废污泥处置不当

20

美国志愿医生讲述加沙之痛“为什么美国有能力提供炸弹却没能力停止流血和杀戮”#巴以冲突#加沙

20

虹口足球场伤人不实

20

国航、南航接收首架C919飞机

20

上合会议临近,巴基斯坦给足面子,莫迪不来,印度成上合最大变数

热门攻略

1

日本上半年超3万名独居者死于家中

2

郑州市惠济区人大常委会人民来信来访办公室主任刘治军接受纪律审查和监察调查

3

台湾花莲6.1级地震

4

美国通知阿拉伯国家伊朗将于48至72小时袭击以色列

5

现在后悔晚了!中国下定决心反击,多国收到噩耗,普京赢麻了

6

陕西最大民企破产

7

盲目举债、蛮干硬干、乱铺摊子?警惕“民心”工程变“闹心”工程

8

深圳厚德书院爆雷

9

中央集群攻势不减,红军村方向乌军一路溃退,提防冒进中诱敌之计

10

中国驻菲使馆:对日本驻菲大使的不负责任言论予以抗议和谴责

11

东莞原市长被查

12

英首相呼吁欧洲团结应对极右翼势力

13

“工改工”赋能,潮南口腔用品专业镇加速“新”升级

14

外交部:欢迎更多外国人士到西藏走一走看一看

15

有奶便是娘:莫迪突访乌克兰,签一合作气坏俄罗斯!印难成大国!

16

南非总统表示愿同中方拓展各领域合作

17

2024年巴西登革热死亡病例超5200例

18

沙特带头,中东集体东转,中国被视为“救星”,美国忙泼脏水

19

员工办公室接吻被裁

20

石破茂访台回国后,决定参选日本自民党总裁,却面临尴尬

20

未来三天东北地区雨水较多高温坚守川渝地区

20

点赞河北-市长点赞《槐安路的咖啡馆》,宝藏歌手为石家庄创作了23首歌曲

20

印度古吉拉特邦洪水已造成约35人死亡

20

泰国女总理,被查?

20

校园巧改造城市微更新(探访·城市更新)

20

青岛市崂山区:坚持把好“三关”推动党费工作提质增效

20

以色列、美国等全球多地,暴发西尼罗河病毒疫情,通过蚊虫叮咬传播,尚无特效药,我国或存在输入风险

20

俄罗斯永久禁止92名美国公民入境

20

刚果(金)检方要求判处3名美国公民死刑,他们涉嫌参与未遂政变

20

广西北海:“开海”捕捞获丰收渔港码头交易忙

20

哈马斯威胁“恢复自杀式袭击”:冲突对抗冲突

20

人口老龄化加剧日本上半年超3万名独居者死于家中

20

泽连斯基:孩子们应该尽可能上学

20

20

印度古吉拉特邦洪水已造成约35人死亡

20

主动投案,淮南市大通区住房和城乡建设局党组书记、局长马春龙接受审查调查

20

#俄罗斯进口商品#喝出健康喝出来的美#俄罗斯蒲公英蜜

20

2024年7月广西查处违反中央八项规定精神问题407起

20

英首相呼吁欧洲团结应对极右翼势力

20

六安市交通基础设施建设投资有限公司综合管理部原主任刘磊被“双开”

20

上合会议临近,巴基斯坦给足面子,莫迪不来,印度成上合最大变数

20

洽洽25周年发布会在沪举办

20

奥斯汀被“拒之门外”,美方提两个担忧,中美不和导致亚太分裂?

20

王伟涉嫌殴打妇女,杜拉拉在公司当众难堪!

20

2024“一带一路”媒体合作论坛在成都开幕李书磊出席并致辞王晓晖庹震萨尔曼德·阿里大卫·本奇克致辞

20

原创天下长河:三省水灾元凶于震甲为何没被撤职反倒官升四品

20

安徽马鞍山这三家单位拟申请注销登记

20

美国志愿医生讲述加沙之痛“为什么美国有能力提供炸弹却没能力停止流血和杀戮”#巴以冲突#加沙

热门游戏

  • 1
    临沂市强化创新引领构建新型基础测绘体系

    射击枪战 /热度:52538

    点击下载

  • 2
    沈阳市最新任免名单

    射击枪战 /热度:27002

    点击下载

    专家:新疆塔里木河流域超警沙漠腹地现洪水

  • 3
    妈妈陪女儿网友奔现

    射击枪战 /热度:71909

    点击下载

    中方代表:愿继续为推动政治解决乌克兰危机作出不懈努力

  • 4
    崩坏3

    射击枪战 /热度:48895

    点击下载

    "俄乌冲突传来结束冲突的最新消息

  • 5
    原神 朝鲜登记注册13艘潜艇,韩国专家称:是为了与中俄联演

    射击枪战 /热度:62417

    点击下载

    印度与越南高铁合作项目取得重大突破,资金分配细节披露

  • 6
    出发吧麦芬 商务部:原产于欧盟的进口相关白兰地存在倾销暂不采取临时反倾销措施

    射击枪战 /热度:00703

    点击下载

    苏州吴中工行——外籍客户点赞的高效金融服务站

  • 7
    永劫无间手游 现在后悔晚了!中国下定决心反击,多国收到噩耗,普京赢麻了

    射击枪战 /热度:04233

    点击下载

    郯城县委书记王立军到县住建局调研

  • 8
    向僵尸开炮 日本上半年超3万名独居者死于家中

    射击枪战 /热度:47975

    点击下载

    武汉看守所发生爆炸

  • 9
    鸣潮 生态泉城丨关手在城市部分区域实施机动车禁鸣喇叭措施的通告

    射击枪战 /热度:81218

    点击下载

    被一块肉噎住、窒息、死亡的俄罗斯反恐负责人

  • 10
    艾塔纪元 主动投案、影响恶劣!多名90后干部被查

    射击枪战 /热度:45249

    点击下载

    海淀区14所中小学完成食堂后厨洗消间升级改造惠及学生3万余名

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 玩家故事征集 | 游戏音效制作教程 | 账号安全指南 |