OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 2件事,美国盟友没好下场!以色列警告美媒:不要道听途说

责任编辑: 韦洛

发布时间: 2024-09-20 17:19:57

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

据媒体报道消息,泽连斯基放出话来,叫喊俄罗斯无条件投降,这大概是本世纪最大的一个

2

刘和平:被时势造就的哈里斯能走多远?

3

支持率只剩下6%!柯文哲推翻两党政治的挑战已结束!

4

【新闻发布】以英模名字命名!我市成立首批20个见义勇为英模工作室

5

波兰总理:波兰将申请举办奥运会

6

台公布恶性撞船事件调查结论,国台办回应

7

长荣桂冠酒店道歉

8

#猴痘病毒,#传播途径是什么?为什么会蔓延到欧洲#瑞典发现首例#发现

9

水利部启动2024年夏秋季引江济太应急调水

10

多地取消新房限价

11

【每周经济观察】绘就中国绿色发展的“工笔画”

12

日本钢板仙人,最高端的钢板是如何制造的

13

中国建设银行甘肃省分行副行长邵茂丰接受审查调查

14

谢瑜的偶像是马龙

15

又“舔”上了?赖清德发文感谢岸田文雄对台“坚定支持”

16

王楚钦展示打台球一打一个不吱声

17

党建引领聚合力结对共建谋发展

18

金融监管总局首批两会建议提案回复亮相!

19

WTT盛赞马龙GOAT

20

男子在日本靖国神社前举横幅抗议对来往游客和当地日本人表示强烈不满

21

【国际】乌克兰继续深入俄罗斯地区,据称是为了获得更多谈判筹码

22

刘强东低价进行到底

23

8.13亿!这个贪官够狠够黑够毒的!

24

溯水城水韵,寻峥嵘岁月

25

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

26

辰亦儒妻子官宣怀孕

27

三伏酷热难耐,仙人球也难挡高温侵袭,其他花卉更需小心呵护

28

台青大陆countrywalk:爱上乡村的文化味和松弛感

29

江山如画|江山画中游,“豫”见万里锦绣

30

一岁萌娃出门溜达

31

中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

32

警惕!美国、以色列,正在将恐怖主义“合法化”

33

俄在库尔斯克摧毁一支乌军侦察队

34

挪威专家出来说实话了!8月16日,挪威专家格伦·迪森表示,美国作为以前的霸主,正

35

河北唐山又一厅官落马:曾任副市长的曹全民通报被查

36

金融监管总局首批两会建议提案回复亮相!

37

帅化民:乌克兰占领的土地没什么关系普京挨了一耳光最重要

38

特朗普和高龄粉丝互动:你真美你看起来也就60多岁高龄女粉丝:我快100了

39

中柬运河项目刚开建,越南一把手计划访华,中方的用意苏林读懂了

40

尼日利亚中部至少20名大学生遭绑架

20

太平人寿江西分公司开展2024年党风廉政教育宣传季活动

20

四川省委常委、常务副省长董卫民赴海光信息等企业调研,强调加快发展人工智能产业

20

普京已对外交部“开刀”,拉夫罗夫的多年副手,被一道总统令革职

20

医生诊疗打电话抽烟

20

巴基斯坦西南部发生炸弹袭击致1死12伤

20

农发行牡丹江市分行召开2024年年中工作会议

20

樊振东扔球拍庆祝

20

长荣集团硬刚,宁愿撤销所有国旗也不挂中国国旗:不靠你们吃饭!

20

国家市场"

热门攻略

1

早安!世界丨37岁佩通坦当选泰国总理,史上最年轻;乌克兰称俄方要求启动换俘谈判

2

邓亚萍解析女单决赛

3

世界卫生组织称苏丹霍乱疫情已致316人死亡

4

德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德经济损失

5

俄乌在库尔斯克激烈对攻,法媒:双方均称在该地区取得进展

6

37岁佩通坦成泰国第二位女总理,他信家族或迎“生死之战”

7

美国总统大选辩论将于9月10日在费城举行

8

库里家人和警察冲突

9

河南三门峡:老矿区变身生态“金山银山”

10

中国限制锑出口,对发“战争财”的美国不是好消息

11

美国、卡塔尔和埃及就新一轮加沙停火谈判发布联合声明

12

也门南部自杀式袭击死伤人数升至34人

13

世界卫生组织:苏丹霍乱疫情已致316人死亡

14

市民买到救灾物资

15

文脉华章|指尖芳华

16

中东博弈中的认知战,以色列特工能力被神化,伊朗内部矛盾激化

17

"他信之女当选新泰国总理,存在五个令人出乎意料之处!

18

思南袁家寺骨科医院:暖心服务构建医患“心连心”桥梁

19

国乒总教练评价马龙

20

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

20

撒谎毫不脸红-北溪爆炸后的西方政客和媒体

20

澳门公布行政长官选举日程表

20

北京密云:数字政务新模式让企业事“更高效办”

20

数字赋能2024年度云南省“数字国资”大会举办

20

新闻链接:泰国宪法法院裁定解除赛塔总理职务

20

美跳高选手加赛丢金

20

千江一河大潮阔丨长久安澜的又一个“大砝码”!黄河古贤水利工程进入建设阶段

20

牢记总书记的嘱托|最深情的嘱托最清澈的爱

20

法国阿根廷赛后冲突

20

马林致谢何冰娇

20

美国极品杀人魔,只将年轻男子作为目标,还对尸体做不可言状之事

20

统一正加速!民进党当局邀请下,美日等11国政客将集体窜台

20

新疆:光伏+治沙一体化共筑沙漠生态屏障

20

广东观音山国家森林公园:让绿色生态文明的底色更浓

20

中交集团主要领导赴东北院开展调研

20

长荣酒店怂了,官网单独划分台湾与中国并列,已经更改了!选择酒店栏目,之前分亚洲、

20

金门地检署公布“2·14”撞船事件调查结论,国台办:罔顾事实,刻意推卸责任

20

莎头拿下百万票房

20

国台办:对此不能接受

20

关键时刻,普京没等来增援,两个小弟反倒打起哑谜,作壁上观

20

北京四区发布雷电蓝色预警,局地短时雨强较大

20

俄罗斯紧急应对乌军越境进攻,俄媒:乌军付出代价太高了

20

尼日尔与乌克兰断交

20

孤东采油厂千方百计营造拴心留人环境

20

五级人大代表推动多年,广东“小马尔代夫”实现用电“陆岛同价”

20

南海大结局要来?中方终于等到这一天!最强“帮手”上场,乱不了

20

多米尼加总统阿比纳德尔宣誓就职

20

欠大陆两条人命,台海巡人员却获“不起诉”,民进党只想赔钱了事!民进党当局侦结2.

热门游戏

  • 1
    国台办:台方应严惩“214”撞船责任人

    射击枪战 /热度:36860

    点击下载

    美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

  • 2
    德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德国经济损失

    射击枪战 /热度:96967

    点击下载

    真人版“分小萌”上线顺义区光明街道深入推进垃圾分类工作

  • 3
    交通安全“救”在身边

    射击枪战 /热度:26177

    点击下载

    内蒙古科技大学沼园实验幼儿园餐具抽检不合格被警告

  • 4
    崩坏3 两会中6个老百姓最关心的问题,有请尊敬的代表一定向中央提议。

    射击枪战 /热度:97292

    点击下载

    王楚钦男单排名第一

  • 5
    原神 潘展乐老家办庆功宴

    射击枪战 /热度:80650

    点击下载

    大学生站躲子弹,躲空屋里和警员对枪致特警出动

  • 6
    出发吧麦芬 泰国政局“三足鼎立”佩通坦为何能够顺利当选?

    射击枪战 /热度:58985

    点击下载

    吃达美乐被二度烧伤

  • 7
    永劫无间手游 邯郸银行董事长遇害

    射击枪战 /热度:82946

    点击下载

    世界上最高的鸡居然长这样!?#有趣冷知识#探员樱酱

  • 8
    向僵尸开炮 台风“安比”将以巅峰16级,#强台风袭击日本!

    射击枪战 /热度:39124

    点击下载

    赖岳谦:伊朗和美国都希望达成永久停火希望立即永久停火

  • 9
    鸣潮 投资3万亿美元!中国海外基建遍布全球,究竟亏损还是盈利?

    射击枪战 /热度:56631

    点击下载

    文明河北|让文明实践从“指尖”到“心间”

  • 10
    艾塔纪元 博眼球活吞牛蛙被拘

    射击枪战 /热度:63085

    点击下载

    世界上降水最多的地方,全年几乎没晴天,当地人:被子都长蘑菇了

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏剧情续写 | 游戏剧情深度解析 | 游戏插件推荐 |