OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 澜湄清洁空气倡议联合声明(摘要)

责任编辑: 别艺

发布时间: 2024-09-20 08:22:18

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

江苏拟发行400亿特殊新增专项债

2

中国人寿江西省分公司全力推进打击保险诈骗犯罪专项行动

3

动物园致20只虎死亡

4

德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德国经济损失

5

江西省市场监督管理局党组书记、局长谢来发被查

6

县委书记耿振华赴北城街道宣讲党的二十届三中全会精神

7

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

8

广岛核爆炸才过70年,为何人口反而突破了100万大关?

9

副局长吕俊辉被开除党籍和公职

10

这就是惹怒中国的代价!越南惹起众怒,中方一招断了其“命脉”

11

走丢女孩ATM机求救

12

泰国总理的权力有多大?怎么就被法院解职了?

13

最新消息!北溪爆炸案真凶找到了?德国发布通缉令,居然是这国人

14

广州疾控、卫生监督所正式合并

15

简直不可思议,中国迎来了两个好消息,美国不愿看到的事情发生了

16

谢瑜的偶像是马龙

17

【中国经济时报】党风廉政在心中|中国进出口银行湖北省分行赴基地开展党纪教育活动

18

以色列外长:若伊朗发动袭击希望英法支持以回击

19

曲靖举办2024年保安员技能比武竞赛提升保安队伍整体素质

20

美国宣布将破产!

21

喊打的伊朗没有出手,要谈的乌克兰攻入俄境内,中国咋办?

22

西葫芦高产怎么种?这几个问题要注意,高产很稳定

23

台风“安比”继续北上将给日本多地带来强降雨

24

中国女排强势出线

25

台湾花莲县海域地震致多地有震感,暂无人员伤亡

26

陈梦早期的短发照片

27

尼日利亚中部至少20名大学生遭绑架

28

商务部:支持各地开展精准、透明、合规的招商引资活动,把更多高质量的外资引进来

29

约旦谴责以色列定居者袭击约旦河西岸村庄

30

黄雨婷回家了

31

苏丹中部一村庄遭袭致80人死亡

32

探秘大自然的绿色宝藏:蒲公英

33

助力统战文化建设!嘉定区统一战线文化研究会成立

34

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

35

中纪委发布:5人被查,3人被处分

36

市场监管总局:持续深化“高效办成一件事”改革,推动政务服务提质增效、便企利民

37

毫无底线!美国驻华大使馆否认P图,称中国媒体已撤稿,惨遭打脸

38

以进一步全面深化改革开辟中国式现代化广阔前景

39

又是波音!特朗普副手万斯所乘飞机出现紧急情况迫降

40

推窗见花园开门见美景石景山鲁谷街道带领居民“补植增绿”

20

乌军猜到了开头,没猜到被包饺子,原来他才是总导演

20

台学者曾一语点破:别看两岸如今很紧张,但大陆却不着急马上动武,里面有何隐情?咱们

20

台学者曾一语点破:别看两岸如今很紧张,但大陆却不着急马上动武,里面有何隐情?咱们

20

四川内江:初秋收获忙

20

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

王毅:为缅甸实现稳定、和解和发展发挥建设性作用

20

全红婵给自己打50分

20

【台湾观察】柯文哲竞选经费风波牵动岛内政治板块

20

哈马斯官员:以色列方面试图破坏加沙停火谈判进程

热门攻略

1

孙颖莎代表亚洲登场

2

8月16日,传来了一条让人心里沉甸甸的消息:美国联邦"

3

陈梦胜孙颖莎夺金牌

4

国家统计局:7月不包含在校生的16-24岁劳动力失业率为17.1%

5

中老缅泰外长举行非正式会晤

6

母猪配种后为何不宜过量喂食?探究配种后期饲养的科学原则

7

北京大学人民医院青岛医院成功举办交叉学科学术研讨会

8

赵杰女子链球夺铜

9

蒙古要卖稀土,可惜没有路

10

卡塔尔首相与伊朗代理外长通电话讨论地区局势

11

黄河本轮次汛期调水调沙基本结束

12

台州消息李跃旗调研市海投集团贯彻学习党的二十届三中全会精神

13

一起来看今日要闻,8月17日新闻摘要

14

新歌上线7分钟改名

15

拒绝参加巴黎奥运会,闭幕式的五个国家

16

国防部:民进党当局购买武器是迎合美方的自我安慰

17

8月19日将对十堰郧阳国际园小区居民及工商业用户暂停供气,具体范围→

18

徐卓一陈芋汐成同学

19

印度女医生遭奸杀引愤慨示威者:哪里才安全?

20

非常规原料甜菜颗粒粕,夏季防霉策略与优化利用

20

广湛高铁广佛段顺利完成首梁浇筑

20

安徽省蚌埠市人大常委会原党组成员、副主任汤春义接受审查调查

20

伊朗总统会见绍伊古

20

也门南部自杀式袭击死伤人数升至34人

20

南海开渔季启幕!深圳450艘渔船出港

20

长沙发布禁航通告!

20

国台办:台方应严惩“2·14”恶性撞船事件责任人

20

泽连斯基赌输了,谁也没料到局势反转如此之快,乌克兰已没有退路

20

也门南部发生汽车炸弹爆炸事件已造成19人死亡

20

曝0元得充电宝套路

20

湖南东安县台办助力寻亲续写两岸血脉情缘

20

三个厅官同日被开除

20

中国发布万字长文直指美国五宗罪,美国黑手原形毕露

20

相约中原寻脉中国——“香港河南联谊总会入豫研学参访”活动走进内乡

20

法国乒乓男团获铜牌

20

柬埔寨国王西哈莫尼出席新疆当地的欢迎宴会

20

文旅展演精彩带动产业发展(探访·夜间经济亮起来)

20

泰国最年轻女总理“做月子”参加竞选,当选总理后首次公开亮相

20

印尼总统佐科发表任内最后一次国情咨文

20

五峰后河国家级自然保护区生态警务室正式揭牌

20

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

20

再次挑衅!上门施压无果,欧洲小国公开放狠话:对华制裁进行到底

20

黄珊珊请辞中央委员民众党内爆不满:民代也该辞,以挽救民众党

20

主动投案,云南迪庆州维西县原住房和城乡规划建设局局长赵中华接受审查调查

20

河南三门峡:老矿区变身生态“金山银山”

20

在社会上,居然存在着一种极为荒谬的说法,说很多女干部跟领导存在不正当关系。可这纯

20

多国停飞中国航线,更多国家或将跟进,背后发生了什么?

20

尼日利亚中部至少20名大学生遭绑架

热门游戏

  • 1
    TikTok在禁令法律纠纷中辩称:美国夸大其与中国关系

    射击枪战 /热度:14623

    点击下载

    普宁市委原副书记何亿严重违纪违法被开除党籍和公职

  • 2
    闭幕式红旗5秒特写

    射击枪战 /热度:27552

    点击下载

    预告:国新办将举行“推动高质量发展”系列主题新闻发布会,住建部部长倪虹出席

  • 3
    钟睒睒和宗庆后两位董事长最大的区别在于财富观的不同

    射击枪战 /热度:68191

    点击下载

    江旻憓告别全职击剑

  • 4
    崩坏3 台湾花莲海域6.1级地震后发生7次余震有居民被困电梯

    射击枪战 /热度:77365

    点击下载

    台湾花莲县海域地震暂无人员伤亡多地列车恢复正常行驶

  • 5
    原神 齐忠彦,擅权滥权、贪敛钱财!涉嫌“三宗罪”

    射击枪战 /热度:20968

    点击下载

    巴西多地举办灯光秀庆祝中巴建交50周年

  • 6
    出发吧麦芬 欧美游泳队赛后发紫

    射击枪战 /热度:01454

    点击下载

    创历史新高!今年1-7月青岛新增创业担保贷款超10亿元

  • 7
    永劫无间手游 罕见!一镇政府发文,被撤销

    射击枪战 /热度:79226

    点击下载

    洛杉矶将办无车奥运

  • 8
    向僵尸开炮 国防部:中国与东帝汶两军深化交流合作

    射击枪战 /热度:76960

    点击下载

    王毅谈澜湄合作下阶段发展,提出四点建议

  • 9
    鸣潮 男孩代替女孩做鉴定

    射击枪战 /热度:74619

    点击下载

    我为群众办实事|万科雁鸣湖周边公交少居民出行不便

  • 10
    艾塔纪元 王毅:澜湄合作已成为地区合作的“金色平台”

    射击枪战 /热度:90909

    点击下载

    干部退而不休搞贪腐

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏彩蛋解析 | 怀旧游戏时光 | 游戏开发教程 |