OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 镜观·领航|巩固发展新时代生态文明建设成果

责任编辑: 卢慧

发布时间: 2024-09-20 07:53:09

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

以权谋私,大搞权钱交易!韶关市曲江区委原常委、宣传部原部长张秀兰被“双开”

2

助力统战文化建设!嘉定区统一战线文化研究会成立

3

印度建成世界最高铁路桥,印度网友:印度基建已经领先全世界

4

开发区精准监督护航营商环境持续优化

5

汪顺称没有遗憾了

6

万斯所乘飞机紧急迫降

7

绿色发展风光正好

8

石柱县委书记张华:要时时放心不下处处暖心周到营造让游客安心和舒心的旅游环境

9

欧盟警告:Meta需要推出虚假信息追踪工具的补充政策!

10

重磅!日本投降79周年,一男子发视频称代表中国人向日本道歉

11

泰国迎来亲中80后总理,挖掘克拉运河还远吗

12

特朗普:投票给我我会让你们更有钱拜登嘲讽:你该去找份工作

13

河南省监狱管理局发布“18岁考生上岸”情况通报

14

一起来看今日要闻,8月17日新闻摘要

15

用还房贷考验男友

16

数字赋能2024年度云南省“数字国资”大会举办

17

征求对我市深入学习贯彻中共二十届三中全会精神等的意见中共天津市委召开党外人士座谈会

18

北京十大律师事务所:法律界的璀璨明星

19

低价团拒收年轻人

20

国台办:台方应严惩“2·14”恶性撞船事件责任人

21

“环境、发展与人权:现代化进程中的绿色低碳发展”国际研讨会召开

22

全国人大代表李翠利肯定检察护企成效合力护航企业高质量发展

23

俄棋手棋盘涂水银毒

24

租房一年发现是凶宅

25

"干得漂亮!

26

游客投诉“黑车4.5公里收46元”西安交通执法部门:已查扣

27

他已任湖南省政府副秘书长

28

茅台红缨子高粱种植面积累计推广超3000万亩

29

“行进中国”调研行|硬科技如何“破壁”?

30

14岁少女遭教官强奸

31

巴基斯坦报告3例新增猴痘感染病例

32

苏丹中部一村庄遭袭致80人死亡

33

8.17【11】巴以谈判失败主要是内塔尼亚胡从中作梗

34

中国限制锑出口,对发“战争财”的美国不是好消息

35

80后唐瑜任上被查

36

国新办举行“推动高质量发展”系列主题新闻发布会(国家市场监督管理总局)

37

论事业单位职工思想政治教育中的美德培育

38

撞王楚钦记者被处罚

39

山东省地矿局五队资产管理科开展“八小时外”负面清单学习

40

泰国选出最年轻总理

20

美媒:特朗普打通胀牌不一定获胜

20

常德市市场监管局召开市场准入、维护市场秩序工作调研座谈会

20

西班牙巴利阿里群岛遭风暴袭击

20

红遍全网的果菌王有了首批“后代”!她最先尝鲜

20

印度夏季50度高温,当地人如何避暑

20

德国议员:乌克兰应该在“北溪”遭到破坏后赔偿德经济损失

20

2024“走进政协·台湾青年说”活动福州举行

20

TikTok在禁令法律纠纷中辩称:美国夸大其与中国关系

20

一朵玫瑰花的数字蝶变

热门攻略

1

印度网友:印度能否取代中国成为世界工厂?

2

贵州省社会科学院发布全国“两山”转化指数研究成果

3

拜登发声明,夸即将卸任的岸田文雄,还称“将永远感激”

4

以官员:以军在加沙地带的作战已“基本结束”

5

创历史新高!今年1-7月青岛新增创业担保贷款超10亿元

6

他信之女当选泰国总理佩通坦·钦那瓦对于泰国意味着什么

7

相较于凶杀案,更恐怖的是完全两极分化的社会舆论!#王佳佳

8

潘展乐回应打破垄断

9

"王佳佳法官冤不冤?

10

第二届全区公诉人与律师论辩大赛总决赛圆满落幕

11

国新办举行“推动高质量发展”系列主题新闻发布会(国家市场监督管理总局)

12

李丽被查

13

欧洲疾控中心:欧洲地区猴痘新毒株感染输入病例或增多

14

盐城大丰区:打造全国绿色低碳示范园区构建新型(近)零碳生态圈

15

视频|英国奥运赛艇冠军回医院上班同事热烈欢迎

16

[时习之·一席话]共绘美丽中国新画卷

17

越南再边境地区集结部队威吓柬埔寨!越南网友:柬埔寨忘恩负义!

18

美媒:伊朗就是否大规模打击以色列进行内部讨论

19

滨州发布|市委党校:围绕“1+1188”发展格局不断深化教学改革创新提升科研咨政水平

20

广西隆林:以法之名守护古茶树

20

开放办学打造“职教出海”新风景

20

黄晓武赴成都市、德阳市、长沙市考察招商

20

1.8万拍下1.3亿厂房

20

广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

20

德约科维奇跪地痛哭

20

以赛促学深圳光明民政系统业务大比武知识竞赛超有“料”

20

"突发消息!

20

汶川县2024年秋季征兵体检工作全面启动

20

王巍,被查

20

2024世界青年发展论坛数字发展主题论坛在重庆举办

20

扎卢日内否认自己参与了北溪管道袭击事件!这个态度很明确

20

推进绿色发展,凝聚世界共识

20

中国—马来西亚行业合作对接会召开

20

7点出发丨爆火!“硬控”网友的“乌龟对对碰”到底是个啥?

20

安徽省蚌埠市人大常委会原副主任汤春义接受审查调查

20

洛杉矶12分钟

20

1、法官的办案强度明显要强于检察"

20

四川白玉县为人才搭建干事创业平台

20

美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

20

校长签名潦草像天书

20

拜登出席黑人活动:我才40岁教会主教你还是年轻小伙儿笑开了花

20

病亡537例!WHO对“猴痘”疫情再发最高级警报!已蔓延非洲多国

20

脚盆鸡福岛第一核电站发生核泄漏#国际局势#日本核废水#猴痘

20

云浮副市长王巍被查

20

中国市场监管系统今年查办案件31.5万件罚没金额17亿元

20

国家统计局:7月不包含在校生的16-24岁劳动力失业率为17.1%

20

真相来了,伊朗不是怂了!

20

打破天价彩礼传播正能量

热门游戏

  • 1
    国际局势风云起,越南军事科普引人关注

    射击枪战 /热度:90594

    点击下载

    市监局要2100万罚金

  • 2
    美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

    射击枪战 /热度:94600

    点击下载

    老人没有上过一天学,但所做的事情却引来大批人虚心请教

  • 3
    南海大结局要来?中方终于等到这一天!最强“帮手”上场,乱不了

    射击枪战 /热度:33351

    点击下载

    中国建设银行甘肃省分行党委委员、副行长邵茂丰接受纪律审查和监察调查

  • 4
    崩坏3 莫迪无奈“服软”,不得不使用人民币与俄交易,助力人民币国际化

    射击枪战 /热度:11372

    点击下载

    卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

  • 5
    原神 情况不妙,岸田文雄被逼下台,辞职前派人访华,求中国答应2件事

    射击枪战 /热度:67705

    点击下载

    特朗普和高龄粉丝互动:你真美你看起来也就60多岁高龄女粉丝:我快100了

  • 6
    出发吧麦芬 阿根廷总统米莱表示,阿根廷年通胀率预计在7%至14%之间

    射击枪战 /热度:48137

    点击下载

    外交部:要求菲方立即撤出有关船只

  • 7
    永劫无间手游 也门南部自杀式袭击造成至少14名士兵死亡

    射击枪战 /热度:39317

    点击下载

    日本首相岸田文雄将辞任首相,在首相官邸举行记者会见。

  • 8
    向僵尸开炮 张文宏称新冠波动

    射击枪战 /热度:46382

    点击下载

    山东省中医院获批筹建山东省重点实验室

  • 9
    鸣潮 郑钦文年入720万

    射击枪战 /热度:96720

    点击下载

    男生搭飞机跨省上班

  • 10
    艾塔纪元 热点问答|三问“北溪”爆炸调查新进展

    射击枪战 /热度:22571

    点击下载

    巴勒斯坦总统阿巴斯:即使付出生命也要去加沙

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 手游专区 | 游戏皮肤展示 | 玩家社区 |