OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 省政协举行十三届四十六次党组扩大会议周波主持并讲话

责任编辑: 越莹

发布时间: 2024-09-20 08:43:14

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

中国限制锑出口,对发“战争财”的美国不是好消息

2

杨文璐晋级拳击决赛

3

9月1日起河南将辅助生殖医疗服务纳入医保

4

76-俄乌局势因北约东扩跌宕起伏

5

英国大街上,看不到英国国旗,被看到了还要挨一顿揍!

6

综合英国《天空新闻》以及塔斯社的消息,乌军的"

7

乌克兰威胁攻击中方无人机工厂?日本首次因乌克兰危机制裁中企

8

美国总统大选辩论将于9月10日在费城举行

9

市(州)委书记座谈会在贵阳召开徐麟出席会议并讲话

10

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

11

烟台市自8月起陆续举办5项大型人才对接活动

12

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

13

从野蛮制裁到被动封杀,美国突然发现:自己对付中国的招数失灵了

14

日本男乒无缘决赛

15

2024年全国“新时代好少年”先进事迹

16

今日,约5.5万艘渔船驶向南海东海!

17

立秋时节温差显著,籽粒发芽正当时太早太晚皆不宜

18

俄罗斯要把菲律宾请进金砖,中国无法容忍,金砖里冒出第二个印度

19

天气预报#一起关注天气变化

20

唐山市原副市长曹全民被查

21

海关总署:严防猴痘疫情,守护人民安全

22

国务院副总理南下,赴东南大省

23

全国人大代表李翠利肯定检察护企成效合力护航企业高质量发展

24

10米跳台决赛直播

25

南京通报5名干部被查

26

加沙一学校遭袭

27

美国人最痛恨的总统,看看是哪一位?

28

张之臻王欣瑜获银牌

29

台风“安比”继续北上日本首都圈航班大规模取消

30

上海积极推动无废城市建设369个“无废细胞”遍布全市

31

任前公示!孙锋彪拟升正厅

32

运营成本上升,盈利压力增大,共享单车为什么频频涨价?

33

市民买到救灾物资

34

雄安首批政府产权保障性租赁住房将投运

35

义马市工业和信息化局认真贯彻落实市委十届八次全会和政府全体(扩大)会议精神

36

“被震醒!”刚刚杭甬温多地网友:整栋楼在摇!台湾突发地震,热搜爆了

37

奥运五环眼镜火了

38

社会类:入围奖-《“面北”爱情故事》

39

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

40

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

20

这就是亲美的下场?赖清德的报应来了!大局已定,根本不用大陆出手

20

蒙古国也想加入北约?一旦真的实现,会成为第二个乌克兰吗?

20

乌克兰愤怒反驳美方指控:这个锅我们不会背!

20

约旦谴责以色列定居者袭击约旦河西岸村庄

20

省委常委会召开会议徐麟主持并讲话李炳军赵永清时光辉等参加

20

中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

20

特斯拉召回168万辆

20

在俄罗斯的中国雇佣兵典狱长,在前往库尔斯克增援的车队中,不幸被海马斯火箭弹偷袭。

20

市场监管总局:今年年底建成全国“个体工商户名录”,让帮扶措施更精准有效

热门攻略

1

约旦谴责以色列定居者袭击约旦河西岸村庄

2

法国一小型民用飞机坠海1人死亡

3

副区长、接诉即办指挥部指挥长戴伟明同志到区城指中心进行专题调研

4

哈里斯白宫梦碎了?重大出轨丑闻曝出,关键时刻,特朗普发声炮轰

5

非洲留学生首选中国

6

甘孜、凉山13个县市地灾黄色预警生效中

7

中国发布万字长文直指美国五宗罪,美国黑手原形毕露

8

金门撞船事件,台当局的交代来了?台检方称海巡正常操作不予起诉

9

东海、南海海域今日开渔约5.5万艘渔船出海作业

10

桂平烟草:遏制"烟卡"蔓延守护未成年人健康成长

11

中国揽3米板金银牌

12

民族败类必被清算!大陆不再忍耐,10人被点名,“台独”好日子到头

13

热点问答|三问“北溪”爆炸调查新进展

14

安洗莹炮轰韩国羽协

15

麻六记被曝吃到苍蝇

16

“学习贯彻党的二十届三中全会精神”市委宣讲团走进团市委报告会暨武汉青年宣讲团动员备课培训会举办

17

狂飙兄弟回应乔菲

18

沙田镇主要领导调研“百千万工程”和人居环境提升工作

19

新泰市果都镇开展“8.15全国生态日”主题活动

20

他信之女当选泰国新总理,泰媒:振兴经济将是她上任后首个挑战

20

文脉华章|心向往之

20

中国建设银行甘肃省分行党委委员、副行长邵茂丰被查

20

新闻人物|泰国新当选总理佩通坦·钦那瓦

20

皮蒂取关中国选手

20

普京12号讨论库尔斯克州安全局势问题

20

“打飞的”何时普及?上海:2026年实现航线全域连续覆盖

20

伊朗总统会见绍伊古

20

哈马斯官员:以色列方面试图破坏加沙停火谈判进程

20

访华前夕,新西兰总理翻脸,直言倒向美西方,曾要求中方提供援助

20

湖南高速集团与株洲市举行会谈

20

国家卫生健康委、中医药局、疾控局召开2024年中国医师节座谈会

20

一小时11次连续抛烟头引燃楼下车辆

20

市委政法委、市中级人民法院联合举办“政法护航法治助商”主题开放日活动

20

大陆一举轰动两岸,不到一天,美国口风大变,赖清德害怕的发生?

20

澳门特区政府集体学习中共二十届三中全会精神

20

唐山又一厅官落马,曾任副市长

20

东海、南海海域今日开渔约5.5万艘渔船出海作业

20

模仿水花消失磕破头

20

杭州亚运村房源入市

20

中美博弈,美国最大的弱点是什么?一个台湾人说出了真相

20

根本不用大陆出手?赖清德先收到致命噩耗,最后“底牌”也没用了

20

多地买新房不限价

20

江旻憓告别全职击剑

20

海内外专家学者相聚山东青岛共话化工领域学术前沿

20

钟祥市检察院召开党组(扩大)会传达学习市州分院检察长研讨班精神

20

日本发生7.1级地震

20

法媒:里海,中国和欧洲未来的贸易枢纽?

20

绘就山川秀美现代化甘肃画卷

热门游戏

  • 1
    医生诊疗打电话抽烟

    射击枪战 /热度:91799

    点击下载

    自治区政府召开常务会议研究优化新能源项目建设管理等工作

  • 2
    化隆:县域面貌发生巨变民生福祉持续殷实

    射击枪战 /热度:76140

    点击下载

    英外长访华前,却暂停赴北京航线,不到24小时,中国划下红线

  • 3
    贪腐女干部忏悔痛哭

    射击枪战 /热度:84988

    点击下载

    中国国家市场监管总局:涉企乱收费必须零容忍

  • 4
    崩坏3 喻兴铸带队督导调研我县水网建设三年攻坚及国债项目建设推进情况

    射击枪战 /热度:83780

    点击下载

    冠军见义勇为遭群殴

  • 5
    原神 辟谣龙脊广场有命案

    射击枪战 /热度:72790

    点击下载

    安全形势有改观 经济挑战仍严峻——美国撤军三年后阿富汗民众的感受

  • 6
    出发吧麦芬 山东德州:“两河牵手”激活文旅休闲新场景

    射击枪战 /热度:35738

    点击下载

    孙颖莎撤回一个陈梦

  • 7
    永劫无间手游 美国3天军售350亿

    射击枪战 /热度:02882

    点击下载

    加沙地带确认一例脊髓灰质炎病例

  • 8
    向僵尸开炮 在中国生活5年的印度人回印度后的反应!引发印度网友纷纷破防

    射击枪战 /热度:51979

    点击下载

    美媒警告:与中国开战不仅不可接受,而且是全球性自杀

  • 9
    鸣潮 中纪委刚刚通报,邵茂丰被查

    射击枪战 /热度:63308

    点击下载

    澳IT专家批美炮制“伏特台风”:把中国描述成网络威胁是危险的

  • 10
    艾塔纪元 义乌对比昆山,江苏浙江百强县“一哥”之争,谁实力更胜一筹?

    射击枪战 /热度:59272

    点击下载

    许昕公司叫背后击球

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏声音设计教程 | 游戏剧情续写 | 游戏秘闻 |