OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 一周碳要闻:绿色转型进入2.0时代(碳报第110期)

责任编辑: 舒阳

发布时间: 2024-09-20 20:35:05

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

哈里斯经济议程聚焦降低成本提议补贴首次购房者2.5万美元

2

柬埔寨国王西哈莫尼出席新疆当地的欢迎宴会

3

重庆官方通报,2名干部被“双开”

4

西班牙巴利阿里群岛遭风暴袭击

5

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

6

何诚:在“一带一路”上,我与家乡“双向奔赴”

7

果然出事了!中方担忧成真?俄传来爆炸性消息,普京彻底不忍了

8

"獠牙终现-美国要下死手!

9

全红婵陈芋汐进决赛

10

侮辱同事被索赔47万

11

金塔县十九届县政府2024年第13次党组(扩大)会议召开

12

巴基斯坦称须修复对美关系,并亮明对华态度,对中国提了一个要求

13

创意海报|总书记引经据典论生态文明

14

拳击6人锁定5枚奖牌

15

美国一饿熊闯入野餐区翻找食物被男子抡起铲子打在头部后逃走

16

巴基斯坦报告3例新增猴痘感染病例

17

老人被深度洗脑转账

18

严查涉企违规收费、缩短办事流程市场监管总局多措并举优化营商环境

19

哥伦比亚中部一商业区发生火灾多处商业场所被毁

20

吴艳妮谈带妆比赛

21

两块钱坐出了航班的感觉这位公交车司机坚持“国际范”

22

根本不用中国出手!这次马科斯把路走窄了,杜特尔特女儿开始反击

23

全国人大代表李翠利肯定检察护企成效合力护航企业高质量发展

24

为什么说金丝楠木比黄金要值钱?切开看到内在,你就明白了

25

美国想打败中国真的有那么难吗

26

中国移动上海有限公司原资深经理(总经理级)张维华被开除党籍

27

秦皇岛北戴河区扎实开展旅游旺季文化惠民活动

28

因为说了特朗普可能会尽快结束全球的战争,而被百家号封禁账号!

29

"苏林当选总书记后,首选访华!

30

苏贾当地居民:没有人打扰我们乌克兰军队告诉我们要和平正常生活

31

樊振东夺冠大满贯

32

最高检:坚持“严”的主基调全链条追诉实施欺诈发行证券等单位和个人

33

巴黎奥运奖牌掉色了

34

#巴勒斯坦以色列冲突#打倒美帝野心狼#@安东诺夫VDV@油桶小火车

35

国民党民代批台监察机构已沦为绿营“东厂”

36

岸田文雄辞职后,自民党将何去何从?

37

喜讯捎给总书记〡重庆九龙坡民主村社区:心系“一老一小”建设幸福家园

38

非法收受财物,重庆市涪陵、万州两名干部被“双开”

39

伊拉克军事基地遭袭

40

干部被举报顶替上学

20

热点问答|三问“北溪”爆炸调查新进展

20

特朗普将美国通胀,归咎于拜登和哈里斯,拜登回应应该去找份工作

20

澳专家撰文批美炮制“伏特台风”,澳大利亚与美国差距有多大?

20

山西省吕梁市召开医保巩固衔接工作安排调度会

20

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

20

福建省委书记向台湾青年发“招贤令”

20

六台:被刺伤入院的亚马尔父亲已出院

20

四川成都市锦江区对口帮扶甘孜州炉霍县奶渣变身新产业

20

我县组织参加全州2024年防汛救灾抢险表扬大会

热门攻略

1

闭幕式太抽象了

2

一个北大的女学生对日本记者的回答

3

俄罗斯罗斯托夫州一商场发生火灾约百人被疏散

4

佩通坦当选泰国总理,中方回应

5

格力电器高管王自如被曝离职

6

上门威胁中国一无所获,500万人口小国撂狠话:对华制裁进行到底

7

澳门特区行政长官选举候选人提名期为8月29日至9月12日

8

#祝南阳市长跑运动协会西峡跑团授旗仪式圆满成功

9

国外网友看阿富汗藏红花出口中国

10

云南多地发布气象灾害预警雨水将覆盖大部地区

11

美宇航员滞留8个月

12

长沙县举办2024年全国生态日宣传活动

13

TikTok在禁令法律纠纷中辩称:美国夸大其与中国关系

14

又贵又慢!荷兰互联网费用居欧洲高位,质量却只排第六

15

遏制体育界饭圈乱象

16

湖南东安县台办助力寻亲续写两岸血脉情缘

17

商务部:1-7月全国吸收外资5394.7亿元人民币

18

健康中国看山西:大同市副市长高新文带队赴市第五人民医院调研指导医学检验互认工作

19

乌选手赛场睡醒夺冠

20

这里就是俄罗斯库尔斯克最真实的报道。

20

我去过很多东南亚国家,可以说几乎所有东南亚国家的经济都是掌握在华人手里,只有越南

20

英国彻底乱套了!多地被暴乱席卷,堪称13年以来最大规模骚乱#英国#暴乱#骚乱

20

波兰总理:波兰将申请举办奥运会

20

南昌市青山湖区检察院开展“全国生态日”普法宣传活动

20

相似一幕上演?武契奇见中国特使前,塞尔维亚突传爆炸性消息

20

拜登发声明,夸即将卸任的岸田文雄,还称“将永远感激”

20

国外网友看阿富汗藏红花出口中国

20

“环境、发展与人权:现代化进程中的绿色低碳发展”国际研讨会召开

20

美国环境调查组全部坠机身亡,俄亥俄州的水很深,网友称把握不住

20

俄罗斯军队在顿涅茨克地区保持着"

20

岸田文雄将辞任首相

20

以色列高级安全官员称以军在加沙地带的作战“基本结束”

20

德国情报局前局长:波兰有可能参与“北溪”管道爆炸事件

20

中医建议三伏吃火锅

20

印尼总统佐科发表任内最后一次国情咨文

20

当地时间8月16日,波兰总理图斯克表示,波兰"

20

台公布恶性撞船事件调查结论,国台办回应

20

中国人寿江西省分公司全力推进打击保险诈骗犯罪专项行动

20

“台独”末日来了!大陆传爆炸性消息!美直接吓得不敢说话?

20

莒县农商银行大力发展农村普惠金融赋能乡村振兴

20

哈里斯白宫梦碎了?重大出轨丑闻曝出,关键时刻,特朗普发声炮轰

20

体验跳水视网膜脱离

20

专家解析美国大选:马斯克“带资进组”,硅谷富豪为何右转?丨

20

国乒女团晋级八强

20

昌雅妮陈艺文进决赛

20

8月17日凌晨,国际传来7个坏消息和3个好消息,局势发生很多变化

20

美国国务卿布林肯或前往以色列会见内塔尼亚胡

20

张家界发生致1死刑案

热门游戏

  • 1
    扎克伯格为妻立雕像

    射击枪战 /热度:79819

    点击下载

    全红婵的金牌也有瑕

  • 2
    英国大街上,看不到英国国旗,被看到了还要挨一顿揍!

    射击枪战 /热度:88243

    点击下载

    印度再次玩弄花招?莫迪拒绝参加上合峰会,印媒:或与中国有关

  • 3
    以进一步全面深化改革开辟中国式现代化广阔前景

    射击枪战 /热度:73513

    点击下载

    @吉林人要下雨了!时间就在……

  • 4
    崩坏3 德胜中路与长浜路交叉口能否允许机动车左转?

    射击枪战 /热度:27510

    点击下载

    罕见暴雨袭击珠峰地区

  • 5
    原神 杨军在通山县调研重点项目建设时要求夯实底盘加快发展

    射击枪战 /热度:61308

    点击下载

    错误示范!巴基斯坦哥们单手握持全自动手枪压不住,差点悲剧了!

  • 6
    出发吧麦芬 当选泰国新任总理后,佩通坦·钦那瓦首次发声

    射击枪战 /热度:23945

    点击下载

    撒谎毫不脸红-北溪爆炸后的西方政客和媒体

  • 7
    永劫无间手游 台湾花莲县发生4.0级地震

    射击枪战 /热度:19348

    点击下载

    武汉打破德国日本垄断!造出全国第一台!

  • 8
    向僵尸开炮 外国网友提问:外国人到底是不是真的喜欢中国菜?

    射击枪战 /热度:16886

    点击下载

    市场监管总局:今明两年制修订294项标准支撑设备更新和消费品以旧换新

  • 9
    鸣潮 “五个聚焦”靶向发力推动“五好支部”创建走深走实

    射击枪战 /热度:79996

    点击下载

    光纤制导!俄军使用Vandal新型FPV无人机打击进入库尔斯克的乌军

  • 10
    艾塔纪元 广东新冠增加1万例

    射击枪战 /热度:79022

    点击下载

    水安全保障看山西:省水利厅开展2024年度防汛关键期复盘分析会

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏社区活动 | 游戏开发教程 | 游戏脚本编辑 |