OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 31岁莫拉塔宣布离婚

责任编辑: 牛翔

发布时间: 2024-09-20 14:39:07

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

综合英国《天空新闻》以及塔斯社的消息,乌军的"

2

扬州发布领导干部任前公示

3

蒙古作为内陆国家,一年卖给日韩60万吨矿石,到底用的什么渠道?

4

滨州市人大常委会“四向”维度齐发力奏好监督“进行曲”

5

湖南东安县台办助力寻亲续写两岸血脉情缘

6

宜春市中级人民法院原党组成员、副院长况柳根接受审查调查

7

8

西方要求墨西哥逮捕普京,日本又“背叛”了,对俄舆论攻势难奏效

9

产业兴旅游旺阜南蒙洼焕新颜

10

商务部:1-7月全国吸收外资5394.7亿元人民币

11

日本发生7.1级地震

12

云南五华产业园区总工会揭牌成立第一次会员代表大会顺利召开!

13

国台办回应台公布恶性撞船事件“调查结论”:罔顾事实,刻意推卸责任

14

南通一废旧航母拆除改造时起火

15

他信之女当选泰国新总理,泰媒:振兴经济将是她上任后首个挑战

16

夏日汽车7大危险品

17

安徽省蚌埠市人大常委会原党组成员、副主任汤春义被查

18

南通通州兴东街道:播撒法治的“种子”收获和谐的“果实”

19

俄罗斯警告中国,如果武统台美国不会动手,但必须警惕这四个国家

20

德国选择党要求乌克兰赔偿北溪被炸损失

21

以进一步全面深化改革为强大动力扎实做好各项工作坚定不移完成全年经济社会发展目标任务

22

黄宏瞻深入陆川县宣讲党的二十届三中全会精神

23

水产养殖行业警报:面对病毒高发的威胁,怎样寻找解决之道?

24

亿人见证樊振东夺冠

25

台公布“2·14”撞船调查结论,国台办:不接受

26

2024甘肃民营企业100强榜单发布

27

普京与俄联邦安全会议成员召开会议

28

市场监管总局:加强优化反垄断监管执法,更好维护市场秩序

29

#标题#12米高桥纵身一跃,不顾生死,他的眼里只有救人#正能量

30

泽连斯基赌输了,谁也没料到局势反转如此之快,乌克兰已没有退路

31

湖南省个体防护装备协会成立

32

深圳精诚医疗集团如皋医院奋斗争一流,不忘初心启新程

33

贵州铜仁推动新兴行业党纪学习教育全覆盖

34

潘展乐老家办庆功宴

35

【越共中央总书记苏林访华,中越铁路互联互通将成重头戏】应中方邀请,越共中央总书记

36

1.8万拍下1.3亿厂房

37

请网红带货损失千万

38

报应终于来了?大陆还未行动,赖清德收到噩耗,台当局遭当头一棒

39

滨州首家进社区婚姻登记巡回点在阳信县劳店镇湖畔嘉苑揭牌启用

40

澳门特区政府集体学习中共二十届三中全会精神

20

通达43城前7月深圳机场口岸出入境旅客超280万人次

20

婚登取消户口簿会致重婚?民政部回应

20

俄外交部召见意大利大使,抗议该国记者非法进入库尔斯克

20

全红婵给爷爷三连问

20

利比亚油田停产时间延长美国石油销售并未获得多大提振

20

俄乌激战库尔斯克州

20

美国国务卿布林肯或前往以色列会见内塔尼亚胡

20

特朗普飞机故障一周后共和党副总统候选人万斯乘波音737又遇紧急迫降

20

广东省云浮市政府党组成员、副市长王巍接受纪律审查和监察调查

热门攻略

1

北京城市副中心“检心守护联盟”成立聚焦解决群众急难愁盼

2

又地震,6.1级!已余震7次,未来3天可能仍有规模5.5级地震

3

水利部启动2024年夏秋季“引江济太”应急调水

4

谢瑜的偶像是马龙

5

苏丹外交部:快速支援部队袭击村庄造成85人死亡

6

印度外企坟场?可口可乐来这建厂,都得被薅光羊毛

7

夏威夷的“死亡天梯”,一失足便丧命,敢挑战的老外络绎不绝!

8

若尔盖毕岗村种出“新希望”

9

南通一废旧航母拆除改造时起火

10

“邵永铁路党旗红磐心共筑当先锋”中铁五局邵永铁路项目启动党建主题实践活动

11

哈里斯经济议程聚焦降低成本提议补贴首次购房者2.5万美元

12

男孩遭铁链栓脖拖行

13

张本智和第3次被逆转

14

落实进一步全面深化改革的决策部署为中国式现代化提供强大动力和制度保障

15

习近平信中的这件事,事关上亿人

16

他信之女当选泰国总理佩通坦·钦那瓦对于泰国意味着什么

17

制度护航生态:美丽中国建设加快推进

18

济南市教育局新增一名副局长,此前任职市科技局

19

突发!巴黎奥运首例奖牌被回收事件诞生,美国紧急申诉,结果待定

20

全市动力装备产业链“链长”专题会议召开

20

总投资约4亿元海峡两岸产业合作区(湖南)湘潭产业园首个重大项目开工

20

孟加拉宣布实行宵禁

20

浙江省委召开巡视发现问题剖析整改推进会

20

新泰市果都镇开展“8.15全国生态日”主题活动

20

过度用呼吸机致死亡

20

婺城区政协召开专题议政性常委会

20

《国家的力量》:东西部协作的成功密码

20

香港63平方米住宅惊艳变身三室两厅,四口之家生活不显拥挤,一探究竟!

20

美国一饿熊闯入野餐区翻找食物被男子抡起铲子打在头部后逃走

20

亭湖大洋:抗战家书宣讲,激发奋进力量

20

台湾花莲海域6.1级地震后发生7次余震有居民被困电梯

20

又“舔”上了?赖清德发文感谢岸田文雄对台“坚定支持”

20

临夏市公安局召开常态化扫黑除恶斗争推进会

20

男孩遭铁链栓脖拖行

20

湖南对拍黄瓜不立案

20

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

20

印度再次玩弄花招?莫迪拒绝参加上合峰会,印媒:或与中国有关

20

锚定现代化改革再深化丨湖北丹江口:保护水源地生态环境确保“一泓清水永续北上”

20

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

重庆:夜间测温特巡护航居民清凉度夏

20

Жививплотьдовремени,живидосебя,живидотого,чтобыбытьлюбимым,живидотого,чтобыжитьдолюбви#声音控#你怕不怕我在你的世界里永远消失#听说片尾有彩蛋#路易十三是什么酒#内容过于真实

20

2023年度“中国十大环境司法案例”公布,宜昌检察一例入选!

20

欧盟警告:Meta需要推出虚假信息追踪工具的补充政策!

20

诋毁运动员被刑拘

20

南海伏季休渔期结束湛江海事部门护航渔船出港

20

"美国挑拨离间失败!俄称中越联手发出信号,让菲律宾无比失望。

20

统一倒计时?拜登收到警告,中美加速摊牌,后果对美国很不妙

20

伊朗还没开战,副总统先公开辞职,美方呼吁停火,以色列作出预判

热门游戏

  • 1
    仁怀多形式开展全国生态日主题活动

    射击枪战 /热度:04180

    点击下载

    手绘废轮胎月入两万

  • 2
    晋中市副市长张拥军在介休市调研

    射击枪战 /热度:80473

    点击下载

    美调查记者:美国可能因兴奋剂丑闻被禁止举办洛杉矶奥运会

  • 3
    巴基斯坦西南部发生炸弹袭击致1死12伤

    射击枪战 /热度:60284

    点击下载

    “被震醒!”刚刚杭甬温多地网友:整栋楼在摇!台湾突发地震,热搜爆了

  • 4
    崩坏3 普京已对外交部“开刀”,拉夫罗夫的多年副手,被一道总统令革职

    射击枪战 /热度:45071

    点击下载

    乌军攻入俄本土,中国外交部表态。近期,对于乌军突袭俄库尔斯克,中国外交部发言人表

  • 5
    原神 地方借钱超4万亿

    射击枪战 /热度:47085

    点击下载

    美媒爆料:特朗普团队称被伊朗黑客黑了,FBI已介入

  • 6
    出发吧麦芬 张本智和崩溃跪地

    射击枪战 /热度:89758

    点击下载

    联合创始人11变2,OpenAI高层出走背后

  • 7
    永劫无间手游 以河长制为抓手,守护邛崃清江碧水

    射击枪战 /热度:56853

    点击下载

    乌克兰是怎样攻入俄罗斯本土的?对之后的局势又会产生怎样的影响

  • 8
    向僵尸开炮 女城管怒怼商户滚蛋

    射击枪战 /热度:55458

    点击下载

    未来之城|政务服务受理量攀升,她说越来越忙背后是“人和城相互成就”

  • 9
    鸣潮 民政部集中回应离婚冷静期、结婚无需户口簿等热点

    射击枪战 /热度:65228

    点击下载

    土耳其遭到反噬!强行挤入欧美阵营遭拒后,反倒“得罪”中俄

  • 10
    艾塔纪元 “行进中国”调研行|硬科技如何“破壁”?

    射击枪战 /热度:96460

    点击下载

    最高人民法院党组成员、政治部主任李成林参加王佳佳法官遗体告别仪式并看望慰问家属

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏技巧 | 游戏美术设计 | 游戏下载中心 |