OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 新冠未停,猴痘病毒又开始传播,世卫组织已经发出警告

责任编辑: 端木珂

发布时间: 2024-09-20 21:49:15

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

唐山市原副市长曹全民被查

2

婚姻登记取消户口簿是否会导致重婚、骗婚?民政部回应

3

福建省人民政府领导成员最新分工公布

4

孙海洋办孙卓升学宴

5

#库尔斯克州遭乌袭击#乌克兰进攻俄境内#乌军攻入俄罗斯本土#乌克兰攻入俄境内#乌克兰攻入俄本土

6

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

7

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

8

国台办回应“台公布恶性撞船事件调查结论”

9

广西壮族自治区百色市政协原党组成员、副主席伍奕蓉被“双开”

10

贵阳市长马宁宇落马

11

山西三地最新人事任免

12

美以两国防长通电话讨论中东地区局势

13

张本智和删简介

14

苏丹中部一村庄遭袭致80人死亡

15

遗弃3岁女儿被判刑

16

李佳琦否认整容

17

文脉华章|指尖芳华

18

青藏铁路列车卧具洗涤工:旅客觉得干净放心我们就很满足

19

这定位器有点多余了

20

孩子哭闹致飞机延误

21

郑钦文到美国后发烧

22

拜登表示加沙停火谈判人员将在多哈停留

23

莒县农商银行大力发展农村普惠金融赋能乡村振兴

24

广州花都:开局即冲刺,跑好基层社工部“第一棒”

25

河北康保:融入京津冀协同发展力度足成果丰

26

青海省纪委监委最新通报

27

教育部原副部长张天保致辞

28

临泉县关庙镇:“一呼即应”解困难内生动力促发展

29

水利部启动2024年夏秋季引江济太应急调水

30

“在保护中开发、在发展中保护”厦门历史文化名城的保护传承与融合发展研讨会举行

31

宁江法院召开2024年上半年工作总结暨下半年工作部署会

32

济南市教育局新增一名副局长,此前任职市科技局

33

云南:基层消防力量综合保障水平显著提升

34

中美关系再迎狂风巨浪?拜登提前“退休”,白宫新主人磨刀霍霍

35

最高检印发《关于办理财务造假犯罪案件有关问题的解答》

36

民众党焦头烂额之际,黄珊珊一个举动,让蔡正元直呼:服了你了

37

拟定起乘价4元!上海发布轨道交通市域线票价机制方案

38

在库尔斯克乌军很是张扬,可是在乌本土,俄各路大军攻势丝毫未减,波克罗夫斯克和托列茨克即将失守

39

西雅图风暴vs亚特兰大美梦第3节英文原声回放

40

百果园利润大跌

20

驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

20

花游队感谢跳水队

20

美国邀请印度加入北约被拒,看看外网怎么说?#油管五常

20

工电联整全力应“烤”护航中欧班列

20

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

20

还是郭正亮看的透彻!民进党当局以为石破茂“窜台”会进一步升级与台湾的关系,但是郭

20

谷爱凌和游泳队合照

20

民间怪谈录:民间怪事来袭!小镇发生惊悚命案,恐怖氛围直接拉满

20

【#建行甘肃分行副行长被查#】8月16日,中央纪委国家监委官网通报,中国建设银

热门攻略

1

日本部分地区交通受台风严重影响

2

涉嫌严重违纪违法!云南2名局长主动投案,接受审查调查

3

黄雅琼夺冠后被求婚

4

以色列总理内塔尼亚胡近日召开秘密会议"

5

美国总统大选辩论将于9月10日在费城举行

6

赖清德向日本承诺“不搞台独”?日本前外相前原诚司最近一番话引发外界关注。他说,原

7

趁俄罗斯无暇顾及,中亚五国和日本签了协议

8

主动投案!山西省原晋中市园林局人事劳资科科长罗庆翔被查

9

广东省云浮市政府党组成员、副市长王巍接受审查调查

10

"泽连斯基进攻俄罗斯,最终受益者分析:

11

孩子饿死妻女被炸死!巴勒斯坦观察员连问6个“如果是你怎么办”

12

王毅谈澜湄合作下阶段发展

13

农村土地统一颁证?“无证地”终止承包吗?土地承包最新消息!

14

中方对美欧发起反制措施,将对锑等物项实施出口管制。中国商务部和海关总署发布公告,

15

谢来发,主动交代问题

16

"金山在澳大利亚寻找更多的巴西稀土

17

套现客户8000获刑

18

起床号8月17日

19

文安县人民检察院推动为民办实事“落地生花”

20

【心安商店】心安城市助力阳信县商店镇葡萄节嘉年华圆满成功

20

580余家媒体集中发布这一报告

20

商务部:继续放宽外资市场准入,引导更多优质外资进入资本市场长期投资

20

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

也门南部自杀式袭击死伤人数升至34人

20

溯水城水韵,寻峥嵘岁月

20

疑似中国留学生在澳洲发生命案,女子身中数刀,男子坠楼身亡

20

拒绝参加巴黎奥运会,闭幕式的五个国家

20

陈俊光到潮州调研绿美广东示范点、示范带建设情况

20

犯困时如何3秒清醒

20

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

20

美国刚对华妥协,就被捅刀子,印度联俄反美,中俄印能聊到一块

20

南京通报5名干部被查

20

卡德罗夫麾下最精"

20

以色列公开称伊朗与黎巴嫩真主党在密谋暗杀以色列高级官员。因为俄罗斯方向的战斗不理

20

乒乓球男团夺金赛

20

乡村新生活(图)

20

7点出发丨爆火!“硬控”网友的“乌龟对对碰”到底是个啥?

20

福建省政协系统“双走进”活动火热开展中148个、1523人、1168对!

20

热点问答|三问“北溪”爆炸调查新进展

20

交通运输部审议《推进实施内河水运体系联通工程行动方案》等

20

南京:“清凉驿站”见温度

20

台湾气象部门:已发生7次余震仍可能发生5.5级地震

20

杀害邯郸银行董事长的凶手被扒,正面照流出,知情者披露大量隐情

20

因串通投标,山东中科蓝天被国网湖南省电力公司拉黑3年

20

关键时刻,警惕美国动向!全球经济面临重大考验!

20

支持率只剩下6%!柯文哲推翻两党政治的挑战已结束!

20

江西省市场监督管理局局长谢来发接受审查调查

20

珠海海事:激发“红色引擎”助力乡村振兴

热门游戏

  • 1
    云台六高校师生探访茶马古道推动两岸交流与合作

    射击枪战 /热度:40740

    点击下载

    微信和苹果你会怎么选?苹果硬刚腾讯和字节跳动,后果会如何?

  • 2
    老祖宗的谚语告诉你:入秋后种植这些农作物,错过时机可就晚了!

    射击枪战 /热度:03064

    点击下载

    潼关县委统战部不忘老朋友、广交新朋友、深交好朋友

  • 3
    台中市民亲历花莲海域6.1级地震:整栋居民楼都在摇晃,被震醒后头都摇晕了

    射击枪战 /热度:97951

    点击下载

    国台办:台方应严惩“2·14”恶性撞船事件责任人

  • 4
    崩坏3 商务部刚刚正式宣布了!

    射击枪战 /热度:13089

    点击下载

    学习新语|领悟“七个聚焦”:建设美丽中国

  • 5
    原神 哈里斯努力白费?一觉醒来,特朗普“强援”曝光,舆论彻底炸锅

    射击枪战 /热度:34741

    点击下载

    可口可乐被勒令补税

  • 6
    出发吧麦芬 卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

    射击枪战 /热度:40314

    点击下载

    巴基斯坦报告3例新增猴痘感染病例

  • 7
    永劫无间手游 印尼总统佐科发表任内最后一次国情咨文

    射击枪战 /热度:91772

    点击下载

    中国管制锑出口美西方强烈反应暴露了什么?

  • 8
    向僵尸开炮 新闻8点见丨民政部集中回应婚姻热点问题;中国运动员出征残奥会

    射击枪战 /热度:57958

    点击下载

    美跳高选手加赛丢金

  • 9
    鸣潮 热点问答|三问“北溪”爆炸调查新进展

    射击枪战 /热度:06312

    点击下载

    第二届中国直播电商产业大会10月在青岛举办

  • 10
    艾塔纪元 兴仁街道开展“文明祭祀共树新风”移风易俗宣传活动

    射击枪战 /热度:66543

    点击下载

    扶南运河!柬埔寨和越南的国运之争

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 论坛交流 | 游戏世界观探索 | 游戏音乐电台 |