OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 图解|创新平台扬帆起航!晋创谷创新驱动平台建设工作方案出炉

责任编辑: 山颜

发布时间: 2024-09-20 18:23:57

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

千江一河大潮阔丨长久安澜的又一个“大砝码”!黄河古贤水利工程进入建设阶段

2

世界卫生组织:苏丹霍乱疫情已致316人死亡

3

三亚12345热线功能“上新”12个审批事项可“电话办”

4

失踪女童在深山找到

5

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

6

8月17日【第十集】美国彻底乱了看吧美国肯定是要大分裂了

7

“环境、发展与人权:现代化进程中的绿色低碳发展”国际研讨会召开

8

川维化工:“四注重”抓实反腐倡廉教育

9

台中市民亲历花莲海域6.1级地震:整栋居民楼都在摇晃,被震醒后头都摇晕了

10

柯文哲走到“政治悬崖”,考验国民党的时候到了

11

突发消息:法国南部航展上一架飞机坠海。据报道,法国巡逻兵飞行表演队的一架

12

重磅官宣:土耳其豪门签约中国女排队长袁心玥,朱婷后加盟第二人

13

拜登有事相求,派重量级代表团登中国的门,动身之前对华连退2步

14

以军性虐待巴囚犯

15

建设银行甘肃省分行党委委员、副行长邵茂丰接受纪律审查和监察调查

16

助力农业绿色发展第四届中国有机肥产业发展大会召开

17

砍院外香樟被罚3万

18

【学习贯彻党的二十届三中全会精神】我区召开学习贯彻党的二十届三中全会精神宣讲动员会

19

北京市委常委会召开会议,研究做好中轴线申遗保护后续工作等事项

20

中国说中了?乌军大规模偷袭俄本土,王毅没中乌克兰的圈套

21

李冠杰:英国新政府是时候改善对华关系了

22

被控受贿超2756万元,临沂市原副市长马崑当庭认罪

23

“终本清仓”结案118件、执行到位逾2.2亿元厦门法院开展“雷霆2024”集中行动

24

“80后”副市长王巍,被查

25

谢瑜的偶像是马龙

26

#美国驻华大使馆回应给运动员P图#环球时报英文版的报道确实还在,美国大使馆这是被

27

全国文旅抢王昶大战

28

小米SU7对撞测试博主道歉,电池“失踪”手镯“天降

29

台湾青年走进阳江共放纸鸢话发展

30

澳门公布行政长官选举日程表

31

民生民意筑强国

32

我国“山水工程”持续稳步推进

33

港5至7月失业率维持3%

34

意大利埃特纳火山喷发附近机场一度停航

35

土耳其:伊兹密尔省发生森林大火火势逼近居民区

36

65名厅、处级干部被查处,湖南通报7月份查处违反中央八项规定精神问题情况

37

以安全官员:以色列高官可能遭暗杀

38

库里连中四个三分

39

刘清漪霹雳舞摘铜

40

他信小女儿佩通坦·钦那瓦当选泰国新总理

20

印尼伊布火山一日内两次喷发

20

抵制开始!国内多家涉长荣企业急声明,长荣连续道歉整改也没用?

20

广东首个行政执法监督码在深上线剑指不规范执法、选择性执法

20

16岁女孩遭警察击毙

20

日本政坛变天,岸田文雄宣布辞职,耻辱下台原因彻底曝光丑闻发酵

20

美国超一半的州7月失业率上升,就业市场降温不能只怪飓风来袭

20

菲律宾海警船在仙宾礁潟湖非法滞留,外交部:立即撤出

20

淄博世博高新医院多学科专家走进社区开展“爱世博我健康”义诊活动

20

酒桌文化会被终结吗

热门攻略

1

晴天霹雳!英国宣布破产,新首相斯塔默面临财政大考,将何去何从

2

关于深化澜沧江-湄公河水资源合作的倡议(摘要)

3

马克龙再陷内政困境

4

曹淑敏撰文阐释广播电视和网络视听高质量发展的出发点和落脚点!

5

猴痘又要来了!丹麦药厂呼吁批准青少年打疫苗股价连续两日大涨17%!

6

唐山市原副市长曹全民被查

7

新思想引领新征程丨扎实推进生态文明建设绘就美丽中国更新画卷

8

紧急翻天覆地!乌占领俄1097平方公里,而非俄所说的40平方公里!

9

李炳军会见中国五百强产业联盟主席江南、刘志强一行

10

朱立伦将启程赴美,蔡英文“反攻”赖清德,民进党内斗升级

11

8月16日中午12时2024年南海伏季休渔期正式结束开渔令下

12

何冰娇晋级决赛

13

烟台市自8月起陆续举办5项大型人才对接活动

14

美国国务院批准向加拿大出售战术导弹

15

"太意外了!

16

全国生态日共筑宁静家园

17

市场监管总局今年已督促退还涉企违规收费3.93亿元

18

市场监管总局:持续深化“高效办成一件事”改革,推动政务服务提质增效、便企利民

19

香港特区政府强烈谴责彭定康恶意诋毁终审法院判决

20

以赛促学深圳光明民政系统业务大比武知识竞赛超有“料”

20

美国总统大选辩论将于9月10日在费城举行

20

美国刚对华妥协,就被捅刀子,印度联俄反美,中俄印能聊到一块

20

学习贯彻二十届三中全会精神宣讲稿(党课)

20

“行进中国”调研行|硬科技如何“破壁”?

20

苹果开放的NFC国内用不了

20

"台湾长荣酒店的做法是在作死。

20

2024年全国生态日启动仪式暨研讨会在香港举行

20

中日韩2023年新生人口对比,韩国22万,日本72万,中国断崖式碾压

20

佩通坦当选泰国新任总理中国外交部:愿同泰方一道深化务实合作

20

其一令人惊讶的是,原总理任职"

20

埃尔多安政党的议员与库尔德议员在土耳其议会发生激烈斗殴

20

韩检方调查文在寅夫妇银行账户,共同民主党27名议员发联名声明:明显的政治报复,应立即停止

20

乌克兰冒进伊朗忍辱的背后:中、俄、中东反霸铁三角

20

临夏市公安局召开常态化扫黑除恶斗争推进会

20

柬埔寨国王西哈莫尼出席新疆当地的欢迎宴会

20

万余人攻入俄罗斯为何乌称只有一千

20

中老缅泰外长举行非正式会晤

20

特朗普:别劝我,我有权对她人身攻击

20

彻底浇灭“台独”分子嚣张气焰!大陆果断祭出杀招,民进党好自为之

20

巴拿马运河管理局再次提高运河通行能力

20

中老缅泰外长举行非正式会晤

20

担负起新的文化使命,建设中华民族现代文明

20

年过80,还能轻松做到这3件事,多半会长寿!

20

韩媒:文在寅夫妇银行账户因前女婿而受到韩国检方调查

20

国台办:台方应严惩“2·14”恶性撞船事件责任人

20

"乌克兰一夜暴富了!近日收到113架F16的大礼物!

20

卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

英前首相约翰逊称赞乌军对俄罗斯库尔斯克地区的反击

热门游戏

  • 1
    载有130吨进口香料的中欧班列抵达甘肃武威

    射击枪战 /热度:70713

    点击下载

    湖南省中级法院院长座谈会召开

  • 2
    民族败类必被清算!大陆不再忍耐,10人被点名,“台独”好日子到头

    射击枪战 /热度:91290

    点击下载

    社会类:入围奖-《月亮与星星起舞》

  • 3
    万源全力推进“交通三年提级行动”

    射击枪战 /热度:06488

    点击下载

    麦积分局打造“1+2+4+N”基层基础管控中心

  • 4
    崩坏3 王毅外长到访前,泰国总理突然下台,中方军机已到位

    射击枪战 /热度:77456

    点击下载

    衡阳市第一人民医院召开2024年度科研培训会议

  • 5
    原神 民调反超特朗普之际,哈里斯派人窜台见赖清德,并交底两岸政策

    射击枪战 /热度:61120

    点击下载

    #小姜在尼泊尔#外国媳妇#国外新娘#异国风情#民族特色民族文化#小姜和尼泊尔媳妇#尼泊尔阿优莎#尼泊尔#农村生活#外国媳妇#国外生活#海外生活#记录真实生活#记录海外生活

  • 6
    出发吧麦芬 安徽和县:阅读大篷车走进合肥都市圈

    射击枪战 /热度:18525

    点击下载

    主动交代问题的江西省市场监管局局长谢来发被查上月底曾主持会议

  • 7
    永劫无间手游 美国总统大选辩论将于9月10日在费城举行

    射击枪战 /热度:04891

    点击下载

    老挝阿胜为何吊着阿拉的胃口呢?阿拉为何委屈求全要复合呢?

  • 8
    向僵尸开炮 未雨绸缪!看看日本家庭都做了哪些防灾对策?

    射击枪战 /热度:80674

    点击下载

    巴基斯坦西南部发生炸弹袭击致1死12伤

  • 9
    鸣潮 中国队第13金

    射击枪战 /热度:99540

    点击下载

    法国为何如此热衷斡旋?所谓的欧洲“话事人”究竟有多少能量

  • 10
    艾塔纪元 乌军袭击俄军用机场

    射击枪战 /热度:95051

    点击下载

    武契奇深陷危机,连夜派人去俄罗斯求援,不料俄方先提了一个要求

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏音效制作揭秘 | 交易市场 | 游戏视频 |