OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 美或无法办下届奥运

责任编辑: 琴箫

发布时间: 2024-09-20 04:17:33

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

澳大利亚对华钢角材发起双反调查

2

美国小伙野外求生,碰到巨型鹿角这样来搬运,没有生物能幸免

3

多部门联手立体化追责净化股市生态

4

印度两边讨好访问俄罗斯,又访问乌克兰:却掉进泽连斯基挖好陷阱

5

朝鲜人出门有哪些交通工具,本期为你揭秘:朝鲜出行方式

6

一线城市新消费

7

他当选总统,中方第一时间祝贺!美国气急败坏!

8

吉林集安市人大常委会党组成员、副主任唐连弟接受审查调查

9

武威天祝:发展特色产业拓宽农民致富路

10

武汉看守所发生爆炸

11

东欧最新态势。#东欧#世界局势#俄罗斯与乌战争

12

记者暗访疯狂的烟卡

13

“红动交工”宣讲团将党的二十届三中全会精神带进交通建设一线

14

安徽砀山:“互动式”普法宣传走“新”更入“心”

15

印度古吉拉特邦洪水已造成约35人死亡

16

国防部:坚决反对任何域外国家在亚太炫耀武力

17

重庆北碚多措并举实现缙云山“颜值”和“价值”双提升

18

"日本“米荒”持续,政府拒绝放粮:会影响米价

19

"美司令叫嚣出兵:美国军舰可为菲律宾运补船护航!

20

我把净水机换成“桶装水”一周后,有些话不吐不快,太扎心了!

21

为什么日本80岁老人还工作?日本平均退休金是多少?

22

兴平路街道:“四个聚焦”提升政务服务质效

23

邹平长山镇团委:借“妙手生花”缠花活动打造联系青年人才新载体

24

国防部:中美正通过军事外交渠道就两军战区领导通话安排展开沟通

25

拜登即将下台,沙利文这个时候到中国,带着什么任务?

26

地表温度超70度是什么体验?重庆人一天晒好牛肉干!

27

“树语”回国再发声!曾在NHK直播时脱稿喊话“钓鱼岛是中国的”

28

俄这招对等反制狠!禁止92名美国公民入境,包括美情报部门人员

29

俄罗斯完全停止披露成品油的生产数据

30

加沙1公斤西红柿194

31

沙利文访华随行人员几乎都会说中文!网友高潮,实力的必然结果

32

泽连斯基:中方给的和平计划是纸上谈兵

33

万斯到威斯康星造势批评哈里斯外交政策

34

上合递出一张邀请函,位子已经留给印度,能否把握机会就看莫迪了

35

柯文哲深陷的京华城案侦办大进展。在针对台北市前市长柯文哲任期内涉及的京华城容积率

36

千元吃火锅吃出蟑螂

37

韩国41岁“跑单王”车祸去世:因生意失败而当骑手,每天干16小时接120单,几乎能记住当地所有路线图

38

G20峰会落幕,美要中国“守规矩”,话音刚落,中俄找到破敌之策

39

加拿大副总理称20年前让秦国假如WTO是个错误#国际局势#中东

40

中美谈妥了,王毅立3条规矩,沙利文作出保证,美将派第2波人来华

20

救人后寻被救者证明

20

美媒:美国多数城市7月失业率同比上升劳动力市场放缓

20

李雯雯被男粉问彩礼

20

王楠送国乒金牌曝光

20

俄乌发动大规模空袭

20

当不成总统了?哈里斯万没料到,特朗普还有后手!希拉里紧急出山

20

18省区市大到暴雨

20

曹邦兴调研巫山县数字重庆建设和基层治理等工作

20

内蒙古自治区创新培育“网络法律明白人”

热门攻略

1

富士康涉歧视已婚女

2

借培训之名绕道旅游,安排亲属“吃空饷”!甘肃省民乐县委原书记李作明被“双开”

3

23岁运动员被宣布死亡!男友在著名景点目睹惊魂一幕……

4

山东暴雨预警升级!7月15至19日天气预报,暴雨中心即将来袭

5

云南VS越南综合指标对比,越南能拿几分?

6

三只羊杭州总部出租

7

隆昌市融媒体中心召开优化营商环境工作会

8

美国为什么同时对付中国和俄罗斯(音频来源:静思有我)

9

10

据央视新闻消息,世界"

11

黑神话火到了甜品界

12

东京一公司“雇用”11只猫,为员工减少“班气”

13

“柬埔寨运河开挖”:中国基建速度与力量引发的地区震撼

14

联合国安理会延长联黎部队任期至2025年8月31日

15

太原宝藏地“护未”有温度

16

基层公务员常备“三把刷子”

17

不良电池产品起火致23人遇难,包括17名中国同胞,韩国华城电池厂责任人父子被批捕

18

“强身”和“瘦身”相结合(今日谈)

19

这个地方,能品尽天下美酒!

20

能工巧匠出绝活湖南港航水利集团举办职业技能大赛

20

孙杨谈美游泳队脸紫

20

美国达美航空一波音客机维修时爆胎致2死1伤

20

中美谈妥了?新闻稿件发布,沙利文随行人员变了,俄罗斯态度鲜明

20

川外回应食堂僵尸肉

20

客流量从0到10亿厦门地铁“流量密码”带来什么?

20

《百姓问政》关注武清区城市道路不通怎么办?扫码阅读手机版

20

“立法直通车”满载民意民智(坚持和完善人民代表大会制度)

20

20

美媒调查揭露:大量欧洲网红照片被盗,用于传播亲特朗普内容

20

"感觉印度又要薅羊毛!

20

印度古吉拉特邦洪水已造成约35人死亡

20

还在访华就翻脸!美国再出轰动政策,数年管制反让美企损失千亿

20

秦皇岛开发区:让流动党员离乡不离党

20

天朗气清总书记这样指引网络空间建设

20

“树语”回国再发声!曾在NHK直播时脱稿喊话“钓鱼岛是中国的”

20

事关粤港澳两地牌车!新式自助机来了服务网点一览

20

黑帮竟与警方叫嚣欲强夺证人,双方势如水火

20

难怪现任墨西哥总统洛佩斯将过"

20

时隔八年,机会来了!轮到希拉里复仇?特朗普遭“当头一棒”

20

挖得越深,危险越大!美国2孩子挖的沙洞坍塌,7岁女孩被活埋致死

20

中新健康丨国家卫健委:我国人均预期寿命达到78.6岁

20

“小李子”用餐后给40万元小费!服务员激动哭了

20

F-16“神话”提前落幕?乌军飞行员阵亡,首架战机疑被俄军击毁

20

8连问!中国驻菲律宾使馆批驳日方涉南海言论

20

睡觉流口水有大问题

20

#扬州市广陵区委书记张伟:以深化改革为高质量发展蓄势赋能

20

外交部:中方对约旦河西岸局势升级深表担忧

20

沙利文访华,123,木头人

热门游戏

  • 1
    最新人事任免

    射击枪战 /热度:11350

    点击下载

    太高科技了哈哈

  • 2
    岸田下台前夕,日本代表团访华,坚决实施禁令这件事没得商量

    射击枪战 /热度:47042

    点击下载

    浴场粪大肠菌群超标

  • 3
    最新!美国中央情报局“正与乌克兰接触”;俄外交部:不欢迎这些美国人,已禁止2000多名美国人入境

    射击枪战 /热度:76922

    点击下载

    积极探索养老志愿服务有效方式

  • 4
    崩坏3 拼多多大跌30%下沉市场好日子到头了?

    射击枪战 /热度:00976

    点击下载

    北京蓝龙物业管理中心法定代表人刘增旺接受审查调查

  • 5
    原神 霍山县数据局:霍山县高效办成“开办运输企业一件事”

    射击枪战 /热度:68200

    点击下载

    今天这个造型如何,希望你们能提一点意见

  • 6
    出发吧麦芬 还在访华就翻脸!美国再出轰动政策,数年管制反让美企损失千亿

    射击枪战 /热度:25048

    点击下载

    华裔女子死在床底

  • 7
    永劫无间手游 俄军使用伊斯坎德尔战术导弹突袭了克里沃罗格的奥罗纳酒店,这家酒店是乌克兰特务机构

    射击枪战 /热度:77360

    点击下载

    美媒调查揭露:大量欧洲网红照片被盗,用于传播亲特朗普内容

  • 8
    向僵尸开炮 特朗普“未遂刺杀案”嫌疑人作案动机仍不明

    射击枪战 /热度:36428

    点击下载

    库尔斯克被乌军突入,普京面临艰难时刻,泽连斯基撂话俄不会用核

  • 9
    鸣潮 德国又发生持刀行凶案,嫌犯被警方击毙

    射击枪战 /热度:58258

    点击下载

    有奶便是娘:莫迪突访乌克兰,签一合作气坏俄罗斯!印难成大国

  • 10
    艾塔纪元 献血8次用血被拒

    射击枪战 /热度:22341

    点击下载

    担心的事发生了:不顾王毅警告,沙利文给菲侵闯南海发“通行证”

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 策略游戏攻略 | 虚拟现实游戏区 | 游戏竞技教学 |