OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 南非总统表示愿同中方拓展各领域合作

责任编辑: 嵇骐

发布时间: 2024-09-20 04:07:04

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

要求降低针对中国关税,美国巨头特斯拉曾找过加拿大政府

2

雄安娃走进“未来课堂”

3

吃凉皮中毒进ICU

4

通讯|“和中国同事一起为家乡出力”——中马建设者共同扮靓“致富路”

5

鱼台县王鲁镇开展反邪教宣传进机关讲座提升干部防范意识

6

中国女子与菲律宾籍丈夫在泰国坠亡

7

单位41人入职遭清退

8

特朗普被采访时竟说:真的是个高危职业,场面一度陷入尴尬!

9

美以要被拖垮了!伊朗暗示风暴将至:从9月1日开始!没有结束期限

10

"约旦不可能独善其身。阿卜杜拉二世警告说,局势正在恶化……

11

安徽黟县:直播带岗助力稳定就业

12

2024年8月28日,俄罗斯国防部关于击退乌军入侵俄罗斯库尔斯克州领土的每日战斗

13

来自俄罗斯卫星社的消息,当地时间828日"

14

锚定现代化改革再深化|山西祁县:城乡共饮放心水智慧水利解民忧

15

加沙10个月大婴儿感染脊髓灰质炎:25年来首例母亲称孩子没有接种疫苗

16

徐新忠任南充市中级人民法院副院长、代理院长

17

赖清德再刷执政下限媒体人:是台湾民众的悲哀!

18

会谈结果出炉,沙利文做让步,公开承诺,美国不支持“台湾独立”

19

1.乌克兰可能无法击败俄罗斯,只能无奈承认"

20

厦门调整房产落户

21

告别高温,多肉植物状态即将迎来春天!不再担心化水问题

22

三亚市委原常委、统战部原部长陈正光被查

23

访俄第二天,普京见了崔善姬,朝鲜拿到想要的,这次现场没有长桌

24

八戒蜘蛛精意难平

25

"每天都听说俄罗斯战败了,就像说特朗普已败选一样,

26

2024年美国总统大选,三大候选人,到底谁能胜出?

27

浏览境外网站被罚款

28

英国政府面临严峻财政压力

29

外媒:韩国火灾事故电池厂代表等责任人被批捕

30

86年前的金门大桥-堪称工程奇迹

31

中国驻菲律宾使馆发言人就日本驻菲大使涉南海错误言论答记者问

32

台湾花莲6.1级地震

33

34

航母上拍下星轨银河

35

赖清德当局回应来了!面对沙利文与王毅会面,给“台独”上紧箍咒,赖清德当局“外交部

36

上海狗走丢浙江找回

37

上饶银行信州支行联合上饶市立医院、东市街道开展“义诊+反诈”宣传公益活动

38

今天这个造型如何,希望你们能提一点意见

39

2024年度上半年社会民生领域网络辟谣榜

40

献血8次不能先用血

20

中国常驻联合国副代表:中方愿继续为推动政治解决乌克兰危机作出不懈努力

20

高速费打折!山西这条高速通行费享6折优惠#黄河电视台#山西#运城

20

地铁口弹钢琴遇郎朗

20

全国生态日吉林省网络图片展吉林逐绿而行精心擘画碧水蓝天生态新图景

20

沈阳市非公企业党组织覆盖率达85%

20

乌克兰被打烂了,只剩最后一个宝贝:已被印度盯上,要空手套白狼

20

福建省霞浦县发布暴雨黄色预警

20

外国女子在喜马拉雅山独自修行12年,一天一顿饭,每天只睡3小时

20

中美在北京谈了,事关两国未来50年,新加坡学者给了美国一个忠告

热门攻略

1

国家能源局:全社会用电增量一半以上为新增清洁能源发电

2

英国财政压力严峻政府酝酿对富人加税

3

洪森有5个子女,其中有3个儿子,为什么选洪玛奈为首相?

4

1万10万15万……一组数字体现中非合作迈上新台阶

5

6

7

李佩霞案家属委托律师称“会见受阻”,其父发文“十问”官派律师

8

塔克拉玛干沙漠洪水

9

风信子|市内免税店或增至27家,“DutyFree”为“ChinaTravel”添把火

10

男子在墨西哥集市,竟然看到会跳舞的豆子?

11

发条朋友圈话费1万6

12

印度警方使用,高压水枪和催泪瓦斯,驱散抗议女医生被奸杀人群

13

“双争”光荣榜|孙立岭:抓党建促振兴育产业谋发展

14

印度一女子为了与情人在一起,将3岁女儿残忍杀害

15

以军围攻约旦河西岸难民营大肆破坏基础设施

16

加沙断臂少年:失去亲人比失去双臂更痛苦

17

云南绥江:农家晒秋忙

18

三中全会《决定》名词卡片天天学:银发经济

19

【#向太称直播卖出900多个159万元爱马仕#,#向太称直播间一夜带货21亿#】三言科技8月29日消...

20

中方代表:愿继续为推动政治解决乌克兰危机作出不懈努力

20

赖岳谦:民进党当局靠不住,台湾渔民能依靠的只有祖国大陆

20

富阳税务部门为新创企业“点对点”服务

20

2024年度上半年社会民生领域网络辟谣榜发布

20

20

水利部:创新推进合同节水管理促进节水产业快速发展

20

#历史上的今日#1964年8月28日晚上,在人民大会堂一一八厅会见委内

20

骚乱爆发后,斯塔默拨通中国电话,中方想要的,英国给的很干脆

20

未来两天北京晴间多云为主昼夜温差较大最低气温20℃左右

20

法国人疯了!警车开道,成龙传递巴黎残奥会火炬万人空巷

20

美国挑唆计划彻底失败!苏林访华,越南给了三大承诺,美西方急了

20

涉6项罪名,电报创始人在法国被提出正式指控:身价百亿美元,有100多个亲生孩子

20

俄全球通缉纳粹老兵

20

俄乌战局剧变,俄军突破顿涅茨克防线,乌军陷入困境,将要崩盘?

20

最近,英国《金融"

20

欧阳丹东任宜宾市中级人民法院党组书记、院长提名人选

20

摩托车撞上汽车起火

20

大垫高速铜锣山隧道进口端首件二衬施工顺利完成

20

遭前男友性侵左眼失明,美国奥运选手人生逆转变奥运射箭选手

20

深化实验区改革加快高质量发展

20

国外富婆要求男模舌吻,结果自己有口臭,男模直接吐在嘴里了

20

三件事:拜登一项任命令人意外;中使馆紧急提醒!中方担忧成真?

20

诈骗团伙冒充孙子

20

让澳大利亚无奈,令中国心寒,昂贵的蒙古矿石,为何谁也玩不转

20

朝鲜人出门有哪些交通工具,本期为你揭秘:朝鲜出行方式

20

市政府七届六次全体会议召开

20

曾经点燃残奥会主火炬的他们为出征巴黎的残奥运动员加油

20

国际观察|英国政府面临严峻财政压力

20

上海市人大常委会原主任董云虎受贿案一审宣判:无期徒刑

热门游戏

  • 1
    哈马斯呼吁加沙人道主义休战-以便开展儿童疫苗接种

    射击枪战 /热度:79661

    点击下载

    人民网评:筑牢“天价”月饼治理坚固防线

  • 2
    乡村振兴|珠晖区:库区移民农业培训班开班助力果树种植产业发展

    射击枪战 /热度:30617

    点击下载

    中国和印度的关系真的很坏吗?实际情况完全相反,美国为此焦虑。

  • 3
    8月29日刚刚传来的消息,波兰国防部长马里乌什"

    射击枪战 /热度:86803

    点击下载

    美媒:特朗普做出一个承诺,若胜选将建造“最伟大的铁穹”

  • 4
    崩坏3 国家发展改革委印发《中新天津生态城建设国家绿色发展示范区实施方案(2024—2035年)》

    射击枪战 /热度:25540

    点击下载

    加沙1公斤西红柿194元,妇女找食物怕不能回家,得对天祈祷

  • 5
    原神 女子87套房全部法拍

    射击枪战 /热度:61099

    点击下载

    连撞中美两堵墙后,莫迪认清事实愿出席金砖峰会,但中方未必买账

  • 6
    出发吧麦芬 莫迪刚走,泽连斯基直接开骂,印度比中国更可恶,还提出一个请求

    射击枪战 /热度:28004

    点击下载

    中国人民解放军军乐团,在莫斯科进行演奏,遇侗族艺术团共同表演

  • 7
    永劫无间手游 中央台办、国务院台办主任宋涛会见中国国民党副主席夏立言一行

    射击枪战 /热度:00463

    点击下载

    淮北市杜集区民政局:多举措加强低收入人口动态监测

  • 8
    向僵尸开炮 自贡市退役军人工作高质量发展专题班在江西井冈山开班

    射击枪战 /热度:50681

    点击下载

    富二代继承了140亿,以为每年花1.4亿能花100年,后来发现算错了

  • 9
    鸣潮 9月24日至25日,2024世界计算大会将在长举办

    射击枪战 /热度:20807

    点击下载

    泽连斯基:普京太热爱生活了,不会扔核弹

  • 10
    艾塔纪元 他表示,北约成员国与乌克兰共同审视了当前俄"

    射击枪战 /热度:42990

    点击下载

    樊振东回应换衣逆转

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 玩家故事会 | 游戏情感 | 手游专区 |