OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: C919国航南航双交付国产大飞机即将开启多用户运营新阶段

责任编辑: 俞翊

发布时间: 2024-09-20 02:49:14

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

"乌克兰全境被轰炸,十个没想到

2

2024年度上半年社会民生领域网络辟谣榜

3

5岁娃打碎3千年文物

4

新闻一则

5

国际观察|英国政府面临严峻财政压力

6

辽宁石油化工大学:以长征精神为引领的育人实践探索

7

让网络空间更加清朗(金台锐评)

8

北京城南地区新增4所优质中小学

9

#历史上的今日#1964年8月28日晚上,在人民大会堂一一八厅会见委内

10

理论1点点|不进行无谓的争论

11

拿着飞机当筹码?欧盟要推进认证C919,来中国的节点卡得刚刚好

12

体育总局副局长受贿4341万,足坛腐败案密集审理,为啥国足成绩烂

13

恶意造网络谣言被拘

14

樊振东回应退役传闻

15

全国夏粮旺季收购进展总体顺利

16

俄罗斯刚刚正式宣布制裁!

17

人均150小笼包闭店

18

无锡入选全国重点城市IPv6流量提升专项行动

19

中国投资不好拿回来!尼泊尔违约,巴基斯坦、孟加拉国纷纷跟进

20

2024年中国网络文明大会在成都举行

21

胖东来售隔夜三文鱼

22

中方军机进入日本领空,日方大张旗鼓抗议,中方作出回应

23

这一“战”,告捷!——青岛卷烟厂夏季停产检修工作侧记

24

以色列南部拉响防空警报

25

绝味三年蒸发550亿

26

工人进地窖成植物人

27

当不成总统了?哈里斯犯下致命失误,特朗普迎来帮手,希拉里很急

28

这场省级广场舞展演黎族原生态舞蹈将惊艳亮相

29

土耳其抓捕20名涉嫌参与2016年未遂政变的嫌疑人

30

皖赣铁路宁国改线工程建成通车

31

还在访华就翻脸!美国再出轰动政策,数年管制反让美企损失千亿

32

济阳街道开展“幸福拾光,美‘帽’人生”DIY干花草帽活动

33

王毅同美国总统国家安全事务助理沙利文举行战略沟通

34

巴西对华皮下注射针头启动反倾销调查

35

日薪200画乌龟眼睛

36

心相近|数千“幸福井”润泽非洲大陆

37

乌克兰总统正式回应了!

38

武汉看守所发生爆炸

39

以军在约旦河西岸行动已造成12死26伤

40

中央纪委国家监委通报

20

国外网友评论印度从中国订购轮胎却不选日本,日本网友:他没资格

20

深化改革“闽”于行|福州篇

20

世界上最“离谱”的桥,工人把图纸拿反了,却造就桥梁界的奇迹!

20

专家学者:用好互联网铸牢中华民族共同体意识

20

雪梨被曝吸毒

20

"震撼消息来袭,全球瞩目焦点!

20

辟谣水果甜打甜蜜素

20

哈马斯威胁“恢复自杀式袭击”

20

参加婚礼无桌没人理

热门攻略

1

今日处暑南方仍高温

2

原来公交车这个地方是可以掀开的!

3

"俄粉应该清醒了!

4

俄乌战局剧变,俄军突破顿涅茨克防线,乌军陷入困境,将要崩盘?

5

停车场违规建娱乐城

6

终于来了!大陆重磅行动震动岛内,赖清德看向美国,这回真的慌了

7

朝鲜或开放国际旅行

8

新房被陌生人先入住

9

哈里斯和副手将接受首次联合采访谈内政外交

10

瑶海区开展民主党派成员赴“同心驿站”报到行动,切实激发基层治理新动能

11

英国伊斯兰主义者竟公然呼吁实施伊斯兰教法

12

访华第一天,沙利文就对华交底,亮明真实目的,中方明确表态

13

"泽连斯基押对赌注,俄美均对其让步,普京的态度出人意料。

14

男童被用椅子砸进icu

15

中美连谈2天,王毅连提3个要求,这一次,沙利文对华作出承诺

16

杭州市滨江区通过一批人事事项

17

拜登以退为进,开启了“绝地反击”模式,但是烂摊子还是收不完!

18

外交部:奉劝美方尽早摒弃过时的“门罗主义”、干涉主义停止霸凌胁迫、制裁封锁的单边行径

19

听说现在流行实名观看

20

国际观察|英国政府面临严峻财政压力

20

当不成总统了?哈里斯万没料到,特朗普还有后手!希拉里紧急出山

20

撑竿跳世界纪录刷新

20

代办排污许可证需要注意什么

20

不可思议的高压电除草机,在庄稼地里到处放电,一小时除草20亩

20

"看下胡塞武装的手势,才发现他们确实是犹太人的克星。

20

乌克兰铤而走险,踩踏俄罗斯划出的红线,冲突或将再次升级?

20

我与《濮阳日报》的纸间情缘

20

路透社报道称特斯拉曾要求加方降低对中国产特斯拉关税

20

美媒:FBI公布试图枪杀特朗普枪手所使用步枪等照片,披露调查最新进展

20

捡手机不满酬金发飙

20

被钝刀割肉,台当局生存空间所剩无几,台媒哀呼:美国帮不上忙

20

新疆巴铁若750千伏输变电工程贯通

20

美国做梦也想不到,自己花700亿造的边境墙,被人只用5美元攻破

20

不良电池产品起火致23人遇难,包括17名中国同胞,韩国华城电池厂责任人父子被批捕

20

耿爽在联合国呼吁调查后,惊天大案有了线索,凶手让德国有苦难言

20

韩称朝士兵越分界线

20

小孩吓坏家长诉异形

20

社保卡找不着了,着急就医怎么办?

20

中国常驻联合国副代表:中方愿继续为推动政治解决乌克兰危机作出不懈努力

20

全红婵拿两金不开心

20

朝鲜人出门有哪些交通工具,本期为你揭秘:朝鲜出行方式

20

为何我国对性交易零容忍?看完德国的红灯噩梦,就什么都明白了

20

烈士邱建军的女儿大学报到,他生前的战友们,来护送孩子

20

四大行再创历史新高

20

嘉祥县满硐镇召开基层电子证照制发推进会议

20

重逢名场面迎唏嘘后续:认出法官竟是老同学痛悔大哭的嫌犯,9年后再被捕两人又相见

20

中国游客济州岛烧伤

20

外交部:有关各方都应冷静克制避免乌克兰危机升级外溢

热门游戏

  • 1
    韩国釜山:匪夷所思的案件,意想不到的结局

    射击枪战 /热度:71617

    点击下载

    周琦将加盟北京首钢

  • 2
    枪击特朗普枪手用枪公布!更多细节曝光

    射击枪战 /热度:05613

    点击下载

    辰亦儒妻子官宣怀孕

  • 3
    台风“珊珊”已致日本九州地区41人受伤

    射击枪战 /热度:74440

    点击下载

    “电保姆”守护万亩稻花香

  • 4
    崩坏3 神农架奇女子扮野人带火五黑鸡,引领全村百户致富养鸡潮

    射击枪战 /热度:58278

    点击下载

    利民消息:哈萨克斯坦小麦大丰收,新疆能否接力再创佳绩?

  • 5
    原神 "现在的印度公知和我们当年的公知真是有的一拼。

    射击枪战 /热度:54609

    点击下载

    辽宁省政府:追授李清学“辽宁省见义勇为英雄”称号

  • 6
    出发吧麦芬 决策者需警醒!贴近民心,方能长久!

    射击枪战 /热度:98725

    点击下载

    印度3名学生打死5岁男童:以为学校死了人,就会放假

  • 7
    永劫无间手游 促进“新陈代谢”助力全面深化改革

    射击枪战 /热度:76643

    点击下载

    渝昆高铁事故致6死

  • 8
    向僵尸开炮 乌克兰用集束炸弹轰炸库尔斯克核电站

    射击枪战 /热度:67795

    点击下载

    国家体育总局:坚决抵制畸形“饭圈文化”,高度警惕过度商业化倾向

  • 9
    鸣潮 库尔斯克被乌军突入,普京面临艰难时刻,泽连斯基撂话俄不会用核

    射击枪战 /热度:58935

    点击下载

    男童玩枪意外身亡

  • 10
    艾塔纪元 中非共建“一带一路”发展成果丰硕蓝皮书发布→

    射击枪战 /热度:50919

    点击下载

    原宜兴市公用事业管理局副局长李新平被查

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏市场动态 | 游戏插件推荐 | 补丁更新 |