OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 一朵玫瑰花的数字蝶变

责任编辑: 池琛

发布时间: 2024-09-20 10:33:26

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

洛阳市政协最新人事任免

2

县委书记耿振华赴北城街道宣讲党的二十届三中全会精神

3

台湾今年5级以上地震达50次,台气象部门:“不正常”

4

俄一战略轰炸机坠毁

5

特朗普飞机故障一周后共和党副总统候选人万斯乘波音737又遇紧急迫降

6

上迪有演职人员中暑

7

印尼总统佐科发表任内最后一次国情咨文

8

辟谣龙脊广场有命案

9

美波音飞机CEO被工会吊打拷问:老板一年涨薪45%,工人8年涨薪1%

10

男生搭飞机跨省上班

11

普宁市委原副书记何亿严重违纪违法被开除党籍和公职

12

提升排污能力丰台河西两万余居民和120余家商户告别排污难

13

秋风起,花卉正饥渴待养,滋养有道,绽放无悔!

14

外交部美大司司长杨涛会见美国青年政治家代表团

15

高温天气如何做好健康防护(民生服务港)

16

2024年青城——粤港澳大湾区青少年手拉手同心营在广州市海珠区开营

17

“一股下水道臭味……”166元老鸭面吃出腐鼠?官方通报:养殖环节异物没入鸭腿造成内部肌肉组织感染

18

云浮市政府党组成员、副市长王巍被查

19

锚定现代化改革再深化|湖北丹江口:保护水源地生态环境确保“一泓清水永续北上”

20

河南三门峡:老矿区变身生态“金山银山”

21

乌克兰冒进伊朗忍辱的背后:中、俄、中东反霸铁三角

22

王楚钦输球找回自己

23

湖北南漳全面推进“一业一查”部门联合双随机抽查工作

24

美国女大学生宿舍开窗睡觉,被流浪汉入室性侵

25

俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

26

滨州市自然资源规划局到全市地面沉降监测网建设项目现场调研

27

马龙取关石川佳纯

28

厦门率先全省完成管廊运维员职业技能等级认定

29

罕见暴雨袭击珠峰地区

30

杨文璐晋级拳击决赛

31

主动交代问题的江西省市场监管局局长谢来发被查上月底曾主持会议

32

以色列定居者大规模纵火!有村民被打死

33

涉嫌严重违纪违法,安徽省蚌埠市人大常委会原党组成员、副主任汤春义接受审查调查

34

万斯所乘飞机遇紧急情况迫降,飞机正常降落,并未发生事故,一周前特朗普所乘飞机出现故障

35

《检察日报》:运用“三个结构比”,推动“四大检察”全面协调充分发展

36

王昶劝接机粉丝理智

37

菲律宾海警船在仙宾礁潟湖非法滞留,外交部回应

38

一,战争的烈度增强了,消耗战成为必"

39

火炬中心启动2024年火炬科技成果直通车工作

40

中国移动通信集团上海有限公司原资深经理(总经理级)张维华被开除党籍

20

咸宁市水利和湖泊局:感知历史发展增强文化自信

20

以外长声称:“希望与英法共同打击伊朗”

20

干部退而不休搞贪腐

20

巴基斯坦发现猴痘病例

20

银昆高速太彭段建成通车

20

极氪已报警

20

撞王楚钦记者被处罚

20

中国出了个“败家子”?台积电的错误决定,竟让美国诡计得逞!

20

进一步提高人权执法司法保障水平

热门攻略

1

黑水县一干部抢险救灾中失联当地已组织1300余人次搜救

2

火车站回应野猪乱窜

3

教育年限延长促使初婚年龄越来越晚

4

他信女儿任泰国总理

5

厦门市委常委游文昌已任市委政法委书记

6

全红婵推行李箱追尾

7

菜价近10年同期最高

8

老头一个行为惹怒仙女,当街就开始发飙,疯疯癫癫直接把老登整服

9

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

10

王楚钦再谈主拍断裂

11

内蒙古打造稳定的生态碳汇供给基地

12

孙杨参加明年全运会

13

阿比纳德尔宣誓就任多米尼加总统

14

"柬埔寨“运河开挖,中式装备到我家”

15

日菲将签署协定,允许两国武装力量互访

16

樊振东食堂固定NPC

17

贵阳数千学生被退学

18

民众党焦头烂额之际,黄珊珊一个举动,让蔡正元直呼:服了你了

19

迈巴赫送考少年发声

20

以方称在加沙地带作战基本结束

20

中美博弈下半场--文明的冲突

20

莱尔斯新冠结束奥运

20

马龙晒五届奥运证件

20

市委书记、市长、组织部长,这届九江市委常委班子已3人落马

20

日本首相岸田文雄宣布重大决定放弃连任

20

中央纪委网站:今日截至20时,5人被查,3人被处分

20

已确认!他失联24天

20

河北省唐山市一级巡视员曹全民被查

20

以“制”施“治”构建生态文明体制防护网

20

纽约市党委怎么控制《纽约时报》?

20

一首《共和国之恋》,失明小伙唱出对祖国的深情

20

中国驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

20

广东云浮“80后”博士副市长王巍通报被查

20

助力科特迪瓦可可产业加速发展(新时代中非合作)

20

马龙巴黎奥运首秀

20

也门南部自杀式袭击死伤人数升至34人

20

多雨周末!北方新一轮降雨来袭南方分散性强降雨持续

20

俄称在库尔斯克州打击乌军,乌称战斗仍在继续

20

发生在日本的超自然现象!如月车站事件!

20

台湾附近6.1级左右地震很多福建人表示有震感,希望大家都没事!

20

全国人大代表李翠利肯定检察护企成效合力护航企业高质量发展

20

2022—2023年度文旅领域改革创新优秀案例拟入选名单出炉

20

湖南省中级法院院长座谈会召开

20

最高人民法院发布人民法院服务和保障新质生产力发展典型案例

20

综述|互利合作共发展携手同行谱新篇——巴西各界人士热议巴中建交50周年发展成就

20

河北省唐山市一级巡视员曹全民接受审查调查

20

Жививплотьдовремени,живидосебя,живидотого,чтобыбытьлюбимым,живидотого,чтобыжитьдолюбви#声音控#你怕不怕我在你的世界里永远消失#听说片尾有彩蛋#路易十三是什么酒#内容过于真实

20

出台工作细则强化检警协作

热门游戏

  • 1
    关于防治“指尖上的形式主义”相关问题举报的公告

    射击枪战 /热度:27259

    点击下载

    日本为什么在大山内部建蓄水池

  • 2
    俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

    射击枪战 /热度:29353

    点击下载

    菲中国城起火致伤亡

  • 3
    渝昆高铁渝宜段启动试运行

    射击枪战 /热度:20501

    点击下载

    “浙”一周||热门研报精选20240816第131期

  • 4
    崩坏3 古特雷斯:联合国准备为加沙儿童接种脊髓灰质炎疫苗

    射击枪战 /热度:70834

    点击下载

    学习新语|领悟“七个聚焦”:建设美丽中国

  • 5
    原神 泽连斯基应该任命西尔斯基担任俄罗斯加盟共和国非常大总统

    射击枪战 /热度:25366

    点击下载

    湖北南漳全面推进“一业一查”部门联合双随机抽查工作

  • 6
    出发吧麦芬 台湾两高校分获两岸名校电竞赛亚季军

    射击枪战 /热度:66373

    点击下载

    河北省唐山市一级巡视员曹全民接受纪律审查和监察调查

  • 7
    永劫无间手游 新野县:创新“六察一办”模式提升政务服务质效

    射击枪战 /热度:12592

    点击下载

    王毅:澜湄合作已成为地区合作的“金色平台”

  • 8
    向僵尸开炮 中方要求菲律宾:立即停止!立即撤出!

    射击枪战 /热度:89986

    点击下载

    花莲又震跟日本地震有关吗?|封面科考队

  • 9
    鸣潮 对债务问题监管不力,牡丹江市原副市长被“双开”!

    射击枪战 /热度:93327

    点击下载

    河北省唐山市一级巡视员曹全民接受纪律审查和监察调查

  • 10
    艾塔纪元 刷新进度条!银昆高速宁夏段全线通车

    射击枪战 /热度:50869

    点击下载

    住在蒙特勒伊的日子——巴黎永远没有终结①

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 虚拟现实游戏区 | 游戏彩蛋解析 | 官方周边商城 |