OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 官宣喜讯:诞下龙凤胎!

责任编辑: 段潇

发布时间: 2024-09-20 19:50:04

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

海淀“零碳办会”展示生态建设成果

2

各国网友热议印度的特色美食:吃一口就想进天堂

3

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

4

孙颖莎借王曼昱T恤

5

8月16日,据《日经亚洲》援引消息人士的话报道,孟加拉国可能从印度引渡前总理哈西

6

岸田文雄时代结束,日本新首相浮现,对华态度曝光,中方定调统一

7

汶川县2024年秋季征兵体检工作全面启动

8

孙杨参加明年全运会

9

滨州市委常委会召开会议

10

工电联整全力应“烤”护航中欧班列

11

游泳队水下喝桶装水

12

也门南部发生汽车炸弹爆炸事件已造成19人死亡

13

孙公司收到环保部门行政处罚莱茵生物:将重新报批环评文件

14

邯郸成语街道再更名

15

台湾花莲县海域地震暂无人员伤亡多地列车恢复正常行驶

16

普京向金正恩请求援助,检验两国条约成色的时候到了

17

海滩出现“巨型珍珠”遭哄抢,渔民大呼赶紧放下:这确实不是珍珠

18

上海市扫黑除恶斗争领导小组(扩大)会议召开,朱忠明出席并讲话

19

11岁郑好好奥运首秀

20

俄外交部召见意大利大使抗议该国记者非法进入库尔斯克

21

"台陆委会回应了!

22

衡阳市第一人民医院举行第七个中国医师节庆祝表彰大会

23

如何强化反垄断和反不正当竞争?市场监管总局答封面新闻

24

俄罗斯在库尔斯克乱了分寸,俄媒想起中俄曾有个约定

25

溯水城水韵,寻峥嵘岁月

26

菲尔普斯阴阳中国

27

讲好郑州故事,助力城市宣传郑报文旅体工作室再添荣誉

28

悉尼一公寓发生命案

29

法国一小型民用飞机坠海1人死亡

30

浙江省妇女儿童基金会衢江联络站揭牌成立

31

伊朗女孩与道德警察对峙警察以未戴头巾要逮捕女孩

32

"市场监管总局:今年以来全系统共查办案件31.5万件,罚没金额17亿元

33

慈善总会避雨被驱赶

34

对涉企违规收费零容忍!市场监管总局将出台《涉企收费违法违规行为处理办法》

35

无棣县润禹水务集团工会开展送清凉活动

36

国家市场监管总局:规范市场竞争维护公平竞争市场秩序

37

国防部:强化使命担当努力建设强大稳固的现代边海空防

38

中柬开建运河后,越南希望配合建设,关键时刻,苏林计划访问中国

39

印尼总统佐科发表任内最后一份国情咨文

40

联合国机构说超4万人在加沙地带死亡是“残酷的里程碑”

20

泰国总理的权力有多大?怎么就被法院解职了?##国际关注

20

云南两地发布一批任免职名单

20

不敢相信!狗狗偷走邻居家包裹,监控画面曝光

20

国乒男团冲五连冠

20

古特雷斯:联合国准备为加沙儿童接种脊髓灰质炎疫苗

20

莫迪要气坏了,强抢vivo51%股权失败,引发大批手机企业全面撤退

20

美剑指孟加拉湾,王毅紧急出访缅甸:绝不让邻居成下一个孟加拉国

20

国家市场"

20

印度孟买乡村#记录海外真实生活#印度#孟买#原创视频

热门攻略

1

印度女医生遭奸杀引愤慨

2

黄金跳水美元反弹

3

武汉打破德国日本垄断!造出全国第一台!

4

美宣布5亿美元对菲军援,称“助菲方应对中国海警”中方霸气回应

5

香港63平方米住宅惊艳变身三室两厅,四口之家生活不显拥挤,一探究竟!

6

戴上眼镜探鼓楼坐着巴士游中轴

7

烟台农商银行牟平区高陵支行开展送金融知识进乡村活动

8

法媒:里海,中国和欧洲未来的贸易枢纽?

9

烟台正式开启开办道路货运企业“一件事”服务新模式

10

拜登表示加沙停火谈判人员将在多哈停留

11

国防部:民进党当局购买武器是迎合美方的自我安慰

12

保安值夜班猝死

13

街头采访俄罗斯美女我的地理不太好……#街头采访#俄罗斯美女#中俄友谊#异国风情

14

国网公司系统首个绿色低碳超低能耗建筑竣工验收

15

印尼总统佐科发表任内最后一次国情咨文

16

全疆首个“数字政务门牌”在高新区(新市区)上线

17

《人民司法》2024年第19期目录

18

真相来了,伊朗不是怂了!

19

俄罗斯紧急应对乌军越境进攻,俄媒:乌军付出代价太高了

20

乌克兰突袭俄境背后的疯狂与无奈,泽连斯基战略失算或致自取灭亡

20

俄德州进入紧急状态

20

吴艳妮复活赛死亡组

20

中老缅泰外长举行非正式会晤

20

何忠友,已明确正部长级

20

“锡”引力丨在碧水蓝天中亮出生态答卷,无锡开启生态文明新篇章

20

婚姻登记取消户口簿是否会导致重婚、骗婚?民政部回应

20

俄方证实美西方参与了乌克兰入侵库尔斯克行动

20

3幼童罚跪马路中间

20

财联社8月17日电,智利埃斯孔迪达铜矿工会称,接受必和必拓提出的薪酬提议

20

俄罗斯滨海边疆区发生大规模停电事故

20

滁州经开区:安全联盟引领安全生产新风尚

20

"台湾长荣酒店的做法是在作死。

20

以色列外长:若伊朗发动袭击望英法支持以色列回击

20

百果园利润大跌

20

美国自动售货机开始售卖子弹,网友:还可以搞抓娃娃机抓手雷

20

戴上眼镜探鼓楼坐着巴士游中轴

20

谷爱凌首个全马完赛

20

宗馥莉再接手母亲名下公司

20

网恋投资被骗1900万

20

56岁地级市市长转任省史志办副主任,这个调任颇值得玩味

20

商务部:尽快实现制造业外资准入限制措施“清零”

20

三伏天炙烤,连仙人球都喊热,其他花卉如何?

20

民政部发布防范假冒老龄工作司工作人员身份进行诈骗的提示

20

全市动力装备产业链“链长”专题会议召开

20

绿动全球氢启未来第二届上海交通大学绿氢产融发展论坛成功举办

20

强化制约监督健全公正执法司法体制机制

20

国网宿州供电公司:惠民生解民忧加快“一户一表”改造

20

毒犯闯卡劫持人质,女武警仅用一根电线搞定毒犯

热门游戏

  • 1
    让“头回客”变“回头客”第二届西部氢能博览会在榆林举办

    射击枪战 /热度:86419

    点击下载

    多地买新房不限价

  • 2
    铸牢共同体中华一家亲丨宁夏:塞上江南写新篇

    射击枪战 /热度:19538

    点击下载

    洛杉矶12分钟

  • 3
    美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

    射击枪战 /热度:99274

    点击下载

    当地农资店惊喜:肥料杀虫剂超低价,质优又实惠!

  • 4
    崩坏3 好City丨成立石墨产业联盟、开展节庆活动……网友描绘鸡西未来蓝图

    射击枪战 /热度:11900

    点击下载

    市场监管总局:深化重点领域反垄断监管执法,2022年以来罚没金额超过25亿元

  • 5
    原神 美团无人机配送服务首度进京落地八达岭长城

    射击枪战 /热度:85061

    点击下载

    阳信县劳店镇开展防溺水家庭教育知识讲座

  • 6
    出发吧麦芬 多地提示慎入网约车

    射击枪战 /热度:19785

    点击下载

    巴黎残奥会中国体育代表团成立

  • 7
    永劫无间手游 俄:西方为乌攻打库尔斯克“支招”

    射击枪战 /热度:48716

    点击下载

    美国超一半的州7月失业率上升就业市场降温不能只怪飓风来袭

  • 8
    向僵尸开炮 九大部分、8个镇街、超48平方公里……大足石刻风景名胜区未来长这样

    射击枪战 /热度:89541

    点击下载

    新闻速递2024.8.17

  • 9
    鸣潮 早田希娜樊振东换pin

    射击枪战 /热度:91059

    点击下载

    捍卫自身合法权益,中国芯片公司对五角大楼提起诉讼

  • 10
    艾塔纪元 2024电力技术监督年会圆满召开:聚焦新质生产力,共绘电力技术监督新蓝图

    射击枪战 /热度:70491

    点击下载

    柯文哲走到“政治悬崖”,考验国民党的时候到了

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 热门排行 | 排行榜单 | 游戏文化探索 |