OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 俄罗斯法院再次延长4名音乐厅恐袭案嫌疑人羁押期限

责任编辑: 楚澈

发布时间: 2024-09-20 23:22:52

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

高德红外:公司将严格按照相关法律法规履行信息披露义务

2

1元每斤的西瓜不见了,长沙市民吐槽“西瓜快吃不起了”

3

苏丹外交部:快速支援部队袭击村庄造成85人死亡

4

咸宁市人大财经委召开会议准确分析发展形势奋力完成年度目标

5

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

6

地铁一女子骚扰大爷

7

俄罗斯媒体:乌克兰策划用“放射性弹头”袭击俄核废料储存设施

8

美国35万亿美债将暴雷,关键时刻,美高官访华,想找中方借钱

9

“80后”副市长王巍,被查

10

乡村新生活(图)

11

省人大常委会开展农业法贯彻实施情况执法检查

12

幼儿园改造成养老院

13

德约科维奇金满贯

14

曾因强奸少女入狱!荷兰运动员哭诉:我在奥运会受到前所未有侮辱

15

“以军在加沙的作战已基本结束”

16

唐山市原副市长曹全民被查

17

男子从6楼坠落后,刚好掉在了柱子上

18

第六届中华民族抗日战争史与抗战精神传承研讨会在云南举办

19

一小时11次连续抛烟头引燃楼下车辆

20

大熊猫彤彤死亡

21

哥伦比亚中部一商业区发生火灾多处商业场所被毁

22

皇马祝贺樊振东

23

中国驻南苏丹使馆提醒在南中国公民注意防范感染猴痘病毒

24

在山洪泥石流灾害中,四川黑水县一镇长因抢险救援失联

25

突发!61岁银行董事长郑志瑛遭遇不测,嫌疑人是前分行行长?

26

中国发展是全球南方国家的重要机遇(国际论坛·读懂中国·读懂中国式现代化)

27

印度神牛身价高达2200万,配一次种5万,每天都要喝威士忌

28

今年上半年烟台中欧班列开行69列,全年预计达到150列

29

欧美游泳队赛后发紫

30

加沙地带确认一例脊髓灰质炎病例

31

国台办:台方应严惩“2·14”恶性撞船事件责任人

32

婚姻登记取消户口簿会导致重婚、骗婚?民政部回应!

33

镜观·领航|巩固发展新时代生态文明建设成果

34

HPV疫苗降至奶茶钱

35

农行职工殴打夫妻

36

民间怪谈录:民间怪事来袭!小镇发生惊悚命案,恐怖氛围直接拉满

37

干部任职前公示

38

吃紫菜解馋吃进ICU

39

落实进一步全面深化改革的决策部署为中国式现代化提供强大动力和制度保障

40

以军再发撤离令要求加沙北部巴勒斯坦民众撤离

20

刘捷在杭州城西科创大走廊调研

20

经济日报金观平:“梯度有序”优化产业布局

20

"台陆委会回应了!

20

两岸江河融血脉海峡青年话发展

20

印度强奸案引爆30万人抗议,事态不断升级印度已发生零星暴乱

20

美国新屋开工:7月下滑6.8%需求脆弱

20

进一步全面深化改革必须坚持党的全面领导

20

一张“托底网”帮得准、托得稳

20

关于深化澜沧江-湄公河水资源合作的倡议(摘要)

热门攻略

1

早啊!新闻来了〔2024.08.17〕

2

喜报!青州市被确定为省级试点→

3

韩媒:文在寅夫妇银行账户因前女婿而受到韩国检方调查

4

民政部集中回应离婚冷静期、结婚无需户口簿等热点

5

贵阳:建立气象高质量发展联席会议制度

6

深圳盐田边检站全力护航迎开渔

7

大胆探索与稳扎稳打(人民论坛)

8

世界上最高的鸡居然长这样!?#有趣冷知识#探员樱酱

9

甘孜、凉山13个县市地灾黄色预警生效中

10

王巍,被查

11

国台办:台所谓撞船事件“调查结论”刻意推卸责任

12

美国共和党副总统候选人万斯所乘波音飞机出现紧急情况迫降

13

美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

14

外交部发言人林剑,甩出中美反兴奋剂测试相关数据,质问:公平吗?

15

北投能源集团鑫祥石油公司创建“节约型”加油站

16

河北大学附属医院召开优秀医师表彰大会

17

职员请假参加奥运

18

我们为什么要跟美国争世界第一?被逼的!#科技#美国#中国崛起#科技强国#全球博弈

19

无锡首台乡镇不动产自助综合终端在江阴徐霞客镇“上岗”

20

新华简讯|卡塔尔、美国和埃及称加沙停火谈判具有“建设性”

20

罗马诺:桑乔未来悬而未决,夏窗关闭前仍可能会发生一些事情

20

总投资约4亿元海峡两岸产业合作区(湖南)湘潭产业园首个重大项目开工

20

突发!巴黎奥运首例奖牌被回收事件诞生,美国紧急申诉,结果待定

20

2024年食品安全“你点鄂检”专题直播活动走进武当山

20

秦皇岛北戴河区扎实开展旅游旺季文化惠民活动

20

"他信之女当选新泰国总理,存在五个令人出乎意料之处!

20

也门南部发生汽车炸弹爆炸事件已造成19人死亡

20

既想当官又想发财!南昌市公安局原四级高级警长刘剑秋被“双开”

20

美国男子被父亲抱怨脚臭,暴怒开枪,不小心扣动了扳机

20

瑶海区安溪商会第一次会员代表大会胜利召开梁全财当选首任会长

20

俄乌和谈将长期暂停

20

张若昀抽烟偷感

20

马拉松奥运新纪录

20

超十国申办2036奥运

20

库尔斯克一队俄兵集体投降,排成一排摔倒后立马爬起来

20

台湾海峡的捕鱼权我们拿回来了,民进党只能干瞪眼!8月16日,根据岛内媒体报道,岛

20

澜湄清洁空气倡议联合声明(摘要)

20

埃尔多安政党的议员与库尔德议员在土耳其议会发生激烈斗殴

20

北溪事件“真相”流出,美国甩锅乌克兰,泽连斯基果断反击

20

无毛大猩猩?那些被拍到的无法解释的离奇画面!奇闻异事

20

闭幕式金色美猴王

20

利津河务局:采砂监管不松弦

20

15厘米多肉4年变3米

20

"海上论道”黄浦启航,“菁音讲坛”奏响宗教界青年新乐章

20

河北康保:融入京津冀协同发展力度足成果丰

20

“80后”副市长王巍,被查

20

福田粉丝探秘“城市野性居民”,共建万物和谐美丽家园

20

8月16日,普京召开紧急安全会议,要用“新技术”打败乌克兰。

热门游戏

  • 1
    法国乒乓男团获铜牌

    射击枪战 /热度:03645

    点击下载

    第九届剪纸艺术节·全国优秀剪纸艺术作品征集活动在蔚县启幕

  • 2
    贵阳市率先在全省实现企业上市合法合规信息核查“一件事”高效办理

    射击枪战 /热度:48562

    点击下载

    中央纪委网站:今日截至20时,5人被查,3人被处分

  • 3
    广岛核爆炸才过70年,为何人口反而突破了100万大关?

    射击枪战 /热度:54236

    点击下载

    以色列人在约旦实施大屠杀!

  • 4
    崩坏3 不老的“闽南红旗渠”:开山架渠百六里,水润山海五十年

    射击枪战 /热度:93306

    点击下载

    突发!张志杰遗体在国外火化,姑姑透露心酸事,印尼做法令人心寒

  • 5
    原神 【媒体关注】内蒙古日报|学习贯彻党的二十届三中全会精神自治区宣讲团走进自治区高级人民法院

    射击枪战 /热度:58093

    点击下载

    拜登表示加沙停火谈判人员将在多哈停留

  • 6
    出发吧麦芬 80后唐瑜任上被查

    射击枪战 /热度:53950

    点击下载

    澳门公布行政长官选举日程表

  • 7
    永劫无间手游 利比亚油田停产时间延长美国石油销售并未获得多大提振

    射击枪战 /热度:84118

    点击下载

    陕西:多地多部门精准施策打好抗旱“硬仗”

  • 8
    向僵尸开炮 日本男乒无缘决赛

    射击枪战 /热度:79470

    点击下载

    游客长城拍照砖松动慌张肉眼可见

  • 9
    鸣潮 当地时间8月16日,波兰总理图斯克表示,波兰"

    射击枪战 /热度:67563

    点击下载

    乌克兰突袭俄境背后的疯狂与无奈,泽连斯基战略失算或致自取灭亡

  • 10
    艾塔纪元 山西高院发布《环境资源审判白皮书》:五年守护显成效

    射击枪战 /热度:02165

    点击下载

    美国总统大选辩论将于9月10日在费城举行

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏插件推荐 | 独家爆料 | 音效音乐赏析 |