OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 谷爱凌正面刚黑粉

责任编辑: 公峰

发布时间: 2024-09-20 03:16:53

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

解放军中缅边境演习

2

检票员持刀冲向游客

3

以绿色审判服务保障中国式现代化

4

2024“一带一路”媒体合作论坛在成都举行李书磊出席并致辞

5

胡领高,主动交代问题

6

辽宁省政府:追授李清学“辽宁省见义勇为英雄”称号

7

中英高层通话后,全欧对华电车加税,英国斯塔默:英国不跟

8

灼言·视评丨戳视频解码省委全会重要干货

9

海浪黄色警报!东海东部将出现4到7米的巨浪到狂浪区

10

不吃不喝30年也能活,被誉为“不死之虫”,水熊虫有多厉害

11

艾老师浅谈非洲兄弟#艾跃进

12

云南丽江市1名干部被开除党籍和公职

13

美国多州报告李斯特菌感染病例,已有8人死亡

14

1965年黄河巨龟事件,究竟是怎么一回事儿,这到底是真是假?

15

亲人接连丧命,她愤而退出民进党,“民众要的是一口干净空气”

16

只要自己不尴尬,尴尬的就是别人。梅德韦杰夫又一次在公开场合宣称,要对乌克兰实施核

17

上半年,滨州两条高铁建设进度全线领先

18

《时刻V播》20240828:华容县团洲垸首批灾后安置房预计年底前竣工

19

柯文哲会暂离民众党主席职务吗?谢立功坦言:要做好接班准备

20

俄全球通缉纳粹老兵

21

数据·明查|印度强奸案发生率究竟是多少?

22

乌的和平计划要美审核,拜登已经交接工作,斯基还抱着假肢不放!

23

原来公交车这个地方是可以掀开的!

24

职务犯罪逃亡:姜诚君被捕背后的反腐真相

25

河北将来最吃香的4个地区,地方优势尽显,在当地呼声最高

26

2024年1至7月,外籍人员来华观光(休闲)达到572.2万人次,会议(商务)达到380.3万人次,探亲访友172.3万人次,同比分别增长403%、81.5%和107.4%。ChinaTravel(图片来源:人民日报)

27

美舰将为菲补给船护航,若遭遇拦截就动手?055万吨大驱早已就位

28

陕西恒泰伟业建设工程有限责任公司以976,000元中标城川镇一二三产业融合发展示范园项目

29

蒋冰出任辽宁丹东市长,曾长期在江苏南京工作

30

运动对大脑6大好处

31

讲解服务应跟上“博物馆热”(人民时评)

32

这边美国总统国家安"

33

【巩固拓展脱贫攻坚成果同乡村振兴有效衔接·在希望的田野上】与牛为伴“犇”前路

34

餐厅吊顶坠落致1死

35

邹平宾馆邹平市供销社2024年上半年工作成绩单

36

日本,上半年超3.7万孤独者死于家中

37

哈梅内伊释放重磅信号,给新任政府开绿灯,伊核谈判或迎重大转折

38

多个井盖同时被炸飞

39

贝东丹内阁就是四不像!不让巴逸党派加入留隐患,军权没有别得瑟

40

带电作业接线忙,用电有保障

20

接种脊灰疫苗期间加沙将停火?以总理办公室否认

20

扬言复仇过去一个月,伊朗还会继续引而不发吗

20

哈里斯与特朗普最大的不同之处就是在笑容上了,与时刻保持严肃的特朗普不同,哈里斯不

20

为何我国对性交易零容忍?看看德国现状,就什么都明白了

20

南非总统表示愿同中方拓展各领域合作

20

美国意图更换泽连斯基,俄乌战局不利下替代者已确定

20

乌克兰铤而走险,踩踏俄罗斯划出的红线,冲突或将再次升级?

20

国防部:第十一届北京香山论坛参会人员数量和层级再创新高

20

保护古树留住乡愁浦北县扎实推进乡愁树选认示范县建设

热门攻略

1

2

国航、南航接收首架C919,国产大飞机开启多用户运营新阶段

3

政府为大龄男性牵线

4

加强食品管理筑牢安全防线——肥东县未来之光幼教集团总园参加合肥市秋季学期校园…

5

《时刻V播》20240828:华容县团洲垸首批灾后安置房预计年底前竣工

6

中非合作论坛|通讯:中国企业在非洲最北端修建“幸福桥”

7

特朗普又遭起诉,想不坐牢就必须赢得大选丨外媒观察

8

第三届中国长三角地区燃气行业职工劳动技能(燃气管道调压)创新立功竞赛举办

9

事情彻底闹大!俄首都遭突袭,乌一举惹怒普京,美突收重大噩耗

10

印度孟买20年间超5万人在铁路上丧生铁路公司:有乘客从拥挤的火车上摔下

11

国防部:第十一届北京香山论坛参会人员数量和层级再创新高

12

公交站旁发现男尸

13

久坐一般是指几小时

14

英国政府面临严峻财政压力酝酿对富人加税

15

库尔斯克乌军伤亡过半,瑟尔斯基承认失败,泽连斯基改口求和谈

16

林下跑山猪,“跑”出绿色经济加速度

17

房价上涨致推迟结婚

18

学习词典|人民当家作主制度体系

19

乌军心态被打崩了,南顿涅茨克大势已去,后勤枢纽被俄1天攻破

20

全会提出“五个地”的目标定位!

20

中非合作论坛峰会前夕,莱索托亲王在京访问母校

20

八旬老人被室友打死

20

男子在墨西哥集市,竟然看到会跳舞的豆子?

20

巴里坤县大风蓝色预警。(作者:翟佳惠

20

聚焦网络文明培育|如何让年轻人成为网络文明建设中坚力量?

20

俄罗斯:禁止92名美国公民入境!

20

为何广州放弃东进南拓西联北优战略?跟上海来比大局观差的太远!

20

以色列嘴上说停火,其实一直没停过,炸完加沙,又开始炸约旦"

20

红花岗举办“全民健身日(月)”系列活动

20

新房被生人住了4天

20

邱毅分析台湾人的特性,一针见血

20

被女装背刺改买男装

20

多方力量支援葫芦岛

20

国内首份!《未成年人网络保护年度报告2024》在成都发布

20

美国专家卡佛利表示,保卫台湾是高风险低回报的行为,美"

20

多地肺炎防控演练

20

7个太阳同框被拍到

20

"坐不住了!美国专家表态了!

20

英国财政压力严峻政府酝酿对富人加税

20

揭秘:普京为何不使用核武器?泽连斯基有话说!

20

雄安互联网产业园拔地而起

20

泽连斯基:普京太热爱生活了,不会扔核弹

20

积极探索养老志愿服务有效方式

20

美国为什么那么护着以色列?文章写的令人振聋发聩,且一针见血!

20

干得漂亮!重庆璧山区成立“砸锅卖铁”工作组。

20

外资企业“陕西行”举办

20

公安部:对“村霸”“乡霸”等农村黑恶势力坚持露头就打

20

俄军连炸48小时,15名西方教官被抬走,2架F16疑被摧毁,美国失声

热门游戏

  • 1
    每天只有一顿饭,能登地震受害者没等来救助,等来一群首相候选人

    射击枪战 /热度:22652

    点击下载

    比美剧还魔幻,实录巴西囚犯趁堵车出逃,并成功逃之夭夭

  • 2
    英聘请3只狗处理日本虎杖,花十几亿英镑都没解决,动物能解决?

    射击枪战 /热度:74411

    点击下载

    酝酿30年,中国砸160亿,一条绕过俄罗斯的大铁路,开工进入倒计时

  • 3
    被残奥会开幕式深深感动!四肢残缺也阻挡不了我们发出呐喊,致敬每一个不屈的灵魂!

    射击枪战 /热度:78587

    点击下载

    (乡村行·看振兴)江西都昌排粉“嗦”出村民“致富路”

  • 4
    崩坏3 粤语报道|巴黎残奥会开幕港队派出23人出战8项目

    射击枪战 /热度:45009

    点击下载

    约旦河西岸城市图勒凯尔姆传出爆炸声

  • 5
    原神 公安部挂牌督办!对裸聊敲诈、网络水军滋事等坚决遏制

    射击枪战 /热度:81599

    点击下载

    视频|安全第一乐享攀岩!湖南省体育局发布攀岩安全提示

  • 6
    出发吧麦芬 残奥运动员最小15岁

    射击枪战 /热度:80085

    点击下载

    亲人接连丧命,她愤而退出民进党,“民众要的是一口干净空气”

  • 7
    永劫无间手游 云南省南亚东南亚数字合作电子信息制造产业转移对接活动举办

    射击枪战 /热度:49237

    点击下载

    漫评美国军工复合体:“遍地是金”

  • 8
    向僵尸开炮 巴黎残奥会主火炬塔被点燃残奥圣火照亮巴黎

    射击枪战 /热度:28667

    点击下载

    庭院深深中的一方洞天(华夏博物之旅传统建筑)

  • 9
    鸣潮 台湾京华城风暴扩大柯文哲疑涉图利恐遭约谈

    射击枪战 /热度:67226

    点击下载

    学习贯彻党的二十届三中全会精神中央宣讲团在澳门宣讲

  • 10
    艾塔纪元 走哪里躺哪里,主打一个能“孤岛”绝不“站岛”。

    射击枪战 /热度:68546

    点击下载

    中美两国商务部拟于9月7日在天津举行工作会议,议题涉及这些方面

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏故事会 | 玩家攻略大赏 | 游戏行业人物访谈 |