OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 2024年中国网络文明大会嘉宾谈:呼吁营造风清气正网络环境

责任编辑: 岳迪

发布时间: 2024-09-20 04:51:04

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

事关库尔斯克!美中情局“正与乌克兰接触”

2

意外触电致1死1轻伤

3

张雨霏郑钦文合照

4

实拍韩国飞机,低空从房顶飞过,噪音让韩国民众不寒而栗

5

公司党委副书记、总经理党的全会精神学习班暨集中轮训研讨发言材料

6

#三农#养殖#养鸡#多维牛磺酸#花满坡只用这一招让你的鸡成活率高达九成九

7

马达加斯加的“杀戮之王”,上树抓猴剖腹挖心,雄性交配还会排队

8

房屋养老金非房产税

9

应晓薇卷入京华城案喊“身正不怕影子斜”,国民党盼检调公正办案

10

让美国失望了?一觉醒来,反华联盟彻底“崩塌”!拜登着急也没用

11

来自德媒的消息称,泽连斯基非常不满印度成为俄罗斯原油最大买家"

12

洪都拉斯外长:美国不能将自身立场强加给另一个国家

13

外国女子在喜马拉雅山独自修行12年,一天一顿饭,每天只睡3小时

14

中荷人寿安徽分公司开展现场教学警示教育活动

15

F勒布伦谈球拍事件

16

学者出身的正部级“老虎”被判无期!

17

联合国人道主义车辆遭以军射击

18

法国开学季:法国政坛动荡波及教育,一些新举措法令暂时“冻结”了

19

2047年要成为发达国家的印度,16分钟就有一起强奸案

20

俄不倒,就怪罪中国?沙利文对华提出3个要求,中方一个都没答应

21

日本想让中国取消禁令,岸田文雄生吃福岛鱼

22

西北大学党委书记蒋林为全体新生讲授“开学第一课”

23

和平峰会“接盘侠”已就位?莫迪、泽连斯基互飙演技,认真就输了

24

轮到美国求中国!拜登终于接受现实,中国王牌在手,美火速派人来华!

25

96岁李嘉诚罕见现身

26

【理通三迤】追逐青春梦想勇赴时代之约

27

美国为什么那么护着以色列?文章写的令人振聋发聩,且一针见血!

28

外交部回应以色列在约旦河西岸开展军事行动:保持冷静克制

29

美国将宣布对华加税最终方案,美国工业界呼吁减轻对华关税

30

“重庆仲裁杯”第六届律师仲裁庭审大赛成功举办

31

蒙古找到老美当靠山又开始发癫#国际局势#蒙古#美国

32

苏州吴中工行——外籍客户点赞的高效金融服务站

33

以色列南部拉响防空警报

34

中央全面深化改革委员会第六次会议审议通过《中央和国家机关有关部门贯彻实施党的二十届三中全会〈决定〉重要改革举措分工方案》、《关于实施自由贸易试验区提升战略的意见》等文件

35

4个月1300多份材料,“材料里的形式主义”让写的人累、看的人苦

36

淄博市临淄区原二级巡视员董红光被查

37

中方代表:愿继续为推动政治解决乌克兰危机作出不懈努力

38

拉美多国对美国干涉内政行为表达不满中方回应

39

枕头拆开有上百只虫

40

印度古吉拉特邦洪水已造成约35人死亡

20

武威天祝:发展特色产业拓宽农民致富路

20

黑龙江省发布“二十条措施”落实食品安全主体责任

20

20

28天打赢一场仗!美国想不通,为啥强如美法都败了,中国却能赢?

20

陈梦回应戴首饰参赛

20

向西方释放重要信号,伊朗副总统辞职后突然重返岗位,真要谈判了

20

医保个人账户能给兄弟姐妹用吗?断缴后再缴多久才能享受报销待遇?

20

中柬运河刚动工,柬埔寨就屡被传噩耗?中方很生气!汪文斌发声

20

我国网民规模11亿人

热门攻略

1

俄罗斯永久禁止92名美国公民入境,人员名单中包括美国执法机构

2

中美连谈2天,王毅连提3个要求,这一次,沙利文对华作出承诺

3

"俄乌冲突传来结束冲突的最新消息

4

澳外长笑容满面,中澳这次谈得很彻底,中方想要的,澳方终于点头

5

新政策会落实到各大双一流

6

征战“死亡地带”

7

记者连线|沙利文今天下午举行记者会介绍访华成果

8

“第二个”菲律宾已冒头?专家直言太荒谬,外交部警告前所未有

9

中国发布丨《中国—非洲国家共建“一带一路”发展报告》2024版蓝皮书发布

10

猕猴闯村民家吃鸡蛋

11

"哈马斯是真打不动了?

12

重庆辟谣延迟开学

13

保护水资源做好水文章(美丽中国)

14

周光召逝世

15

全国首批!德州这个项目通过评估!

16

德国柏林IFA2024即将启航:百年辉煌共赴未来科技盛宴

17

湖南一施工路段挖出超三千斤石龟

18

奥巴马痛批特朗普

19

淮北市相山区税务局:服务新质生产力助企轻装快跑

20

青年活动成为城市新名片

20

陈水扁涉洗钱案获判免诉,遭台“高院”撤销发回更审

20

专治各种不服!中国火速出手,关键信息曝光,菲律宾求锤得锤!

20

上海一斤黄瓜6.3元

20

泰坠机最小游客12岁

20

以兵遭导弹误炸身亡

20

#C919国航南航双交付#C919今天交付给国航和南航,明日各自飞回北京首都和广

20

青少年持刀行为常态化,英国立法禁止“僵尸刀”流通

20

上海市人大常委会原主任董云虎受贿案一审宣判:无期徒刑

20

守护香江保卫祖国,驻港部队发布征兵宣传片,年轻人想参加解放军

20

以色列士兵在窗前干活,下秒被哈马斯狙击手锁定,一声枪响后当场倒地

20

外交部:奉劝美方尽早摒弃过时的“门罗主义”、干涉主义,停止霸凌胁迫、制裁封锁的单边行径

20

演员靳东,有新身份

20

栾留伟妻子拒收捐款

20

以色列升级!宣布对约旦河西岸复刻加沙模式,阿巴斯提前回国!

20

2024“一带一路”媒体合作论坛在成都举行李书磊出席并致辞

20

WTT大满贯参赛名单

20

铸牢中华民族共同体意识是新时代党的民族工作的“纲”所有工作要向此聚焦

20

新闻一则

20

给小侄女买手机,中国女婿结婚3年来,第一次得到俄罗斯家人认可

20

中石油原董事长王宜林被逮捕

20

绕过“豁免权” 检方提交新诉状起诉特朗普

20

“青春推普行,共筑振兴梦”永州职业技术学院开展“推普助力乡村振兴”全国大学生志愿服务活动

20

辟谣巫山车祸致3死

20

官方责令学校立即停用48人一间宿舍

20

今天这个造型如何,希望你们能提一点意见

20

美国“警告”太平洋岛国不要接受中国安全部队援助

20

有奶便是娘:莫迪突访乌克兰,签一合作气坏俄罗斯!印难成大国

20

开幕式上的这些画面,太动人!

热门游戏

  • 1
    中国女子在韩国街边的一拳,吓坏围观的韩国小哥#街头#散打

    射击枪战 /热度:80021

    点击下载

    每天只有一顿饭,能登地震受害者没等来救助,等来一群首相候选人

  • 2
    国家发改委:援非医疗队已诊治患者约2.3亿人次

    射击枪战 /热度:34101

    点击下载

    美媒爆料:法国3月就秘密通缉“电报”创始人杜罗夫兄弟

  • 3
    优步将欧洲地区司机数据传至美国比利时民众:不合理

    射击枪战 /热度:15526

    点击下载

    葫芦岛4村通信中断

  • 4
    崩坏3 前7个月江苏省对中亚五国进出口同比增长65%

    射击枪战 /热度:30270

    点击下载

    巴西对华皮下注射针头启动反倾销调查

  • 5
    原神 “两弹一星”精神——永不褪色的精神丰碑——庆祝中华人民共和国成立75周年传承弘扬“两弹一星”精神座谈会精彩图集

    射击枪战 /热度:97941

    点击下载

    三明、漳州最新人事消息

  • 6
    出发吧麦芬 贵州“大衍算力调度平台”创新成果发布

    射击枪战 /热度:32033

    点击下载

    50万大军压境,北约下场?普京派人来北京,请中方帮3件事

  • 7
    永劫无间手游 高加索港遭导弹袭击

    射击枪战 /热度:09201

    点击下载

    以色列南部拉响防空警报

  • 8
    向僵尸开炮 蕉下被曝裁员

    射击枪战 /热度:36111

    点击下载

    1.外蒙基本已经没救了,"

  • 9
    鸣潮 莫迪刚走,泽连斯基直接开骂,印度比中国更可恶,还提出一个请求

    射击枪战 /热度:93901

    点击下载

    看似静止的水流,实际却在匀速流动,这是什么原理?

  • 10
    艾塔纪元 以军在约旦河西岸行动已造成12死26伤

    射击枪战 /热度:47203

    点击下载

    黔南:“数”里行间的经济“脉动”

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 明星代言 | 游戏人物传记 | 竞技对战 |