OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 日本岸田文雄因为黑金事件不再连任?不,还有更深层的原因

责任编辑: 廉培

发布时间: 2024-09-20 02:48:02

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

唐山市夏粮播种面积单产总产“三增长”

2

突然出现“跳水价”,澳洲航空公司回应,不会宣布作废

3

哈里斯拼了,为竞选总统命都不要了?新的税收方案猛攻美顶级富豪

4

辽宁持续推进网络市场“协同管网”

5

图说|7月全国发生电动自行车火灾1402起,警惕电池爆炸五个预兆

6

102岁老人跳伞庆生

7

俄乌在库尔斯克交战

8

特稿|“这是我想要记住的地方”——发展中国家议员在华感受中国文化传承与现代发展

9

中国提前6年实现了这个目标!

10

内江师范学院:文化永流传推普向未来

11

建德市创新“清单式”管理,打好危化品专项整治收官战

12

赖清德叫板大陆,话音刚落,10多国开会,所罗门群岛想踢走台当局

13

中非合作论坛峰会前夕,莱索托亲王在京访问母校

14

以军在约旦河西岸行动已造成12死26伤

15

欧阳丹东任宜宾市中级人民法院党组书记、院长提名人选

16

国家发展改革委印发《中新天津生态城建设国家绿色发展示范区实施方案(2024—2035年)》

17

黑色星期一只是开始

18

中柬运河刚动工,柬方便风波不断?中方震怒,汪文斌亲自发声谴责

19

哈马斯威胁在西岸地区恢复自杀式袭击

20

普京胜选后,中方拨通俄罗斯电话,中方想要的,俄方给的很干脆

21

5个核电项目获核准

22

菲中国城起火致伤亡

23

涉嫌严重违纪违法,中国船舶集团有限公司第七一五研究所原所长崔晓文接受审查调查

24

胡领高,主动交代问题

25

美国突然反应过来,轰-20的最终答案,和西方想的完全不一样?

26

徒手爬上光滑的大理石墙壁,这没有一定的功底还真做不到,太厉害

27

北京着力构建超大城市现代化治理体系

28

女军官提醒士兵搜查头巾|第3集完整版

29

王毅同美国总统国家安全事务助理举行战略沟通

30

这个“网红小区”为啥频频“出圈”?

31

中美在北京谈了,事关两国未来50年,新加坡学者给了美国个忠告

32

"歼-31将出口埃及?以色列愈加疯狂,埃及意识到需要中国战机应对

33

哈里斯与沃尔兹在美国佐治亚州继续拉票行程

34

易胖体质真实存在吗

35

一年吸引超4.7万名青年大学生奔赴上城何以成为“青年人才宜居宜业首选地”?

36

FBI公布试图枪杀特朗普枪手所使用步枪等照片

37

外交部:中美要实现和平共处,关键在于树立正确认知

38

拉夫罗夫喊话西方:别再玩火自焚,小心引燃第三大战的导火索!

39

家人们,东神道的一草一木都离不开你们的关心与支持

40

不用大陆出手了?微妙时刻,金门已派人赴京,洪秀柱公开喊话赖清德

20

不良电池产品起火致23人遇难,包括17名中国同胞,韩国华城电池厂责任人父子被批捕

20

《时刻V播》20240828:华容县团洲垸首批灾后安置房预计年底前竣工

20

台风“珊珊”已致日本九州地区41人受伤

20

就业援藏持续推进

20

财联社8月29日电,韩国总统尹锡悦29日在国政发布会上表示,将采取一切可能的方法来提高出生率

20

盐城4名干部任职前公示

20

重庆小孩被烫到翻车

20

新加坡前外长:俄乌冲突或使美国失霸主地位,中方应向美释放善意

20

中美谈了四场,沙利文对华作出保证,92页党纲公布,统一势不可挡

热门攻略

1

北京市级部门决算公开,全年压减非刚性非重点支出23.9亿元

2

殡仪馆花篮收13800

3

【强村富民行动】松桃:一株藤茶“回甘”一方

4

美媒:美国多数城市7月失业率同比上升劳动力市场放缓

5

“2024台商台青走晋来”热传两岸舆论场

6

"感觉印度又要薅羊毛!

7

国内牛养殖企业超17万,吉林最多!

8

人口老龄化加剧日本上半年超3万名独居者死于家中

9

内地奥运健儿代表团访港点燃港人爱国热情香港各界热切期盼

10

泽连斯基:俄乌冲突最终将以对话方式结束,但基辅必须占据主动地位

11

公安部:对“村霸”“乡霸”等农村黑恶势力坚持露头就打

12

长荣桂冠酒店道歉

13

李建平二审维持死刑

14

雄安建设者拍雄安|智慧巡检“上新”守护能源安全

15

哈里斯人气高涨,一月吸金达5.4亿,特朗普私下承认可能会输

16

中国好心援建,尼泊尔却想把欠款变成赠款,如此恶劣先河决不能开

17

哈马斯高级官员:呼吁加沙人道主义休战,以便开展儿童疫苗接种。#新闻启示录#最热点

18

8月29日刚刚传来的消息,波兰国防部长马里乌什"

19

以法治之光护青春远航河南郏县积极开展青少年法治教育

20

银行取5万3万是假

20

沙利文访华证明美国有所求,想交毕业答卷,但没有实质性结果

20

学习贯彻党的二十届三中全会精神中央宣讲团在澳门宣讲

20

【强村富民行动】碧江川硐街道:产业振兴硕果累累

20

沙利文访华,随行人员几乎都会说中文,原因是……

20

陈梦回应戴首饰参赛

20

以色列在约旦河行动升级,巴勒总统阿巴斯,中断对沙特访问回国

20

沙利文登机赴华前,中方率先提出3个要求,这一次,轮到美方接招

20

#中菲仙宾礁冲撞事件发生后,8连问!#中国驻菲律宾使馆批驳日方涉南海言论#中方敦促日本深刻反思历史和言行

20

本轮新冠年轻人易感

20

飞机疑失控迫降公路

20

特斯拉据悉曾要求加拿大降低中国产特斯拉关税

20

印度与越南高铁合作项目取得重大突破,资金分配细节披露

20

伊朗:真主党的袭击让以色列失去进攻和威慑力,我们会独立行动!

20

布林肯:中美必须合作,但美国应该当领导,否则全球无法应对挑战

20

刚刚发布!长沙最新人事任命!

20

我省积极培育建筑业新质生产力2024-08-2906:42:09 [山西新闻] 太原日报 贺娟芳2024-08-2906:42

20

近期的巴以冲突,基本上发生在加沙地带,而对同属于巴勒斯坦的约旦河西岸来说,则基本

20

李毓全被查

20

乌克兰总统泽连斯基对外公开表示,将向美国总统拜登以及两党"

20

"沙利文可能面临的结局,无非3个

20

砍院外香樟被罚3万

20

《时刻V播》20240828:华容县团洲垸首批灾后安置房预计年底前竣工

20

“国防部发布”抖音、快手账号正式上线,发言人感谢网友关注

20

又反转!最高38℃!未来两天安徽仍有降水

20

突然出现“跳水价”,澳洲航空公司回应,不会宣布作废

20

江苏丹徒烟草开展直播助农活动

20

扎实推进生态环境分区管控

20

8月28日,#西班牙数万人参加番茄大战互相投掷150吨西红柿

热门游戏

  • 1
    柬埔寨大运河拉土车翻车现场,急忙过来拯救,这技术不像中国司机

    射击枪战 /热度:90550

    点击下载

    新政策会落实到各大双一流

  • 2
    东方甄选回应

    射击枪战 /热度:39768

    点击下载

    台风来袭日本自民党多人推迟宣布参选党总裁

  • 3
    锻造公诉铁军:最高检聚焦调研公诉人能力建设

    射击枪战 /热度:65239

    点击下载

    台检方要求对郑文灿判刑12年

  • 4
    崩坏3 据美国媒体USNI的报道"

    射击枪战 /热度:82761

    点击下载

    海南7名干部被查,涉三亚市统战部原部长和教育局原局长

  • 5
    原神 岛内传出爆炸性消息,赖清德彻底慌了,大陆重磅声明,绝不姑息!

    射击枪战 /热度:41661

    点击下载

    中国常驻联合国副代表:中方愿继续为推动政治解决乌克兰危机作出不懈努力

  • 6
    出发吧麦芬 张昊唯报警

    射击枪战 /热度:62193

    点击下载

    #扬州市广陵区委书记张伟:以深化改革为高质量发展蓄势赋能

  • 7
    永劫无间手游 韩网红「同名泰一」衰遭牵扯 爆粗口澄清:性犯罪的不是我啦,X!

    射击枪战 /热度:75666

    点击下载

    国防部:中美正通过军事外交渠道就两军战区领导通话安排展开沟通

  • 8
    向僵尸开炮 漫评美国军工复合体:“遍地是金”

    射击枪战 /热度:96648

    点击下载

    美国和以色列,爆发激烈争吵

  • 9
    鸣潮 柯文哲会暂离民众党主席职务吗?谢立功坦言:要做好接班准备

    射击枪战 /热度:91393

    点击下载

    7岁男孩在中国过完暑假后回到美国,每晚崩溃大哭“我想回中国”

  • 10
    艾塔纪元 扎克伯格大爆料!Facebook曾被拜登政府“施压”,声称将在大选中保持中立,不再捐款

    射击枪战 /热度:69117

    点击下载

    泰国害怕挖克拉运河,提出百年一直没有"

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 每日游戏推荐 | 网红直播 | 玩家故事 |