OpenAI o1对国内大模型有何影响?姜大昕、杨植麟和朱军这样看

来源: 厦门市委常委游文昌已任市委政法委书记

责任编辑: 尉迟茹

发布时间: 2024-09-20 10:47:10

0

0

图片来源:界面图库

界面新闻记者 | 伍洋宇

界面新闻编辑 | 宋佳楠

当GPT-5屡次跳票引发质疑声后,OpenAI用o1及时托住了行业对大模型以及AGI(通用人工智能)的信心。

相较于更单维度注重参数堆积、不断推进Scaling Law的GPT系列大模型,o1改变了技术策略,加入了强化学习,以思维链等方式大幅提升了模型的推理能力,并且一定程度上缓解了该领域对于“数据墙”的焦虑。

面对OpenAI的这一动作,外界普遍好奇的是,它是否会影响中国大模型领域的技术发展走向??

9月19日,在2024云栖大会上,阶跃星辰创始人兼CEO姜大昕、月之暗面Kimi创始人杨植麟,以及生数科技首席科学家朱军,以“通往AGI的大模型发展之路”为主题进行了一场圆桌对话。?

姜大昕表示,AI发展正在经历关键的技术范式迭代。OpenAI的大模型o1探索出了通过强化学习让AI具备人类慢思考(可主动反思、纠错的复杂思考)能力的方式,接下来提升强化学习模型的泛化能力和加速推进多模态理解生成一体化是AI技术进一步突破的关键。

在他看来,o1是大模型首次同时具备人类大脑System 1(即快思考,直接给出答案)和System 2 (即慢思考)的能力,这是大模型开始具备归纳世界能力的关键一步。

除此以外,对于业界热议的AGI进程变缓的观点,姜大昕判断过去18个月以来,AGI的发展并没有减速,反而是在加速。“我们把AGI的实现路径划分为模拟世界、探索世界和归纳世界三个可并行的发展阶段,过去一年这三点都出现了突破性的技术进展,发展速度可以说是AI一日,人间一年。”

按照他的观点,除了o1在归纳世界上的进展,GPT-4o标志着多模融合的进步,是更好地对物理世界建模、彻底实现模拟世界的基础。而在探索世界上,特斯拉发布的完全自动驾驶系统FSD V12,为具身智能设备如何与大模型结合,从数字世界走向探索物理世界指明了技术方向。?

杨植麟则从纵向的智商提升和横向的模态拓展给出了自己的看法,同样认为AI整体处于加速发展的状态。他指出,o1的主要意义在于提升了AI的上限。在这一点上,Scaling Law是过去唯一有效的准则,但在数据挖掘遭遇瓶颈时,以Scaling Law为代表的原有范式已经遇到问题,而强化学习和大语言模型的结合,很大程度上解决了下一步Scaling Up的问题,“至少证明了它初步可行”。

杨植麟认为,这也会对产业格局以及创业公司产生影响。其中一个关键点是,此后训练算力和推理算力的比例会发生变化,这个变化的本质可能给创业公司带来新机会。一方面,如果存在算力门槛,创业公司可以进行算法的基础创新,以取得基础模型上的突破;另一方面,算力相对小的公司可以通过后训练的方式在部分领域达成某种效果,这里将会产生更多产品和技术机会。?

o1带给大模型的新思考是,当强化学习加入大模型成为新的技术范式,如何从细分领域逐步实现它的泛化能力?

朱军认为,o1的技术实现路径并没有披露这一点,但从科研的角度可以看到,这当中过程监督的数据变得十分重要。它和直接从结果监督的数据不一样,是要对思考过程的每一步进行标注,这种数据由于需要专业人士投入因而具备一定获取难度和高价值。?

另外,具体的技术实现上也存在一定困难。在此之前,走强化学习路线的DeepMind就有类似的泛化问题,例如从AlphaGo到AlphaFold再到AlphaGeometry,都是针对特定场景进行设计。

朱军强调,这背后的本质逻辑是,在强化学习中,面对更泛化和更开放的场景,Reward Model(奖励模型,用于评估智能体的行为表现,并指导其学习过程)变得难以定义,这也是o1背后的技术新范式在泛化过程中要解决的核心问题之一。

不过,通过结合已经比较强大的基座,这套新范式相比上一代AlphaGo迁移到其他领域里会更快,在更好的开放领域模拟器等技术加持下,他相信新范式的泛化进程会比之前更容易取得效果和提升。

只是这条新范式泛化之路的不确定性,及其对应的可探索空间和可能性,究竟对创业公司而言是好事还是坏事?

杨植麟直言,这是一个很好的机会,它等同于一个新的技术维度和技术变量。这个过程之中,除了如何泛化,还有很多基础的技术问题尚待解决,例如训练和推理两个层面要同时Scaling up,这当中还有诸多细节没有探索清楚,包括过程监督、幻觉对模型效果的影响等等。这背后存在的技术创新将形成一些突破机会。

姜大昕同样认为新范式的技术创新将带来新机会,但算力将是一个挑战,因为当创业公司追求一个通用性能够泛化的推理模型时,算力的需求一定是巨大的。

如果我们所要追求的目标就是AGI的话,你付出再多也还是要坚持下去。”姜大昕说。

新闻热榜

1

发挥特色优势坚持守正创新青海推动中藏医药事业高质量发展

2

今天,纪念于敏。他是“共和国勋章”获得者、“两弹一星”功勋奖章得主。于敏说:“国家需要一定全力以赴。缅怀,致敬!

3

国家级荣誉!西峡一公司技术中心主任陈守杰获授国务院政府特殊津贴!

4

吃山竹被蝎子咬伤

5

韩国泡菜形势反转,国人食用的竟多自中国

6

预计8月17日下午至18日北京市将出现明显降水

7

国防部:民进党当局购买武器是迎合美方的自我安慰

8

最后三个月美国大选剧本为何一变再变?

9

非法收受巨额财物,中山一村党委原书记苏池结被开除党籍

10

影院抵制徐峥新片

11

台湾青年走进阳江共放纸鸢话发展

12

交通安全“救”在身边

13

工人进地窖成植物人

14

巴拿马运河管理局再次提高运河通行能力

15

民政部有关司局负责人解读《婚姻登记条例(修订草案征求意见稿)》

16

国民党民代批台监察机构已沦为绿营“东厂”

17

2024年全球537人因猴痘死亡,世卫组织为猴痘拉响最高级别疫情警报!

18

最新消息!北溪爆炸案真凶找到了?德国发布通缉令,居然是这国人

19

澜沧江-湄公河合作第九次外长会在泰国举行

20

荷兰人口突破1800万,移民成主要增长动力

21

柯建铭缺席党团协商,韩国瑜点名冒出神奇比喻

22

茅台红缨子高粱种植面积累计推广超3000万亩

23

江苏部署实施29项“高效办成一件事”创新提出“敏捷服务”

24

美国人问:美国能轻易打败中国吗?英网友:再过一百年也不可能。

25

美国华人保姆遭残酷虐待,揭露跨国雇佣的黑暗一面

26

内塔尼亚胡警告伊朗

27

580余家媒体集中发布这一报告

28

狐狸小姐不好惹:来自超甜职场CP的心动狙击,甜到令人窒息

29

符攀婵副县长前往定城市场监督管理所开展智慧监管调研指导工作

30

泰国总理的权力有多大?怎么就被法院解职了?##国际关注

31

“洗钱大赦”启动,阿根廷央行放松美元转账限制

32

北京大学人民医院青岛医院成功举办交叉学科学术研讨会

33

泰国总理赛塔被免职

34

突发!61岁银行董事长郑志瑛遭遇不测,嫌疑人是前分行行长?

35

安徽望江举办2024年智慧农机操作手培训活动

36

何忠友,已明确正部长级

37

多家台媒报道,"

38

全红婵戴五环眼镜

39

国台办:台方应严惩“2·14”恶性撞船事件责任人

40

三中全会《决定》名词卡片天天学:科技伦理

20

法国一小型民用飞机坠海1人死亡

20

我的非洲点滴生活

20

海南“村VA”|冠军争夺战即将开打!最新赛程表来了→

20

市委政法委、市中级人民法院联合举办“政法护航法治助商”主题开放日活动

20

博茨瓦纳放假庆首金

20

乌克兰袭击俄罗斯本土五个万万没想到

20

市委书记、市长、组织部长,这届九江市委常委班子已3人落马

20

博罗综合高级中学举行2025届高考备考三百天誓师大会

20

种地养土,种菜施肥:农业之道,事半功倍!

热门攻略

1

“台独”末日来了?这次不玩虚的,国台办果断出招,连拜登都没想到

2

北京市委常委会召开会议,研究做好中轴线申遗保护后续工作等事项

3

菲律宾海警船在仙宾礁潟湖非法滞留,外交部回应

4

河北唐山又一厅官落马:曾任副市长的曹全民通报被查

5

广东新冠增加1万例

6

台媒:台湾民众党“一人政党”的定位,应该趁机彻底改变了

7

银龙驰骋,乡村振兴美丽新画卷徐徐铺展

8

美国大选关键时刻,英媒曝光拜登政绩,“明星工程”无限期停摆

9

陈章杰任湖南省政府副秘书长

10

尼日利亚中部至少20名大学生遭绑架

11

连续3年全省前列!咸宁持续加大长江大保护工作力度

12

腊戌城已经连续一周多没有枪声了!同盟军对腊戌的"

13

已致517人死亡!海关总署紧急公告

14

存款率下降钱放哪好

15

金牌原材料900美元

16

老挝阿胜为何吊着阿拉的胃口呢?阿拉为何委屈求全要复合呢?

17

香港特区政府律政司首办大湾区调解员培训课程

18

河北省唐山市一级巡视员曹全民接受纪律审查和监察调查

19

卡塔尔首相与约旦副首相通电话讨论加沙停火谈判进展

20

“认领一亩地”将“共享农业”理念带入市民生活

20

日本

20

要挟患儿母亲陪睡

20

河南省安阳市殷都区曲沟镇党委书记李爱文被查

20

大转变!乌军攻入俄罗斯的第七天,美国才意识到:有三个没想到

20

「地质灾害预警」8月17日化隆回族自治县自然资源局与化隆回族自治县气象局联合发布地质灾害气象风险橙色预警

20

静思有我讲述-美国怎么解读中国?

20

天津港集团主要领导接待浙江省海港集团客人

20

如皋市丁堰镇红桥村:党建领航促进生态建设焕新颜

20

讲好郑州故事,助力城市宣传郑报文旅体工作室再添荣誉

20

根本不用大陆出手?赖清德先收到致命噩耗,最后“底牌”也没用了

20

房山区打造“劳调对接”解纷新模式构建劳动关系基层治理新格局

20

他信家族在泰国政"

20

溯水城水韵,寻峥嵘岁月

20

世界上最高的鸡居然长这样!?#有趣冷知识#探员樱酱

20

填海造陆,日本前人栽树后人乘凉

20

制度护航生态:美丽中国建设加快推进

20

巴基斯坦卫生部门表示,猴痘病毒在巴基斯坦被证实

20

台湾发生6.1级地震多地震感强烈威力相当于0.18颗原子弹

20

突发!瑞典首都确诊非洲以外首例猴痘变种病例

20

巴基斯坦卫生部门表示,猴痘病毒在巴基斯坦被证实(出现)

20

武大靖为樊振东加油

20

王自如疑似从格力离职

20

阿比纳德尔宣誓就任多米尼加总统

20

俄乌激战库尔斯克州

20

俄法举刀疯狂互捅-奥运禁赛算什么-俄在非洲断法国财路

20

巴拿马运河管理局再次提高运河通行能力

20

市场监管总局:对涉企乱收费必须零容忍,已督促退还违规收费3.93亿元

20

以色列高官可能遭暗杀

热门游戏

  • 1
    美国特勤局神秘调动,特朗普安保阵容大换血,防弹玻璃屏障加持

    射击枪战 /热度:64420

    点击下载

    产品生态双管齐下银河麒麟蓬勃发展

  • 2
    国资委原秘书长彭华岗:从五方面打造现代新国企,引领社会主义市场经济发展

    射击枪战 /热度:83634

    点击下载

    衡阳市第一人民医院召开2024年度科研培训会议

  • 3
    国家命脉交给中国!援建柬埔寨运河项目开工,让其能“自主呼吸”

    射击枪战 /热度:75624

    点击下载

    海军“和平方舟”号医院船结束访问莫桑比克前往南非

  • 4
    崩坏3 #台湾地震福建人又被地震摇醒了#有吗?我没感觉[笑cry]

    射击枪战 /热度:34495

    点击下载

    澜湄合作框架下加强打击跨境犯罪合作的联合声明(摘要)

  • 5
    原神 北京大学人民医院青岛医院成功举办交叉学科学术研讨会

    射击枪战 /热度:54652

    点击下载

    巴西女乒有独臂选手

  • 6
    出发吧麦芬 澳门公布行政长官选举日程表

    射击枪战 /热度:41043

    点击下载

    最新消息:伊朗报复以色列的剧本遭曝光!复仇计划让人恐惧!

  • 7
    永劫无间手游 也门南部发生汽车炸弹爆炸事件,已造成19人死亡

    射击枪战 /热度:60962

    点击下载

    国家消防救援局党委强调聚焦服务大局展现担当作为以实际行动贯彻落实党的二十届三中全会精神

  • 8
    向僵尸开炮 以外长声称:“希望与英法共同打击伊朗”

    射击枪战 /热度:48295

    点击下载

    美国共和党副总统候选人万斯所乘飞机出现紧急情况迫降

  • 9
    鸣潮 江西省市场监管局局长谢来发被查

    射击枪战 /热度:33856

    点击下载

    花莲又震跟日本地震有关吗?|封面科考队

  • 10
    艾塔纪元 黑龙江省牡丹江市政府原副市长齐忠彦被“双开”

    射击枪战 /热度:84346

    点击下载

    内蒙古打造稳定的生态碳汇供给基地

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏主题曲演唱会 | 虚拟世界漫游 | 策略游戏攻略 |