OpenAI:现在只需 5~10 人即可从头重建 GPT-4,发展瓶颈已经从“算力”转变为“数据效率”

发布时间:2025-05-04 11:13:12 来源:互联网

感谢本站网友 往事2016 的线索投递!

本站 4 月 11 日消息,OpenAI 开发GPT-4 曾耗费了大量人力物力,而现在却只需 5~10 人团队即可从头走一遍这个流程。

OpenAI 首席执行官萨姆・奥尔特曼(Sam Altman)今日在公司内部播客中披露,得益于 GPT-4.5 的技术突破,重建 GPT-4 大模型所需团队规模已从数百人缩减至 5-10 人。

这一结论也获得了 GPT-4.5 预训练负责人亚历克斯・佩诺(Alex Paino)、数据效率研究员丹尼尔・塞尔萨姆(Daniel Selsam)等核心成员证实。

丹尼尔表示,“当得知某项技术已被实现,其复现难度就会大幅降低。我觉得,只要有可能,这就是一种巨大的作弊码。”

佩诺表示,GPT-4.5 的设计目标是比 2023 年 3 月发布的 GPT-4"智能 10 倍",他还补充道,"通过这种 GPT 预训练流程的优化,我们的规模也较之前拓展了 10 倍。"

此外,奥尔特曼还声称公司已突破 "算力制约" 瓶颈,而且他认为世界尚未真正理解这一转变。在此之前,各大科技公司已相继投入海量资金用于 AI 基础设施建设,其中微软、亚马逊、谷歌和 Meta 四家科技巨头 2024 年 AI 基础设施资本支出预计达 3200 亿美元(本站注:现汇率约合 2.34 万亿元人民币)。

OpenAI 认为,技术瓶颈已从算力转向数据效率领域(可能是指算力的边际效用递减,所以需要从算法方面寻求突破)。丹尼尔指出,当前 GPT 系列模型数据利用率存在 "洞察深度天然上限"。

"当算力持续扩张时,数据增长速度明显滞后,最终形成发展瓶颈。要想突破这一限制,需要进一步实现算法创新,从同等数据量中榨取更高价值。"

本周热门攻略

1
做家教被双胞胎轮流欺负,如何应对孩子的恶作剧和无理要求

做家教被双胞胎轮流欺负,如何应对孩子的恶作剧和无理要求

2025/03/27

2
《生化危机1》或将重制:配音演员疑似使眼色暗示?

《生化危机1》或将重制:配音演员疑似使眼色暗示?

2025/04/21

3
《准儿媳》在线观看完整版:一部引发家庭纷争与情感碰撞的剧集

《准儿媳》在线观看完整版:一部引发家庭纷争与情感碰撞的剧集

2025/03/27

4
[总攻]养成催眠系统:掌握催眠技能,开启心灵探索之旅

[总攻]养成催眠系统:掌握催眠技能,开启心灵探索之旅

2025/03/27

5
12岁女孩虎白一线天长相的独特魅力,网友热议她如何影响成长与性格!

12岁女孩虎白一线天长相的独特魅力,网友热议她如何影响成长与性格!

2025/03/29

6
《妻子5》免费完整版高清韩剧观看:解密剧情与观影体验

《妻子5》免费完整版高清韩剧观看:解密剧情与观影体验

2025/03/27

7
17c.14起槽:掌握关键技术,提升生产效率

17c.14起槽:掌握关键技术,提升生产效率

2025/03/27

8
如何选择适合夫妻二人看的小众影视剧:不仅增进感情还能提升共鸣

如何选择适合夫妻二人看的小众影视剧:不仅增进感情还能提升共鸣

2025/03/27

9
舒淇主演《灵与欲》免费在线观看:探索电影深层次的情感与欲望

舒淇主演《灵与欲》免费在线观看:探索电影深层次的情感与欲望

2025/03/23

10
侄女的开发日记:一部引人入胜的动漫作品全方位解析

侄女的开发日记:一部引人入胜的动漫作品全方位解析

2025/03/26