来源:极速直播
2025-01-28 16:47:26
“预训练”是AI大模型学习中的一种方法,指的是通过海量的数据,训练一个大模型。训练时需要大量的数据和算力支持,每次迭代可能耗资数百万至数亿美元。

官方技术论文披露,DeepSeek-V3在预训练阶段仅使用2048块GPU训练了2个月,且只花费557.6万美元。这个费用是什么概念?
据报道,GPT-4o的模型训练成本约为1亿美元。简单粗暴地说,这相当于DeepSeek-V3比同等性能的AI大模型,降了十几倍的成本。
早在2024年5月,深度求索发布DeepSeek-V2时,就曾因给模型的定价太过于便宜,开启了中国大模型的价格战,被称之为“AI界的拼多多”。

“相比于说它是‘拼多多’,它更像小米,贴近成本定价,并且自产自销。”马千里认为,训练成本比较低的原因,离不开深度求索团队自研的架构和算力,他们自身的算力储备可以与大厂比肩,并且更注重底层的模型。
“ChatGPT走的是大参数、大算力、大投入的路子,DeepSeek-V3的路径用了更多的巧思,依托数据与算法层面的优化创新,从而高效利用算力,实现较好的模型效果。”马千里说道。
相关新闻
Vampire:今天我们减少了很多小失误 减少中期失误葬送掉比赛
来源 : 极速直播2025-08-04 21:45:30
Cryin:BLG不一定回来了有前车之鉴,北川开始也一直赢
来源 : 极速直播2025-08-04 21:45:26
GALA:我们确实需要一些比赛去找到更好的状态 Wei比以前打的更好
来源 : 极速直播2025-08-04 21:45:22
FPX粉丝怒斥银河:顶级打野带队直冲次级联赛然后拍拍屁股自己去登峰
来源 : 极速直播2025-08-04 21:45:22
scout:非常感谢今天来现场支持的粉丝们 大家辛苦了!安全第一!
来源 : 极速直播2025-08-04 21:45:22
你在BLG、AL之后!拿到首胜后WE上单Cube赛后发文:我回来了
来源 : 极速直播2025-08-04 21:45:22
就在今天!WE让一追二击败FPX终结第三赛段五连败拿下首胜
来源 : 极速直播2025-08-04 21:45:19
wink:兄弟们 集美们 安全第一 谢谢大家对我们的支持
来源 : 极速直播2025-08-04 21:45:14
H4cker:本来希望调到明天下午三点,但某一方管理层不同意
来源 : 极速直播2025-08-04 21:45:14
XUN发文:极端天气下大家要注意安全!我们下场比赛再见!
来源 : 极速直播2025-08-04 21:45:14