DeepSeek宣布开源DeepGEMM!大气!这才是真正的open的Ai啊![

一起聊聊全球事 2025-02-26 12:31:21

DeepSeek宣布开源DeepGEMM!大气!这才是真正的open的Ai啊![赞][赞][赞]

2月26日讯,Deepseek于开源周第三天宣布开源DeepGEMM。DeepGEMM 是一个专为简洁高效的 FP8 通用矩阵乘法(GEMM)设计的库,具有细粒度缩放功能,如 DeepSeek-V3 中所提出。它支持普通和混合专家(MoE)分组的 GEMM。该库采用 CUDA 编写,在安装过程中无需编译,通过使用轻量级的即时编译(JIT)模块在运行时编译所有内核。FP8GEMM库,为V3/R1训练和推理提供支持。

0 阅读:34
一起聊聊全球事

一起聊聊全球事

感谢大家的关注