当前位置:首页 > Deepseek最新资讯 > 正文内容

DeepSeek“开源周”第二天开源EP通信库

2个月前 (02-25)Deepseek最新资讯151

新京报贝壳财经讯(记者罗亦丹)北京时间2月25日,DeepSeek发布了其“开源周”第二天的成果:DeepEP,第一个用于MoE模型(混合专家模型)训练和推理的开源EP通信库。

据了解,EP为Expert Parallelism(专家并行),是一种在大规模分布式AI模型训练中使用的技术,能用于提升模型并行处理能力和训练效率。

DeepSeek介绍,DeepEP的特点包括:高效且优化的全对全(all-to-all)通信,节点内和节点间支持NVLink和RDMA,用于训练和推理预填充的高吞吐量内核,用于推理解码的低延迟内核,原生FP8调度支持,灵活的GPU资源控制,实现计算与通信重叠。

DeepSeek发布公告截图


“DeepSeek“开源周”第二天开源EP通信库” 的相关文章

Deepseek:开源破垄断,重塑AI产业新格局

Deepseek:开源破垄断,重塑AI产业新格局

一:DeepSeek在B端和C端市场火爆全球1、C端用户增速打破全球纪录2025年1月11日DeepSeekAPP发布,上线7天累计下载量突破1亿次,成为全球最快破亿的app,DeepSeek上线20...

deepseek王炸组合:微信+DeepSeek来了,网友:“王炸组合”!

deepseek王炸组合:微信+DeepSeek来了,网友:“王炸组合”!

deepseek继续扩大生态圈2月15日部分微信用户发现微信搜索已经上线“ai搜索”功能并接入deepseek-r1提供的“深度思考”服务2月16日,记者从腾讯集团确认,微信搜一搜在调用混元大模型丰富...

大连银行牵手DeepSeek开启金融智能化转型新篇章

大连银行牵手DeepSeek开启金融智能化转型新篇章

在数字化时代的浪潮下,DeepSeek大模型的迅速崛起正深刻改变着各个行业的发展格局,在银行业更是掀起了一场技术变革。日前,大连银行凭借多年来在人工智能领域的精耕细作和对大模型技术的沉淀积聚,依托开源...

神州数码郭为:DeepSeek最大贡献在于通过开源推动AI惠普

神州数码郭为:DeepSeek最大贡献在于通过开源推动AI惠普

人民财讯4月3日电,在近日举行的神州数码2024年度业绩说明会上,神州数码董事长郭为表示,DeepSeek最大的贡献和价值在于通过开源,推动了AI的普惠,AI的开源和普惠,给各行各业带来了非常大的机会...

探索跳跃式思维链:DeepSeek创造力垫底,Qwen系列接近人类顶尖水平

探索跳跃式思维链:DeepSeek创造力垫底,Qwen系列接近人类顶尖水平

在大语言模型 (LLM) 的研究中,与以 Chain-of-Thought 为代表的逻辑思维能力相比,LLM 中同等重要的 Leap-of-Thought 能力,也称为创造力,目前的讨论和分析仍然较少...

DeepSeek、Manus相继火了,产业政策怎样“抢时间”?

DeepSeek、Manus相继火了,产业政策怎样“抢时间”?

“经济主题记者会,快变成科技主题记者会了。”今年全国两会期间,证监会主席吴清开玩笑说,这两天,谁要是不说说DeepSeek,好像就不太时髦似的。话音未落,又一款国产AI产品Manus横空出世,迅速走红...