当前位置:首页 > Deepseek最新资讯 > 正文内容

北京大学联合华为发布全栈开源 DeepSeek 推理方案

IT之家 3 月 10 日消息,据华为技术有限公司和北京大学高性能计算校级公共平台消息,2025 年 3 月 9 日,北京大学联合华为发布 DeepSeek 全栈开源推理方案。

据介绍,该方案基于北大自研 SCOW 算力平台系统、鹤思调度系统,并整合 DeepSeek、openEuler、MindSpore 与 vLLM / RAY 等社区开源组件,实现华为昇腾上的 DeepSeek 高效推理,并支持大规模算力集群训推一体化部署。所有开发者均可获取源码并根据需求二次开发,性能接近闭源方案。

目前,此方案在未名卓越一号集群部署成功。该集群由北京大学计算中心负责研制与运维管理,为北大鲲鹏昇腾科教创新卓越中心提供算力支持。IT之家查询获悉,作为国内首个基于高校自研基础软件的国产智算平台,该集群于 2024 年 11 月 18 日上线运行,首期集成 20 台昇腾 AI 服务器与 10 台鲲鹏通用服务器,AI 算力规模为 30.64PFlops(半精度)。

此次发布的 DeepSeek 推理方案依托全栈开源组件构建,在 openEuler 开源操作系统层面进行了深度优化;通过异构调度负载感知 MoE 冷热专家,从而更细粒度调度任务;通过异构融合来高效管理内存,减小系统内存碎片;利用毕昇编译器进一步优化,减少算子下发耗时,提升推理整体性能。

▲ 算力集群全栈开源推理方案架构图


“北京大学联合华为发布全栈开源 DeepSeek 推理方案” 的相关文章

赋能千行百业!DeepSeek落地再提速

赋能千行百业!DeepSeek落地再提速

今年伊始,来自中国的AI大模型DeepSeek凭借好用、开源、免费三大特点火爆全球。AI大模型是指使用大规模数据和强大的计算能力训练出的人工智能模型,这些模型通常具有高度的准确性和泛化能力,可应用于自...

用DeepSeek做图的4种方法,做小红书图文、海报、日报太快了,不服不行!1分钟教会,90%的人还不知道!(附保姆级教程)

用DeepSeek做图的4种方法,做小红书图文、海报、日报太快了,不服不行!1分钟教会,90%的人还不知道!(附保姆级教程)

DeepSeek 虽然只能生成文本,但 DeepSeek 和其他工具结合,却可以实现做图表、做 PPT、做图、做视频等各种日常实用功能。之前分享了用 DeepSeek 做图表和 PPT 的教程:用 D...

马儿主动到派出所“求助”,武汉民警用DeepSeek助力其“回家”

马儿主动到派出所“求助”,武汉民警用DeepSeek助力其“回家”

明亮的路灯下,在武汉市公安局轨道交通管理分局汉新派出所门口,突然出现4匹高头大马在溜达撒欢。2月27日晚上9时许,汉新派出所的民警辅警发现后,使用Deepseek搜索出几条附近马场的信息,很快联系上马...

关于DeepSeek V3/R1 Decoding吞吐极限的估计

关于DeepSeek V3/R1 Decoding吞吐极限的估计

经历了一周DeepSeek的打脸活动后,周六 DeepSeek终于开大放出来了自身的推理系统水平,DeepSeek:DeepSeek-V3 / R1 推理系统概览 。在这个结论放出来之前,没...

AI助教上岗啦!多所高校接入DeepSeek

AI助教上岗啦!多所高校接入DeepSeek

今年伊始,来自中国的开源AI模型DeepSeek火爆全球。这段时间,就有不少高校引入了“DeepSeek”,不仅实现了24小时答疑解惑、精准回应校园生活诉求,还大幅提升了老师的办公科研效率,智慧教学与...

最近刷屏的Manus是什么?它跟DeepSeek有啥区别?能做些啥?

最近刷屏的Manus是什么?它跟DeepSeek有啥区别?能做些啥?

最近,Manus火出圈了。它是全球首款具备通用能力的AI智能体。很多朋友看到AI、AI智能体词都绕晕了,相比于过年时期很火的DeepSeek,它到底有啥区别呢?一、什么是Manus?Manus ,是由...