当前位置:首页 > Deepseek最新资讯 > 正文内容

北京大学联合华为发布全栈开源 DeepSeek 推理方案

8个月前 (03-10)Deepseek最新资讯455

IT之家 3 月 10 日消息,据华为技术有限公司和北京大学高性能计算校级公共平台消息,2025 年 3 月 9 日,北京大学联合华为发布 DeepSeek 全栈开源推理方案。

据介绍,该方案基于北大自研 SCOW 算力平台系统、鹤思调度系统,并整合 DeepSeek、openEuler、MindSpore 与 vLLM / RAY 等社区开源组件,实现华为昇腾上的 DeepSeek 高效推理,并支持大规模算力集群训推一体化部署。所有开发者均可获取源码并根据需求二次开发,性能接近闭源方案。

目前,此方案在未名卓越一号集群部署成功。该集群由北京大学计算中心负责研制与运维管理,为北大鲲鹏昇腾科教创新卓越中心提供算力支持。IT之家查询获悉,作为国内首个基于高校自研基础软件的国产智算平台,该集群于 2024 年 11 月 18 日上线运行,首期集成 20 台昇腾 AI 服务器与 10 台鲲鹏通用服务器,AI 算力规模为 30.64PFlops(半精度)。

此次发布的 DeepSeek 推理方案依托全栈开源组件构建,在 openEuler 开源操作系统层面进行了深度优化;通过异构调度负载感知 MoE 冷热专家,从而更细粒度调度任务;通过异构融合来高效管理内存,减小系统内存碎片;利用毕昇编译器进一步优化,减少算子下发耗时,提升推理整体性能。

▲ 算力集群全栈开源推理方案架构图


“北京大学联合华为发布全栈开源 DeepSeek 推理方案” 的相关文章

腾讯、华为等接入DeepSeek每月亏损超4亿

腾讯、华为等接入DeepSeek每月亏损超4亿

钛媒体App 2月19日消息,近日,腾讯、百度、华为、阶跃星辰等多家AI大模型企业接入DeepSeek-R1模型,使得“DeepSeek朋友圈”企业超过100家。尽管DeepSeek R1模型具备训练...

DeepSeek大火,有人惊喜有人忧——突飞猛进的AI会取代人类创作吗?

DeepSeek大火,有人惊喜有人忧——突飞猛进的AI会取代人类创作吗?

春节期间,对大众来说最惊喜的有二:一个是《哪吒2》,另一个是DeepSeek。DeepSeek一问世就以其卓越的逻辑推理能力和多模态理解能力崭露头角,再次刷新了人们对AI的认知。尤其是DeepSeek...

都是AI,为什么就DeepSeek总喜欢“嗯”一下?

都是AI,为什么就DeepSeek总喜欢“嗯”一下?

最近,不少网友在使用DeepSeek时发现了一个细节——开启深度思考模式的DeepSeek,回答问题前总喜欢在开头“嗯”一下。经常使用不同AI的人会发现,在众多的中文语言大模型中,只有DeepSeek...

阿里千问与DeepSeek入选全球AI开源贡献榜前十

阿里千问与DeepSeek入选全球AI开源贡献榜前十

【阿里千问与DeepSeek入选全球AI开源贡献榜前十】财联社6月12日电,全球最大的AI开源社区Hugging Face发布了最新的AI开源贡献榜,中国团队表现亮眼,阿里通义千问跻身全球第五、中国第...

上海数据交易所接入DeepSeek大模型

上海数据交易所接入DeepSeek大模型

观点网讯:2月27日,上海数据交易所正式接入DeepSeek大模型,标志着国内首个大型语言模型在数据交易领域的应用落地。此次合作旨在构建多维数据交易知识体系的领域模型,提升数据交易服务智能化水平。据了...

电科数字:目前在持续跟进几十个关于DeepSeek的项目机会

电科数字:目前在持续跟进几十个关于DeepSeek的项目机会

电科数字近日在电话会议上表示,目前公司在持续跟进几十个关于DeepSeek的项目机会,根据客户类型可分为三类:一是技术交流客户,正在与公司进行相关技术沟通与探讨;二是正在部署的客户,需要公司在国产化适...