虎科技
业界资讯 手机产品 数码产品 移动互联 软件产品 智能汽车 生活家电 关于我们 热点资讯

DeepSeek系列模型登陆昇腾社区,轻松实现一键部署快速推理

2025-02-05来源:ITBEAR编辑:瑞雪

近日,华为官方公众号发布了一则重要消息,宣布DeepSeek系列模型的新进展。据悉,2月4日,DeepSeek-R1、DeepSeek-V3、DeepSeek-V2以及Janus-Pro已在昇腾社区正式上线。

此次上线的DeepSeek系列模型,为开发者们提供了极大的便利。用户只需一键操作,即可轻松获取这些模型,并在昇腾硬件平台上实现开箱即用,大大加速了推理部署的过程。

为了帮助开发者更好地使用这些模型,华为还提供了详细的模型调用方式。对于GPU用户,可以通过克隆GitHub上的DeepSeek-V3仓库,并执行相应的Python脚本来完成权重转换。而对于NPU用户,则可以通过访问特定的模型仓库,执行类似的转换操作。

在获取并转换好权重后,接下来的一步是加载镜像。开发者需要从昇腾社区下载适配DeepSeek-V3的镜像包,并使用docker命令进行加载。加载完成后,通过docker images命令可以确认镜像的名称与标签。

随后,开发者可以使用提供的MindIE镜像来启动容器。这个镜像已经预置了DeepSeek-V3模型的推理脚本。开发者只需将获取到的权重放置在模型代码的主目录下,并修改模型文件夹的属组和执行权限,即可启动容器进行推理。

在服务化测试阶段,开发者需要配置服务化环境变量,并修改服务化参数。其中,一个关键的配置是使能内存池扩展段功能,即虚拟内存特性。这一配置可以通过设置环境变量PYTORCH_NPU_ALLOC_CONF来实现。

此次DeepSeek系列模型的上线,无疑为开发者们提供了更为便捷、高效的模型使用方式。相信随着昇腾社区的不断完善和发展,将会有更多的优质模型和工具被推出,为人工智能领域的发展注入新的活力。

苹果iPhone Fold折叠屏前瞻:屏下摄像头无折痕,大电池或成最贵iPhone
【太平洋科技】11 月 27 日消息,苹果首款折叠屏 iPhone Fold 预计将于 2026 年秋季与 iPhone 18 Pro系列同步发布。相比三星 Z Fold 系列放弃屏下方案转向挖孔屏的设…

2025-11-30

三星出样24Gb GDDR7显存:最高36Gbps速率,助力显卡与AI计算新飞跃
如今大家对于显存产能的抢夺已经达到了前所未有的程度,厂商们也愿意在这个前所未有的年代中推出更加先进的显存产品来吸引用户购买。目前三星就表示已经顺利出样拥有36Gbps的GDDR7显存,从而为今后的显卡以及计算…

2025-11-30

AYANEO NEXT II全新旗舰Windows掌机亮相 配置强劲玩法多样引期待
IT之家 11 月 29 日消息,今日,AYANEO NEXT II 全新旗舰 Windows 掌机亮相,价格信息暂未公布。NEXT II的四颗自定义按键,导航键、等号键、LC 和 RC,支持功能自由设定,…

2025-11-30

华为测试麒麟9030宽屏竖折新机 性能升级或明年一季度亮相
【CNMO科技消息】11月28日,有数码博主爆料称,华为正在测试一款搭载麒麟9030芯片的全新宽屏比例竖向折叠屏手机。今年3月,华为发布了首款“阔”折叠屏手机Pura X,其内屏是一块16:10比例6.3英…

2025-11-29

华为Mate 80系列11月28日开售!麒麟9030 Pro芯片+6000mAh大电池,配置拉满
华为今年的旗舰机已登场,将会在11月28日全新开售,机型有所优化,全系列拥有四个版本,分别是华为Mate 80标准版本、Pro版本、Pro Max版本、RS版本,与去年同样,其中的RS版本为最高。屏幕类型升…

2025-11-29