华为昇腾服务器部署deepseek的坑
- 软件开发
- 2025-08-30 08:33:03

拉取华为昇腾的mindie镜像时一定要注意配置好--platform参数,否则可能架构不兼容
docker pull --platform=arm64 swr -south-1.myhuaweicloud /ascendhub/mindie:1.0.0-300I-Duo-py311-openeuler24.03-lts
拉取完镜像,进行镜像打压缩包 docker save 3a7f38bed48b -o D:\mindiearm.tar
安装huggingface_hub pip install -U huggingface_hub 安装成功后,注意将huggingface-cli添加到环境变量
没有设置镜像地址的话,使用huggingface-cli下载大模型的话,大概率是失败的。需要设置个 环境变量HF_ENDPOINT,内容设置为 hf-mirror 。
比如下载模型参数时,接续下载:
huggingface-cli download --resume-download deepseek-ai/DeepSeek-R1-Distill-Qwen-32B --local-dir D:\deepseek-r1-32b-huggingface
华为昇腾服务器部署deepseek的坑由讯客互联软件开发栏目发布,感谢您对讯客互联的认可,以及对我们原创作品以及文章的青睐,非常欢迎各位朋友分享到个人网站或者朋友圈,但转载请说明文章出处“华为昇腾服务器部署deepseek的坑”
下一篇
排序与算法:选择排序