东方智慧AI 算力
AI算力 · 昇腾部署课件 00

昇腾 AI 部署课件体系:总纲(怎么教、怎么学、按什么顺序)

2026年10月04日

编制:观澜|日期:2026-10-04|级别:T3 框架级 方法:目标反推(先定"部署完成态"→ 反推需要什么零件和技能 → 再扩分支补细节) 素材来源:昇腾官方文档 MCP 实时抓取(48 个官方产品条目 / CANN 版本 / 官方案例库),无一条编造


〇、这套体系是什么(一句话)

把昇腾 AI 部署拆成一个个"零件"——每个零件都有:功能、依赖、操作步骤、验证方法、出问题时的查法。

借的是"零件手册"的认识论:一个零件对应一个功能,一个功能出问题对应一套查找方法。 对外不出现汽车相关的任何表述,只保留这套方法论本身。

与传统教程的区别:

传统教程 这套体系
按"章节"组织,顺序读完 按"零件"组织,可以跳着查
只讲"怎么做" 讲"怎么做" + "做坏了什么样" + "怎么查回来"
出错就卡住 每个零件配故障清单和排障路径
讲完就忘 每个零件有验收动作(能确认它是好的)

一、反推法第一步:先定义"部署完成态"

不问"学什么",先问"做成什么样算完成"。

部署成功的 5 个可验证现象(这 5 条全过 = 部署成功)

# 完成态判据 怎么验证
① 系统认得这张卡 执行 npu-smi info,能看到卡的型号、温度、显存
② Python 认得这张卡 执行 torch.npu.is_available() 返回 True
③ 算得动一个小模型 跑通一个最小样例,输出正确结果(不报错、不挂起)
④ 起得来一个服务 推理服务能在指定端口起来,能被 curl 调通
⑤ 出问题能定位到层 报错时能判断"是硬件层/驱动层/CANN层/框架层/服务层"哪一层的问题

⭐ 第 ⑤ 条是这套体系的灵魂。 大多数教程只教到 ④。但真到现场,④之后全是"报错了不知道找谁"—— 第 ⑤ 条才是把这套东西变成"可维修"的关键。


二、反推法第二步:从完成态反推"需要哪些零件"

昇腾部署的 5 个层级(零件分层)

┌─────────────────────────────────────────────────┐
│ L4 应用层    模型 / 权重 / 量化 / 数据集          │
├─────────────────────────────────────────────────┤
│ L3 服务层    推理服务:MindIE / vLLM / SGLang    │
├─────────────────────────────────────────────────┤
│ L2 框架层    TorchNPU / MindSpore / TensorFlow    │
├─────────────────────────────────────────────────┤
│ L1 基础软件  CANN(Toolkit + ops 包)+ 环境变量  │
├─────────────────────────────────────────────────┤
│ L0 硬件层    卡 / 服务器 / 驱动 / 固件           │
└─────────────────────────────────────────────────┘
        依赖方向:上层依赖下层,下层不对上层全废

官方原文确认的部署链条(来自官方文档检索):

「安装昇腾 NPU 驱动和固件 → 安装 CANN 软件(包含 Toolkit 和 ops 包) → 配置环境变量」

官方零件清单(48 个条目,摘自昇腾官方产品全景)

L0 硬件层 - 开发者套件:Atlas 200I DK A2 开发者套件|Atlas 200I A2 加速模块 - 推理卡/小站:A300I A2 推理卡|Atlas 300I Pro / 300I Duo 推理卡|Atlas 300V / 300V Pro 视频解析卡|Atlas 500 A2 智能小站 - 服务器:Atlas 800 推理服务器|Atlas 800I A2 推理服务器(含 2UP)|Atlas 500 Pro 智能边缘服务器 - 训练:Atlas 800 训练服务器|Atlas 800T A2 训练服务器 - 超节点/PoD:Atlas 800T A3 / 800I A3 超节点|Atlas 900 A3 SuperPoD|Atlas 900 A2 PoD - 软件包:HDK(驱动固件合集,含 --debug 变体)

L1 基础软件层 - CANN(核心,最新 9.2.0-beta.2,稳定 9.1.X;另有 9.0.X / 8.5.0) - MindStudio(开发工具链)

L2 框架层 - TorchNPU(PyTorch 场景)|TensorFlow 场景|MindSpore - 加速套件:MindSpeed(训练加速)|MindSDK|MindCluster(集群)|MindEdge(边缘)

L3 服务层(推理) - MindIE 推理开发|vLLM 推理开发|SGLang 推理开发

L4 应用层 / 开发场景 - 算子开发:Ascend C|CATLASS|Triton - 训练场景:大语言模型|多模态模型|强化学习|分布式训练加速库|自动驾驶模型|传统模型


三、每个零件的标准卡片模板(八段式)

每一节课 = 一张零件卡片,固定八段。这是体系的骨架。

段 内容 对应"零件手册"的哪一部分
1. 它是什么 一句话定义 零件名称
2. 它在哪一层 L0–L4,谁依赖它、它依赖谁 装配位置图
3. 它的功能 这个软件到底解决什么问题 功能说明
4. 不装/装错会怎样 症状描述(人话,不是报错码) 失效表现
5. 怎么装/怎么用 具体命令,可复制 装配步骤
6. 怎么确认它是好的 一条验证命令 + 期望输出 验收动作
7. 出问题怎么查 排障路径:先看什么、再看什么 故障查找方法
8. 常见报错清单 报错原文 + 官方对应案例链接 故障码表

第 7、8 段是这套体系的差异化所在,也是市面上教程最缺的。

举个实样(第 8 段的真实素材,来自官方故障案例库):

报错原文 官方对应案例
[ERROR]ERR_NO:0x0091;ERR_DES:username not permission for root case_92819(2,653 次查看)
check driver compatibility failed canncase_0022
Acl open device 0 failed, errorCode is 507033 topic_0000001633594041(10,585 次)
acl.rt.set_device failed ret=507033(容器内) topic_0000001522883364
EL0003,error code 507000(PyTorch set_device 失败) case_95414
Failed to load the libdcmi.so dynamic library toolboxcase_0054
msdebug failed to initialize. please install HDK with --debug atlasopdev_0006
新容器中 npu-smi / hccn_tool 提示设备被占用 topic_0000002238354198

⭐ 这张表说明了关键一点:官方自己就有完整的故障案例库,每一条都能查到"原因分析 + 解决措施"。 课件要做的不是编故障,而是把这些官方案例按"零件"重新组织,让学习者能按零件查到。


四、反推法第三步:技能树与学习顺序

从完成态倒推,学习顺序天然就定了(不是按软件复杂度排,按"卡在哪就学哪"排):

第 1 阶段:看得懂(不需要硬件)
   └─ 昇腾是什么 / 五层结构 / 每层各有什么软件 / 谁依赖谁
   └─ 出师标准:能画出五层图,说清"推理请求从应用到卡"走了哪几层

第 2 阶段:装得上(需要硬件或在线实验)
   └─ 装驱动固件 → 装 CANN → 配环境变量
   └─ 出师标准:npu-smi info 能看到卡

第 3 阶段:跑得通(需要硬件)
   └─ 装 TorchNPU → 验证 is_available() → 跑通最小样例
   └─ 出师标准:一个 Python 脚本能吃上 NPU

第 4 阶段:服务起得来(需要硬件)
   └─ 选一个推理框架(MindIE / vLLM / SGLang)→ 起服务 → 调通
   └─ 出师标准:curl 能拿到推理结果

第 5 阶段:坏了自己能查(这套体系的终点)
   └─ 按零件查故障 / 按报错定位层 / 用官方案例库反查
   └─ 出师标准:给一个报错,能说出"先查哪一层,再用什么命令确认"

第 6 阶段:讲得出去(你的终点)
   └─ 把上面五步组织成一节课
   └─ 出师标准:能完整讲一遍,别人能跟着做出来

对照你的昇腾学习路径:这套与已有的《昇腾学习路径_讲师版》是同一根线 —— 那份是"知识地图"(学什么),这套是"操作手册"(怎么下手、坏了怎么修)。两套配合用,不冲突。


五、课件编号体系

仿 A1B3C4 式双向查询(这套结构你现有的课件框架里已经在用,直接沿用):

字母 层 内容 预估课时
A L0 硬件与环境 卡型识别、硬件形态、驱动、固件、HDK 4–5
B L1 基础软件 CANN(Toolkit / ops 包)、环境变量、版本对应关系 4–5
C L2 框架 TorchNPU、MindSpore、框架适配原理 3–4
D L3 服务 MindIE、vLLM、SGLang、服务起停与调优 4–6
E 排障(贯穿) 按报错定位层、官方案例库用法、日志在哪 4–5
F 场景实战 单卡推理、多卡、模型迁移、开源模型部署上架(F6)、模型能力到业务落地(F7)、国产算力适配 5–7

编号规则:A1 = 硬件层的第 1 课;E3 = 排障层第 3 课。 双向关联:每个零件课(A/B/C/D)挂对应的故障(E),每个故障挂回相关零件 → 学习者两条路都能进:"我要学 X" 或 "我遇到 Y 报错"。


六、⚠️ 必须先解决的一件事:硬件

这是这套体系最大的现实约束,必须先说清。

阶段 需要有卡吗 怎么解决
第 1 阶段 看得懂 ❌ 不需要 直接做,随时可开工
第 2–4 阶段 装/跑/起服务 ✅ 需要真卡 ① 华为免费在线实验(hiascend.com/edu/experiment,覆盖 CANN / PyTorch / MindSpore / 开发者套件 / 大语言模型,按初/中/高级分类)② 开发者套件(Atlas 200I DK A2,门槛最低)
第 5 阶段 排障 ⚠️ 部分可以 官方案例库可以直接学(不需要卡就能看懂故障逻辑和排查思路)

我的判断(建议): 1. 第 1 阶段和第 5 阶段的课件,现在就能做 —— 不依赖硬件 ✓ 2. 第 2–4 阶段:先用华为免费在线实验踩一遍流程(免费、零成本、能截图做课件素材), 确认这条线走得通之后,再考虑要不要买开发者套件(Atlas 200I DK A2 是入门门槛最低的) 3. ⚠️ 不建议先买硬件再动手 —— 先验证流程,再投钱


七、第一篇课件选题(建议)

从"看得懂"里的第一课开始,而且它必须是最能立住体系感的一课。

建议选题:《一张图看懂:一个推理请求,在昇腾上走了哪几层》

为什么选它: - 不需要硬件 ✓ 今天就能做 - 它是整张地图——学完这一课,后面每个零件都能挂在这张图上 ✓ - 它把"零件手册"的思路一次性立起来:先有装配图,再有零件 ✓ - 它有现成的差异点:市面教程讲"怎么装",它讲"装的东西在哪、为什么在那"

八段式铺开(预览):

段 这一课里写什么
1 它是什么 一次推理请求的完整旅程
2 它在哪一层 横跨 L4→L0,用一张分层图串起来
3 它的功能 每层各干什么(用"谁负责什么"来讲,不堆术语)
4 不装会怎样 拿掉任一层,现象是什么(如:没驱动 → 卡根本认不到)
5 怎么做 只给"验证每层是否就位"的命令,不给安装步骤(安装在后续课)
6 怎么确认 每层一条命令 + 期望输出
7 出问题怎么查 按现象定位层:看不到卡→L0;看得见卡但 Python 认不到→L1/L2;能跑但服务起不来→L3
8 常见报错 上表那 8 条真实案例,按"属于哪一层"归位

八、后续排期(建议)

顺序 内容 依赖硬件 建议时机
1 总纲(本文件) ❌ ✅ 已完成
2 A0/首课:一张图看懂推理请求走哪几层 ❌ 下一步
3 E 排障课(先用官方案例库做 2–3 课) ❌ 与 2 并行
4 B 基础软件课(CANN 是什么、装在哪、环境变量) ⚠️ 半 在线实验验证后
5 A 硬件课(卡型、形态、怎么看卡) ⚠️ 半 同上
6 C/D 框架与服务课 ✅ 有卡或在线实验后
7 F 场景实战 ✅ 最后

附:本次素材来源(可复核)

素材 来源 真实性
部署链条(驱动固件→CANN→环境变量) 官方文档检索(TensorFlow 迁移 / 环境准备) ✅ 原文引用
CANN 版本(9.2.0-beta.2 最新 / 9.1.X 稳定) get_latest_version + list_versions ✅ 实时接口
48 个官方产品条目 list_products ✅ 实时接口
8 条故障案例(含编号与浏览量) search_troubleshooting 官方案例库 ✅ 实时接口,degraded=false
免费在线实验 hiascend.com/edu/experiment ✅ 官网

⚠️ 说明:本文所有产品名、版本号、报错原文均来自昇腾官方接口,未做任何推测性补充。 安装命令的逐条原文尚未取全(get_install_commands 需要逐级传参 versionId/hardwareId/操作系统等 ID), 将在做 B 层课件时逐条取回并标注出处。

选修 · 昇腾 AI 部署实操 本机读完 0/51
选修 C · 昇腾 AI 部署实操
从零把昇腾 AI 部署学一遍:先看懂分几层,再逐层装起来,最后出问题能自己定位到哪一层。不需要先有卡就能开始。
看完整学习路径(6 站 + 3 门选修) · 进度只存在你这台设备的浏览器里,不用登录
辽ICP备2026019944号-1