1. 结论摘要
V4 把长上下文 attention 的 KV cache 压下去,但 MoE 每层仍需要高频 Dispatch / Combine,瓶颈从“纯 KV 容量”转向“稀疏、短包、低时延、可重叠的 All‑to‑All”。
NoC 不是只搬矩阵 tile。它要同时承受 HBM/DDR 权重流、KV 随机 gather、网络 RDMA 注入、专家输出 reduce 和 host 调度,且这些流在 fused kernel 下并发出现。
对于 V4‑Pro,每个 token‑expert 对约需 3h bytes 通信、6h·dff FLOPs;官方给出的可隐藏条件等价为 6,144 FLOPs/Byte。超过平衡点后,继续堆带宽收益递减,低时延与原语更重要。
| 瓶颈优先级 | 位置 | 为什么重要 | 典型症状 |
|---|---|---|---|
| P0 | MoE EP Dispatch / Combine | V4‑Pro 61 层、每层 6 个 routed experts;小 batch decode 时消息短、专家负载不均,带宽与微秒级延迟都敏感。 | TPOT 抖动、GPU/NPU 利用率被网络尾部拖低、hot expert 拥塞。 |
| P0 | HBM/DDR 权重与 KV 访问 | 单专家 FP4 权重仍是几十 MB 级;低 batch 下每专家 GEMM 算术强度不足,容易从算力瓶颈退化成内存带宽瓶颈。 | 算力峰值很高但 decode TPS 不随 TOPS 线性增长。 |
| P1 | Heterogeneous KV cache 管理 | CSA/HCA/SWA 的 KV entry 尺寸和更新策略不同,PagedAttention 类统一分页假设被打破。 | cache 碎片、随机读、cache-line 对齐损失、长上下文抖动。 |
| P1 | Scale‑up / Scale‑out 边界 | 跨节点专家路由需要在 NVLink/自研 Scale‑up 与 IB/RoCE/以太之间转发,软件同步、RDMA completion、out-of-order 处理会放大延迟。 | 同机房平均带宽够,但 P95/P99 不稳。 |
| P2 | Host / Runtime 调度 | continuous batching、prefix cache、prefill/decode disaggregation 与 MoE 路由需要毫秒级甚至更细粒度决策。 | 吞吐和时延目标互相牵制,服务商很难同时满载与低延迟。 |
2. DeepSeek‑V4 参考参数与推理芯片假设
公开资料没有披露 DeepSeek‑V4 的真实生产集群切分方式、每颗芯片片上 SRAM/NoC 规格、Ascend 950PR 的完整互联参数。因此本报告把“官方模型参数 + 公开论文中的通信公式 + V3 硬件经验”作为估算基准,所有数值均用于架构研判,不视为 DeepSeek 线上部署配置。
| 项目 | DeepSeek‑V4‑Pro | DeepSeek‑V4‑Flash | 对总线的含义 |
|---|---|---|---|
| 总参数 / 激活参数 | 1.6T / 49B active | 284B / 13B active | Pro 权重容量必须跨芯片分片;Flash 更容易单节点或小 EP group 部署。 |
| 层数 / hidden size | 61 / 7168 | 43 / 4096 | hidden size 直接决定 MoE dispatch/combine payload 与 NoC 激活搬运。 |
| MoE experts | 1 shared + 384 routed/layer | 1 shared + 256 routed/layer | 专家数越多,batch 被分散后每专家 tokens 越少,低 batch decode 越容易 memory/network bound。 |
| 每 token 激活 routed experts | 6 | 6 | 每层至少 6 路专家数据流,产生高频 All‑to‑All。 |
| 专家中间维度 dff | 3072 | 2048 | 决定每 token‑expert 计算量和权重 tile 规模。 |
| Attention | CSA m=4, top‑k=1024; HCA m′=128; SWA window=128 | CSA m=4, top‑k=512; HCA m′=128; SWA window=128 | KV cache 不再是规则、同尺寸、纯连续 append/read,NoC/DDR 需要支持压缩块、稀疏索引和局部窗口并存。 |
| 上下文 / 最大输出 | 1M / 384K | 1M / 384K | 1M 上下文让 KV 容量、prefix cache、SSD/host DDR 分层成为服务商必需能力。 |
| 官方 API 并发上限 | 500 | 2500 | 可以作为线上资源紧张程度与服务分层的外部信号;Pro 更受高端算力约束。 |
权重容量的数量级
| 模型 | 全 FP4 | 全 FP8 | 全 BF16 |
|---|---|---|---|
| V4‑Pro 1.6T | ≈ 0.8 TB | ≈ 1.6 TB | ≈ 3.2 TB |
| V4‑Flash 284B | ≈ 142 GB | ≈ 284 GB | ≈ 568 GB |
V4 技术报告提到 routed expert parameters 使用 FP4;其他模块精度、布局和 checkpoint shard 方式会改变真实容量。
KV cache 的数量级
V4 报告称:在 1M context 下,V4‑Pro 单 token inference FLOPs 约为 V3.2 的 27%,KV cache 约为 V3.2 的 10%;V4‑Flash 分别约为 10% 和 7%。如果以 V3 公开的 70.272 KB/token KV cache 量级作参照,则 1M token 请求的 V4‑Pro KV 约为数 GB 级,而不是数十 GB 级。
这并不代表 HBM 压力消失:并发 100 个长上下文请求依然会让 KV 占用进入数百 GB 级,并触发 host DDR / CXL / SSD 分层。
3. 推理软件周期:逐 token、逐专家的数据流
下面按一次在线推理请求的真实数据搬运顺序拆解。关键点是:prefill 与 decode 只是外层阶段;内部每层都包含 attention cache 访问、MoE route、All‑to‑All、专家 GEMM、combine、残差与下一层激活转发。
| 软件子阶段 | 主要数据 | 片内 NoC 要求 | HBM/DDR/SSD 要求 | 片外 Scale‑up/Scale‑out 要求 |
|---|---|---|---|---|
| 入队、prefix cache 查询 | request metadata、prefix hash、cache block index | 低 | 命中后需要从 disk/host/HBM 恢复 KV;cache miss 则进入完整 prefill。 | 多副本 cache 一致性、cache-aware routing;否则同一 prefix 被重复 prefill。 |
| Prefill attention | 长 prompt 的 Q/KV、CSA/HCA 压缩块、SWA 状态 | 需要大吞吐 DMA、cache-line 对齐写入、压缩块生成流水 | 顺序写 KV,对 HBM 容量与写带宽敏感;长 prefix 可落盘。 | 若 attention tensor parallel,需 all‑reduce/reduce‑scatter;prefill 可用大 batch 掩盖网络。 |
| Decode attention | 当前 token Q、历史压缩 KV、CSA indexer top‑k、HCA dense compressed KV、SWA window | 随机 gather、小块读取、bank conflict 与 TLB 压力上升 | 从连续带宽型访问变成稀疏/压缩/窗口混合访问;cache miss 会放大时延。 | attention 分片时存在跨芯片 KV/partial logits 汇聚;长上下文下更依赖局部性。 |
| Router / expert selection | hidden → gate scores → top‑6 expert ids | 少量计算,但输出会驱动后续数据重排 | gate 权重很小;主要是元数据和排序/分桶 buffer。 | 需要快速把 tokens 按 expert、rank、node 分桶;小 batch 下元数据开销不能忽略。 |
| MoE Dispatch | 每 token hidden 向 top‑6 experts 发送;Pro hidden=7168 | 网络 DMA 注入 HBM 时与 GEMM 读写抢 NoC;需要 QoS 和多 DMA engine。 | RDMA buffer、专家输入 staging;最好避免 CPU copy。 | 核心瓶颈。短包多、incast/outcast、hot expert、跨节点转发都会影响 P99。 |
| Expert GEMM + activation | 专家权重、token batch、SwiGLU/低成本 activation、partial output | 权重 multicast、tile reuse、片上 SRAM 双缓冲、NoC 到 compute array 的供数稳定性 | 单专家权重 Pro FP4 约 33 MB;每专家 tokens 少时 HBM/DDR 带宽主导。 | 如 expert tensor parallel,还需要局部 reduce;专家跨多芯片会增加同步。 |
| MoE Combine | 专家输出 BF16 回传并按 router weight 加权合并 | reduce / scatter / writeback 并发;需避免与下一层 prefetch 冲突。 | 输出 staging、residual buffer、下一层输入。 | 与 Dispatch 同等关键;Combine payload 通常比 Dispatch 更大,因为 BF16。 |
| MTP / LM head / sampling | 隐藏态、候选 token、vocab logits、采样状态 | vocab head 可能大矩阵;MTP 模块增加小额计算换取少 decode step。 | LM head 权重和 logits buffer;可用 TP/分片 vocab。 | logits all‑gather/top‑k reduce;MTP acceptance 影响后续 batch 粒度。 |
4. 关键带宽与算力估算
4.1 MoE Dispatch / Combine:V4‑Pro 的核心公式
| 估算项 | V4‑Pro | V4‑Flash | 解释 |
|---|---|---|---|
| 每 token‑expert 通信 | 3×7168 = 21.5 KB | 3×4096 = 12.3 KB | Dispatch FP8 + Combine BF16,不含元数据、padding、重传。 |
| 每 token‑layer 的 routed 通信 | ≈ 129 KB | ≈ 73.7 KB | top‑6 routed experts;shared expert 若远端也会增加。 |
| 每输出 token 跨全部层 routed 通信 | ≈ 7.9 MB | ≈ 3.2 MB | 这是 aggregate payload;实际分布在 EP group 内。 |
| 每 token‑expert 计算 | ≈ 132 MFLOPs | ≈ 50 MFLOPs | 只估专家 FFN 三个投影。 |
| 每输出 token 全层 routed expert 计算 | ≈ 48 GFLOPs | ≈ 13 GFLOPs | attention、shared expert、norm、head、MTP 另计;49B/13B active params 给出更高总量级。 |
4.2 在线 batch 对“每专家 tokens 数”的决定性影响
MoE 推理最怕“小 batch 被大量 experts 稀释”。假设路由均匀,单层平均每个 routed expert 获得的 token 数为:
| decode 活跃序列数 / batch tokens | V4‑Pro:384 experts, top‑6 | V4‑Flash:256 experts, top‑6 | 判断 |
|---|---|---|---|
| 128 | 2.0 tokens/expert | 3.0 tokens/expert | 极差 GEMM 太小,网络短包与 HBM 权重流主导。 |
| 512 | 8.0 | 12.0 | 偏差 可跑但难吃满算力。 |
| 2048 | 32.0 | 48.0 | 可用 需要 MTP/continuous batching 保持稳定。 |
| 4096 | 64.0 | 96.0 | 较好 专家 GEMM 算术强度改善,但排队延迟上升。 |
4.3 单专家权重流:为什么 DDR/HBM 带宽仍是硬瓶颈
| 项目 | V4‑Pro 单 routed expert | V4‑Flash 单 routed expert | 总线含义 |
|---|---|---|---|
| 专家参数量估算 | 3×7168×3072 ≈ 66M params | 3×4096×2048 ≈ 25M params | gate/up/down 三矩阵。 |
| FP4 权重容量 | ≈ 33 MB | ≈ 12.6 MB | 单专家就超出很多片上 SRAM tile 容量,只能分块流入。 |
| FP8 权重容量 | ≈ 66 MB | ≈ 25 MB | 低 batch 下反复读权重,HBM/DDR 成瓶颈。 |
| 单 token FP4 算术强度 | ≈ 4 FLOPs/Byte | ≈ 4 FLOPs/Byte | 需要足够多 token 复用同一专家权重,算术强度才能线性上升。 |
5. 片内 NoC 与片外 Scale‑up 的瓶颈地图
5.1 片内 NoC:不是“带宽越大越好”,而是并发流的仲裁与局部性
NoC 需要承载的并发流
- HBM/DDR → compute array 的专家权重 tile 流。
- HBM/DDR → attention kernel 的 CSA/HCA/SWA KV gather。
- Scale‑up NIC / die‑to‑die fabric 注入的 Dispatch activations。
- Expert GEMM 输出 → Combine reduce/writeback。
- 下一层预取、当前层写回、runtime metadata 更新。
片上缓存策略
- 完整专家权重通常不应假设能驻留片上;片上 SRAM 更适合做 tile buffer、activation staging、KV block cache。
- 对 V4‑Pro,单 expert FP4 权重约 33 MB;若芯片片上 SRAM 为几十 MB,缓存一个专家都很紧张,更无法缓存多专家。
- Decode 阶段每专家 tokens 数少,权重 tile 复用不足;NoC 应支持权重 multicast、双缓冲和跨 core 分块。
- CSA top‑k 与 HCA dense compressed KV 混合读取需要 gather/scatter 友好的 bank layout 与预取。
| NoC 子问题 | V4 为什么加重 | 设计建议 |
|---|---|---|
| Bank conflict / 随机 gather | CSA 先压缩再稀疏选择 top‑k,HCA 又以 m′=128 做重压缩;KV block 尺寸与层策略不同。 | KV cache layout 与 sparse attention kernel 联合设计,cache-line padding,面向 block gather 的 DMA。 |
| RDMA 注入与 GEMM 争 NoC | MoE fused kernel 试图把通信、内存、计算全部重叠,NoC 与 HBM 控制器同时满载。 | 为网络 DMA、HBM load、compute writeback 设置 QoS/virtual channel;提供网络流量独立 copy engine。 |
| 片上 SRAM 容量错配 | 专家权重太大,KV cache 太长,片上只能缓存局部 hot blocks。 | 软件暴露 expert hotness 与 KV hot prefix;硬件提供可编程 cache partition 与 pinned region。 |
| 低精度格式转换 | routed expert FP4、Dispatch FP8、Combine BF16、attention 路径混合精度。 | NoC 端或 DMA 端支持轻量 dequant/pack/unpack,减少 compute core 侧格式搬运。 |
| 功耗墙 | 融合 kernel 使 compute/memory/network 同时高负载,容易触发功耗限频。 | 按通信-计算重叠场景配置功耗余量,而不是只按孤立 GEMM 峰值做 TDP。 |
5.2 片外 Scale‑up:MoE 的 All‑to‑All 是推理互联的第一类公民
Dense LLM 主要要求 tensor parallel 的 all‑reduce / all‑gather;MoE LLM 还要在每层做 expert dispatch/combine。V4‑Pro 的 top‑6 routed experts 让每层都产生多目的地重排。互联瓶颈不只是吞吐,还包括消息启动延迟、排序、拥塞隔离、跨节点转发和 RDMA buffer 管理。
| 互联问题 | 典型瓶颈 | 对 V4 推理的影响 | 硬件方向 |
|---|---|---|---|
| 短包启动延迟 | decode batch 小、每专家 tokens 少,payload 不足以摊薄微秒级延迟。 | P99 TPOT 抖动;Flash/Pro 低价服务更依赖高并发平滑。 | 低延迟 signaling、doorbell batching、push/pull 两种模式都要高效。 |
| Incast / Outcast | 多个 token 同时命中 hot expert,Combine 又形成 many‑to‑one reduce。 | 局部拥塞影响其他 DP/TP 流。 | VOQ、per‑QP 队列隔离、自适应路由、拥塞控制。 |
| Scale‑up/Scale‑out 断层 | NVLink/自研 fabric 与 IB/RoCE 之间需要软件转发或额外同步。 | 节点内带宽很高但跨节点专家一多,实际延迟被边界损耗吞掉。 | 统一网络适配器、I/O die 转发、memory-semantic acquire/release。 |
| 通信占用 compute core | 用 SM/NPU core 做打包、搬运、同步会抢 GEMM 资源。 | 算力看似空闲但 kernel 不能同时满载。 | 网络协处理器、硬件 copy、广播/规约原语。 |
| 跨机房/大集群规模 | 两层/三层 Fat‑Tree 成本与延迟权衡,RoCE 成本低但拥塞复杂。 | 大规模多租户服务时网络成本和稳定性同等重要。 | Multi‑Plane network、低延迟以太、可编程 CC。 |
6. 在线服务 Batch 化:从服务调度到每专家数据流
6.1 Prefill 与 decode disaggregation 仍然必要,但还不够
DeepSeek V3 硬件反思中提到,生产中采用 prefill 与 decode 分离,并为大 batch prefill 与低延迟 decode 分配不同 expert parallelism group size。到 V4,由于 1M context、CSA/HCA heterogeneous cache、agent 长输出和 top‑6 MoE 并存,服务商还需要更细的调度维度:
Prefill 池
- 目标:吞吐优先,尽量把 prompt tokens 聚成大 batch。
- 瓶颈:长上下文 attention 与 KV 写入、prefix cache 构建、HBM 容量。
- 互联:可用较大 EP group;All‑to‑All payload 大,带宽利用率较好。
- 优化:prefix 去重、on‑disk KV cache、长文档按块编排、prefill 队列按长度分桶。
Decode / reasoning 池
- 目标:P99 TPOT 优先,不能无限等 batch。
- 瓶颈:每步 1 token/sequence,MoE dispatch 短包、专家 tokens 少。
- 互联:需要更强低时延 Scale‑up;跨节点 experts 应尽量减少。
- 优化:continuous batching、MTP/speculative decoding、hot expert placement、KV locality-aware scheduling。
6.2 每个 MoE 专家的数据流向
- Router 产生 top‑6 expert ids:对 batch 中每个 token 计算 gating logits;调度器把 token 按 expert id、所在芯片、所在节点分桶。
- Dispatch:每个 token hidden 被复制到 6 个 experts。若 expert 本地,流量走片内 NoC/本节点 fabric;若远端,走 Scale‑up 或 Scale‑out RDMA。
- Expert input staging:接收端按 expert 聚合 token,形成 GEMM 的 M 维。M 太小时 GEMM 退化为小矩阵,权重读占比高。
- Expert GEMM:读取 expert gate/up/down 权重 tile;执行 SwiGLU 或低成本替代激活;输出回写 staging buffer。
- Combine:专家输出乘以 router weight 后回到原 token owner,进行加权求和。Combine 常用 BF16,因此 payload 大于 FP8 dispatch。
- 进入下一层:token hidden 再次进入 attention,再 route 到另一组 experts;hot expert 在层间并不固定,导致 cache 和网络局部性难预测。
7. 芯片适配与生态信号
公开芯片厂商资料能验证“V4 正在被国内硬件生态优先适配”,但很少披露 NPU NoC、Scale‑up 拓扑、单卡 HBM/DDR、真实 TPOT/TPS 等底层指标。因此这里把厂商相关信息作为约束信号,而不是性能结论。
| 来源/厂商信号 | 公开内容 | 对总线研判的含义 |
|---|---|---|
| DeepSeek 官方 V4 发布 | V4‑Pro/Flash 均 1M context,Pro 1.6T/49B active,Flash 284B/13B active;引入 CSA/HCA、mHC、Muon,并发布技术报告与权重。 | 推理芯片必须同时面向超长上下文 KV 与 MoE expert parallelism,而不是只优化 dense GEMM。 |
| DeepSeek 官方 API | V4‑Pro 与 V4‑Flash 均支持 thinking/non‑thinking、1M context、384K max output;Pro 官方并发上限低于 Flash。 | 在线服务会自然分层:Pro 资源更稀缺,Flash 承担更大吞吐;硬件池可能需要异构部署。 |
| Huawei Ascend 950 SuperNode | Reuters 报道称华为 Ascend 950‑based supernode 全面支持 V4;V4 发布后大厂采购 Ascend 950PR 需求上升。 | 国内高端 NPU 的竞争焦点已进入“能否低成本服务 MoE + 1M context”的系统级阶段;产能与软件生态仍是约束。 |
| Cambricon / domestic chip cooperation | Reuters 早期报道称 DeepSeek 与 Huawei、Cambricon 合作改写 V4 底层代码以适配国产芯片。 | 跨厂商可移植性会是巨大工程:kernel DSL、通信库、FP4/FP8 格式、RDMA 原语都需要重做。 |
| V3/V3.2 经验 | DeepSeek V3 硬件反思强调 MLA 降 KV、MoE 通信-计算重叠、Multi‑Plane network、Scale‑up/Scale‑out convergence。 | V4 的方向不是推翻 V3,而是在更长上下文和更低精度下把这些系统要求放大。 |
8. 总线提升点、困难与挑战
8.1 硬件侧提升点
1. 以 MoE 平衡点设计带宽
V4‑Pro 官方公式给出 6144 FLOPs/Byte 的通信隐藏阈值。硬件不应盲目堆互联带宽,而应匹配 compute/HBM/network 三者,使 fused EP kernel 不降频。
2. 统一 Scale‑up/Scale‑out
用统一 NIC/I/O die 和转发原语消除节点内外边界,支持 EP dispatch 的 broadcast、combine 的 reduce、动态 dedup 和细粒度同步。
3. NoC 支持稀疏 KV
为 CSA/HCA/SWA 混合 cache 提供 block gather、cache-line padding、跨 bank 预取、TLB 友好的 KV layout。
4. 网络协处理器
把 packet processing、RDMA buffer copy、专家分桶、metadata packing 从 compute core 中剥离,避免通信抢占 GEMM 单元。
5. FP4/FP8 原生数据路
routed experts 使用 FP4 后,芯片需要 FP4 GEMM、scale metadata、pack/unpack、FP8 dispatch 与 BF16 combine 的低开销转换。
6. HBM‑DDR‑SSD 分层
1M context 与 prefix cache 要求 HBM 做 hot cache、DDR/CXL 做 warm cache、NVMe/分布式文件系统做 cold prefix;总线要支持异步搬运与 QoS。
8.2 软件/系统侧提升点
- Fine‑grained EP wave scheduling:把专家切成 wave,通信完成一波就启动一波计算。
- Fused MoE mega‑kernel:Dispatch、GEMM、activation、Combine 尽可能融合,减少 host launch 与中间写回。
- Continuous batching + MTP:增加有效 batch 与每专家 tokens 数,降低短包和小 GEMM 占比。
- Prefill/decode disaggregation:不同池配置不同 EP group size、KV cache 策略和 SLA。
- Expert placement:按 router 统计、tenant、语言/任务热度做 hot expert 放置,减少跨节点专家命中。
- KV locality-aware routing:cache-hit 请求尽量调度到已有 prefix/KV 的节点,减少重复 prefill 与远端 cache 拉取。
- Batch-invariant deterministic kernels:在动态 batch 下保持结果稳定,降低线上调试和回归成本。
- 跨厂商 kernel DSL:TileLang/CANN/MLU/DTK 等适配需要统一抽象,否则每个芯片都要手写稀疏 attention 与 EP kernel。
8.3 最难的挑战
| 挑战 | 为什么难 | 可能的缓解方式 |
|---|---|---|
| 低延迟与高吞吐同时满足 | 大 batch 提吞吐,小 batch 保延迟;MoE 每专家 tokens 数与用户排队延迟天然冲突。 | SLA 分池、MTP、动态 batch window、Flash/Pro 分层服务。 |
| 专家负载不可预测 | 真实请求的语言、领域、prompt 模板会造成 expert hotness,均匀假设不成立。 | 在线 router histogram 监控、热专家复制、node‑limited routing、负载感知调度。 |
| Heterogeneous KV 与 PagedAttention 不兼容 | CSA/HCA/SWA 的 entry size、压缩周期、eviction policy 不同。 | 定制 KV block allocator、state cache、cache‑kernel co‑design。 |
| 功耗与散热 | EP 融合后 compute、memory、network 同时满载,峰值功耗不再由单独 GEMM 代表。 | 为并发工作负载留 power headroom;调度器做功耗感知。 |
| 国产生态适配 | 不只是 PyTorch 算子能跑,还要 FP4、稀疏 attention、RDMA、fused EP、调度器、监控全部成熟。 | 开放 kernel、标准化通信原语、模型-芯片共同设计和长期 profiling。 |
9. 参考来源与可信度说明
本 HTML 采用官方资料和 Reuters/论文作为主依据;知乎等社区讨论在本版中未直接引用,因为可检索到的结果不足以稳定核验。若后续需要,我可以把知乎专业回答作为“非正式观点”单独附录。
- DeepSeek API Docs, “DeepSeek V4 Preview Release”, 2026‑04‑24. https://api-docs.deepseek.com/news/news260424
- DeepSeek‑AI, “DeepSeek‑V4: Towards Highly Efficient Million‑Token Context Intelligence”, technical report PDF, 2026. https://huggingface.co/deepseek-ai/DeepSeek-V4-Pro/blob/main/DeepSeek_V4.pdf
- DeepSeek API Docs, “Models & Pricing”. https://api-docs.deepseek.com/quick_start/pricing
- DeepSeek API Docs, “Context Caching”. https://api-docs.deepseek.com/guides/kv_cache
- DeepSeek‑AI, “DeepSeek‑V3 Technical Report”, arXiv:2412.19437. https://arxiv.org/abs/2412.19437
- Zhao et al., “Insights into DeepSeek‑V3: Scaling Challenges and Reflections on Hardware for AI Architectures”, ISCA 2025 / arXiv:2505.09343. https://arxiv.org/abs/2505.09343
- Reuters, “DeepSeek‑V4, the Chinese AI model adapted for Huawei chips”, 2026‑04‑24. https://www.reuters.com/world/china/deepseek-v4-chinese-ai-model-adapted-huawei-chips-2026-04-24/
- Reuters, “Big Chinese tech firms scramble to secure Huawei AI chips after DeepSeek V4 launch”, 2026‑04‑29. https://www.reuters.com/world/china/big-chinese-tech-firms-scramble-secure-huawei-ai-chips-after-deepseek-v4-launch-2026-04-29/
- Reuters, “DeepSeek's V4 model will run on Huawei chips, The Information reports”, 2026‑04‑03. https://www.reuters.com/world/china/deepseeks-v4-model-will-run-huawei-chips-information-reports-2026-04-03/
注:本报告中“GB/MB”按十进制近似,“KiB/MiB”未严格区分;具体工程设计应按芯片实际精度、padding、routing locality、EP/TP/PP/DP 切分、cache 命中率和压测数据重算。