Google TPU v5p

它是什么

Google TPU v5p 是 Wikipedia 列为 2023 年推出的 TPU 世代之一^[3]。TPU（张量处理单元，Tensor Processing Unit）是 Google 面向机器学习计算定制的加速器系列；v5p 是该系列中的一个具体芯片世代。公开规格从两个层级描述它：单颗芯片，以及由多颗芯片组成的 pod。Google Cloud 的规格表分别给出了这两个层级的数字。

单芯片算力与内存

Google Cloud 的规格表列出，每颗 TPU v5p 芯片的 BF16 峰值算力为 459 TFLOPS，FP8 峰值算力也是 459 TFLOPS^[1]。Google 的文档还说明 TPU v5p 支持 FP8^[2]。同一张表给出每颗芯片 95 GiB 的 HBM（高带宽内存）和 2,765 GB/s 的 HBM 带宽^[1]。Wikipedia 的 TPU 条目则列出 95 GB HBM 和 2,765 GB/s 内存带宽^[3]。带宽数字在两处相同；容量在规格表中写作 95 GiB，在 Wikipedia 中写作 95 GB^[1][3]。

核心数量

规格表列出每颗 TPU v5p 芯片有两个 TensorCore 和四个 SparseCore^[1]。Google 的架构文档单独说明 TPU v5p 支持 FP8，并且每颗芯片有四个 SparseCore^[2]。两个来源在 SparseCore 数量上一致：每颗芯片四个^[1][2]；TensorCore 的数量在规格表中为每颗芯片两个^[1]。这些核心数量与算力、内存、互连数字一起，构成公开的芯片描述。

Pod 规模与互连

在 pod 层级，Google Cloud 的规格表列出每个 TPU v5p pod 有 8,960 颗芯片^[1]。每颗芯片有 1,200 GB/s 的双向芯片间互连带宽，以及 50 Gbps 的数据中心网络带宽^[1]。芯片间互连连接 pod 内的芯片，数据中心网络带宽则是每颗芯片的网络接口；两者使用不同单位。把 8,960 颗芯片的 pod 规模和每颗芯片的互连数字放在一起，公开规格描述的是一套由数千颗芯片组成、通过专用芯片间互连和数据中心网络接口连接的系统^[1]。

在 TPU 发展中的位置

TPU v5p 属于 2023 年推出的 TPU 世代^[3]。公开规格的重点包括 FP8 支持、HBM 容量与带宽、核心数量，以及 pod 级规模^[1][2][3]。具体数字是：每颗芯片 459 TFLOPS 的 BF16 和 FP8 峰值算力、95 GiB HBM、2,765 GB/s HBM 带宽，每个 pod 8,960 颗芯片^[1]；架构文档确认 FP8 支持和每颗芯片四个 SparseCore^[2]；Wikipedia 把 v5p 列入 2023 年 TPU 世代，并给出 95 GB HBM 和 2,765 GB/s 内存带宽^[3]。合起来看，这些数字定义了 v5p 在 TPU 系列中的公开位置：一个 2023 年世代，在芯片层级由算力、内存和核心数量描述，在系统层级由 pod 规模和互连描述。