AI 学習 + 推論の双拉で HBM 出荷は 2024 年世界 8 万トン → 2026 年 20 万トン推定。SK ハイニックス / サムスン / マイクロンの寡占。
HBM3E は単スタックで D5 ダイ 12 枚を TSV で垂直積層、帯域 1.2 TB/s は DDR5 の 30 倍。NVIDIA H200 は単カードで 141 GB の HBM3E、B200 は 192 GB。AI 学習では帯域の壁が演算の壁より厳しい — Hopper クラスタでは HBM コストが GPU BOM の 50% 超え。