谷歌 TPU作為異化算力 片，性能追及英偉達旗艦算力 片。TPU（Tensor Processing Unit），是一種專為處理張量運算而設計的 ASIC 片。作為專用 ASIC異構 片，TPU的計算單元設計針對深度學習進行了優化，可以較好地匹配 Attention 機制中大量的矩陣運算 目。其張量計算方式（Tensor Core），使得它在同樣的 片面積和能耗下，比GPU有 3.5倍的性能提升。