Groq推出大模型推理芯片LPU，声称超越GPU
2月21日消息，Groq公司推出的大模型推理芯片以每秒500tokens的速度引起轰动，超越了传统GPU和谷歌TPU。该芯片由初创公司Groq研发，其团队成员来自谷歌TPU，包括创始人兼CEO Jonathan Ross，曾设计实现第一代TPU芯片的核心组件。 Groq采用了全球首个LPU（Language Processing Unit）方案，旨在克服计算密度和内存带宽的瓶颈，最终实现大模型推理
快讯
芯闻路1号 . 2024-02-21 2 4186
- 1