AWS Machine Learning Blog· Kevin Shabahang·· 4 小时前AI 评分52
i14 在 AWS Trainium2 上用原生 PyTorch 训练与部署 Laplace 3B 线性注意力模型
Beyond the KV cache: Training and serving i14’s Laplace 3B linear attention model on AWS Trainium2 with native PyTorch
AI 导读
i14 与 AWS 合作,通过 TorchNeuron Native 以原生 PyTorch 在 Trainium2 上训练并部署了采用门控线性注意力的 Laplace 3B 模型。
来源:AWS Machine Learning Blog · aws.amazon.com