开源架构 Mamba-3 亮相:推理延迟更低,性能比 Transformer 高 4%
卡耐基梅隆大学与普林斯顿大学研究团队开源了状态空间模型架构 Mamba-3。其 MIMO 变体在基准测试中取得 57.6% 的平均准确率,相对 Transformer 提升约 4%;它用一半的状态大小达到 Mamba-2 的质量,并引入复数值状态补齐推理短板,显著缩短 GPU 空闲时间。
卡耐基梅隆大学与普林斯顿大学研究团队开源了状态空间模型架构 Mamba-3。其 MIMO 变体在基准测试中取得 57.6% 的平均准确率,相对 Transformer 提升约 4%;它用一半的状态大小达到 Mamba-2 的质量,并引入复数值状态补齐推理短板,显著缩短 GPU 空闲时间。