/mamba-architecture
狀態空間模型,複雜度為 O(n),Transformer 為 O(n²)。推論快 5 倍,支援百萬 token 序列,不需 KV cache。含 Mamba-1 與 Mamba-2。
- 安裝次數
- 977
- 專案星數
- 1.4 萬 ★
- 授權
- MIT
- 專案更新
- 2026-10-11
怎麼裝
npx skills add https://github.com/Orchestra-Research/AI-Research-SKILLs --skill mamba安裝前請先看過原文內容。中文說明是 AI 翻譯,不保證安全。
原文
State-space model with O(n) complexity vs Transformers' O(n²). 5× faster inference, million-token sequences, no KV cache. Selective SSM with hardware-aware design. Mamba-1 (d_state=16) and Mamba-2 (d_state=128, multi-head). Models 130M-2.8B on HuggingFace.