Kimi Linear架构的核心是Kimi Delta Attention (KDA)，一种表达能力更强的线性注意力模块，通过更精细的门控机制实现了对循环神经网络有限状态记忆的有效利用。最终，Kimi Linear模型不仅在各项任务上取得了更优异的性能，还在效率上实现了巨大突破：与full attention ...