韩松等提出FlashMoBA,比MoBA快7.4倍,序列扩到512K也不会溢出 (opens in a new tab)今年 2 月,月之暗面提出了一种名为 MoBA 的注意力机制,即 Mixture of Block Attention,可以直译为「块注意力混合」。