你的变压器库是否将FFN融合成一个"闪电"内核?我认为这可能会带来巨大的收益,想知道目前的常见做法和研究的SOTA是什么?
20.14K