Zhanzhao (Deo) Liang
2024-12-25 8c7b7e5feb68fda1fc4ddd627bad0f915358149e
funasr/models/rwkv_bat/rwkv.py
@@ -76,6 +76,7 @@
        x = x + self.dropout_ffn(ffn)
        return x, state
class RWKVDecoderLayer(torch.nn.Module):
    """RWKV module.