sugarcase
2024-09-25 8cd8e25f180b57c74f1ae7fd39001e5af4c20f8b
funasr/models/rwkv_bat/rwkv.py
@@ -76,6 +76,7 @@
        x = x + self.dropout_ffn(ffn)
        return x, state
class RWKVDecoderLayer(torch.nn.Module):
    """RWKV module.