inisis
2024-12-19 1368a9bca48473d793f0c1d52df0a4739c747d16
funasr/tokenizer/build_tokenizer.py
@@ -56,6 +56,4 @@
        )
    else:
        raise ValueError(
            f"token_mode must be one of bpe, word, char or phn: " f"{token_type}"
        )
        raise ValueError(f"token_mode must be one of bpe, word, char or phn: " f"{token_type}")