Merge pull request #2382 from msgk239/dev_clean

Shi Xian

2025-02-18 57e023e5cfa522007e24d87c8e3d82bf7c4a19cd

 funasr/tokenizer/build_tokenizer.py

@@ -56,6 +56,4 @@
        )

    else:
        raise ValueError(
            f"token_mode must be one of bpe, word, char or phn: " f"{token_type}"
        )
        raise ValueError(f"token_mode must be one of bpe, word, char or phn: " f"{token_type}")