Merge pull request #1809 from liugz18/main

Shi Xian

2024-06-17 ba54c2f88f8037f067d236febecb1e333b5e2543

 funasr/tokenizer/build_tokenizer.py

@@ -56,6 +56,4 @@
        )

    else:
        raise ValueError(
            f"token_mode must be one of bpe, word, char or phn: " f"{token_type}"
        )
        raise ValueError(f"token_mode must be one of bpe, word, char or phn: " f"{token_type}")