zhifu gao
2024-05-28 ba3a3bf4e67e861b833092d05d7c3842ea670cbc
funasr/tokenizer/build_tokenizer.py
@@ -56,6 +56,4 @@
        )
    else:
        raise ValueError(
            f"token_mode must be one of bpe, word, char or phn: " f"{token_type}"
        )
        raise ValueError(f"token_mode must be one of bpe, word, char or phn: " f"{token_type}")