add postprocess for sensevoice

北念

2024-07-10 0fe232fd7b41ad24320447d51c07f14d0a807cf3

 funasr/tokenizer/build_tokenizer.py

@@ -56,6 +56,4 @@
        )

    else:
        raise ValueError(
            f"token_mode must be one of bpe, word, char or phn: " f"{token_type}"
        )
        raise ValueError(f"token_mode must be one of bpe, word, char or phn: " f"{token_type}")