update (debugging)

shixian.shi

2024-01-12 bcb8b0c3cbbdc7b3c246a28b3941a9f4301deac0

 funasr/tokenizer/build_tokenizer.py

@@ -29,7 +29,7 @@
    delimiter: str = None,
    g2p_type: str = None,
    **kwargs,
) -> AbsTokenizer:
):
    """A helper function to instantiate Tokenizer"""
    if token_type == "bpe":
        if bpemodel is None: