wusong
2024-09-25 d20c030e5b75306dd67e8fe9924d5d94eac1bf30
funasr/tokenizer/word_tokenizer.py
@@ -19,8 +19,7 @@
        if not remove_non_linguistic_symbols and non_linguistic_symbols is not None:
            warnings.warn(
                "non_linguistic_symbols is only used "
                "when remove_non_linguistic_symbols = True"
                "non_linguistic_symbols is only used " "when remove_non_linguistic_symbols = True"
            )
        if non_linguistic_symbols is None: