ds
游雁
2024-05-20 a19ee46d2c9d4a98951cbc9f592ff459d75b9f69
funasr/tokenizer/word_tokenizer.py
@@ -19,8 +19,7 @@
        if not remove_non_linguistic_symbols and non_linguistic_symbols is not None:
            warnings.warn(
                "non_linguistic_symbols is only used "
                "when remove_non_linguistic_symbols = True"
                "non_linguistic_symbols is only used " "when remove_non_linguistic_symbols = True"
            )
        if non_linguistic_symbols is None: