add argv for CutSplit

雾聪

2024-04-17 05f5021864f8ea16688c77d3fa7d33224aa1672f

 funasr/tokenizer/hf_tokenizer.py

@@ -2,7 +2,8 @@
try:
   from transformers import AutoTokenizer
except:
   print("If you want to use hugging, please `pip install -U transformers`")
   # print("If you want to use hugging, please `pip install -U transformers`")
   pass

from funasr.register import tables