add dynamic batch for fetch

雾聪

2024-04-19 63a70a00f7c9f162e8d7b3e330516438fb8cd87b

 funasr/tokenizer/hf_tokenizer.py

@@ -2,7 +2,8 @@
try:
   from transformers import AutoTokenizer
except:
   print("If you want to use hugging, please `pip install -U transformers`")
   # print("If you want to use hugging, please `pip install -U transformers`")
   pass

from funasr.register import tables