add batch for paraformer

雾聪

2024-03-29 a58c3d4593892459614aabda689fb61af74e20fe

 funasr/tokenizer/hf_tokenizer.py

@@ -2,7 +2,8 @@
try:
   from transformers import AutoTokenizer
except:
   print("If you want to use hugging, please `pip install -U transformers`")
   # print("If you want to use hugging, please `pip install -U transformers`")
   pass

from funasr.register import tables