update tokenizer.h

雾聪

2023-11-09 b0c108279275a5c0011dfcf76b3e725b3263209b

 funasr/bin/punc_train.py

@@ -44,4 +44,10 @@
    else:
        args.distributed = False

    if args.dataset_type == "small":
        if args.batch_size is not None:
            args.batch_size = args.batch_size * args.ngpu * args.num_worker_count
        if args.batch_bins is not None:
            args.batch_bins = args.batch_bins * args.ngpu * args.num_worker_count

    main(args=args)