python/FunASR-XL.git

FUNASR训练

zhifu gao

2023-11-23 7dadb793e639d2b7f918f2f915e928a63e016ea5

refs
用户	zhifu gao <zhifu.gzf@alibaba-inc.com>
	星期四, 十一月 23, 2023 16:04 +0800
提交者	GitHub <noreply@github.com>
	星期四, 十一月 23, 2023 16:04 +0800
提交	7dadb793e639d2b7f918f2f915e928a63e016ea5
目录	9c14fb7ad3e40c29130966631e3c671639c29ee1 目录 \| zip \| gz
parent	23623f3cf1228b6eae19398766f7a9b83fc3fc30 查看 \| 对比

Dev gzf funasr2 (#1111)

* update funasr.text -> funasr.tokenizer fix bug export

18个文件已修改

1个文件已添加

10 文件已重命名

1个文件已删除

	funasr/bin/asr_infer.py	4 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/bin/build_trainer.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/bin/tokenize_text.py	6 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/bin/tp_infer.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/bin/train.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/data_sampler.py	54 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/dataloader_fn.py	53 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/dataset_jsonl.py	89 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/large_datasets/build_dataloader.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/preprocessor.py	6 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/small_datasets/preprocessor.py	6 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/export/models/__init__.py	6 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/export/models/e2e_asr_conformer.py	69 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/models/frontend/wav_frontend.py	9 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tasks/asr.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tasks/data2vec.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tasks/lm.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tasks/punctuation.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tasks/sa_asr.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tasks/whisper.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/__init__.py	对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/abs_tokenizer.py	对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/build_tokenizer.py	10 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/char_tokenizer.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/cleaner.py	对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/korean_cleaner.py	对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/phoneme_tokenizer.py	4 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/sentencepiece_tokenizer.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/token_id_converter.py	对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/tokenizer/word_tokenizer.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史