FUNASR训练
parent: 8c88d7 | 补丁 | 提交对比
zhifu gao
2024-09-25 2196844d1d6e5b8732c95896bb46f0eacdd9cf9d
refs
用户 zhifu gao <zhifu.gzf@alibaba-inc.com>
星期三, 九月 25, 2024 15:10 +0800
提交者 GitHub <noreply@github.com>
星期三, 九月 25, 2024 15:10 +0800
提交2196844d1d6e5b8732c95896bb46f0eacdd9cf9d
目录 f6255c69272a933a3234bce2e262eefd12f81ce1 目录 | zip | gz
parent 8c88d71f34ddf78588983538f887b8fb483996cd 查看 | 对比 
Dev kws (#2105)

* multi tokenizer

* support fsmn_kws, fsmn_kws_mt, sanm_kws, sanm_kws_streaming training

* kws

---------

Co-authored-by: pengteng.spt <pengteng.spt@alibaba-inc.com>
13个文件已修改
48个文件已添加
1 文件已重命名
5494 ■■■■■ 已修改文件
examples/industrial_data_pretraining/fsmn_kws/conf/fsmn_4e_l10r2_250_128_fdim80_t2599.yaml 95 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/conf/fsmn_4e_l10r2_280_200_fdim40_t2602.yaml 95 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/convert.py 134 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/convert.sh 26 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/finetune.sh 173 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/funasr -> ../../../funasr 1 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/infer.sh 20 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/infer_from_local.sh 41 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws/path.sh 5 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/conf/fsmn_4e_l10r2_250_128_fdim80_t2599_t4.yaml 103 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/conf/fsmn_4e_l10r2_280_200_fdim40_t2602_t4.yaml 103 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/convert.py 141 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/convert.sh 36 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/finetune.sh 186 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/funasr -> ../../../funasr 1 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/infer.sh 20 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/infer_from_local.sh 44 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/fsmn_kws_mt/path.sh 5 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/conf/sanm_6e_320_256_fdim40_t2602.yaml 94 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/export.sh 17 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/finetune.sh 172 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/funasr -> ../../../funasr 1 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/infer.sh 20 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/infer_from_local.sh 41 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws/path.sh 5 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/conf/sanm_6e_320_256_fdim40_t2602.yaml 109 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/export.sh 17 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/finetune.sh 258 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/funasr -> ../../../funasr 1 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/infer.sh 34 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/infer_from_local.sh 62 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
examples/industrial_data_pretraining/sanm_kws_streaming/path.sh 5 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/auto/auto_model.py 69 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/bin/train.py 3 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/datasets/audio_datasets/datasets.py 33 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/datasets/audio_datasets/scp2jsonl.py 15 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/datasets/kws_datasets/__init__.py 对比 | 查看 | 原始文档 | blame | 历史
funasr/datasets/kws_datasets/datasets.py 132 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/download/download_model_from_hub.py 37 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/ctc/ctc.py 29 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_kws/__init__.py 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_kws/encoder.py 534 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_kws/model.py 285 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_kws_mt/__init__.py 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_kws_mt/encoder.py 213 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_kws_mt/model.py 353 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/fsmn_vad_streaming/encoder.py 136 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm/encoder.py 8 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm_kws/__init__.py 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm_kws/export_meta.py 98 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm_kws/model.py 266 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm_kws_streaming/__init__.py 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm_kws_streaming/export_meta.py 98 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/sanm_kws_streaming/model.py 442 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/models/transformer/scorers/ctc.py 1 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/tokenizer/char_tokenizer.py 2 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/train_utils/average_nbest_models.py 5 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/train_utils/load_pretrained_model.py 7 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/train_utils/trainer.py 93 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/utils/compute_det_ctc.py 286 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/utils/kws_utils.py 284 ●●●●● 对比 | 查看 | 原始文档 | blame | 历史
funasr/utils/type_utils.py 对比 | 查看 | 原始文档 | blame | 历史