python/FunASR-XL.git

FUNASR训练

Merge branch 'dev_gzf_deepspeed' into main

zhifu gao

2024-06-11 2175736ab0e2752837db102ffc27277339f19b5b

refs
用户	zhifu gao <zhifu.gzf@alibaba-inc.com>
	星期二, 六月 11, 2024 14:02 +0800
提交者	GitHub <noreply@github.com>
	星期二, 六月 11, 2024 14:02 +0800
提交	2175736ab0e2752837db102ffc27277339f19b5b
目录	f0dd8661c34da9705fc43c88babbf48d9cb964ff 目录 \| zip \| gz
parent	0bd1a4d6a9893e45438505514a063d9deee91f21 查看 \| 对比 a8653d897db4872055632e1fd9f3595291e787b0 查看 \| 对比

Merge branch 'dev_gzf_deepspeed' into main

13个文件已修改

17个文件已添加

8个文件已删除

	examples/industrial_data_pretraining/deepspeed/ds_stage1.json	33 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_stage2.json	33 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_stage3.json	41 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_z0_config.json	28 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_z2_config.json	28 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_z2_offload_config.json	32 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_z3_config.json	30 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/deepspeed/ds_z3_offload_config.json	38 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/llm_asr/conf/whisper_qwen_linear2.yaml	81 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/llm_asr/conf/whisper_qwen_transformer.yaml	81 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/llm_asr/demo_speech2text.py	48 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/llm_asr/demo_speech2text.sh	65 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/llm_asr/demo_train_or_finetune2.sh	47 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/industrial_data_pretraining/llm_asr/infer_speech2text.sh	9 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/conformer/run.sh	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/README.md	16 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/conf/transformer_12e_6d_2048_256.yaml	104 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/demo_infer.sh	1 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/demo_train_or_finetune.sh	1 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/local/aishell_data_prep.sh	66 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/local/download_and_untar.sh	105 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/run.sh	203 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	examples/wenetspeech/transformer/utils	1 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/auto/auto_model.py	2 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/bin/train.py	9 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/bin/train_ds.py	10 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/audio_datasets/samplers.py	27 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/dataloader_entry.py	21 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/openai_datasets/__init__.py	对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/openai_datasets/datasets.py	224 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/openai_datasets/index_ds.py	106 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/datasets/sense_voice_datasets/datasets.py	1 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/models/llm_asr/adaptor.py	42 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/models/llm_asr/model.py	432 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/models/transformer/attention.py	5 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/train_utils/model_summary.py	16 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/train_utils/trainer.py	9 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史
	funasr/train_utils/trainer_ds.py	6 ●●●●● 对比 \| 查看 \| 原始文档 \| blame \| 历史