punctuation:add training code, support largedataset

九耳

2023-02-28 ee06cb9c6870d9e1579015aabfe1a84a61a5c087

 funasr/datasets/large_datasets/utils/padding.py

@@ -6,9 +6,8 @@
def padding(data, float_pad_value=0.0, int_pad_value=-1):
    assert isinstance(data, list)
    assert "key" in data[0]
    assert "speech" in data[0]
    assert "text" in data[0]

    assert "speech" in data[0] or "text" in data[0]
    
    keys = [x["key"] for x in data]

    batch = {}