update token list

Yuekai Zhang

2023-03-06 80e6c258cf89b5f11f4e52a4cc5a9cf2e95aa7be

 funasr/datasets/large_datasets/utils/padding.py

@@ -6,9 +6,8 @@
def padding(data, float_pad_value=0.0, int_pad_value=-1):
    assert isinstance(data, list)
    assert "key" in data[0]
    assert "speech" in data[0]
    assert "text" in data[0]

    assert "speech" in data[0] or "text" in data[0]
    
    keys = [x["key"] for x in data]

    batch = {}