test

语帆

2024-02-28 343a281ca14809153e2ab1df49ca0c5ffdb01abd

 funasr/utils/load_utils.py

@@ -31,14 +31,13 @@
            return [load_audio_text_image_video(audio, fs=fs, audio_fs=audio_fs, data_type=data_type, **kwargs) for audio in data_or_path_or_list]
    if isinstance(data_or_path_or_list, str) and data_or_path_or_list.startswith('http'): # download url to local file
        data_or_path_or_list = download_from_url(data_or_path_or_list)
    pdb.set_trace()

    if isinstance(data_or_path_or_list, str) and os.path.exists(data_or_path_or_list): # local file
        if data_type is None or data_type == "sound":
            data_or_path_or_list, audio_fs = torchaudio.load(data_or_path_or_list)
            if kwargs.get("reduce_channels", True):
                data_or_path_or_list = data_or_path_or_list.mean(0)
        elif data_type == "text" and tokenizer is not None:
            pdb.set_trace()
            data_or_path_or_list = tokenizer.encode(data_or_path_or_list)
        elif data_type == "image": # undo
            pass
@@ -68,7 +67,7 @@
    else:
        pass
        # print(f"unsupport data type: {data_or_path_or_list}, return raw data")
    pdb.set_trace()  

    if audio_fs != fs and data_type != "text":
        resampler = torchaudio.transforms.Resample(audio_fs, fs)
        data_or_path_or_list = resampler(data_or_path_or_list[None, :])[0, :]
@@ -112,6 +111,7 @@
    # import pdb;
    # pdb.set_trace()
    # if data_type == "sound":
    pdb.set_trace()
    data, data_len = frontend(data, data_len, **kwargs)
    
    if isinstance(data_len, (list, tuple)):