Merge pull request #857 from alibaba-damo-academy/dev_wjm_tmp

hnluo

2023-08-15 3a71c7a227ebd8b61995e2fb8ee0c3c25a8c19c4

 funasr/text/token_id_converter.py

@@ -5,7 +5,6 @@
from typing import Union

import numpy as np
from typeguard import check_argument_types


class TokenIDConverter:
@@ -14,7 +13,6 @@
        token_list: Union[Path, str, Iterable[str]],
        unk_symbol: str = "<unk>",
    ):
        assert check_argument_types()

        if isinstance(token_list, (Path, str)):
            token_list = Path(token_list)