haoneng.lhn
2023-06-05 4417ef69dc1370a7a44bd3087c30b1299f32882d
funasr/runtime/onnxruntime/src/tokenizer.cpp
@@ -5,6 +5,7 @@
#include "precomp.h"
namespace funasr {
CTokenizer::CTokenizer(const char* sz_yamlfile):m_ready(false)
{
   OpenYaml(sz_yamlfile);
@@ -220,3 +221,5 @@
   }
   id_out= String2Ids(str_out);
}
} // namespace funasr