Merge branch 'main' of github.com:alibaba-damo-academy/FunASR add

游雁

2023-08-30 c2e4e3c2e9be855277d9f4fa9cd0544892ff829a

 funasr/runtime/html5/static/main.js

@@ -44,6 +44,7 @@
 



var isfilemode=false;  // if it is in file mode

var file_ext="";

var file_data_array;  // array to save file data

 

var totalsend=0;

@@ -81,6 +82,8 @@
            for(let i = 0; i < len; i++) {

                let fileAudio = new FileReader();

                fileAudio.readAsArrayBuffer(this.files[i]);  

            file_ext=this.files[i].name.split('.').pop().toLowerCase();



                fileAudio.onload = function() {

                 var audioblob= fileAudio.result;

             file_data_array=audioblob;

@@ -105,7 +108,7 @@
}

function start_file_send()

{

      sampleBuf=new Int16Array( file_data_array );

      sampleBuf=new Uint8Array( file_data_array );

 

      var chunk_size=960; // for asr chunk_size [5, 10, 5]

 

@@ -167,6 +170,17 @@
    

         }

}

function getHotwords(){

  var obj = document.getElementById("varHot");

  
  if(typeof(obj) == 'undefined' || obj==null || obj.value.length<=0){

   return "";

  }

  let val = obj.value.toString();

  console.log("hotwords="+val);

  return val;



}

function getAsrMode(){



            var item = null;

@@ -188,16 +202,46 @@
         return item;

}

         

function handleWithTimestamp(tmptext,tmptime)

{

   console.log( "tmptext: " + tmptext);

   console.log( "tmptime: " + tmptime);

    if(tmptime==null || tmptime=="undefined" || tmptext.length<=0)

   {

      return tmptext;

   }

   tmptext=tmptext.replace(/。/g, ","); // in case there are a lot of "。"

   var words=tmptext.split(",");

   var jsontime=JSON.parse(tmptime); //JSON.parse(tmptime.replace(/\]\]\[\[/g, "],[")); // in case there are a lot segments by VAD

   var char_index=0;

   var text_withtime="";

   for(var i=0;i<words.length;i++)

   {   
   if(words[i]=="undefined"  || words[i].length<=0)

   {

      continue;

   }

        console.log("words===",words[i]);

      console.log( "words: " + words[i]+",time="+jsontime[char_index][0]/1000);

      text_withtime=text_withtime+jsontime[char_index][0]/1000+":"+words[i]+"\n";

      char_index=char_index+words[i].length;

   }

   return text_withtime;

	


}

// 语音识别结果; 对jsonMsg数据解析,将识别结果附加到编辑框中

function getJsonMessage( jsonMsg ) {

   //console.log(jsonMsg);

   console.log( "message: " + JSON.parse(jsonMsg.data)['text'] );

   var rectxt=""+JSON.parse(jsonMsg.data)['text'];

   var asrmodel=JSON.parse(jsonMsg.data)['mode'];

   if(asrmodel=="2pass-offline")

   var is_final=JSON.parse(jsonMsg.data)['is_final'];

   var timestamp=JSON.parse(jsonMsg.data)['timestamp'];

   if(asrmodel=="2pass-offline" || asrmodel=="offline")

   {

      offline_text=offline_text+rectxt; //.replace(/ +/g,"");

		
      offline_text=offline_text+handleWithTimestamp(rectxt,timestamp); //rectxt; //.replace(/ +/g,"");

      rec_text=offline_text;

   }

   else

@@ -209,7 +253,7 @@
   varArea.value=rec_text;

   console.log( "offline_text: " + asrmodel+","+offline_text);

   console.log( "rec_text: " + rec_text);

   if (isfilemode==true){

   if (isfilemode==true && is_final==false){

      console.log("call stop ws!");

      play_file();

      wsconnecter.wsStop();