SpringBoot+Vue实现动态语音播放

SpringBoot+Vue实现动态语音播放。实现效果：

• 页面点击播报语音按钮，调用后台接口获取二进制byte[]
• 前端得到返回数据，调用浏览器控件AudioContext解码音频流，实现播放。

一、后台接口返回byte[]

1、在controller中添加接口，返回byte[]

• 设置 produces = “application/octet-stream”
• 设置 返回类型 ResponseEntity<byte[]>

@PostMapping(value = "/v/voice", produces = "application/octet-stream")
public ResponseEntity<byte[]> voice(@RequestBody JSONObject param, HttpServletResponse response) throws IOException {
    
    
    String text = param.getString("text");
    // 以下代码调用阿里云接口，把文字转语音
    byte[] voice = SpeechRestfulUtil.text2voice(text);
    // 返回音频byte[]
    return ResponseEntity.ok().body(voice);
}

本例是调用阿里云tts接口，把文字转语音

2、在configureMessageConverters中添加解析器ByteArrayHttpMessageConverter

@Override
public void configureMessageConverters(List<HttpMessageConverter<?>> converters) {
    
    
    MappingJackson2HttpMessageConverter jackson2HttpMessageConverter = new MappingJackson2HttpMessageConverter(objectMapper());
    converters.add(jackson2HttpMessageConverter);
    converters.add(new ByteArrayHttpMessageConverter());
}

二、Vue前端调用接口播放语音

• 使用axios调用后端接口，设置 responseType=blob
• 1）得到浏览器播放控件 audioContext
• 2）使用FileReader读取得到的byte[]
• 3）FileReader绑定load事件，读取byte[]完成后播放语音

function doVoice(){
    
    
  axios({
    
    
    method:'post',
    url:req.voice,
    responseType:'blob',
    data:{
    
    text:data.info} // 需要播放的文本
  }).then(function (response) {
    
    
        console.log(response);
        if(response.status===200){
    
    
          // 1）得到浏览器播放控件 audioContext
          let audioContext = new (window.AudioContext || window.webkitAudioContext)();
          let reader = new FileReader();
          reader.onload = function(evt) {
    
    
            if (evt.target.readyState === FileReader.DONE) {
    
    
              // 3）FileReader绑定load事件，读取byte[]完成后播放语音
              audioContext.decodeAudioData(evt.target.result,
                  function(buffer) {
    
    
                    // 解码成pcm流
                    let audioBufferSouceNode = audioContext.createBufferSource();
                    audioBufferSouceNode.buffer = buffer;
                    audioBufferSouceNode.connect(audioContext.destination);
                    audioBufferSouceNode.start(0);
                  }, function(e) {
    
    
                    console.log(e);
                  });
            }
          };
          //  2）使用FileReader读取得到的byte[]
          reader.readAsArrayBuffer(response.data);
        }
      })
      .catch(function (error) {
    
    
        // handle error
        console.log(error);
      })
      .finally(function () {
    
    
        // always executed
      });
}