JavaScript如何把视频（video）转为音频（audio）？

Question

用纯 JavaScript 如何实现从 video 到 audio 的转码？（比如 mp4 到 wav）
PS：我的目的是想从网页上抓取视频的声音转换为音频，然后通过讯飞等平台识别出文字。

Answer 1

参考了一下 stackoverflow https://stackoverflow.com/que...
以下代码可以提取出音频，但是音频体积却比源视频大的问题却没解决。
有人提到了 offlineAudioContext.startRendering() 这个方法，获取能解决体积问题？

var videoSrc = 'http://otof18y9e.bkt.clouddn.com/frag_bunny.mp4'

function startSelect(){
  var audioContext = new OfflineAudioContext(2, 44100 * 100, 44100);
  // var audioContext = new window.AudioContext()
  var videoFileAsBuffer = new Promise(requestVideo)
  videoFileAsBuffer.then(function (data) {
    console.log(data)
    audioContext.decodeAudioData(data).then(function (decodedAudioData) {
        mySoundBuffer = decodedAudioData
        soundSource = audioContext.createBufferSource()
        soundSource.buffer = mySoundBuffer
        soundSource.connect(audioContext.destination)
        // soundSource.start()
        console.log(mySoundBuffer.length)
    });
  })
}

function requestVideo(resolve){
  var xhr = new XMLHttpRequest()
  xhr.open('GET', videoSrc, true)
  xhr.responseType = 'arraybuffer' // 'blob'

  xhr.onload = function(e) {
      var binaryData = this.response
      // console.log(binaryData)
      resolve(binaryData)
  }

  xhr.send()
}

Answer 2

前端做不了的 实在想用js做的话
nodejs下用这个https://www.npmjs.com/package...

Answer 3

在浏览器里是做不了的，可以通过nodejs来处理

Answer 4

这个是后台做的 不管是音频还是视频都是属于流得需要后台转换格式

Answer 5

犯不着，用 ffpmeg 吧