我正在尝试获取一个Facebook Messenger音频剪辑URL,并将该URL上的音频剪辑转发到wit.ai语音api。

传入消息提供了有效负载URL,该URL在下载时具有.aac文件。从此处HTTP API - speech endpoint的API文档看来,.aac文件类型不受支持。

我尝试弄乱标题以发送mpeg3内容类型(希望它可能会采用),但是我的所有响应都没有文本,并且wit控制台显示传入消息的日志为“无文本”。
为了清楚起见,我尝试了下面的文档页面中描述的所有音频组合。

发送形式为:

curl -XPOST 'https://api.wit.ai/speech?' \
 -i -L \
 -H "Authorization: Bearer <TOKEN>" \
 -H "Content-Type: audio/mpeg3" \
 -H "Transfer-encoding: chunked" \
 --data-binary "https://cdn.fbsbx.com/v/<rest of url>"


显然,请求是正确的,如响应所示,但是文本没有返回任何内容,因此文件类型是我的问题。

HTTP/1.1 200 OK
Server: nginx/1.8.0
Date: Wed, 04 Jan 2017 12:51:13 GMT
Content-Type: application/json
Content-Length: 91
Connection: keep-alive

{
   "msg_id" : "12265ac7-3050-4cd2-94c1-7bf0d27eeab4",
   "_text" : "",
   "entities" : { }
}


检查“语音”下的with控制台的收件箱,我什么也没看到,所以显然是因为我的标题和/或文件类型错误,所以没有接听音频。

我认为无法通过Messenger应用程序创建的文件(在ios上很重要)流式传输文件,因此是否可以在运行时使用后端的node / python将.aac转换为.wav?

任何帮助表示赞赏。

最佳答案

目前看来,由于Wit不支持该格式,因此我的问题的技术答案是“无法完成”。但是,作为一种解决方法,我创建了一个python脚本,该脚本可以获取url并创建本地转换的.wav文件,然后将其流式传输到语音api。

from pydub import AudioSegment
import os
import sys
import urllib2
import uuid
import json

# Globals
PATH = os.path.dirname(os.path.realpath(sys.argv[0])) + "/speech/"


def convertFiletoWAV(infile):
    OUT_FILE = 'speech_'+ str(uuid.uuid1())+ '.wav'
    OUT_NAME = PATH + OUT_FILE
    INPUT = PATH + infile
    AudioSegment.from_file(INPUT,"aac").export(OUT_NAME, format="wav")
    return {
        'in_full':INPUT,
        'in_file':infile,
        'out_full':OUT_NAME,
        'out_file':OUT_FILE
    }

def main(file):
    print json.dumps(convertFiletoWAV(str(file)))
    sys.stdout.flush()

if __name__ == "__main__":
    main(sys.argv[1:][0])


然后从js音频处理程序中调用此方法:

let convertAndParseSpeech = (url) => {
  let file_p = config.root + '/python/speech/'
  let file = "fb_" + uuidV1() + "_down.aac"
  return new Promise(function(resolve, reject) {
    let stream = request
      .get(<url passed from Facebook payload>)
      .pipe(fs.createWriteStream(file_p + file))

    stream.on('finish',()=>{
      console.log(file);
      PythonShell.defaultOptions = {
        scriptPath: config.root + '/python/'
      };
      var options = {
        mode: 'text',
        args: [file],
      }
      PythonShell.run('convertAudio.py',options,(err, results) => {
        if (err || results.ERR) {
          reject(err)
        }else {
          console.log("RESULTS :",JSON.parse(results))
          fs.createReadStream(file_p + JSON.parse(results).out_file)
          .pipe(
            request.post({
              url : 'https://api.wit.ai/speech?v=20160526',
              json : true,
              headers: {
                "Content-Type": "audio/wav",
                "Authorization": "Bearer " + config.WIT_TOKEN
              }
            },(err,res,body)=>{
              if (!err || res.statusCode == 200) {
                resolve("OK", res.body);
              }else {
                reject("NOK", err);
              }
            })
          );
        }
      })
    })
  });


当分割成单独的部分或从命令运行时,这是可行的,但是当运行测试说pydub不可用时,我从python脚本返回了一个错误。

ImportError: No module named pydub


我将跟着PythonShell人员进行跟进,看看我做错了什么,并用结果编辑答案,但是此解决方案为我提供了我现在想要的基本功能

关于node.js - 如何将.aac网址流式传输到wit.ai语音api,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/41464517/

10-15 09:32