javascript - 如何在JavaScript中录制麦克风音频并提交给DialogFlow？

如何通过JavaScript录制麦克风中的音频并将其提交给DialogFlow，而无需通过服务器？

最佳答案

这个问题有两个部分：


将了解如何以DialogFlow格式记录麦克风音频。
如何通过适当的身份验证将音频实际提交到DialogFlow。


第1部分

为了使用DialogFlow可以理解的格式录制麦克风音频，我使用opus-recorder，然后使用以下代码转换它返回的blob：

function BlobToDataURL(blob: Blob) {
    return new Promise((resolve, reject)=>{
        const reader = new FileReader();
        reader.addEventListener("loadend", e=>resolve(reader.result as string));
        reader.readAsDataURL(blob);
    }) as Promise<string>;
}

const micRecorder = new Recorder({
    encoderSampleRate: 16000,
    originalSampleRateOverride: 16000, // necessary due to Google bug? (https://github.com/chris-rudmin/opus-recorder/issues/191#issuecomment-509426093)
    encoderPath: PATH_TO_ENCODER_WORKER_JS,
});
micRecorder.ondataavailable = async typedArray=>{
    const audioData = new Blob([typedArray], {type: "audio/ogg"});
    const audioData_dataURL = await BlobToDataURL(audioData);
    const audioData_str = audioData_dataURL.replace(/^data:.+?base64,/, "");

    // here is where you need part 2, to actually submit the audio to DialogFlow
};
micRecorder.start();

第2部分

要将音频数据提交到DialogFlow，请在此处查看我的答案：https://stackoverflow.com/a/57857698/2441655

关于javascript - 如何在JavaScript中录制麦克风音频并提交给DialogFlow？，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/57859703/