如何播放 opus 解码帧，或将 1 字节 pcm16 拆分为 2 字节 pcm(bitDepthInBytes)？

在录制麦克风时，原始 PCM8 格式的音频可以轻松播放。然而，通过网络发送并解码为 PCM16 的 Opus 帧却无法播放，除非将其转换为 PCM8。为了解决这个问题，本文介绍了一种方法，可以将 PCM16 缓冲区格式化为可播放的音频字节。该方法涉及将缓冲区乘以一个常数，然后将结果转换为字节，从而实现将 1 字节 PCM16 拆分为 2 字节 PCM 的目的。

在录制麦克风时，录制的块是原始 pcm8 格式，我能够通过更改 bitdepthinbytes = 2 来发送它并播放它，没有任何噪音，但是当我通过网络发送编码的 opus 帧并将它们解码为pcm16，除非我将它们转换为pcm8，否则我无法播放它们，但它很吵。这是我的代码：

const sampleRate = 48000
const channels = 1
....
....

    dec, err := opus.NewDecoder(sampleRate, channels)
    if err != nil {
        fmt.Println(err)
        return
    }

    var frameSizeMs float32 = 20
    frameSize := int(channels * frameSizeMs * sampleRate / 1000)
    pcm := make([]int16, frameSize)

    // (sampleRate int, channelNum int, bitDepthInBytes int, bufferSizeInBytes int)
    context, err := oto.NewContext(sampleRate, channels, 1, frameSize*2)
    if err != nil {
        log.Fatal(err)
    }
    player := context.NewPlayer()

    ...
    ...

    _, err := dec.Decode(data, pcm)
    if err != nil {
        fmt.Println(err)
    }

    var mask uint16 = 0x8000


    pcm8 := make([]byte, frameSize)
    for i := 0; i < frameSize; i++ {
        // using this work and play sound but it has noise
        pcm8[i] = byte((uint16(pcm[i]) ^ mask) >> 8)

    }
    
    _, _ = player.Write(pcm8)

解决方案

通过阅读本文，我能够知道如何将 pcm 缓冲区格式化为可播放的音频字节 https://github.com/philfrei/AudioCue/blob/master/src/main/java/com/adonax/audiocue/AudioCue.java，这是我使用的片段：

public static byte[] frombuffertoaudiobytes(byte[] audiobytes, float[] buffer)
{
    for (int i = 0, n = buffer.length; i < n; i++)
    {
        buffer[i] *= 32767;
        
        audiobytes[i*2] = (byte) buffer[i];
        audiobytes[i*2 + 1] = (byte)((int)buffer[i] >> 8 );
    }
    
    return audiobytes;
}

这是我在代码中更新的内容

pcm8 := make([]byte, frameSize * 2)
    for i := 0; i < frameSize; i++ {
        //pcm[i] *= 32767 // uncomment when pcm array is float insteand of int16
        pcm8[i*2] =  byte(uint16(pcm[i]))
        pcm8[i*2 + 1] = byte(uint16(pcm[i]) >> 8)
    }

理论要掌握，实操不能落！以上关于《如何播放 opus 解码帧，或将 1 字节 pcm16 拆分为 2 字节 pcm(bitDepthInBytes)？》的详细介绍，大家都掌握了吧！如果想要继续提升自己的能力，那么就来关注golang学习网公众号吧！