Преобразование 16-битных масштабированных данных PCM в данные PCM с плавающей запятой C ++ - PullRequest
Новая
       84

Преобразование 16-битных масштабированных данных PCM в данные PCM с плавающей запятой C ++

0 голосов
/ 24 апреля 2020

Я не могу конвертировать между 16-битными масштабированными данными PCM и данными PCM с плавающей запятой в C ++. Я думаю, что я должен быть близко, потому что вывод звука несколько напоминает то, что я ожидаю, но он искажен.

Причина, по которой я это делаю, заключается в том, что я запускаю игры ScummVM в браузере. Код ScummVM работает на сервере, а мой пользовательский код размещает аудио и изображения на веб-сайте. Я использую «Web-Audio Api» для воспроизведения звука в JavaScript на передней панели.

Я пытаюсь предоставить необработанные данные PCM, сегментированные по каналам, в JavaScript. Моя логика c заключается в том, что задержка будет меньше, если не требуется декодирование.

Я знаю, что аудиоданные должны быть хорошими, потому что я успешно преобразовал их в формат волнового файла и воспроизвел их.

Я пытаюсь получить многомерный массив чисел с плавающей точкой. Первое измерение представляет канал, а второе - пример данных для этого канала.

Прошу не обсуждать полезность проекта. Для меня это учебный проект, а не попытка создать широко используемый продукт.

Вот мой алгоритм с комментариями, описывающими мои рассуждения.

C ++ Side 

typedef unsigned char byte;
double** OSystem_Cli::mixCallback(uint len)
{
    const int NO_CHANNELS = 2;
    double** result = new double*[NO_CHANNELS];
    int sampleSize = len;
    byte* samples = new byte[len];

    _mixerImpl->mixCallback(samples, len);  //Get the 16-bit PCM audio from Scumm VM. eg. [91,11,91,11 . . .] and stores it in samples

    for (int channel = 0; channel < NO_CHANNELS; channel++)
    {
        for (int byteNo = channel * 2, channelByteNo = 0; byteNo < sampleSize - 1; byteNo = byteNo + NO_CHANNELS * 2, channelByteNo++)
        {
            if (channelByteNo == 0)
            {
                result[channel] = new double[sampleSize / NO_CHANNELS / 2];
            }
            unsigned short unsignedCombination = (static_cast<unsigned short>(samples[byteNo]) << 8) + samples[byteNo + 1]; //Join two bytes together to get 1 sixteen bit number. 
            short signedCombination;

            memcpy(&signedCombination, &unsignedCombination, sizeof(signedCombination));

            double signedFloat = static_cast<double>(signedCombination);
            signedFloat = signedFloat / (float)32768;  //Divide it to get the floating point representation, as https://stackoverflow.com/questions/15087668/how-to-convert-pcm-samples-in-byte-array-as-floating-point-numbers-in-the-range states.

            if (signedFloat > 1)
            {
                signedFloat = 1;
            }
            else if (signedFloat < -1)
            {
                signedFloat = -1;
            }
            result[channel][channelByteNo] = signedFloat;

        }
    }
    delete[] samples;

    return result;
}

JavaScript Side (в текстовом скрипте): 

   pushOntoAudioQueue(pcmBytesByChannel: number[][]) {
        const streamer: WebAudioStreamer = this;
        const samplePartsPerChannel = pcmBytesByChannel[0].length;
        const noChannels = pcmBytesByChannel.length;

        if (this.audioStack.length > MaxQueueLength) {
            this.audioStack = [];
        }

        const buffer = this.context.createBuffer(noChannels, samplePartsPerChannel, 16000); //Length is total number of bytes for all channels

        for (let channel = 0; channel < noChannels; channel++) {
            let float32ChannelData = new Float32Array(pcmBytesByChannel[channel].length); 
            float32ChannelData.set(pcmBytesByChannel[channel]);
            buffer.copyToChannel(float32ChannelData, channel);
        }

       streamer.audioQueue.push(buffer);
    }

1 Ответ

0 голосов
/ 25 апреля 2020

Я получил ответ на этот вопрос с другого форума. Мой порядковый номер был неправильным, я предполагал большой порядок, когда данные PCM были небольшими.

Пожалуйста, смотрите: http://cplusplus.com/forum/general/269888/

...