Skip to content
TheChatArchiveThe Chat Archive
gpt-4o-mini-2024-07-18· OpenAIAi2 WildChat-4.8M (AI2)

Результатом вызова API-функции является Sequence of bytes of the synthesized audio in…

  1. User

    Результатом вызова API-функции является Sequence of bytes of the synthesized audio in format specified in output_audio_spec output_audio_spec это 22050 Hz, linear 16-bit signed little-endian PCM, with WAV header

    мне нужен js код, который преобразует результат API-функции в Buffer с указанным output_audio_spec

  2. Assistant

    Чтобы преобразовать последовательность байтов, полученную от API, в Buffer с заданным форматом (22050 Гц, линейный 16-битный signed little-endian PCM с заголовком WAV), нужно создать правильный заголовок WAV, а затем объединить его с данными аудио.

    Вот пример JavaScript кода для этого:

    function createWavFile(audioData) {
        const sampleRate = 22050; // Частота дискретизации
        const bytesPerSample = 2; // 16 бит = 2 байта
        const numChannels = 1; // Моно
        const dataSize = audioData.length; // Размер данных
    
        // Заголовок WAV
        const header = Buffer.alloc(44);
        header.write('RIFF', 0); // "RIFF" заголовок
        header.writeUInt32LE(36 + dataSize, 4); // Общий размер файла
        header.write('WAVE', 8); // "WAVE" заголовок
        header.write('fmt ', 12); // "fmt " заголовок
        header.writeUInt32LE(16, 16); // Размер структуры fmt
        header.writeUInt16LE(1, 20); // AudioFormat (1 = PCM)
        header.writeUInt16LE(numChannels, 22); // Количество каналов
        header.writeUInt32LE(sampleRate, 24); // Частота дискретизации
        header.writeUInt32LE(sampleRate * numChannels * bytesPerSample, 28); // byte rate
        header.writeUInt16LE(numChannels * bytesPerSample, 32); // block align
        header.writeUInt16LE(8 * bytesPerSample, 34); // bits per sample
        header.write('data', 36); // "data" заголовок
        header.writeUInt32LE(dataSize, 40); // Размер данных
    
        // Создаем WAV файл
        const wavFile = Buffer.concat([header, audioData]);
    
        return wavFile;
    }
    
    // Пример использования:
    // Предположим, apiResponse - это результат вызова вашей функции API, который является массивом байтов
    const apiResponse = new Uint8Array(/* Ваши байты аудио */);
    const audioData = Buffer.from(apiResponse); // Преобразуем в Buffer
    const wavBuffer = createWavFile(audioData);
    
    // Теперь wavBuffer содержит WAV-файл, который можно сохранить или передать.
    

    Объяснение кода:

    1. Создание заголовка WAV: Заголовок WAV состоит из фиксированной структуры, и в этом коде мы используем Buffer.alloc(44) для создания заголовка размером 44 байта.

    2. Заполнение заголовка:

      • Заголовок начинается с RIFF и далее указывается общий размер файла, тип WAVE, и дополнительная информация о формате аудио (кодек, количество каналов, частота дискретизации и так далее).
    3. Объединение заголовка и аудиоданных: Используем Buffer.concat для объединения заголовка и аудиоданных в один Buffer.

    4. Пример использования: Вам нужно будет заменить apiResponse на данные, которые вы получаете от вашего API.

    Этот код создаст WAV файл, который можно записать в файл или передать дальше по вашему коду.

  3. User

    apiResponse это строка, а не Uint8Array

  4. Assistant

    Если apiResponse — это строка, то вам нужно сначала преобразовать эту строку в Buffer. В зависимости от того, как именно представлен этот результат в виде строки, есть несколько подходов. Предположим, что строка содержит байты в шестнадцатеричном формате или в виде base64. Я покажу, как это сделать для обоих случаев.

    1. Если строка в формате Base64

    Если ваш apiResponse представлен в виде строки Base64, вы можете создать Buffer следующим образом:

    function createWavFile(audioData) {
        const sampleRate = 22050; // Частота дискретизации
        const bytesPerSample = 2; // 16 бит = 2 байта
        const numChannels = 1; // Моно
        const dataSize = audioData.length; // Размер данных
    
        // Заголовок WAV
        const header = Buffer.alloc(44);
        header.write('RIFF', 0); // "RIFF" заголовок
        header.writeUInt32LE(36 + dataSize, 4); // Общий размер файла
        header.write('WAVE', 8); // "WAVE" заголовок
        header.write('fmt ', 12); // "fmt " заголовок
        header.writeUInt32LE(16, 16); // Размер структуры fmt
        header.writeUInt16LE(1, 20); // AudioFormat (1 = PCM)
        header.writeUInt16LE(numChannels, 22); // Количество каналов
        header.writeUInt32LE(sampleRate, 24); // Частота дискретизации
        header.writeUInt32LE(sampleRate * numChannels * bytesPerSample, 28); // byte rate
        header.writeUInt16LE(numChannels * bytesPerSample, 32); // block align
        header.writeUInt16LE(8 * bytesPerSample, 34); // bits per sample
        header.write('data', 36); // "data" заголовок
        header.writeUInt32LE(dataSize, 40); // Размер данных
    
        // Создаем WAV файл
        const wavFile = Buffer.concat([header, audioData]);
    
        return wavFile;
    }
    
    // Пример использования:
    const apiResponse = 'Ваши_Bas64_data'; // Замените на вашу строку Base64
    const audioData = Buffer.from(apiResponse, 'base64'); // Преобразуем строку Base64 в Buffer
    const wavBuffer = createWavFile(audioData);
    
    // Теперь wavBuffer содержит WAV-файл, который можно сохранить или передать.
    

    2. Если строка в формате шестнадцатеричных данных

    Если строка содержит данные в шестнадцатеричном формате, то код будет выглядеть так:

    function createWavFile(audioData) {
        const sampleRate = 22050; // Частота дискретизации
        const bytesPerSample = 2; // 16 бит = 2 байта
        const numChannels = 1; // Моно
        const dataSize = audioData.length; // Размер данных
    
        // Заголовок WAV
        const header = Buffer.alloc(44);
        header.write('RIFF', 0); // "RIFF" заголовок
        header.writeUInt32LE(36 + dataSize, 4); // Общий размер файла
        header.write('WAVE', 8); // "WAVE" заголовок
        header.write('fmt ', 12); // "fmt " заголовок
        header.writeUInt32LE(16, 16); // Размер структуры fmt
        header.writeUInt16LE(1, 20); // AudioFormat (1 = PCM)
        header.writeUInt16LE(numChannels, 22); // Количество каналов
        header.writeUInt32LE(sampleRate, 24); // Частота дискретизации
        header.writeUInt32LE(sampleRate * numChannels * bytesPerSample, 28); // byte rate
        header.writeUInt16LE(numChannels * bytesPerSample, 32); // block align
        header.writeUInt16LE(8 * bytesPerSample, 34); // bits per sample
        header.write('data', 36); // "data" заголовок
        header.writeUInt32LE(dataSize, 40); // Размер данных
    
        // Создаем WAV файл
        const wavFile = Buffer.concat([header, audioData]);
    
        return wavFile;
    }
    
    // Пример использования:
    const apiResponse = 'Ваши_шестнадцатеричные_данные'; // Замените на вашу строку в hex
    const audioData = Buffer.from(apiResponse, 'hex'); // Преобразуем строку hex в Buffer
    const wavBuffer = createWavFile(audioData);
    
    // Теперь wavBuffer содержит WAV-файл, который можно сохранить или передать.
    

    Как сохранить WAV в файл

    Если вам нужно сохранить полученный WAV-файл на диск, вы можете использовать модуль fs:

    const fs = require('fs');
    fs.writeFileSync('output.wav', wavBuffer);
    

    Выберите соответствующий код в зависимости от формата ваших данных (Base64 или hex).