Программно читать fMP4 с помощью ffmpeg - PullRequest
Новая
       79

Программно читать fMP4 с помощью ffmpeg

2 голосов
/ 07 апреля 2019

Все мои попытки синтаксического анализа fmp4 закончились неудачей со следующими ошибками:

avcodec_send_packet вернулись с -10949955291 и напечатали следующие ошибки: 

[h264 @ 0x105001600] No start code is found.
[h264 @ 0x105001600] Error splitting the input into NAL units.

Чтоя сделал?

Загрузил отлично воспроизводимый файл h.264 и фрагментировал его, используя следующий cmd 

ffmpeg -i long.mp4 -an -sn -vcodec libx264 -force_key_frames "expr:gte(t,n_forced*4)" -sc_threshold 0 -r 25 -f hls -hls_time 4 -hls_list_size 99999 -start_number 1 -hls_segment_type fmp4 -hls_fmp4_init_filename init.mp4 -t 30 -threads 0 big_bunny.m3u8

, и использовал следующий AVIO пример чтения 

#include <fstream>
#include <iterator>
#include <algorithm>
#include <libavcodec/avcodec.h>

std::vector<unsigned char> b1;
std::vector<unsigned char> b2;
bool initialized = false;
int bytesread = 0;

static int read_packet(void* opaque, uint8_t* buf, int buf_size)
{
    if (b1.size() && !initialized) {
        size_t bytesToRead = std::min(buf_size, (int)b1.size());
        ::memcpy(buf, b1.data(), bytesToRead);
        bytesread += bytesToRead;
        if (bytesread >= b1.size()) {
            initialized = true;
            bytesread = 0;
        }
        return bytesToRead;
    }

    ::memcpy(buf, b2.data() + bytesread, buf_size);
    bytesread += buf_size;
    return buf_size;
}

int main(int argc, char** argv)
{
    AVFormatContext* fmt_ctx = NULL;
    AVIOContext* avio_ctx = NULL;
    uint8_t *buffer = NULL, *buffer2 = nullptr, *avio_ctx_buffer = NULL;
    size_t buffer_size, buffer_size2, avio_ctx_buffer_size = 4096;
    char* input_filename = NULL;
    int ret = 0;
    struct buffer_data bd = {0};

    std::ifstream input1("/Users/x/Downloads/fmp4/init.mp4", std::ios::binary);
    std::ifstream input2("/Users/x/Downloads/fmp4/big_bunny1.m4s", std::ios::binary);

    b1 = std::vector<unsigned char>((std::istreambuf_iterator<char>(input1)), std::istreambuf_iterator<char>());
    b2 = std::vector<unsigned char>((std::istreambuf_iterator<char>(input2)), std::istreambuf_iterator<char>());

    avio_ctx_buffer = (uint8_t*)av_malloc(avio_ctx_buffer_size);

    fmt_ctx = avformat_alloc_context();
    avio_ctx = avio_alloc_context(avio_ctx_buffer, avio_ctx_buffer_size, 0, nullptr, &read_packet, NULL, NULL);
    fmt_ctx->pb = avio_ctx;

    AVDictionary* opts = NULL;
    //   av_dict_set(&opts, "movflags", "frag_keyframe+empty_moov", 0);
    ret = avformat_open_input(&fmt_ctx, NULL, NULL, &opts);
    ret = avformat_find_stream_info(fmt_ctx, NULL);

    AVCodec* decoder = nullptr;

    decoder = avcodec_find_decoder(fmt_ctx->streams[0]->codecpar->codec_id);
    AVCodecContext* decoderCtx = avcodec_alloc_context3(decoder);

    ret = avcodec_open2(decoderCtx, decoder, nullptr);

    AVPacket pkt;
    av_init_packet(&pkt);

    AVFrame* frame = av_frame_alloc();
    while (true) {
        ret = av_read_frame(fmt_ctx, &pkt);

        ret = avcodec_send_packet(decoderCtx, &pkt);
        if (ret != 0)
            assert(false);

        for (;;) {
            ret = avcodec_receive_frame(decoderCtx, frame);
            if (ret < 0) {
                break;
            }

            int g;
            g = 0;
        }
    }

Я даже не уверен, что это правильный способ обработки fmp4 типов.но для ясности этого примера я просто загрузил файл инициализации в первый буфер, а фактический медиа-файл - во второй буфер, и переключился между буферами с уважением до значения buf_size.

1 Ответ

0 голосов
/ 08 апреля 2019

Я не думаю, что в случае, если вы используете avio_alloc_context demuxer get, это вся необходимая информация - см. Открытие медиа-файла , но это дикое предположение, так как ваш вывод не показывает ошибок изmp4 demuxer, но только из парсера битового потока H.264, поэтому я полагаю, что исследуемый формат файла может быть необработанным H.264, но трудно сказать.Но если я ошибаюсь, вы не предоставили обратный вызов с поиском, и для демультиплексирования mp4, безусловно, потребовалось бы попытаться прыгнуть вокруг блоков, а затем искать примеры данных.Итак, я сначала попробую предоставить обратный вызов поиска и посмотреть, будет ли он вызван.Но из примера не ясно, зачем вам нужны обратные вызовы ввода / вывода, поскольку данные находятся в файле, а не в ячейке памяти, поэтому я бы предложил использовать стандартный способ avformat_open_input .

...