Skip to content
TheChatArchiveThe Chat Archive
gpt-4.1-mini-2025-04-14· OpenAIAi2 WildChat-4.8M (AI2)

как захватить и вывести поток данных ffmpeg -i rtsp://192.168.1.168/0

  1. User

    как захватить и вывести поток данных ffmpeg -i rtsp://192.168.1.168/0

  2. Assistant

    Чтобы захватить и вывести поток данных с RTSP с помощью ffmpeg, можно использовать следующую команду:

    ffmpeg -i rtsp://192.168.1.168/0 -f sdl "RTSP Stream"
    

    Но если ваша задача — просто получить и вывести видео в окне (например, для просмотра), то обычно удобнее использовать ffplay (он идет в комплекте с ffmpeg):

    ffplay rtsp://192.168.1.168/0
    

    Если же нужно захватить поток и сохранить его, например, в файл:

    ffmpeg -i rtsp://192.168.1.168/0 -c copy output.mp4
    

    Где:

    • -i rtsp://192.168.1.168/0 — входящий поток,
    • -c copy — копирует кодеки без перекодирования,
    • output.mp4 — имя выходного файла.

    Если требуется перекодировать поток и вывести в реальном времени (например, в другой формат), можно сделать так:

    ffmpeg -i rtsp://192.168.1.168/0 -f mpegts udp://127.0.0.1:1234
    

    Это отправит перекодированный поток на локальный UDP-порт.


    Общие рекомендации:

    • Если RTSP поток недоступен, проверьте IP-адрес и URL камеры.
    • Для RTSP часто требуется добавить параметры для стабильности, например, -rtsp_transport tcp, чтобы использовать TCP вместо UDP:
    ffmpeg -rtsp_transport tcp -i rtsp://192.168.1.168/0 -c copy output.mp4
    

    Если нужно помочь с конкретной задачей — просмотр, сохранение, трансляция — уточните, пожалуйста.

  3. User

    нужна правильная ссылка от камеры HeroSpeed RV1109_IMX307

  4. Assistant

    Камера HeroSpeed RV1109 с сенсором IMX307 – это IP-камера, использующая RTSP протокол для потоковой передачи видео. Правильная RTSP-ссылка для подключения к такой камере сильно зависит от её прошивки, настроек и производителя, но я могу дать типичные примеры и алгоритм, как её получить.


    1. Типичная RTSP-ссылка для RV1109_IMX307

    В большинстве камер с чипсетом RV1109 стандартный формат RTSP ссылки похож на этот:

    rtsp://<пользователь>:<пароль>@<IP-адрес>:554/hl
    

    Или

    rtsp://<пользователь>:<пароль>@<IP-адрес>:554/ch0_0.264
    

    Где:

    • <пользователь> — логин камеры (по умолчанию часто admin),
    • <пароль> — пароль (часто admin или пустой),
    • <IP-адрес> — IP камеры в локальной сети,
    • 554 — стандартный RTSP порт (если не менялся),
    • /hl или /ch0_0.264 — путь к RTSP потоку (зависит от прошивки).

    2. Примеры ссылок:

    • Без авторизации (или если пользователь и пароль не нужны):
    rtsp://192.168.1.168:554/hl
    
    • С авторизацией (замените user и pass на ваши):
    rtsp://user:pass@192.168.1.168:554/hl
    

    или

    rtsp://user:pass@192.168.1.168:554/ch0_0.264
    

    3. Поиск точной RTSP-ссылки:

    • Проверьте документацию к вашей камере HeroSpeed RV1109_IMX307.
    • Иногда фирменные приложения (например, мобильное приложение производителя) показывают точную RTSP ссылку или позволяют скачать конфигурацию.
    • Если приложение поддерживает ONVIF, можно попытаться определить RTSP-ссылку через ONVIF client.
    • В некоторых случаях используется порт 8554 или другой (не 554).

    4. Пример команды ffmpeg с использованием RTSP:

    ffmpeg -rtsp_transport tcp -i rtsp://user:pass@192.168.1.168:554/hl -c copy output.mp4
    

    5. Что делать, если стандартные ссылки не работают?

    • Попробуйте узнать точный порт и путь к видео через веб-интерфейс камеры.
    • Попробуйте сканировать открытые порты камеры (nmap 192.168.1.168) и найти RTSP порт.
    • Используйте программы для анализа потоков, например, ONVIF Device Manager — чтобы получить точный URL.
    • Если камера имеет веб-интерфейс, войдите туда и посмотрите настройки стрима.

    Если у вас есть доступ к документации камеры или к её веб-интерфейсу, сообщите детали — помогу составить точную ссылку.

  5. User

    [rtsp @ 0x5e730] video codec set to: h264 [rtsp @ 0x5e730] RTP Packetization Mode: 1 [rtsp @ 0x5e730] Missing PPS in sprop-parameter-sets, ignoring [rtsp @ 0x5e730] audio codec set to: pcm_mulaw [rtsp @ 0x5e730] audio samplerate set to: 8000 [rtsp @ 0x5e730] audio channels set to: 1 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] hello state=0 1 2025-06-28 13:36:11.305534412: длительность: 0.700476 s 0.700 [rtsp @ 0x5e730] Non-increasing DTS in stream 1: packet 3 with DTS 3112, packet 4 with DTS 3112 [h264 @ 0x63000] nal_unit_type: 7(SPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 8(PPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 5(IDR), nal_ref_idc: 3 [h264 @ 0x63000] Format yuv420p chosen by get_format(). [h264 @ 0x63000] Reinit context to 1280x720, pix_fmt: yuv420p [rtsp @ 0x5e730] Probe buffer size limit of 30000 bytes reached [rtsp @ 0x5e730] Stream #0: not enough frames to estimate rate; consider increasing probesize [rtsp @ 0x5e730] decoding for stream 0 failed 2 2025-06-28 13:36:12.146146037: длительность: 1.541056 s 1.541 Segmentation fault [root@luckfox ppp]#

    вот код printf("2 %s: длительность: %s %.3f\n", GLOBAL_TIME_PRINT(), GLOBAL_TIME_END_PRNT(START), GLOBAL_TIME_END(START));

    	*video_stream_idx = -1;
    	enum AVCodecID codec_id = AV_CODEC_ID_NONE;
    	AVCodecParameters *codecpar = NULL;
    	for (int i = 0; i < (int)(*fmt_ctx)->nb_streams; i++) {
    			if ((*fmt_ctx)->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
    					codecpar = (*fmt_ctx)->streams[i]->codecpar;
    					if (codecpar->codec_id == AV_CODEC_ID_H264 || codecpar->codec_id == AV_CODEC_ID_HEVC) {
    							*video_stream_idx = i;
    							codec_id = codecpar->codec_id;
    							break;
    					}
    			}
    	}
    

    printf("3 %s: длительность: %s %.3f\n", GLOBAL_TIME_PRINT(), GLOBAL_TIME_END_PRNT(START), GLOBAL_TIME_END(START));

  6. Assistant

    Ошибка Segmentation fault при работе с RTSP потоком через FFmpeg API возникает, скорее всего, из-за неправильной обработки данных после открытия потока, либо из-за некорректной инициализации/проверок.

    Разберём вывод ffmpeg и ваш фрагмент кода:


    Стек и ошибки в логе

    • В логе есть стандартные сообщения от демультиплексера RTSP и кодека H264.

    • Есть предупреждение про missing PPS, затем ошибки связанные с DTS:

      [rtsp @ 0x5e730] Non-increasing DTS in stream 1: packet 3 with DTS 3112, packet 4 with DTS 3112
      

      Это обычно не критично, но говорит про возможные проблемы с таймингом пакетов.

    • Далее важное сообщение:

      [rtsp @ 0x5e730] Stream #0: not enough frames to estimate rate; consider increasing probesize
      [rtsp @ 0x5e730] decoding for stream 0 failed
      Segmentation fault
      

    Причиной может быть то, что FFmpeg не получил достаточно данных для определения параметров потока. Возможно, probesize слишком мал.


    Ваш код (фрагмент):

    *video_stream_idx = -1;
    enum AVCodecID codec_id = AV_CODEC_ID_NONE;
    AVCodecParameters *codecpar = NULL;
    
    for (int i = 0; i < (int)(*fmt_ctx)->nb_streams; i++) {
        if ((*fmt_ctx)->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
            codecpar = (*fmt_ctx)->streams[i]->codecpar;
            if (codecpar->codec_id == AV_CODEC_ID_H264 || codecpar->codec_id == AV_CODEC_ID_HEVC) {
                *video_stream_idx = i;
                codec_id = codecpar->codec_id;
                break;
            }
        }
    }
    

    Что проверить и исправить:

    1. Проверка avformat_open_input и avformat_find_stream_info:

    Убедитесь, что вы правильно вызываете avformat_find_stream_info() с увеличенным probesize и max_analyze_duration, например:

    (*fmt_ctx)->probesize = 50 * 1024 * 1024;             // 50 MB
    (*fmt_ctx)->max_analyze_duration = 5 * AV_TIME_BASE;  // 5 секунд
    

    Или при открытии указать опции:

    AVDictionary *opts = NULL;
    av_dict_set(&opts, "rtsp_transport", "tcp", 0);
    av_dict_set(&opts, "probesize", "50000000", 0);
    av_dict_set(&opts, "max_analyze_duration", "5000000", 0); // в микросекундах
    ret = avformat_open_input(fmt_ctx, url, NULL, &opts);
    av_dict_free(&opts);
    
    ret = avformat_find_stream_info(*fmt_ctx, NULL);
    

    Если времени анализа недостаточно — может не быть корректных данных в codecpar.

    1. Проверка возвращаемых значений:

    Перед обращением к codecpar и другим данным в вашем цикле нужно проверить, что (*fmt_ctx)->streams[i] != NULL. Также codecpar не NULL.

    Пример:

    for (int i = 0; i < (int)(*fmt_ctx)->nb_streams; i++) {
        AVStream *stream = (*fmt_ctx)->streams[i];
        if (!stream || !stream->codecpar)
            continue;
        if (stream->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
            codecpar = stream->codecpar;
            if (codecpar->codec_id == AV_CODEC_ID_H264 || codecpar->codec_id == AV_CODEC_ID_HEVC) {
                *video_stream_idx = i;
                codec_id = codecpar->codec_id;
                break;
            }
        }
    }
    
    1. Проверка корректности индекса потока

    *video_stream_idx может остаться -1, если никаких видео потоков не найдено. Используйте проверки перед дальнейшей работой.

    1. Инициализация и выделение декодера

    После того, как вы нашли видео поток, не забудьте корректно открыть декодер перед обработкой кадров:

    AVCodec *decoder = avcodec_find_decoder(codec_id);
    if (!decoder) {
        fprintf(stderr, "Decoder not found\n");
        return -1;
    }
    
    AVCodecContext *dec_ctx = avcodec_alloc_context3(decoder);
    if (!dec_ctx) {
        fprintf(stderr, "Could not allocate codec context\n");
        return -1;
    }
    
    ret = avcodec_parameters_to_context(dec_ctx, codecpar);
    if (ret < 0) {
        fprintf(stderr, "Failed to copy codec parameters to decoder context\n");
        return -1;
    }
    
    ret = avcodec_open2(dec_ctx, decoder, NULL);
    if (ret < 0) {
        fprintf(stderr, "Failed to open codec\n");
        return -1;
    }
    
    1. Учитывайте, что аудиопоток у вас с кодеком pcm_mulaw и может быть нестандартным — если вы не обрабатываете звук, попробуйте игнорировать аудио поток

    2. Отладка

    Чтобы понять в каком именно месте происходит segmentation fault, используйте отладчик (gdb), или вставьте вызовы проверки ошибок после каждого шага.


    Итоговые рекомендации:

    • Увеличьте параметры probesize и max_analyze_duration при открытии RTSP потока.
    • Добавьте проверки на NULL и значения возвращаемых функций.
    • Корректно найдите видео поток и инициализируйте декодер.
    • Проверьте, что у вас достаточно данных для анализа потока.
    • Используйте логирование/отладчик, чтобы локализовать сегфолт.

    Если нужно, могу помочь составить полный пример кода для подключения RTSP потока через ffmpeg API с учётом этих рекомендаций. Просто скажите.

  7. User

    ./zzz [tcp @ 0x61540] No default whitelist set [tcp @ 0x61540] Original list of addresses: [tcp @ 0x61540] Address 192.168.1.168 port 554 [tcp @ 0x61540] Interleaved list of addresses: [tcp @ 0x61540] Address 192.168.1.168 port 554 [tcp @ 0x61540] Starting connection attempt to 192.168.1.168 port 554 [tcp @ 0x61540] Successfully connected to 192.168.1.168 port 554 [rtsp @ 0x5e730] SDP: v=0 o=StreamingServer 3331435948 1116907222000 IN IP4 192.168.1.168 s=h264.mp4 c=IN IP4 0.0.0.0 t=0 0 a=control:* m=video 0 RTP/AVP 96 a=control:trackID=0 a=rtpmap:96 H264/90000 a=fmtp:96 packetization-mode=1; sprop-parameter-sets= a=videoinfo:12807203*4096 m=audio 0 RTP/AVP 0 a=control:trackID=1 a=rtpmap:0 PCMU/8000 a=ptime:20

    [rtsp @ 0x5e730] video codec set to: h264 [rtsp @ 0x5e730] RTP Packetization Mode: 1 [rtsp @ 0x5e730] Missing PPS in sprop-parameter-sets, ignoring [rtsp @ 0x5e730] audio codec set to: pcm_mulaw [rtsp @ 0x5e730] audio samplerate set to: 8000 [rtsp @ 0x5e730] audio channels set to: 1 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] hello state=0 1 2025-06-28 13:39:51.674209182: длительность: 0.462623 s 0.463 [h264 @ 0x63000] nal_unit_type: 7(SPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 8(PPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 5(IDR), nal_ref_idc: 3 [h264 @ 0x63000] Format yuv420p chosen by get_format(). [h264 @ 0x63000] Reinit context to 1280x720, pix_fmt: yuv420p [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [rtsp @ 0x5e730] All info found 2 2025-06-28 13:40:01.310671098: длительность: 10.099123 s 10.099 Segmentation fault

    	av_dict_set(&options, "max_delay", "30", 0);                 // минимальная задержка
    	av_dict_set(&options, "rtsp_transport", "tcp", 0);           // TCP для надежности (зависит от сети, можно udp)
    	//av_dict_set(&options, "timeout", "5000000", 0);              // timeout 0.5 сек (500000 мкс)
    	av_dict_set(&options, "buffer_size", "32768", 0);            // сократить буфер до 32 Кб
    	av_dict_set(&options, "probesize", "50000000", 0);              // уменьшить анализ с 50 до 30 Кб
    	av_dict_set(&options, "analyzeduration", "10000000", 0);       // уменьшить анализ с 0.5до   0.3 сек
    	//av_dict_set(&options, "fflags", "nobuffer", 0);              // отключить буфер
    	av_dict_set(&options, "fflags", "genpts", 0);                    // генерируем таймштамы, убираем nobuffer
    	av_dict_set(&options, "flags", "low_delay", 0);              // режим низкой задержки
    	av_dict_set(&options, "tune", "zerolatency", 0);             // оптимизация нулевой задержки
    
  8. Assistant

    Ситуация следующая:

    • Вы получаете сегфолт после успешного открытия RTSP-потока и начала декодирования H264.
    • Лог показывает, что SDL/FFmpeg получает SPS/PPS, начинает получать кадры.
    • Настройки опций RTSP вроде разумны — rtsp_transport=tcp, probesize=50M, analyzeduration=10M (10 секунд), genpts для генерации таймштампов.
    • Тем не менее сегфолт случается где-то после ~10 секунд работы.

    Где искать проблему?

    1. Причина сегфолта — по описанию и логам, скорее всего в работе вашего кода с объектами FFmpeg, например:
    • неверная работа с памятью — неинициализированные указатели,
    • неправильная обработка или освобождение пакетов/кадров,
    • обращение к полям из NULL-указателя или неверно интерпретируемым структурам.
    1. Судя по ранее показанному коду — надо добавить дополнительные проверки и валидировать, что вы не обращаетесь к данным по NULL.

    2. Опция probesize = "50000000" (50 Мб) — это очень много, но не проблема per se, можно оставить.

    3. buffer_size 32К — не очень большой, может вызвать переполнение, замените на более привычный 1М (1048576):

    av_dict_set(&options, "buffer_size", "1048576", 0);
    
    1. Проверьте, как вы читаете кадры и освобождаете ссылки:
    • Каждый av_read_frame() возвращает пакет AVPacket.
    • После обработки обязательно вызывайте av_packet_unref().

    Пример цикла:

    while (av_read_frame(fmt_ctx, &pkt) >= 0) {
        if (pkt.stream_index == video_stream_idx) {
            ret = avcodec_send_packet(dec_ctx, &pkt);
            if (ret < 0) {
                fprintf(stderr, "Error sending a packet for decoding\n");
                break;
            }
            while (ret >= 0) {
                ret = avcodec_receive_frame(dec_ctx, frame);
                if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF)
                    break;
                else if (ret < 0) {
                    fprintf(stderr, "Error during decoding\n");
                    goto end;
                }
                // Обработка кадра...
    
                av_frame_unref(frame);
            }
        }
        av_packet_unref(&pkt);
    }
    
    • Проверьте, что frame выделен и инициализирован (av_frame_alloc()), а dec_ctx — корректно открыт.
    1. Параметры max_delay = 30 — в документации FFmpeg указывают единицы в микросекундах, либо миллисекундах (зависит от контекста). Возможно, 30 слишком мало (что значит 30 микросекунд?). Попробуйте увеличить, например:
    av_dict_set(&options, "max_delay", "500000", 0); // 500 мс – более привычный вариант
    
    1. Разделите часть опций и уберите не нужные для теста, оставив только:
    av_dict_set(&options, "rtsp_transport", "tcp", 0);
    av_dict_set(&options, "buffer_size", "1048576", 0);
    av_dict_set(&options, "max_delay", "500000", 0);
    av_dict_set(&options, "probesize", "5000000", 0);
    av_dict_set(&options, "analyzeduration", "5000000", 0);
    
    1. Полезна отладка с ASAN (AddressSanitizer) или запуск в gdb для точного места segfault.

    2. Если сегфолт внутри библиотеки — возможно баг FFmpeg с данной камере/потоком или нестандартным sprop-parameter-sets (которые идут пустыми).

    • Попробуйте обойти проблему установкой опции демультиплексера, например:
    av_dict_set(&options, "skip_sdp", "1", 0);
    
    • Или использовать кастомные extradata в AVCodecParameters.

    Итог

    Вам нужно:

    • Убедиться, что код правильно читает и освобождает пакеты и фреймы (av_packet_unref, av_frame_unref).
    • Проверить корректность возвращаемых значений после каждого вызова.
    • Подобрать более адекватные параметры buffer_size и max_delay.
    • Подключить отладку для локализации сегфолта.
    • Возможно, заранее инициализировать или подготавливать SPS/PPS вручную, если камера их не передает корректно (empty sprop-parameter-sets).

    Если нужно, могу помочь с примером минимального работающего кода для чтения RTSP потока из такой камеры с обработкой ошибки.


    Если хотите — пришлите полный минимальный фрагмент кода (от открытия потока до обнаружения сегфолта) — помогу локализовать ошибку.