как захватить и вывести поток данных ffmpeg -i rtsp://192.168.1.168/0
- User
как захватить и вывести поток данных ffmpeg -i rtsp://192.168.1.168/0
- Assistant
Чтобы захватить и вывести поток данных с RTSP с помощью ffmpeg, можно использовать следующую команду:
ffmpeg -i rtsp://192.168.1.168/0 -f sdl "RTSP Stream"Но если ваша задача — просто получить и вывести видео в окне (например, для просмотра), то обычно удобнее использовать
ffplay(он идет в комплекте с ffmpeg):ffplay rtsp://192.168.1.168/0
Если же нужно захватить поток и сохранить его, например, в файл:
ffmpeg -i rtsp://192.168.1.168/0 -c copy output.mp4Где:
-i rtsp://192.168.1.168/0— входящий поток,-c copy— копирует кодеки без перекодирования,output.mp4— имя выходного файла.
Если требуется перекодировать поток и вывести в реальном времени (например, в другой формат), можно сделать так:
ffmpeg -i rtsp://192.168.1.168/0 -f mpegts udp://127.0.0.1:1234Это отправит перекодированный поток на локальный UDP-порт.
Общие рекомендации:
- Если RTSP поток недоступен, проверьте IP-адрес и URL камеры.
- Для RTSP часто требуется добавить параметры для стабильности, например,
-rtsp_transport tcp, чтобы использовать TCP вместо UDP:
ffmpeg -rtsp_transport tcp -i rtsp://192.168.1.168/0 -c copy output.mp4
Если нужно помочь с конкретной задачей — просмотр, сохранение, трансляция — уточните, пожалуйста.
- User
нужна правильная ссылка от камеры HeroSpeed RV1109_IMX307
- Assistant
Камера HeroSpeed RV1109 с сенсором IMX307 – это IP-камера, использующая RTSP протокол для потоковой передачи видео. Правильная RTSP-ссылка для подключения к такой камере сильно зависит от её прошивки, настроек и производителя, но я могу дать типичные примеры и алгоритм, как её получить.
1. Типичная RTSP-ссылка для RV1109_IMX307
В большинстве камер с чипсетом RV1109 стандартный формат RTSP ссылки похож на этот:
rtsp://<пользователь>:<пароль>@<IP-адрес>:554/hlИли
rtsp://<пользователь>:<пароль>@<IP-адрес>:554/ch0_0.264Где:
<пользователь>— логин камеры (по умолчанию часто admin),<пароль>— пароль (часто admin или пустой),<IP-адрес>— IP камеры в локальной сети,554— стандартный RTSP порт (если не менялся),/hlили/ch0_0.264— путь к RTSP потоку (зависит от прошивки).
2. Примеры ссылок:
- Без авторизации (или если пользователь и пароль не нужны):
rtsp://192.168.1.168:554/hl- С авторизацией (замените user и pass на ваши):
rtsp://user:pass@192.168.1.168:554/hlили
rtsp://user:pass@192.168.1.168:554/ch0_0.264
3. Поиск точной RTSP-ссылки:
- Проверьте документацию к вашей камере HeroSpeed RV1109_IMX307.
- Иногда фирменные приложения (например, мобильное приложение производителя) показывают точную RTSP ссылку или позволяют скачать конфигурацию.
- Если приложение поддерживает ONVIF, можно попытаться определить RTSP-ссылку через ONVIF client.
- В некоторых случаях используется порт 8554 или другой (не 554).
4. Пример команды ffmpeg с использованием RTSP:
ffmpeg -rtsp_transport tcp -i rtsp://user:pass@192.168.1.168:554/hl -c copy output.mp4
5. Что делать, если стандартные ссылки не работают?
- Попробуйте узнать точный порт и путь к видео через веб-интерфейс камеры.
- Попробуйте сканировать открытые порты камеры (
nmap 192.168.1.168) и найти RTSP порт. - Используйте программы для анализа потоков, например, ONVIF Device Manager — чтобы получить точный URL.
- Если камера имеет веб-интерфейс, войдите туда и посмотрите настройки стрима.
Если у вас есть доступ к документации камеры или к её веб-интерфейсу, сообщите детали — помогу составить точную ссылку.
- User
[rtsp @ 0x5e730] video codec set to: h264 [rtsp @ 0x5e730] RTP Packetization Mode: 1 [rtsp @ 0x5e730] Missing PPS in sprop-parameter-sets, ignoring [rtsp @ 0x5e730] audio codec set to: pcm_mulaw [rtsp @ 0x5e730] audio samplerate set to: 8000 [rtsp @ 0x5e730] audio channels set to: 1 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] hello state=0 1 2025-06-28 13:36:11.305534412: длительность: 0.700476 s 0.700 [rtsp @ 0x5e730] Non-increasing DTS in stream 1: packet 3 with DTS 3112, packet 4 with DTS 3112 [h264 @ 0x63000] nal_unit_type: 7(SPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 8(PPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 5(IDR), nal_ref_idc: 3 [h264 @ 0x63000] Format yuv420p chosen by get_format(). [h264 @ 0x63000] Reinit context to 1280x720, pix_fmt: yuv420p [rtsp @ 0x5e730] Probe buffer size limit of 30000 bytes reached [rtsp @ 0x5e730] Stream #0: not enough frames to estimate rate; consider increasing probesize [rtsp @ 0x5e730] decoding for stream 0 failed 2 2025-06-28 13:36:12.146146037: длительность: 1.541056 s 1.541 Segmentation fault [root@luckfox ppp]#
вот код printf("2 %s: длительность: %s %.3f\n", GLOBAL_TIME_PRINT(), GLOBAL_TIME_END_PRNT(START), GLOBAL_TIME_END(START));
*video_stream_idx = -1; enum AVCodecID codec_id = AV_CODEC_ID_NONE; AVCodecParameters *codecpar = NULL; for (int i = 0; i < (int)(*fmt_ctx)->nb_streams; i++) { if ((*fmt_ctx)->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) { codecpar = (*fmt_ctx)->streams[i]->codecpar; if (codecpar->codec_id == AV_CODEC_ID_H264 || codecpar->codec_id == AV_CODEC_ID_HEVC) { *video_stream_idx = i; codec_id = codecpar->codec_id; break; } } }printf("3 %s: длительность: %s %.3f\n", GLOBAL_TIME_PRINT(), GLOBAL_TIME_END_PRNT(START), GLOBAL_TIME_END(START));
- Assistant
Ошибка
Segmentation faultпри работе с RTSP потоком через FFmpeg API возникает, скорее всего, из-за неправильной обработки данных после открытия потока, либо из-за некорректной инициализации/проверок.Разберём вывод ffmpeg и ваш фрагмент кода:
Стек и ошибки в логе
-
В логе есть стандартные сообщения от демультиплексера RTSP и кодека H264.
-
Есть предупреждение про missing PPS, затем ошибки связанные с DTS:
[rtsp @ 0x5e730] Non-increasing DTS in stream 1: packet 3 with DTS 3112, packet 4 with DTS 3112Это обычно не критично, но говорит про возможные проблемы с таймингом пакетов.
-
Далее важное сообщение:
[rtsp @ 0x5e730] Stream #0: not enough frames to estimate rate; consider increasing probesize [rtsp @ 0x5e730] decoding for stream 0 failed Segmentation fault
Причиной может быть то, что FFmpeg не получил достаточно данных для определения параметров потока. Возможно, probesize слишком мал.
Ваш код (фрагмент):
*video_stream_idx = -1; enum AVCodecID codec_id = AV_CODEC_ID_NONE; AVCodecParameters *codecpar = NULL; for (int i = 0; i < (int)(*fmt_ctx)->nb_streams; i++) { if ((*fmt_ctx)->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) { codecpar = (*fmt_ctx)->streams[i]->codecpar; if (codecpar->codec_id == AV_CODEC_ID_H264 || codecpar->codec_id == AV_CODEC_ID_HEVC) { *video_stream_idx = i; codec_id = codecpar->codec_id; break; } } }
Что проверить и исправить:
- Проверка
avformat_open_inputиavformat_find_stream_info:
Убедитесь, что вы правильно вызываете
avformat_find_stream_info()с увеличеннымprobesizeиmax_analyze_duration, например:(*fmt_ctx)->probesize = 50 * 1024 * 1024; // 50 MB (*fmt_ctx)->max_analyze_duration = 5 * AV_TIME_BASE; // 5 секундИли при открытии указать опции:
AVDictionary *opts = NULL; av_dict_set(&opts, "rtsp_transport", "tcp", 0); av_dict_set(&opts, "probesize", "50000000", 0); av_dict_set(&opts, "max_analyze_duration", "5000000", 0); // в микросекундах ret = avformat_open_input(fmt_ctx, url, NULL, &opts); av_dict_free(&opts); ret = avformat_find_stream_info(*fmt_ctx, NULL);Если времени анализа недостаточно — может не быть корректных данных в
codecpar.- Проверка возвращаемых значений:
Перед обращением к
codecparи другим данным в вашем цикле нужно проверить, что(*fmt_ctx)->streams[i]!= NULL. Такжеcodecparне NULL.Пример:
for (int i = 0; i < (int)(*fmt_ctx)->nb_streams; i++) { AVStream *stream = (*fmt_ctx)->streams[i]; if (!stream || !stream->codecpar) continue; if (stream->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) { codecpar = stream->codecpar; if (codecpar->codec_id == AV_CODEC_ID_H264 || codecpar->codec_id == AV_CODEC_ID_HEVC) { *video_stream_idx = i; codec_id = codecpar->codec_id; break; } } }- Проверка корректности индекса потока
*video_stream_idxможет остаться-1, если никаких видео потоков не найдено. Используйте проверки перед дальнейшей работой.- Инициализация и выделение декодера
После того, как вы нашли видео поток, не забудьте корректно открыть декодер перед обработкой кадров:
AVCodec *decoder = avcodec_find_decoder(codec_id); if (!decoder) { fprintf(stderr, "Decoder not found\n"); return -1; } AVCodecContext *dec_ctx = avcodec_alloc_context3(decoder); if (!dec_ctx) { fprintf(stderr, "Could not allocate codec context\n"); return -1; } ret = avcodec_parameters_to_context(dec_ctx, codecpar); if (ret < 0) { fprintf(stderr, "Failed to copy codec parameters to decoder context\n"); return -1; } ret = avcodec_open2(dec_ctx, decoder, NULL); if (ret < 0) { fprintf(stderr, "Failed to open codec\n"); return -1; }-
Учитывайте, что аудиопоток у вас с кодеком pcm_mulaw и может быть нестандартным — если вы не обрабатываете звук, попробуйте игнорировать аудио поток
-
Отладка
Чтобы понять в каком именно месте происходит
segmentation fault, используйте отладчик (gdb), или вставьте вызовы проверки ошибок после каждого шага.
Итоговые рекомендации:
- Увеличьте параметры
probesizeиmax_analyze_durationпри открытии RTSP потока. - Добавьте проверки на
NULLи значения возвращаемых функций. - Корректно найдите видео поток и инициализируйте декодер.
- Проверьте, что у вас достаточно данных для анализа потока.
- Используйте логирование/отладчик, чтобы локализовать сегфолт.
Если нужно, могу помочь составить полный пример кода для подключения RTSP потока через ffmpeg API с учётом этих рекомендаций. Просто скажите.
-
- User
./zzz [tcp @ 0x61540] No default whitelist set [tcp @ 0x61540] Original list of addresses: [tcp @ 0x61540] Address 192.168.1.168 port 554 [tcp @ 0x61540] Interleaved list of addresses: [tcp @ 0x61540] Address 192.168.1.168 port 554 [tcp @ 0x61540] Starting connection attempt to 192.168.1.168 port 554 [tcp @ 0x61540] Successfully connected to 192.168.1.168 port 554 [rtsp @ 0x5e730] SDP: v=0 o=StreamingServer 3331435948 1116907222000 IN IP4 192.168.1.168 s=h264.mp4 c=IN IP4 0.0.0.0 t=0 0 a=control:* m=video 0 RTP/AVP 96 a=control:trackID=0 a=rtpmap:96 H264/90000 a=fmtp:96 packetization-mode=1; sprop-parameter-sets= a=videoinfo:12807203*4096 m=audio 0 RTP/AVP 0 a=control:trackID=1 a=rtpmap:0 PCMU/8000 a=ptime:20
[rtsp @ 0x5e730] video codec set to: h264 [rtsp @ 0x5e730] RTP Packetization Mode: 1 [rtsp @ 0x5e730] Missing PPS in sprop-parameter-sets, ignoring [rtsp @ 0x5e730] audio codec set to: pcm_mulaw [rtsp @ 0x5e730] audio samplerate set to: 8000 [rtsp @ 0x5e730] audio channels set to: 1 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] setting jitter buffer size to 0 [rtsp @ 0x5e730] hello state=0 1 2025-06-28 13:39:51.674209182: длительность: 0.462623 s 0.463 [h264 @ 0x63000] nal_unit_type: 7(SPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 8(PPS), nal_ref_idc: 3 [h264 @ 0x63000] nal_unit_type: 5(IDR), nal_ref_idc: 3 [h264 @ 0x63000] Format yuv420p chosen by get_format(). [h264 @ 0x63000] Reinit context to 1280x720, pix_fmt: yuv420p [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [h264 @ 0x63000] nal_unit_type: 1(Coded slice of a non-IDR picture), nal_ref_idc: 1 [rtsp @ 0x5e730] All info found 2 2025-06-28 13:40:01.310671098: длительность: 10.099123 s 10.099 Segmentation fault
av_dict_set(&options, "max_delay", "30", 0); // минимальная задержка av_dict_set(&options, "rtsp_transport", "tcp", 0); // TCP для надежности (зависит от сети, можно udp) //av_dict_set(&options, "timeout", "5000000", 0); // timeout 0.5 сек (500000 мкс) av_dict_set(&options, "buffer_size", "32768", 0); // сократить буфер до 32 Кб av_dict_set(&options, "probesize", "50000000", 0); // уменьшить анализ с 50 до 30 Кб av_dict_set(&options, "analyzeduration", "10000000", 0); // уменьшить анализ с 0.5до 0.3 сек //av_dict_set(&options, "fflags", "nobuffer", 0); // отключить буфер av_dict_set(&options, "fflags", "genpts", 0); // генерируем таймштамы, убираем nobuffer av_dict_set(&options, "flags", "low_delay", 0); // режим низкой задержки av_dict_set(&options, "tune", "zerolatency", 0); // оптимизация нулевой задержки - Assistant
Ситуация следующая:
- Вы получаете сегфолт после успешного открытия RTSP-потока и начала декодирования H264.
- Лог показывает, что SDL/FFmpeg получает SPS/PPS, начинает получать кадры.
- Настройки опций RTSP вроде разумны —
rtsp_transport=tcp,probesize=50M,analyzeduration=10M(10 секунд),genptsдля генерации таймштампов. - Тем не менее сегфолт случается где-то после ~10 секунд работы.
Где искать проблему?
- Причина сегфолта — по описанию и логам, скорее всего в работе вашего кода с объектами FFmpeg, например:
- неверная работа с памятью — неинициализированные указатели,
- неправильная обработка или освобождение пакетов/кадров,
- обращение к полям из NULL-указателя или неверно интерпретируемым структурам.
-
Судя по ранее показанному коду — надо добавить дополнительные проверки и валидировать, что вы не обращаетесь к данным по NULL.
-
Опция
probesize = "50000000"(50 Мб) — это очень много, но не проблема per se, можно оставить. -
buffer_size32К — не очень большой, может вызвать переполнение, замените на более привычный 1М (1048576):
av_dict_set(&options, "buffer_size", "1048576", 0);- Проверьте, как вы читаете кадры и освобождаете ссылки:
- Каждый
av_read_frame()возвращает пакетAVPacket. - После обработки обязательно вызывайте
av_packet_unref().
Пример цикла:
while (av_read_frame(fmt_ctx, &pkt) >= 0) { if (pkt.stream_index == video_stream_idx) { ret = avcodec_send_packet(dec_ctx, &pkt); if (ret < 0) { fprintf(stderr, "Error sending a packet for decoding\n"); break; } while (ret >= 0) { ret = avcodec_receive_frame(dec_ctx, frame); if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF) break; else if (ret < 0) { fprintf(stderr, "Error during decoding\n"); goto end; } // Обработка кадра... av_frame_unref(frame); } } av_packet_unref(&pkt); }- Проверьте, что
frameвыделен и инициализирован (av_frame_alloc()), аdec_ctx— корректно открыт.
- Параметры
max_delay = 30— в документации FFmpeg указывают единицы в микросекундах, либо миллисекундах (зависит от контекста). Возможно, 30 слишком мало (что значит 30 микросекунд?). Попробуйте увеличить, например:
av_dict_set(&options, "max_delay", "500000", 0); // 500 мс – более привычный вариант- Разделите часть опций и уберите не нужные для теста, оставив только:
av_dict_set(&options, "rtsp_transport", "tcp", 0); av_dict_set(&options, "buffer_size", "1048576", 0); av_dict_set(&options, "max_delay", "500000", 0); av_dict_set(&options, "probesize", "5000000", 0); av_dict_set(&options, "analyzeduration", "5000000", 0);-
Полезна отладка с
ASAN(AddressSanitizer) или запуск в gdb для точного места segfault. -
Если сегфолт внутри библиотеки — возможно баг FFmpeg с данной камере/потоком или нестандартным
sprop-parameter-sets(которые идут пустыми).
- Попробуйте обойти проблему установкой опции демультиплексера, например:
av_dict_set(&options, "skip_sdp", "1", 0);- Или использовать кастомные
extradataвAVCodecParameters.
Итог
Вам нужно:
- Убедиться, что код правильно читает и освобождает пакеты и фреймы (av_packet_unref, av_frame_unref).
- Проверить корректность возвращаемых значений после каждого вызова.
- Подобрать более адекватные параметры
buffer_sizeиmax_delay. - Подключить отладку для локализации сегфолта.
- Возможно, заранее инициализировать или подготавливать SPS/PPS вручную, если камера их не передает корректно (empty sprop-parameter-sets).
Если нужно, могу помочь с примером минимального работающего кода для чтения RTSP потока из такой камеры с обработкой ошибки.
Если хотите — пришлите полный минимальный фрагмент кода (от открытия потока до обнаружения сегфолта) — помогу локализовать ошибку.