Материал
Чек-лист отладки синхронизации звука и картинки в WebRTC
Одна страница: две метки времени (RTP + NTP из RTCP SR), проблема терминации на SFU, проверка Absolute Capture Time, различия mediasoup/Pion/LiveKit и четыре частые ошибки, ломающие синхронизацию звука и картинки.
Что внутри
- Механизм: две метки времени + CNAME
- Почему SFU это ломает
- mediasoup vs Pion vs LiveKit
- Пять проверок, когда синхронизация уплывает
Кому пригодится
Разработчикам, у которых lip-sync ломается после включения SFU. Чек-лист сводит две метки времени – RTP и NTP из RTCP SR, – объясняет, что происходит при терминации на SFU, показывает проверку Absolute Capture Time и различия mediasoup, Pion и LiveKit, а рядом четыре ошибки, с которых обычно всё и начинается.
Без регистрации и почты – файл открывается сразу
Источник
Из какого курса материал
Аудио для видео
Частота дискретизации, громкость и LUFS, AAC и Opus, звук в WebRTC, синхронизация с картинкой и Dolby Atmos.
Lip-sync в WebRTC: как это делают mediasoup, Pion и LiveKit
WebRTC удерживает голос говорящего согласованным с его губами, проставляя на каждый аудио- и видеопоток две…
Ещё материалы
Похожие материалы
Все материалы →Выбираете технологию под проект?
Пройдём чек-лист вместе и посчитаем стоимость вариантов на ваших объёмах.