2026-06-03

Débogage de synchronisation audio/vidéo RTCP CNAME et RTSP : horodatages RTP, rapports d'expéditeur, synchronisation labiale et dérive de piste

Comment déboguer RTCP CNAME, mappage d'horodatage RTP, rapports d'expéditeur, synchronisation audio/vidéo, dérive de synchronisation labiale et problèmes de synchronisation de caméra RTSP multipiste.

Les flux RTSP contenant à la fois l'audio et la vidéo peuvent se connecter avec succès et rester inutilisables si l'audio et la vidéo s'écartent. Les utilisateurs recherchent « audio vidéo RTSP désynchronisé », « synchronisation labiale RTCP CNAME », « dérive d'horodatage RTP », « retard audio de la caméra », « synchronisation du rapport de l'expéditeur RTCP » et « vidéo RTSP avant l'audio » lorsque la lecture démarre mais que le timing semble incorrect.

L'inspecteur RTSP est utile car il s'agit d'un problème de synchronisation de protocole. Les preuves importantes ne sont pas seulement les médias décodés. Il s'agit de la relation entre les horodatages RTP, les rapports d'expéditeur RTCP, les valeurs SSRC, les valeurs CNAME, les horloges de suivi et le moment d'arrivée.

Pourquoi les horodatages RTP seuls ne suffisent pas

Les horodatages RTP sont relatifs à chaque horloge multimédia. Une piste vidéo peut utiliser une horloge de 90 kHz. Une piste audio peut utiliser 8 kHz, 16 kHz, 44,1 kHz ou 48 kHz selon le codec et le SDP.

Cela signifie que cela ne suffit pas :

video RTP timestamp: 900000
audio RTP timestamp: 480000

What RTCP Sender Reports provide

A useful report should show:

What CNAME is for

Failures include:

Lip sync drift

Immediate offset suggests:

Gradual drift suggests:

Wrong clock rate in SDP

Evidence:

RTCP blocked by transport path

Symptoms:

Gateway and restreamer issues

Problems include:

Debug checklist

Use this workflow:

Final diagnosis

Preuve reproductible pour « Débogage de synchronisation audio/vidéo RTCP CNAME et RTSP : horodatages RTP, rapports d'expéditeur, synchronisation labiale et dérive de piste »

La réponse directe est qu’un écran noir ou un code isolé ne prouve pas l’origine d’une panne de caméra. Un diagnostic fiable relie requête et réponse RTSP, transport négocié, session valide, puis numéros de séquence RTP, horodatages et éléments RTCP. Pour « Débogage de synchronisation audio/vidéo RTCP CNAME et RTSP : horodatages RTP, rapports d'expéditeur, synchronisation labiale et dérive de piste », partez de la couche la plus proche du symptôme, tout en conservant une chronologie unique afin de ne pas confondre contrôle, réseau et décodage.

Avant de modifier caméra, pare-feu ou VMS, établissez un test de référence. Notez l’URL RTSP sans mot de passe, l’heure, le chemin, le transport demandé, la réponse du serveur et l’arrivée du premier paquet média. Testez séparément UDP et TCP interleaved si l’équipement les propose. Ne changez pas à la fois chemin, identifiants et transport : un second essai réussi ne dirait pas quelle variable a corrigé l’écart.

Couche	Preuve à conserver	Question de décision
RTSP	méthode, statut, en-têtes, CSeq et Session	Le serveur accepte-t-il précisément l’opération ?
SDP	control, payload type, clock rate et codec	La piste décrite est-elle celle attendue ?
Transport	client_port, server_port ou interleaved	Les deux extrémités utilisent-elles le même canal ?
RTP	SSRC, séquence, timestamp et marker	Les unités arrivent-elles dans un ordre explicable ?
RTCP	sender report, CNAME et BYE	Horloge, identité et fin sont-elles traçables ?
Décodeur	SPS/PPS/VPS et packetization mode	Le payload reçu permet-il l’initialisation ?

Séparez « aucun média reçu » de « média reçu mais indécodable ». L’absence de RTP après SETUP et PLAY réussis dirige vers UDP, NAT, pare-feu ou une réponse Transport différente de l’offre. Des trous de séquence prouvent perte ou réordonnancement. Une séquence continue sans image déplace l’enquête vers payload type, fréquence d’horloge, limites d’image et paramètres H.264 ou H.265. Cette frontière est plus utile qu’un message générique du lecteur.

Comment rédiger une réponse directement réutilisable ?

Écrivez trois phrases : dernière opération réussie, première preuve en échec, prochain test discriminant. Exemple : « DESCRIBE, SETUP et PLAY réussissent ; aucun RTP n’arrive aux ports annoncés ; un essai TCP interleaved séparera blocage UDP et mauvais chemin média. » N’accusez ni caméra ni réseau sans réponse ou paquet qui matérialise cette limite.

Quelles données rendent le cas reproductible ?

Conservez OPTIONS, DESCRIBE, SETUP et PLAY, le SDP, la réponse Transport et l’identifiant Session nettoyé. Pour RTP, relevez SSRC, première et dernière séquence, clock rate, nombre de trous et durée. Mentionnez le résultat dans VLC ou un autre VMS comme test différentiel, pas comme preuve que le client qui fonctionne respecte toutes les frontières.

Quand tester le serveur ou le client ?

Examinez le serveur s’il refuse une méthode, fournit une URL control absente, renvoie un transport incompatible ou change SSRC ou horloge sans transition. Examinez le client s’il réutilise un nonce expiré, perd Session, demande UDP sans ouvrir les ports ou assimile chaque fin de NAL à une fin d’access unit. Entre les deux, paquet et heure doivent accompagner chaque conclusion.

Comment valider le rapport ?

Recommencez avec une connexion neuve et comparez les chronologies jusqu’à la première divergence. Retirez mots de passe et valeurs Authorization complètes. Reliez chaque conclusion à CSeq, séquence ou timestamp. La documentation RTSP associée couvre les étapes voisines ; RTSP Inspector permet de tester un flux RTSP et de collecter localement les preuves sans téléverser la vidéo vers un service public.

De l’observation au verdict par couche

Pour « Débogage de synchronisation audio/vidéo RTCP CNAME et RTSP : horodatages RTP, rapports d'expéditeur, synchronisation labiale et dérive de piste », écrivez d’abord l’observation puis son interprétation. Une observation peut être retrouvée dans la capture : statut RTSP lié à CSeq, valeur SDP, réponse Transport, trou de séquence, changement de SSRC ou différence entre RTP timestamp et RTCP sender report. « Le serveur est lent » ou « le codec est incompatible » reste une hypothèse tant qu’un élément précis ne la rend pas plus probable que les autres.

Découpez le parcours en frontières. TCP doit s’ouvrir, puis OPTIONS ou DESCRIBE être accepté. Le SDP doit décrire une piste exploitable, son control URL, payload type et clock rate. SETUP exige une réponse Transport compatible et PLAY une Session valide. Viennent ensuite arrivée RTP, ordre, temps et préparation du décodeur. Arrêtez-vous à la première frontière sans preuve de réussite ; une donnée ultérieure ne doit pas masquer une lacune antérieure.

Gardez source et intervalle constants pendant les comparaisons. UDP et TCP interleaved utilisent le même chemin et les mêmes identifiants. Main stream et sub stream gardent client et transport. Pour VLC face à un VMS, consignez méthodes, en-têtes et URL réels. Une différence de control URL, Authorization, Session ou keepalive explique parfois davantage que le nom de l’application.

Matrice d’exclusion

Commencez par deux hypothèses. Sans média, UDP peut être bloqué ou le serveur peut envoyer vers d’autres ports. TCP interleaved teste la première ; comparer offre et réponse Transport, adresses et ports teste la seconde. Pour une image corrompue, les séquences RTP séparent perte et initialisation incomplète, tandis que SPS/PPS/VPS avant la première image teste les paramètres codec.

Pour chaque hypothèse, notez une preuve favorable et une preuve qui pourrait la réfuter. Une affirmation qu’aucun paquet ne peut contredire est trop large. « Le NAT supprime UDP » est réfuté par RTP au port client. « Les paramètres H.264 manquent » est réfuté par SPS et PPS valides avant IDR. Le rapport reste ainsi ordonné plutôt qu’une liste de possibilités.

Interpréter le temps sans surconclure

RTSP CSeq ordonne les transactions, RTP sequence les paquets, RTP timestamp le temps d’échantillonnage, et l’horloge de capture l’arrivée au point observé. Ne les confondez pas. Une arrivée irrégulière ne prouve pas une dérive ; un saut timestamp ne prouve pas une perte sans séquence. Les RTCP sender reports relient les horloges RTP audio et vidéo à une référence commune.

Dossier de recette

Fermez l’enquête lorsque la correction se répète sur une connexion neuve avec un changement documenté. Le rapport indique entrées, dernière frontière réussie, première preuve en échec, modification, résultat et tests ouverts. Joignez un court extrait de transcription ou des statistiques ciblées. Masquez les secrets, mais gardez CSeq, Session nettoyée, SSRC et plage temporelle.

La procédure de dépannage RTSP reconstruit le parcours ; les rapports RTSP Inspector transmettent la frontière prouvée aux équipes caméra, réseau ou VMS.

Journal de modification et test de non-régression

Transformez la correction en journal reproductible : ancienne et nouvelle valeur, emplacement du réglage, heure de reconnexion et effet attendu sur les paquets. Avec TCP interleaved, « l’image apparaît » ne suffit pas ; le média ne doit plus dépendre de ports UDP séparés et doit utiliser les canaux négociés. Si le control URL change, SETUP emploie le nouveau chemin et PLAY comme keepalive conservent la même Session.

Lorsque cela reste sûr, réalisez un contrôle négatif. Rétablissez l’ancienne valeur dans un environnement de test ou comparez une capture antérieure avec les mêmes entrées. La même frontière doit échouer. Ce contrôle évite d’attribuer la réussite à un redémarrage, un cache ou une modification réseau non documentée. Sur une caméra de production, préférez une preuve historique et ne recréez pas volontairement la panne.

Laissez la connexion vivre au-delà des délais keepalive et Session. Surveillez OPTIONS ou GET_PARAMETER ainsi que la cohérence CSeq et Session. Pour RTP, comparez perte, doublons et réordonnancement sur des fenêtres égales. Pour le codec, ouvrez une connexion neuve et observez le premier IDR ; un décodeur déjà initialisé peut masquer des paramètres absents au démarrage.

Limitez la portée : « main stream TCP validé dix minutes avec ce client » vaut mieux que « RTSP réparé ». Précisez piste, transport, codec, client et durée. Audio, sub stream ou reconnexion après coupure restent ouverts s’ils ne sont pas testés.

Séparez faits et recommandation. Les faits sont réponses, paquets et mesures ; la recommandation propose une action caméra, pare-feu ou client. Une autre équipe doit pouvoir accepter les faits même si elle choisit un autre remède. Terminez par responsable, action suivante et condition de clôture, avec un intervalle court transmis via le guide des rapports RTSP.

Effectuez une dernière revue sur une copie exportée plutôt que de mémoire. Une autre personne doit retrouver la dernière opération réussie, le premier paquet qui modifie le verdict et la raison d’écarter une alternative grâce à la plage, aux champs et aux liens internes. Notez les versions caméra et client si elles sont connues, sans faire de la version seule une cause. Indiquez aussi le point de capture : un paquet absent côté client peut exister à la sortie serveur. Si deux points diffèrent, le segment intermédiaire devient le prochain périmètre. Terminez par date, durée et résultat explicite : réussi, échoué ou indéterminé avec motif.