RTP Unknown Write NDPI 错误修复——RTSP 动态负载类型与 SDP 映射\"未知写入\"RTP / NDPI 错误 - RTSP 流中的动态有效负载类型和 SDP 映射

通过将动态 RTP 负载类型映射回 SDP rtpmap 和 fmtp 线路,调试 RTSP 捕获中的\"未知写入\"RTP / NDPI 错误。涵盖 H.264、H.265、AAC、ONVIF 元数据、有效负载 ID 和解包器错误。

rtp 负载类型不匹配, 动态负载类型, sdp rtpmap, 解包器错误, rtsp摄像头流, h264 h265 aac

在媒体解析器尝试理解 RTP 数据包之前,RTSP 会话可能看起来很健康。 DESCRIBE 返回 SDP。 SETUP 成功。 PLAY成功。 RTP 数据包到达。然后应用程序或数据包分类器报告“未知写入”、“未知 RTP 有效负载”、“NDPI 未知”、“不支持的有效负载类型”、“未找到解包器”、“无效编解码器映射”、“有效负载类型 96 没有解码器”或“流包含未知轨道”。

这些错误通常意味着字节存在,但分析器无法将 RTP 有效负载类型映射到编解码器并从 SDP 跟踪定义。在 RTSP 中,有效负载类型“96”不会自动成为 H.264。它是会话本地动态 ID。你必须阅读SDP。

快速回答:在指责 NDPI 或相机之前检查 SDP

如果捕获显示“未知写入”/“RTP”/“NDPI”,请从此处开始:

  1. 找到 RTSP“描述”响应。
  2. 复制 SDP。
  3. 找到每个“m=”媒体行及其有效负载编号。
  4. 对于每个动态负载 (96-127),找到匹配的 a=rtpmap:<id> 行。
  5. 检查 a=fmtp:<id> 行中的编解码器参数。
  6. 将 RTP 数据包有效负载类型字节与该 SDP 映射进行比较。

如果 RTP 数据包使用有效负载类型“96”并且 SDP 表示“a=rtpmap:96 H265/90000”,则预期 H.264 的分析器将报告无意义内容。如果SDP有a=rtpmap:96 vnd.onvif.metadata/90000,则未知的有效负载根本不是视频;它是 ONVIF 元数据,不应终止播放。

这就是为什么“NDPI 未知”等通用 DPI 标签是不够的。 DPI 引擎查看数据包字节。它们并不总是具有解释会话本地动态负载 ID 所需的 RTSP 控制平面上下文。对于RTSP,控制平面和媒体平面必须一起读取。

这是一个协议解释问题。 RTSP Inspector 很有用,因为它将 SDP 和 RTP 证据保存在一起。如果没有定义动态 RTP 负载 ID 的 SDP,则无法正确解释它们。

静态与动态负载类型

某些 RTP 负载类型是静态的。其他的是动态的。动态有效负载类型通常位于 96-127 范围内,并且必须由 SDP 映射。

例子:

m=video 0 RTP/AVP 96
a=rtpmap:96 H264/90000

SDP rtpmap is required for dynamic payloads

For dynamic payload types, SDP should include a=rtpmap:

a=rtpmap:96 H264/90000
a=rtpmap:97 MPEG4-GENERIC/48000/2
a=rtpmap:98 H265/90000

如果 SDP 缺少“rtpmap”,客户端可能不知道要使用哪个解包器。有些相机生成不完整的 SDP。某些中继或代理会更改 SDP。某些客户端仅解析常见轨道并忽略元数据轨道。

常见结果:

  • 视频有效负载到达但未解码。
  • 音轨被忽略。
  • ONVIF 元数据跟踪触发未知负载错误。
  • H.265 被误认为 H.264。
  • AAC 时钟速率或通道数错误。

有效负载类型在会话之间发生变化

不要对动态负载 ID 进行硬编码。摄像机可能会在重新启动、配置文件更改、固件更新或流路径更改后分配不同的有效负载编号。

例如:

Session A: payload 96 = H264
Session B: payload 96 = H265
Session C: payload 97 = H264, payload 96 = metadata

H.264 and H.265 confusion

Symptoms:

AAC and MPEG4-GENERIC

Relevant SDP:

a=rtpmap:97 MPEG4-GENERIC/48000/2
a=fmtp:97 streamtype=5; profile-level-id=1; mode=AAC-hbr; config=...

有效负载类型、时钟速率、频道和 fmtp 参数都很重要。

元数据轨道和供应商扩展

ONVIF 元数据、分析覆盖、私有事件跟踪和供应商特定的有效负载可以出现在 SDP 中。媒体播放器可能不知道如何处理它们。

这不一定是流失败。这可能意味着客户端应该在处理视频和音频的同时忽略不受支持的非媒体轨道。但如果客户端将未知元数据视为致命的,则播放可能会失败。

RTSP Inspector 应帮助识别轨道类型、有效负载映射以及未知有效负载是否是视频、音频、元数据或私有数据。

调试清单

使用这个过程:

  1. 捕获“DESCRIBE”返回的 SDP。
  2. 列出每个“m=”媒体部分。
  3. 列出每个动态负载类型。
  4. 使用“a=rtpmap”映射有效负载 ID。
  5. 检查 a=fmtp 的编解码器配置。
  6. 将 RTP 数据包有效负载类型值与 SDP 进行比较。
  7. 检查负载 ID 在会话之间是否发生变化。
  8. 单独的视频、音频、元数据和私有轨道。
  9. 确认客户端具有适用于每个所需编解码器的解包器。
  10. 仅当应用程序可以安全地忽略不支持的可选轨道时。

最终诊断

当客户端无法将传入 RTP 数据包映射到正确的编解码器或轨道时,就会发生 RTP 动态负载类型不匹配。修复方法是将 SDP 视为会话的权威:解析“rtpmap”、解析“fmtp”、绑定每个会话的有效负载 ID,并将所需的媒体轨道与可选元数据区分开来。

RTSP Inspector 通过并排显示 SDP 和 RTP 来支持这种证据优先的工作流程,因此可以在归咎于摄像机、解码器或网络之前诊断有效负载问题。

<!-- rtsp-localized-evidence-foundation-v1:start -->

“RTP Unknown Write NDPI 错误修复——RTSP 动态负载类型与 SDP 映射"未知写入"RTP / NDPI 错误 - RTSP 流中的动态有效负载类型和 SDP 映射”的可复现实证流程

直接答案是:黑屏或单个状态码不能证明故障归属。可靠诊断必须把 RTSP 请求与响应、协商后的 Transport、有效 Session,以及后续 RTP 序列号、时间戳和 RTCP 证据放进同一条时间线。处理“RTP Unknown Write NDPI 错误修复——RTSP 动态负载类型与 SDP 映射"未知写入"RTP / NDPI 错误 - RTSP 流中的动态有效负载类型和 SDP 映射”时,可以从最接近可见症状的层开始,但不能把控制层、网络路径和解码器问题混成一个结论。

修改摄像机、防火墙或 VMS 前,先建立一份小型基线。记录隐藏密码后的 RTSP URL、测试时间、路径、请求的 Transport、服务器响应和首个媒体包到达时间。设备同时支持 UDP 与 TCP interleaved 时,应分两次测试。不要在同一次实验里同时更换路径、凭据和传输模式,否则第二次成功也无法说明哪项变化真正修复了问题。

检查层 必须保存的证据 决策问题
RTSP 方法、状态、头字段、CSeq、Session 服务器是否接受了这一项操作
SDP control、payload type、clock rate、codec 服务器描述的是否为目标媒体轨
Transport client_port、server_port、interleaved 两端是否使用同一条媒体通道
RTP SSRC、sequence、timestamp、marker 媒体单元是否按可解释顺序到达
RTCP sender report、CNAME、BYE 时钟、身份和结束事件能否关联
解码器 SPS/PPS/VPS、packetization mode 已到达的 payload 能否完成初始化

始终区分“媒体没有到达”和“媒体到达但无法解码”。SETUP 与 PLAY 成功后仍无 RTP,应检查 UDP 路径、NAT、防火墙和不匹配的 Transport 响应。RTP 序列出现缺口,证明存在丢包或重排。序列连续却仍无画面,则应转向 payload type、clock rate、帧边界以及 H.264/H.265 参数。这个边界比播放器的笼统错误更能确定下一位修复责任人。

怎样写出可直接引用的答案

用三句话写明最后成功的操作、第一项失败证据和下一项区分实验。例如:“DESCRIBE、SETUP 与 PLAY 均成功;客户端声明的端口没有收到 RTP;改用 TCP interleaved 可区分 UDP 被阻断和媒体路径错误。”没有响应或数据包证据时,不要直接宣称整台摄像机或整段网络已经损坏。

最小复现资料包括什么

保存 OPTIONS、DESCRIBE、SETUP、PLAY、SDP、Transport 响应和脱敏后的 Session。媒体侧至少记录 SSRC、首尾序列号、clock rate、缺口数量和抓取时长。VLC 或另一套 VMS 的成败可以作为差异实验,但不能证明成功客户端正确处理了所有协议边界。

什么时候检查服务器,什么时候检查客户端

服务器明确拒绝方法、返回不存在的 control URL、回复不兼容 Transport,或无说明地改变 SSRC/时钟时,应先检查服务器。客户端重复过期 nonce、遗漏 Session、请求 UDP 却没有开放端口,或把每个 NAL 结尾都当成 access unit 结尾时,应先检查客户端。故障位于中间路径时,每个结论都必须附带数据包与时间。

交付报告前怎样复核

从新连接重新测试,只比较两条时间线的第一个差异。删除密码和完整 Authorization 值,把每项结论关联到 CSeq、sequence 或 timestamp。继续查看相关 RTSP 指南,并用 RTSP Inspector在本地测试 RTSP 流和收集证据,无需把摄像机视频上传到公共服务。

<!-- rtsp-localized-evidence-foundation-v1:end --><!-- rtsp-localized-layer-verdicts-v1:start -->

从观察记录到可复核的分层结论

处理“RTP Unknown Write NDPI 错误修复——RTSP 动态负载类型与 SDP 映射"未知写入"RTP / NDPI 错误 - RTSP 流中的动态有效负载类型和 SDP 映射”时,先写观察,再写解释。观察必须能由另一位工程师在抓包中重新找到,例如带 CSeq 的 RTSP 状态、SDP 字段、Transport 响应、序列号缺口、SSRC 变化,或 RTP timestamp 与 RTCP sender report 的对应关系。“服务器很慢”或“编码不兼容”只是待验证假设,直到具体证据能比其他原因更好地解释结果。

把链路拆成边界。先确认 TCP 建立,再确认 OPTIONS 或 DESCRIBE 被接受;SDP 必须描述可用媒体轨、control URL、payload type 和 clock rate;SETUP 需要兼容的 Transport,PLAY 需要有效 Session。之后才检查 RTP 到达、顺序、时间和解码器准备。停在第一项缺少成功证据的边界,不要让后续数据掩盖前序缺口。

做对照实验时,尽量固定来源和时间区间。UDP 与 TCP interleaved 使用相同路径和凭据;main stream 与 sub stream 使用相同客户端和传输模式;比较 VLC 与 VMS 时,记录双方真实发送的方法、头字段和 URL。control URL、Authorization、Session 或 keepalive 的差异,可能比软件名称更能解释结果。

排除矩阵

每次先列两个假设。没有媒体时,可以比较 UDP 被阻断和服务器发往错误端口;TCP interleaved 检查前者,比较 Transport 提议、响应、IP 与端口检查后者。画面损坏时,RTP sequence 可区分丢包与初始化不足,而首帧前是否存在 SPS/PPS/VPS 可检查 codec 参数假设。

每个假设都要写支持证据和可反驳证据。任何数据包都无法否定的说法过于宽泛。“NAT 丢弃 UDP”可被客户端端口实际收到 RTP 反驳;“缺少 H.264 参数”可被 IDR 前有效 SPS/PPS 反驳。这样报告会成为有优先级的判断,而不是无序的可能性清单。

不要混用不同时间

RTSP CSeq 表示控制事务顺序,RTP sequence 表示包顺序,RTP timestamp 表示媒体采样时间,capture clock 表示数据到达观察点的时间。它们不是同一只钟。到达抖动不能单独证明 timestamp drift;没有 sequence 证据的 timestamp 跳变也不能单独证明丢包。音视频同步应使用 RTCP sender report 关联不同 RTP 时钟与共同参考。

最终验收资料

当修复能在新连接中以一项已记录变更重复出现时,才关闭调查。报告需要写明输入、最后成功边界、第一项失败证据、变更、复测结果和未测试事项。附上短小相关的 transcript 或统计,而不是一份没有范围的巨大文件。隐藏秘密,但保留 CSeq、脱敏 Session、SSRC 与时间区间。

使用RTSP 故障排除重建顺序,并通过 RTSP Inspector 报告把已证实的故障边界交给摄像机、网络或 VMS 团队。

<!-- rtsp-localized-layer-verdicts-v1:end -->