H264 over RTP中存在多个SPS、PPS、[SEI]、 IDR序列是否都需要

        这一段从三光吊舱接收数据时，因为对方外协了一个转换盒子，将同步422出来的h264编码的数据转成了RTP进行发送。我们能拿到的就是这个RTP数据。使用wireshark抓了一堆包，然后使用rtp_h264_extractor插件将里面的h264码流dump出来了，并使用ffplay进行播放，没问题。

        但是我前面使用libjrtplib3监听了转换盒子发送出来的rtp数据流。然后使用getPayloadData()将所有的h264负载保存了下来。但是播放不了。对比了一下发现。我保存下来的rtp封包的h264数据。准确来说，就是对于单Nalu帧，它把前面的00 00 00 01这个start code给去掉了；对于FU-A这种分片帧，它把帧头的 00 00 00 01这个start code去掉了，同时把原来的一个字节的nalu_header_type给换成了2个字节，分别是FU indicator和FU header。这里需要把它们还原回去。至于怎么还原，可以看我昨天写的博文。

        还原回去之后，发现还是不能播放。又去对比我转换后的文件和wireshark插件拖出来的h264数据。发现还少了SPS和PPS以及SEI帧。这些帧都在IDR帧之前。SPS里面存储了序列参数集合，而PPS存储了图像参数集合。没有这些参数，是无法解析h264的。

  &nb