WebRtc Native M96 远端视频接收之RtpFrameReferenceFinder-设置参考帧(5)

一苇渡江694

于 2022-03-09 22:31:50 发布

阅读量1.7k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： WebRTC Native M96 Cookbook 文章标签： webrtc 音视频

本文链接：https://blog.csdn.net/wangshubo1989/article/details/123389380

WebRTC Native M96 Cookbook 专栏收录该内容

48 篇文章 ¥79.90 ¥99.00

订阅专栏

超级会员免费看

本文详细介绍了在WebRTC M96版本中，RtpFrameReferenceFinder如何处理帧参考关系，从PacketBuffer到FrameBuffer的流程，以及在RtpVideoStreamReceiver2中的作用。重点分析了ManageFrame方法，包括如何处理帧的存储、解码条件和丢弃策略，确保视频帧正确解码。

在这里插入图片描述

PacketBuffer：做报文缓存，根据帧开始、结束等标志，结合帧内seq的连续性，组成seq连续的一帧。此时需要确保其参考的帧也是组出来了，它才能送过去解码。H264目前是根据start bit以及Rtp Mark标志判断一帧开始和结束，在丢包等场景还需要结合timestamp来区分不同帧。(https://dabaojian.blog.csdn.net/article/details/123364413)

RtpFrameReferenceFinder：帧参考关系寻找。packet buffer输出seq连续的帧到RtpFrameReferenceFinder，这里填充帧参考关系。

FrameBuffer：做帧缓存，等待参考帧完整后才送出去解码。

如何到达RtpFrameReferenceFinder

通过reference_finder_->ManageFrame(std::move(frame))

Call::DeliverPacket
Call::DeliverRtp
RtpStreamReceiverController::OnRtpPacket
RtpDemuxer::OnRtpPacket
RtpVideoStreamReceiver2::OnRtpPacket
RtpVideoStreamReceiver2::ReceivePa

了解本专栏

超级会员免费看