webrtc笔记-媒体部分（voice流收发流程）

最新推荐文章于 2024-10-02 23:45:12 发布

Luke Cheng

最新推荐文章于 2024-10-02 23:45:12 发布

阅读量890

点赞数

CC 4.0 BY-SA版权

分类专栏：音视频文章标签： webrtc

本文链接：https://blog.csdn.net/weixin_40578430/article/details/109818705

本文详细介绍了WebRTC中语音流的发送和接收过程，从音频采集到编码打包，再到P2P网络传输，以及收包后的RTP解包和RTCP处理，涉及关键组件如AudioProcessing、RTPSender、NetEq等，揭示了网络音视频通信的内部机制。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、发包流程
音频设备采集帧8kHZ,8bit的PCM数据，声音的电信号是成波形的模拟信号，波形上每秒取8k次数据(能量值)，用8bit的整数表示，非负整数为PCMU编码，否则是PCMA编码。
1、获取数据
AudioDeviceWindowsCore::DoCaptureThread //windows语音采集线程，数据帧放入AudioDeviceBuffer::rec_buffer_
AudioDeviceBuffer::DeliverRecordedData //分发数据帧
AudioTransportImpl::RecordedDataIsAvailable //数据帧前端处理并分发给所有流
AudioProcessing AudioProcessingImpl ApmPrivateSubmodules //数据帧前端处理类
2、数据打包
AudioSendStream::SendAudioData //发送数据帧
ChannelSend::ProcessAndEncodeAudioOnTaskQueue //编码打包
AudioCodingModuleImpl::Add10MsData //10ms的PCM数据进行压缩编码(G729，ISAC等)
AudioEncoder
AudioPacketizationCallback 回调ChannelSend的SendData //帧数据打包成RTP报文
RtpRtcp
RTPSenderAudio
RTPSender
PacedSender::InsertPacket PacedSender::Process //将RTP包放入步调控制的队列中，按发包速率发送
RTPSender::TimeToSendPacket RTPSender::SendPacketToNetwork
Transport::SendRtp //发包
3、使用P2P发包
WebRtcVoiceMediaChannel::SendRtp //实现Transport::SendRtp
VoiceMedi