webrtc-m79-采集的像素格式的VideoFrame到渲染窗口和编码器小结

已于 2023-06-15 15:12:00 修改
阅读量594 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： webrtc 文章标签： webrtc
于 2022-05-16 09:44:19 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hclbeloved/article/details/124793564

1 相关类图

2 小结

        不论视频流最终目的地是流向本地渲染模块还是要流向编码器，首先都要经过VideoTrack这个对象。webrtc::VideoTrack 和webrtc::VideoTrackSource 都实现了rtc::VideoSourceInterface<VideoFrame> 接口，也就是说他们都是视频流的生产者，
但是它们两个都不是视频源的最初的生产者，最初的视频生产者是 webrtc::test::VcmCapturer ；

代码中是通过 webrtc::VideoTrack->webrtc::VideoTrackSo

了解本专栏 订阅专栏 解锁全文 超级会员免费看
【webrtc屏幕采集】VideoFrame给到SINK用
突围
06-16 595
【webrtc屏幕采集】BasicScreenCapturer 流程 在onResult中构造一个VideoFrame返回引用到consumer中。 VideoFrame 贯穿了很多视频模块。 VideoFrame 这个类及RtpPacketInfos 实现 最能反映功底。 G:\GERRIT\zhangbinowt\third_party\webrtc\api\video\video_frame.cc 似乎像素数据 没有重新拷贝内存，采用的 是一个引用计数指针。 // An opa..
webrtc 中 yuv 放缩 和 VideoFrame 的创建
chinabinlang的专栏
07-30 3401
webrtc_m74; 一： VideoFrame 的通常默认 buffer 是 YUV 的； 所以放缩，就直接用 放缩YUV； 有两个方法： 方法1： 所有类型 YUV 的最基类 都是VideoFrameBuffer；可以创建VideoFrame 应用； VideoFrame::video_frame_buffer() 可以获取VideoFrameBuffer； ...
WebRTC VideoEngine超详细教程（三）——集成X264编码和ffmpeg解码
liuhongxian的专栏
09-17 4807
http://blog.csdn.net/nonmarking/article/details/47958395 本系列目前共三篇文章，后续还会更新 WebRTC VideoEngine超详细教程（一）——视频通话的基本流程 WebRTC VideoEngine超详细教程（二）——集成OPENH264编解码器 WebRTC VideoEngine超详细教程（三）
保存webrtc::VideoFrame到YUV文件
ice_ly000的博客
01-02 2182
void SaveVideoFrameToFile(const webrtc::VideoFrame& frame, std::string file) { rtc::scoped_refptr<webrtc::VideoFrameBuffer> vfb = frame.video_frame_buffer(); static FILE *fp = fo...
webrtc视频采集模块
qq_38731735的博客
04-04 880
1 整体结构分析 首先是从目录结构分析，视频采集模块唯一modules下，主要层级关系如下图。其中最外层是公共实现部分，包括对外API，内部数据配置参数和定义，以及具体实现部分；内部的目录中主要是对于各个平台具体的实现，如window和Linux。 整个采集模块最核心的内容包括三大块：首先是对外API定义在video_capture.h描述了视频采集模块对外提供的能力。第二部分是公共实现部分video_capture_impl主要是对于公共功能的实现，数据流的控制等；第三部分是实际采集的模块，根据不同平台
webrtc-m79-本地采集的视频渲染流程
hclbeloved的博客
05-14 744
1 问题 本文主要以windows为例，基于peerconnection_client的例子来讲解本地采集的视频是如何渲染到本地的窗口上的。 该问题主要分为两个环节： 第一个环节：需要建立渲染窗口到视频采集器的流水线的建立； 第二个环节：采集的视频沿着流水线送到渲染窗口； 注意： 视频采集器采集到的是像素格式(RGB或者YUV)的VideoFrame，此时还没有编码(比如：VP8/VP9/H264/H265等)成视频帧； 2 VideoTrack到渲染窗口流水线的建立
webrtc基于webrtc-streamer推流实现直播
02-02
5. **连接WebRTC-Streamer**：将本地RTCPeerConnection的流发送到WebRTC-Streamer服务器。服务器会处理这个流，并将其转换成可以被其他服务消费的格式。 6. **接收端处理**：WebRTC-Streamer服务器将接收到的流转发...
webrtc-streamer
最新发布
05-22
"webrtc-streamer"是一个基于WebRTC的应用程序，它提供了一个简单的方式来流式传输媒体源，如摄像头或网络上的媒体文件，到Web浏览器。 `webrtc-streamer.exe -o -H 0.0.0.0:9001` 这条命令是启动WebRTC-streamer...
webrtc-m79-视频采集器到视频编码器流水线的建立
hclbeloved的博客
05-14 1238
1 问题 视频采集器采集到像素格式的VideoFrame经过编码后才能通过P2PtransportChannel传递给对端，这其中就包括了两个主要环节： 第一个环节：采集器到编码器之间流水线的建立； 第二个环节：采集到的像素格式的VideoFrame沿着流水线送到编码器，并发送到对端； 2 采集器到编码器之间流水线的建立 3 相关代码 3.1 采集器到编码器之间流水线的建立 ///////////////////////////////////////////////..
webrtc-m79-RTP NTP 线性回归
hclbeloved的博客
05-30 536
1 几个定义 2 线性回归过程 3 相关类图
VideoFrame
12-11
Android多媒体开发Java反射获取Video帧图像
Android版美颜rtsp直播demo
11-11
采集摄像头及音频编码成H264+AAC后转给rtsp服务器 直接用vlc就可预览手机摄像头 支持OPENGLES美颜、加动图
转：Webrtc video framerate/resolution 自适应
wzw88486969的专栏
12-17 2605
转：https://xie.infoq.cn/article/50b7931b8a023f8ca7f25d4e9 一，引言 音视频会议使用者的设备性能往往是参差不齐的，当我们一味的去追求视频的高清，高流畅，忽略设备性能时，就会出现用户抱怨设备发热，掉电快，视频卡顿，掉帧等问题，因此就需要一种策略根据当前设备性能情况来动态的调整视频码率/帧率，为用户提供更好音视频体验感。本文主要讲 webrtc 如何实现这一策略的。 二，Video 自适应策略 用户开启网络视频会议一般会有文档模式和视频模式两种使用场景，文档
webrtc QOS方法九（VideoFrame.ntp_time_ms含义）
CrystalShaw的博客
02-28 1971
webrtc远端视频渲染的时候，VideoFrame携带时间参数有三个：timestamp_rtp_、ntp_time_ms_、timestamp_us_。 这里先描述一下ntp_time_ms_计算和传递过程。 WebRTC视频接收端延迟包括三部分：缓冲区延迟JitterDelay，解码延迟DecodeDelay和渲染延迟RenderDelay。其中DecodeDelay和RenderDel...
android webrtc 视频流源码获取帧图像VideoFrame转bitmap 作为图像识别
b275518834的专栏
08-05 3239
由于需要使用opencv等项目识别webrtc中的画面 需要对webrtc的摄像头进行采集 该方法在EglRenderer implements VideoSink 类的onFrame中增加saveImgBitmap(frame)方法来获取图像具体代码如下 // VideoSink interface. @Override public void onFrame(VideoFrame frame){ //将org.webrtc.VideoFrame转bitmap并保存 saveImgBitm.
webrtc 渲染_WebRTC 开发（九）音频采集与渲染
weixin_39682477的博客
12-24 528
本文基于 WebRTC M76 来分析下 Mac 端的音频采集和渲染逻辑。代码位置12345audio_device_mac.haudio_device_mac.ccaudio_mixer_manager_mac.haudio_mixer_manager_mac.cc浏览头文件12采集的采样率：const uint32_t N_REC_SAMPLES_PER_SEC = 48000;播放的采样率：...
WebRTC视频采集模块
m0_60259116的博客
08-05 549
WebRTC视频采集模块
WebRTC音视频数据采集 六、第六节 视频渲染特效
xyphf的博客
07-04 1366
今天我们介绍一下如何对获取到的视频做一些特效 这部分知识实际上是属于渲染部分的范畴 我们要在浏览器中做特效，我们要知道几个基本的概念 CSS filter,-webkit-filter/filter 在不同的浏览器中使用的filter还不一样 如何将video与 filter关联 OpenGL/Metal/... 我们通过CSS调用，它最终在浏览器的底层调用的还是OpenGL/Metal/...这种基础的图形绘制库 ，通过GPU进行绘制 具体支持哪些特效，我们下面罗列一下常见的 支..
webrtc-m79-rtc::VideoSourceInterface＜webrtc::VideoFrame＞类图
hclbeloved的博客
05-25 292
1 rtc::VideoSourceInterface<webrtc::VideoFrame>类图
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值