WebRTC android h264 编解码适配

最新推荐文章于 2025-06-05 16:41:38 发布

哎呀呀哇哈哈

最新推荐文章于 2025-06-05 16:41:38 发布

阅读量3.7k

点赞数

CC 4.0 BY-SA版权

分类专栏： android Webrtc

本文链接：https://blog.csdn.net/m370809968/article/details/88743953

本文探讨了在Android平台上，WebRTC对H264编解码的支持情况，包括软编软解和硬编硬解的优缺点。分析了硬编码和解码器的创建过程，指出当前WebRTC对某些硬件编码器的白名单限制导致的适配问题，并提出了三种解决方案：扩展白名单、移除白名单检查以及直接通过编码器类型创建。最后，强调了WebRTC在H264支持上的不足。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

自从Cisco 宣布旗下的H264 Codec开源为OpenH264，并且替所有OpenH264的使用者支付了H264的专利费，WebRTC也随即对h264进行了支持，在Android平台, 软编用 OpenH264, 软解用FFMPGE, 硬编硬解用 MediaCodec. 在android和iOs中软编软解默认是禁止的，要想启用需要把OpenH264和FFMPGE编译进来，这样就会大大增加库的大小，况且软编软解比较费cpu，耗电量和发热都会增加，使用软编软解的好处是编解码不依赖于硬件，不存在设备适配问题。硬件编解码能够解决软编软解的痛处，但是存在设备适配问题，因为不同的设备使用的硬解码器不同，可能会导致编码失败及解码失败。以android为例，由于android厂商众多，使用的cpu芯片更是繁多，同一芯片厂商不同型号实现的硬解码器也有不同，这样就造成适配很困难，况且h264不是google推荐使用的编解码器（毕竟不是亲生的），所以在适配方面存在很多问题。

android中硬编码实现在MediaCodecVideoEncoder.java中，硬解码实现在MediaCodecVideoDecoder.java中，下面逐个分析

来看一下如何创建编码器：

boolean initEncode(VideoCodecType type, int profile, int width, int height, int kbps, int fps,
      boolean useSurface) {
    ...
    EncoderProperties properties = null;
    String mime = null;
    int keyFrameIntervalSec = 0;
    boolean configureH264HighProfile = false;
    if (type == VideoCodecType.VIDEO_CODEC_VP8) {
      mime = VP8_MIME_TYPE;
      properties = findHwEncoder(
          VP8_MIME_TYPE, vp8HwList(), useSurface ? supportedSurfaceColorList : supportedColorList);
      keyFrameIntervalSec = 100;
    } else if (type == VideoCodecType.VIDEO_CODEC_VP9) {
      mime = VP9_MIME_TYPE;
      properties = findHwEncoder(
          VP9_MIME_TYPE, vp9HwList, useSurface ? supportedSurfaceColorList : supportedColorList);
      keyFrameIntervalSec = 100;
    } else if (type == VideoCodecType.VIDEO_CODEC_H264) {