RTMP直播推送库EasyRTMP视频硬编码的流程解析

所谓硬编码,个人理解就是硬件加速编码,intel硬编码是使用其集显中的视频编解码模块加速,同理nvidia硬编码使用nvidia显卡中的视频编解码模块进行加速。在命令行中使用 ffmpeg -hwaccels 能够查看ffmpeg支持的硬件加速方法。git

由于项目须要,在研发RTMP推流组件的EasyRTMP中不少用户咨询关于音视频硬解码的流程,便于组件的集成,今天你们介绍流程以下。github

关于RTMP推流组件

EasyRTMP是一套调用简单、功能完善、运行高效稳定的RTMP推流功能组件,通过多年客户实战和线上运行打造,支持RTMP推送断线重连、环形缓冲、智能丢帧、网络事件回调,支持Windows、Linux、ARM、Android、iOS平台,支持市面上绝大部分的RTMP流媒体服务器,可以完美应用于各类行业的直播需求,手机直播、桌面直播、摄像机直播、课堂直播等方面。结合EasyDSS流媒体服务器,为开发者提供专业、稳定的直播推流、转码、分发服务,全面知足低超低延迟、超高画质、超大并发访问量的要求。服务器

EasyRTMPiOS工做流程.png

提出问题:

EasyRTMP-iOS介绍下视频硬编码的简单流程。网络

分析问题:

H.264 HWEncoder.m文件实现了视频的硬编码功能。session

解决问题:

iOS处理音频的库是VideoToolbox,视频硬编码的流程以下:并发

一、-initVideoToolBox中调用
VTCompressionSessionCreate建立编码session,并调用VTSessionSetProperty设置参数:ide

15.png

再调用VTCompressionSessionPrepareToEncodeFrames开始编码:函数

16.png

二、将获取到摄像头的视频帧,传入-encode:
调用VTCompressionSessionEncodeFrame传入须要编码的视频帧:编码

17.png

三、每一帧视频编码完成后会调用预先设置的编码函数didCompressH264,处理关键帧,以及取得PPS和SPS,由H264Packet来处理:spa

18.png

四、调用VTCompressionSessionCompleteFrames完成编码,而后销毁session:VTCompressionSessionInvalidate,释放session。

19.png

相关文章
相关标签/搜索