FFmpeg像素格式转换和尺寸转换

Demo

FFmpeg 可以实现像素格式转换和尺寸转换&＃xff0c;但是性能开销非常大&＃xff0c;对视频帧率影响比较大&＃xff0c;实际开发中最好用 Shader来实现&＃xff0c;FFmpeg的优势转换接口比较简单。

像素格式转换上下文 SwsContext

&＃xff08;1&＃xff09;sws_getContext
&＃xff08;2&＃xff09;sws_getCachedContext(
struct SwsContext *context,
int srcW, int srcH, 原宽高
enum AVPixelFormat srcFormat,原像素格式
int dstW, int dstH, 目标宽高
enum AVPixelFormat dstFormat,目标格式
int flags, 算法标签&＃xff08;性能差异 效果差异 针对尺寸变化&＃xff09;
SwsFilter *srcFilter,过滤器
SwsFilter *dstFilter,过滤器
const double *param 算法中默认值的设定 可以默认);
两个函数的差别是第一个参数&＃xff1a;SwsContext
sws_getContext 会创建一个上下文空间&＃xff0c;sws_getCachedContext会去缓冲中找&＃xff0c;前后两次参数没变时返回同一个

//每一帧数据的处理
int sws_scale(struct SwsContext *c,
const uint8_t *const srcSlice[],具体数据的数组
const int srcStride[],一行数据的大小
int srcSliceY, 传0
int srcSliceH, 图形高度
uint8_t *const dst[], 目标的地址&＃xff08;指针数组&＃xff09;
const int dstStride[]) 输出的一行数据的大小;

void sws_freeContext(struct SwsContext *swsContext);//是否

for (; ; ) {//保证能搜到全部的解码数据re &＃61; avcodec_receive_frame(cc, frame);if (re !&＃61; 0) {break;}if (cc &＃61;&＃61; vc) {frameCount&＃43;&＃43;;vctx &＃61; sws_getCachedContext(vctx, frame->width, frame->height, (AVPixelFormat)frame->format, outWidth, outHeight, AV_PIX_FMT_RGBA, SWS_FAST_BILINEAR, 0, 0, 0);if (!vctx) {NSLog(&＃64;"sws_getCachedContext failed!");}else{uint8_t *data[AV_NUM_DATA_POINTERS] &＃61; {0};data[0] &＃61; (uint8_t *)rgb;int lines[AV_NUM_DATA_POINTERS] &＃61; {0};lines[0] &＃61; outWidth * 4;int h &＃61; sws_scale(vctx, frame->data, frame->linesize, 0, frame->height, data, lines);NSLog(&＃64;"sws_scale h :%d ",h);}}}//最后一针的时候 avcodec_send_packet(cc, NULL)av_packet_unref(pkt);


2018-08-03 19:16:54.397601&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.409398&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.417052&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.425106&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.440420&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.448448&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.457397&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.465670&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.473706&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.481495&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.489395&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.497006&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.504962&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.512761&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.520280&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.528375&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.543610&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.551972&＃43;0800 FFmpeg402[611:176423] sws_scale h :720
2018-08-03 19:16:54.559866&＃43;0800 FFmpeg402[611:176423] sws_scale h :720


音频冲采样 SwrContext

一般音频解码出来直播不能直接播放&＃xff0c;需要经过冲采样

SwrContext *swr_alloc(void); 上下文

SwrContext *swr_alloc_set_opts(设置参数
struct SwrContext *s,
int64_t out_ch_layout,输出layout
AVSampleFormat out_sample_fmt,输出的样本格式
int out_sample_rate,输出样本率
int64_t in_ch_layout,输入layout
AVSampleFormat in_sample_fmt,输入的样本格式
int in_sample_rate, 输入样本率
int log_offset, 0
void *log_ctx);日志 0

int swr_init(struct SwrContext *s); 初始化

void swr_free(struct SwrContext **s);释放

转换函数swr_convert 对每一帧音频做重采样

• int swr_convert(struct SwrContext *s,
uint8_t **out,输出的数组
int out_count,样本的数量 单通道
• const uint8_t **in , 输入参数指针数组
int in_count);

//音频重采样上下文初始化SwrContext *actx &＃61; swr_alloc();//设置参数actx &＃61; swr_alloc_set_opts(actx,av_get_default_channel_layout(2),//2AV_SAMPLE_FMT_S16,ac->sample_rate,av_get_default_channel_layout(ac->channels),ac->sample_fmt,ac->sample_rate,0,0);re &＃61; swr_init(actx);if (re !&＃61; 0) {NSLog(&＃64;"swr_init failed!");}else{NSLog(&＃64;"swr_init success!");}


uint8_t *outData[2] &＃61; {0};outData[0] &＃61; (uint8_t *)pcm;//重采样int len &＃61; swr_convert(actx,//上下文outData,frame->nb_samples,(const uint8_t **)frame->data,frame->nb_samples);NSLog(&＃64;"swr_convert len :%d ",len);

2018-08-03 19:45:47.054517&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.054560&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.066537&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.066658&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.066744&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.066872&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.066932&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024
2018-08-03 19:45:47.066977&＃43;0800 FFmpeg402[630:182386] swr_convert len :1024