转自:https://www.cnblogs.com/renhui/p/9223969.html
这个blog有一系列的ffmpeg的源码分析,建议系统读一下。
这里我重点关注的是精准裁剪视频,没想到又发现了还有倒放音视频的代码,真棒。
精准裁剪音视频的原理是:没有精准裁剪的都只是进行的数据的转封装,会受到关键帧的影响,所以如果需要特别准确的剪切,只能使用ffmpeg进行重新编解码的操作。
一、简述
ffmpeg是一个非常强大的工具,它可以转换任何格式的媒体文件,并且还可以用自己的AudioFilter以及VideoFilter进行处理和编辑。有了它,我们就可以对媒体文件做很多我们想做的事情了。
二、命令行参数
1. 通用参数
- -f fmt : 指定格式
- -i filename:指定输入文件名
- -y:覆盖已有文件
- -t duration:指定时长
- -fs limit_size:设置文件大小的上限
- -ss time_off: 从指定的时间开始
- -re:代表按照时间戳读取或发送数据,尤其在作为推流工具的时候一定要加上该参数,否则ffpmeg会按照最高速率向流媒体不停的发送数据。
- -map:指定输出文件的流映射关系。例如:“-map 1:0 -map 1:1”要求按照第二个输入的文件的第一个流和第二个流写入输出文件。如果没有设置此项,则ffpmeg采用默认的映射关系。
2. 视频参数
- -b:指定比特率(bit/s),ffmpeg默认采用的是VBR的,若指定的该参数,则使用平均比特率。
- -bitexact:使用标准比特率。
- -vb:指定视频比特率(bit/s)
- -r rate:帧速率(fps)
- -s size:指定分辨率(320x240)
- -aspect aspect:设置视频长宽比(4:3、16:9或1.33333、1.77777)
- -croptop size:设置顶部切除尺寸(in pixels)
- -cropleft size:设置左切除尺寸(in pixels)
- -cropbottom size:设置地步切除尺寸(in pixels)
- -cropright size:设置右切除尺寸(in pixels)
- -padtop size:设置顶部补齐尺寸(in pixels)
- -padleft size:设置左补齐尺寸(in pixels)
- -padbottom size:设置地步补齐尺寸(in pixels)
- -padright size:设置右补齐尺寸(in pixels)
- -padcolor color:设置补齐颜色
- -vn:取消视频的输出
- -vcodec codec:强制使用codec编码方式
3. 音频参数
- -ab:设置比特率(bit/s),对于MP3的格式,想要听到较高品质的声音,建议设置160Kbit/s(单声道80Kbit/s)以上。
- -aq quality:设置音频质量
- -ar ratre:设置音频采样率(Hz)
- -ac channels:设置声道数,1就是单声道,2就是立体声
- -an:取消音频输出
- -acodec codec:强制使用codec编码方式
- -vol volume:设置录制音量大小
以上就是在日常开发中经常用到的音视频参数及通用参数。下面会针对常见的开发场景进行实践和说明。
三、实践学习
1. 列出ffmpeg支持的所有格式
相关命令:
ffmpeg -formats
输出结果:
File formats:
D. = Demuxing supported
.E = Muxing supported
--
D 3dostr 3DO STR
E 3g2 3GP2 (3GPP2 file format)
E 3gp 3GP (3GPP file format)
D 4xm 4X Technologies
E a64 a64 - video for Commodore 64
D aa Audible AA format files
D aac raw ADTS AAC (Advanced Audio Coding)
DE ac3 raw AC-3
省略......
D xbin eXtended BINary text (XBIN)
D xmv Microsoft XMV
D xpm_pipe piped xpm sequence
D xvag Sony PS3 XVAG
D xwma Microsoft xWMA
D yop Psygnosis YOP
DE yuv4mpegpipe YUV4MPEG pipe
2. 剪切一段媒体文件,可以是音频或者视频文件
相关命令:
ffmpeg -i pm.mp4 -ss 00:00:50.0 -codec copy -t 20 output.mp4
命令说明:
表示将文件pm.mp4从第50s开始剪切20s的时间,输出到output.mp4中,其中-ss指定偏移时间(time Offset),-t指定的时长(duration)。
但是直接这样执行命令,固然我们能截取出来音视频的文件,但是当我们播放的时候,我们会发现虽然ffmepg剪切视频,很方便,但是也有很大缺陷:
(1). 剪切时间点不精确
(2). 有时剪切的视频开头有黑屏
造成这些问题的原因是ffmpeg无法seek到非关键帧上。
命令层面定位的话就是如果把-ss, -t参数放在-i参数之后,是对输出文件执行的seek操作
输入文件会逐帧解码,直到-ss设置的时间点为止,这么操作会很慢,虽然时间点是准确的,但是很容易出现黑屏问题。
所以:我们优化了一下上面的那个命令,让视频的剪切更加精确:
ffmpeg -ss 10 -t 15 -accurate_seek -i pm.mp4 -codec copy output.mp4
注意:accurate_seek必须放在-i参数之前。
但是,可能又会有人发现,还是存在剪切不准确的现象,那是因为,上述命令只是进行了数据的转封装,会受到关键帧的影响,所以如果需要特别准确的剪切,只能使用ffmpeg进行重新编解码的操作了,命令行如下:
ffmpeg -i input.mp4 -ss 00:00:03.123 -t 10 -c:v libx264 -c:a aac out.mp4
此命令行相对上面的转封装的剪切来说,速度明显变慢,是因为对视频数据重新编解码了,但是精度相对转封装来说是大大提高了。
3. 提取视频文件中的音频数据,并保存为文件
相关命令:
ffmpeg -i pm.mp4 -vn -acodec copy output.m4a
命令说明:
将文件pm.mp4的视频流禁用掉(参数为:-vn,如果禁用音频流参数为-an,禁用字母流参数为-sn )。
然后将pm.mp4中的音频流的数据封装到output.m4a文件中,音频流的编码格式不变。
4. 将视频中的音频静音,只保留视频
相关命令:
ffmpeg -i pm.mp4 -an -vcodec copy output.mp4
命令说明:
将文件pm.mp4的音频流禁用掉(参数为:-an )。
然后将pm.mp4中的视频流的数据封装到output.mp4文件中,视频流的编码格式不变。
5. 从mp4文件中抽取视频流导出为裸H264数据:
相关命令:
ffmpeg -i pm.mp4 -an -vcodec copy -bsf:v h264_mp4toannexb output.h264
命令说明:
在指令中,我们舍弃了音频数据(-an),视频数据使用mp4toannexb这个bitstreasm filter来转换为原始的H264数据。(注:同一编码也会有不同的封装格式)。
验证播放:
可以使用ffplay命令进行尝试播放,如果能播放成功,则说明生效。
6. 将视频推送到流媒体服务器上:
ffmpeg -re -i pm.mp4 -acodec copy -vcodec copy -f flv rtmp://127.0.0.1/rh/mylive
命令说明:
将mp4文件的音视频数据的编码格式不变,按照rtmp的方式,将视频推送到流媒体服务器上。
7. 将流媒体服务器上的流dump到本地:
ffmpeg -i rtmp://127.0.0.1/rh/mylive -acodec copy -vcodec copy -f flv test.flv
命令说明:
将流媒体服务器的数据,不进行转码,通过转封装的方式保存到本地。
8. 给视频添加水印
ffmpeg -i pm.mp4 -i xxx.png -filter_complex "overlay=5:5" out.mp4
命令说明:
使用ffmpeg滤镜功能,将对mp4添加水印。
9. 倒放音视频
// 1.视频倒放,无音频
ffmpeg.exe -i inputfile.mp4 -filter_complex [0:v]reverse[v] -map [v] -preset superfast reversed.mp4
// 2.视频倒放,音频不变
ffmpeg.exe -i inputfile.mp4 -vf reverse reversed.mp4
// 3.音频倒放,视频不变
ffmpeg.exe -i inputfile.mp4 -map 0 -c:v copy -af "areverse" reversed_audio.mp4
// 4.音视频同时倒放
ffmpeg.exe -i inputfile.mp4 -vf reverse -af areverse -preset superfast reversed.mp4