官方文档：https://www.ffmpeg.org/ffplay-all.html https://www.ffmpeg.org/ffmpeg-all.html01-Windows FFMPEG命令行环境搭建下篇文章再分享。02-FFMPEG如何查询命令帮助文档ffmpeg/ffplay/ffprobe区别ffmpeg: Hyper fast Audio and Video encoder 超快音视频编码器（类似爱剪辑）ffplay: Simple media player简单媒体播放器ffprobe: Simple multimedia streams analyzer 简单多媒体流分析器ffmpeg命令查看帮助文档基本信息：ffmpeg -h高级信息：ffmpeg -h long所有信息：ffmpeg -h full若嫌打印过多： ffmepg -h full > ffmpeg_h_full.log，然后再打开ffmpeg_h_full.log文件查看usage:    ffmpeg [options] [[infile options] -i infile]... {[outfile options] outfile}...ffplay命令查看帮助文档所有信息：ffplay -husage:   ffplay [options] input_fileffprobe命令查看帮助文档所有信息：ffprobe -husage:   ffprobe [OPTIONS] [INPUT_FILE]ffmpeg/ffplay/ffprobe部分参数通用，部分参数不通用，在使用时需要注意。03-ffmpeg音视频处理流程先看两条命令ffmpeg -i test_1920x1080.mp4 -acodeccopy -vcodeclibx264 -s 1280x720test_1280x720.flvffmpeg -i test_1920x1080.mp4 -acodeccopy -vcodeclibx265 -s1280x720test_1280x720.mkvffmpeg音视频处理流程04-ffmpeg命令分类查询ffmpeg命令分类查询命令参数内容命令参数内容-version显示版本-bsfs显示可用比特流filter-buildconf显示编译配置-protocols显示可用的协议-formats显示可用格式(muxers+demuxers)-filters显示可用的过滤器-muxers 显示可用复用器-pix_fmts显示可用的像素格式-demuxers显示可用解复用器-layouts 显示标准声道名称-codecs 显示可用编解码器(decoders+encoders)-sample_fmts显示可用的音频采样格式-decoders显示可用解码器-colors显示可用的颜色名称-encoders显示可用编码器ffmpeg -versionffmpeg -buildconfffmpeg -formatsffmpeg -muxersffmpeg -demuxersffmpeg -devicesffmpeg -codecsffmpeg -decodersffmpeg -encodersffmpeg -bsfsffmpeg -protocolsffmpeg -filtersffmpeg -pix_fmtsffmpeg -layoutsffmpeg -sample_fmts为什么在ffplay播放PCM的时候需要-f f32le这种模式而不是-f flt呢？比如ffplay -ar 48000  -ac 2 -f f32le believe.pcm是因为此时实际-f对应的是decoder，这里解PCM则对应pcmdec.c(ffmpeg-4.2.1\libavformat)的PCM解码器，这里的PCM decoder实际只是按照大小端、浮点还是整数、占用的bit数等参数来做解析。比如-f f32le对应为：PCMDEF(f32le, "PCM 32-bit floating-point little-endian", NULL, AV_CODEC_ID_PCM_F32LE)AV_CODEC_ID_PCM_F32LE属于CODEC ID。ffmpeg -colors查看具体分类所支持的参数语法：ffmepg -h type=name比如：ffmpeg -h muxer=flvffmpeg -h filter=atempo      (atempo调整音频播放速率)ffmpeg -h encoder=libx26405-ffplay播放控制选项说明选项说明q, ESC退出播放t循环切换字幕流f全屏切换c循环切换节目p, SPC暂停w循环切换过滤器或显示模式m静音切换s逐帧播放9, 09减少音量，0增加音量left/right向后/向前拖动10秒/,   */减少音量，*增加音量down/up向后/向前拖动1分钟a循环切换音频流鼠标右键单击拖动与显示宽度对应百分比的文件进行播放v循环切换视频流鼠标左键双击全屏切换06-ffplay命令选项ffplay命令-主要选项选项说明备注-x width强制显示宽带。-y height强制显示高度。-video_size size帧尺寸 设置显示帧存储(WxH格式)，仅适用于类似原始YUV等没有包含帧大小(WxH)的视频。比如: ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5  yuv420p_320x240.yuv-pixel_format format格式设置像素格式-fs以全屏模式启动-an禁用音频（不播放声音）-vn禁用视频（不播放视频）-sn禁用字幕（不显示字幕）-ss pos根据设置的秒进行定位拖动，注意时间单位：比如'55' 55 seconds, '12:03:45' ,12 hours, 03 minutes and 45 seconds, '23.189' 23.189 second-t duration设置播放视频/音频长度，时间单位如 -ss选项-bytes按字节进行定位拖动（0=off 1=on -1=auto）-seek_interval interval自定义左/右键定位拖动间隔（以秒为单位），默认值为10秒-nodisp关闭图形化显示窗口，视频将不显示-noborder无边框窗口-volume vol设置起始音量。音量范围[0 ~100]-f fmt强制使用设置的格式进行解析。比如-f s16le-window_title title设置窗口标题（默认为输入文件名）-loop number设置播放循环次数-showmode mode设置显示模式，可用的模式值：0 显示视频，1 显示音频波形，2 显示音频频谱。缺省为0，如果视频不存在则自动选择2-vf filtergraph设置视频滤镜-af filtergraph设置音频滤镜ffplay命令-高级选项选项说明备注-stats 打印多个回放统计信息，包括显示流持续时间，编解码器参数，流中的当前位置，以及音频/视频同步差值。默认情况下处于启用状态，要显式禁用它则需要指定-nostats。。-fast非标准化规范的多媒体兼容优化-genpts生成pts-sync type同步类型 将主时钟设置为audio（type=audio），video（type=video）或external（type=ext），默认是audio为主时钟。-ast audio_stream_specifier指定音频流索引，比如-ast 3，播放流索引为3的音频流-vst video_stream_specifier指定视频流索引，比如-vst 4，播放流索引为4的视频流-sst subtitle_stream_specifier指定字幕流索引，比如-sst 5，播放流索引为5的字幕流-autoexit视频播放完毕后退出。-exitonkeydown键盘按下任何键退出播放-exitonmousedown鼠标按下任何键退出播放-codec:media_specifier codec_name强制使用设置的多媒体解码器，media_specifier可用值为a（音频）， v（视频）和s字幕。比如-codec:v h264_qsv 强制视频采用h264_qsv解码-acodec codec_name强制使用设置的音频解码器进行音频解码-vcodec codec_name强制使用设置的视频解码器进行视频解码-scodec codec_name强制使用设置的字幕解码器进行字幕解码-autorotate根据文件元数据自动旋转视频。值为0或1 ，默认为1-framedrop如果视频不同步则丢弃视频帧。当主时钟非视频时钟时默认开启。若需禁用则使用 -noframedrop-infbuf不限制输入缓冲区大小。尽可能快地从输入中读取尽可能多的数据。播放实时流时默认启用，如果未及时读取数据，则可能会丢弃数据。此选项将不限制缓冲区的大小。若需禁用则使用-noinfbuf更多参考http://www.ffmpeg.org/ffplay.html07-ffplay命令播放媒体播放本地文件ffplay -window_title "test time" -ss 2 -t 10 -autoexit test.mp4ffplay buweishui.mp3播放网络流ffplay -window_title "rtmp stream" rtmp://202.69.69.180:443/webcast/bshdlive-pc强制解码器mpeg4解码器：ffplay  -vcodec mpeg4 test.mp4h264解码器：ffplay -vcodec h264 test.mp4  禁用音频或视频禁用音频：ffplay test.mp4 -an禁用视频：ffplay test.mp4 -vn播放YUV数据ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5  yuv420p_320x240.yuv播放RGB数据ffplay -pixel_format rgb24 -video_size 320x240 -i rgb24_320x240.rgbffplay -pixel_format rgb24 -video_size 320x240 -framerate 5  -i rgb24_320x240.rgb播放PCM数据ffplay -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm -ar        set audio sampling rate (in Hz) (from 0 to INT_MAX) (default 0) -ac      set number of audio channels (from 0 to INT_MAX) (default 0)08-ffplay简单过滤器视频旋转ffplay -i test.mp4 -vf transpose=1视频反转ffplay test.mp4 -vf hflipffplay test.mp4 -vf vflip视频旋转和反转ffplay test.mp4 -vf hflip,transpose=1音频变速播放ffplay -i test.mp4 -af atempo=2视频变速播放ffplay -i test.mp4 -vf setpts=PTS/2音视频同时变速ffplay -i test.mp4 -vf setpts=PTS/2 -af atempo=2更多参考http://www.ffmpeg.org/ffmpeg-filters.html09-ffmpeg命令参数说明主要参数-i 设定输入流-f 设定输出格式(format)-ss 开始时间-t 时间长度音频参数-aframes 设置要输出的音频帧数-b:a 音频码率-ar 设定采样率-ac 设定声音的Channel数-acodec 设定声音编解码器，如果用copy表示原始编解码数据必须被拷贝。-an 不处理音频-af 音频过滤器ffmpeg -i test.mp4 -b:a 192k -ar 48000 -ac 2 -acodec libmp3lame -aframes 200 out2.mp3视频参数-vframes 设置要输出的视频帧数-b 设定视频码率-b:v 视频码率-r 设定帧速率-s 设定画面的宽与高-vn 不处理视频-aspect aspect 设置横纵比 4:3 16:9 或 1.3333 1.7777-vcodec 设定视频编解码器，如果用copy表示原始编解码数据必须被拷贝。-vf 视频过滤器ffmpeg -i test.mp4 -vframes 300 -b:v 300k -r 30 -s 640x480 -aspect 16:9 -vcodec libx26510-ffmpeg命令提取音视频数据保留封装格式 ffmpeg -i test.mp4 -acodec copy -vn audio.mp4ffmpeg -i test.mp4 -vcodec copy -an video.mp4提取视频     保留编码格式：ffmpeg -i test.mp4 -vcodec copy -an test_copy.h264强制格式：ffmpeg -i test.mp4 -vcodec libx264 -an test.h264提取音频保留编码格式：ffmpeg -i test.mp4 -acodec copy -vn test.aac 强制格式：ffmpeg -i test.mp4 -acodec libmp3lame -vn test.mp311 提取像素格式和PCM数据提取像素格式提取YUV提取3秒数据，分辨率和源视频一致 ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p yuv420p_orig.yuv 提取3秒数据，分辨率转为320x240 ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p -s 320x240 yuv420p_320x240.yuv提取RGB提取3秒数据，分辨率转为320x240 ffmpeg -i test.mp4 -t 3 -pix_fmt rgb24 -s 320x240 rgb24_320x240.rgb RGB和YUV之间的转换 ffmpeg -s 320x240 -pix_fmt yuv420p -i yuv420p_320x240.yuv -pix_fmt rgb24 rgb24_320x240_2.rgb提取PCM数据ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f s16le 48000_2_s16le.pcmffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -sample_fmt s16 out_s16.wavffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -codec:a pcm_s16le out2_s16le.wavffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm  ffmpeg -i test.mp4 -t 10 -vn -ar 48000 -ac 2 -f f32le 48000_2_f32le_2.pcm12-ffmpeg命令转封装保持编码格式 ffmpeg -i test.mp4 -vcodec copy -acodec copy test_copy.ts ffmpeg -i test.mp4 -codec copy test_copy2.ts改变编码格式 ffmpeg -i test.mp4 -vcodec libx265 -acodec libmp3lame out_h265_mp3.mkv修改帧率 ffmpeg -i test.mp4 -r 15 -codec copy output.mp4 (错误命令) ffmpeg -i test.mp4 -r 15 output2.mp4修改视频码率 ffmpeg -i test.mp4 -b 400k output_b.mkv （此时音频也被重新编码）修改视频码率 ffmpeg -i test.mp4 -b:v 400k output_bv.mkv修改音频码率 ffmpeg -i test.mp4 -b:a 192k output_ba.mp4 如果不想重新编码video，需要加上-vcodec copy修改音视频码率 ffmpeg -i test.mp4 -b:v 400k -b:a 192k output_bva.mp4修改视频分辨率 ffmpeg -i test.mp4 -s 480x270 output_480x270.mp4修改音频采样率: ffmpeg -i test.mp4 -ar 44100 output_44100hz.mp413-ffmpeg命令过滤器生成测试文件找三个不同的视频每个视频截取10秒内容 ffmpeg -i 沙海02.mp4 -ss 00:05:00 -t 10 -codec copy 1.mp4 ffmpeg -i 复仇者联盟3.mp4 -ss 00:05:00 -t 10 -codec copy 2.mp4 ffmpeg -i 红海行动.mp4 -ss 00:05:00 -t 10 -codec copy 3.mp4       如果音视频格式不统一则强制统一为 -vcodec libx264 -acodec aac将上述1.mp4/2.mp4/3.mp4转成ts格式 ffmpeg -i 1.mp4 -codec copy -vbsf h264_mp4toannexb 1.ts ffmpeg -i 2.mp4 -codec copy -vbsf h264_mp4toannexb 2.ts ffmpeg -i 3.mp4 -codec copy -vbsf h264_mp4toannexb 3.ts转成flv格式 ffmpeg -i 1.mp4 -codec copy 1.flv ffmpeg -i 2.mp4 -codec copy 2.flv ffmpeg -i 3.mp4 -codec copy 3.flv开始拼接文件以MP4格式进行拼接  方法1：ffmpeg -i "concat:1.mp4|2.mp4|3.mp4" -codec copy out_mp4.mp4     方法2：ffmpeg -f concat -i mp4list.txt-codec copy out_mp42.mp4以TS格式进行拼接  方法1：ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out_ts.mp4     方法2：ffmpeg -f concat -i tslist.txt -codec copy out_ts2.mp4以FLV格式进行拼接  方法1：ffmpeg -i "concat:1.flv|2.flv|3.flv" -codec copy out_flv.mp4     方法2：ffmpeg -f concat -i flvlist.txt -codec copy out_flv2.mp4方法1只适用部分封装格式，比如TS建议：（1）使用方法2进行拼接（2）转成TS格式再进行拼接测试不同编码拼接修改音频编码ffmpeg -i 2.mp4 -vcodeccopy -acodec ac3 -vbsfh264_mp4toannexb 2.tsffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out1.mp4 结果第二段没有声音修改音频采样率ffmpeg -i 2.mp4 -vcodec copy -acodec aac -ar 96000 -vbsf h264_mp4toannexb 2.tsffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out2.mp4  第二段播放异常修改视频编码格式ffmpeg -i 1.mp4 -acodec copy -vcodec libx265 1.tsffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out3.mp4 修改视频分辨率ffmpeg -i 1.mp4 -acodec copy -vcodec libx264 -s 800x472 -vbsfh264_mp4toannexb 1.tsffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out4.mp4 注意：把每个视频封装格式也统一为ts，拼接输出的时候再输出你需要的封装格式，比如MP4视频分辨率可以不同，但是编码格式需要统一音频编码格式需要统一，音频参数(采样率/声道等)也需要统一14-fmpeg命令图片与视频互转截取一张图片  ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.jpg  ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.bmp参数说明：-i 输入  -y 覆盖  -f 格式 image2 一种格式  -ss 起始值  -vframes 帧 如果大于1 那么 输出加%03d  test%03d.jpg  -s 格式大小size转换视频为图片（每帧一张图):    ffmpeg -i test.mp4 -t 5 -s 640x360 -r 15frame%03d.jpg  图片转换为视频:    ffmpeg -f image2 -i frame%03d.jpg-r 25 video.mp4从视频中生成GIF图片ffmpeg -i test.mp4 -t 5 -r1  image1.gifffmpeg -i test.mp4 -t 5 -r 25 -s 640x360  image2.gif将 GIF 转化为 视频  ffmpeg -f gif -i image2.gif image2.mp415-ffmpeg命令视频录制ffmpeg命令视频录制(Windows)先安装dshow软件Screen Capturer Recorder  项目地址：https://sourceforge.net/projects/screencapturer/files/  然后查看可用设备名字：ffmpeg -list_devices true -f dshow -i dummy[dshow @ 0509d6c0] DirectShow video devices (some may be both video and audio devices)[dshow @ 0509d6c0] "Integrated Webcam" //笔记本摄像头[dshow @ 0509d6c0]     Alternative name "@device_pnp_\\?\usb#vid_0bda&pid_5689&mi_00#6&233dd6c7&0&0000#{65e8773d-8f56-11d0-a3b9-00a0c9223196}\global"[dshow @ 0509d6c0]  "e2eSoft VCam"[dshow @ 0509d6c0]     Alternative name "@device_sw_{860BB310-5D01-11D0-BD3B-00A0C911CE86}\e2eSoft VCam"[dshow @ 0509d6c0]  "screen-capture-recorder"[dshow @ 0509d6c0]     Alternative name "@device_sw_{860BB310-5D01-11D0-BD3B-00A0C911CE86}\{4EA6930A-2C8A-4AE6-A561-56E4B5044439}"[dshow @ 0509d6c0] DirectShow audio devices[dshow @ 0509d6c0]  "楹﹀厠椋?(Realtek Audio)"[dshow @ 0509d6c0]     Alternative name "@device_cm_{33D9A762-90C8-11D0-BD43-00A0C911CE86}\wave_{8B8892E5-D3E5-47EC-8B5E-CEEBF54014E7}"[dshow @ 0509d6c0]  "virtual-audio-capturer"[dshow @ 0509d6c0]     Alternative name "@device_sw_{33D9A762-90C8-11D0-BD43-00A0C911CE86}\{8E14549B-DB61-4309-AFA1-3578E927E935}"dummy: Immediate exit requested如果出现乱码的时候在命令行输入：chcp 65001chcp 就是change code page65001是unicode字符集 支持中文  音视频录制录制视频（默认参数） 桌面：ffmpeg -f dshow -i video="screen-capture-recorder" v-out.mp4 摄像头： ffmpeg -f dshow -i video="Integrated Webcam" -y v-out2.flv (要根据自己摄像头名称)录制声音（默认参数） 系统声音：ffmpeg -f dshow -i audio="virtual-audio-capturer" a-out.aac系统+麦克风声音：ffmpeg -f dshow -i audio="麦克风 (Realtek Audio)"-f dshow -i audio="virtual-audio-capturer" -filter_complex amix=inputs=2:duration=first:dropout_transition=2  a-out2.aac同时录制声音和视频（默认参数）ffmpeg -f dshow -i audio="麦克风(Realtek Audio)" -f dshow -i audio="virtual-audio-capturer" -filter_complex amix=inputs=2:duration=first:dropout_transition=2 -f dshow -i video="screen-capture-recorder"  -y av-out.flv查看视频录制的可选参数查看视频录制的可选参数ffmpeg -f dshow -list_options true -i video="screen-capture-recorder"[dshow @ 02f0d6c0] DirectShow video device options (from video devices)[dshow @ 02f0d6c0]  Pin "Capture" (alternative pin name "1")[dshow @ 02f0d6c0]   pixel_format=bgr0  min s=1x1 fps=0.02 max s=1920x1080 fps=30[dshow @ 02f0d6c0]   pixel_format=bgr0  min s=1x1 fps=0.02 max s=1920x1080 fps=30[dshow @ 02f0d6c0]   pixel_format=bgr24  min s=1x1 fps=0.02 max s=1920x1080 fps=30[dshow @ 02f0d6c0]   pixel_format=rgb555le  min s=1x1 fps=0.02 max s=1920x1080 fps=30[dshow @ 02f0d6c0]   pixel_format=rgb555le  min s=1x1 fps=0.02 max s=1920x1080 fps=30[dshow @ 02f0d6c0]   pixel_format=rgb8  min s=1x1 fps=0.02 max s=1920x1080 fps=30[dshow @ 02f0d6c0]   pixel_format=yuv420p  min s=1x1 fps=0.02 max s=1920x1080 fps=30查看音频录制的可选参数ffmpeg -f dshow-list_optionstrue -i audio="virtual-audio-capturer"[dshow @ 05a2d6c0] DirectShow audio only device options (from audio devices)[dshow @ 05a2d6c0]  Pin "Capture Virtual Audio Pin" (alternative pin name "1")[dshow @ 05a2d6c0]   min ch=2 bits=16 rate= 48000 max ch=2 bits=16 rate= 48000ffmpeg -f dshow -list_options true -i audio="麦克风 (Realtek Audio)"指定参数录制音视频ffmpeg -f dshow -i audio="麦克风(Realtek Audio)" -f dshow -i audio="virtual-audio-capturer" -filter_complex amix=inputs=2:duration=first:dropout_transition=2 -fdshow -video_size1920x1080 -framerate 15 -pixel_format yuv420p  -i video="screen-capture-recorder" -vcodec h264_qsv  -b:v 3M  -y av-out.flvffmpeg -fdshow -i audio="麦克风(Realtek Audio)" -f dshow -i audio="virtual-audio-capturer" -filter_complex amix=inputs=2:duration=first:dropout_transition=2 -f dshow -i video="screen-capture-recorder" -vcodec h264_qsv  -b:v 3M-r 15 -y av-out2.mp4ffmpeg -fdshow -i audio="麦克风(Realtek Audio)" -f dshow -i audio="virtual-audio-capturer" -filter_complex amix=inputs=2:duration=first:dropout_transition=2 -f dshow-framerate 15 -pixel_format yuv420p -i video="screen-capture-recorder" -vcodec h264_qsv  -b:v 3M-r 15 -y av-out3.mp4桌面+摄像头+麦克风ffmpeg  -f dshow -framerate 15 -i video="screen-capture-recorder"  -f dshow -framerate 10 -i video="Integrated Webcam"  -filter_complex "[1]scale=iw/2:ih/2[pip];[0][pip]overlay=main_w-overlay_w-10:main_h-overlay_h-10" -f dshow -i audio="麦克风 (Realtek Audio)" -c:a aac -c:v h264_qsv -r 10 -b 3M -f flv  rtmp://111.229.231.225/live/33rtp推流先用ffplay检测摄像头是否正常，比如：ffplay -f dshow -i video="USB2.0 PC CAMERA"推流：ffmpeg -f dshow -i video="USB2.0 PC CAMERA" -vcodec libx264 -f rtp rtp://192.168.2.208:6970 > test.sdp拉流：ffplay -protocol_whitelist "file,udp,rtp" -i test.sdp16-ffmpeg命令直播直播拉流ffplay rtmp://server/live/streamName ffmpeg -i rtmp://server/live/streamName -c copy dump.flv对于不是rtmp的协议 -c copy要谨慎使用可用地址HKS：rtmp://live.hkstv.hk.lxdns.com/live/hks2大熊兔(点播)：rtsp://184.72.239.149/vod/mp4://BigBuckBunny_175k.movCCTV1高清：http://ivi.bupt.edu.cn/hls/cctv1hd.m3u8CCTV3高清：http://ivi.bupt.edu.cn/hls/cctv3hd.m3u8CCTV5高清：http://ivi.bupt.edu.cn/hls/cctv5hd.m3u8CCTV5+高清：http://ivi.bupt.edu.cn/hls/cctv5phd.m3u8CCTV6高清：http://ivi.bupt.edu.cn/hls/cctv6hd.m3u8ffmpeg推流直播推流ffmpeg -re -i out.mp4 -c copy flvrtmp://server/live/streamName      参数：-re,表示按时间戳读取文件参考：Nginx搭建rtmp流媒体服务器(Ubuntu 16.04)https://www.jianshu.com/p/16741e363a7717 FFmpeg滤镜 17.1 filter的分类按照处理数据的类型，通常多媒体的filter分为：音频filter视频filter字幕filter另一种按照处于编解码器的位置划分：prefilters: used before encodingintrafilters: used while encoding (and are thus an integral part of a video codec)postfilters: used after decoding FFmpeg中filter分为：source filter （只有输出）audio filtervideo filterMultimedia filtersink filter （只有输入）除了source和sink filter，其他filter都至少有一个输入、至少一个输出。 17.2 视频裁剪视频过滤器（滤镜）:裁剪图 1-1 裁剪图  描述将输入视频帧的宽度和高度从x和y值表示的位置裁剪到指定的宽度和高度;x和y是输出的左上角坐标，协调系统的中心是输入视频帧的左上角。如果使用了可选的keep_aspect参数，将会改变输出SAR(样本宽比)以补偿新的DAR(显示长宽比)语法crop=ow[:oh[:x[:y[:keep_aspect]]]] 变量用于ow和oh参数的表达式中的可用变量x,   y对x的计算值(从左上角水平方向的像素个数)和y(垂直像素的数量)，对每个帧进行评估，x的默认值为(iw - ow)/2, y的默认值为(ih - oh)/2in_w, iw输入的宽度in_h, ih输入的高度out_w, ow输出(裁剪)宽度，默认值= iwout_h, oh输出(裁剪)高度，默认值= iha纵横比，与iw/ih相同sar输入样本比例dar输入显示宽比，等于表达式a*sarhsub, vsub水平和垂直的色度子样本值，对于像素格式yuv422p, hsub的值为2,vsub为1n输入帧的数目，从0开始pos位置在输入框的文件中，如果不知道NANt时间戳以秒表示，如果输入时间戳未知ow的值可以从oh得到，反之亦然，但不能从x和y中得到，因为这些值是在ow和oh之后进行的。x的值可以从y的值中得到，反之亦然。例如，在输入框的左三、中三和右三，我们可以使用命令:ffmpeg -i input -vf crop=iw/3:ih:0:0   output ffmpeg -i input -vf crop=iw/3:ih:iw/3:0   output ffmpeg -i input -vf crop=iw/3:ih:iw/3*2:0 output  练习题：（1）裁剪100x100的区域，起点为(12,34).crop=100:100:12:34相同效果: crop=w=100:h=100:x=12:y=34 （2）裁剪中心区域，大小为100x100crop=100:100 （3）裁剪中心区域，大小为输入视频的2/3crop=2/3*in_w:2/3*in_h （4）裁剪中心区域的正方形，高度为输入视频的高crop=out_w=in_hcrop=in_h （5）裁剪偏移左上角100像素crop=in_w-100:in_h-100:100:100 （6）裁剪掉左右10像素，上下20像素crop=in_w-2*10:in_h-2*20 （7）裁剪右下角区域crop=in_w/2:in_h/2:in_w/2:in_h/217.3 FFmpeg滤镜Filter内置变量在使用Filter时，经常会用到根据时间轴进行操作的需求，在使用FFmpeg的Filter时可以使用Filter的时间相关的内置变量，下面先来了解一下这些相关的变量，见下表。表17-3 FFmpeg滤镜filter基本内置变量变量说明t以秒表示的时间戳，如果输入的时间是未知的则是NANn输入帧的顺序编号，从0开始pos输入帧的位置，如果未知的则是NANw输入视频帧的宽度h输入视频帧的高度  17.4 添加水印17.4.1 文字水印在视频中增加文字水印需要准备的条件比较多，需要有文字字库处理的相关文件，在编译FFmpeg时需要支持FreeType、FontConfig、iconv，系统中需要有相关的字库，在FFmpeg中增加纯字母水印可以使用drawtext滤镜进行支持，下面就来看一下drawtext的滤镜参数，具体见表1-4。表1-4 FFmpeg文字滤镜参数参数类型说明text字符串文字textfile字符串文字文件box布尔文字区域背景框(缺省false)boxcolor色彩展示字体区域块的颜色font字符串字体名称（默认为Sans字体）fontsize整数显示字体的大小x字符串缺省为0y字符串缺省为0alpha浮点数透明度(默认为1)，值从0~1    举例 （1）将文字的水印加在视频的左上角：ffplay -i input.mp4 -vf "drawtext=fontsize=100:fontfile=FreeSerif.ttf:text='hello world':x=20:y=20"将字体的颜色设置为绿色：ffplay -i input.mp4 -vf "drawtext=fontsize=100:fontfile=FreeSerif.ttf:text='hello world':fontcolor=green"如果想调整文字水印显示的位置，调整x与y参数的数值即可。ffplay -i input.mp4 -vf "drawtext=fontsize=100:fontfile=FreeSerif.ttf:text='hello world':fontcolor=green:x=400:y=200"修改透明度ffplay -i input.mp4 -vf "drawtext=fontsize=100:fontfile=FreeSerif.ttf:text='hello world':fontcolor=green:x=400:y=200:alpha=0.5" （2）文字水印还可以增加一个框，然后给框加上背景颜色：ffplay -i input.mp4 -vf "drawtext=fontsize=100:fontfile=FreeSerif.ttf:text='hello world':fontcolor=green:box=1:boxcolor=yellow"至此，文字水印的基础功能已经添加完成。 （3）有些时候文字水印希望以本地时间作为水印内容，可以在drawtext滤镜中配合一些特殊用法来完成，在text中显示本地当前时间，格式为年月日时分秒的方式，ffplay  -i input.mp4 -vf "drawtext=fontsize=60:fontfile=FreeSerif.ttf:text='%{localtime\:%Y\-%m\-%d %H-%M-%S}':fontcolor=green:box=1:boxcolor=yellow" 在使用ffmpeg转码存储到文件时需要加上-re，否则时间不对。ffmpeg -re -i input.mp4 -vf "drawtext=fontsize=60:fontfile=FreeSerif.ttf:text='%{localtime\:%Y\-%m\-%d %H-%M-%S}':fontcolor=green:box=1:boxcolor=yellow" out.mp4 （4）在个别场景中，需要定时显示水印，定时不显示水印，这种方式同样可以配合drawtext滤镜进行处理，使用drawtext与enable配合即可，例如每3秒钟显示一次文字水印：ffplay -i input.mp4 -vf "drawtext=fontsize=60:fontfile=FreeSerif.ttf:text='test':fontcolor=green:box=1:boxcolor=yellow:enable=lt(mod(t\,3)\,1)"在使用ffmpeg转码存储到文件时需要加上-re，否则时间不对。 表达式参考：http://www.ffmpeg.org/ffmpeg-utils.html 3 Expression Evaluationlt(x, y)  Return 1 if x is lesser than y, 0 otherwise.mod(x, y) Compute the remainder of division of x by y. （5）跑马灯效果ffplay -i input.mp4 -vf "drawtext=fontsize=100:fontfile=FreeSerif.ttf:text='helloworld':x=mod(100*t\,w):y=abs(sin(t))*h*0.7" 修改字体透明度，修改字体颜色ffplay -i input.mp4 -vf "drawtext=fontsize=40:fontfile=FreeSerif.ttf:text='liaoqingfu':x=mod(50*t\,w):y=abs(sin(t))*h*0.7:alpha=0.5:fontcolor=white:enable=lt(mod(t\,3)\,1)"17.4.2 图片水印FFmpeg除了可以向视频添加文字水印之外，还可以向视频添加图片水印、视频跑马灯等，本节将重点介绍如何为视频添加图片水印；为视频添加图片水印可以使用movie滤镜，下面就来熟悉一下movie滤镜的参数，如表1-5所示。表1-5 FFmpeg movie滤镜的参数参数类型说明filename字符串输入的文件名，可以是文件，协议，设备format_name, f字符串输入的封装格式stream_index,   si整数输入的流索引编号seek_point,   sp浮点数Seek输入流的时间位置streams,   s字符串输入的多个流的流信息loop整数循环次数discontinuity时间差值支持跳动的时间戳差值 ffmpeg -i input.mp4 -vf "movie=logo.png[watermark];[in][watermark]overlay=x=10:y=10[out]" output.mp4Ø 原始视频文件路径：input.mp4Ø 水印图片路径：logo.pngØ 水印位置：(x,y)=(10,10)<=(left,top)距离左侧、顶部各10像素；Ø 输出文件路径：output.mp4 overlay过滤器描述：前景窗口(第二输入)覆盖在背景窗口(第一输入)的指定位置。语法：overlay[=x:y[[:rgb={0, 1}]]参数 x 和 y 是可选的，默认为 0。参数 rgb 参数也是可选的，其值为 0 或 1，默认为 0。  参数说明：x                   从左上角的水平坐标，默认值为 0y                   从左上角的垂直坐标，默认值为 0rgb                 值为 0 表示输入颜色空间不改变，默认为 0；值为 1 表示将输入的颜色空间设置为 RGB  参数说明main_w 或 W    视频单帧图像宽度main_h 或 H    视频单帧图像高度overlay_w水印图片的宽度overlay_h水印图片的高度对应地可以将overlay参数设置成如下值来改变水印图片的位置：水印图片位置overlay值左上角10:10右上角    main_w-overlay_w-10:10左下角    10:main_h-overlay_h-10右下角main_w-overlay_w-10:main_h-overlay_h-10在FFmpeg中加入图片水印有两种方式，一种是通过movie指定水印文件路径，另外一种方式是通过filter读取输入文件的流并指定为水印，这里重点介绍如何读取movie图片文件作为水印。（1）图片logo.png将会打入到input.mp4视频中，显示在x坐标50、y坐标20的位置ffplay -i input.mp4 -vf "movie=logo.png[logo];[in][logo]overlay=50:10[out]"由于logo.png图片的背景色是白色，所以显示起来比较生硬，如果水印图片是透明背景的，效果会更好，下面找一张透明背景色的图片试一下：ffplay -i input.mp4 -vf "movie=logo2.png[watermark];[in][watermark]overlay=50:10[out]"（2）显示位置ffplay -i input.mp4 -vf "movie=logo.png[watermark];[in][watermark]overlay=10:10[out]" ffplay -i input.mp4 -vf "movie=logo.png[watermark];[in][watermark]overlay=main_w-overlay_w-10:10[out]" ffplay -i input.mp4 -vf "movie=logo.png[watermark];[in][watermark]overlay=10:main_h-overlay_h-10[out]" ffplay -i input.mp4 -vf "movie=logo.png[watermark];[in][watermark]overlay=main_w-overlay_w-10:main_h-overlay_h-10[out]"（3）跑马灯效果ffplay -i input.mp4 -vf "movie=logo.png[watermark];[in][watermark]overlay=x=mod(50*t\,main_w):y=abs(sin(t))*h*0.7[out]" 17.4.3 FFmpeg生成画中画在使用FFmpeg处理流媒体文件时，有时需要使用画中画的效果。在FFmpeg中，可以通过overlay将多个视频流、多个多媒体采集设备、多个视频文件合并到一个界面中，生成画中画的效果。在前面的滤镜使用中，以至于以后的滤镜使用中，与视频操作相关的处理，大多数都会与overlay滤镜配合使用，尤其是用在图层处理与合并场景中，下面就来了解一下overlay的参数，具体见表1-6。表1-6 FFmpeg滤镜overlay基本参数参数类型说明x字符串X坐标y字符串Y坐标eof_action整数遇到eof表示时的处理方式，默认为重复Ø  repeat(值为0)：重复前一帧Ø  endcall(值为1)：停止所有的流Ø  pass(值为2)：保留主图层shortest布尔终止最短的视频时全部终止（默认false）format整数设置output的像素格式，默认为yuv420Ø  yuv420 (值为0)Ø  yuv422 (值为1)Ø  yuv444 (值为2)Ø  rgb (值为3) 从参数列表中可以看到，主要参数并不多，但实际上在overlay滤镜使用中，还有很多组合的参数可以使用，可以使用一些内部变量，例如overlay图层的宽、高、坐标等。（1）显示画中画效果ffplay -i input.mp4 -vf "movie=sub_320x240.mp4[sub];[in][sub]overlay=x=20:y=20[out]" ffplay -i input.mp4 -vf "movie=sub_320x240.mp4[sub];[in][sub]overlay=x=20:y=20:eof_action=1[out]" ffplay -i input.mp4 -vf "movie=sub_320x240.mp4[sub];[in][sub]overlay=x=20:y=20:shortest =1[out]" 缩放子画面尺寸ffplay -i input.mp4 -vf "movie=sub_320x240.mp4,scale=640x480[sub];[in][sub]overlay=x=20:y=20[out]"（2）跑马灯ffplay -i input.mp4 -vf "movie=sub_320x240.mp4[test];[in][test]overlay= x=mod(50*t\,main_w):y=abs(sin(t))*main_h*0.7[out]" 17.4.4 FFmpeg视频多宫格处理视频除了画中画显示，还有一种场景为以多宫格的方式呈现出来，除了可以输入视频文件，还可以输入视频流、采集设备等。从前文中可以看出进行视频图像处理时，overlay滤镜为关键画布，可以通过FFmpeg建立一个画布，也可以使用默认的画布。如果想以多宫格的方式展现，则可以自己建立一个足够大的画布，下面就来看一下多宫格展示的例子：ffmpeg -i 1.mp4 -i 2.mp4 -i  3.mp4 -i  4.mp4 -filter_complex "nullsrc=size=640x480[base];[0:v] setpts=PTS-STARTPTS,scale=320x240[upperleft];[1:v]setpts=PTS-STARTPTS,scale=320x240[upperright];[2:v]setpts=PTS-STARTPTS, scale=320x240[lowerleft];[3:v]setpts=PTS-STARTPTS,scale=320x240[lowerright];[base][upperleft]overlay=shortest=1[tmp1];[tmp1][upperright]overlay=shortest=1:x=320[tmp2];[tmp2][lowerleft]overlay=shortest=1:y=240[tmp3];[tmp3][lowerright]overlay=shortest=1:x=320:y=240" out.mp4 1.2.3.4.mp4为文件路径，out.MP4为输出文件路径，通过nullsrc创建overlay画布，画布大小640:480,使用[0:v][1:v][2:v][3:v]将输入的4个视频流去除，分别进行缩放处理，然后基于nullsrc生成的画布进行视频平铺，命令中自定义upperleft,upperright,lowerleft,lowerright进行不同位置平铺。只叠加左上右上的命令：ffmpeg -i 1.mp4 -i 2.mp4 -i  3.mp4 -i  4.mp4 -filter_complex "nullsrc=size=640x480[base];[0:v]setpts=PTS-STARTPTS,scale=320x240[upperleft];[1:v]setpts=PTS-STARTPTS,scale=320x240[upperright];[base][upperleft]overlay=shortest=1[tmp1];[tmp1][upperright]overlay=shortest=1:x=320" out2.mp4