1. 简单百科
  2. FFmpeg

FFmpeg

FFmpeg(Fast Forward MPEG),是一套可以用来记录、转换数字音频、视频,并能将这些音视频转化为流的开源计算机程序。FFmpeg采用LGPL或GPL许可证,提供了录制、转换以及流化音视频的完整解决方案。

FFmpeg被许多项目广泛采用,如qq影音暴风影音KMPlayer都以其作为内核播放器。绝大部分与音视频有关的技术开发都离不开FFmpeg,因为它包含了非常先进的音频、视频编解码库libavcodec,其中的很多code都从底层开发,以保证其高可移植性和编解码质量。除libavcodec之外,FFmpeg还包含Libavformat、Libswresample、Libavutil、Libavfilter、Libavdevice和Libswscale,共七个程序库,以供流媒体技术开发人员进行二次开发,结合具体项目需求调用相关的程序接口,对音视频数据进行加工处理,实现编码、转码、解码、封装、解封装等功能。

FFmpeg在Linux平台下开发,也可在其它操作系统环境如Windows、Mac OS X中编译运行,可使用GPU编解码技术进行加速。FFmpeg项目最早由Fabrice Bellard发起,2004年至2015年间由Michael Niedermayer主要负责维护,该项目的名称来自MPEG视频编码标准,前面的“FF”代表“Fast Forward”。FFmpeg的许多开发人员都来自Mplayer项目,且FFmpeg还放在MPlayer项目组的服务器上。

功能

多媒体视频处理工具FFmpeg有非常强大的功能包括视频采集功能、视频格式转换、视频抓图、给视频加水印等。

视频采集功能

ffmpeg视频采集功能非常强大,不仅可以采集视频采集卡或USB摄像头的图像,还可以进行屏幕录制,同时还支持以RTP方式将视频流传送给支持RTSP的流媒体服务器,支持直播应用。

ffmpeg在Linux下的视频采集

在Linux平台上,ffmpeg对Video4Linux的视频设备提供了很好的支持,如:

./ffmpeg-t10-fvideo4linux2-s176*144-r8-i/dev/video0-vcodech263-frtprtp://192.168.1.105:5060\u003e/tmp/ffmpeg.sdp

以上命令表示:采集10秒钟视频,对video4linux2视频设备进行采集,采集QCIF(176*144)的视频,每秒8帧,视频设备为/dev/video0,视频编码为H263,输出格式为RTP,后面定义了IP地址及端口,将该码流所对应的SDP文件重定向到/tmp/ffmpeg.sdp中,将此SDP文件上传到流媒体服务器就可以实现直播了。

ffmpeg在windows下的视频采集

在windows下关于ffmpeg视频采集的资料非常少,但是ffmpeg还是支持windows下视频采集的。ffmpeg支持windows下videoforwindows(VFW)设备的视频采集,不过VFW设备已经过时,正在被WDM的视频设备所取代,但是ffmpeg还没有支持WDM的计划,不过好像有将WDM转为VFW的工具,因此ffmpeg还是可以在windows下进行视频采集的。

视频格式转换功能

ffmpeg视频转换功能。视频格式转换,比如可以将多种视频格式转换为flv格式,可不是视频信号转换。

ffmpeg可以轻易地实现多种视频格式之间的相互转换(wma,rm,avi,mod等),例如可以将摄录下的视频avi等转成视频网站所采用的flv格式。

视频截图功能

对于选定的视频,截取指定时间的缩略图。视频抓图,获取静态图和动态图,不提倡抓gif文件;因为抓出的gif文件大而播放不流畅。

给视频加水印功能

使用ffmpeg视频添加水印(logo)。

项目组成

FFmpeg是一套可以用来记录、转换数字音频、视频,并能将其转化为流的开源计算机程序。它包括了领先的音/视频编码库libavcodec等。

libavformat:用于各种音视频封装格式的生成和解析,包括获取解码所需信息以生成解码上下文结构

和读取音视频帧等功能;

libavcodec:用于各种类型声音/图像编解码;

libavutil:包含一些公共的工具函数;

libswscale:用于视频场景比例缩放、色彩映射转换;

libpostproc:用于后期效果处理;

ffmpeg:该项目提供的一个工具,可用于格式转换、解码或电视卡即时编码等;

ffsever:一个HTTP多媒体即时广播串流服务器;

ffplay:是一个简单的播放器,使用ffmpeg库解析和解码,通过SDL显示;

命令集

ffmpeg命令集举例

1.获取视频的信息

ffmpeg-ivideo.avi

2.将图片序列合成视频

ffmpeg-fimage2-iimage%d.jpgvideo.mpg

上面的命令会把当前目录下的图片(名字如:image1.jpg.image2.jpg.等...)合并成video.mpg

3.将视频分解成图片序列

ffmpeg-ivideo.mpgimage%d.jpg

上面的命令会生成image1.jpg.image2.jpg....

支持的图片格式有:PGM.PPM.PAM.PGMYUV.JPEG.GIF.PNG.TIFF.SGI

4.为视频重新编码以适合在iPod/IPhone上播放

ffmpeg-isource_video.aviinput-acodecaac-ab128kb-vcodecmpeg4-b1200kb-mbd2-flags+4mv+trell-aic2-cmp2-subcmp2-s320x180-titleXfinal_video.mp4

说明:

*源视频:source_video.avi

*音频编码:aac

*音频位率:128kb/s

*视频编码:mpeg4

*视频位率:1200kb/s

*视频尺寸:320X180

*生成的视频:final_video.mp4

5.为视频重新编码以适合在psp上播放

ffmpeg-isource_video.avi-b300-s320x240-vcodecxvid-ab32-ar24000-acodecaacfinal_video.mp4

说明:

*源视频:source_video.avi

*音频编码:aac

*音频位率:32kb/s

*视频编码:XviD

*视频位率:1200kb/s

*视频尺寸:320X180

*生成的视频:final_video.mp4

6.从视频抽出声音。并存为Mp3

ffmpeg-isource_video.avi-vn-ar44100-ac2-ab192-fmp3sound.mp3

说明:

*源视频:source_video.avi

*音频位率:192kb/s

*输出格式:mp3

*生成的声音:sound.mp3

7.将wav文件转成Mp3

ffmpeg-ison_origine.avi-vn-ar44100-ac2-ab192-fmp3son_final.mp3

8.将.avi视频转成.mpg

ffmpeg-ivideo_origine.avivideo_finale.mpg

9.将.mpg转成.avi

ffmpeg-ivideo_origine.mpgvideo_finale.avi

10.将.avi转成gif动画(未压缩)

ffmpeg-ivideo_origine.avigif_anime.gif

11.合成视频和音频

ffmpeg-ison.wav-ivideo_origine.avivideo_finale.mpg

12.将.avi转成.flv

ffmpeg-ivideo_origine.avi-ab56-ar44100-b200-r15-s320x240-fflvvideo_finale.flv

13.将.avi转成dv

ffmpeg-ivideo_origine.avi-spal-rpal-aspect4:3-ar48000-ac2video_finale.dv

或者:

ffmpeg-ivideo_origine.avi-targetpal-dvvideo_finale.dv

14.将.avi压缩成divx

ffmpeg-ivideo_origine.avi-s320x240-vcodecmsmpeg4v2video_finale.avi

15.将OggTheora压缩成Mpegdvd

ffmpeg-ifilm_sortie_cinelerra.ogm-s720x576-vcodecmpeg2video-acodecmp3film_terminate.mpg

16.将.avi压缩成SVCDmpeg2

NTSC格式:

ffmpeg-ivideo_origine.avi-targetntsc-svcdvideo_finale.mpg

PAL格式:

ffmpeg-ivideo_origine.avi-targetpal-svcdvideo_finale.mpg

17.将.avi压缩成VCDmpeg2

NTSC格式:

ffmpeg-ivideo_origine.avi-targetntsc-vcdvideo_finale.mpg

PAL格式:

ffmpeg-ivideo_origine.avi-targetpal-vcdvideo_finale.mpg

18.多通道编码

ffmpeg-ifichierentree-pass2-passlogfileffmpeg2passfichiersortie-2

19.从flv提取mp3

ffmpeg-isource.flv-ab128kdest.mp3

格式

支持的编码

源自FFmpeg项目组的两个视频编码:

Snow

FFV1

支持的格式

ASF

AVI

BFI

IFF

RL2

FLV

MXF,MaterialeXchangeFormat,SMPTE377M

Matroska

MaxisXA

MSNWebcamstream

MPEGtransportstream

TXD

OMA

GXF,GeneraleXchangeFormat,SMPTE360M

mov,mp4,m4a,3gp,

协议

支持的协议

HTTP

RTP

RTSP

RealMediaRTSP/RDT

GOPHER

RTMP

RTMPT,RTMPE,RTMPTE,RTMPS(vialibrtmp)

SDP

MMSoverTCP

版权

(HallOfShame)

FFmpeg被许多开源项目采用,比如ffmpeg2theora,VLC,MPlayer,HandBrake,Blender,GoogleChrome等。还有DirectShow/VFW的ffdshow(externalproject)和QuickTime的Perian(externalproject)也采用了FFmpeg。

由于FFmpeg是在LGPL/GPL协议下发布的(如果使用了其中一些使用GPL协议发布的模块则必须使用GPL协议),任何人都可以自由使用,但必须严格遵守LGPL/GPL协议。有很多播放软件都使用了FFmpeg的代码,但它们并没有遵守LGPL/GPL协议,没有公开任何源代码。我们应该对这种侵权行为表示耻辱。

2009年加入FFmpeg的播放软件:暴风影音qq影音、KMP、GOMPlayer、PotPlayer(2010)都在其列。

2009年2月,韩国名软KMPlayer被FFmpeg开源项目发现使用了它们的代码和二进制文件,但是没有按照规定/惯例开放相应说明/源码。因此被人举报,进入了FFmpeg官网上的耻辱黑名单。

2009年5月,网友cehoyos下载了暴风影音软件,解压之后发现其安装程序内包含了大量的开源和私有解码器:avcodec,avformat,avutil,x264,XviD,bass,wmvdmod等,之后暴风影音被正式加入到FFmpeg耻辱名单。

2009年7月22日,陈俊豪(格式工厂作者)因用到了ffmpeg和RMVB的编码库,用到了FFmpeg的译码/编码算法,违反FFmpeg的LGPL协议,登上了2009年7月22日FFmpeg的“耻辱柱”上。

2009年11月,网友roo_zhou向FFmpeg举报,指出qq影音的credit只给出了修改的FFmpeg源码下载,声称是LGPL许可证。但实际是修改过的ffdshow,采用的是全球扑克联赛许可证,之后QQ影音被正式加入到FFmpeg耻辱名单之列。

Libav项目启动之后,FFmpeg官方版本也仍然在一直维护中。FFmpeg与libav属于独立的两个项目。

版本发布

2014-12-5,FFmpeg2.5发布

2014-09-15,FFmpeg2.4发布

2013-07-10,FFmpeg2.2发布

2012年01月27日,FFmpeg0.9.1发布,修复了很多bug和安全方面的补丁,包括:CVE-2011-3893andCVE-2011-3895,同时显著提升对H.264的检索支持。

2012年01月29日,FFmpeg0.10发布,这是一个主要的发行版本,包含大量的新特性和bug修复。

2012年04月07日,FFmpeg0.10.1发布,FFmpeg0.10.1修复了很多安全漏洞,超过100个bug修复,新增swapuv过滤器

2012年05月07,FFmpeg0.10.3发布,该版本修复了4xm分路器、cook解码器、mm分路器、mpeg视频解码器、vqavideo解码器、xmv分路器的安全问题,以及包含一些重要的bug修复。

2012年06月09日,FFmpeg0.11.1发布,该版本修复了70个bug,其中有一些安全方面的问题。

参考资料

《多媒体通信》实验项目:基于 ffmpeg 搭建直播系统 1.使用ffmpeg建立直播系统.中国科学技术大学.2024-02-07