最近在做某视频剪辑项目的后端开发，之前对于视频的处理一直是空白状态。项目中涉及到的很多概念，随着不断的接触，有了一个从模糊到清晰的认知。
在多媒体处理中，术语滤镜(filter)指的是修改未编码的原始音视频数据帧的一种软件工具。
例如：输入两个文件，一个视频文件input1.mp4，一个图片logo.jpg，将图像流缩放为2000×2000分辨率，放置在视频的左上角
每周一期，纵览音视频技术领域的干货。 新闻投稿：contribute@livevideostack.com。 ✦ 一周简讯 ✦ MPAI-MMC将被IEEE采纳为技术标准 在 MPAI Multimodal Conversation (MPAI-MMC) 获得批准满 6 个月的当天，IEEE 主持了 P3300 工作组的启动会议，任务是采用 MPAI 技术规范作为 IEEE 标准。早些时候，MPAI 和 IEEE 签署了一项协议，MPAI 授予 IEEE 将 MPAI-MMC 作为 IEEE 标准发布的
FFmpeg不仅提供了ffmpeg、ffplay和ffprobe三个可执行程序，还提供了八个工具库，使得开发者能够调用库里面的函数，从而实现更精准的定制化开发需求。这八个库的名字是avcodec、avdevice、avfilter、avformat、avutil、postproc、swresample、swscale，下面分别对这些库展开介绍。
感谢大家关注FFmpeg在OnVideo以及AI方面的一些工作，我是刘歧，是OnVideo联合创始人的同时也担任技术负责人，同时也是FFmpeg的官方顾问，FFmpeg GSoC 2019 Mentor，FFmpeg决策委员会的委员，以及腾讯云TVP。我主要的兴趣在嵌入式开发、图形图像及音视频流媒体处理、分布式系统设计等领域。FFmpeg官方有我的联系方式，大家有问题可以和我随时交流。关于FFmpeg深度学习场景下的应用，目前看来，颇具价值且实用。
📷 本文来自OnVideo视频创作云平台联合创始人刘歧在LiveVideoStackCon的讲师热身分享，刘歧分享了FFmpeg的基本原理、使用方法及开发方法。在10月19-20日的LiveVideo
这两天研究了FFmpeg获取DirectShow设备数据的方法，在此简单记录一下以作备忘。本文所述的方法主要是对应Windows平台的。
FFmpeg是一个用于音视频处理的自由软件，被广泛用于音视频开发。FFmpeg功能强大，本文主要介绍如何使用FFmpeg命令行工具进行简单的视频处理。 安装FFmpeg可以在官网下载各平台软件包或者静态编译版本，也可以使用包管理工具安装。 基本概念 获得音视频信息 使用ffmpeg进行视频处理 选项 - -y / -n - -codec(-c) - -ss - -t - -to - -f - -filter / -filter_complex - -vframes - -vn - -r - -s - -a
最近负责一个录屏的小项目，需要录制Windows窗口内容并压缩保存到指定文件夹，本想使用已有的录屏软件，但是本着学习的态度去探索了FFMpeg，本文主要介绍基于FFMpeg开源项目的C#录屏软件开发。 在Windows平台下开发录屏相比Linux比较复杂，Windows平台下录屏有gdigrab和dshow两种方法，由于gdigrab可修改属性受限，所以本文采用dshow方法实现录屏的功能，原理是注册录屏dshow滤镜（例如screen-capture-recorder），然后通过ds
Reallusion Cartoon Animator for Mac是一款优秀的2D动画设计制作软件，艺术家，插画家，漫画家和设计师能够轻松地从静态图像，照片，绘画甚至分层的PhotoshoppsD创建可动画的2D角色。Cartoon Animator Mac中文版为日常制作压力下的人们提供最快的动画解决方案。
有位大佬说，“这是全网最全的 Android OpenGL ES 教程”，哈哈，对于这种善意的“商业互吹”，当然是欣然接受，这无疑给了我更多的动力和激情来完善这几个系列的文章。
FFmpeg 除了具有强大的封装/解封装、编/解码功能外，还包含了一个非常强大的组建—滤镜avfilter。avfilter组建经常用于进行多媒体的处理与编辑，FFmpeg中包含多种滤镜。
FFmpeg的介绍网上还是很多的。官网的wiki上面也有很多内容。围绕目标，主要是有两套实现的思路。早期，其实是想通过自己编写C代码，来完成整个流程的。但是无奈目前的水平有限，而且时间不够充裕。故最后的思路是通过学习现有的命令行参数，来快速完成FFmpeg的使用。但是这样的弊端也极大的，在此暂时不诉。
overlay技术又称视频叠加技术。overlay视频技术使用非常广泛，常见的例子有，电视屏幕右上角显示的电视台台标，以及画中画功能，画中画是指在一个大的视频播放窗口中还存在一个小播放窗口，两个窗口不同的视频内容同时播放。
ffmpeg应该是音视频入门必须要掌握的开源项目，涉及到音视频从生产到消费的完整过程，ffmpeg是一个综合性项目，涉及到非常多的知识点；
本文为作者原创，转载请注明出处：https://www.cnblogs.com/leisure_chn/p/10429145.html
FFmpeg是一款用于多媒体处理的自由软件工程，基于GPL许可证发布。FFmpeg提供的最核心的命令行工具是ffmpeg，ffmpeg命令行工具的主要特征是输出快速、高品质、文件尺寸小。“FFmpeg”中“FF”表示“Fast Forward”，“mpeg”表示“Moving Pictures Experts Group”。
章节 双视频合并和视频并排显示 视频去除音频 1，双视频合并＆视频并排显示 1.1，命令行如下所示： ffmpeg -i w11.mp4 -i w11.mp4 -filter_complex hsta
滤镜(filter)是指将未经过处理的原始音频帧(如PCM)或视频帧(如YUV、RGB)经过滤镜器处理后，得到具体“特殊效果”的音频帧或视频帧，比如音频帧被添加回声、视频帧被旋转、缩放、添加水印等等。需要注意的是，滤镜处理的是原始音视频帧数据，输出的仍然是原始数据，因此不会造成数据损伤。FFmpeg的libavfilter库中提供了很多的内置滤镜，我们可以单独使用一个滤镜进行数据处理，也可以将多个滤镜连接起来组合使用，其中一个滤镜的输出可以连接到另一个滤镜的输入，因此滤镜分为简单滤镜和复杂滤镜。在FFmpeg中，滤镜模块支持多路输入和多路输出，其提供了两种方式使用滤镜，即命令和API，首先我们来看下在命令中定义一个滤镜，语法如下：
① FFMPEG 初始化 : 参考博客 【Android FFMPEG 开发】FFMPEG 初始化 ( 网络初始化 | 打开音视频 | 查找音视频流 )
FFmpeg中的FF全称是"Fast Forward"，后面的mpeg全称是"Moving Picture Experts Group"(动态图像专家组)，FFmpeg既是一款音视频编解码工具，也是一组音视频编解码开发套件，作为编解码开发套件，它为开发者提供了丰富的音视频处理的调用接口。
其中： - Duration行的bitrate: 548 kb/s， 为视频比特率 - Stream行的640x360为分辨率
美美导读：移动互联网时代，4G的普及推动了移动视频的发展，丰富的视频内容满足了用户多样化的需求。美团外卖商家端也尝试引入了视频功能，旨在提升商品信息描述的丰富度。本文总结了商家端视频功能的闭环全流程实践及部分踩坑经验。
FFmpeg: Fast Forward Moving Picture Experts Group(mpeg:动态图像专家组） H.264:国际标准化组织（ISO）和国际电信联盟（ITU）共同提出的继MPEG4之后的新一代数字视频压缩格式.H.264是ITU-T以H.26x系列为名称命名的标准之一 AVC(Advaned Video Coding):ISO/IEC MPEG一方对H.264的称呼 序列的参数集(SPS)：包括了一个图像序列的所有信息 图像的参数集(PPS)：包括了一个图像所有片的信息 MinGW-w64:MinGW是Minimalist GNU for Windows的缩写，ffmpeg在Windows平台中的编译需要使用MinGW-w64,它提供了一系列的工具链来辅助编译Windows的本地化程序。MinGW-w64单独使用起来会比较麻烦，但是其可以与MSYS环境配合使用，MSYS是Minimal SYSYTEM的缩写，其主要完成的工作为UNIX on Windows的功能。显而易见，这是一个仿生UNIX环境的Windows工具集。
点击上方“LiveVideoStack”关注我们 ▲扫描图中二维码或点击阅读原文▲ 了解音视频技术大会更多信息 ---- 作者：王伟 编辑：Alex 图片来源：Unsplash (by Marques Kaspbrak) 在视频处理中，我们经常会用到不同的色彩空间：非线性 RGB、线性 RGB、YUV、XYZ……为什么需要这么多的色彩空间呢？为什么在FFmpeg中会有 color_space，color_transfer，color_primaries 等一系列的颜色属性呢？这些术语之间究竟隐藏着什
FFmpeg既是一种音视频编解码工具，也是一组音视频解码开发套件。作为编解码开发套件，它为开发者提供了丰富的音视频处理的调用接口。
1 FFmpeg 的基本组成 FFmpeg 的基本组成包含Format、Codec、Filter、Devices、Utils等，结构如图：
开源视频编辑器，作为一种免费的、开放源代码的软件，为用户提供了一个解决这一问题的方法。它们不仅功能强大，而且易于使用，同时还能满足专业和非专业用户的需求。
FFmpeg既是一款音视频编解码工具，同时也是一组音视频编解码开发套件，作为编解码开发套件，它为开发者提供了丰富的音视频处理的调用接口。 FFmpeg提供了多种媒体格式的封装和解封装，包括多种音视频编码、多种协议的流媒体、多种色彩格式转换、多种采样率转换、多种码率转换等；FFmpeg框架提供了多种丰富的插件模块，包含封装与解封装的插件、编码与解码的插件等。
在 ffmpeg 命令中 , -vframes 参数 的 作用是 指定要输出的视频帧数 , 通过该参数 可以 控制 视频处理的长度 , 即 : 在输出多少帧后 停止处理 视频流 ;
16年壮观的直播百团大战相信大家历历在目，至19年初所剩无几的直播寡头，来去如风的直播战场，离不开背后强大的直播技术支撑，本文通过直播基础技术介绍、剖析企鹅电竞直播构架、关键技术、常见问题排查、带领大家了解直播技术细节。 直播基础技术扫盲 分辨率 分辨率是度量位图图像内数据量多少的一个参数。通常表示成每英寸像素（Pixel per inch, ppi）和每英寸点（Dot per inch, dpi），包含的数据越多，图形文件的长度就越大，也能表现更丰富的细节。但更大的文件需要耗用更多的计算机资源，更多的内
前面 Android FFmpeg 开发系列文章中，我们已经利用 FFmpeg 的解码功能和 ANativeWindow 的渲染功能，实现了的视频的解码播放。
试了很多方方法，想尽办法调各种属性都不行，看来用SixLabors.ImageSharp比较难解决了；
优化服务器策略 播放器接入服务器请求数据的时间点的视频不一定是关键帧，那么需要等到下一个关键帧的到来，如果关键帧的周期是 2s 的话，那么等待的时间可能会在 0~2s 的范围内，这段等待的时间会影响首屏的加载时间。如果服务器有缓存，则播放端在接入的时候，服务器可以向前找最近的关键帧发给播放端，这样就可以省去等待的时间，可以大大的减少首屏的加载时间。
ffplay是一个很简单的播放器，但是初次接触仍会感到概念和细节相当繁多，分析并不容易。深入理解一项技术需要足够的时间和大量的实践，由浅入深逐步迭代，没有时间就成了最大难题。本次分析过程断断续续持续了挺久，先是边读代码边加注释，后面才整理了笔记，再加上理解浅薄很难精简语言，因此行文比较啰嗦。笔记记录仓促，错误难免，欢迎指正交流。后续若有时间继续研究，将持续修正错误完善文档。
音视频的播放、关闭、暂停、继续这几个基本功能，绝大部分人都是信手拈来的搞定，关于音量调节还是稍微饶了下弯弯，最开始打算采用各个系统的api来处理，坐下来发现不大好，系统的支持不完美，比如有些api限定了win7，而xp确没有，而且这玩意控制的是全局的音量，不好，大部分时候需要控制的是当前播放的媒体的音量，估计vlc和mpv这类播放器在处理声音的时候也有过如此的场景分析，后面还测试过用ffmpeg的filter滤镜代码控制音频数据的分贝值，比较繁琐，代码量也大，不方便初学者学习，最后灵机一动去找QAudioOutput的函数看下有没有volume的函数，果真有卧槽，原来自带了，对Qt的爱慕之情又猛增了几十分，这里要注意的是QAudioOutput的音量值参数是0-1的范围double类型，而不是像vlc等播放器是0-100的值，所以需要自行转换。
原来在黑白显示器上也能显示出彩色啊！通过在监视器上覆盖拜耳滤色镜，并拼接彩色图像，就能在黑白监视器上显示彩色图像。
FFmpeg可使用众多参数，参数内容会根据ffmpeg版本而有差异 这里不再赘述，使用前建议先参考参数及编解码器的叙述。此外参数明细可用ffmpeg -h显示；编解码器名称等明细可用ffmpeg -formats显示。一些常用的参数也可以通过网上查找相关资料获取。
音视频开发中，视频编码是另一个重要的部分，基于 FFmpeg 软件解码前面系列文章已经介绍过了。
FFmpeg解码涉及的知识点比较多，很容易被函数和结构体搞定不知所错，我们先从整体上对解码流程有个认知，画了张图把解码流程图，如下
FFmpeg是一个强大的开源多媒体处理工具，它可以用于录制、转换以及流化音频和视频。它是一个跨平台的项目，可以在多种操作系统上运行，包括Windows、Mac OS和Linux。这个工具可以执行各种各样的音视频处理任务，包括但不限于：
自由与开源软件的理念，从不解、争议、接受到如今如火如荼，经历了长期的历程。国内开源软件起步较晚，但进展迅速。腾讯经过几年的开源协同运动，也取得了不少成绩。其中，腾讯云音视频在FFmpeg、SRS等重要多媒体开源社区的贡献，颇具代表性。 FFmpeg是音视频领域最著名的开源项目之一，被誉为多媒体领域的瑞士军刀，是众多音视频业务的基石。FFmpeg 6.0版本以代号Von Neumann在2月28号发布，这一版本包含了大量重要更新，其中就有腾讯云音视频团队贡献的众多有趣且颇具价值的特性。除FFmpeg外，腾讯云
摄像照相视频音频处理 SCRecorder - SCRecorder短视频录制。 VideoPushDemo - 视频剪辑视频特效制作1 视频特效制作2。 LLSimpleCamera - 一款简单的，可自定义的iOS摄像头控件，摄像头。 EZAudio - EZAudio是一个iOS和OSX上简单易用的音频框架，根据音量实时显示波形图，基于Core Audio，适合实时低延迟音频处理，非常直观。中文介绍，官网。 ffmpeg - ffmpeg官网，FFmpeg在iOS上完美编译。 V
VFX的素材最常用的是绿幕视频。通过拍摄实景+绿幕，然后通过把绿幕视频素材合成到3D场景中。
音视频开发中，视频编码是另一个重要的部分，基于 FFmpeg 软件解码前面系列文章已经介绍过了，接下来主要介绍软件编码这一块，包括视频编码、音频编码、为视频添加滤镜等。后期文章安排将介绍 Android MediaCodec 硬件编解码。
| 导语 想在APP中玩转视频播放吗？本文主要探讨播放器的工作原理及优化方向，并基于腾讯视频的开源TVKPlayer的设计，详解视频播放器的内部架构。 在下面的文章中，你将了解到播放器的视频解码、状态管理、功能扩展及二次封装的相关内容，带你深入了解视频播放器的工作原理。 1. 播放器之不得不做——视频解码 基本上我们都模糊的知道，视频播放需要解码器，那么解码视频究竟做了什么事情？为什么有些视频不能解析或者需要下载额外的解码器？ 1.1 视频封装的那些事 1.1.1 视频的编码 视频是由一幅幅帧图像和一组音
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
