视频理解任务最基础也是最主要的预处理任务是图像帧的提取。因为在视频理解任务中，视频可以看作是由一系列连续的图像帧组成的。因此，要对视频进行理解和分析，首先需要从视频中提取出每一帧的图像。
玩抖音的朋友都应该知道，最近「卡点视频」简直不要太火。抖音上很多大神也出了剪辑各种卡点视频的教程。
根据视频与音频之间的比较 , 如果视频比音频快 , 那么增大视频帧之间的间隔 , 降低视频帧绘制速度 ; 如果视频比音频慢 , 那么需要丢弃部分视频帧 , 以追赶上音频的速度 ;
FFmpeg的名称来自MPEG视频编码标准，前面的“FF”代表“Fast Forward”，FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。可以轻易地实现多种视频格式之间的相互转换。包括如下几个部分：
下图引用自“雷霄骅，视音频编解码技术零基础学习方法”，因原图太小，看不太清楚，故重新制作了一张图片。
在 ffmpeg 命令中 , -vframes 参数 的 作用是 指定要输出的视频帧数 , 通过该参数 可以 控制 视频处理的长度 , 即 : 在输出多少帧后 停止处理 视频流 ;
最近正好有音视频编辑的需求，虽然之前粗略的了解过FFmpeg不过肯定是不够用的，借此重新学习下；
FFmpeg是一个用于音视频处理的自由软件，被广泛用于音视频开发。FFmpeg功能强大，本文主要介绍如何使用FFmpeg命令行工具进行简单的视频处理。 安装FFmpeg可以在官网下载各平台软件包或者静态编译版本，也可以使用包管理工具安装。 基本概念 获得音视频信息 使用ffmpeg进行视频处理 选项 - -y / -n - -codec(-c) - -ss - -t - -to - -f - -filter / -filter_complex - -vframes - -vn - -r - -s - -a
软编（解）的时候CPU负载重，性能比硬编（解）低，但是通用性更好；硬编（解）性能高但是兼容性问题比较突出，特别是在Android平台，碎片化严重，MediaCodec的坑也是不少
优化服务器策略 播放器接入服务器请求数据的时间点的视频不一定是关键帧，那么需要等到下一个关键帧的到来，如果关键帧的周期是 2s 的话，那么等待的时间可能会在 0~2s 的范围内，这段等待的时间会影响首屏的加载时间。如果服务器有缓存，则播放端在接入的时候，服务器可以向前找最近的关键帧发给播放端，这样就可以省去等待的时间，可以大大的减少首屏的加载时间。
http://einverne.github.io/post/2015/12/ffmpeg-first.html
FFmpeg可使用众多参数，参数内容会根据ffmpeg版本而有差异 这里不再赘述，使用前建议先参考参数及编解码器的叙述。此外参数明细可用ffmpeg -h显示；编解码器名称等明细可用ffmpeg -formats显示。一些常用的参数也可以通过网上查找相关资料获取。
帧率 : 帧频率 , 视频中每秒钟含有视频帧的帧数 , 一秒钟刷新多少张图像 , 连续移动的图像至少每秒
内容提要：为了解决视频画面卡顿、不够顺畅等问题，视频插帧大法应运而生。英伟达提出的 Super SloMo 方法在众多方法中一骑绝尘，对于一段普通设备录制的视频，能「脑补」出高帧率慢动作视频。有了这一神器，视频制作的门槛得到进一步降低。
FFmpeg是一个强大的开源多媒体处理工具，它可以用于录制、转换以及流化音频和视频。它是一个跨平台的项目，可以在多种操作系统上运行，包括Windows、Mac OS和Linux。这个工具可以执行各种各样的音视频处理任务，包括但不限于：
2020年，直播带货火爆全网。想一探淘宝直播背后的前端技术？本文将带你进入淘宝直播前端技术的世界。
I帧：I帧(Intra-coded picture, 帧内编码帧，常称为关键帧)包含一幅完整的图像信息，属于帧内编码图像，不含运动矢量，在解码时不需要参考其他帧图像。因此在I帧图像处可以切换频道，而不会导致图像丢失或无法解码。I帧图像用于阻止误差的累积和扩散。在闭合式GOP中，每个GOP的第一个帧一定是I帧，且当前GOP的数据不会参考前后GOP的数据。
在写技术文档的时候，为了演示方便，经常需要插入一些短小的视频资源。比如一些操作的录频、一些经典视频片段、一些科普动画等。由于展示的地方通常是网页，而如果是插入视频之类的资源，通常需要占用额外的存储，而且也需要可用的视频播放器的支持，非常不便。对于命令行操作的回放，我们可能会采用 Asciinema，但是这个方案对非终端的操作无法模拟。一个常见的方案是把需要的资源转换成网页支持的 GIF、WEBP 格式等动图。考虑到各大浏览器对 GIF 格式的支持最稳定，因此大部分情况下我们都想将待展示的短小视频转换成 GIF 格式，方便直接插入文档中。
下图是另一个例子: ffplay -f lavfi -i rgbtestsrc -vf "split[a][b];[a]pad=2*iw[1];[b]vflip[2];[1][2]overlay=w"
FFmpeg的介绍网上还是很多的。官网的wiki上面也有很多内容。围绕目标，主要是有两套实现的思路。早期，其实是想通过自己编写C代码，来完成整个流程的。但是无奈目前的水平有限，而且时间不够充裕。故最后的思路是通过学习现有的命令行参数，来快速完成FFmpeg的使用。但是这样的弊端也极大的，在此暂时不诉。
ffmpeg 为了保证数据的精度与完整性，有一个 AVRational 数据类型，就是一个有理数（分数）
在许多实时视频应用场景中，我们需要动态生成实时视频流并将其推送到 RTMP 服务器。例如，我们可能需要生成一个实时显示当前时间的视频流，或者在游戏直播时显示实时弹幕等。本文将介绍如何使用 Node.js、Canvas 和 FFmpeg 实现这一需求。
通常，推流服务器会提供一个收流的 RTMP 服务器地址，还会提供一个直播流的流名称，也叫串流密钥。如推流的 RTMP 服务器地址是 rtmp://publish.x.com/live，串流密钥是 stream，那么最后组成的推流地址就是 rtmp://publish.x.com/live/stream。
最近在读《FFmpeg从入门到精通》这本书，结合着雷神的博客，学习音视频的知识～ 在学习的过程中，也记录了一些摘要。因为是边看边记的，所以一些要点在看到后面的时候，需要反过来整理前面的。我用有道云笔记写的markdown没法加图片，所以就先把这部分发了出来。后续会针对内容和排版一步步的优化，如果你被这凌乱的内容辣到了眼睛，请谅解哈哈哈～
每周一期，纵览音视频技术领域的干货。 新闻投稿：contribute@livevideostack.com。 使用体积视频创建数字人 本文介绍了如何使用体积视频创建数字人，体积视频的后处理方法和传输方式等。 iOS AVDemo（7）：视频采集，视频系列来了丨音视频工程示例 在音视频工程示例这个栏目，我们将通过拆解采集 → 编码 → 封装 → 解封装 → 解码 → 渲染流程并实现 Demo 来向大家介绍如何在 iOS/Android 平台上手音视频开发。这里是第七篇：iOS 视频采集 Demo。 音视频开
时至今日，短视频App可谓是如日中天，一片兴兴向荣。随着短视频的兴起，音视频开发也越来越受到重视，但是由于音视频开发涉及知识面比较广，入门门槛相对较高，让许许多多开发者望而生畏。
直接到ffmpeg官网下载和自己电脑系统相对应的版本即可。命令行使用时，定位到ffmpeg的目录或将bin目录配置在环境变量中。
其实这篇文章可以出的更早，各位讲师基本上当天之内（大多数是在3个小时内）回复了问题，与自己的懒惰大相径庭，无比惭愧。刘歧还在短短几十分钟内，针对网友的问题在FFmpeg社区提了一个patch。
链接：https://pan.baidu.com/s/11kIaq5V6A_pFX3yVoTUvzA
16年壮观的直播百团大战相信大家历历在目，至19年初所剩无几的直播寡头，来去如风的直播战场，离不开背后强大的直播技术支撑，本文通过直播基础技术介绍、剖析企鹅电竞直播构架、关键技术、常见问题排查、带领大家了解直播技术细节。 直播基础技术扫盲 分辨率 分辨率是度量位图图像内数据量多少的一个参数。通常表示成每英寸像素（Pixel per inch, ppi）和每英寸点（Dot per inch, dpi），包含的数据越多，图形文件的长度就越大，也能表现更丰富的细节。但更大的文件需要耗用更多的计算机资源，更多的内
我们已经能够加载 YUV 帧并显示了，那是把一张图片转换成 YUV 帧得到的素材。
下载FFmpeg： https://www.ffmpeg.org/download.html
在FFMpeg套件中，出了ffmpeg还有ffprobe，ffprobe主要用来查看多媒体文件的信息，下面看一下ffprobe中常见的基本命令. 5.1 ffprobe 常用参数 ffprobe常用参数比较多，可以用过ffprobe --help来查看详细的信息：
真正决定未来竞争的关键，是在功能满足用户需求的前提下，提高直播软件的各项质量指标，对流畅度、清晰度、音质、稳定性和流量消耗等进行专项测试，从而音视频通话质量。
音视频 文件 从 采样 -> 处理 -> 得到原始数据帧队列 -> 音视频编码 -> 音视频包队列 -> 格式封装 的过程如下 :
FFmpeg是一款开源软件，用于生成处理多媒体数据的各类库和程序。FFmpeg可以转码、处理视频和图片（调整视频、图片大小，去噪等）、打包、传输及播放视频。作为最受欢迎的视频和图像处理软件，它被来自各行各业的不同公司所广泛使用。
最近了不起在自己的服务器里基于Pandora搭建了ChatGPT页面，以后只需要accessToken或者key就可以使用，不再需要再去官网玩了，省下了不少时间。
来源：https://blog.csdn.net/shaosunrise/article/details/121548065
音视频行业已经发展很多年了，随着近几年移动端越来越多的音视频APP的出现，将音视频推向一个高潮，但是由于音视频的学习成本很高，很多开发者望而却步，为了跟紧时代的步伐，我写了这篇音视频基础，讲解了音视频的相关知识，给大家破除音视频的“高门槛”，希望可以共同进步。
码流(Data Rate)是指视频文件在单位时间内使用的数据流量，也叫码率或码流率，通俗一点的理解就是取样率,是视频编码中画面质量控制中最重要的部分，一般我们用的单位是kb/s或者Mb/s。一般来说同样分辨率下，视频文件的码流越大，压缩比就越小，画面质量就越高。码流越大，说明单位时间内取样率越大，数据流，精度就越高，处理出来的文件就越接近原始文件，图像质量越好，画质越清晰，要求播放设备的解码能力也越高。
随着音视频业务的快速发展，作为前端工程师，我们团队也逐步深入到音视频编解码领域，涉及到流媒体技术中的文本、图形、图像、音频和视频多种理论知识的学习，并有机会大规模应用到具体实践中。
在使用视频处理工具或者播放器时，有时我们可能会遇到错误信息 "Could not find codec parameters for stream 0 (Video: h264, none)"。这个错误提示说明在当前的环境中找不到视频流的编解码器参数，导致无法正确解码视频数据。本文将详细介绍该错误产生的原因以及解决方法。
• 容器／文件（Conainer/File）：即特定格式的多媒体文件， 比如mp4、flv、mkv等。
FFmpeg既是一款音视频编解码工具，同时也是一组音视频编解码开发套件，作为编解码开发套件，它为开发者提供了丰富的音视频处理的调用接口。 FFmpeg提供了多种媒体格式的封装和解封装，包括多种音视频编码、多种协议的流媒体、多种色彩格式转换、多种采样率转换、多种码率转换等；FFmpeg框架提供了多种丰富的插件模块，包含封装与解封装的插件、编码与解码的插件等。
现今短视频、小视频的应用随处可见，用户量也在持续上涨，作为一个测试人员，我们要保障视频播放应用的质量就必须了解视频相关技术，需要对视频相关知识有更全面的认知。本文主要给大家介绍一些视频的相关知识。
图像画面由一个数字序列表示的图像中的一个最小单位色块，被称之像素（pixel/px）
• AVUtil：核心工具库，下面的许多其他模块都会依赖该库做一些基本的音视频处理操作。
然后分别开启音频和视频的解码线程开始解码。我们可以看到涉及的主要结构体有AVCodecContext 、AVCodecParameters 、AVCodec 、AVFrame
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
