核心设计 把RTC技术与CDN架构融合，一套架构同时支持WebRTC和RTMP 支持一对一，多人互动场景 支持直播，大规模分发场景 架构保持足够简单，降低运维成本 对RTMP协议的改造 如果要让webrtc和rtmp无缝互通，需要拓展rtmp对opus编码(48k采样)的支持，rtmp本身并不支持opus 同时在ffmpeg中拓展rtmp对opus编码(48k采样)的支持 边缘节点设计 边缘节点支持的能力: rtmp/webrtc推流，webrtc拉流 边缘节点不做任何的编解码操作，只作为接入点和分发点 支
随着移动设备大规模的普及以及流量的资费越来越便宜, 超低延迟的场景越来越多. 从去年到今年火过的场景就有在线娃娃机, 直播答题, 在线K歌等. 但要做到音视频的超低延迟确是很不容易, 编码延迟, 网络丢包, 网络抖动, 多节点relay,视频分段传输,播放端缓存等等都会带来延迟.
点击上方“LiveVideoStack”关注我们 ▲扫描图中二维码或点击阅读原文▲ 了解音视频技术大会更多信息 ---- 作者：Barry Owen 翻译：Alex 技术审校：刘连响 WebRTC 影音探索 #014# 2020年，Adobe宣布停止对 Flash播放器的支持。Flash历经多年终于走向终结，虽然是众望所归，但它的退出却对存在于许多流媒体工作流程中的一项重要技术——RTMP（ Real-Time Messaging Protocol）影响重大。RTMP最初设计用于向Adobe Fl
大约在一年前，SRS开始支持了WebRTC，这一年一直在持续的更新和收集大家的反馈，终于目前达到了基本可以的里程碑了，是时候总结下使用方法，更新Wiki和DEMO，方便大家用起来了。 SRS的RTC有很多种应用场景，这篇是基于流的场景的应用，后续会推出更多的场景。流是服务器最基本也是最基础的逻辑，是其他场景的基础。基础不牢，地动山摇，大家走过路过不要错过。 RTC的Wiki请点文末阅读原文，我们在这篇文章中，会重点说明一些背景、应用场景和便于理解的设计背景。Wiki侧重的是总结和结果，这个文章侧重的是为什么
HLS：延迟主要来自编码解码时产生延迟、网络延迟、CDN 分发延迟。由于它是切片协议，延迟分两大块，一个是服务端有切片缓冲延迟，另一个是在播放端防抖缓冲会有延迟。切片的大小和数量都会 HLS 影响延迟大小，一般在十秒以上。
上周写了一篇文章基于RTMP和WebRTC 构建低延迟的直播系统(https://zhuanlan.zhihu.com/p/47302561), 只所以要基于RTMP, 还是考虑尽可能复用现有的技术和基础设施. 实际上国外已经有基于WebRTC的CDN系统, 比如 http://phenixrts.com/, https://www.millicast.com/. 比这更早的可以追溯到beam, 一个实时的游戏直播平台, 在2016年被微软收购后改名mixer(https://mixer.com). 目前国内低延迟直播的做法是在rtmp的基础调优, 比如使用可靠UDP方案替换RTMP的传输层, 目前使比较多的方案有KCP和QUIC. 但魔改RTMP的方案始终没有特别好的适配浏览器的方法. 相比有超过40亿设备支持的WebRTC来说, WebRTC的方案无疑更有想象空间.
WebRTC目前视频编解码支持VP8/VP9/H264, 音频默认支持OPUS。
最近音视频会议，在线教育都比较火，很多学习了我课程的同学都偿试着去面试音视频相关的岗位，这里我就简单的整理了一份 WebRTC 相关的面试题，希望对大家有所帮助。
各类视频直播平台层出不穷，但是永远都逃不开实时性的话题。几年前，我们评价一个直播平台是否优秀的标准就是平台播放视频的实时性是否能控制在几秒之内，也就是低延迟，然而随着大众对直播体验要求的升高，大家关注的不仅是实时性，还有互动性，也就是主播和观众的互动匹配度。
SRS4支持了WebRTC播放，John(志宏)大神实现了RTC框架，Bepartofyou(B神)实现了aac转opus，刘连响大神主持定义的协议保持RTMP、HLS、FLV、WebRTC的高度一致性，另外Native Demo正在路上，后续还有更多惊喜。 Scenarios SRS支持WebRTC后，将获得下面新的应用场景： 低延迟直播：RTMP延迟在3到5秒，WebRTC可以在1秒之内，可以基于云计算部署比较稳定的低延迟直播服务；也可以接入CDN厂商，目前阿里云和腾讯云CDN都支持了WebRTC直播
这十年是音视频快速发展的十年，从互动娱乐和电商直播，到互联网会议和在线教育，最近火热的元宇宙，音视频是基础能力之一。 从直播间连麦场景出发，可以了解互联网音视频所涉及的技术，由此深入学习音视频的相关技术点，可以让自己建立完整的音视频技术体系，快速应用到线上业务中。 Introduction 2015年音视频直播迎来了大的爆发，典型的场景是互动娱乐和电商直播。2017年WebRTC迅猛发展，典型场景是互联网会议、在线教育、低延迟直播和互动。2021年开始炒元宇宙，音视频也是基础能力之一。 音视频
对于许多广播和流传输，WebRTC 不是“完整的”，因为它缺少标准信令协议，以使其类似 RTMP 或 RTSP。
有些人呐，真是不见棺材不落泪，N(>=3)年前Adobe官宣了2020年底就不支持Flash了，最近发现非常多的朋友，到了真正完全不能用时，才考虑如何逃生，在群里一顿狂问“没有Flash了怎么播放RTMP”，“该选HTTP-FLV还是WebRTC”，“用什么播放器播HTTP-FLV”。 本文只发一次，完整解决方案再啰嗦一遍，恕我不在群里回答这种问题了，自己花时间好好看吧，身为搞直播的研发工程师，总不能火烧了眉毛才开始想办法吧，各位耗子尾汁吧。 看完视频，请看详细方案。 没有Flash了怎么做直播？ 答
N(>=3)年前Adobe官宣了2020年底就不支持Flash了，最近发现非常多的朋友，到了真正完全不能用时，才考虑如何逃生，一顿狂问“没有Flash了怎么播放RTMP”，“该选HTTP-FLV还是WebRTC”，“用什么播放器播HTTP-FLV”。
直播已经进入百毫秒时代，阿里云和腾讯云都给出了可大规模商用的方案，开源方案早已经成熟。快速验证和技术调研，想用开源自建？简单；上线了需要SLA和保障，自建平滑上云？没问题（后续会分享从开源到云方案）。 启动SRS SRS的配置文件如下，也可以直接使用 conf/rtc_live.conf 启动SRS。 # conf/rtc_live.conflisten 1935;max_connections 1000;
随着新技术的不断发展与使用场景的不断拓展，主流的RTMP协议已经满足不了更丰富的场景。 腾讯云音视频在流媒体传输上不断深入优化，以适应不同场景的需求。除了支持常见的RTMP协议外，腾讯云音视频多协议推流平台(以下简称多协议平台)还支持WebRTC/SRT/QUIC等其他协议，下面重点介绍多协议推流平台支持的推流协议以及它们的应用场景。 RTMP/RTMPS： RTMP，实时消息传输协议（RealTime Messaging Protocol），是目前主流的流媒体传输协议，广泛用于直播领域，可以说市
大家知道我们近期在EasyDSS内实现了webrtc协议视频的播放，webrtc作为今年十分有发展潜力的协议，我们也会逐渐将其覆盖到我们其他的平台上，如果大家想了解EasyDSS实现RTMP转WebRTC播放功能的话，可以阅读：EasyDSS实现RTMP转WebRTC播放功能的简单流程及原理。
原文 http://www.meetecho.com/blog/firefox-webrtc-youtube-kinda/
直播已经进入百毫秒时代，阿里云和腾讯云都给出了可大规模商用的方案，开源方案早已经成熟。快速验证和技术调研，想用开源自建？简单；上线了需要SLA和保障，想平滑迁移上云？没问题（后续会分享从开源平滑迁移到云方案）。 启动SRS4.0 SRS的配置文件如下，也可以直接使用 conf/rtc_live.conf 启动SRS 4.0。 # conf/rtc_live.conflisten 1935;max_connectio
RTSP（Real Time Streaming Protocol）是一种用于控制实时流媒体传输的网络协议。它允许客户端与服务器进行交互，控制流媒体的播放、暂停、停止、倒放、快进等操作。RTSP协议可以用于音频、视频等多种流媒体数据的传输。
LiveVideoStack：关于小程序中的RTC能力，是通过WebRTC实现的（或其他RTC技术），还是基于RTMP呢？
How to Push HEVC via RTMP by OBS Written by Winlin, chundonglinlin OBS 29.1支持RTMP的HEVC，所以你现在可以用OBS和SRS做HEVC的直播了。 现在，RTMP支持HEVC出新标准了，详见Enhanced RTMP。这个标准定义了一个新的codec ID，用于HEVC，即fourCC hvc1， OBS和SRS都支持这个标准。 Note: Please see #3495 and #3464 for details. 请注意，S
音视频业务的繁荣，必定造就开源项目的繁荣，反过来说也是一样的，互相成就。遍地都是开源的轮子，如何选择？提供一个有效的角度，可作为避坑指南。如果已经入坑了，您躺平就好，入坑就已经有了门户之见，死生有命富贵在天。 活跃程度 活跃程度，就是项目的年龄和更新频率。 活得久就活得越久，一般活几年的项目谁不遇到点问题，要死早死了，几年还没死那可能后面死的概率也小了。 不更新的项目就是坑了，没有哪个开源项目拿来就能用的，除了那个996.ICU[1]，一般开源项目都是会遇到问题的，有人在更新维护就很重要。 SRS的Sta
在直播系统开发过程中，我们可能会遇到一些困惑。像是对于流媒体协议的选择，如HTTP-FLV、WebRTC，RTMP，HLS及其它私有协议等，到底哪个比较合适？哪种协议可以用在PC平台上？哪种协议在移动设备上效果比较好？接下来就先从各项协议的优缺点比较说起。
https://ossrs.net/lts/zh-cn/docs/v5/doc/webrtc#room-to-live
📷 经过七年的酝酿和开发，SRS在6.0中终于正式支持了HEVC(H.265)，几乎全面支持，包括RTMP、FLV、SRT、TS、HLS、DASH、GB28181、WebRTC(Safari)、DVR
在线视频现在已经是家喻户晓，最近的研究表明，全世界网民平均每天花费近 92 分钟观看在线视频，尤其是直播视频，正受到网民的青睐。
前面我们介绍了用SRS搭建一对一通话，如果能将这个通话合成一个流，叠加视频和混音，转成RTMP流推送到直播，这就是连麦了。 如下图所示，我和志宏大神的一对一通话，可以认为是两个主播的连麦，我们可以把这两个视频画面叠加，把我们音频混音，然后转成一路RTMP流送到直播系统，比如CDN或者视频号直播： 视频合流非常非常消耗CPU，而且有很多种方式： SRS+FFmpeg，SRS将WebRTC流转RTMP，FFmpeg将多路RTMP合流。优势：延迟小，音质好；缺点是命令行难度高。 SRS+OBS，方案和SRS+
大家好，我是小涂，今天给大家分享一篇关于如何使用srs来进行webrtc进行推拉流；不过在这之前，你需要进行srs运行环境搭建，这个可以具体参考srs官网的wiki，我这里就不重复了，如果你有在搭建过程中遇到啥问题，可以私下交流沟通，下面是srs官网搭建环境中文wiki:
鹏程，携程 Android 开发工程师，Android google jetpack和kotlin语言的拥护者。
LiveGBS国标GB/T28181流媒体服务器软件，支持设备|平台GB28181注册接入、向上级联第三方国标平台， 可视化的WEB页面管理(页面源码开源)；支持云台控制、设备录像检索、回放，支持语音对讲，用户管理， 多种协议流输出，实现浏览器无插件直播。
Streamedian 提供了一种“html5_rtsp_player + websock_rtsp_proxy”的技术方案，可以通过html5的video标签直接播放RTSP的视频流。
YangWebrtc Overview yangwebrtc是一个自主研发的支持Webrtc/Srt/Rtmp的rtc架构，包含多种视音频编解码和处理等。 支持视频会议、高清录播直播、直播互动等多种视音频应用。 可用于远程教育、远程医疗、指挥调度、安防监控、影视录播、协同办公、直播互动等多种行业应用。 webrtc支持为自主研发，非谷歌lib,兼容webrtc协议 ,可与谷歌Lib和浏览器互通 支持Linux/Windows操作系统，android/ios/mac版本正开发中 yangwebrtc功能 •
SRS 5.0变更了版权声明，从Winlin个人变成了TOC（技术委员会）暨全体开发者。SRS的授权（LICENSE）一直都是开放的MIT[1]，但版权（Copyright）却语焉不详，这次终于规范了。 Why 免责声明：LICENSE和Copyright属于法律条文，我不见得说得很精确的对，只能说应该是大概保不齐。 授权（LICENSE）定义的是代码的使用规范，是否需要回馈开源社区。当然也定义了版权归属，但这种法律问题，很少有开发者能弄明白，甚至都不关注。 版权（Copyright）定义的是代码的著作权，
自由与开源软件的理念，从不解、争议、接受到如今如火如荼，经历了长期的历程。国内开源软件起步较晚，但进展迅速。腾讯经过几年的开源协同运动，也取得了不少成绩。其中，腾讯云音视频在FFmpeg、SRS等重要多媒体开源社区的贡献，颇具代表性。 SRS是开源实时视频服务器、全球流服务器中Star最多也最活跃的开源项目，主要应用在直播、WebRTC、安防和交通等领域，支持常用的流媒体协议和转换，以好用易用赢得了全球开发者的良好口碑。开箱即用的云SRS开源音视频方案赋能众多行业创造了新的可能。同时，SRS由工信部木兰开源
本文来自Elecard，作者是Vitaly Suturikhin，担任Elecard集成和技术支持部主管，主题是“低广播延迟及实现协议”。
新同学专用的学习路径，请一定按照文档操作。 文章中有较多的链接，链接地址是在文末尾的。也可以点文末尾的阅读原文，查看本文在简书上的版本。 快速预览 先过第一个门槛：看到直播和WebRTC长什么样子，能跑出来下图的效果，需要5～15分钟左右。 Note: 这个看似很容易，甚至直接在SRS官网[1]中就能点开两个页面，但是一定要自己用SRS搭建出来才算，而不是直接打开线上的演示网页。 具体怎么做呢？请参考Wiki: Getting Started[2]。推荐用SRS云服务器快速跑通，你也可以用宝塔快速部署，请
EasyCVR平台基于云边端一体化管理，支持多协议、多类型的视频设备接入，对外可分发RTSP、RTMP、FLV、HLS、WebRTC等格式的视频流。在视频功能上，可提供服务器集群、视频监控直播、云端录像、云存储、录像检索与回看、智能告警、平台级联、智能分析等服务。
RTMP流媒体服务器LiteCVR具备视频融合能力，可提供视频监控直播、云端录像、云存储、录像检索与回看、智能告警、平台级联、云台控制、语音对讲、智能分析等能力。平台基于云边端一体化架构，具有强大的数据接入、处理及分发能力。
有人说 2017 年是 WebRTC 的转折之年，2018 年将是 WebRTC 的爆发之年，这并非没有根据。就在去年（2017年），WebRTC 1.0 标准草案出炉（实际上WebRTC标准草案的早期版本早在2011年就已经发布，WebRTC并非一夜之间就出现的技术），并将于今年正式发布。与此同时，越来越多的浏览器和厂商都开始对它进行广泛的支持，WebRTC 即将成为互联网的基础设施了，或许门槛如此之高的实时音视频技术终有白菜化的那一天。
最近项目中需要实时播放摄像头rtsp视频流，于是就专门做了些研究。而浏览器不能直接播放，只有通过插件或者转码来实现这个需求。
Photo by Andre Furtado from Pexels 作为开发者，我们需要有一个服务器来支持新视频行业的互联网化，有哪个开源方案能支持新爆发的业务？该方案需要支持哪些关键的能力或需求？
大家晚上好，今天给大家分享一些我最近利用空闲时间去面试的一些流媒体岗位，面试问的一些问题。
随着移动互联网时代的到来，各大互联网厂商和流媒体协议组织涌现出丰富多彩各种各样的直播流媒体协议，其中比较出名的经典流媒体协议有RTMP/RTSP/HTTP-FLV/HTTP-HLS/WEBRTC等，协议简介如下：
原文链接 / https://thebroadcastknowledge.com/2021/02/02/video-i-know-x-what-does-webrtc-get-me/#video020221
近期看到一篇音视频技术周刊的一篇文章《12 Things to Consider When Building a Live Streaming App》，感觉写的还不错，是Red5官网挂出来的一篇博客，对设计、构建一个流媒体平台系统有一定的参考意义。这里简单翻译一下，以飨读者。其中Red5是一个采用Java开发的Flash流媒体服务器，与之对标的有Nginx-Rtmp、SRS和FMS等。
为什么说WebRTC做直播，不是潮流而是大坑？这是和Thegobot在Discord上讨论的文章。 About send stream 如果是需要用H5推流，把浏览器当OBS使用，那么只有WebRTC可用。 如果需要支持移动端，比如iOS或Android，在直播场景FFmpeg/OBS比WebRTC要更合适。 如果要适配广播媒体领域的各种推流设备，比如各种推流背包，那么WebRTC目前(2022)绝对支持得不好。若希望降低延迟，应该选择SRT而不是WebRTC。 About play stream 如果是从
推流和播放的事件码我们通常通过这个来判断当前的流的状态 推流事件列表 code TXLiveSDKEventDef常量 含义说明 1001 PUSH_EVT_CONNECT_SUCC 已经连接推流服务器 1002 PUSH_EVT_PUSH_BEGIN 已经与服务器握手完毕,开始推流 1003 PUSH_EVT_OPEN_CAMERA_SUCC 打开摄像头成功 1005 PUSH_EVT_CHANGE_RESOLUTION 推流动态调整分辨率 1006 PUSH_EVT_CHANGE_BITRATE 推流动
在建立音视频通信之前，浏览器之间需要通过信令服务器进行一系列交互，以协商会话参数和通信方式。下面是 WebRTC 的信令交互过程：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
