前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >知识:视频流媒体播放的一些知识

知识:视频流媒体播放的一些知识

作者头像
张云飞Vir
发布2021-05-06 15:26:22
1.6K0
发布2021-05-06 15:26:22
举报
文章被收录于专栏:写代码和思考写代码和思考

1.概述

常用的流媒体协议主要有:

  • 基于 RTSP/RTP 的实时流媒体协议
  • HTTP 渐进下载
  • 基于浏览器插件,页面嵌入一个 flash 播放器

内嵌 flash 的方式必须要有浏览器支持。这样的方式已经被各大浏览器放弃,在谷歌浏览器中已经不再支持flash。本文不再说明。

这三种方式完全不同,在开发阶段技术选型时,又和 开发的方向是 C/S 程序或者 B/S 程序相关。目前比较方便又好用的是用 HTTP 渐进下载方法。

2.知识

2.1 传输协议

RTMP、RTSP、HTTP协议,这些是互联网 TCP/IP 五层体系结构中应用层的协议,都可以用来做视频直播或点播。通常来说,直播一般用 RTMP、RTSP点播用 HTTP

概念

RTMP: 即 Real Time Messaging Protocol(实时消息传输协议),基于TCP,是一种设计用来进行实时数据通信的网络协议。主要用来在 流媒体/交互服务器 之间进行音视频和数据通信

RTSP: 即 Real Time Streaming Protocol (实时流传输协议),它使用TCP或UDP完成数据传输。使用RTSP时,客户机和服务器都可以发出请求,即RTSP可以是双向的。

HTTP: 超文本传输协议(Hypertext Transfer Protocol,HTTP)是一个简单的请求-响应协议,它通常运行在 TCP 之上。它是 请求-响应 的方式,即 客户端发出请求,服务端收到后做出响应。

对比表

名称

特征

传输的内容

特征

传输方式

说明

RTMP

是流媒体协议

一般传输的是 flv,f4v 格式流

基于TCP

基于TCP

它是Adobe 的私有协议

RTSP

是流媒体协议

一般传输的是 ts、mp4 格式的流

可以双向,即客户机和服务器都可以发出请求

使用TCP或UDP完成数据传输

共有协议,并有专门机构做维护

HTTP协议

超文本传输协议,它不是流媒体协议

传输的是HTML,浏览器使用

单向,即客户端发出请求,服务端做出响应

基于TCP

请求-响应协议

2.2 后来呢

从上面我们看到 RTSP 不方便在 浏览器上使用。于是就有了这些解决方案。

HLS : 基于HTTP的自适应码率流媒体传输协议 (HTTP Live Streaming),它是Apple的动态码率自适应技术。它最初是苹果公司针对移动设备而开发的流。后来桌面也有很多应用了,HTML5 是直接支持了。

WebRTC:即 网页即时通信 ( Web Real-Time Communication)的缩写,是一个支持网页浏览器进行实时语音对话或视频对话的API。它实现了基于网页的视频会议(标准是WHATWG 协议),目的是通过浏览器提供简单的javascript就可以达到实时通讯 (RTC))能力。

Flash Player: 基于浏览器插件,页面嵌入一个 flash 播放器。缺点是必须要有浏览器支持。这样的方式已经被各大浏览器放弃,在谷歌浏览器中已经不再支持flash。

3. 流媒体相关的工具和库

3.1 编码解码工具 FFmpeg

FFmpeg 是一个库和工具的集合,用于处理多媒体内容,如音频、视频、字幕和相关元数据。

常用到的功能有:

  • 视频采集
  • 视频格式转换
  • 视频截图
  • 给视频加水印

功能

说明

视频采集

采集摄像头的图像,进行屏幕录制,将视频流传送给流媒体服务器,支持直播应用。

视频格式转换

视频格式转换,比如可以将多种视频格式转换为flv格式。

视频截图

截取指定时间的缩略图。视频抓图,获取静态图和动态图

给视频加水印

可使用ffmpeg 视频添加水印(logo)

它包含了这些软件包

说明

libavcodec

提供多种格式的 视频/音频 编解码器的实现;

libavformat

用于各种音视频封装格式的生成和解析,包括获取解码所需信息以生成解码上下文结构和读取音视频帧等功能;

libavutil

包括散列、解压缩器和其他实用程序函数

libavfilter

提供一种通过过滤器链改变解码音频和视频的方法。

libavdevice

提供访问捕获和回放设备的抽象。

libswresample

实现音频混合和重采样例程。

libswscale

实现颜色转换和缩放例程。

FFmpeg 的 Github地址:https://github.com/FFmpeg/FFmpeg

它包含了这些工具

工具

说明

Ffmpeg

是一个用于操作、转换和流媒体内容的命令行工具箱。

Ffplay

是一个极简的多媒体播放器。

Ffprobe

是一个简单的多媒体内容检测分析工具。

附加的小工具

如aviocat, ismindex和qt-faststart。

还有这些工具

工具

说明

libpostproc

用于后期效果处理;

ffsever

一个 HTTP 多媒体即时广播串流服务器;

3.2 SRS 简单流媒体服务

SRS是一个简单高效的实时视频服务器,支持RTMP/WebRTC/HLS/HTTP-FLV/SRT/GB28181。

3.3 OBS 推流

Open Broadcaster Software(简称 OBS)是一款好用的第三方开源程序直播流媒体内容制作软件,为用户提供免费使用,它可支持 OS X、Windows、Linux 操作系统

FFmpeg的命令行方式不太友好,可考虑使用主流的OBS开源推流软件,很多网络主播都是用它做直播,该软件支持本地视频文件以及摄像头推流。

软件长这样:

image.png

主站:https://obsproject.com/ Github: https://github.com/jp9000/OBS

3.3 播放

产生了媒体流,就可以播放了。比较常用的 VLC 播放器。

VLC 是一款自由、开源的跨平台多媒体播放器及框架,可播放大多数多媒体文件,以及 DVD、音频 CD、VCD 及各类流媒体协议。

主站:https://www.videolan.org/

3.4 DVR 录像

DVR: SRS支持将RTMP流录制成FLV或MP4文件。下面的描述以FLV为例,但是对MP4也是一样的。

DVR的难点在于写入flv和文件命名,SRS的做法是随机生成文件名,用户可以使用http-callback方式,使用外部程序记录这个文件名,或者改成自己要的文件命名方式。

4.参考

https://github.com/ossrs/srs/tree/3.0release#usage

https://gitee.com/ChinaFFmpeg/ffmpeg?utm_source=alading&utm_campaign=repo http://www.ffmpeg.org/ https://baike.baidu.com/item/ffmpeg/2665727?fr=aladdin

https://help.aliyun.com/document_detail/45212.html

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1.概述
  • 2.知识
    • 2.1 传输协议
      • 2.2 后来呢
        • 3. 流媒体相关的工具和库
          • 3.1 编码解码工具 FFmpeg
            • 3.2 SRS 简单流媒体服务
              • 3.3 OBS 推流
                • 3.3 播放
                  • 3.4 DVR 录像
                  • 4.参考
                  相关产品与服务
                  云直播
                  云直播(Cloud Streaming Services,CSS)为您提供极速、稳定、专业的云端直播处理服务,根据业务的不同直播场景需求,云直播提供了标准直播、快直播、云导播台三种服务,分别针对大规模实时观看、超低延时直播、便捷云端导播的场景,配合腾讯云视立方·直播 SDK,为您提供一站式的音视频直播解决方案。
                  领券
                  问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档