前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >原生视频直播源码开发中,视频直播源码音视频处理的一般流程

原生视频直播源码开发中,视频直播源码音视频处理的一般流程

原创
作者头像
布谷鸟小刘
修改2020-12-24 18:17:23
2.1K0
修改2020-12-24 18:17:23
举报

原生开发是指在Android、IOS 等移动平台上利用官方提供的开发语言、开发类库、开发工具进行APP开发。

我们最常用的微软word就是原生开发的应用程序,原生开发的一对一直播源码是特别为某种操作系统开发的,比如安卓、苹果等,他们都是在各自的移动设备上运行,在应用性能上和交互体验上应该是最好的。

但对于视频直播APP源码开发者来说,安卓和苹果端要分别开发,同样的逻辑、界面等都要写两套,所以对开发团队来说,原生开发的方式并不友好,但对用户来说,在系统上使用原生开发的视频直播APP,使用感是非常棒的。

原生应用开发对运营者和使用者非常友好,原生开发的视频直播源码可访问手机所有功能,如GPS、摄像头等,速度更快、性能更高,支持大量图形和动画,在App Store中展现度更高,也更容易获得App Store的支持。

视频直播源码中音视频处理的一般流程:

数据采集→数据编码→数据传输(流媒体服务器) →解码数据→播放显示

1、视频直播源码之数据采集:

摄像机及拾音器收集视频及音频数据,此时得到的为原始数据

涉及技术或协议:

摄像机:CCD、CMOS

拾音器:声电转换装置(咪头)、音频放大电路

2、视频直播源码之数据编码:

使用相关硬件或软件对音视频原始数据进行编码处理(数字化)及加工(如音视频混合、打包封装等),得到可用的音视频数据

3、 视频直播源码在编解码时涉及的技术或协议:

编码方式:CBR、VBR

编码格式

视频:H.265、H.264、MPEG-4等,封装容器有TS、MKV、AVI、MP4等

音频:G.711μ、AAC、Opus等,封装有MP3、OGG、AAC等

4、视频直播源码与数据传输:

将编码完成后的音视频数据进行传输,早期的音视频通过同轴电缆之类的线缆进行传输,IP网络发展后,使用IP网络优传输

涉及技术或协议:

传输协议:RTP与RTCP、RTSP、RTMP、HTTP、HLS(HTTP LiveStreaming)等

控制信令:SIP和SDP、SNMP等

5、 视频直播源码与解码数据:

使用相关硬件或软件对接收到的编码后的音视频数据进行解码,得到可以直接显示的图像/声音

涉及技术或协议:

一般对应的编码器都会带有相应的解码器,也有一些第三方解码插件等

6、视频直播源码与播放显示:

在显示器(电视、监视屏等)或扬声器(耳机、喇叭等)里,显示相应的图像画面或声音

涉及技术或协议:

显示器、扬声器、3D眼镜等

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
云直播
云直播(Cloud Streaming Services,CSS)为您提供极速、稳定、专业的云端直播处理服务,根据业务的不同直播场景需求,云直播提供了标准直播、快直播、云导播台三种服务,分别针对大规模实时观看、超低延时直播、便捷云端导播的场景,配合腾讯云视立方·直播 SDK,为您提供一站式的音视频直播解决方案。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档