前言： 在直播和连麦的场景中通常会用到混流功能，而所谓的混流就是根据您设定好的混流布局同步的将各路输入源混流成一个新的流，可实现直播互动效果，之前有过其他客户的方案是通过观众端拉取两路主播流的场景来实现连麦的效果...场景实践： 首先我们要先了解混流的场景是什么样的，应该在哪里混，借用《无间道》中的名言作为开场白：出来混，迟早是要还的，在连麦互动直播中，在哪混（流），同样很重要，做对了选择，用户体验就会大不相同。...，通过云直播的接口调用，实现主播间之间的混流，到达想要的混流画面。...3、我们在调用混流接口的时候会返回-505的报错： 混流接口报-505，代表该流 ID 在直播后台中无数据 解决方法： 可以通过拉流的方式查看是否推流成功。...如果可以拉流，但接口报依然报-505，请检查混流参数中，AppID 填写是否正确。 总结： 连麦混流现是直播场景中最重要的环节，根据自己的业务场景，搭建自己的连麦混流逻辑，做出直播中想要的效果。
2021年新春佳节即将来临，各行各业迎新春、贺新年的活动节目逐渐密集起来。...若您需要实现一场完美“慢直播”需求。传统方案是现场安装监控摄像头，监控摄像头在直播中无法还原高清晰的画面图像，而且24小时长时间直播对带宽要求极高，而如果采购这类专业设备费用过于昂贵。...基带信号传输慢直播1.png 2、对IPC网络监控摄像机进行慢直播 现有的视频监控工程大部分属于局域网内监看，网络视频流无法直接传输至互联网直播平台。...千视电子MG300视频网关，可以快速便捷地将多个监控摄像头的RTSP视频流，转换成RTMP直播流，进行互联网慢直播。...rtsp转rtmp_慢直播2.png 同时，通过MG300视频网关，您还可以将多路视频源接入，或者将背景音乐网络流接入，汇总成一个多画面，再次编码成RTMP直播流，进行多画面慢直播。
我们经常看直播就会发现, 主播是可以和主播进行视频互动, 这个操作我们就叫做混流....2个方式，混流其实就是把两个推流的画面混在一起，生成一个叠加的画面，然后用户就可以同时看到两个主播的直播, 需要购买连麦包 客户端混流 支持的样式灵活，可以平滑的处理连麦画面切换, 需要获取两个推流地址..., 然后操作, 服务端的话可以给客户端返回需要混流的流地址, 跟服务端没啥大关系 服务端混流 服务端混流，其实就是拿到连麦的两个人的推流流id，然后调用混流的Http接口，腾讯云会把你传过去的参数解析，...然后把两个流混成一个流，混好之后的视频流会输出到你指定的流的输出流上面，就实现了服务端混流。...我们选择了客户端混流, 客户端混流灵活, 对连麦异常断开处理比较友好, 博主只是个后端菜狗, 所以就没法描述更多客户端细节了
我在开发中使用的是服务端REST API 混流方案，混流画面排版模式使用的是屏幕分享模式。...混流画面排版模式共有4中，出了下图3种之外，还有一种画中画模式，画中画模式和悬浮模板相似，差别是小画面可以指定在大画面的任何位置之上。图片场景：使用两个流，一个屏幕录制分享，一个摄像头采集。...当前的屏幕分享流的分辨率和混流的一样，然后再加上摄像头的单流画面，为保证所有的都显示完整，所以画面就会进行缩放，两个流的分辨率比例不一致，因此缩放了就出现了位置偏差。那这个怎么解决呢？？？...这里提供两种方案：方案一：当前分辨率不变，使用画中画布局的混流方案设置LayoutParams.Template=3,并且可以指定小画面的位置。唯一不足就是小画面必须覆盖在大画面之上。...方案二：使用原来的屏幕分享布局，固定混流输出分辨率是1600x720，按照右侧小画面的数量设置大画面的上行分辨率，这样可以保证大画面不做缩放。
接下来我将为大家分享爱奇艺的剧场直播云端混流解决方案。 ?...相对于游戏直播，剧场直播需要处理两路流，这里就牵扯到混流问题。混流不仅是为向观众呈现更统一的观看体验，更是为了节省带宽占用。...，根据用户终端不同观众的观看需求采取不同的混流方案，例如以主播为主画面，以点播电影为主画面或使两种画面都以高分辨率形式播放。...而在直播流场景下，主播有时在直播过程中不想让观众看到自己的画面，会将视频流关闭，此时我们也需要在混流时用相应贴图来取代缺少的一路视频流。...点播流与直播流之间的同步 针对点播流的播放，我们尝试尽可能将播放进度差异最小化；而针对直播流我们则是降低传输时延，通过以上策略尽可能减轻用户对上述操作的感知；针对混流过程，我们则采取积极的缓冲区丢帧策略与混流器匀速消费等措施尽量保证画面的平滑
问题/风险描述：在使用 腾讯实时音视频（TRTC） web端进行云端混流转推时，可能会出现混流失败的情况，其中一种错误的情况是发起client.startMixTranscode混流的时候，子画面的布局超出了编码输出的画面了...，导致混流失败。...图片解决方案：为了解决以上的混流失败错误情况，我们建议您采取以下措施：1....在业务程序端在计算 子画面的坐标和宽高的时候，需要根据大画面的宽度来进行计算，参考代码如下/*- 总输出画面大小为 1920x1080 像素- 9 个子画面要均匀分布在总输出画面中- 子画面之间的间距为...时刻关注您的Web端发起混流后返回的接口，如果发现有相关的错误情况的话，需要及时的修复并发布，以免影响您业务正常使用。注意事项：混流失败会影响到从CDN拉流的观众和回放录制，请及时关注相关的错误。
问题/风险描述：在使用 腾讯实时音视频（TRTC） 进行云端混流转推时，可能会出现混流失败的情况，其中一种错误的情况是启动云端混流接口中的子画面布局超出编码输出的画面，导致混流出现失败的情况，比如通过云端的日志检查发现是因为发起混流参数的子画面的布局超出了编码输出的画面...图片通过计算可以知道，整个输出的画面大小为1920x1080，但是通过x：2180，y:302 坐标和画面的宽高444x250，计算得出 整个画面在输出画面之外，从而导致无效的混流输出。..."Message":"" }, "RequestId":"xxxxx-09e1-483a-b1d8-xxxxxxxxx" }}解决方案：为了解决以上的混流失败错误情况...在业务程序端在计算 子画面的坐标和宽高的时候，需要根据大画面的宽度来进行计算，参考代码如下假设：- 总输出画面大小为 1920x1080 像素- 9 个子画面要均匀分布在总输出画面中- 子画面之间的间距为...时刻关注您的服务端发起混流后返回的接口，如果发现有相关的错误情况的话，需要及时的修复并发布，以免影响您业务正常使用。注意事项：混流失败会影响到从CDN拉流的观众和回放录制，请及时关注相关的错误。
本文主要是梳理如何使用TRTC进行云端混流进行画面混流（画面拼接）后通过直播形式展示 图片.png 原理解析 腾讯云会使用一批旁路转码集群，将 TRTC 中的音视频数据旁路到直播 CDN 系统中，...混合画面的旁路直播 TRTC 最擅长的领域就是音视频互动连麦，如果一个房间里同时有多个主播，而 CDN 观看端只希望拉取一路音视频画面，就需要使用云端混流服务将多路画面合并成一路，其原理如下图所示： 图片...： 图片.png 若需要指定StreamId则需要在TRTC.createClient中指定 图片.png 旁路直播侧效果： 图片.png 步骤4：控制多路画面的混合方案 完成上面步骤后，需要开启混流将画面凭借...，这里的StreamId不能与旁路直播的streamId冲突，否则将导致拉流时拉到的是还未混流前的画面。...，生成云端混流的流。
云端混流转码 使用场景 云端混流主要用于CND直播观看和云端录制回放等场景中，需要将TRTC房间里的多路音视频流混合成一路。...混流方式为MCU混流转码集群，其能将多路音视频流进行混合，并将最终生成的视频流分发给直播CDN和云端录制系统。...3.将多路视频混合成一路，所有参与人看到的是相同的画面，客户体验非常好。 缺点： 1.重新解码、编码、混流，需要大量的运算，对 CPU 资源的消耗很大。 2.重新解码、编码、混流还会带来延迟。...编码，MCU需要将混合后的画面和声音进行二次编码，并封装成一路音视频流，交给下游系统，如直播和录制。...StreamId用于指定是否启动 CDN 直播观看，如果您指定此参数，那么混流后的音视频流会被导入到 云直播系统 中。
下面介绍其特点，与主播的单向直播相比，连麦实现的技术难点增大很多，具体如下： 音频混流，主播将自己的声音与连麦者的声音做混音。 视频混流，主播将自己的画面与连麦者的画面做视频合成。...观看到的混流画面：A大窗、B小窗，如下图： 主播与粉丝连麦，主播端混流方案的优劣势： 劣势：主播端压力大，主播端需要视频混流以及面对计算压力，对手机性能和网络性能要求也比普通直播时更高一些，不适合多人连麦...观众端拉取2路视频数据、2路音频数据，并进行相应的混流工作。其混流工作包括：画面合成、回声消除、降噪、混音。 观众端混流后，观看到的混流画面：A大窗、B小窗显示。...观众端拉取2路视频数据、2路音频数据后，进行相应的混流工作。其混流工作包括：画面合成、回声消除、降噪、混音。 观众端混流后，观看合成画面。...如果A主播与B主播在连麦前，C1作为A主播的观众，C2作为B主播的观众，连麦后，C1观看到的混流画面：A大窗、B小窗,C2观看到的混流画面：B大窗、A小窗。
，就推荐使用MCU混流功能，调用混流接口实现混合画面，旁路推流出去，提供给观众观看一屏多画面的功能。...TRTC目前提供了两种混流方式：云端api混流、终端api混流。 本篇主要介绍终端混流方案，实现下图这种混流方式。demo下载链接 默认大画面是大主播。...、退房，上麦、下麦时调用混流接口 直播通话的房间管理功能，参考sdk包中的SimpleDemo的live模块，搭建了一个简单后台服务，用于增删改查房间列表。...混流是对每一路视频流进行操作，所以首先得有视频流streamId，这个streamId不是TRTC的音视频数据流概念，而是云直播音视频数据流概念，要将TRTC的音视频数据流旁推的云直播服务，有两种方式。...如下图7条流都在，大主播的画面混流成功了。
； 普通用户仍然是3-5s的一般时延观看混合画面的直播流； 3 方案 在了解原理之后，我们来拆分一下，看具体需要做那些事情。...供主播B拉主播A的低时延直播流*； 连麦时，生成一个新的推流地址，供主播B推流； 获取红色拉流加速地址，供主播A拉主播B的低时延直播流*； 云端进行样式混流； 保证用户端尽量0改动； *由于低延时流使用腾讯云核心机房的...A和主播B两个流混合成一个流，同时，以主播A的拉流地址为混流后拉流地址； 普通观众端画面自动展现为连麦画面； 根据上面提到的步骤，我们可以列出以下几个接口： 【主播】发起连麦请求，createJoinAnchor...所以我们需要在云端做混流转码。 好在腾讯云直播服务为我们提供了直播混流功能，可以根据设定好的混流布局，同步的将各路输入源混流成一个新的流。...通过这样的替换，可以带来两个好处： 解决了前面的两个弊端，性能和体验的问题 兼容了以往的直播录制逻辑，无需改动即可实现混流视频的回放 5.4 混流画面黑边 混流后输出的画面有黑边一般是大小主播推流实际分辨率与混流参数
前言 在直播场景里，我们经常需要将多个视频画面混合成一个视频画面（或是多路音频合成一路声音），常见的场景如： 本地既要接入摄像头，又要展示桌面或者视频文件，在本地需要做一下画面混合 主播连麦PK时，将多个主播的画面混合成一个...[音视频混流的基本过程] 视频混流的基本原理 视频混流的过程，是指定一块画面区域，在此区域内，按画面的位置布局，将区域中的每个视频画面的像素混合计算成一个像素。这里面主要涉及到的是图层与颜色计算。...腾讯云云直播服务提供了云端混流功能，支持最多16路音频、视频、图片、画布的数据流混合，开发者可以方便的使用云端混流接口实现连麦PK、多画面混合等功能。...Y 混流会话参数 参数名称 参数含义 输入类型 范围 备注 是否必填 app_id 直播 APPID int32 直播 APPID。...混流常见问题Q&A Q：混流接口返回 code 为 -505 A：混流接口报-505，代表该流 ID 在云直播后台没有查询到记录。 - 可以使用播放器测试是否可以成功播放。
TRTC Demo 实现云端混流转码和CDN旁路直播功能，如果开发者想体验，需要简单做下修改参数才能体验。...1.修改混流参数 在 TRTCMainActivity 类中，搜索并定位到TRTCTranscodingConfig；根据您账号信息，修改对应混流参数的 appId 和 bizId 字段。...config.bizId = -1; // 请进入 "实时音视频"控制台 https://console.cloud.tencent.com/rav，点击对应的应用，然后进入“帐号信息”菜单中，复制“直播信息...”模块中的"bizid" 2.修改CDN旁路直播播放地址 同样在 TRTCMainActivity 类中，搜索并定位到onClickButtonGetPlayUrl；将3891 修改成你账号的bizid
一、混流前提条件（补充）1、混流前必须要在控制台开启旁路推流配置（云端录制后面再讲解）图片2、创建TRTC直播间的时候，如果设置了param.strRoomId，那必须设置param.roomId =...场景：创建一个TRTC的直播房间，两人进房。一个主播，一个观众，然后观众发起连麦，服务端进行混流。...图片连麦观众：流id：1400505488_661_555_main图片上面流id和画面我们都可以通过云直播的控制台->流管理->在线流->查看具体的流id和预览流画面图片准备工作已经搞定，那我们开始混流...填0：直播流为音视频(默认); 填1：直播流为纯音频outputParams1.setRecordId("rongkeRecord");//自定义录制文件名称前缀。...id和相应的画面：同样可以在云直播控制台查看图片三、混流方式：1、A+B->A上面参数OutputParams设置的时候有一个人流id（StreamId），这个就是混流后我们设置的输出混流的流id根据上面我们的房间背景
Q1：直播混流是不是必须产生转码费用？ 是的，会按照混流后的输出直播流收取转码费用。由于混流任务成功后不播放也消耗转码资源，混流的转码费用会按照混流时长进行收费，跟普通转码的播放时长计费有区别。...Q2：直播录制路数峰值如何计算？ 一路直播流（一个流 ID）录制一种格式文件，即为一路直播录制任务，系统会按5分钟上报一次并发的录制路数，取当月内的最高峰值为直播录制路数月峰值。...Q8：云直播中对视频质量的影响的因素有哪些？ （1）帧率：影响画面流畅度，与画面流畅度成正比：帧率越大，画面越流畅；帧率越小，画面越有跳动感。...（1）断流功能：一条直播中的流，如果断流，则本次推流会被中断，观众端将无法观看直播。断流后，主播端可以再次发起推流，继续直播活动。...（2）禁播功能：一条直播中的流，如果禁播，则本次推流会被中断，观众端将无法观看直播。断流后，主播端在一段时间内无法再次发起推流。（默认禁播7天，最多可支持90天） 云直播.png
大致流程是，大主播端推一路自己的画面，拉一路小主播的画面；小主播端推一路自己的画面，拉一路大主播的画面；第三方观众拉一路大小主播混流后的画面。 ...[image.png] 云端混流：对于第三方观众，如果想同时看到大主播和小主播的画面，最简单的办法就是拉两路流。但是这里的缺点是这两条流的延时不好控制，以及多拉一条流产生多一路流的费用。...整体流程 [image.gif] 主播 A 正常推流直播，直播码为 streamA 主播 B 正常推流直播，直播码为 streamB 主播 B 向主播 A 请求连麦，并带上自己的推流地址 streamB...是一个数组，包含了需要混流的视频流信息；这个数组里必须包含大主播的视频流，混流后台目前最多支持16路混流； 字段layout_params用于设置视频流排布参数；大主播的画面默认铺满整个屏幕，只需要将字段...混流后输出的画面有黑边一般是大小主播推流实际分辨率与混流参数layout_params里面设置的image_width和image_height不一致导致的，服务端对流画面进行了裁切所以出现黑边现象。
假如你是第一次使用这个组件，想自己本地跑一下连麦效果，那么你大概率是会失败的，你发现你成功上麦之后，主播右下角会出现黑屏小画面，然后上麦的观众出现多次拉流失败的报错，之后上麦的这位观众就会推出直播间，如图下...其实上麦之后，在这个组件内部是有做混流的，未上麦的观众，看的是混流的画面，因为他们不需要追求超低延时，而上麦的观众对延迟要求比较高，所以他们的通道是查看的超低延时画面。...所以这上麦和未上麦的人看到的流其实是不一样的： 上麦的人走的是连麦通道，看的是超低延迟的流 未上麦的人走的是直播通道，看的是混流之后的flv流 所以上麦的人能互相听到声音，说明推流没有问题，但是未上麦的人听不到上麦人的声音...混流失败的话，我们得先去看看混流的代码逻辑。经过排查发现混流的接口所需要的数据都是通过createMergeInfo方法去构建的。...混流接口v3.0 image.png 设置好这个参数之后，混流的画面也可以听到上麦人的声音了。
，就推荐使用MCU混流功能，调用混流接口实现混合画面，旁路推流出去，提供给观众观看一屏多画面的功能。...，上麦、下麦时调用混流接口直播通话的房间管理功能，参考sdk包中的SimpleDemo的live模块，搭建了一个简单后台服务，用于增删改查房间列表。...，所以首先得有视频流streamId，这个streamId不是TRTC的音视频数据流概念，而是云直播音视频数据流概念，要将TRTC的音视频数据流旁推的云直播服务，有两种方式。...(mTRTCParams, TRTC_APP_SCENE_LIVE); }旁推成功了，在云直播控制台就能看到这条流id，并点开预览画面。...如下图7条流都在，大主播的画面混流成功了。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
