Flutter

最近更新时间:2024-02-01 21:16:22

我的收藏

内容介绍

跟手机直播千篇一律的竖屏体验不同,实时音视频(TRTC)需要兼顾横屏和竖屏两种场景,因此就会有很多横竖屏的处理逻辑需要去应对,本文主要介绍:
如何实现竖屏模式,例如:微信的视频通话就是一个典型的竖屏体验模式。
如何实现横屏模式,例如:多人音视频房间 App(类似小鱼易连)往往都是采用横屏模式。
如何自定义控制本地画面和远程画面的旋转方向和填充模式。




平台支持

iOS
Android
Mac OS
Windows
Electron
Web 端
×

竖屏模式

如果要实现类似微信视频通话的体验模式,需要做两项工作:

1. 配置 App 的 UI 界面为竖屏

iOS 平台
Android 平台
可以直接在 XCode 的 General > Deployment Info > Device Orientation 中进行设置:


通过指定 activity 的 screenOrientation 属性为 portrait,即可指定该界面为竖屏模式:
<activity android:name=".trtc.TRTCMainActivity" android:launchMode="singleTask" android:windowSoftInputMode="adjustPan"
android:screenOrientation="portrait" />

2. 配置 SDK 使用竖屏分辨率

在使用 TRTCCloud 的 setVideoEncoderParam 设置视频编码参数时,将 videoResolutionMode 指定为 TRTC_VIDEO_RESOLUTION_MODE_PORTRAIT 即可。 示例代码如下:
trtcCloud.setVideoEncoderParam(TRTCVideoEncParam( videoFps: 15, videoResolution: TRTCCloudDef.TRTC_VIDEO_RESOLUTION_640_360, videoBitrate: 600, videoResolutionMode: TRTCCloudDef.TRTC_VIDEO_RESOLUTION_MODE_PORTRAIT));

横屏模式

如果希望 App 是横屏体验,那么您需要做的工作跟竖屏模式类似,只是将第一步和第二步中的参数都进行相应的调整即可。 尤其是 第二步 中,TRTCVideoEncParam 中的 videoResolutionMode 值:TRTC_VIDEO_RESOLUTION_MODE_LANDSCAPE

自定义控制

TRTC SDK 本身提供了接口函数可以操控本地和远程画面的旋转方向和填充模式:
接口函数
功能作用
备注说明
setVideoEncoderRotation
设置编码器输出的画面顺时针旋转角度
目前仅支持0度和180度

GSensorMode

考虑到画面旋转牵扯到录制和 CDN 旁路直播的各种适配问题, TRTC SDK 仅提供了一种简单的重力感应自适应功能,您可以通过 TRTCCloud 的 setGSensorMode 接口来开启。
该功能支持90度、180度、270度旋转的自适应,也就是当用户自己的手机旋转时,对方看到的画面朝向还是会保持不变。而且这种自适应是基于对编码器的方向调整而实现的,因此录制出的视频,以及小程序和 H5 端看到的视频画面也能做到保持原方向不变。
注意:
重力感应自适应的另一种实现方案是在每一帧视频信息里都带上当前视频的重力朝向,然后在远程用户那里自适应的调整渲染方向,但这种方案需要引入额外的转码资源才能解决录制出的视频朝向跟期望的视频朝向保持一致的问题,因此并不推荐。