发布者：全栈程序员栈长，转载请注明出处：https://javaforall.cn/116194.html原文链接：https://javaforall.cn
图 1 图 1 所示是短视频及直播的发展史，众所周知，2016 年是直播元年，在这期间诞生了很多直播平台，比如熊猫、映客、斗鱼等；而在 2017 年，短视频的火爆程度并不亚于直播，可能大家都以为短视频是从...3、平台相关 要对相应平台的摄像头、麦克风、编解码、多媒体处理等 API 十分熟悉，否则它们的一些坑会耗费你大量时间。...短视频 SDK 架构设计 接下来介绍一下我们团队在进行短视频 SDK 实践中主要做的一些事情，这其中最重要的就是短视频 SDK 的架构设计，包括架构设计理念、架构图、整体数据流程、模块架构设计等。...录制模块的重点在于帧数据获取，除了可以通过摄像头获取视频帧，还可以通过屏幕录制获取视频帧，而音频帧数据主要还是通过麦克风进行获取；虚线部分的 Filter 模块主要实现了内置美颜/滤镜功能，另外因为有纹理和...我们通过对客户提供的一些样本视频进行分析后，发现出问题的都是带有双向引用 B 帧的 High profile 视频，如图 14 所示，B 帧（3）位于中间，其引用左右两边的 P 帧（2、4）在显示时是这样的顺序
在屏幕上显示所选图像 现在，让我们添加一个小部件以显示在上一节中选择的图像，如下所示： 我们将使用小部件列表，从图库中选择的图像以及彼此堆叠或重叠的预测结果显示在屏幕上。...最后，在各种图像集上运行 Cloud Vision API 将提供不同的输出。 以下屏幕快照显示了一些示例： 当 TensorFlow Lite 模型使用相同的图像集时，识别方式会有所不同。...以下屏幕快照显示了一些示例： 在上一个屏幕截图中，我们可以看到已正确识别将图像加载到图库中的花朵的种类。 总结 在本章中，我们介绍了如何使用流行的基于深度学习的 API 服务来使用图像处理。...其余字段将自动获取，并且将显示与图像有关的信息，如以下屏幕截图所示： 在显示部署详细信息的下一个屏幕中，单击屏幕中央的“部署的映像”选项，如以下屏幕截图所示： 然后，向下滚动显示在屏幕右侧的信息面板...您也可以使用/model/metadata路由找到模型元数据。 我们准备在项目中使用此 API。 让我们在接下来的部分中了解如何构建相机应用以及如何将此 API 集成到应用中。
在Tables屏幕上，您现在应该看到从 Schemar Registry 导入的表的列表。 查询导入的表以确保其正常工作。...请注意，屏幕上显示的数据只是查询返回的数据的样本，而不是完整的数据。 通过单击控制台（左侧栏）> SQL 作业选项卡检查作业执行详细信息和日志。...在 SQL 字段中输入以下查询并执行它： SELECT * FROM sensor6stats 几秒钟后，您应该会看到sensor6_stats屏幕上显示的主题内容： 您需要让Sensor6Stats...如果您已经在 SSB 中创建了 API Key，您可以从下拉列表中选择它。否则，通过单击上面显示的“添加 API Key”按钮在现场创建一个。用作ssb-lab键名。 单击添加查询以创建新的 MV。...在Materialized Views选项卡上，复制屏幕上显示的新 MV URL 并在新的浏览器选项卡中打开它（或直接单击 URL 链接）。您将看到 MV 当前快照的内容。
合成图形并显示到屏幕上。...从下层往上层理解 1.1 显示屏 显示屏上的内容，是从硬件帧缓冲区读取的，大致读取过程为：从Buffer的起始地址开始，从上往下，从左往右扫描整个Buffer，将内容映射到显示屏上： ?...我们用以下两个假设来分析两者的关系： ① 屏幕刷新速率比系统帧速率快 此时，在前缓冲区内容全部映射到屏幕上之后，后缓冲区尚未准备好下一帧，屏幕将无法读取下一帧，所以只能继续显示当前一帧的图形，「造成一帧显示多次...② 系统帧速率比屏幕刷新率快 此时，屏幕未完全把前缓冲区的一帧映射到屏幕，而系统已经在后缓冲区准备好了下一帧，并要求读取下一帧到屏幕，将会导致屏幕上半部分是上一帧的图形，而下半部分是下一帧的图形，「造成屏幕上显示多帧...关于SurfaceFlinger以及SurfaceFlinger与上层建立联系的Surface讲解完了，接下来看看上层是如何将图形绘制到Surface的Buffer中。
但是我在后续的实际运用中，还是发现了一些问题 —— 这个方法，可以有效利用免费的云存储和云计算资源，但你还是得忍耐上传一个大体积视频文件，等待处理完成，以及下载瘦身后版本所耗费的时间。...如果针对知识类的视频内容，2000 Kbps 就足够了。这其实并不难理解。毕竟大部分的情况下视频的收看对象，不是盯着三四十寸显示器屏幕一点点抠细节的看官，而是平板乃至于手机用户。...这么点儿的屏幕，确实很难看出码率的区别。 从 Bilibili 的例子可以看出，码率的设置还能弄得更低一些。不过，我觉得没有必要那么极端。...而 Youtube 也对直播推流的码率设定，给出了详细的说明[4]。不过这里稍微高一些，下限在 3000 Kbps 。...这里面实际上也有码率调整的输出参数，只不过默认的情况下，会用「推荐」这样的文字来描述，让你不知道具体的数值。 如图所示，你可以先把码率设置成「自定义」，然后直接填入你要的数值。
任何落在范围外的坐标都会被丢弃/裁剪，不会显示在你的屏幕上。...左右手坐标系 我们上面没有展示 OpenGL 中的 Z 轴张啥样，因为 Z 轴有两种形式，一种是指向屏幕外（正值在屏幕外），另一种是指向屏幕（正值在屏幕内）。...)// 将顶点数据加入的刚刚创建的缓存对象gl.vertexAttribPointer( // 告诉 OpenGL 如何从 Buffer 中获取数据 positionLocation, // 顶点属性的索引...要使用 WebGL 渲染，首先需要获取渲染上下文，这里只需要将平时用的 2d 参数改为 webgl 就行，然后设置 WebGL viewport，这样 OpenGL 就可以根据它将 NDC 坐标变成屏幕上的坐标...上面已经介绍了前两个，它们都是从外部 JS 获取数据。 varying 是顶点着色器向片元着色器传送数据。
，这会让顶点发生很多变化，是观察变换里最复杂的部分 3.视口变换部分 最右边的步骤，将规范视体中的三维顶点们投影到二维的屏幕空间中，这以后才能光栅化顶点渲染到屏幕的像素上 视口变换部分 上面介绍了渲染顺序后...，我们仍然可以对其进行一系列的观察变换，只不过我们在一系列变换的最后需要进行透视除法得到真实坐标才能对应到屏幕空间中渲染 ---- 7.3 透视投影 在上一节中，我们知道了透视的核心是近大远小的透视除法...在上面的伪代码里，正交透视和透视矩阵的乘积合成为了完整的透视投影矩阵，这个矩阵在不同的API中有一些差别，例如OpenGL中对其每个值视体两个面的z坐标取了绝对值，但是整体的思路都是一样的 ?...手动测试一下我们就会发现在这个映射中，正的z值会被映射到负z上，负的z值被映射到正z上，当我们要渲染的物体都在视体内时自然还能正确投影到屏幕上，但是一旦出现了跨越z=0的线段，线段就会有一部分被映射到正负无穷因而被撕裂...在大多数观察系统中，例如常见的一些提供了调节选项的三维游戏中，系统都固定了焦距n然后允许我们通过调节θ控制投影面的大小也就是视野大小，因此这个θ的角度就被称为视域(FOV)，代表了焦点到投影面在垂直方向上总共覆盖的视锥角度
从数据也可以看出，移动直播市场当前所处的阶段。...比达咨询近日发布的《2018年第1季度中国移动直播产品市场研究报告》显示，2017年中国移动直播用户达到2.2亿，同比增加47%，在整体移动网民中的渗透率为29.2%。...《中国网络版权产业发展报告（2018）》数据显示，2017年中国网络直播市场产业规模已经达到近400亿，超过了网络视频会员付费的218亿和数字阅读的100亿，成为仅次于游戏用户付费的产业。...映客的营收和盈利能力能够在众多准上市直播公司中脱颖而出，核心原因在于其用户属性。...直播营销如果复制视频网站的贴片广告等形式并不合适，只有结合直播探索出更加标准化的营销产品才能吸引广告主，直播答题可以说是一个成功的探索，得到了一些广告主的青睐，不过直播答题不可能一直火下去，类似的基于直播的内容探索给营销带来不小的想象空间
在 Android 中数据源或存储区通常是应用数据的生产者；消费者则是视图，它会把数据显示在屏幕上。...在示例代码中，我们首先从 API 获取消息，然后使用 emit 挂起函数将结果添加到 Flow 中，这将挂起协程直到收集器接收到数据项，最后我们将协程挂起一段时间。...收集数据流通常发生在视图层，因为这是我们想要在屏幕上显示数据的地方。 在本例中，我们希望列表中能够显示最新消息以便 Pancho 能够了解最新动态。...安全收集 假设我们在 MessagesActivity 中，如果希望在屏幕上显示消息列表，则应该当界面没有显示在屏幕上时停止收集，就像是 Pancho 在刷牙或者睡觉时应该关上水龙头一样。...但这样会在让数据流生产者保持活跃状态，有可能会在后台持续发出不需要在屏幕上显示的数据项，从而将内存占满。
，他们会变活，互相对话，而比如说当你坐在那个过山车上，周围都是环形屏幕，你跟着哈利波特一起飞翔的时候，你会感觉那就是沉浸感，反正混合现实，其实不是说只有VR眼镜才能做到的，那我们把它在广义的放大一下，屏幕就是构建虚拟现实体验或者混合现实体验最关键的一个载体...其实他数据一直在提升，一直在计划，只不过是可能大家会看到今年直播会有一些乱，我所谓的混战，它可能头部在整合在形成垄断，甚至它在渗透进所有APP，直播它变成了一种能力，那这些数据其实都告诉我们用户越来越需要...我们的技术实际上在做的事儿是把影视级的CG技术消费化，可能大家都知道《阿凡达》的电影拍摄过程中，《阿凡达》曾经是科幻史上一个里程碑的电影，那阿凡达在整个拍摄过程中，它实际上是采用了很多专业的外设来捕捉人类的面部表情...去年把我们的能力共享给了映客，所以在映客这类的直播产品里面会它集成appMagics来给用户提供基于他真实的视觉上叠加的那些虚拟的东西来增强它的表达。...那后面我们又做了一件事儿，这个视频到了，这是我们跟映客的一些主播来玩的一个东西，后面我们又发布了一个虚拟偶像，这个糖糖他是一个脱口秀明星，实际上以前的内容都是一帧一帧制作的，大家都知道这个里面的成本和周期
欢迎来到屏幕系列课程。在本系列中，你将学习在树莓派中如何使用汇编代码控制屏幕，从显示随机数据开始，接着学习显示一个固定的图像和显示文本，然后格式化数字为文本。...假设你已经完成了 OK 系列课程的学习，所以在本系列中出现的有些知识将不再重复。 第一节的屏幕课程教你一些关于图形的基础理论，然后用这些理论在屏幕或电视上显示一个图案。...它们只能执行有限数量的指令，仅仅能做一些数学，但是它们也能以某种方式来做很多很多的事情。而在这些事情中，我们目前想知道的是，计算机是如何将一个图像显示到屏幕上的。我们如何将这个问题转换成二进制？...答案相当简单；我们为每个颜色设计一些编码方法，然后我们为在屏幕上的每个像素保存一个编码。一个像素就是你的屏幕上的一个非常小的点。...在现代计算机中，图形卡已经能够做更多更复杂的事情了，比如绘制三维图形。但是在本系列教程中，我们只专注于图形卡的基本使用；从内存中取得像素然后把它显示到屏幕上。
这就存在一些问题，比如希望对每一帧图像数据进行一些处理后再显示到屏幕上，在Android3.0之前是没有办法做到的。...SurfaceTexture是从Android3.0（API 11）加入的一个新类。这个类跟SurfaceView很像，可以从相机预览或者视频解码里面获取图像流。...对摄像头数据的再处理 前面我们已经拿到了摄像头纹理并显示在屏幕上，但我们显示到屏幕上的是摄像头原始数据纹理，中间没有做任何其他处理。...如果我们想将摄像头原始纹理做一些处理，比如把彩色图变成黑白图像，然后再显示到屏幕上，应该怎么做呢？其实和我们前面将相机纹理渲染到屏幕的过程是一样的！还记得我们前面的片段着色器吗？...在OpenGL渲染管线中，几何数据和纹理经过多次转化和多次测试，最后以二维像素的形式显示在屏幕上。OpenGL管线的最终渲染目的地被称作帧缓存（framebuffer）。
相位移基本算法:通过采集10张光栅条纹图像相位初值，来获取被测物体的表面三维数据。...DLP投影仪向被测物体投射一组光栅光，光栅图像强呈正旋分布,用相机拍摄被测物体上形成的变形光栅图像，然后利用拍摄得到的光栅图像,根据相位计算方法利用拍摄到的光栅图像处理得到光栅图像的绝对相位值，然后进行标定...如果光栅条纹图像光强是标准正线分布,那么分布函数为： DLP投影仪的核心是DMD，即数以万计的数字微镜器件，高亮光源通过投射光栅到微镜器件，然后反射通过投影镜头投射到被测物体。...按照提示和在整个过程中屏幕上的警告。注:相机标定数据已经存在。如果怀疑校准数据,或使用不同的相机,输入“1”重新标定相机。输入“0”保存相机标定数据。 相机视图窗口将会出现在电脑主屏幕。...从现场相机机视图窗口,放置标定板在不同的角度,不同的相机的视图和按下空格键来捕获图像。总共需要十个校正图像。试一试许多地区的相机,和标定板的角度,找到最好的校准结果。
我们从以下三点来展开分析直播连麦的特点： 连麦功能的权限 连麦人数和显示位置 连麦交互流程 连麦权限 ME直播的连麦功能是没有权限设定的，所有的主播和观众都可以进行连麦，连麦的icon在直播页面的明显位置...这从某个方便来说对于质量上有了提高。 连麦人数和显示位置 ME直播只能单人连线，位置在屏幕右下方，相对不怎么遮挡视线。映客可以单人连线，也可以同时连线2个人。...具体实现是通过在现有的网络中，增加一层新的网络架构，将网站的内容发布到离用户最近的网络节点上，这样用户可以就近获取所需的内容，解决之前网络拥塞、访问延迟高的问题，提高用户体验。 ? ?...比如说，发送100个数据包，每个包间隔1s发出。结果第27个包在传输过程中遇到网络拥塞，造成包27不是紧跟着26到达的，而是延迟到87后面才达。在直播中，这种抖动的效果实际上跟丢包是一样的。...在实际的网络直播中，我们常常会加入直播质量的监控，这里做了完备的数据上报及分析系统，基本上涵盖了各种关键性指标，既能反应直播的各种性能方便优化，同时也能辅助定位各种问题；这个是播放端的整体统计数据，
ARKit ARKit 的 ARSession 负责管理每一帧的信息。ARSession 做了两件事：拍摄图像并获取传感器数据；对数据进行分析处理后逐帧输出。如下图： ?...有了这个前提条件，真实世界位置坐标才能够正确地映射到虚拟世界中。显然，ARWorldAlignmentGravityAndHeading 才是我们需要的。...这里列出一个在屏幕上具体的像素数与距离的粗略计算公式，为笔者在开发过程中摸索的经验值： ?...SCNSceneRenderer 协议有两个方法用来投射坐标： projectPoint:：将三维坐标系中点的坐标，投射到屏幕坐标系中 unprojectPoint:：将屏幕坐标系中的点的坐标，投射到三维坐标系中...深度冲突 深度缓冲技术在处理具有相同深度的像素点时，会出现深度冲突（Z-fighting）现象。这些具有相同深度的像素点在竞争中只有一个“胜出”，显示在屏幕上。如下图所示： ?
所以最可能的是，游戏引擎在3D环境中使用它自己的世界内部表征，然后使用投影技术将游戏渲染为2D并显示在屏幕上。...这个矩阵被用来确定与屏幕上的2D坐标相对应的3D坐标，(再进行一些假设)反之亦然。图3说明了投影映射的基本概念。左矩形表示屏幕，而右坐标轴代表世界坐标。...灰线(投影映射)将蓝点从世界坐标映射到屏幕上的位置。 图3：投影影射 给定2D图像来近似投影矩阵的过程被称为相机标定。...为了构建模型，我们用游戏静态图像来手动构造数据集。图10显示了从数据集中取出的样本。 图10：闪电传送分类器数据 执行预测的代码如下。...此外，在上面的代码中，屏幕捕捉要在主线程上运行。所以整个程序要等待获取到图像，在此期间不会和游戏发生处理或交互。
最近用路过图床的时候网站没打开，咨询管理说有DNS污染，便又搜索有没有好用一些的图床，就发现了水墨映客图床，虽然容量有限，但是他每天签到都可以扩充容量，并且最最重要的我发现水墨映客开放上传接口，于是就开始鼓捣想着利用水墨映客作为...安装lankong插件 这是一个为 兰空图床适配开发的 PicGo 图片上传插件。同样适用于水墨映客图床 在picGo的插件设置中搜索lankong，然后安装。...image.example.com ✅️ https://image.example.com/ ❌️ 填写 Auth Token 使用 Bearer 拼接，token在水墨映客的设置中获取，注意在配置时候需要前面拼接...= inputStream; byte[] buffer = new byte[4096];//临时存储从输入流中读取的数据 int bytesRead; //持续读取输入流中的数据直到没有数据 while...//从解析出的JSON对象中，通过路径rootNode.path("data")定位到"data"节点，再从该节点下获取"url"字段的值，即图片上传后的URL JsonNode userNode
不过，映客最具想象空间的还是财报中的一些“彩蛋”。 第一个彩蛋：映客对直播收入的依赖程度有所缓解。 2018年直播收入占营收比重96.59%，较去年的99.40%下降2.81%。...好在广告预算从传统媒体向移动互联网转移正在加速，拥有海量注意力的直播平台的广告价值正在得以释放，而在众多直播平台中，映客在广告变现的探索上，一直走在前面。...映客官方数据显示，截至2月中旬，种子视频注册用户已突破2000万，日活达200万，用户日观看时长达100分钟。 ? 映客产品矩阵（部分）App。...映客产品矩阵中，有多个产品瞄准下沉市场，比如面向低线市场的视频版“趣头条”种子视频，面向中老年人的老柚直播，奉佑生接受媒体采访也明确将重点耕耘下沉市场，“沿着细分人群、细分市场不断获取用户和流量。”...，才能保持良好的竞争力”。
渲染器的工作 在关于 Stylo 的文章中，我讨论了浏览器如何将 HTML 和 CSS 转换为屏幕上的像素，并提到大多数浏览器通过五个步骤完成此操作。 可以将这五个步骤分成两部分来看。...这样就将所有合成工作从主线程中移出。尽管如此，它仍然在主线程上留下了大量的工作。图层需要重绘时，主线程需要执行绘制工作，然后将该图层转移给 GPU。...这也意味着从 CPU 复制到 GPU 的数据要更少了。 但是，在绘制与合成工作之间保持这种区分仍然会产生一定的成本，即使它们都在 GPU 上进行。...它们都是同一步骤的一部分。GPU 根据传递给它的图形 API 命令同时执行它们。 2. 布局步骤将产生一种不同的数据结构。之前是帧树（或 Chrome 中的渲染树）。...它为此使用了几种不同的技术。 从列表中删除任何不必要的形状（早期剔除） 节省时间的最好办法是什么都不做。 首先，RenderBackend 可以减少显示列表项目。它会识别哪些项目将真正出现在屏幕上。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
