很多机器学习的模型都是在图片上操作，但是忽略了图像其实是3D物体的投影，这个过程叫做渲染。能够使模型理解图片信息可能是生成的关键，但是由于光栅化涉及离散任务操作，渲染过程不是可微的，因此不适用与基于梯度的学习方法。这篇文章提出了DIR-B这个框架，允许图片中的所有像素点的梯度进行分析计算。方法的关键在于把前景光栅化当做局部属性的加权插值，背景光栅化作为基于距离的全局几何的聚合。通过不同的光照模型，这个方法能够对顶点位置、颜色、光照方向等达到很好的优化。此项目有两个主要特点：单图像3D物体预测和3D纹理图像生成，这些都是基于2D监督进行训练的。
作者简介 jzg，携程资深前端开发工程师，专注Android开发； zcc，携程高级前端开发工程师，专注iOS开发。 一、前言 随着移动端短视频的火热，音视频编辑工具在做内容类APP上的地位举足轻重。丰富的转场方式可以给短视频带来更多炫酷的效果，从而更好地赢得用户青睐。本议题主要包含了对OpenGL的简单介绍及相关API使用，GLSL着色器语言的基本使用，以及如何通过编写自定义的着色器程序来实现图片的转场效果。 二、为什么使用OpenGL以及使用的难点 2.1 为什么使用OpenGL 视频的转场效果离不开图
从历史上看，图形加速始于在重叠三角形的每个像素扫描线上插入颜色，然后显示这些值。包括访问图像数据的能力允许将纹理应用于表面。添加用于插值和测试z深度的硬件，可以提供内置的可见性检查。由于它们的频繁使用，这些工作被放到专门的硬件以提高性能。渲染管线的更多部分，以及每个部分的更多功能，在连续几代硬件产品中被添加。专用图形硬件相对于CPU的唯一计算优势是速度，但速度至关重要。
WebGL是一种基于OpenGL的浏览器内置3D渲染器，它可以让你在HTML5页面中直接显示3维内容。 在本教程中，我会介绍你使用此框架所需的所有基础内容。
笔者最近在写安卓端OpenGL ES采集渲染摄像头的功能，恶补了一下OpenGL的相关知识，本篇权当记录。
解析 GPUImage详细解析（一） 上一篇介绍的是GPUImageFramebuffer和GPUImageFilter。 简单回顾一下： GPUImageFilter就是用来接收源图像，通过自定义的顶点、片元着色器来渲染新的图像，并在绘制完成后通知响应链的下一个对象。 GPUImageFramebuffer就是用来管理纹理缓存的格式与读写帧缓存的buffer。 这一篇介绍的是GPUImageVideoCamera和GPUImageView。 GPUImageVideoCamera GPUImage
在上一篇文章《Unity3D学习笔记2——绘制一个带纹理的面》中介绍了如何绘制一个带纹理材质的面，并且通过调整光照，使得材质生效（变亮）。不过，上篇文章隐藏了一个很重要的细节——Unity Shader。Shader(着色器)是渲染管线中可被用户编程的阶段，依靠着色器可以控制渲染管线的细节。现代图像渲染技术，都把Shader封装成与Material(材质)相关的组件。所以这篇文章，我们就初步学习下在Unity中使用Shader。
小插曲：看到具体数学冷汗直冒，细一看，嗷不是那本书呀。《具体数学》：别听《Unity Shader入门精要》里面说什么程序员的三大浪漫，真程序员就该手撕《具体数学》！
这是关于渲染的系列教程的第十部分。上一次，我们使用了多个纹理来创建复杂的材质。这次我们再增加一些复杂度，并且还支持多材质编辑。
文首先对GLSurfaceView相关知识进行讲解，然后介绍Android系统如何获取摄像头数据并利用GLSurfaceView渲染到屏幕上。
要注意到，OpenGL 绘制的物体是 3D 的，而纹理是 2D 的，那么纹理映射就是将 2D 的纹理映射到 3D 的物体上，可以想象成用一张纸裹着一个物体一样，不过要按照一定规律来。
这是渲染系列的第二篇文章，第一篇讲述的是矩阵，这次我们会写我们的第一个Shader并且导入一张纹理。
大家好，本文是 iOS/Android 音视频专题的第五篇，该专题中 AVPlayer 项目代码将在 Github 进行托管，你可在微信公众号（GeekDev）后台回复资料 获取项目地址。
| 导语 对于开发者来说，学习OpenGL或者其他图形API都不是一件容易的事情。即使是一些对OpenGL有一些经验的开发者，往往也未必对OpenGL有完整、全面的理解。市面上的OpenGL文章往往零碎不成体系，而教材又十分庞大、晦涩难懂还穿插着各种API的介绍。因此笔者希望通过多年的图形开发经验，结合对OpenGL的理解，对OpenGL整体的知识做一个梳理，剔除掉特别复杂又较少使用的部分。遗留下来常见和易于理解的部分，同时也尽量在介绍的时候兼顾易懂性和严谨性。希望对即将或正在学习OpenGL的开发者，提
在你的渲染大冒险中，你可能会遇到模型边缘有锯齿的问题。锯齿边(Jagged Edge)出现的原因是由顶点数据像素化之后成为片段的方式所引起的。下面是一个简单的立方体，它体现了锯齿边的效果：
OpenGL中的纹理可以用来表示照片，图像。每个二维的纹理都由许多小的纹理元素组成，他们是小块的数据，类似于我们前面讨论的片段和像素。要使用纹理，最直接的方式是从图像文件加载数据。我们现在要加载下面这副图像作为空气曲棍球桌子的表面纹理：
今天郭先生说一说如何在three.js着色器中添加纹理，先看看今天要完成的效果，在线案例请点击着色器纹理。
在顶点、曲面细分和几何着色器执行它们的操作后，图元被裁剪并设置为光栅化，如前一章所述。管线的这一部分在其处理步骤中相对固定，即不可编程但有些可配置。遍历每个三角形以确定它覆盖哪些像素。光栅化器还可以粗略计算三角形覆盖每个像素的单元格区域（第5.4.2节）。与三角形部分或完全重叠的像素区域称为片元。
这系列的笔记来自著名的图形学虎书《Fundamentals of Computer Graphics》，这里我为了保证与最新的技术接轨看的是英文第五版，而没有选择第二版的中文翻译版本。不过在记笔记时多少也会参考一下中文版本
OpenGL是一套多功能开放标准库，用于处理可视化2D和3D数据。OpenGL可以将调用函数转换成图形处理命令并传送给底层图形硬件，因此OpenGL的绘制效率非常快。
翻译自https://github.com/CyberAgentGameEntertainment/UnityPerformanceTuningBible/ 本章介绍围绕Unity图形功能的调整实践。
注：参考自bilibili系列视频，OpenGL 从入门到成魔-第7章-纹理和纹理坐标，更详细的内容可以从视频获取https://www.bilibili.com/video/BV1bZ4y1W7tX
现实生活中，纹理（Texture）最通常的作用是装饰 3D 物体，它就像贴纸一样贴在物体表面，丰富了物体的表面和细节。
摘要 AR，增强现实，这项技术离我们并不遥远。从AR游戏到AR红包，我们已经开始体验到这项技术的魅力，而AR在商业方面也已经开始崭露头角。这场演讲将从团队构成、迭代流程、设备、开发工具、技术、以及项目
这是涵盖Unity的可脚本化渲染管道的教程系列的第11部分。它涵盖了后处理堆栈的创建。
教程 OpenGL ES实践教程1-Demo01-AVPlayer OpenGL ES实践教程2-Demo02-摄像头采集数据和渲染 OpenGL ES实践教程3-Demo03-Mirror OpenGL ES实践教程4-Demo04-VR全景视频播放 其他教程请移步OpenGL ES文集。 有简书的开发者问我如何使用在一张大图上贴一张小图，原始的需求是在检测人脸，在返回的范围（矩形）内贴上一张图片。 有几点前提： 尽量少消耗CPU； 合成的数据是用于推流； 图片大小不一致； 说说如果没有上述几点
着色器：本身就是一段代码，专业性非常强的代码。就是指着色器有哪些输入。这些子着色器由运行的平台选择。它包含：1.属性定义、2.多个或者至少一个子着色器、3.还有一个处理后的结果即回滚。而回滚就是计算着色时，用来处理所有的子着色器不能运行的情况。
LightMap：就是指在三维软件⾥实现打好光，然后渲染把场景各表⾯的光照输出到贴图上，最后⼜通过引擎贴到场景上，这样就使物体有了光照的感觉。
Shader，是运行在GPU上的程序，中文称为着色器。它的主要用途是对三维物体进行着色处理，对光与影进行计算，以及控制纹理颜色的呈现等，最终，将游戏引擎中的几何数据转化为屏幕上的模型、场景以及特效。
在上一个教程中，我们为项目引入了照明。 现在我们将通过向我们的立方体添加纹理来构建它。 此外，我们将介绍常量缓冲区的概念，并解释如何使用缓冲区通过最小化带宽使用来加速处理。
技术社区里有种很有意思的现象，那就是不少人们口耳相传中的强大技术，往往因为上手难度高而显得曲高和寡。从这个角度看来，WebGL 和函数式编程有些类似，都属于优势已被论证了多年，却一直较为不温不火的技术。但是，一旦这些技术的易用性跨越了某个临界点，它们其实并没有那么遥不可及。这次我们就将以 WebGL 为例，尝试降低它的入门门槛，讲解它在前端图像处理领域的应用入门。
本文通过编写一个通用的片段着色器，实现了抖音中的各种分屏滤镜。另外，还讲解了延时动态分屏滤镜的实现。
在上一章中，我们了解了光学字符识别（OCR）技术。 我们借助 Tesseract 库和预训练的深度学习模型（EAST 模型）来识别扫描文档和照片中的文本，该模型已随 OpenCV 一起加载。 在本章中，我们将继续进行对象检测这一主题。 我们将讨论 OpenCV 以及其他库和框架提供的几种对象检测方法。
GPU渲染流水线，是硬件真正体现渲染概念的操作过程，也是最终将图元画到2D屏幕上的阶段。GPU管线涵盖了渲染流程的几何阶段和光栅化阶段，但对开发者而言，只有对顶点和片段着色器有可编程控制权，其他一律不可编程。如下图：
OpenGL ES _ 入门_01 OpenGL ES _ 入门_02 OpenGL ES _ 入门_03 OpenGL ES _ 入门_04 OpenGL ES _ 入门_05 OpenGL ES _ 入门练习_01 OpenGL ES _ 入门练习_02 OpenGL ES _ 入门练习_03 OpenGL ES _ 入门练习_04 OpenGL ES _ 入门练习_05 OpenGL ES _ 入门练习_06 OpenGL ES _ 着色器 _ 介绍 OpenGL ES _ 着色器 _ 程序 OpenGL ES _ 着色器 _ 语法 OpenGL ES_着色器_纹理图像 OpenGL ES_着色器_预处理 OpenGL ES_着色器_顶点着色器详解 OpenGL ES_着色器_片断着色器详解 OpenGL ES_着色器_实战01 OpenGL ES_着色器_实战02 OpenGL ES_着色器_实战03
这个公众号会路线图式的遍历分享音视频技术：音视频基础 → 音视频工具 → 音视频工程示例 → 音视频工业实战。关注一下成本不高，错过干货损失不小 ↓↓↓
http://blog.csdn.net/wangdingqiaoit/article/details/51457675
FrameBuffer是RenderBuffer的管理者，两者共同组成了帧缓存区。FrameBuffer是没有存储功能的，具体的存储功能实际是RenderBuffer。
这是渲染系列的第三篇文章，上一节介绍了着色器和纹理。我们已经看到了如何使用单一的纹理制作一个用平坦的表面完成的复杂显示的例子，现在我们更进一步，一次同时使用多个。
---- 新智元报道 编辑：LRS 【新智元导读】最近谷歌发布了全新的MobileNeRF模型，直接将神经辐射场拉入移动时代，内存需求仅为1/6，渲染3D模型速度提升10倍，手机、浏览器都能用！ 2020年，神经辐射场（NeRF）横空出世，只需几张2D的静态图像，即可合成出该模型的3D场景表示，从此改变了3D模型合成的技术格局。 NeRF以一个多层感知器（MLP）来学习表示场景，评估一个5D隐式函数来估计从任何方向、任何位置发出的密度和辐射，可在体渲染（volumic rendering）框架下
这是关于渲染的系列教程的第15部分。在上一部分中，我们添加了雾。现在，我们将创建自己的延迟光照。
最近写的程序需要使用很多OpenGL的API，但是我对OpenGL的认识就停留在多年前写Minecraft模组时的简单了解。因此借此机会打算系统的学习一遍OpenGL，浅窥计算机图形学一隅。由于本学习笔记只是记录个人的学习过程，因此内容会有一定偏向性，并且也难免有错漏，还请各路大神不吝赐教。同时不建议以这系列文章作为初学材料，若是初学建议看更专业、全面的书籍。另外，本文虽不要求有计算机图形学基础，但是需要有一定的数学基础（主要是线性代数），过于基础的数学不会展开描述。
GLkit是苹果对OpenGL/openGl ES的一次封装，目的是为了简化苹果开发者使用成本,它的出现加快了开发者的开发速度。类似在OPenGL中出现的固定着色器的概念。但是只要是固定的就会有限制，无法进行自定义编程（顶点着色器，片元着色器）
现代煤矿开采过程中，安全一直是最大的挑战之一。地质空间中存在诸多如瓦斯积聚、地质构造异常、水文条件不利等隐蔽致灾因素，一旦被触发，可能引发灾难性的后果。因此在安全生产过程中有效的管理和规避各隐蔽致灾因素，有着重要的意义。
在之前的之前的教程《WebGL简易教程(九)：综合实例：地形的绘制》中，绘制了一个带颜色的地形场景。地形的颜色是根据高程赋予的RGB值，通过不同的颜色来表示地形的起伏，这是表达地形渲染的一种方式。除此之外，还可以将拍摄得到的数字影像，贴到地形上面，得到更逼真的地形效果。这就要用到我们这一章的新知识——纹理了。
说起图形处理，一定是离不开GPU的，因为我们所做的操作，最终都会由GPU负责展示到监视器上。而这个过程中就离不开计算，计算每一个像素点的颜色信息。所以GPU是计算图像数据的单元。 说起计算，在我的理解里CPU就是专门用于做二进制运算的计算单元、控制单元，可以处理复杂的逻辑和依赖，那为什么还需要GPU呢？
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
