现在这个内窥镜都做成下面这样的接口,很奇怪,为什么?以及RAW格式到底是什么?一个镜头上面2根线是如何通讯的?在这篇文章里面都可以找到答案。
如图所示
我找了找,原来是OV起的名字:
小于 2MP 的图像传感器仅使用 4 个引脚,对于高达 10MP 的图像传感器仅使用 8 个引脚,该接口的实现减少了内窥镜远端及其连接电缆的尺寸和复杂性。
前者是模拟输出,控制相机的方式是I2C(这里不用SCCB了?)数字的话就是普通MIPI要12根线,现在是8根。
其实这里输出脚上面是用的SPI,但是内部控制了IIC,没有说明SPI的模式,强行说的话,可能是模式 9:
看一帧的时序
MSB为先,这里是
这个输出图呢,就是图像的输出数据,我们可以在不使用OV428的情况下自己接ADC来采集,但是需要注意时序控制。1~2.45V就是图像数据的量化。寄存器少得令人发指,只有两个。
这里构成了一个闭环控制系统,也可以手动控制
只有AEC和AGC:AEC 和 AGC 通常会协同工作来优化图像的亮度和对比度。AEC 系统会首先调整曝光时间来控制图像的整体亮度,然后 AGC 系统会调整放大器的增益来控制图像的对比度。
如果使用了OV426,也可以手动控制,因为大夫有手动曝光的需求
OV6949只有一个OUT,那就是控制信息是在时序里面,我纠结地方在于,clk肯定是时钟,不会轻易改变,信息交换肯定是主机发出的,那这个VOUT 引脚充当了一部分发送的功能吗?现在看是双向的引脚,在一个时钟周期内,有发送有接收.
数据手册上面这句话写的在 output 的数字功能,那就是 SPI输入.
时钟只有一个输入的口,而且是给传感器内部锁相环使用的.
就这样,但是这样控制的话,emmmm,搞糊涂了给我,控制信息从哪里走的。
看这个应该是从VOUT送入的,就是 SPI 单工的,clk 有了,miso 那就是.
也就是说,时序就是输入的时钟,但是在VOUT上面其实有和主机的数据交换,方式为图像RAW+SPI写+读。
这设计,绝了
我总结一下,就是说,SPI输入控制,模拟引脚数据输出?就是在clk 的节拍下,视频输出完,然后接收外部的控制信息.
数字的输入输出,OV426上面
VOUT这里可以输出也可以输入,我回去上示波器吧,气死我了,没明白。 这里明白了,vout 就是双向接口,数字部分就是用不同的电压来模拟SPI 时序,看控制框图也可以佐证,看下面数据手册这个symbol:
这里写了输入的时候是方波
这个就是RAW的输出样子
以前一直迷惑,RAW格式是什么样的?现在让我来写写:
拜尔有俩种:STD Bayer pattern 与 Pair pattern:
RAW有俩种输出,Bayer Raw与RGB Raw的主要区别在于两者输出前经过的处理不同:
总体而言,Bayer RAW格式在相同分辨率下占用的空间通常比RGB RAW小,但需要额外的后期处理来生成完整的RGB图像。RGB RAW则提供了直接可用的RGB数据,但占用的存储空间更大。
计算一下数据量
区分图
计算一下这个电压的增加量是多少
OK,其实可以算的出来应该是8位:
我来分析一下它的的输出时序在电压上面的对应:
也就是数据传输的过程是,使用不同的电压来区分不一样的数据。
注意到颜色通道里面有两个绿色的,来探索一下!
4x4 像素阵列看起来是:
B,Gb-Gr,R
2x2 阵列的两个绿色像素位于不同的光点,因此实际强度实际上并不相等。为了进行这种区分,红色行中的绿色感光点是 Gr,蓝色行中的绿色感光点是 Gb。
下面是我找到了一个解释:
每个RGB都是linera RGB,也就是没有经过gamma corrected过的,通常是8bit~14bit之间。
Gr Gb的color filter基本上是一样的,但因为在制程上是两个步骤分别完成的,所以两者对颜色的特性(CMF, color matching function)难免会有点不同,但这可以很容易用black level compensation或是color collection来修正。
接下来第一步是black level compensation,也就是将暗电流造成的影响除去,通常是减去一个值,R Gr Gb B各自不同。
接下来是bad pixel compensation,将一些坏点的值用周边的同色的值来取代,bad pixel的位置可以至动判断,或是用查表的。
接下来就要作color interpolation,对于每个Bayer pixel所缺少的另外两个颜色,用周边的点来补回。
R
B
G
举个很简单的方法,R点的G值由上下左右四个G(两个Gr, 两个Gb)加起来除以四,B值则由斜角的四个B加起来除以四。
B点所缺的RG也是相同的做法。Gr的R值由左右两个R来平均,B值由上下两个B来平均。
Gb的做法也是和Gr一样。这样每个pixel就有完整的RGB值了,这是很简单的3*3的做法,这样出来的结果在平坦的地方没什么可挑剔的,
上面是算法,其实我更加想知道是为什么这样设计?
R、G、B 分别表示透红色、透绿色和透蓝色的滤镜阵列单元。由于人的视觉对绿色最为敏感,所以在 Bayer CFA 中G分量是 R和B 的二倍,在每个像素点上只能获取一种色彩分量的信息,然后根据该色彩分量的信息通过插值算法得到全色彩图像。
绿色对于人类视觉系统非常敏感,因此在图像中使用两个独立的绿色通道可以提供更多的色彩信息和细节,特别是在绿色部分的表现上更为精细。
三种视锥细胞(蓝,绿,红),对应光谱的敏感度分布如下:
就是这个
在可见光光谱上,任意选一点,画一条垂直的线。一定会和这三条曲线有交点。
如图,在黄色处画条线,相交的是98%的红色细胞曲线和83%的绿色细胞曲线。视觉系统就是靠这不同的比率来分析颜色的。
我好像没有说明白,无所谓了~
这里总结一下:
RGB格式:采用这种编码方法,每种颜色都可用三个变量来表示红、绿、蓝的强度。每一个像素有三原色R红色、G绿色、B蓝色组成。
YUV格式:其中“Y”表示明亮度(Luminance或luma),即灰阶值;“U”和“V”表示色度(Chrominance或Chroma),描述影像色彩及饱和度,用于指定像素的颜色。
RAW格式:是sensor将光信号转换为电信号时的电平高低的原始记录,单纯地将没有进行任何处理的图像数据,即摄像元件直接得到的电信号进行数字化处理而得到的。
合起来就是输出了bayer 信息,这就是OVM说的RAW RGB的意思。还是需要后面的处理,得到 RGB的颜色信息.
我应该是没有理解错。也是都这样的专用了,压力都给到了后级。ISP加油!
这个是数字输出,就是改良过的
这个是传统的
你看这个接口就有了
极细同轴线,这个是上面说的,不过图文无关,可以看看
可以走4米长的线,可以捅到哪里?我不知道
这个数据的增长趋势,也和咱们文章没有关系
这个是不同类型的接口,当然咱们是一个也用不上
这个市面上的接口其实都来自于官方的设计
就这样
线序,模拟地
电阻是应该是阻抗控制
这也就回答了,其实市面上的接口都是官方的设计:
就是这样
其实内部没有灯,还是要有LED的输出,大哥的板子出镜了
他的产品现在有这些功能,至于这个数字ISP开发,我不知道能不能写文章,待我问问。
另外 ISP 输入的是 byer图像,进行简单处理过后再进行到 RGB 图像的插值,降噪等.
还有就是现在这套系统的延迟为24ms
美图一张
这套系统我也可以分析,但是要征求本人同意。
https://www.ovt.com/next-generation-cmos-chip-on-tip-endoscopy-interface-antlinx-white-paper/
https://blog.csdn.net/wwws1994/article/details/126910855