好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
标签:

CMOS sensor拍摄的场景可能时时在变化,每次计算AWB得到的Gain会不一致,有时候甚至相差很多,如果实时调整AWB gain的话会让视频画面的色彩有跳跃感,看起来不舒服。为此,通常会做两点,一是AWB gain计算有一个稳定区间,每次计算所得AWB gain后会映射到某个色温C,假设原先的C和当前计算所得的C差异不大(小于某个阈值)的话,就不做调整,也就是说当画面色温变化不大的时候白平衡不变;二是两次色温差异超过阈值,需要调整的话,要采用渐进式慢慢的调整,例如R_gain原本为1.0,调整为2.0,那么每个Frame gain增加0.01,需要100个Frame才能调整到位,以30fps为例,就需要3.3秒时间,这样画面会渐渐的转变过去,看起来比较柔和舒适,没有闪烁的感觉。

 

3.2 Color Correction Matrix

色彩校正矩阵CCM 通常在RGB domain 进行,并且在AWB之后。AWB把白色校正了,相应的其他色彩也跟着有明显的变化,可以说色彩基本正确了,只是饱和度有点低,色彩略有点偏差。CCM就是要保持白色(灰色)不变,把其他色彩校正到非常精准的地步。先看一下CCM计算公式。

 

 

这里CCM之前的像素为[r,g,b]’,CCM之后的像素为[R,G,B]’。 CCM的实现比较简单,就是一个简单的矩阵运算,它的困难在于如何确定矩阵的系数。我们先分析一下这个矩阵中系数的物理意义。C00表示r分量对R的影响,C01和C02分别表示g和b分量对R的影响,假设CMOS的模型完全吻合人眼模型,那么显然C00=1,C01=C02=0,实际上CMOS image sensor中的滤镜不能完全过滤掉那些不希望看到的光波,如图Figure 3.1.2。CCM前后的效果比对大致如下。


Figure 3.2.1 CCM前后比对


在Figure3.1.2中,X轴表示光波的波长,三条不同color的曲线分别表示某CMOS sensor中三种感光单元对不同光波频率的敏感程度。 CMOS sensor感光单元所接受的光波频率普遍太宽,三种色彩出现混叠,导致图像的色彩不够鲜艳。为了消除这种混叠,CCM中的系数就具有一种普遍的规律,系数C00,C11,C22都大于1,其他的系数则都小于0或者近似0。G对R的影响要大于B对R的影响,所以C01的绝对值要比C02的绝对值大。同样,C21的绝对值要比C20的绝对值大。


CCM不能改变白色。白色意味着r=g=b时,计算结果R=G=B=r=g=b,由此我们可以得出:

 

以上公式是CCM必须坚持的原则,这样原本9个独立的系数可以缩减为6个,我们把C00,C11和C22用其他的系数表示。根据经验我们再设定其他6个系数的取值范围,例如可以约束C01范围是[-3,0],C02范围是[-1,0]。要得出这6个系数的确切数值,过程有点复杂,首先来看Imatest对色彩的评价方法。


拍在灯箱中各种色温下的24色卡图片,从图片中取出24个色块所代表的颜色,转换到Lab色彩空间,和标准的24色卡颜色进行比较。如下图右

 

Figure 3.2.2 Imatest 色彩比较


在Figure3.2.2右侧的图片中,小方块代表24个标准色在Lab空间的坐标,小圆点表示实测出来的24种颜色在Lab空间的坐标,二者之间的连线表示误差大小。通常认为误差越小越好,圆点往外侧偏移表示色彩太鲜艳,往内侧偏移表示色彩太淡,其他方向表示色彩偏差。

 

 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
手机厂商赶紧抢人,大学生研发5G芯片可“通全球”

当下移动通信将迎来5G时代,然而不同国家划分的5G通信频段各不相同,这就可能出现出国后5G手机失灵现象。如何解决这一问题?

克服模拟CMOS危害静电及过压,这样就可以了

对于模拟CMOS(互补对称金属氧化物半导体)而言,两大主要危害是静电和过压(信号电压超过电源电压)。了解这两大危害,用户便可以有效应对。

这种古法制作CPU,我和我的小伙伴都惊呆了
这种古法制作CPU,我和我的小伙伴都惊呆了

从无到有(make something from scratch)一直是工程师的浪漫,例如自行调配出操作系统、自己写系统核心等(如 Linux)。然而在家从无到有打造出“一颗”CPU 就没听过了吧?

三星Galaxy S9国内发布会回顾:它就是黑科技综合体
三星Galaxy S9国内发布会回顾:它就是黑科技综合体

2018年3月6日三星在中国广州发布了今年的年度旗舰Galaxy S9/S9+,并邀请井柏然作为三星手机中国区品牌代言人,朱亚文为三星手机中国首席AI官,凸显其对这部旗舰手机的重视和信心。

一文看懂CMOS工艺流程
一文看懂CMOS工艺流程

选择合适的衬底,或者外延片,本流程是带外延的衬底;

更多资讯
八英寸vs十二英寸圆晶,合适的才是最好的
八英寸vs十二英寸圆晶,合适的才是最好的

受指纹识别、LED驱动、电源管理、MOSFET和MCU等芯片产品火热的影响,全球的八英寸晶圆厂从去年到现在都一直处于产能满载的状况,某些代工厂甚至表示将购买新的八英寸产线来满足客户的需求;但另一方面,有一些专家则鼓吹,八英寸产线的时代使命已经完成,厂商和开发者需要转向主流的十二英寸产线。

奇元裕办理半导体前沿技术论坛 探讨大尺寸硅片及3D传感和VCSEL工艺前沿技术

为促进前沿技术交流,奇元裕公司于3月14日上海浦东嘉里大酒店办理2018年半导体前沿技术论坛,与业界精英共同探讨半导体产业趋势、技术发展与市场机会,同时分享了大尺寸硅片及3D传感和VCSEL工艺前沿技术。

晶科蝉联出货王 隆基成为年度盈利王

近期,大部分上市公司都赶在4月30日前公布了2017财年的经营情况。在这些企业中,有些企业战绩辉煌,有些企业则经营惨淡。

OLED想要主导高端电视,这一点不突破妄想
OLED想要主导高端电视,这一点不突破妄想

2017年,对于OLED电视是非常成功的一年,尤其是中国市场,OLED电视销量实现100%倍增的绝佳表现,这也给予市场渠道极大的信心。

智能手机柔性屏突破,OLED打造可弯折手机

Ahn及其团队接下来希望制造一块智能手表或智能手机大小的柔性屏。

Moore8直播课堂
电路方案