好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
分享到:
标签:

CMOS sensor拍摄的场景可能时时在变化,每次计算AWB得到的Gain会不一致,有时候甚至相差很多,如果实时调整AWB gain的话会让视频画面的色彩有跳跃感,看起来不舒服。为此,通常会做两点,一是AWB gain计算有一个稳定区间,每次计算所得AWB gain后会映射到某个色温C,假设原先的C和当前计算所得的C差异不大(小于某个阈值)的话,就不做调整,也就是说当画面色温变化不大的时候白平衡不变;二是两次色温差异超过阈值,需要调整的话,要采用渐进式慢慢的调整,例如R_gain原本为1.0,调整为2.0,那么每个Frame gain增加0.01,需要100个Frame才能调整到位,以30fps为例,就需要3.3秒时间,这样画面会渐渐的转变过去,看起来比较柔和舒适,没有闪烁的感觉。

 

3.2 Color Correction Matrix

色彩校正矩阵CCM 通常在RGB domain 进行,并且在AWB之后。AWB把白色校正了,相应的其他色彩也跟着有明显的变化,可以说色彩基本正确了,只是饱和度有点低,色彩略有点偏差。CCM就是要保持白色(灰色)不变,把其他色彩校正到非常精准的地步。先看一下CCM计算公式。

 

 

这里CCM之前的像素为[r,g,b]’,CCM之后的像素为[R,G,B]’。 CCM的实现比较简单,就是一个简单的矩阵运算,它的困难在于如何确定矩阵的系数。我们先分析一下这个矩阵中系数的物理意义。C00表示r分量对R的影响,C01和C02分别表示g和b分量对R的影响,假设CMOS的模型完全吻合人眼模型,那么显然C00=1,C01=C02=0,实际上CMOS image sensor中的滤镜不能完全过滤掉那些不希望看到的光波,如图Figure 3.1.2。CCM前后的效果比对大致如下。


Figure 3.2.1 CCM前后比对


在Figure3.1.2中,X轴表示光波的波长,三条不同color的曲线分别表示某CMOS sensor中三种感光单元对不同光波频率的敏感程度。 CMOS sensor感光单元所接受的光波频率普遍太宽,三种色彩出现混叠,导致图像的色彩不够鲜艳。为了消除这种混叠,CCM中的系数就具有一种普遍的规律,系数C00,C11,C22都大于1,其他的系数则都小于0或者近似0。G对R的影响要大于B对R的影响,所以C01的绝对值要比C02的绝对值大。同样,C21的绝对值要比C20的绝对值大。


CCM不能改变白色。白色意味着r=g=b时,计算结果R=G=B=r=g=b,由此我们可以得出:

 

以上公式是CCM必须坚持的原则,这样原本9个独立的系数可以缩减为6个,我们把C00,C11和C22用其他的系数表示。根据经验我们再设定其他6个系数的取值范围,例如可以约束C01范围是[-3,0],C02范围是[-1,0]。要得出这6个系数的确切数值,过程有点复杂,首先来看Imatest对色彩的评价方法。


拍在灯箱中各种色温下的24色卡图片,从图片中取出24个色块所代表的颜色,转换到Lab色彩空间,和标准的24色卡颜色进行比较。如下图右

 

Figure 3.2.2 Imatest 色彩比较


在Figure3.2.2右侧的图片中,小方块代表24个标准色在Lab空间的坐标,小圆点表示实测出来的24种颜色在Lab空间的坐标,二者之间的连线表示误差大小。通常认为误差越小越好,圆点往外侧偏移表示色彩太鲜艳,往内侧偏移表示色彩太淡,其他方向表示色彩偏差。

 

 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
研发人员来自东芝,德淮半导体的CMOS实力如何?

从苹果第一代iPhone诞生代表的智能手机时代开始,CMOS图像传感器一直处于庞大且快速增长的市场需求和不断提升的用户体验驱动技术升级的变革中。

智能手机的新发展趋势,半导体厂商背后默默数钱
智能手机的新发展趋势,半导体厂商背后默默数钱

经过十年的发展,智能手机已经成为了半导体元器件的主要购买商。根据市场研究机构Gartner的数据显示,2017年全球半导体的采购支出高达4197亿美元,当中三星电子和苹果持续位列前两名。

77GHz/CMOS制程化为毫米波雷达带来百亿市场,中小厂商怎么抢食?

作为汽车ADAS系统的重要传感器,77GHz毫米波雷达未来将替代24GHz成为主流,并且朝着79GHz发展。

新型存储和磁电子技术拥有广阔的前景

据科技部网站消息,阻变存储器、相变存储器、磁存储器、高灵敏度磁传感器和隔离耦合器件等是具有良好应用前景的新型存储和磁电子技术,在移动通信、个人电脑、数码相机、电子标签等领域具有广阔的市场价值。

一文读懂 什么是CMOS和CMOS电池?
一文读懂 什么是CMOS和CMOS电池?

CMOS电池没电会损坏芯片组吗?

更多资讯
华映连续七季获利,车用面板到底有多赚钱?

华映(2475)上季挑战连七季获利,去年有望终止连九年亏损,近期抢攻原厂车用面板也传出捷报,打进BMW、丰田、本田、马自达、长安、上汽等欧、中、日汽车大厂供应链,今年车用面板出货挑战年增14%以上, 相关产品毛利优于消费性产品,为华映业绩加分。

博通CEO的薪资到底有多恐怖?

博通公司CEO陈福阳(Hock Tan)去年共获得1亿320万美元薪酬,创下个人历史新高纪录。

MOSFET/MCU/PCB材料统统缺货,2018年半导体行业将迎来涨价潮?

2018年科技业的明星产品尚未出炉,但可确定的是,对半导体上游材料硅晶圆、动态随机存取内存(DRAM)、被动组件、 金属氧化物半导体场效晶体管(MOSFET)、微控制器(MCU)和PCB上游材料等材料和零组件来说,今年仍是缺货、价扬的好年。

比特币价格春节期间疯涨,日月光/长电等封测企业为何大赚一笔?

春节期间,比特币价格出现一波回升,目前约在10,000至12,000美元之间整理,价格已明显回稳,以目前全球比特币市况,比特币芯片供应链相关厂商今年在比特币挖矿机的接单,应该可望延续去年热潮。

半导体硅晶圆景气乐观,环球晶/台胜科等业内厂商去年赚了多少?

半导体硅晶圆产业目前正处于超级景气循环的荣景,包括环球晶、台胜科、合晶、汉磊 等今年业绩都有望持续受惠于市场供不应求且报价持续上涨的情况。

Moore8直播课堂
电路方案