好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
分享到:
标签:

CMOS sensor拍摄的场景可能时时在变化,每次计算AWB得到的Gain会不一致,有时候甚至相差很多,如果实时调整AWB gain的话会让视频画面的色彩有跳跃感,看起来不舒服。为此,通常会做两点,一是AWB gain计算有一个稳定区间,每次计算所得AWB gain后会映射到某个色温C,假设原先的C和当前计算所得的C差异不大(小于某个阈值)的话,就不做调整,也就是说当画面色温变化不大的时候白平衡不变;二是两次色温差异超过阈值,需要调整的话,要采用渐进式慢慢的调整,例如R_gain原本为1.0,调整为2.0,那么每个Frame gain增加0.01,需要100个Frame才能调整到位,以30fps为例,就需要3.3秒时间,这样画面会渐渐的转变过去,看起来比较柔和舒适,没有闪烁的感觉。

 

3.2 Color Correction Matrix

色彩校正矩阵CCM 通常在RGB domain 进行,并且在AWB之后。AWB把白色校正了,相应的其他色彩也跟着有明显的变化,可以说色彩基本正确了,只是饱和度有点低,色彩略有点偏差。CCM就是要保持白色(灰色)不变,把其他色彩校正到非常精准的地步。先看一下CCM计算公式。

 

 

这里CCM之前的像素为[r,g,b]’,CCM之后的像素为[R,G,B]’。 CCM的实现比较简单,就是一个简单的矩阵运算,它的困难在于如何确定矩阵的系数。我们先分析一下这个矩阵中系数的物理意义。C00表示r分量对R的影响,C01和C02分别表示g和b分量对R的影响,假设CMOS的模型完全吻合人眼模型,那么显然C00=1,C01=C02=0,实际上CMOS image sensor中的滤镜不能完全过滤掉那些不希望看到的光波,如图Figure 3.1.2。CCM前后的效果比对大致如下。


Figure 3.2.1 CCM前后比对


在Figure3.1.2中,X轴表示光波的波长,三条不同color的曲线分别表示某CMOS sensor中三种感光单元对不同光波频率的敏感程度。 CMOS sensor感光单元所接受的光波频率普遍太宽,三种色彩出现混叠,导致图像的色彩不够鲜艳。为了消除这种混叠,CCM中的系数就具有一种普遍的规律,系数C00,C11,C22都大于1,其他的系数则都小于0或者近似0。G对R的影响要大于B对R的影响,所以C01的绝对值要比C02的绝对值大。同样,C21的绝对值要比C20的绝对值大。


CCM不能改变白色。白色意味着r=g=b时,计算结果R=G=B=r=g=b,由此我们可以得出:

 

以上公式是CCM必须坚持的原则,这样原本9个独立的系数可以缩减为6个,我们把C00,C11和C22用其他的系数表示。根据经验我们再设定其他6个系数的取值范围,例如可以约束C01范围是[-3,0],C02范围是[-1,0]。要得出这6个系数的确切数值,过程有点复杂,首先来看Imatest对色彩的评价方法。


拍在灯箱中各种色温下的24色卡图片,从图片中取出24个色块所代表的颜色,转换到Lab色彩空间,和标准的24色卡颜色进行比较。如下图右

 

Figure 3.2.2 Imatest 色彩比较


在Figure3.2.2右侧的图片中,小方块代表24个标准色在Lab空间的坐标,小圆点表示实测出来的24种颜色在Lab空间的坐标,二者之间的连线表示误差大小。通常认为误差越小越好,圆点往外侧偏移表示色彩太鲜艳,往内侧偏移表示色彩太淡,其他方向表示色彩偏差。

 

STM32 USB应用基本协议介绍
e络盟限时特惠,新客户首单85折优惠,再享免运费
意法半导体STM32 USB资源一览
ST MCU Finder电脑版选型工具下载
 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
撬动ADAS的CMOS图像传感器,你到底了解多少

近年来,汽车安全的重要性越来越重要了,行车辅助安全驾驶(ADAS)在汽车领域的应用也越来越广泛。智能安全驾驶、自动巡航控制、汽车雷达波应用、全景立体图像环视系统等等汽车电子分支领域对汽车自动驾驶起到举足轻重的作用。

CMOS微缩时代告终?超越硅晶的新技术哪来寻

传统的硅基半导体技术形成了摩尔定律的基础,并在数十年来持续落实于产业界,如今它正日益成熟,业界也越来越迫切需要一种超越硅晶的新技术蓝图...

全球最细小的全局快门CMOS传感器,E2V与你率先体验全接触

利用最新生产工艺以及像素设计技术,e2v正式发布Emerald系列新CMOS图像传感器,有着全世界范围内最小的像素尺寸(2.8µm )、低噪、全局快门、 满阱容量7ke,典型时间噪声4e(低噪模式下2e)。这一创新型革命技术,可使客户获得更高分辨率,但同时降低光学镜头尺寸,可降低整体系统成本。

IMX135到IMX398,索尼IMX CMOS产品大盘点

如果简单梳理一下索尼IMX CMOS的发展轨迹我们会发现:在2013至2014年上半年手机行业使用的索尼IMX系列CMOS还是以IMX135和IMX179为主,前者的代表机型有LG G3、三星Note 3等等,而IMX179的代表机型则有Nexus 5和华为P7(前置)等。

SOI与FinFET技术之争无意义?前提是:什么工艺适合中国国情

1999年,胡正明教授在美国加州大学领导一个由美国国防部高级研究计划局(DARPA)出资赞助的研究小组,这个小组当时的研究目标是CMOS技术如何拓展到25nm及以下领域,实现这种目的有两种途径:一是立体型结构的FinFET晶体管,另外一种是基于SOI的超薄绝缘层上硅体技术(UTB-SOI,也就是我们常说的FD-SOI晶体管技术)。

更多资讯
最小光学集成电路诞生,研究人员怎么做到的?

哥伦比亚大学研究人员研制出迄今最小光学集成电路,其能在很宽的波长范围内表现出高性能水平,有望彻底改变光通信和光信号处理等关键技术。

供应商逼债、项目停工,让乐视陷入资金困境的到底是啥业务?

顶着巨大资金压力的乐视终于迎来“救命稻草”——融创中国投资款。贾跃亭承诺在资金进入后对战略进行调整,其中最关键的是追求正向现金流的快速增长,以及放缓乐视一些大的项目。

思源电气股东名单惊现一重量级机构,武岳峰到底有何打算?

根据思源电气股份有限公司(简称“思源电气”)4月22日发布的2017年一季度季报显示,股东名单中新进了一位重量级的机构——持股3.97%的上海承芯企业管理合伙企业(有限合伙)。

富士康给高价也不顶用?东芝芯片业务竞购战背后还有新财团

日本东芝旗下的闪存芯片业务,引发了全球科技行业和资本公司的垂涎,各方展开了一轮竞购大战。而据外媒最新消息,美国知名私募股权投资公司KKR将和日本政府支持的基金合作,收购东芝闪存业务。

索尼等日本企业营收不景气,但这些方面有不可替代优势

尽管在消费电子市场急剧萎缩,日企在某些技术领域仍占据较高位置,优势突出。

微话题

你与哪款手机更投缘

手机缘分测试……
Moore8直播课堂
2017年STM32中国峰会在线直播

2017年STM32中国峰会在线直播

2017-04-25 09:30:00
2016年在深圳举行的首届STM32中国峰会取得了巨大的成功, 并极大的加强了STM32品牌在中国的影响力,巩固了意法半导体在全球半导体技术市场的领先地位,同时还得到嵌入式应用生态系统合作伙伴的大
EMC专家武晔卿系列5—EMC器件的选型(结构布局与材料篇)

EMC专家武晔卿系列5—EMC器件的选型(结构布局与材料篇)

2017-04-25 20:00:00
一个好的电子产品,除了产品自身的功能以外,电磁兼容设计的技术水平,对产品的质量和技术性能指标起到非常关键的作用。很多人从事电子线路设计的时候,都是从认识电子元器件开始,但对电磁兼容设计却无从下手。
如何应对射频嵌入式系统多域测试的挑战?

如何应对射频嵌入式系统多域测试的挑战?

2017-04-27 10:00:00
从物联网、智能终端到工业4.0,射频嵌入式系统正快速扩展到各个应用领域。但由于新技术的引入,传统测试测量仪器难以发现并定位干扰源。1,如何准确进行传感器小信号测试?2,怎样把控示波器触发灵敏度对测
智能车老司机chiusir解读电磁导航原理与k66核心算法

智能车老司机chiusir解读电磁导航原理与k66核心算法

2017-04-16 20:00:00
提及智能车竞赛,所有电子相关专业的大学生或多或少都参加此类比赛,也承载了数万学子青春奋斗的美好,无数次通宵达旦只为在赛场上那千分之一秒的激情。但对于很多初入比赛的鲜肉来说,无尽的资料手册、新的赛制
EMC专家武晔卿系列6-EMC与安规设计、热设计、可靠性、工艺的技术冲突

EMC专家武晔卿系列6-EMC与安规设计、热设计、可靠性、工艺的技术冲突

2017-05-02 20:00:00
一个好的电子产品,除了产品自身的功能以外,电磁兼容设计的技术水平,对产品的质量和技术性能指标起到非常关键的作用。很多人从事电子线路设计的时候,都是从认识电子元器件开始,但对电磁兼容设计却无从下手。