好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
分享到:
标签:

白色和灰色物体,在图像数据中体现为R,G,B三个分量相等,YCbCr domain中Cb和Cr都为128. 我们通常在Bayer pattern domain或者RGB domain中来做AWB算法,那么就是要让白色和灰色物体的R=G=B。我们拍摄到的图片中,这三者是不相等的,我们可以统计出整幅图中平均的两个比例值G/R和G/B,很容易想到,如果对图像中所有的R分量乘以G/R,所有的B分量乘以G/B,那么图像就会变成白色或者灰色。我们可以用G/R和G/B来构建二维空间,观察不同光源条件下这两个数值的分布情况,如下图。

 

Figure 3.1.4 光源在[G/R,G/B]空间的分布图
 

接下来我们需要在这个二维空间中描述一个闭合空间,这个闭合空间代表了可能是白色(灰色)物体的G/R和G/B的取值范围。在上图中,是用一个非常简单的方法,用几条直线勾勒出一个多边形作为闭合空间。这个闭合空间必须包含大部分光源的情况。也就是说,假设有个白色(灰色)物体,不论在何种常见光源下,统计出来的两个数值都会落在这个闭合空间内。这个闭合空间不能太大也不能太小,太大可能有很多其他颜色被误认为白色,太小则容易找不到白色而不稳定。那么如果确定了闭合空间的形状,在拍摄实际场景时,如果场景中有白色/灰色物体,那么就可以统计出落在闭合空间范围的像素点数,以及这个闭合空间内这些像素的平均G/R和G/B,分别记为R_gain和B_gain,对整幅图像的R分量乘以R_gain,B分量乘以B_gain,就算达到白平衡了,同时可以利用这两个Gain获得近似的色温,这里的逻辑关系并不严密,很可能有些物体并非白色而被误认为白色,所以AWB算法总是存在一定的误判概率。如果图像中没有找到落在闭合空间范围内的像素(或者太少不足以用作参考),那么通常会保持原先的R_gain和B_gain,或者采用灰度世界算法。灰度世界算法是假设Sensor 拍到的画面中所有像素的平均色彩应该是灰的,即R=G=B,于是把整幅图像的所有像素(而不仅仅是闭合空间内)都统计进去,计算出一个全局平均的R_gain和B_gain,由于拍摄内容的不确定性,这两个gain可能偏离真实情况很远(例如拍摄鲜艳的红色),因此需要做最大值和最小值限制,避免出现极端异常情况。相比于前面找白色物体的方法,灰度世界算法相对比较稳定,总是能计算出大概的gain值,缺点是很可能不正确,受大色块影响比较严重。在实际应用中,通常会结合这两种方法的优点,加上额外的限制条件,衍生出更加稳定和有效的AWB算法。


在统计上,为了避免大色块对AWB的影响,通常会对图像进行网格状分割,对每个矩形框内的数据独立统计,如果某个网格的数据偏离闭合空间很远的话,就认为是大色块而不参与AWB gain计算。


AWB的精准性是可以通过Imatest 测试的,要求在各种色温下,拍摄24色卡的最下面6个方块不能有颜色,这个通常很容易达到。

 

Figure 3.1.5 Imatest 测试color

 

 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
直击ISSCC 2018:影像传感器技术最新进展

在2018年度ISSCC亮相的影像传感器技术新进展超越了以前着重在「选美」的影像撷取,添加了更多情境信息...

研发人员来自东芝,德淮半导体的CMOS实力如何?

从苹果第一代iPhone诞生代表的智能手机时代开始,CMOS图像传感器一直处于庞大且快速增长的市场需求和不断提升的用户体验驱动技术升级的变革中。

智能手机的新发展趋势,半导体厂商背后默默数钱
智能手机的新发展趋势,半导体厂商背后默默数钱

经过十年的发展,智能手机已经成为了半导体元器件的主要购买商。根据市场研究机构Gartner的数据显示,2017年全球半导体的采购支出高达4197亿美元,当中三星电子和苹果持续位列前两名。

77GHz/CMOS制程化为毫米波雷达带来百亿市场,中小厂商怎么抢食?

作为汽车ADAS系统的重要传感器,77GHz毫米波雷达未来将替代24GHz成为主流,并且朝着79GHz发展。

新型存储和磁电子技术拥有广阔的前景

据科技部网站消息,阻变存储器、相变存储器、磁存储器、高灵敏度磁传感器和隔离耦合器件等是具有良好应用前景的新型存储和磁电子技术,在移动通信、个人电脑、数码相机、电子标签等领域具有广阔的市场价值。

更多资讯
与非网硅谷科技游第3天,从计算机历史博物馆到谷歌
与非网硅谷科技游第3天,从计算机历史博物馆到谷歌

与非网硅谷科技游团队今天参观的是计算机历史博物馆(Computer history Museum)及谷歌总部。

中国首条超级公路,到底智能在哪里?

浙江省要建设全国首条超级高速公路的说法于近日得到了官方证实。记者了解到,将建设的超级高速公路是已经分段批复的杭甬复线高速公路——杭绍甬高速公路,该公路将具备智能、快速、绿色、安全的四大要素。

2017年全球半导体厂商研发支出年增4%,英特尔131亿美元居首
2017年全球半导体厂商研发支出年增4%,英特尔131亿美元居首

市场研究公司IC Insights日前发布数据,2017年全球半导体研发支出总额为589亿美元,较2016年增长4%;2017年全球研发投入TOP10半导体公司的研发投入高达359.21亿美元,较2016年的340亿美元提升了6%。

五线城市的互联网印象,这些科技产品深入民心

我家所在地是位于江南的一个五线小城市——Y市,除了我长期在外漂之外,父母和两个弟弟都在Y市工作生活。

比尔盖茨的难题,有钱人的烦恼你想象不到

在有钱这件事上,没人比盖茨更有经验。他在上学的时候跟老师打赌,自己30岁的时候会成为百万富翁,而事实上,31岁时他已是亿万富翁。

Moore8直播课堂