好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
分享到:
标签:

前言:

这篇文章是我从事ISP研究数年来的一些经验总结,没有用到深奥的理论知识,有的只是根据实际状况来处理的一些常规方法,以及曾经犯过的错误总结。我想把ISP function的原理用简单浅显的语言描述出来,希望对初学者有所帮助。这里的ISP主要是指从CMOS  sensor输出的bayer pattern,到转换成通用的YUV或者YCbCr格式的过程,通常用于USB摄像头/监控摄像头/手机/平板等芯片设计中。

 

3. 图像色彩

尽管CMOS sensor模拟了人眼的三原色(RGB)视觉感受,见figure 1.1.1,但是CMOS的工艺特性和人眼还是有很大的差异,因此需要ISP来辅助,让其色彩尽量接近人的感受。与色彩相关最重要的function是自动白平衡AWB和色彩校正矩阵Color Correction Matrix,其他有饱和度Saturation,色相Hue,另外手机中一般拍照APP有各种色彩效果也会介绍。


这里需要介绍一个图形分析工具:Imatest,这个tool可以帮助分析图像的亮度,色彩,信噪比,锐利度,畸变等很多性能。

 

这个工具提供了评价图像质量的客观标准,有理论有数据,非常好用。不过也不能完全迷信工具,还是要以人眼看到的情况为准,没有完美的数学模型可精确模拟人的视觉感受。有时候测出来的数据很好看,实际效果却很难看。例如,评测数据是基于整幅图像而计算出来的平均值,而人眼往往会特别关注一些个别点,只要某一点不好就会无法接受,而不管其他所有地方都不错。


3.1 自动白平衡AWB

首先介绍一下色温的概念。色温源自普朗克定义的黑体受热辐射,单位是K(kelvin),用于定义光源颜色,热黑体辐射体与光源的色彩相匹配时的开尔文温度就是光源的色温。来看一下色温的大致范围:

 

Figure3.1.1 色温曲线


这是一份在XYZ色彩空间的光源色温曲线,可以看到色彩偏红时色温较低,色彩偏蓝则色温较高。一般烛光在1800K,阴天为5000K,晴天为6500K,蓝色天空在10000K以上。在实际场景中,光源的颜色未必刚好在这条色温曲线上,很可能有一些偏差。

 

STM32智能硬件DIY送好礼
STM32L单片机低功耗模式唤醒时间测量
是德科技创新测量工具,开启毫米波测量新视野
不可错过!意法半导体STM32全国研讨会报名
 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
CMOS影像传感器这么赚钱?索尼扩产是为哪个领域

据海外媒体报道,Sony 计划于 2018 年 3 月底前将使用于智能手机、数字相机等用途的 CMOS 影像传感器月产能扩增至 10 万片(以 12 吋晶圆计算)左右水准,大幅增加 14%。目前 Sony 月产能约 8.8 万片。

学界大师传道解惑,高校师生知识盛宴

由示范性微电子学院建设专家组、示范性微电子学院产学融合发展联盟指导,IEEE电路与系统学会(CASS)、IEEE固态电路学会(SSCS)、新思科技(Synopsys)和北京中关村集成电路设计园发展有限责任公司(IC Park)共同举办为期十天的第一季“先进CMOS技术暑期大师班(Advanced CMOS Technology Summe

索尼一篇论文引起影像传感器专家兴趣,3层堆叠式CMOS传感器元件到底是啥?

Sony在日前的ISSCC上发表了一款看来像是真的3层堆叠式CMOS传感器元件的细节,这马上就引起了我们在TechInsights的影像传感器专家们的兴趣...

Teledyne e2v高阶CMOS图像感应解决方案完美结合TowerJazz的高端工艺技术

全球领先的高性能图像解决方案供应商Teledyne e2v以及全球专业代工领导者TowerJazz, 成功推出Teledyne e2v的标准和定制CMOS图像传感器携新一代全局快门像素技术的解决方案。

东芝推出具有业界领先低噪音水平的CMOS运算放大器
东芝推出具有业界领先低噪音水平的CMOS运算放大器

东京--东芝公司(TOKYO:6502)旗下存储与电子元器件解决方案公司今日宣布推出实现业界领先[1]低噪音水平的新运算放大器“TC75S67TU”。样品发货即日启动,量产计划于8月启动。

更多资讯
除了超级快充和无膜电池,还有什么黑科技锂电池技术
除了超级快充和无膜电池,还有什么黑科技锂电池技术

为了开发出性能更优异的产品,科研人员对各种材料进行了研究,研究成果也令人惊叹不止。本文对最新的锂电池研究成果进行了总结。

人工智能机器人汹涌而至,人类只有一样不会被取代
人工智能机器人汹涌而至,人类只有一样不会被取代

人类对人工智能恐惧的根源并不在于工作被抢走,而是作为人的身份和思想被取代。当人类在享受人工智能带来的越来越多的便利时,应当对温水煮青蛙效应保持警惕。在机器换人这场大变革中,人类唯一不可被机器换掉的是思想。

贾跃亭背后的“真爱粉”,乐视这个梦想窟窿那么好补?

当下,乐视系公司正深陷资金链紧张危机之中。而乐视创始人贾跃亭辞去其在乐视网一切职务,去往美国也已有二十多天未归。这些日子里,外界关于乐视系的传闻和质疑声四起。

LG砸巨资搞OLED,最后买单的为啥是苹果

据外媒报道,今年5月底曾有消息传出,LG Display计划投资4万亿韩元(约合35亿美元)在韩国本土建设一家全新的智能手机OLED屏幕生产工厂。

一场AI末世威胁论辩论赛,苹果谷歌等巨头依旧加紧布局

《西部世界》描绘的人与机器作为两个独立物种的相像,困惑与杀戮,是未来样貌吗?AI究竟将如何影响人类尚无定论,但巨头科技公司的大佬们早已完成了在乐观和悲观两派之间的“站队”。

微话题

年初定的哪些“小目标”没有阵亡?

有偿征稿 | 2017年能耗过半,年初定的哪些“小目标”没有阵亡? ……
Moore8直播课堂
移动机器人的感官及其导航和定位技术

移动机器人的感官及其导航和定位技术

2017-07-27 13:30:00
机器人是一个由执行机构、驱动装置、感测装置和控制系统和复杂机械等组成的闭环装置。当前工业革命(工业4.0)面临的突出需求——感测装置(传感器),工业界希望把各种传感器引入工业生产中,利用它独有的数据采
【第七幕】万人FPGA大赛系列培训课程——状态机(序列检测+交通灯设计)

【第七幕】万人FPGA大赛系列培训课程——状态机(序列检测+交通灯设计)

2017-07-28 16:00:00
关键词:FPGA万人大赛(想想就心潮澎湃) 柒月,蝉声缭绕,数以万计FPGA工程师和爱好者摩拳擦掌,掀起一场FPGA的热浪。在这个夏天,一切都将改变! 让学生利用FPGA平台学习数字电路设计,
STM32快速开发笔记——控制器局域网络之CAN

STM32快速开发笔记——控制器局域网络之CAN

2017-07-30 21:00:00
以前,嵌入式MCU功能简单、种类较少,软件开发起来相对容易,而今天,MCU功能强大、种类繁多,软件中实现的功能也要比以前更多更复杂。该系列课程,针对基于ARM的STM32 MCU,将利用STM32cu
【第八幕】万人FPGA大赛系列培训课程——IP核例化及Reveal工具使用

【第八幕】万人FPGA大赛系列培训课程——IP核例化及Reveal工具使用

2017-07-31 16:00:00
关键词:FPGA万人大赛(想想就心潮澎湃)柒月,蝉声缭绕,数以万计FPGA工程师和爱好者摩拳擦掌,掀起一场FPGA的热浪。在这个夏天,一切都将改变!让学生利用FPGA平台学习数字电路设计,就像写代码看
恩智浦技术日直播——安全互联解决方案研讨会

恩智浦技术日直播——安全互联解决方案研讨会

2017-08-02 10:00:00
随处可见的NFC,越来越成熟的语音识别技术……越来越便利的革新技术给我们带来便利的生活的同时,也带来安全隐患。物联网的火爆发展,大大推动了无线通信、智能移动设备、大数据、处理器等领域的快速发展。万物互