好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
分享到:
标签:

前言:

这篇文章是我从事ISP研究数年来的一些经验总结,没有用到深奥的理论知识,有的只是根据实际状况来处理的一些常规方法,以及曾经犯过的错误总结。我想把ISP function的原理用简单浅显的语言描述出来,希望对初学者有所帮助。这里的ISP主要是指从CMOS  sensor输出的bayer pattern,到转换成通用的YUV或者YCbCr格式的过程,通常用于USB摄像头/监控摄像头/手机/平板等芯片设计中。

 

3. 图像色彩

尽管CMOS sensor模拟了人眼的三原色(RGB)视觉感受,见figure 1.1.1,但是CMOS的工艺特性和人眼还是有很大的差异,因此需要ISP来辅助,让其色彩尽量接近人的感受。与色彩相关最重要的function是自动白平衡AWB和色彩校正矩阵Color Correction Matrix,其他有饱和度Saturation,色相Hue,另外手机中一般拍照APP有各种色彩效果也会介绍。


这里需要介绍一个图形分析工具:Imatest,这个tool可以帮助分析图像的亮度,色彩,信噪比,锐利度,畸变等很多性能。

 

这个工具提供了评价图像质量的客观标准,有理论有数据,非常好用。不过也不能完全迷信工具,还是要以人眼看到的情况为准,没有完美的数学模型可精确模拟人的视觉感受。有时候测出来的数据很好看,实际效果却很难看。例如,评测数据是基于整幅图像而计算出来的平均值,而人眼往往会特别关注一些个别点,只要某一点不好就会无法接受,而不管其他所有地方都不错。


3.1 自动白平衡AWB

首先介绍一下色温的概念。色温源自普朗克定义的黑体受热辐射,单位是K(kelvin),用于定义光源颜色,热黑体辐射体与光源的色彩相匹配时的开尔文温度就是光源的色温。来看一下色温的大致范围:

 

Figure3.1.1 色温曲线


这是一份在XYZ色彩空间的光源色温曲线,可以看到色彩偏红时色温较低,色彩偏蓝则色温较高。一般烛光在1800K,阴天为5000K,晴天为6500K,蓝色天空在10000K以上。在实际场景中,光源的颜色未必刚好在这条色温曲线上,很可能有一些偏差。

 

手慢无!20W USB PD电源管理方案曝光
STM32微控制器HID与音频冲突问题解析
汽车充电新方案,不看你就OUT了!
下载MATLAB实用白皮书,囊括无线设计工作流程和性能
 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
中国芯势力︱冲击高端CMOS市场被索尼/OV拦路,格科微只能玩低端货?

本期的《中国芯势力》,与非网小编就带大伙一起好好认识一下这位CMOS图像传感器领域的小红人。

面对汽车图像处理各种挑战,ARM新一代ISP处理器能应对自如?

自动驾驶再创新进展。 为强化车用图像处理效能,以尽早实现自动驾驶愿景,安谋国际(ARM)宣布推出新一代影像讯号处理器(ISP)--ARM Mali-C71,因应汽车图像处理所面临的挑战,包括在极端条件下对影像进行快速的处理和分析,除可加速自驾车发展时程,也有望为汽车产业带来全新标准。

撬动ADAS的CMOS图像传感器,你到底了解多少

近年来,汽车安全的重要性越来越重要了,行车辅助安全驾驶(ADAS)在汽车领域的应用也越来越广泛。智能安全驾驶、自动巡航控制、汽车雷达波应用、全景立体图像环视系统等等汽车电子分支领域对汽车自动驾驶起到举足轻重的作用。

CMOS微缩时代告终?超越硅晶的新技术哪来寻

传统的硅基半导体技术形成了摩尔定律的基础,并在数十年来持续落实于产业界,如今它正日益成熟,业界也越来越迫切需要一种超越硅晶的新技术蓝图...

全球最细小的全局快门CMOS传感器,E2V与你率先体验全接触

利用最新生产工艺以及像素设计技术,e2v正式发布Emerald系列新CMOS图像传感器,有着全世界范围内最小的像素尺寸(2.8µm )、低噪、全局快门、 满阱容量7ke,典型时间噪声4e(低噪模式下2e)。这一创新型革命技术,可使客户获得更高分辨率,但同时降低光学镜头尺寸,可降低整体系统成本。

更多资讯
谁说高端都被国际巨头垄断,咱有望拿下异构计算?

全球异构系统架构(HSA)联盟中国区域委员会主席、中国异构计算标准工作组主席张小东25日在厦门表示,人工智能产业链的形成和大规模的应用可令产品的性价比迅速提高,促进“中国时代”的来临,巨头垄断高端芯片的国际格局也有望被打破。

各地政府红利加持,深圳LED“一哥”地位不保?
各地政府红利加持,深圳LED“一哥”地位不保?

近年来,各地政府大力扶持LED产业发展,以各式优惠政策吸引LED厂家入驻,而深圳LED显示屏企业则因生产成本不断攀升而纷纷搬离。

被列为“十三五”材料领域重大专项,石墨烯的机会来了?

近期,中华人民共和国科学技术部发布《“十三五”材料领域科技创新专项规划》,石墨烯被“十三五”列为材料领域重大专项。

华裔科学家纷纷回国,美国科技回受到多少影响?

“美国科学在衰退吗?”这个问题随着2011年一批在美国工作的华裔科学家的回国而越来越受到关注。有些人好奇,这是否意味着美国科学在衰退,中国的科技发展即将超过美国。

给LGD/三星供货的OLED厂与京东方走到一起,准备搞出啥事情?

全球OLED材料大厂出光兴产近日宣布,已和中国最大液晶面板厂京东方(BOE)达成基本共识,将于OLED事业进行策略合作、以研发出高性能OLED面板产品。

微话题

首届“华为手机开放日”启动

你是如何看待余承东反思的? ……
Moore8直播课堂
【工具篇】备战电赛:探秘Filter solution软件——滤波器好基友

【工具篇】备战电赛:探秘Filter solution软件——滤波器好基友

2017-05-26 20:00:00
本期直播,主讲备战电赛工具篇之探秘Filter solution软件 主讲内容:硬件滤波器设计的方法越来越趋于智能化,现在早已不是查表一步一步求解参数来设计滤波器的时代了,通过软件辅助设计滤波器
【第十二期】STM32快速开发笔记——直接存储器存取控制器之DMA

【第十二期】STM32快速开发笔记——直接存储器存取控制器之DMA

2017-05-27 20:30:00
以前,嵌入式MCU功能简单、种类较少,软件开发起来相对容易,而今天,MCU功能强大、种类繁多,软件中实现的功能也要比以前更多更复杂。该系列课程,针对基于ARM的STM32 MCU,将利用STM32cu
【技能篇】留学小鲜肉教你数据手册正确的打开方式

【技能篇】留学小鲜肉教你数据手册正确的打开方式

2017-06-01 20:00:00
电赛准备阶段重要一环——数据手册。想要了解一个芯片最核心有效的工作方式,唯有熟读其官方给出的数据手册。很多小伙伴在阅读英文版数据手册时常常遇到一些无法理解的语言或词汇,怎么办?百度、有道?但有时翻
【工具篇】PCB深坑不断!老铁带你电赛三步走之第1步

【工具篇】PCB深坑不断!老铁带你电赛三步走之第1步

2017-06-02 20:00:00
PCB设计称得上电赛中最重要的一环。不少同学设计之初没有精益求精导致项目进展缓慢,延误了比赛进度。相信众多网友在PCB设计中都遇到过各种坑,今天具有电赛丰富经验的大神考诉你PCB、原理图设计时必须
【工具篇】PCB深坑不断!老铁带你电赛三步走之第2步

【工具篇】PCB深坑不断!老铁带你电赛三步走之第2步

2017-06-04 20:00:00
PCB设计称得上电赛中最重要的一环。不少同学设计之初没有精益求精导致项目进展缓慢,延误了比赛进度。相信众多网友在PCB设计中都遇到过各种坑,今天具有电赛丰富经验的大神考诉你PCB、原理图设计时必须