好色之图 | CMOS成像如何模拟人眼色彩感受?ISP算法有大招

2017-01-09 16:27:34 来源:EEFOCUS
分享到:
标签:

前言:

这篇文章是我从事ISP研究数年来的一些经验总结,没有用到深奥的理论知识,有的只是根据实际状况来处理的一些常规方法,以及曾经犯过的错误总结。我想把ISP function的原理用简单浅显的语言描述出来,希望对初学者有所帮助。这里的ISP主要是指从CMOS  sensor输出的bayer pattern,到转换成通用的YUV或者YCbCr格式的过程,通常用于USB摄像头/监控摄像头/手机/平板等芯片设计中。

 

3. 图像色彩

尽管CMOS sensor模拟了人眼的三原色(RGB)视觉感受,见figure 1.1.1,但是CMOS的工艺特性和人眼还是有很大的差异,因此需要ISP来辅助,让其色彩尽量接近人的感受。与色彩相关最重要的function是自动白平衡AWB和色彩校正矩阵Color Correction Matrix,其他有饱和度Saturation,色相Hue,另外手机中一般拍照APP有各种色彩效果也会介绍。


这里需要介绍一个图形分析工具:Imatest,这个tool可以帮助分析图像的亮度,色彩,信噪比,锐利度,畸变等很多性能。

 

这个工具提供了评价图像质量的客观标准,有理论有数据,非常好用。不过也不能完全迷信工具,还是要以人眼看到的情况为准,没有完美的数学模型可精确模拟人的视觉感受。有时候测出来的数据很好看,实际效果却很难看。例如,评测数据是基于整幅图像而计算出来的平均值,而人眼往往会特别关注一些个别点,只要某一点不好就会无法接受,而不管其他所有地方都不错。


3.1 自动白平衡AWB

首先介绍一下色温的概念。色温源自普朗克定义的黑体受热辐射,单位是K(kelvin),用于定义光源颜色,热黑体辐射体与光源的色彩相匹配时的开尔文温度就是光源的色温。来看一下色温的大致范围:

 

Figure3.1.1 色温曲线


这是一份在XYZ色彩空间的光源色温曲线,可以看到色彩偏红时色温较低,色彩偏蓝则色温较高。一般烛光在1800K,阴天为5000K,晴天为6500K,蓝色天空在10000K以上。在实际场景中,光源的颜色未必刚好在这条色温曲线上,很可能有一些偏差。

 

 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

作者简介
侯莅聪
侯莅聪

东南大学研究生毕业,在瑞晟微电子工作12年。是数字IC设计资深经理和数字图像处理专家,拥有多篇专利。参与研发的USB camera产品,获得市场占有率第一的位置。

继续阅读
索尼未来最有重量筹码,3D传感器到底有多牛叉

据麦姆斯咨询报道,索尼的新一代ToF传感器是专为智能手机和增强现实(AR)设备设计的,并计划于明年量产。新传感器最终还会进入与环境交互的无人机、自动驾驶汽车、游戏机、工业设备、工厂和仓库机器人、许多其它机器人等领域。

加特兰发布国内首款77GHz CMOS雷达芯片

国家级半导体产业年度盛会IC China 2017今日隆重开幕,超过5万行业专业人士聚集上海浦东。就在活动当天上午,一个汽车主动安全系统核心芯片的本土设计企业闪亮登场,在这一完全由欧美厂商垄断的领域打响了本土化第一枪。

从倒车摄像头到全景摄像头到行车记录仪到电子眼,聊聊汽车和摄像头的那点事
从倒车摄像头到全景摄像头到行车记录仪到电子眼,聊聊汽车和摄像头的那点事

随着汽车驾驶性能的不断提高,摄像头在汽车中的作用愈加明显。摄像头的加入让驾驶人员更加自如的操作自己的爱车,减少了由于汽车物理架构存在的盲区。不过摄像头也是驾驶违章的克星,因为交警正是利用摄像头监管交通。今天,让我们聊聊汽车和摄像头的不解之缘。

莱迪思携手Helion推出开箱即用的ISP解决方案
莱迪思携手Helion推出开箱即用的ISP解决方案

2017年10月2日 — 莱迪思半导体公司(NASDAQ: LSCC),客制化智能互连解决方案市场的领先供应商,今日与HelionVision®共同宣布推出最新的解决方案,加速嵌入式视觉应用设计和原型开发。

总被搞混的TTL与CMOS电平藏着这些学问
总被搞混的TTL与CMOS电平藏着这些学问

TTL集成电路的主要型式为晶体管-晶体管逻辑门(transistor-transistor logic gate),TTL大部分都采用5V电源.

更多资讯
Octinion草莓采摘机器人问世,断了农业工作者的收入?

一家比利时工程公司试图将我们收获农产品的方式数字化,一次一颗草莓。基于Heverlee的创业公司Octinion最近开发了一种配备机器视觉和3D打印“手”的草莓采摘机器人。其先进的计算机视觉系统可以确定何时草莓成熟并准备采摘,所有这一切都与人类工作者相似。

从历史到各地政策,人工智能现在到底有多火?

这个时代什么技术关键词最火?人工智能(AI)可谓当仁不让。上到国家政策,下到茶余饭后,人工智能就这么来了。

论中国新一代半导体产业重镇与投资的关系
论中国新一代半导体产业重镇与投资的关系

中国半导体产业产值从2015年开始呈现爆发性成长,2018年产值预估将突破6200亿元人民币,政府的政策支持成为主要驱动力。

半导体Top 10最新排名出炉,三星真的干掉了英特尔
半导体Top 10最新排名出炉,三星真的干掉了英特尔

据IC Insights统计预报,2017年世界半导体产业前十大企业排名出台。三星半导体以656亿美元挤掉英特尔,终于登上世界第一的位置,英特尔以610亿美元屈居第二位,SK海力士跃升两位居第三位,美光跃升两位居第四位,博通后退一位居第五位。

硬见生态,共享智慧,2017硬见开发者论坛在深圳举行

如今,互联网+与人工智能浪潮正在席卷一切,软件与硬件的界限日渐模糊,跨界、融合成为当前各个产业共同的旋律,多个产业的生态链互相碰撞,爆发出众多创新创业机遇,同时也为跨界者带来诸多挑战。

微话题

工作 or 考研?

又到一年招聘季,考研or工作让你实现了怎样的逆袭?……
Moore8直播课堂