加入星计划,您可以享受以下权益:

  • 创作内容快速变现
  • 行业影响力扩散
  • 作品版权保护
  • 300W+ 专业用户
  • 1.5W+ 优质创作者
  • 5000+ 长期合作伙伴
立即加入
  • 正文
    • 从身边人物到壮美自然,手机统统记录
    • 美妙影像“佳肴”从何而来?
    • AI重塑手机影像
    • 随手拍好之后,AI赋能的时代来了
  • 推荐器件
  • 相关推荐
  • 电子产业图谱
申请入驻 产业图谱

记录秘境生物和生活之美,原来都离不开AI对影像的推动

2021/05/28
176
阅读需 11 分钟
加入交流群
扫码加入
获取工程师必备礼包
参与热点资讯讨论

你有翻看手机相册的习惯吗? 

如果将成百上千的照片影片按时间顺序排列,你会明显发现手机拍照、录像的效果,都在随时间的推移而逐年提升。手机影像所记录下的画面,越发地能和你想记录下来的瞬间高度重合,帮助每个人都能轻松地回到过去,回到那个或感动、或意外、或再也不会重现的时刻。 

这不是魔法,而是一部部新机背后的影像技术提升带来的进化。从数十万像素时代到现在千万像素和多摄模组普及,在硬件飞跃配合AI的加持下,手机已经能够在相当多场合中担当合格相机的职责,甚至可以不夸张地说,手机就是人们口袋里的“专业相机”。 

从身边人物到壮美自然,手机统统记录

在5月21-22日举办的2021高通技术与合作峰会、以及专门面向骁龙粉丝的骁龙之夜活动中,高通携手生态伙伴,以科技博览会的形式展示了旗下移动通信人工智能、智能座舱、无线音频、物联网等领域的最新技术成果,而在与普通用户最接近的骁龙芯片区域,我看到了截至目前的手机和智能终端影像进化集大成展示。 

自照相技术发明近两百年时间以来,人像摄影一直是最经典也最热门的题材,如何拍好人物的情感、仪态以及最生动的形象,更是历代摄影师共同的追求。采用骁龙平台的手机,现在可以轻松抓拍景别分明、情感真实的人物照片,也可抓拍如舞蹈等高速运动中迸发活力的瞬间。

除了人像这样模仿人眼去捕捉画面,影像拍摄也在追求那些特殊但同样值得记录的内容。配合超广角镜头和骁龙平台手机的画面优化、畸变矫正等AI算法,手机可以拍到观感自然的超广画幅合照;在显微镜头和超分辨率技术共同作用下,微观世界发生的一切都能被手机记录。 

夜景可以说是影像技术的“王冠”,不同于白日的昏暗光线,让各类设备都难以获取真实画面,更让无数工程师绞尽脑汁。在大尺寸传感器和AI影像能力共同加持下,骁龙平台手机只用短短的数秒,就能在伸手难见五指的黑暗中记录下模特动人身影,成片处理恰当令人信服。 

此外,高通骁龙还联合《中国国家地理》,前往世界上最大的天坑群——广西乐业天坑群,用骁龙手机记录下了罕见的自然奇观。在骁龙之夜首映的《天坑》纪录片中,呈现了一系列影像技术互相融合影响后,手机可以拍摄到的顶级画面。从天坑底部密林的动植物生态,到地下溶洞黑暗中栖息的生灵,原本需要庞大专业影像设备才能精准捕捉的喀斯特地貌纪实,如今只需搭载骁龙888芯片的手机就能完成。

一年前《中国国家地理》摄影师用骁龙5G手机拍摄的《雪山萌猴》视频作品已经让摄影师惊讶于手机影像能力的进化,今年转为挑战更复杂更低亮度的极限场景,表现依然能令人满意。专业摄影师眼中的“不可能”,已经通过骁龙平台AI影像等技术提升变成现实,这也是高通持续用科技力量传递生命力量的又一次体现。 

美妙影像“佳肴”从何而来?

手机变得能记录下如此不凡的画面,来自多个不同的技术角度的提升: 

1、影像模组素质 影像是一门捕捉光线的学问,因此传统影像厂商一直致力于研究如何提升影像硬件性能,如今手机厂商和全行业也加入到队伍当中。高像素、大底、多P镜头、变焦结构、镀膜镜片......硬件进步使得能转化成电信号的光线变多了,也就更有可能拍到更真实好看的画面。 

2、平台处理性能 捕捉到了更多更真实的图像信息,下一步就是处理,这将影响到完成拍摄的速度与体验,也将决定最终的成像质量。移动平台无不在追求更强的处理性能,作为领军角色,全新骁龙888旗舰移动平台所搭载的Spectra 580 ISP具备每秒27亿像素处理速度,相较前代提升35%,无论是抓拍超高清照片还是高帧率影像都不在话下。 

骁龙888还有一个新特性,支持三ISP,即可以调用三个摄像头同时工作并且是HDR画面。于是,用户能够获得更加顺畅的焦段切换体验,也可以一次拍下不同画幅下的多个画面,方便进行后期处理或挑选。实现按下快门立刻出片后,用户有了更丰富的选择机会。 

3、计算摄影概念和AI影像技术 AI加持的计算摄影,重要程度不亚于上面两项相加之和。好比烹饪时准备好了原材料和厨具,最终将由厨师决定菜肴的色香味,而AI影像就是那个带来还原真实又超越真实可能性的“大厨”。 

还是以骁龙888为例,其搭载的第六代高通AI引擎包括了全新Hexagon 780处理器算力来到26 TOPS之巨。算力本身之外AI算法也进步颇多,Spectra 580采用的第十代3A算法首次由AI赋能,支持自动对焦、自动曝光以及自动白平衡,帮助实现极致的清晰度、动态范围和色彩,此外,结合最新的AI引擎,Spectra 580还能在最低0.1Lux的低光线环境下拍摄。按下快门,手机就能在AI驱动下完成拍摄所有工作。 

AI影像计算得当的同时,高通还联手合作伙伴,为设备准备了改善综合影像体验的“菜谱”。诸如虹软的多摄无缝平滑变焦、Tetras.AI的超清预览等。除此之外,全新的高通AI引擎Direct让开发者可以通过这个统一程序接口,直接访问CPU、GPU、DSP等底层硬件,为开发者带来新的功能,以便他们在骁龙平台上更快创造出创新的AI影像用例。 

通过骁龙888旗舰移动平台,手机厂商可以很轻松地获得不错的AI影像基础,再结合自身对影像的理解与投入,就能将实际表现拔高。于是,我们看到了小米11 Ultra的夜枭夜景、AI人像和魔法变天,OPPO Find X3的AI场景色彩功能和AI视频增强功能,vivo X60 Pro+的极暗光拍摄等突破。 

AI重塑手机影像

你可能意识到了,无论是记录生活中的点点滴滴、抓拍不想错过的瞬间,还是捕捉对于个人或是集体重要的画面,都已经离不开AI的助力。为什么在手机硬件“堆料”不再是新闻的今天,AI反而成了影像进化的重中之重? 

1、AI让影像更真实客观 如果询问最资深专业的摄影师什么是优秀的影像,答案中必定会出现“客观”“真实”等字眼,这也是影像技术诞生的最初目的。客观真实固然很重要,但在手机尺寸限制下影像硬件极限始终存在,因而难免会有无法捕捉和无法真实还原的画面细节,和专业设备存在差距。 

有了AI影像技术之后,可以在吸纳了最优秀影像作品精华的各项能力帮助下,让手机拍照录像轻松达成更原本的真实画面。如关系到人眼直观感受的色彩丰不丰富,细节清晰与否,以及镜头畸变,都会在种种AI影像技术帮助下得到改善,超越事实却又尊重真实。 

2、AI赋予创作更多可能 影像创作本来是有门槛的,需要系统掌握知识去平衡光线、场景、人物、画面等一系列关系才能拍出好照片好影片,专业性之高甚至还衍生了摄影师这个职业。而现在,伴随着手机等个人终端影像能力大提升,虽说摄影师职业不会被替代,但人人都可以拍出有专业美感的作品。 

AI 理所当然地在这一轮进步中起到重要作用:一是让手机可以高效率完成这些大数据量繁重工作,又快又准地做到拍得更好;二是准确自然地帮助每个人发挥想象力,高速运动中的一瞬间动态,光线照射在人物场景上呈现的情感,肉眼无法直观捕捉但令人称奇的景象,都能实现。 

于是一张张好看的、动人的照片,一段段留存真实、流露情感的影片,在小小的手持设备中得以记录下来。影像技术诞生后人类得以保存重要的瞬间,手机加入拍照功能让随手拍变为现实,如今正在普及的AI影像,又变革了人们记录生活传递信息的方式。 

随手拍好之后,AI赋能的时代来了

一度侧重于像素数量提升的手机影像竞争路线,早已告一段落,人们用手机记录的画面质量仍在不断提升。不用多说,追求有限机身下塞下更大影像模组的同时,AI影像也起到了推波助澜的作用。

高通骁龙这样的移动平台,和手机厂商、软硬件供应商一起,共同造就了这一结果。 

在AI技术推动下,影像和游戏、智能体验、日常使用等场景都获得了长足进步,智能手机的“智能”部分正在迈向新高度。AI应用在这之后又会走向何方?相信高通骁龙和整个行业将带来更多惊喜。

推荐器件

更多器件
器件型号 数量 器件厂商 器件描述 数据手册 ECAD模型 风险等级 参考价格 更多信息
TPA6211A1DGNR 1 Texas Instruments 3.1-W, mono, analog input Class-AB audio amplifier 8-HVSSOP -40 to 85

ECAD模型

下载ECAD模型
$1.38 查看
SA605DK/01,112 1 NXP Semiconductors SA605 - High performance low power mixer FM IF system SSOP2 20-Pin
$5.47 查看
TDA8547TS/N1,112 1 NXP Semiconductors TDA8547TS - 2 × 0.7 W BTL audio amplifier with output channel switching SSOP2 20-Pin

ECAD模型

下载ECAD模型
$2.51 查看
高通

高通

我们通常每天冒出数十亿、甚至可能是万亿次的不可能的念头。 这个频率就是世界各地的人们接触 Qualcomm 产品的频率。 这些产品可以是装入口袋的智能手机、咖啡桌上的平板电脑、手提箱里的无线调制解调器,甚至是您汽车上的导航系统,或者捆绑在您胸前的运动摄像头。

我们通常每天冒出数十亿、甚至可能是万亿次的不可能的念头。 这个频率就是世界各地的人们接触 Qualcomm 产品的频率。 这些产品可以是装入口袋的智能手机、咖啡桌上的平板电脑、手提箱里的无线调制解调器,甚至是您汽车上的导航系统,或者捆绑在您胸前的运动摄像头。收起

查看更多

相关推荐

电子产业图谱

公众号雷科技(ID:leitech),关注智能生活和前沿科技,让每个人都能享受科技的乐趣