Qualcomm发布专门面向物联网终端的视觉智能平台

2018-04-12 14:28:07 来源:EEFOCUS
标签:
Qualcomm Incorporated(NASDAQ: QCOM)今日通过其子公司Qualcomm Technologies, Inc.宣布推出Qualcomm®视觉智能平台(Qualcomm® Vision Intelligence Platform),其中搭载了公司首个采用先进的10纳米FinFET制程工艺打造、专门面向物联网(IoT)的系统级芯片(SoC)系列。QCS605和QCS603系统级芯片能够为终端侧的摄像头处理和机器学习提供强大的计算能力,同时具备出色的功效和热效率,面向广泛的物联网应用。这两款系统级芯片集成了Qualcomm Technologies迄今为止最先进的图像信号处理器(ISP)和Qualcomm®人工智能引擎AI Engine,以及包括基于ARM的先进多核CPU、向量处理器和GPU在内的异构计算架构。该视觉智能平台还包括Qualcomm Technologies的先进摄像头处理软件、机器学习与计算机视觉软件开发工具包(SDK),以及Qualcomm Technologies可靠的连接和安全技术。该平台可为工业级与消费级智能安防摄像头、运动摄像头、可穿戴摄像头、虚拟现实(VR)360度与180度摄像头、机器人和智能显示屏等领域带来令人兴奋的全新可能性。科达(KEDACOM)和理光THETA正计划开发基于Qualcomm视觉智能平台的产品。
 
Qualcomm Technologies, Inc.产品管理副总裁Joseph Bousaba表示:“通过帮助客户打造强大的终端侧智能、摄像头处理与安全特性,我们的目标是让物联网终端变得更加智能。人工智能已支持具备物体探测、追踪、分类和面部识别能力的摄像头,可自主避障的机器人,以及可学习并生成您最近一次探险活动视频摘要的运动摄像头,但这都还仅仅是个开始。Qualcomm视觉智能平台是我们多年来前沿研发的成果,汇集了摄像头、终端侧人工智能和异构计算领域的突破性进展。该平台是支持制造商和开发者打造全新智能物联网终端世界的优选平台。”
 
强大的Qualcomm人工智能引擎AI Engine
该视觉智能平台集成Qualcomm 人工智能引擎 AI Engine,其由多个集成的硬件和软件组件组成,以加速终端侧人工智能。Qualcomm人工智能引擎AI Engine包括了Qualcomm®骁龙™神经处理引擎(NPE)软件框架,其中包含采用TensorFlow、Caffe和Caffe2框架进行开发的分析、优化与调试工具,ONNX(Open Neural Network Exchange)交换格式,以及Android Neural Network API和Qualcomm® Hexagon™ Neural Network库。以上所有都旨在支持开发者和OEM厂商轻松将训练网络接入到此平台。通过Qualcomm人工智能引擎AI Engine和骁龙神经处理引擎软件框架,该视觉智能平台可为深度神经网络推理提供高达每秒2.1万亿次运算(TOPS)*的计算性能,与一些其它领先的可选解决方案相比提升超过两倍。
 
卓越的图像质量
该视觉智能平台可支持高达4K@60fps的视频,或是5.7K@30fps,以及更低分辨率的多个并发视频流。为了实现非凡的图像质量,该平台集成了Qualcomm Technologies迄今打造的最强大的摄像头处理器——支持双1600万像素传感器的双14位Qualcomm Spectra™ 270 ISP,其顶级ISP功能的演进在过去数代中一直居于DxOMark基准测试的领先位置。此外,该视觉智能平台包括物联网细分领域所必需的先进视觉处理功能,例如可防止高动态范围视频出现“叠影”效果的交错式HDR(staggered HDR)、先进的电子稳像、畸变校正、降噪、色差校正,以及硬件运动补偿时域滤波(MCTF)。 
 
异构计算架构和关键特性
该视觉智能平台QCS605芯片组的异构计算架构,集成八核Qualcomm® Kryo™ 360 CPU、Qualcomm® Adreno™ 615 GPU和Hexagon 685向量处理器。该视觉智能平台的集成式显示处理器可为一系列显示屏选项(包括高达WQHD分辨率的触摸屏)提供硬件加速合成、3D覆盖,以及包括OpenGL、OpenCL和Vulkan在内的主流图形API支持。该架构支持多种高级操作系统,旨在帮助开发者和制造商在其解决方案中轻松构建差异化特性,如VR 360度摄像头的端侧内容拼接,自主机器人导航与避障,以及运动摄像头的视频摘要。
 
该视觉智能平台支持具备MU-MIMO和双频并发特性的2x2 802.11ac Wi-Fi®、蓝牙(Bluetooth®)5.1、Qualcomm® 3D音频套件、Qualcomm Aqstic™音频技术和Qualcomm® aptX™音频。该平台还具备Qualcomm®噪音抑制与回音消除技术,以及先进的终端侧音频分析与处理特性,支持自然语言处理、音频语音识别和语音插播功能,打造可靠的语音界面,甚至在吵闹或嘈杂的环境,或当用户远离终端时也可实现。
 
该平台基于硬件的安全特性可通过下列功能支持可靠的物联网终端,包括硬件可信根的安全启动、可信执行环境、硬件加密引擎、存储安全、贯穿生命周期控制的调试安全、密钥分发和无线协议安全等。
 
生态系统和上市情况
制造商可依靠技术厂商生态系统,通过其提供的、作为该视觉智能平台补充的解决方案,加速开发并进一步实现产品差异化。上述技术厂商包括人工智能公司,如支持面部、图像和物体识别的商汤科技SenseTime,支持如运动和物体探测、分类与追踪等各种视觉任务的Pilot.ai,以及支持先进图像质量校准服务的MM Solutions等。
 
目前,Qualcomm® QCS605和QCS603正在出样,包括多个SKU以满足对技术和成本的不同需求。Qualcomm Technologies与领先的摄像头ODM厂商华晶科技合作提供的、基于QCS605的VR 360度摄像头参考设计现已面市,基于QCS603的工业级安防摄像头参考设计预计将于2018年下半年面市。
 
 
 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

继续阅读
大联大诠鼎集团推出基于Qualcomm产品的SIG MESH多协议物联网平台

2018年7月19日,致力于亚太地区市场的领先半导体元器件分销商---大联大控股宣布,其旗下诠鼎推出基于高通(Qualcomm)产品的SIG MESH多协议物联网平台。

Maxim宣布与Qualcomm展开合作,针对智能化车联网信息娱乐系统提供解决方案

Maxim宣布其专利组合精选产品与来自Qualcomm Incorporated子公司Qualcomm Technologies, Inc.的解决方案相结合。

高通人工智能引擎让终端人工智能运算能力加速

过去几年,终端人工智能正在兴起,越来越多的人工智能工作逐渐从云端转移到了终端,例如模式匹配、建模检测、分类、识别等。终端人工智能在保护隐私的安全性、性能和整体可靠性等方面更具优势,这也推动着人工智能向终端迁移。传统而言,很多对神经网络的训练和推理都是基于服务器或者在云端完成,事实上大多数厂家也是将对人工智能的研发集中在云端,目前这样的模式

威盛SOM-9X20核心板,搭载Qualcomm® 骁龙™ 820E的高性能AI开发板

2018年,“人工智能”无疑是最火热的关键词之一,各种产品方案落地开花,人工智能研发企业对于高性能核心处理器的要求越来越高。下一代的智能产品需要变得更有意识,更有联系,更聪明,更有互动性,才能抓住市场先机。

Qualcomm与百度DuerOS让无线蓝牙耳机“听懂”用户

7月4日,在北京举办的百度AI开发者大会上,百度正式发布DuerOS3.0。在同期举办的百度智能生活论坛上,百度携手Qualcomm,现场展示了双方联手打造的小度蓝牙+DuerOS3.0版本的蓝牙音频产品解决方案。

更多资讯
Intel这边儿刚上主流8核心,AMD就上了12核心?

从目前迹象看,Intel八代酷睿在为主流桌面市场首次带来6核心12线程之后,马上又会升级到8核心16线程,从而追上AMD Ryzen锐龙系列,不过AMD可不会坐以待毙。

如何快速理解和掌握一款新的MCU?

任何一款MCU,其基本原理和功能都是大同小异,所不同的只是其外围功能模块的配置及数量、指令系统等。对于指令系统,虽然形式上看似千差万别,但实际上只是符号的不同,其所代表的含义、所要完成的功能和寻址方式基本上是类似的。

华为“达芬奇计划”剑指AI,要重创英伟达?
华为“达芬奇计划”剑指AI,要重创英伟达?

近日,据外媒The Information报道:华为内部制定了Project Da Vinci,达芬奇计划。在这个巧合的时间点,与中兴的热闹和喧嚣相比,华为则显得低调了许多。

高通收购恩质浦困难重重,中国芯该如何走?

高通在手机领域按照整机售价收取一定比例专利费的商业模式让其饱受质疑,当高通试图通过收购荷兰恩智浦,把目光瞄向自动驾驶和物联网领域,并于近日明确宣布收取专利费时,同样引发外界恐慌,高通将如何收费?是否会制约产业发展?在5G时代,我国芯片产业怎么走?

国产内存迈进一大步,合肥兆鑫投产8Gb LPDDR4

三星昨天宣布量产新一代的8Gb LPDDR5内存颗粒,加上此前的16Gb GDDR6、16Gb DDR5内存颗粒,三星在新一代内存标准上已经完成布局,目前正在加速量产中。

Moore8直播课堂