Qualcomm发布专门面向物联网终端的视觉智能平台

2018-04-12 14:28:07 来源:EEFOCUS
标签:
Qualcomm Incorporated(NASDAQ: QCOM)今日通过其子公司Qualcomm Technologies, Inc.宣布推出Qualcomm®视觉智能平台(Qualcomm® Vision Intelligence Platform),其中搭载了公司首个采用先进的10纳米FinFET制程工艺打造、专门面向物联网(IoT)的系统级芯片(SoC)系列。QCS605和QCS603系统级芯片能够为终端侧的摄像头处理和机器学习提供强大的计算能力,同时具备出色的功效和热效率,面向广泛的物联网应用。这两款系统级芯片集成了Qualcomm Technologies迄今为止最先进的图像信号处理器(ISP)和Qualcomm®人工智能引擎AI Engine,以及包括基于ARM的先进多核CPU、向量处理器和GPU在内的异构计算架构。该视觉智能平台还包括Qualcomm Technologies的先进摄像头处理软件、机器学习与计算机视觉软件开发工具包(SDK),以及Qualcomm Technologies可靠的连接和安全技术。该平台可为工业级与消费级智能安防摄像头、运动摄像头、可穿戴摄像头、虚拟现实(VR)360度与180度摄像头、机器人和智能显示屏等领域带来令人兴奋的全新可能性。科达(KEDACOM)和理光THETA正计划开发基于Qualcomm视觉智能平台的产品。
 
Qualcomm Technologies, Inc.产品管理副总裁Joseph Bousaba表示:“通过帮助客户打造强大的终端侧智能、摄像头处理与安全特性,我们的目标是让物联网终端变得更加智能。人工智能已支持具备物体探测、追踪、分类和面部识别能力的摄像头,可自主避障的机器人,以及可学习并生成您最近一次探险活动视频摘要的运动摄像头,但这都还仅仅是个开始。Qualcomm视觉智能平台是我们多年来前沿研发的成果,汇集了摄像头、终端侧人工智能和异构计算领域的突破性进展。该平台是支持制造商和开发者打造全新智能物联网终端世界的优选平台。”
 
强大的Qualcomm人工智能引擎AI Engine
该视觉智能平台集成Qualcomm 人工智能引擎 AI Engine,其由多个集成的硬件和软件组件组成,以加速终端侧人工智能。Qualcomm人工智能引擎AI Engine包括了Qualcomm®骁龙™神经处理引擎(NPE)软件框架,其中包含采用TensorFlow、Caffe和Caffe2框架进行开发的分析、优化与调试工具,ONNX(Open Neural Network Exchange)交换格式,以及Android Neural Network API和Qualcomm® Hexagon™ Neural Network库。以上所有都旨在支持开发者和OEM厂商轻松将训练网络接入到此平台。通过Qualcomm人工智能引擎AI Engine和骁龙神经处理引擎软件框架,该视觉智能平台可为深度神经网络推理提供高达每秒2.1万亿次运算(TOPS)*的计算性能,与一些其它领先的可选解决方案相比提升超过两倍。
 
卓越的图像质量
该视觉智能平台可支持高达4K@60fps的视频,或是5.7K@30fps,以及更低分辨率的多个并发视频流。为了实现非凡的图像质量,该平台集成了Qualcomm Technologies迄今打造的最强大的摄像头处理器——支持双1600万像素传感器的双14位Qualcomm Spectra™ 270 ISP,其顶级ISP功能的演进在过去数代中一直居于DxOMark基准测试的领先位置。此外,该视觉智能平台包括物联网细分领域所必需的先进视觉处理功能,例如可防止高动态范围视频出现“叠影”效果的交错式HDR(staggered HDR)、先进的电子稳像、畸变校正、降噪、色差校正,以及硬件运动补偿时域滤波(MCTF)。 
 
异构计算架构和关键特性
该视觉智能平台QCS605芯片组的异构计算架构,集成八核Qualcomm® Kryo™ 360 CPU、Qualcomm® Adreno™ 615 GPU和Hexagon 685向量处理器。该视觉智能平台的集成式显示处理器可为一系列显示屏选项(包括高达WQHD分辨率的触摸屏)提供硬件加速合成、3D覆盖,以及包括OpenGL、OpenCL和Vulkan在内的主流图形API支持。该架构支持多种高级操作系统,旨在帮助开发者和制造商在其解决方案中轻松构建差异化特性,如VR 360度摄像头的端侧内容拼接,自主机器人导航与避障,以及运动摄像头的视频摘要。
 
该视觉智能平台支持具备MU-MIMO和双频并发特性的2x2 802.11ac Wi-Fi®、蓝牙(Bluetooth®)5.1、Qualcomm® 3D音频套件、Qualcomm Aqstic™音频技术和Qualcomm® aptX™音频。该平台还具备Qualcomm®噪音抑制与回音消除技术,以及先进的终端侧音频分析与处理特性,支持自然语言处理、音频语音识别和语音插播功能,打造可靠的语音界面,甚至在吵闹或嘈杂的环境,或当用户远离终端时也可实现。
 
该平台基于硬件的安全特性可通过下列功能支持可靠的物联网终端,包括硬件可信根的安全启动、可信执行环境、硬件加密引擎、存储安全、贯穿生命周期控制的调试安全、密钥分发和无线协议安全等。
 
生态系统和上市情况
制造商可依靠技术厂商生态系统,通过其提供的、作为该视觉智能平台补充的解决方案,加速开发并进一步实现产品差异化。上述技术厂商包括人工智能公司,如支持面部、图像和物体识别的商汤科技SenseTime,支持如运动和物体探测、分类与追踪等各种视觉任务的Pilot.ai,以及支持先进图像质量校准服务的MM Solutions等。
 
目前,Qualcomm® QCS605和QCS603正在出样,包括多个SKU以满足对技术和成本的不同需求。Qualcomm Technologies与领先的摄像头ODM厂商华晶科技合作提供的、基于QCS605的VR 360度摄像头参考设计现已面市,基于QCS603的工业级安防摄像头参考设计预计将于2018年下半年面市。
 
 
 
关注与非网微信 ( ee-focus )
限量版产业观察、行业动态、技术大餐每日推荐
享受快时代的精品慢阅读
 

 

继续阅读
集成Qualcomm多核AIE,小米6X支持出色AI应用体验

昨日,武汉大学珞珈山下,小米6X与大家正式见面。搭载骁龙660移动平台,集成Qualcomm多核人工智能引擎(AIE)的小米6X,在用户最关注的美颜拍照、面部解锁等方面带来了不俗表现。

Qualcomm参加商汤人工智能峰会:携手生态系统伙伴,加速终端侧人工智能实现

今天,creAIte创以智用——2018商汤人工智能峰会在北京举行,Qualcomm作为商汤科技重要的全球战略合作伙伴,也是此次峰会的唯一芯片侧合作伙伴参加了活动,与广泛的生态系统合作伙伴共同分享了在终端侧人工智能领域的突破与探索。

Qualcomm多核人工智能引擎支持,努比亚Z18mini面市

一款手机,利用人工智能算法,可以让美颜更自然;同样是这款手机,它可深度学习用户行为,实时动态调整,使手机更省电,使用更顺滑。是的,它是努比亚Z18mini。

从标准到商用,5G如何跨过5G新空口这道坎儿?

实现5G新空口eMBB服务商用,对整个行业来说是一个巨大的进步,但对于5G技术的巨大潜力而言,这不过是冰山一角。

Qualcomm携手网易展示超高清模式《荒野行动》 打造完美沉浸手游体验

本周,备受业界关注的游戏开发者大会(GDC 2018)在美国旧金山拉开序幕,近几年不断发展的手游行业更是在大会期间获得参会者的广泛关注。

更多资讯
意法半导体发布2018年第一季度财报

横跨多重电子应用领域的全球领先的半导体供应商意法半导体(STMicroelectronics,简称ST;纽约证券交易所代码:STM)公布了截至2018年3月31日的第一季度财报。

今年上半年服务器品牌出货排名出炉,Inspur跃升至第三、Lenovo退居第五

根据集邦咨询半导体研究中心(DRAMeXchange)指出,尽管今年第一季全球服务器市场因淡季导致出货量略为衰退,但包含CPU、Server DRAM在内的相关零部件需求仍维持基本备货力道。

人工智能芯片创新企业榜发布 恩智浦位列全球前三

根据信息科技及通讯领域领先的市场调研咨询公司Compass Intelligence(CompassIntel.com)近日发布的调研结果,恩智浦半导体(纳斯达克代码:NXPI)被评为全球前三位人工智能(AI)芯片企业之一。

变送器用于高达5A交流的真有效值测量

Knick Elektronische Messgeraete是全球公认的高质量信号、传感器、电流和电压测量设备的制造

免费开放实验室筹办难?世强只为给中国企业提供更好的创新服务

在社会高速发展,企业追逐快速获利的今天,开办一个免费的开放实验室,供所有企业进行产品测试,在他人看来很可能是疯狂。因为不仅要资深投入大量的测试设备资源,而且还要备有专业的技术人员。

Moore8直播课堂
电路方案