加入星计划,您可以享受以下权益:

  • 创作内容快速变现
  • 行业影响力扩散
  • 作品版权保护
  • 300W+ 专业用户
  • 1.5W+ 优质创作者
  • 5000+ 长期合作伙伴
立即加入
  • 正文
  • 推荐器件
  • 相关推荐
  • 电子产业图谱
申请入驻 产业图谱

干货 | AI摄像头和语音识别解决方案

2022/03/01
1366
阅读需 6 分钟
加入交流群
扫码加入
获取工程师必备礼包
参与热点资讯讨论

近年来,智能医疗在全球的发展热度不断提升。随着社会进步,大众对亚健康问题逐渐重视,以及人口老龄化问题不断加剧,人们对于提升医疗技术和健康水平的需求也更加急切。但在实践中却存在医疗资源分配、药物研制周期以及医务人员培养成本等挑战,对于医疗进步的现实需求极大地刺激了AI技术,从而推动了医疗产业变革升级的浪潮。

智能医疗的具体应用包括洞察风险、医学研究、医学影像与诊断、生活方式管理与监督、药物挖掘、虚拟助理和可穿戴设备等,而智能诊疗就是将AI技术用于辅助诊疗,让计算机“学习”医疗知识,模拟医生的思维和诊断推理,从而给出可靠的诊断和治疗方案。虽然更高层级的诊断还只是在概念阶段,但市场潜力巨大。

一旦更加智能的系统问世,人们或许能以更低成本拥有自己的智能健康顾问。之前已有公司开发出情绪识别技术,通过网络摄像头来捕捉、记录人们的表情和声音,并分析判断出人的情绪。情绪识别可以通过高级图像处理或音频数据处理来“读取”人类脸上的表情。

这里的关键设备就是摄像头和语音识别,从而创建结构化数据,再基于云计算和大数据分析,建立更全面的病患数据储备系统。但医学是一个前沿学科,会随时遇到新的问题和疑难杂症,而相关数据的积累需要时间,结构化数据较少,使得算法模型难以快速优化。

结构化数据需要大量的信息搜集,但信息量大,就意味着芯片解码和分析所消耗的算力更大。之前大部分企业都是将视频传上云端进行解耦分析,完成之后再传输回前端,这就导致以后传输带宽和视频解码能力会成为云服务端计算的性能瓶颈,这也是在实际应用场景中往前端和局域端布局的原因。

基于对前端视频技术分析能力要求越来越高,以及集成方面的考虑,瑞萨推出了AI摄像头和语音识别解决方案。

该方案可以始终保持在线,可通过语音触发,快速将机器从待机模式中激活,以执行目标物识别、面部识别和其他基于视觉的任务,这些均是安防摄像头和其他系统中的关键功能。例如,当用户定义的语音提示驱动激活和系统操作时,基于视觉的AI 识别会跟踪操作人员的行为,并在检测到可疑行为时控制操作或发出警告。

本解决方案结合了瑞萨电子RZ/V2M视觉AI微处理器单元(MPU)和Syntiant Co. NDP120低功耗、多模态、多功能的神经决策处理器™(NDP),以便提供高级的语音和图像处理功能。

系统框图

系统优势

1、这种多模态架构更易于为基于视觉AI的系统打造非接触式用户体验;

2、将专用的节能芯片用于语音识别,可在加速语音识别的同时降低待机功耗;

3、推动系统开发,后续利于开发独立于视觉AI功能的软件

通过AI技术能够改善就诊服务,简化就诊流程,可以帮助医院工作人员更高效地处理相关业务,也可以将临床医生的工作时间解放出来进行科研。这些都离不开对人群活动规律的监控、检测和分析,因此系统保持时刻在线、保持强大的AI算力和低功耗很重要。

瑞萨的AI专用硬件IP DRP-AI配置了DRP和AI-MAC,结合了高速AI推理和低功耗,实现了1TOPS/W级的功耗性能。此外,图像信号处理器(ISP)非常强大,可独立于环境生成稳定的图像,从而实现高AI识别精度。凭借这些特性,RZ/V2M实现了低功耗,这对嵌入式设备来说是一个挑战,使散热测量变得更加容易。由于不再需要散热器和冷却风扇,因此可以小型化设备并降低BOM成本。因此,它是各种嵌入式市场中视觉AI应用的理想选择。此外,RZ/V2M还具有丰富的高速通信接口,如USB 3.1、PCI-Express和千兆以太网等,以及许多CPU外设功能,因此它还可以用于各种应用。

另外,瑞萨提供解决方案配套的降压稳压器(集成FET)型号包括ISL80015、ISL8002和ISL8026;线性稳压器LDO)型号包括ISL9021A、ISL80505以及ISL80102。

本解决方案同时也适用于

监控安防

办公室自动化

工业自动化

机器人

医疗保健

未来,谁能够快速开发出真正解决问题并能经受住市场考验的产品,才能在行业竞争中占据有利地位。瑞萨电子将加大研发力度与服务水平,提供更符合市场需求的产品和方案,推动社会的进步与发展。

推荐器件

更多器件
器件型号 数量 器件厂商 器件描述 数据手册 ECAD模型 风险等级 参考价格 更多信息
SN74LVC1G08DCKRG4 1 Texas Instruments Single 2-input, 1.65-V to 5.5-V AND gate 5-SC70 -40 to 125

ECAD模型

下载ECAD模型
$0.3 查看
NC7WZ04P6X 1 Rochester Electronics LLC LVC/LCX/Z SERIES, DUAL 1-INPUT INVERT GATE, PDSO6, 1.25 MM, ROHS COMPLIANT, EIAJ, SC-88, SC-70, 6 PIN
$0.33 查看
74HC14D,653 1 Nexperia 74HC14; 74HCT14 - Hex inverting Schmitt trigger@en-us SOIC 14-Pin

ECAD模型

下载ECAD模型
$0.25 查看
瑞萨电子

瑞萨电子

(RENESAS)于2003年4月1日—由日立制作所半导体部门和三菱电机半导体部门合并成立。RENESAS结合了日立与三菱在半导体领域方面的先进技术和丰富经验,是无线网络、汽车、消费与工业市场设计制造嵌入式半导体的全球领先供应商。创立日期2003年4月1日公司法人董事长&CEO伊藤达业务范围单片机逻辑模拟等的系统LSI、分立半导体元件、SRAM等的存储器开发、设计、制造、销售、服务的提供。集团成员44家公司(日本20家,日本以外24家)年度销售额2006财年(截止至2007年3月):9526亿日元(约83亿美元)从业人员:26000人(全世界20个国家、43家公司)瑞萨科技是世界十大半导体芯片供应商之一,在很多诸如移动通信、汽车电子和PC/AV 等领域获得了全球最高市场份额。瑞萨集成电路设计(北京)有限公司苏州分公司(RDB-SU)是瑞萨科技全资子公司,2004年1月成立以来,现已拥有150多名优秀工程师,承担着家电和汽车电子领域MCU的一系列设计工作,并在2006年4月开始开发面向中国市场的MCU。

(RENESAS)于2003年4月1日—由日立制作所半导体部门和三菱电机半导体部门合并成立。RENESAS结合了日立与三菱在半导体领域方面的先进技术和丰富经验,是无线网络、汽车、消费与工业市场设计制造嵌入式半导体的全球领先供应商。创立日期2003年4月1日公司法人董事长&CEO伊藤达业务范围单片机逻辑模拟等的系统LSI、分立半导体元件、SRAM等的存储器开发、设计、制造、销售、服务的提供。集团成员44家公司(日本20家,日本以外24家)年度销售额2006财年(截止至2007年3月):9526亿日元(约83亿美元)从业人员:26000人(全世界20个国家、43家公司)瑞萨科技是世界十大半导体芯片供应商之一,在很多诸如移动通信、汽车电子和PC/AV 等领域获得了全球最高市场份额。瑞萨集成电路设计(北京)有限公司苏州分公司(RDB-SU)是瑞萨科技全资子公司,2004年1月成立以来,现已拥有150多名优秀工程师,承担着家电和汽车电子领域MCU的一系列设计工作,并在2006年4月开始开发面向中国市场的MCU。收起

查看更多

相关推荐

电子产业图谱

瑞萨电子提供创新嵌入式设计和完整半导体解决方案。作为专业微控制器供应商、模拟功率器件和SoC产品领导者,瑞萨电子为汽车、工业、家居、办公自动化、信息通信等应用提供综合解决方案。详见瑞萨官网。我们将与您分享近期产品技术资讯和新闻动态。