加入星计划,您可以享受以下权益:

  • 创作内容快速变现
  • 行业影响力扩散
  • 作品版权保护
  • 300W+ 专业用户
  • 1.5W+ 优质创作者
  • 5000+ 长期合作伙伴
立即加入

如何克服边缘视觉的带宽限制?

2023/08/18
4701
服务支持:
技术交流群

完成交易后在“购买成功”页面扫码入群,即可与技术大咖们分享疑惑和经验、收获成长和认同、领取优惠和红包等。

虚拟商品不可退

当前内容为数字版权作品,购买后不支持退换且无法转移使用。

加入交流群
扫码加入
获取工程师必备礼包
参与热点资讯讨论
放大
实物图
  • 方案介绍
  • 相关文件
  • 推荐器件
  • 相关推荐
  • 电子产业图谱
申请入驻 产业图谱

解锁视觉新境界!虹科HK-Gidel FantoVision 40小型计算机,解决边缘视觉挑战。多相机连接,高帧率高像素,实时处理,紧凑高效,无需高带宽。压缩预处理,开启视觉新纪元!

在追求更高像素、帧率和空间分辨率的视觉行业,边缘视觉与图像采集面临巨大挑战。其中,1GigE相机输出已不足,传输问题有待解决。与此同时,图像传感器的快速发展也使接口带宽成为瓶颈。

虹科提出创新解决方案,通过图像采集卡实现压缩和预处理,满足高带宽、低延迟需求。开放的FPGA支持快速算法开发。虹科-Gidel FantoVision 40小型计算机是我们的杰作。这款产品连接多相机实现高效图像采集和处理,将打开视觉应用新篇章。

01 边缘视觉与图像采集挑战

边缘视觉是指将相机连接到边缘计算机或嵌入式计算机,并在云端进行处理或存储。此外,它也在一些机器控制方面发挥着重要作用。我们收到了客户的反馈,对于1GigE相机的输出已经不足以满足需求,因此只能将其连接到PLC。为了解决这一问题,我们需要相机的第二个1 GigE的输出通道,以便能够将图像数据传输云服务器。

(图1 边缘视觉的过程)

机器视觉行业开始不断追求更多像素、更高帧率以及更高的空间和时间分辨率。正如图中所示,你能看到许多图像传感器(棕色点)。它们通过连接线连接到典型的接口,蓝线代表PCIe 3.0,红线代表CoaXPress v2 x4。然而,当图像传感器的带宽超过某条线时,接口的带宽已经不足以传输数据。

(图2 不同图像传感器的参数对比)

事实上,许多图像传感器的带宽比10GigE和CoaXPress v1更快,甚至比100GigE接口还要快。这表明图像传感器取得了巨大进步,能够提供高帧率、高像素和快速传输。尽管我们在接口方面也取得了一些进步,带宽速度不断提高,但仍面临挑战,特别是要与传感器的发展速度匹配,以及解决GPU和CPU性能不足的问题。

在面对高分辨率高速传感器的解决方案时,我们同时面临着多个瓶颈,例如摄像头接口、GPU和CPU桥接接口,以及CPU的负载和处理能力。实际上,计算机上送云端的带宽最好情况下也只有1G。

而如果有多个摄像头,情况会变得更复杂。想象一下有多个10GigE、CoaXPress或100 GigE相机,以100 GigE相机为例,速度每秒96千兆比特乘以摄像机的数量。然而,大多数情况下,电脑最大带宽接口PCIe 3.0只有48千兆比特每秒,这成为了一个关键的瓶颈。

02 解决方案

为了解决这些问题,我们提出了一种解决方案,即在多摄像头和CPU架构之间放置图像采集卡,从而实现压缩和预处理。图像采集设备能够提取感兴趣区域(ROI),进而减少总数据带宽。因此,我们需要满足实际应用的需求,包括高带宽相机接口、多相机接口、超高精度同步和可定制的IOs用于控制外围设备。在处理过程中,还需要低延迟、大DRAM以支持计算复杂的算法,因此需要多个千兆比特每秒的内存访问带宽。实时压缩和ROI选择是解决这些问题的有效方法。

(图3 图像采集卡的作用)

(图4 图像采集卡的作用)

考虑到开发人员的需求,便捷的开发也是一个关键因素。我们采用了开放的FPGA,使得软件工程师可以在图像采集卡上放置特定的IP,并利用FPGA集成开发环境快速实现算法和方案开发。这要求图像采集卡在灵活性和易用性方面也要表现出色。

最后,关于系统集成,我们考虑到若有PCI 3.0 x8或x16接口能够获得最大性能,并且具备小尺寸和被动冷却性能,我们未来或许可以考虑将图像采集卡和计算机合二为一。

03 虹科产品与解决方案

基于上文的发展背景,虹科推出了一款名为虹科-Gidel FantoVision 40的开创性小型计算机。这款计算机可以连接高达4台10GigE Vision或4台CoaXPress 2.0相机,从而实现图像采集和处理。该计算机的创新架构将高端图像采集与实时图像处理和/或压缩相结合,采用了Nvidia JetsonTM嵌入式计算机,并在Intel Arria 10TM FPGA上进行可选的预处理/压缩。

(图5 虹科-Gidel FantoVision 40产品)

此外,虹科-Gidel FantoVision还有一个显著特点,即其开放式体系结构支持GPU和FPGA上的嵌入式AI/图像处理。软件工程师可以利用CUDA C/C++和NVIDIA的库在GPU上编写他们的算法。此外,使用新颖的ProcVision套件,在FPGA上开发和部署可选的预处理块既简单又快速。

通过多个虹科-Gidel FantoVision单元的相互连接,我们可以提供独特且可扩展的拓扑结构。利用InfiniVision™开放式框架抓取器流程,我们可以处理多达100个传感器的同步数据。

综上所述,虹科-Gidel FantoVision为高带宽、低延迟应用提供了一种新型紧凑、经济高效、可扩展的视觉和成像解决方案。例如,在交通监测和面板检测等应用中,它能够提取和识别高分辨能够提取和识别高分辨率图像中的关键信息,如车牌号码等。这些信息可以通过云端或其他设备进行传输,而不需要过多的带宽。

(图6 应用案例)

部门介绍

虹科智能感知事业部专注于智能感知与机器视觉领域,已经和IDS、Gidel、SOSLAB、Luxonis 等有着重要地位的国际公司展开深度的技术合作。我们提供的产品和服务包括工业相机、图像采集卡、边缘计算机、激光雷达、深度AI相机、视觉处理平台、AI平台及视觉系统集成等。虹科智能感知技术团队师从德国、以色列、美国的机器识别和图像处理等领域内的专家培训和指导,目前已经陆续在国内完成了多家一线公司的原料体积监测、高端机器人图像处理、智能巡检、工件质量识别、汽车图像采集、AOI、晶圆半导体检测等项目。

  • 推文230807 - 与非网.docx

推荐器件

更多器件
器件型号 数量 器件厂商 器件描述 数据手册 ECAD模型 风险等级 参考价格 更多信息
0008500105 1 Molex Wire Terminal, LOW HALOGEN, ROHS AND REACH COMPLIANT
$0.13 查看
BTA06-600SWRG 1 STMicroelectronics 6A standard and Snubberless™ Triacs

ECAD模型

下载ECAD模型
$1 查看
1777989 1 Phoenix Contact Barrier Strip Terminal Block, 12A, 2.5mm2, 1 Row(s), 1 Deck(s), ROHS COMPLIANT

ECAD模型

下载ECAD模型
$2.4 查看

相关推荐

电子产业图谱

虹科是一家资源整合及技术服务落地供应商,与全球顶尖公司深度技术合作,专注于制造业、汽车、生物、医药、测试与测量、广播电视与媒体、通信、网络安全、光电等领域,为客户提供:智能自动化、工业物联网、智能感知、数字化+AR、光电、网络安全、测试测量、卫星与无线通信、医药环境监测与验证、生命科学、汽车电子、汽车维修诊断、云科技等解决方案。虹科始终致力于为行业客户提供创新及前端的产品和技术解决方案,为科技社会发展助力加码。