0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何克服边缘视觉的带宽限制?

控制工程中文版 来源:控制工程中文版 2023-05-19 11:08 次阅读

把一个相机连接到一台边缘计算机/嵌入式计算机上,然后在云端进行数据处理或存储——这就是“边缘视觉”的概念。近年来,边缘视觉正被广泛应用于自动化产线质检、汽车图像采集和智能工厂等场景中。

伴随着人们对图像质量的要求提高,以及视觉传感器威廉希尔官方网站 突飞猛进的发展,现场产生海量和庞大数据,也给视觉数据的边缘传输和上云带来了严峻挑战。

01

亟待攻克的带限制瓶颈

工业视觉领域,整个行业都在追求更多像素、更高帧率、更高的空间以及时间分辨率。然而,很多用户会反馈1 GigE相机的一个输出已经不够用,只能连接到PLC,急需相机有更多输出通道,以便将图像数据传输到云服务器。

90901de2-f5ef-11ed-90ce-dac502259ad0.png

如上图所示,棕色的点是图像传感器,点连接的线代表行业中常见的典型接口(如PCIe 3.0是蓝线,CoaXPress v2 x4是红线)。可以发现,当图像传感器高于某条线时,该接口的带宽就已经不够去传输该图像传感器的数据了。

现如今,图像传感器取得了巨大进步,市面上有很多图像传感器,带宽速度比10GigE、CoaXPress v1快很多,甚至比100千兆接口更快,能提供一万帧、1亿或更多像素和速度远高于150GB/s的带宽。虽然接口取得了一些进步,带宽速度越来越快,但挑战仍然存在——即使有链接聚合也很难能跟上传感器的发展速度,电脑GPUCPU性能也远远落后于其他领域。

909b4aa0-f5ef-11ed-90ce-dac502259ad0.png

想要解决这个问题,如果用高分辨率的高速传感器,也将面临很多瓶颈。比如摄像头接口、GPU和CPU的桥接接口、CPU的负载或处理能力,以及计算机上送云端的带宽,往往在最好的情况下才能达到1G。

90bb75f0-f5ef-11ed-90ce-dac502259ad0.png

此外,如果现场有多个摄像头,情况会变得更糟。假如有多个10GigE相机、CoaXPress或100 GigE相机,以100 GigE相机为例,速度大概是96千兆比特乘每秒以摄像机的数量。但大多数情况下,用户电脑的最大带宽接口PCIe 3.0,其带宽也只有48千兆比特每秒,远远无法满足需求。

02

用图像采集卡压缩预处理

面对这个困境,用户常见的解决方案是在多摄像头和CPU架构之间放置一个图像采集卡,用于压缩以及预处理。例如从图像提取一定区域的ROI,即可减少总数据带宽。

9100ff12-f5ef-11ed-90ce-dac502259ad0.png

然而,在实际应用中,用户对图像采集卡的需求还有许多:

通常需要高带宽的相机接口、多相机接口、超高精度的同步,以及可定制的IOs来控制外围设备;

在处理过程中,需要能够实时并行处理,并且需要低延迟、有一个大的DRAM,从而计算复杂的算法,需要很多个千兆比特每秒的内存访问带宽;

对系统开发人员而言,图像采集卡需要满足灵活、易于使用的要求。为保障开发便捷性,开放的FPGA也必不可少,可以将一些特定IP放在图像采集卡上,通过集成开发环境实现快速的算法和方案开发;

与此同时,用户对于系统集成的紧凑设计和被动冷却性能,也提出了更严苛的要求...

03

可靠的一体化边缘视觉解决方案

能否能将图像采集卡和计算机很好地合二为一?虹科的HK-Gidel FantoVision 40给出了答案。

这是一款开创性的小型计算机,可与高达4 x 10GigE Vision或 4 X CoaXPress 2.0相机连接进行图像采集和处理。创新架构将高端图像采集与实时图像处理和/或压缩相结合,使用Nvidia Jetson 嵌入式计算机,并在Intel Arria 10 FPGA上进行可选的预处理/压缩。

HK-Gidel FantoVision的另一个显著特点,是其开放式体系结构支持GPU和FPGA上的嵌入式AI/图像处理。软件工程师可以使用CUDA C/C++和NVIDIA的库,在GPU上编写算法。此外,使用新颖的ProcVision套件,在FPGA上开发和部署可选的预处理块,既简单又快速。

产品的多个HK-Gidel FantoVision单元可以相互连接,可提供独特且可扩展的拓扑结构。使用InfiniVision 开放式框架抓取器流程,100多个传感器可同步处理

现如今,HK-Gidel FantoVision为高带宽、低延迟应用的新型紧凑、经济高效、可扩展的视觉和成像解决方案开辟了道路。尤其适用于需要高分辨率、高速度的交通监测、面板检测等场景。

例如交通检测应用中有多个摄像机在拍摄高分辨率图像,HK-Gidel FantoVision 可以通过图像采集卡提取ROI区域甚至是车牌,在GPU上布署算法做车牌识别,最后将识别的车牌号码传到云端上,从而不需要很多带宽。





审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 嵌入式
    +关注

    关注

    5085

    文章

    19138

    浏览量

    305714
  • plc
    plc
    +关注

    关注

    5012

    文章

    13309

    浏览量

    463744
  • 图像传感器
    +关注

    关注

    68

    文章

    1903

    浏览量

    129577
  • 视觉传感器
    +关注

    关注

    3

    文章

    250

    浏览量

    22895

原文标题:如何克服边缘视觉的带宽限制?

文章出处:【微信号:控制工程中文版,微信公众号:控制工程中文版】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    开源项目 ! 利用边缘计算打造便携式视觉识别系统

    景而言,边缘计算是一项变革性的威廉希尔官方网站 。 边缘计算助力视觉识别的原因: 实时响应 数据在本地处理,消除了与云服务相关的延迟问题。 减少带宽使用 仅传输已处理的数据,降低了
    发表于 12-16 16:31

    AI模型部署边缘设备的奇妙之旅:如何在边缘端部署OpenCV

    图像的质量,使得图像更适合人类观察或者为后续的分析做准备。 方法:通常涉及像素级别的操作,比如调整亮度、对比度、颜色校正、滤波(如高斯模糊、中值滤波去噪)、边缘检测、形态学变换(膨胀、腐蚀)等。 计算机视觉
    发表于 12-14 09:31

    边缘计算的威廉希尔官方网站 挑战与解决方案

    它们在处理大规模数据或复杂计算任务时的能力。 网络带宽和延迟 边缘节点通常位于网络边缘,网络带宽和延迟可能限制了从
    的头像 发表于 10-24 14:36 535次阅读

    使用 ADI 的 MAX78002 MCU 开发边缘 AI 应用

    科技巨头之间为实现生成式人工智能 (GenAI) 商业化而进行的金融军备竞赛在某种程度上掩盖了其他重要的 AI 工作,尤其是在网络边缘,供应商渴望 AI 应用程序能够在通常受有限内存、带宽和功率限制
    的头像 发表于 10-17 11:39 1485次阅读
    使用 ADI 的 MAX78002 MCU 开发<b class='flag-5'>边缘</b> AI 应用

    放大电路的带宽与什么有关

    直接影响。例如,运算放大器(Op-Amp)通常具有较宽的带宽,而晶体管放大器的带宽则受到晶体管特性的限制。 1.2 反馈网络 负反馈可以扩展放大器的带宽,因为它降低了增益,从而减少了相
    的头像 发表于 09-23 10:55 1229次阅读

    如何设计具有放大器带宽限制的MFB滤波器

    电子发烧友网站提供《如何设计具有放大器带宽限制的MFB滤波器.pdf》资料免费下载
    发表于 08-28 11:09 0次下载
    如何设计具有放大器<b class='flag-5'>带宽限制</b>的MFB滤波器

    图像边缘检测系统的设计流程

    图像边缘检测系统的设计流程是一个涉及多个步骤的复杂过程,它旨在从图像中提取出重要的结构信息,如边界、轮廓等。这些边缘信息对于图像分析、机器视觉、图像压缩等领域至关重要。以下是一个详细的图像边缘
    的头像 发表于 07-17 16:39 366次阅读

    安提国际与所罗门携手,共筑边缘AI与3D视觉新纪元

    在当今科技日新月异的时代背景下,全球边缘AI解决方案的领航者安提国际(Aetina)宣布了一项重要战略合作——与AI 3D视觉及机器人解决方案领域的佼佼者所罗门(Solomon)强强联合,共同开启
    的头像 发表于 07-11 17:13 788次阅读

    fx3 uvc 32bit 40帧黑屏的原因?

    ,帧率90时,图像输出正常,当在提高帧率时,输出黑屏,我们想问一下,是带宽限制了帧率吗?我们的带宽应该够了,还是其他参数限制带宽,请给与解答,谢谢!
    发表于 07-03 08:28

    Prophesee与AMD携手,加速边缘机器视觉应用

    领先的神经拟态视觉传感公司Prophesee近日宣布,其Metavision® HD事件视觉传感器与AI算法已成功适配AMD Kria™ KV260视觉AI入门套件。这一强强联合标志着业界首款兼容AMD平台的事件
    的头像 发表于 06-05 14:26 524次阅读

    边缘计算智能网关为物联网设备高效通信赋能

    在物联网的世界中,数以亿计的设备不断产生、传输和处理数据。然而,传统的云计算架构在面对这些实时性要求高、数据量庞大的物联网数据时,常常面临着网络延迟、带宽限制和安全风险等问题。这时,边缘计算智能网关
    的头像 发表于 05-29 14:40 695次阅读

    示波器带宽限制怎么设置

    示波器作为电子工程师和科学领域专业人士的重要工具,主要用于捕获和显示电信号波形。在示波器的设置中,带宽限制是一个关键参数,它决定了示波器能够准确响应和显示的信号频率范围。正确设置带宽限制对于确保测量结果的准确性至关重要。本文将详细介绍示波器
    的头像 发表于 05-17 17:04 4010次阅读

    边缘计算网关与边缘计算的融合之道

    随着物联网、大数据和人工智能的飞速发展,数据处理和分析的需求呈现出爆炸式增长。传统的中心化数据处理模式已难以满足实时性、低延迟和高带宽的需求,边缘计算应运而生,成为解决这一难题的关键威廉希尔官方网站 。而边缘计算
    的头像 发表于 02-26 16:29 469次阅读
    <b class='flag-5'>边缘</b>计算网关与<b class='flag-5'>边缘</b>计算的融合之道

    什么是边缘计算?边缘计算威廉希尔官方网站 有哪些优缺点?

    不需要将大量数据传输到云端进行处理,从而减少了网络延迟和带宽消耗。边缘计算威廉希尔官方网站 的出现可以更好地支持IoT(物联网)应用,提供更低的延迟、更高的可靠性和隐私保护。 边缘计算威廉希尔官方网站 有以下优点: 1. 低延迟:由于数据处理和分析
    的头像 发表于 02-06 14:38 1757次阅读

    边缘侧部署大模型优势多!模型量化解决边缘设备资源限制问题

    设备上,可以减少数据传输的延迟和带宽需求,提高模型的实时性和响应速度。   边缘端部署大模型的优势   边缘侧部署大模型有诸多优势。低延迟:由于边缘计算将数据处理在离用户较近的设备上,
    的头像 发表于 01-05 00:06 3616次阅读