0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

奇景光电推出一款超低功耗AI处理器WiseEye 2(WE2)

Arm社区 来源:Arm社区 2024-05-14 14:08 次阅读

概述

随着智能手机、可穿戴设备和传感器等各类端侧设备不断产生更多的数据,边缘计算也变得日益重要。在边缘侧执行人工智能 (AI) 推理可减少延迟、提高隐私性并降低带宽需求,但边缘设备往往受到严格的功耗限制。

奇景光电为此开发了一款超低功耗 AI 处理器 WiseEye 2 (WE2),可用于在功耗受限的设备中实现边缘 AI 推理。

边缘 AI 所面临的挑战

由于可用的内存、计算和功率有限,在端侧设备上执行 AI 推理并非易事。大多数 AI 加速器芯片都依赖于外部的动态随机访问内存 (DRAM),这无疑增加了成本和功耗。而 WE2 采用了创新架构,突破了这些限制。

WE2 AI 处理器的主要特性

WE2 AI 处理器的性能可达 50 GOPS,同时在 1mm2 晶粒面积中仅消耗 1-10mW 能耗。其主要特性包括:

双核 Arm Cortex-M55 处理器

Arm Ethos-U55,用于 AI 加速

无需外部 DRAM

集成 DC-DC 转换器,用于提高能效

具备安全启动等硬件安全功能

支持 TensorFlow Lite Micro 和 TVM

开源工具链

善用 Arm 资源

WE2 AI 处理器基于 Arm 架构并善用 Arm 提供的丰富资源,其中包括:

性能:搭载的 Arm Cortex-M55 处理器可实现高速视觉处理,“大”核的运行速度最高达 400MHz,可有效处理机器学习 (ML) 工作负载。与仅使用微控制器相比,可显著加快推理速度。该芯片在 AI 推理前通过 Arm Helium 指令进行图像处理、图像裁剪、调整大小和颜色等。

能效:“小核 Cortex-M55”的运行频率为 150MHz,能够以超低功耗执行始终在线的任务。

可扩展性:Cortex-M55 与 Arm 的 ML 框架(例如 CMSIS-NN)兼容,有助于实现灵活的软件开发。例如,可以在 Cortex-M55 或其他 Arm 核心上运行相同的代码。

硬件集成:将处理器与 Arm Ethos-U55 加速器和视觉 IP 相集成,有助于CPU、硬件加速器和外设之间的紧耦合处理。

生态系统支持:搭载 Cortex-M55 时,开发者可充分利用 Arm 广泛生态系统所提供的工具、软件和威廉希尔官方网站 支持等丰富资源。这正是奇景光电选择 Arm 处理器的关键因素之一。

针对视觉应用进行优化

WE2 针对在边缘侧运行的视觉 AI 模型进行了相应的优化。该芯片运行速度最高可达 400MHz,可高效执行视觉处理任务。其支持运行的模型可广泛用于:

人脸关键点检测:除了基本的人脸检测功能外,还能执行人脸关键点检测,识别眼睛、鼻子和嘴巴等关键的面部结构。

人体姿势估计:WE2 可以通过检测关键关节和四肢来判断人体姿势,比如通过识别手臂、腿、躯干和头部等身体部位,确定身体的整体位置和动作。这已经在健身追踪、姿势控制和动作识别等领域被应用。

目标检测:目标检测 Yolo v8n 模型可以在 WE2 上运行,能够检测场景中的多个物体目标并进行分类。该模型可以识别多达 80 种以上的常见物体,例如人、汽车、车牌、动物、家居用品和放在门口的包裹等。

a0faa418-11af-11ef-a297-92fbcf53809c.jpg

专为灵活性而设计

WE2 支持外部闪存,因此可以将大型 AI 模型存储在片外。WE2 芯片可通过数字视频端口 (DVP) 与图像传感器对接。通过 Arm 生态系统的赋能,奇景光电实现了软件兼容性。

利用 Keil MDK、VS Code、TensorFlow MOT、Pytorch 和 TinyNeuralNetwork 等开源工具,奇景光电可支持用户开发定制化 AI 应用,并针对低功耗进行优化。此外,奇景光电还提供了参考模型来协助进行引导程序的开发。

早期客户采用

目前, WE2 AI 处理器已被客户采用于各种用例中。例如,有客户将 WE2 芯片与笔记本电脑摄像头集成,以便在待机模式下进行人物动态检测,确保在检测到用户时,能即刻唤醒系统。

由于 WE2 具备较高能效,因此非常适合用于电池供电和主流的边缘侧产品。奇景光电计划在未来几代产品中增加集成图像信号处理 (ISP) 功能,以进一步提升视觉功能。总而言之,奇景光电 WE2 可以在资源受限的边缘侧设备上进行 AI 推理。凭借专为计算机视觉优化而打造的创新架构,WE2 成功地将 AI 和 ML 引入了新一代端侧和物联网产品中。



审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2550

    文章

    51057

    浏览量

    753270
  • 电池供电
    +关注

    关注

    0

    文章

    255

    浏览量

    22154
  • 可穿戴设备
    +关注

    关注

    55

    文章

    3814

    浏览量

    167022
  • AI处理器
    +关注

    关注

    0

    文章

    92

    浏览量

    9491

原文标题:案例分享 | 奇景光电 WE2 AI 处理器,助力实现边缘 AI

文章出处:【微信号:Arm社区,微信公众号:Arm社区】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    支持蓝牙5.3,超低功耗Wi-Fi 6模块,待机可达2年以上

    随着Wi-Fi连接威廉希尔官方网站 的发展以及不同行业垂直化需求的不断涌现,为解决行业客户在Wi-Fi超低功耗和音视频集成方面的难题,一款成熟的“Wi-Fi+X”无线模组方案,可以助力产品降本增效,也可以让
    的头像 发表于 12-21 16:29 111次阅读

    Cortex-A55 处理器到底什么来头?创龙教仪文带您了解

    )等,功耗低至4W,适用于汽车电子、电力、轨道交通、环保等多行业领域。 全志科技 全志科技推出的T536系列处理器也是一款基于Cortex-A55架构的工业级应用芯片。该
    发表于 12-03 17:00

    安富利推出S2-LP超低功耗射频收发

    在物联网迅速普及的当下,对任何个物联网系统来说,能否做到低功耗和长距离的稳定通信,直接决定了其在未来应用中的潜力。而在这个领域,一款名为S2-LP的
    的头像 发表于 11-14 11:51 344次阅读
    安富利<b class='flag-5'>推出</b>S<b class='flag-5'>2</b>-LP<b class='flag-5'>超低功耗</b>射频收发<b class='flag-5'>器</b>

    使用AFE881H1的超低功耗、低压、2线、4-20mA环路变送器

    电子发烧友网站提供《使用AFE881H1的超低功耗、低压、2线、4-20mA环路变送器.pdf》资料免费下载
    发表于 09-06 10:21 0次下载
    使用AFE881H1的<b class='flag-5'>超低功耗</b>、低压、<b class='flag-5'>2</b>线、4-20mA环路变送器

    0.1mA!24GHz超低功耗人体存在毫米波雷达模组

    Rd-03L作为安信可雷达系列中一款超低功耗人体存在毫米波传感,包含极简化24 GHz雷达传感硬件和低功耗人体存在感应智能算法固件。 外
    的头像 发表于 09-05 10:31 356次阅读
    0.1mA!24GHz<b class='flag-5'>超低功耗</b>人体存在毫米波雷达模组

    想把光电二极管产生的电流转换成电压,然后再把这个电压放大,请推荐一款低功耗的芯片?

    我有光电二极管,想把光电二极管产生的电流转换成电压,然后再把这个电压放大,请TI的工程师推荐一款低功耗的芯片,
    发表于 08-29 07:12

    VSP1221超低功耗CCD信号处理器数据表

    电子发烧友网站提供《VSP1221超低功耗CCD信号处理器数据表.pdf》资料免费下载
    发表于 07-30 10:35 0次下载
    VSP1221<b class='flag-5'>超低功耗</b>CCD信号<b class='flag-5'>处理器</b>数据表

    基于瑞萨RZ/V2H AI处理器的解决方案:高性能视觉AI系统

    RZ/V2H嵌入式AI处理器,采用瑞萨最新的DRP-AI3威廉希尔官方网站 ,可提供高达8TOPS(Dense模型)/80TOPS(sparse模型)的AI
    发表于 07-02 18:36 506次阅读
    基于瑞萨RZ/V<b class='flag-5'>2</b>H <b class='flag-5'>AI</b>微<b class='flag-5'>处理器</b>的解决方案:高性能视觉<b class='flag-5'>AI</b>系统

    联想旗下arrows We2系列手机首批上市,自带神经活脉功能

    arrows We2 Plus定位中高端市场,搭载高通第二代骁龙7s处理器,内存达到8GB,存储空间为256GB。低配版的arrows We2标配联发科天玑7025 SoC,内存4GB,存储空间64GB。
    的头像 发表于 05-17 11:44 1470次阅读

    芯品#MAX78002 新型AI MCU,能够使神经网络以超低功耗运行

    人工智能(AI)需要超强的计算能力,而Maxim则大大降低了AI计算所需的功耗。MAX78002是一款新型的AI微控制
    的头像 发表于 05-07 17:47 7402次阅读
    芯品#MAX78002 新型<b class='flag-5'>AI</b> MCU,能够使神经网络以<b class='flag-5'>超低功耗</b>运行

    Synopsys推出一款低功耗静态规则检查工具—VCLP

    VCLP(VC Low Power)是Synopsys提供的一款低功耗静态规则检查工具,它能够帮助验证和清洁IEEE 1801 Unified Power Format (UPF)低功耗设计意图,并确保UPF中的
    的头像 发表于 04-15 11:25 2450次阅读
    Synopsys<b class='flag-5'>推出</b><b class='flag-5'>一款</b><b class='flag-5'>低功耗</b>静态规则检查工具—VCLP

    瑞萨隆重推出RZ/V2H这一款嵌入式AI处理器

    日益增长的AI应用中,对AI处理器的算力和能效提出了更高要求,用于满足复杂的AI运用。
    的头像 发表于 03-06 13:53 1672次阅读
    瑞萨隆重<b class='flag-5'>推出</b>RZ/V<b class='flag-5'>2</b>H这<b class='flag-5'>一款</b>嵌入式<b class='flag-5'>AI</b>微<b class='flag-5'>处理器</b>

    芯来科技发布超低功耗嵌入式RISC-V处理器CPU IP—NS100系列内核

    本土RISC-V CPU IP领军企业——芯来科技正式发布针对信息安全的超低功耗嵌入式RISC-V处理器CPU IP——NS100系列内核,主要针超低功耗下的信息安全应用。
    的头像 发表于 03-04 11:19 1378次阅读
    芯来科技发布<b class='flag-5'>超低功耗</b>嵌入式RISC-V<b class='flag-5'>处理器</b>CPU IP—NS100系列内核

    首发!全志T527第一款核心板,高性能8核处理器AI NPU

    米尔电子联合战略合作伙伴全志科技,隆重发布第一款T527核心板及开发板。基于全志T527高性能可选AI功能MPU,配备八核A55高性能处理器,RISC-V协处理器,支持
    的头像 发表于 12-28 08:01 1564次阅读
    首发!全志T527第<b class='flag-5'>一款</b>核心板,高性能8核<b class='flag-5'>处理器</b>带<b class='flag-5'>AI</b> NPU

    SD6304:一款高效率低功耗IC升压变换

    电子发烧友网站提供《SD6304:一款高效率低功耗IC升压变换.pdf》资料免费下载
    发表于 12-27 09:52 0次下载