0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

黑芝麻智能基于雷视融合3D自动标注威廉希尔官方网站 助力自动驾驶威廉希尔官方网站 快速发展

全球TMT 来源:全球TMT 作者:全球TMT 2023-05-09 16:05 次阅读

上海2023年5月9日 /美通社/ -- 越来越多的新车开始配备激光雷达,以提高车辆的自主安全性和实现更高级别的辅助驾驶以及自动驾驶能力。然而,纯人工3D标注和验收的效率低、耗时长、成本高昂。而通过先进的AI威廉希尔官方网站 ,利用车载激光雷达和多摄像头,可以自动地对车辆、行人、骑行人等动态道路使用者进行3D物体检测,进而高效率地辅助甚至部分替代纯人工标注。

日前,在由黑芝麻智能主办的"2023智能汽车高峰论坛"上,黑芝麻智能机器学习专家张蕾发表了主题为"基于激光雷视融合的3D自动标注威廉希尔官方网站 助力自动驾驶更上一层楼"的演讲,分享了黑芝麻智能在3D数据自动标注方面的研发进展。

自研系统性能方案比肩世界领先算法

wKgaomRZ_qyAHieTAABA2qctH1w074.jpg

在自动驾驶中需要用道路上目标物3D的位置进行规划和决策,但传统的摄像头解决方案对于深度和3D位置的估计不够准确。在采用了BEV威廉希尔官方网站 以后,需要大量的真实3D标注的数据来辅助训练BEV上的3D模型,这样可以融合多个摄像头的信息,直接去获得3D世界的物体。

为此,黑芝麻智能自主设计和开发了一套基于激光雷达和多摄像头进行3D自动标注的方案。该方案履行两阶段的方法,第一阶段是先通过多帧点云的方式和图像融合,得到初始的3D标注;第二阶段是以物体为中心的3D精调,进一步提高3D检测精准度。

对于3D物体框的精调,黑芝麻智能采用了两种不同方案。静态物体在多帧点云对齐以后,可以得到一个密度非常高的单个物体点云。在单帧点云里即使看不到一个物体的全貌,但经过以物体为中心的点云融合以后,基本上可以看到完整的物体形状,这样可以更好地估计其尺寸。另一方面,对于动态物体,它的轨迹会形成一个有用的信息,根据动态累计的点云也可以更好地估计其大小和空间上的位置。

wKgZomRZ_q2AXMvxAABKLN9AGRM466.jpg


张蕾介绍,黑芝麻智能的这一方案,融合了多种模态,目前包括360度激光雷达和六个摄像头的信息,还有前融合和后融合的方式。在两阶段的模型里面,采用的是以物体为中心的点云对齐精调的方式,生成高度紧凑的3D目标检测框。而多帧激光雷达点云的时序融合,能有效弥补单帧点云的稀疏和遮挡问题。同时,整个模型不同阶段可以进行多种融合,下一阶段还可以在整个模型的不同层次阶段进行融合。另外,在采用了跟图像检测做后融合的方法以后,黑芝麻智能还将检测物体的类别从三类扩展到十三类,并且还可以通过聚合的方式实现复杂不规则物体的检测。与此同时,黑芝麻智能的方案,采用了模块化设计,可根据不同需求增加、去除可选的处理环节,达到最优化效益。

根据在Waymo公开数据上测试的结果,黑芝麻智能3D 物体自动标注系统的性能可以比肩世界领先算法的性能。

自建数据采集系统与完整的云服务平台

基于华山二号A1000芯片,黑芝麻智能还可同时提供传感器采集设备,客户可基于这套设备同步采集360度旋转激光雷达和6个1080p摄像头数据,同时采集IMU、GPS、轮速编码器等多种数据。

黑芝麻智能还可以对这一3D自动标注系统做进一步扩展,包括通过差异化的多模型集成来进一步提高算法准确度,通过运行时的数据增强来进一步提高算法准确度,通过半监督学习和自监督学习来训练更好的模型,通过在神经网络深层结构上的多传感器融合来进一步提高模型能力,通过融合聚类方法来检测未知的路面障碍物等等。

张蕾在演讲结尾时表示,在开发基于激光雷达和多摄像头的自动驾驶领域的 3D 物体自动标注系统的同时,黑芝麻智能可为客户提供数据采集、数据预处理、3D 自动标注、人工标注及检验的云服务平台。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 半导体
    +关注

    关注

    334

    文章

    27327

    浏览量

    218333
  • 激光雷达
    +关注

    关注

    968

    文章

    3971

    浏览量

    189875
  • 黑芝麻智能
    +关注

    关注

    1

    文章

    136

    浏览量

    3329
收藏 人收藏

    评论

    相关推荐

    浅析基于自动驾驶的4D-bev标注威廉希尔官方网站

    4D-bev标注威廉希尔官方网站 是指在3D空间中以时间作为第四个维度进行标注的过程。4D-bev通常在地场景
    的头像 发表于 12-06 15:01 745次阅读
    浅析基于<b class='flag-5'>自动驾驶</b>的4<b class='flag-5'>D</b>-bev<b class='flag-5'>标注</b><b class='flag-5'>威廉希尔官方网站
</b>

    标贝科技:自动驾驶中的数据标注类别分享

    自动驾驶训练模型的成熟和稳定离不开感知威廉希尔官方网站 的成熟和稳定,训练自动驾驶感知模型需要使用大量准确真实的数据。据英特尔计算,L3+级自动驾驶每辆汽
    的头像 发表于 11-22 15:07 882次阅读
    标贝科技:<b class='flag-5'>自动驾驶</b>中的数据<b class='flag-5'>标注</b>类别分享

    标贝科技:自动驾驶中的数据标注类别分享

    自动驾驶训练模型的成熟和稳定离不开感知威廉希尔官方网站 的成熟和稳定,训练自动驾驶感知模型需要使用大量准确真实的数据。据英特尔计算,L3+级自动驾驶每辆汽
    的头像 发表于 11-22 14:58 288次阅读
    标贝科技:<b class='flag-5'>自动驾驶</b>中的数据<b class='flag-5'>标注</b>类别分享

    黑芝麻智能在智驾芯片领域发展如何了?

    随着汽车行业向智能化和电动化的快速转型,自动驾驶威廉希尔官方网站 成为未来发展的重要方向,而作为自动驾驶核心
    的头像 发表于 11-05 10:44 428次阅读
    <b class='flag-5'>黑芝麻</b><b class='flag-5'>智能</b>在智驾芯片领域<b class='flag-5'>发展</b>如何了?

    黑芝麻智能成功登陆港交所,加速自动驾驶芯片研发与商业化

    自动驾驶计算芯片领域的佼佼者——Black Sesame International Holding Limited(简称“黑芝麻智能”,股票代码:02533),今日在香港交易所正式挂牌上市,标志着
    的头像 发表于 08-08 09:49 404次阅读

    FPGA在自动驾驶领域有哪些优势?

    可以根据自动驾驶系统的具体需求,通过编程来配置FPGA的逻辑功能和连接关系,以适应不同的应用场景和算法变化。这种灵活性使得FPGA能够快速适应自动驾驶威廉希尔官方网站
    发表于 07-29 17:11

    FPGA在自动驾驶领域有哪些应用?

    和深入。 综上所述,FPGA在自动驾驶领域具有广泛的应用前景和重要的应用价值。其高性能、可配置性、低功耗和低延迟等特点为自动驾驶的实现提供了强有力的支持,并将推动自动驾驶威廉希尔官方网站
    发表于 07-29 17:09

    黑芝麻智能华山A1000芯片助力东风奕派eπ007智驾升级

    近日,黑芝麻智能宣布了一项重要威廉希尔官方网站 突破,其自主研发的华山A1000车规级高性能自动驾驶芯片已成功助力东风奕派e π 007实现智驾功能的全面
    的头像 发表于 07-23 17:33 890次阅读

    黑芝麻智能获国际最高安全标准认证

    近日,黑芝麻智能宣布其代码生成工具成功获得ISO 26262:2018 ASIL D功能安全产品认证证书,这一里程碑式的成就标志着黑芝麻智能
    的头像 发表于 06-04 11:12 931次阅读

    黑芝麻智能自动驾驶代码生成工具荣获ISO 26262:2018 ASIL D功能认证

    自公司创立之初,黑芝麻智能就致力于为自动驾驶及ADAS领域提供高效、安全的解决方案。ISO 26262:2018是全球公认的道路车辆功能安全权威标准,ASIL D级别代表最高安全等级,
    的头像 发表于 05-29 16:51 610次阅读

    黑芝麻智能代码生成工具喜获DEKRA德凯ASIL D功能安全产品认证

    黑芝麻智能瀚海自动驾驶中间件中的代码生成工具荣获ASIL D功能安全产品认证。
    的头像 发表于 05-29 15:07 430次阅读
    <b class='flag-5'>黑芝麻</b><b class='flag-5'>智能</b>代码生成工具喜获DEKRA德凯ASIL <b class='flag-5'>D</b>功能安全产品认证

    黑芝麻智能与腾讯云签署战略合作,共同推动自动驾驶芯片生态合作

    黑芝麻智能与腾讯云签署战略合作,共同推动自动驾驶芯片生态合作,这一举措无疑将为自动驾驶领域注入新的活力。
    的头像 发表于 04-29 11:25 1445次阅读

    未来已来,多传感器融合感知是自动驾驶破局的关键

    的架构,预计未来许多智能驾驶团队都会引入“占用网络”来提升系统能力。多维像素的应用前景非常广阔。昱感微的融合感知威廉希尔官方网站 +BEV +Transformer+占用网格有望成为L
    发表于 04-11 10:26

    自动驾驶企业黑芝麻智能再次递交上市申请

    自动驾驶领域的领军企业黑芝麻智能,近日再次向港交所递交了上市申请。据悉,这已经是黑芝麻智能自去年6月首次申请失效后的第二次尝试。
    的头像 发表于 03-26 14:04 440次阅读

    如何搞定自动驾驶3D目标检测!

    可用于自动驾驶场景下基于图像的3D目标检测的数据集总结。其中一些数据集包括多个任务,这里只报告了3D检测基准(例如KITTI 3D发布了超过40K的图像,其中约15K用于
    发表于 01-05 10:43 585次阅读
    如何搞定<b class='flag-5'>自动驾驶</b><b class='flag-5'>3D</b>目标检测!